Fondamenti delle pipeline di dati ETL ed ELT

Questo corso fornisce un'introduzione pratica ai principi fondamentali di ETL (Extract, Transform, Load) e ELT (Extraction, Loads, Transformation) e fornì una panoramica dei metodi di analisi dei dati, dei metodi per la gestione dei dati e delle tecniche di archiviazione e gestione dei file. Imparerai il ciclo di vita completo dell'integrazione dei dati, dall'estrazione dei Dati da diversi sistemi al caricamento in un data warehouse, pronto per l'analisi.Otterrai le conoscenze fondamentali per progettare e implementare le tue semplici pipeline di dati, rendendoti più efficace in qualsiasi ruolo basato sui dati. Cosa imparerai: - Comprendere le principali differenze tra ETL ed ELT e quando utilizzare ciascun approccio. - Scopri le tre fasi principali: estrazione da API e database, trasformazione dei dati per qualità e coerenza e caricamento in un data warehouse. - Progettare uno schema di pipeline di dati di base per uno scenario di business comune. - Esplora i concetti alla base dei moderni strumenti per l'orchestrazione (come Apache Airflow) e la trasformazione (ad esempio dbt). - Applica i controlli fondamentali della qualità dei dati per garantire che i tuoi dati siano affidabili e affidabili. - Crea una pipeline di dati completa e semplice dalla sorgente alla destinazione attraverso esercizi scritti. - Cogli le basi del lavoro con piattaforme e magazzini di dati cloud. Il corso inizia con la terminologia essenziale e i concetti di architettura alla base dell'integrazione dei dati, quindi si procede attraverso spiegazioni guidate di ogni fase della pipeline, applicando ciò che si impara per costruire un flusso di lavoro funzionale. Questo corso è progettato per principianti assoluti. È l'ideale per aspiranti ingegneri di dati, analisti di dati che vogliono comprendere il flusso di dati e chiunque sia nuovo nel campo dell'integrazione dei dati. Inizia il tuo viaggio nell'ingegneria dei dati e impara a gestire il flusso di dati oggi stesso.