Azure Data Factory per ingegneri di dati – Progetto sul Covid19

Acquista ora

Prezzo: $34.99

benvenuto!

Non vedo l'ora di aiutarti con l'apprendimento di uno degli strumenti di ingegneria dei dati richiesti nel cloud, Azure Data Factory (ADF)! Questo corso è stato insegnato con l'implementazione di una soluzione di ingegneria dei dati tramite Azure Data Factory (ADF) per un problema del mondo reale di riportare le tendenze del Covid-19 e la previsione della diffusione di questo virus.

Questo è come nessun altro corso in Udemy per Azure Data Factory o Data Engineering Technologies. Una volta completato il corso, compresi tutti i compiti, Credo fermamente che sarai in grado di avviare un progetto di ingegneria dei dati nel mondo reale da solo e anche esperto di Azure Data Factory (ADF).

Ho incluso anche lezioni sulle soluzioni di archiviazione come Azure Data Lake Storage, Archiviazione BLOB di Azure, Database SQL di Azure ecc. Anche, ci sono lezioni su Azure HDInsight e Azure Databricks. Ho anche incluso lezioni sulla creazione di report usando Power BI sui dati elaborati dalle pipeline di dati di Azure Data Factory. Ho considerato i modelli di apprendimento automatico fuori portata. Puoi utilizzare questi dati per creare i tuoi modelli e prevedere la diffusione.

Il corso segue una progressione logica dell'implementazione di progetti nel mondo reale con la spiegazione dei concetti tecnici e le pipeline di dati in Azure Data Factory (ADF) essere costruito allo stesso tempo. Anche se questo corso non è specificamente progettato per insegnarti le competenze necessarie per superare gli esami di certificazione Azure Data Engineer Associate DP200 & DP203, può aiutarti notevolmente a ottenere la maggior parte delle competenze necessarie per l'esame.

Apprezzo il tuo tempo tanto quanto il mio. Così, Ho progettato questo corso per essere veloce e al punto. Anche, il corso è stato tenuto con un inglese semplice e senza gergo. Comincio il corso dalla base e alla fine del corso sarai esperto delle tecnologie utilizzate.

Attualmente il corso ti insegna quanto segue

Azure Data Factory

• Creazione di un'architettura della soluzione per una soluzione di ingegneria dei dati usando le tecnologie di ingegneria dei dati di Azure come Azure Data Factory (ADF), Azure Data Lake Gen2, Archiviazione BLOB di Azure, Database SQL di Azure, Azure Databricks, Azure HDInsight e Microsoft PowerBI.

• Integrazione dei dati dai client HTTP, Archiviazione BLOB di Azure e Azure Data Lake Gen2 con Azure Data Factory.

• Attività di ramificazione e concatenamento in Azure Data Factory (ADF) Pipeline che utilizzano attività del flusso di controllo come Ottieni metadati. Se condizione, Per ciascuno, Elimina, Convalida ecc.

• Utilizzo di parametri e variabili nelle pipeline, Set di dati e LinkedServices per creare pipeline basate sui metadati in Azure Data Factory (ADF)

• Debug delle pipeline di dati e risoluzione dei problemi.

• Pianificazione delle pipeline utilizzando trigger come Event Trigger, Trigger di pianificazione e Trigger di finestra a cascata in Azure Data Factory (ADF)

• Creazione di flussi di dati di mappatura per creare la logica di trasformazione. Il corso copre tutte le fasi di trasformazione come Source, Filtro, Selezionare, Perno, Consultare, Divisione condizionale, Colonna derivata, Aggregato, Unisciti e affonda la trasformazione.

• Debug dei flussi di dati, indagare su problemi, riparazione guasti ecc

• Implementazione delle pipeline di Azure Data Factory per richiamare la mappatura dei flussi di dati ed eseguirli.

• Creazione di pipeline ADF per eseguire attività HDInsight ed eseguire trasformazioni di dati.

• Creazione di pipeline ADF per eseguire attività Databricks Notebook per eseguire trasformazioni.

• Creazione di dipendenza tra pipeline per orchestrare il flusso di dati

• Creazione di dipendenza tra trigger per orchestrare il flusso di dati

• Monitoraggio delle pipeline di dati, creazione di avvisi, segnalazione delle metriche dal monitoraggio di Azure Data Factory.

• Monitoraggio delle pipeline di Data Factory tramite monitoraggio di Azure e impostazione dell'impostazione di diagnostica da inoltrare all'account di archiviazione di Azure o all'area di lavoro di Log Analytics.

• Creazione dell'area di lavoro di Log Analytics, creazione di cartelle di lavoro e grafici dall'analisi dei log nelle pipeline di Azure Data Factory

• Implementazione dello strumento di monitoraggio di Azure Data Factory Analytics e come estendere ulteriormente la funzionalità.

Soluzioni di archiviazione di Azure

• Creazione dell'account di archiviazione di Azure, Creazione di contenitori, Caricamento dati, Controllo di accesso (SONO), Uso di Esplora archiviazione di Azure per interagire con l'account di archiviazione

• Creazione di Azure Data Lake Gen2, Creazione di contenitori, Caricamento dati, Controllo di accesso (SONO), Uso di Esplora archiviazione di Azure per interagire con l'account di archiviazione

• Creazione del database SQL di Azure, Livelli di prezzo, Creazione utente amministratore, Creazione di tabelle, Caricamento dei dati e interrogazione del database.

Azure HD Insight & Databricks

• Creazione di cluster HDInsight, Interazione con l'interfaccia utente, Usando Ambari, Creazione di tabelle Hive, Richiamo di attività HDInsight da Azure Data Factory

• Creazione dell'area di lavoro di Azure Databricks, Creazione di cluster Databricks, Montaggio degli account di archiviazione, Creazione di notebook Databricks, eseguire trasformazioni utilizzando i notebook Databricks, Richiamo dei notebook Databricks da Azure Data Factory.