Azure Data Factory pentru ingineri de date – Proiect pe Covid19

Cumpără acum

Preț: $34.99

Bine ati venit!

Aștept cu nerăbdare să vă ajut să învățați unul dintre instrumentele de inginerie a datelor la cerere în cloud, Azure Data Factory (ADF)! Acest curs a fost predat cu implementarea unei soluții de inginerie a datelor folosind Azure Data Factory (ADF) pentru o problemă din lumea reală a raportării tendințelor Covid-19 și a predicției răspândirii acestui virus.

Acesta nu este ca niciun alt curs în Udemy pentru Azure Data Factory sau Data Engineering Technologies. Odată ce ați finalizat cursul, inclusiv toate sarcinile, Cred cu tărie că veți fi în măsură să începeți un proiect de inginerie de date în lumea reală pe cont propriu și, de asemenea, veți fi competent în Azure Data Factory (ADF).

Am inclus și lecții despre soluțiile de stocare, cum ar fi Azure Data Lake Storage, Azure Blob Storage, Baza de date Azure SQL etc. De asemenea, există lecții despre Azure HDInsight și Azure Databricks. Am inclus chiar și lecții despre crearea de rapoarte folosind Power BI pe datele procesate de conductele de date Azure Data Factory. Am considerat că modelele de învățare automată sunt în afara domeniului de aplicare. Puteți utiliza aceste date pentru a vă construi propriile modele și pentru a prezice răspândirea.

Cursul urmează o progresie logică a implementării proiectelor din lumea reală, cu concepte tehnice explicate și conducte de date în Azure Data Factory. (ADF) fiind construită în același timp. Chiar dacă acest curs nu este conceput special pentru a vă învăța abilitățile necesare pentru a promova examenele de certificare de asociat Azure Data Engineer DP200 & DP203, vă poate ajuta foarte mult să obțineți majoritatea abilităților necesare pentru examen.

Apreciez timpul tău la fel de mult ca pe al meu. Asa de, Am conceput acest curs pentru a fi rapid și la obiect. De asemenea, cursul a fost predat cu limba engleză simplă și fără jargonuri. Încep cursul de la bază și până la sfârșitul cursului vei fi competent în tehnologiile utilizate.

În prezent, cursul vă învață următoarele

Azure Data Factory

• Construirea unei arhitecturi de soluție pentru o soluție de inginerie a datelor folosind tehnologii Azure Data Engineering, cum ar fi Azure Data Factory (ADF), Azure Data Lake Gen2, Azure Blob Storage, Gateway pentru aplicații și rețea de livrare de conținut, Azure Databricks, Azure HDInsight și Microsoft PowerBI.

• Integrarea datelor de la clienții HTTP, Azure Blob Storage și Azure Data Lake Gen2 folosind Azure Data Factory.

• Activități de ramificare și înlănțuire în Azure Data Factory (ADF) Conducte care utilizează activități de flux de control, cum ar fi Obține metadate. Dacă Condiția, Pentru fiecare, Șterge, Validare etc.

• Utilizarea parametrilor și variabilelor în conducte, Seturi de date și LinkedServices pentru a crea conducte bazate pe metadate în Azure Data Factory (ADF)

• Depanarea conductelor de date și rezolvarea problemelor.

• Programarea conductelor utilizând declanșatoare precum Event Trigger, Programați declanșarea și declanșarea ferestrei Tumbling în Azure Data Factory (ADF)

• Crearea fluxurilor de date de cartografiere pentru a crea o logică de transformare. Cursul acoperă toți pașii de transformare, cum ar fi Sursa, Filtru, Selectați, Pivot, Priveşte în sus, Împărțire condiționată, Coloană derivată, Agregat, Alăturați-vă și scufundați transformarea.

• Depanarea fluxurilor de date, investigarea problemelor, remedierea defecțiunilor etc

• Implementarea conductelor Azure Data Factory pentru a invoca Mapping Data Flows și pentru a le executa.

• Crearea conductelor ADF pentru a executa activități HDInsight și a efectua transformări de date.

• Crearea conductelor ADF pentru a executa activitățile Databricks Notebook pentru a efectua transformări.

• Crearea dependenței între conducte pentru a orchestra fluxul de date

• Crearea dependenței între declanșatoare pentru a orchestra fluxul de date

• Monitorizarea conductelor de date, crearea de alerte, raportarea valorilor din Azure Data Factory Monitor.

• Monitorizarea conductelor Data Factory utilizând Azure Monitor și setarea setărilor de diagnosticare pentru a fi redirecționate către Contul de stocare Azure sau Log Analytics Workspace.

• Crearea spațiului de lucru Log Analytics, crearea de registre de lucru și diagrame din analizele de jurnal pe conductele Azure Data Factory

• Implementarea instrumentului de monitorizare Azure Data Factory Analytics și modul de extindere a capacității în continuare.

Soluții de stocare Azure

• Crearea unui cont de stocare Azure, Crearea containerelor, Încărcarea datelor, Controlul accesului (EU SUNT), Utilizarea Azure Storage Explorer pentru a interacționa cu contul de stocare

• Crearea Azure Data Lake Gen2, Crearea containerelor, Încărcarea datelor, Controlul accesului (EU SUNT), Utilizarea Azure Storage Explorer pentru a interacționa cu contul de stocare

• Crearea bazei de date Azure SQL, Niveluri de prețuri, Crearea utilizatorului administrator, Crearea tabelelor, Încărcarea datelor și interogarea bazei de date.

Azure HDInsight & Databricks

• Crearea clusterelor HDInsight, Interacțiunea cu interfața de utilizare, Folosind Ambari, Crearea tabelelor Hive, Invocarea activităților HDInsight din Azure Data Factory

• Crearea spațiului de lucru Azure Databricks, Crearea clusterelor Databricks, Montarea conturilor de stocare, Crearea caietelor Databricks, efectuarea de transformări folosind caietele Databricks, Invocarea notebook-urilor Databricks de la Azure Data Factory.