Фабрика данных Azure для инженеров данных – Проект по Covid19

купить сейчас

Цена: $34.99

Добро пожаловать!

Я с нетерпением жду возможности помочь вам изучить один из востребованных инструментов обработки данных в облаке., Фабрика данных Azure (АПД)! Этот курс преподавался с реализацией решения для инженерии данных с использованием фабрики данных Azure. (АПД) для реальной проблемы сообщения о тенденциях Covid-19 и прогнозирования распространения этого вируса.

Это не похоже ни на один другой курс Udemy для фабрики данных Azure или технологий инженерии данных.. После прохождения курса со всеми заданиями, Я твердо верю, что вы сможете начать собственный проект по проектированию данных в реальном мире, а также будете владеть фабрикой данных Azure. (АПД).

Я также включил уроки по решениям для хранения данных, таким как Azure Data Lake Storage., Хранилище BLOB-объектов Azure, База данных Azure SQL и т. д.. Также, есть уроки по Azure HDInsight и Azure Databricks. Я даже включил уроки по созданию отчетов с помощью Power BI для данных, обрабатываемых конвейерами данных Azure Data Factory.. Я считаю, что модели машинного обучения выходят за рамки. Вы можете использовать эти данные для построения собственных моделей и прогнозирования спреда..

Курс следует логической последовательности реализации реальных проектов с объяснением технических концепций и конвейеров данных в фабрике данных Azure. (АПД) строится одновременно. Несмотря на то, что этот курс не предназначен специально для обучения навыкам, необходимым для сдачи сертификационных экзаменов Azure Data Engineer Associate DP200. & ДП203, это может очень помочь вам получить большинство необходимых навыков, необходимых для экзамена.

Я ценю ваше время так же, как и свое. Так, Я разработал этот курс, чтобы он был быстрым и точным. Также, курс преподается на простом английском языке и без жаргона. Я начинаю курс с основ, и к концу курса вы будете владеть используемыми технологиями.

В настоящее время курс учит вас следующему

Фабрика данных Azure

• Создание архитектуры решения для разработки данных с использованием технологий Azure Data Engineering, таких как Azure Data Factory. (АПД), Озеро данных Azure 2-го поколения, Хранилище BLOB-объектов Azure, База данных SQL Azure, Azure Databricks, Azure HDInsight и Microsoft PowerBI.

• Интеграция данных от HTTP-клиентов, Хранилище BLOB-объектов Azure и Azure Data Lake Gen2 с использованием фабрики данных Azure.

• Ветвление и связывание действий в Фабрике данных Azure (АПД) Конвейеры, использующие действия потока управления, такие как получение метаданных. Если условие, Для каждого, удалять, Валидация и т. д..

• Использование параметров и переменных в конвейерах, Наборы данных и LinkedServices для создания конвейеров на основе метаданных в Фабрике данных Azure. (АПД)

• Отладка конвейеров данных и решение проблем.

• Планирование конвейеров с использованием триггеров, таких как триггер события., Триггер расписания и триггер переворачивающегося окна в фабрике данных Azure (АПД)

• Создание потоков данных сопоставления для создания логики преобразования. Курс охватывает все этапы трансформации, такие как Source, Фильтр, Выбрать, Вращаться, Уважать, Условное разделение, Производный столбец, Совокупность, Преобразование «присоединиться и принять».

• Отладка потоков данных, расследование проблем, исправление сбоев и т.д.

• Внедрение конвейеров Фабрики данных Azure для вызова сопоставления потоков данных и их выполнения..

• Создание конвейеров ADF для выполнения операций HDInsight и преобразования данных..

• Создание конвейеров ADF для выполнения действий Databricks Notebook для выполнения преобразований.

• Создание зависимости между конвейерами для организации потока данных

• Создание зависимости между триггерами для организации потока данных

• Мониторинг конвейеров данных, создание оповещений, отчеты о метриках из монитора фабрики данных Azure.

• Мониторинг конвейеров фабрики данных с помощью Azure Monitor и настройка параметра диагностики для пересылки в учетную запись хранения Azure или рабочую область Log Analytics..

• Создание рабочей области Log Analytics, создание книг и диаграмм на основе аналитики журналов в конвейерах Фабрики данных Azure.

• Внедрение инструмента мониторинга Azure Data Factory Analytics и дальнейшее расширение возможностей.

Решения Azure для хранения данных

• Создание учетной записи хранения Azure, Создание контейнеров, Загрузка данных, Контроль доступа (Я), Использование Azure Storage Explorer для взаимодействия с учетной записью хранения

• Создание Azure Data Lake 2-го поколения, Создание контейнеров, Загрузка данных, Контроль доступа (Я), Использование Azure Storage Explorer для взаимодействия с учетной записью хранения

• Создание базы данных SQL Azure, Ценовые уровни, Создание пользователя-администратора, Создание таблиц, Загрузка данных и запрос к базе данных.

Azure HDInsight & Блоки данных

• Создание кластеров HDInsight, Взаимодействие с пользовательским интерфейсом, Использование Амбари, Создание таблиц Hive, Вызов действий HDInsight из фабрики данных Azure

• Создание рабочей области Azure Databricks, Создание кластеров Databricks, Подключение учетных записей хранения, Создание блокнотов Databricks, выполнение преобразований с использованием блокнотов Databricks, Вызов записных книжек Databricks из фабрики данных Azure.