Ввод данных в масштабе петабайт с помощью Azure Data Factory

Эффективное перемещение огромных объемов данных требует надежных инструментов облачной оркестрации и стратегического проектирования конвейера. Этот курс учит вас как построить устойчивые, высоко-пропускные конвейеры для того чтобы включить данные петабайт-масштаба используя лазурную фабрику данных. Вы перейдете от понимания основных концепций ETL к разработке рабочих процессов по вводу данных корпоративного уровня, которые обрабатывают массивные масштабы, минимизируют затраты и обеспечивают целостность данных. Что вы узнаете: - Понимание основных концепций приема данных, ключевой терминологии и архитектуры Azure Data Factory. - Настройка самостоятельно размещенных сред интеграции для безопасного доступа к локальным и облачным источникам данных. - Разработка высокопроизводительных операций копирования с использованием стратегий параллельного копирования, подготовки и разделения. - Оптимизация производительности трубопроводов и управление расходами на потребление при крупномасштабных перемещениях данных. - Внедрение современных моделей мониторинга, регистрации предупреждений и надежной обработки ошибок для обеспечения надежности предприятия. - Интеграция конвейеров поглощения с современными форматами данных, такими как паркет и озеро Дельта. Вы начнете с основных определений и концепций облачных данных, а затем изучите дизайн конвейера, методы настройки производительности и передовые методы обеспечения безопасности. Письменные уроки помогут вам шаг за шагом освоить концептуальные архитектуры и стратегии конфигурации. Этот курс предназначен для начинающих инженеров данных, администраторов баз данных и новичков в облаке, которые хотят освоить крупномасштабную оркестровку данных. Не требуется предыдущий опыт работы с Azure Data Factory. Начните читать сегодня, чтобы построить масштабируемые, готовые к производству конвейеры данных.