Выгрузка данных из внешних систем // Демо-занятие курса Data Engineer

Вы узнаете: - О существующей классификации источников (царство животных-БД, растений-API…) - Поймете, как способ выгрузки информации зависит от типа источника (прямолинейно) - Разберетесь, какие из универсальных инструментов выгрузки данных актуальны сегодня (Airflow, Airbyte, Airan...) - И научитесь самостоятельно настраивать Data Ingestion пайплайны с помощью NiFi (не списывайте его раньше времени со счетов) Кому подходит этот урок: - Начинающим и продолжающим специалистам в области Аналитики данных, Data Engineering - Безжалостным гикам, шарящим за движуху в мире Big Data - Тем, кто готов принять и простить тот факт, что Airflow не всегда и не для всего лучший инструмент Результат урока: - Изучите существующие источники данных, сможете более грамотно разобраться в их отличительных чертах и применимости к различным задачам - Узнаете об одних из наиболее популярных инструментов для выгрузок данных в современном мире - Поймете, чем так хорош Apache NiFi и задумаетесь об его внедрении в вашей команде «Data Engineer» - Преподаватель: Алексей Железной - Data Engineer, Wildberries Подключайтесь к обсуждению в чате - Пройдите опрос по итогам мероприятия - Следите за новостями проекта: - Telegram: - ВКонтакте: - LinkedIn: - Хабр: