DataOps. Актуальные вопросы и не менее актуальные ответы
Спикер: Егоров Павел, руководитель направления BigData «Инфосистемы Джет» 0:00 — Вступление 0:17 — Определение и цели методологии DataOps 0:50 — История развития процессов загрузки данных 1:47 — Современные подходы к автоматизации разработки 2:43 — Стандарт dbt и работа с коннекторами 3:54 — Преимущества абстракции при миграции технологий 5:17 — Внедрение ИИ-агентов в разработку пайплайнов 6:47 — Особенности работы с dbt-моделями в Git 8:02 — Контроль качества и дата-контракты в CI/CD 9:43 — Применение макросов для генерации кода 11:27 — Визуализация связей объектов и расчёт показателей 12:54 — Мониторинг качества данных и скоростей расчётов 14:52 — Продуктовые решения и интеграция с Airflow 16:47 — Работа с семантическим слоем и бизнес-описанием 18:33 — Практические примеры на стендах конференции