С каждым годом данных становится больше, а ориентироваться в них сложнее. X5 Tech совместно с сообществом
dbt & modern data stack обсудили метод решения этой проблемы — каталог данных. Data lineage, data governance — красивые понятия, результатом внедрения которых становился не всегда используемый,
не всегда удобный сервис от вендора
или с просторов открытого кода.
Как это было?
Доклады
OpenMetadata как платформа для развития собственного Каталога Данных.
Представьте, каталог данных уже есть, у него много пользователей, но происходят события, накапливается недовольство. Моя история про развитие востребованного сервиса большой компании — быстрее, выше, сильнее с основой на открытом коде.
2 года с OpenMetadata: как заманить и не отпускать пользователей.
Это история появления каталога данных в компании и пути к открытому решению на базе OpenMetadata. Хватает ли в коробочном решении функционала, удобно ли пользоваться клиентам и самое главное — как аналитику получить от него пользу.
Наш путь с каталогом данных в от таблиц до моделей машинного обучения.
В докладе расскажу про внедрение каталога данных на базе DataHub — от стандартного использования для описания таблиц до построения сквозного маршрута данных для ML-моделей, с оповещением о возникших проблемах по пути.
Организаторы
Александр Марач
DevRel
TG: marach_sasha
Просвирнина Мария
DevRel
