View on GitHub

DE or DIE

DE or DIE – митап, сделанный дата инженерами для дата инженеров.

DE or DIE #1

Дата мероприятия: 27.02.2020.
Формат мероприятия: offline.

Доклады

Какие дата инженеры бывают и чего от них все хотят

Автор: Николай Марков, Principal Architect, Aligned Research Group, организатор конференции PyData.

Материалы первого доклада:

О чем первый доклад

Люди приходят в Data Engineering из разных направлений. Кто-то хорошо знает алгоритмы, структуры данных и математику и понимает, как эффективнее использовать машину. Кто-то имеет опыт программирования и может применять свои навыки в новой, более интересной области. А еще бывают люди, которые отлично понимают, как компоненты функционируют в связке на нескольких серверах. Так кто же такой Data Engineer? Что, по мнению компаний, он должен уметь, и чего от него ожидают коллеги? Давайте обсудим.

Что под капотом у Яндекс.Такси

Автор: Евгений Ермаков, к.т.н., архитектор Data Management Platform Яндекс.

Материалы второго доклада:

О чем второй доклад

Яндекс.Такси — стремительно растущий международный сервис, бизнес-решения в котором принимаются на основе накопленных в компании данных. Актуальную, полную и правдивую информацию для аналитиков Яндекс.Такси формирует Служба разработки платформы управления данными (DMP).

Служба DMP агрегирует в себе накопленные практики и экспертизу области построения хранилищ данных и аналитических приложений, объединённых в единую платформу. Команда превращает информационный хаос в четко организованную систему, которая позволяет собирать, обрабатывать и анализировать любые объемы данных.

В своем докладе Евгений расскажет об архитектуре хранилища данных Яндекс.Такси, решаемых задачах и об обрабатываемой информации, а также об организационной структуре, командах, развивающих данные, и ролях в службе разработки DMP.