Data Engineer в Маркет

Наша команда инженеров строит хранилище данных для нужд бизнес-подразделений Яндекс Маркета. Ищем опытного инженера данных для реализации сложных технических поставок. Ждём, что вы знакомы с Python, SQL и Unix-подобными системами, проектировали DWH. Опыт руководства командой и работы в e-com будет плюсом.Принятие конечных сетевых решений по реализации поставок данных
Вам предстоит проектировать схемы поставок данных, выбирать подход к внесению доработок в витрины за оптимальное время с минимизацией рисков от релизов. И ещё нужен будет критический взгляд на результат в интересах потребителей данных. Развитие фреймворков обработки данных
Вы будете применять существующие инструменты работы с данными и выделять их недостатки, продвигать повестку по их улучшению или поиску новых для более эффективного решения задач. Руководство реализацией сложных технических поставок
Нужно будет разбираться в алгоритмической составляющей инструментов и находить эффективные решения, в том числе упрощая постановку задачи. Больше о разработке в Яндексе — в канале Yandex for Developers
* Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов * Умеете проектировать DWH: слои, модели хранения данных, процессы ETL * Хорошо понимаете принципы работы распределённых систем Hadoop или YTsaurus, ClickHouse * Умеете выбирать технологии для решения конкретных задач * Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными * Имеете опыт работы от трёх лет * Умеете работать в командной строке Unix-подобных систем (Linux, macOS)* Имеете опыт промышленной разработки на C++ * Работали в ecom-отрасли * Решали задачи в роли аналитика, управляли командой или проектами