Data Engineer в Маркет

Какие задачи вас ждут
Принятие конечных сетевых решений по реализации поставок данных
Вам предстоит проектировать схемы поставок данных, выбирать подход к внесению доработок в витрины за оптимальное время с минимизацией рисков от релизов. И ещё нужен будет критический взгляд на результат в интересах потребителей данных.
Развитие фреймворков обработки данных
Вы будете применять существующие инструменты работы с данными и выделять их недостатки, продвигать повестку по их улучшению или поиску новых для более эффективного решения задач.
Руководство реализацией сложных технических поставок
Нужно будет разбираться в алгоритмической составляющей инструментов и находить эффективные решения, в том числе упрощая постановку задачи.
Мы ждём, что вы
Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов
Умеете проектировать DWH: слои, модели хранения данных, процессы ETL
Хорошо понимаете принципы работы распределённых систем Hadoop или YTsaurus, ClickHouse
Умеете выбирать технологии для решения конкретных задач
Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными
Имеете опыт работы от трёх лет
Умеете работать в командной строке Unix-подобных систем (Linux, macOS)
Откликнуться