Дата-инженер в Райдтех

Команда DWH снабжает менеджеров и аналитиков данными, которые помогают развиваться новым райдтех-направлениям. Ищем талантливого инженера данных грейда junior, middle или senior для работы над новыми доменами DWH.
Какие задачи вас ждут:
Проектировать, реализовывать и оптимизировать сложные ETL-процессы
У нас широкий инструментарий и огромные объёмы данных. Мы активно развиваем своё хранилище и реализуем новые сложные пайплайны обработки данных. Наши инженеры работают с данными на всех этапах, начиная от появления в источниках и заканчивая финальными витринами и отчётами.
Обеспечивать стабильность и качество того, что уже есть
Нашими данными пользуется очень много людей, и важно не сломать существующую функциональность. Можно и нужно заниматься техдолгом: мы всячески поддерживаем любые улучшения, автоматизации, правки и отключение ненужного или устаревшего.
Участвовать в проработке и пилотировании нового
Flink, Spark, инкрементальное построение, Data Quality, развитие собственного ETL-фреймворка, тесные интеграции с аналитическими инструментами и многое другое — нужно исследовать, сравнивать, пилотировать, думать, превращать в инструменты для всех.
Мы ждём, что вы:
Junior-, middle- или senior-специалист
Уверенно владеете SQL, понимаете устройство современных баз данных и фреймворков обработки
Владеете Python хотя бы на базовом уровне
Разбираетесь в классических алгоритмах и структурах данных
Можете объяснить, для чего нужны CI/CD, выделить преимущества использования Git и ревью кода
Будет плюсом, если вы:
Знакомы с Hadoop, Airflow, ClickHouse, Greenplum, Postgres или готовы освоить
Работали по методологии Agile
Участвовали в проектировании хранилищ данных
Создавали сложные высоконагруженные процессы ETL и ELT (отдельным плюсом будет знание инструментов Luigi и Airflow)
Разрабатывали процессы обработки сложных событий (CEP) во времени, приближенном к реальному (Kafka Streams, Spark, Flink)
Работаете со специализированными аналитическими инструментами на базе Python (Jupyter, Pandas, SciPy, Matplotlib, Bokeh)
Что
мы предлагаем:
Мы ценим саморазвитие, поэтому у нас есть собственная образовательная платформа с 700+ курсами. А если вам нужно что-то особенное, что действительно поможет с работой, — мы можем помочь с оплатой. Это не все бонусы — полный список тут.
Откликайтесь на вакансию на нашем сайте