Data / Platform Engineer

65apps — ведущий российский аутсорс-разработчик цифровых сервисов для компаний лидеров рынка самых разных отраслей: fintech, telecom, e-comm, ритейл, страхование и госсектор. Мы создаем мобильные приложения, сложные корпоративные системы, web-приложения, а также проводим исследования и аудиты, оказываем техническую поддержку и имеем свое дизайн-агентство.
Мы уже более 14 лет осознанно и целенаправленно помогаем бизнесу развиваться в цифровой среде, разрабатывая и запуская уникальные, сложные ИТ-решения.
Особенность 65apps — это большой опыт работы с крупными федеральными компаниями и серьезное отношение к подбору и развитию наших специалистов. Именно поэтому свои проекты нам доверяют такие компании как: ЦБ РФ, МТС, X5 Group, Лента, Магнит, ВТБ, Альфа Банк, Т-Банк, Яндекс, Детский мир и многие другие.
Обязанности:
• Проектирование и развитие data-платформы (Lakehouse-архитектура)
• Разработка и поддержка batch и streaming пайплайнов обработки данных
• Построение и оптимизация ETL/ELT процессов
• Работа с потоковыми данными (real-time ingestion и обработка)
• Развитие и поддержка Data Mesh подхода (доменные дата-продукты)
• Интеграция платформы данных с ML-окружением (feature pipelines, data access)
• Оптимизация производительности хранилищ и вычислений
• Проектирование схем хранения данных (Data Modeling)
• Настройка и поддержка оркестрации данных
• Участие в развитии CI/CD процессов для data pipelines
• Автоматизация инфраструктуры (IaC)
Требования:
• Уверенное владение Python (production-level код)
• Опыт работы с Apache Spark (batch processing)
• Опыт построения пайплайнов в Apache Airflow
• Практический опыт работы с потоковыми системами
• Опыт работы с Hadoop-экосистемой
• Опыт работы с СУБД (PostgreSQL, ClickHouse, GreenPlum)
• Опыт работы с distributed SQL engines (​​​​​​​Trino, StarRocks (или аналоги))
• Понимание принципов построения Lakehouse архитектуры
• Опыт работы с CDC-инструментами
• Опыт контейнеризации и оркестрации
• Опыт работы с IaC инструментами
• Понимание CI/CD практик (GitLab CI / GitHub Actions / Jenkins)
• Опыт проектирования отказоустойчивых и масштабируемых систем
Мы в свою очередь даём все возможности для развития:
• Команду единомышленников, готовую поддержать на каждом этапе и помочь в профессиональном росте. Здесь ценят взаимопомощь и открытость, где каждый чувствует себя частью чего-то большего.
• Захватывающие проекты, меняющие облик крупнейших российских компаний. Мы выбираем задачи, которые вдохновляют и позволяют проявить креативность, предлагая уникальный опыт и профессиональный рост.
• Гибкий формат работы. Выбирайте наиболее удобный для вас вариант: удаленная работа, гибридный режим или современный офис в Ижевске
• Прозрачные условия сотрудничества. Оформление по ТК, ИП или ГПХ