Senior Data Engineer

Bilim Group - это продуктовая EdTech-компания в Казахстане. Мы работаем с огромным масштабом изменений - со всей системой образования страны.
Сейчас мы активно развиваем Data Platform - инфраструктуру для аналитики и обработки данных, которая помогает принимать продуктовые решения и улучшать образовательный опыт пользователей. Наша аналитическая платформа уже содержит более 3 TB данных и продолжает быстро расти. Мы строим современную data-архитектуру с потоковой обработкой данных, CDC-пайплайнами и масштабируемыми хранилищами.
Ищем Senior Data Engineer , который поможет развивать и масштабировать эту инфраструктуру.
Чем предстоит заниматься:
• Разрабатывать и оптимизировать аналитические витрины в ClickHouse
• Строить решения для near real-time аналитики и отчетности
• Разрабатывать и поддерживать ETL/ELT пайплайны
• Работать с потоками данных (Kafka, Debezium)
• Проектировать схемы данных под аналитические задачи
• Оптимизировать SQL-запросы и производительность хранилища
• Подготавливать данные для BI и продуктовой аналитики
• Участвовать в развитии архитектуры DWH/Data Platform
Наш технологический стек:
• ClickHouse / Greenplum
• Postgres / MySQL
Kafka / Debezium / Flink
• Airflow
• Kubernetes (на уровне взаимодействия)
• BI-инструменты
Что мы ожидаем:
• Практический опыт работы с ClickHouse
• Уверенное знание SQL (CTE, оконные функции, свойства различных индексов)
• Опыт построения аналитических витрин и отчетности
• Опыт работы с ETL/ELT пайплайнами
• Понимание работы с большими объемами данных (TB+)
• Опыт работы с потоками данных (Kafka / Debezium) — как плюс
• Опыт работы с Airflow или аналогами
Будет плюсом:
• Опыт оптимизации ClickHouse (MergeTree, партиционирование, индексы)
• Опыт работы с MPP-хранилищами
• Понимание подходов моделирования данных (Kimball, Data Vault)
• Опыт работы с BI-инструментами
• Опыт работы с облаками (Yandex Cloud / AWS)
Что мы предлагаем:
• Участие в развитии современной Data Platform
• Реальные задачи с данными и высокой нагрузкой
• Возможность влиять на архитектуру аналитики
• Работу с near real-time данными
• Сильную команду data- и platform-инженеров
Что ты получаешь, присоединившись к нам:
• Достойная зарплата - обсудим на встрече, индивидуально и честно.
• Тёплая и поддерживающая команда - ценим уважение, открытость и чувство юмора.
• Прокачка знаний - доступ к курсам Kitap.kz, Bilimland.com, Lerna.kz и другим образовательным платформам.
• Языки - легко: изучай иностранные на Qlang.kz в удобном тебе ритме.
• Кафетерий бенефитов - спорт, здоровье, обучение. Ты сам выбираешь, что важно (доступ через полгода).
• Ивенты, квизы, meet-up’ы и Тәтті күн - традиция вкусных угощений и веселых встреч.
• BYOD - если работаешь со своим ноутбуком, мы это компенсируем.
Как мы работаем:
• В офисе в Астане (Expo, Мангилик ел 55/13) или Алматы (БЦ Алатау Гранд, Тимирязева 28В).
• Возможен удаленный формат — обсудим на старте.
• График: пн–пт, с 9:00 до 18:00.
• Официальный найм с первого дня, испытательный срок — 3 месяца.