DataOps Engineer

Bilim Group - это продуктовая EdTech-компания в Казахстане. Мы работаем с огромным масштабом изменений - со всей системой образования страны.
Сейчас мы активно развиваем Data Platform - инфраструктуру для аналитики и обработки данных, которая помогает принимать продуктовые решения и улучшать образовательный опыт пользователей. Наша аналитическая платформа уже содержит более 3 TB данных и продолжает быстро расти. Мы строим современную data-архитектуру с потоковой обработкой данных, CDC-пайплайнами и масштабируемыми хранилищами.
Ищем Data Platform / DataOps инженера , который поможет развивать и масштабировать эту инфраструктуру.
Чем предстоит заниматься:
• Развертывать и поддерживать инфраструктуру Data Platform
• Поддерживать и масштабировать MPP-хранилища данных
• Настраивать и администрировать серверы баз данных (конфигурация, производительность, отказоустойчивость)
• Разворачивать и сопровождать streaming-стек (Kafka, Debezium, Flink)
• Настраивать Kubernetes-инфраструктуру для data-сервисов
• Развивать CI/CD и GitOps процессы (ArgoCD, GitLab CI)
• Настраивать мониторинг и observability платформы (Prometheus, Grafana, Loki)
• Повышать отказоустойчивость и производительность системы
• Управлять доступами, secrets и backup/restore стратегиями
• Поддерживать orchestration-сервисы (Airflow)
• Участвовать в расследовании инцидентов и улучшении reliability платформы
• Взаимодействовать с командами Data Engineering и DevOps
Наш технологический стек:
• Kubernetes + Helm
• Kafka / Debezium / Flink
• Airflow
• Postgres / Mysql
• ClickHouse / Vertica / Greenplum
• Prometheus / Grafana / Loki
• ArgoCD / GitLab CI
• Yandex Cloud / AWS
Что мы ожидаем:
• Опыт работы с Kubernetes (production-кластеры)
• Опыт эксплуатации Kafka
• Опыт администрирования MPP-хранилищ (ClickHouse / Vertica / Greenplum)
• Понимание принципов CDC и потоковой обработки данных
• Опыт настройки CI/CD и GitOps
• Опыт работы с системами мониторинга (Prometheus, Grafana)
• Понимание распределённых систем и highload-инфраструктуры
• Опыт работы с облаками (Yandex Cloud или AWS)
Будет плюсом:
• Опыт работы с Terraform, Ansible
• Опыт эксплуатации Flink
• Опыт построения Data Platform
• Опыт внедрения MLOps практик (Kubeflow, MLflow)
Что мы предлагаем:
• участие в развитии современной Data Platform
• работу с потоковой обработкой и highload-инфраструктурой
• возможность влиять на архитектуру платформы
• команду data-инженеров и инженеров платформы
• реальные инженерные задачи, а не только поддержку
Что ты получаешь, присоединившись к нам:
• Достойная зарплата - обсудим на встрече, индивидуально и честно.
• Тёплая и поддерживающая команда - ценим уважение, открытость и чувство юмора.
• Прокачка знаний - доступ к курсам Kitap.kz, Bilimland.com, Lerna.kz и другим образовательным платформам.
• Языки - легко: изучай иностранные на Qlang.kz в удобном тебе ритме.
• Кафетерий бенефитов - спорт, здоровье, обучение. Ты сам выбираешь, что важно (доступ через полгода).
• Ивенты, квизы, meet-up’ы и Тәтті күн - традиция вкусных угощений и веселых встреч.
• BYOD - если работаешь со своим ноутбуком, мы это компенсируем.
Как мы работаем:
• В офисе в Астане (Expo, Мангилик ел 55/13) или Алматы (БЦ Алатау Гранд, Тимирязева 28В).
• Возможен удаленный формат — обсудим на старте.
• График: пн–пт, с 9:00 до 18:00.
• Официальный найм с первого дня, испытательный срок — 3 месяца.