Dev-Ops\Дата Инженер (Bronevik)

Bronevik – это подразделение МТС Travel, которое работает на B2B-рынке больше 12 лет, являясь одним из топовых поставщиков отельного контента.
Мы строим базу данных для аналитики.
Чем предстоит заниматься :
• Специалист DevOps/Data Engineer отвечает за разработку, автоматизацию и сопровождение инфраструктуры, CI/CD-процессов, production-сред, систем мониторинга и безопасности.
• Также DevOps/Data Engineer отвечает за проектирование, разработку и поддержку data-пайплайнов, хранилищ данных, аналитических витрин и процессов контроля качества данных.
• Его основная задача - обеспечить надежную работу сервисов, стабильную доставку изменений, своевременную обработку данных и доступность корректных данных для аналитики, отчетности, ML и бизнес-пользователей.
Что для этого нужно:
DevOps-навыки :
• Linux/Unix - уверенное администрирование серверов, работа с процессами, правами доступа, systemd, cron, SSH, логами, сетевыми утилитами.
• Скриптинг - Bash, Python, PowerShell при необходимости.
• Git - ветвление, pull requests, merge/rebase, теги, релизные ветки.
• CI/CD - настройка пайплайнов сборки, тестирования, деплоя и отката.
• Инструменты CI/CD - GitLab CI, GitHub Actions, Jenkins, TeamCity, CircleCI или аналоги.
• Контейнеризация - Docker, Docker Compose, создание и оптимизация Dockerfile.
• Оркестрация контейнеров - Kubernetes, Helm, namespaces, deployments, services, ingress, secrets, config maps.
• Infrastructure as Code - Terraform, Ansible, Pulumi или CloudFormation.
• Облачные платформы - AWS, GCP, Azure, Yandex Cloud или VK Cloud.
• Сети - DNS, HTTP/HTTPS, TCP/IP, VPN, балансировщики нагрузки, reverse proxy, firewall.
• Web-серверы и прокси - Nginx, Apache, Traefik, HAProxy.
• Мониторинг - Prometheus, Grafana, Zabbix, Datadog, CloudWatch или аналоги.
• Логирование - ELK/EFK stack, Loki, Fluent Bit, Vector.
• Трейсинг - OpenTelemetry, Jaeger, Zipkin.
• Безопасность - управление секретами, IAM, RBAC, TLS-сертификаты, vulnerability scanning.
• Резервное копирование - backup/restore, disaster recovery, RPO/RTO.
• Управление релизами - blue-green deployment, canary deployment, rolling updates, rollback.
• Высокая доступность - отказоустойчивость, масштабирование, балансировка нагрузки.
• Оптимизация инфраструктуры - контроль стоимости, производительности и использования ресурсов.
Data Engineering-навыки:
• SQL - уверенное владение SELECT, JOIN, CTE, window functions, индексы, оптимизация запросов.
• Python - pandas, pyarrow, requests, sqlalchemy, pydantic, работа с API и файлами.
• ETL/ELT-процессы - проектирование, разработка и сопровождение загрузок данных.
• Оркестрация пайплайнов - Apache Airflow, Dagster, Prefect, Luigi или аналоги.
• Data Warehouse - Snowflake, BigQuery, Redshift, ClickHouse, Greenplum, PostgreSQL, Vertica.
• Data Lake - S3, MinIO, HDFS, Delta Lake, Iceberg, Hudi.
• Форматы данных - CSV, JSON, XML, Avro, Parquet, ORC.
• Потоковая обработка - Kafka, RabbitMQ, Pulsar, Spark Streaming, Flink.
• Batch-обработка - Spark, PySpark, dbt, SQL-процедуры.
• Моделирование данных - star schema, snowflake schema, Data Vault, normalized/denormalized models.
• dbt - модели, tests, snapshots, macros, documentation, lineage.
• Качество данных - проверки полноты, уникальности, актуальности, согласованности и допустимых значений.
• Data contracts - описание структуры, схем, SLA и ожиданий по данным.
• Метаданные и lineage - понимание происхождения данных и связей между таблицами.
• Каталогизация данных - DataHub, Amundsen, OpenMetadata или аналоги.
• Работа с API - REST, GraphQL, OAuth, rate limits, pagination, retries.
• CDC - Change Data Capture, Debezium, логическая репликация.
• Работа с БД - PostgreSQL, MySQL, MS SQL, MongoDB, Redis, Elasticsearch.
• Оптимизация хранилищ - партиционирование, кластеризация, индексация, материализованные представления.
• Data Governance - права доступа, PII, маскирование, retention policies, аудит.
• Системное мышление - видеть связи между инфраструктурой, приложениями, базами данных и бизнес-процессами.
• Ответственность - понимать критичность production-среды и данных.
• Внимательность к деталям - не допускать ошибок в конфигурациях, доступах и схемах данных.
• Проактивность - заранее находить риски и устранять потенциальные сбои.
• Коммуникабельность - уметь объяснять технические проблемы нетехническим коллегам.
• Приоритизация - отличать критичные инциденты от некритичных улучшений.
• Документирование - фиксировать решения так, чтобы ими могли пользоваться другие.
• Стрессоустойчивость - спокойно работать с авариями, ночными сбоями и срочными релизами.
• Готовность учиться - быстро осваивать новые инструменты, облака, фреймворки и подходы.
Что мы предлагаем:
• Официальное оформление;
• График работы 5\2, с 9-18 или с 10 до 19.
• Формат работы: офис, гибрид, удаленно (обсуждаемо).
• Программа ДМС с первого месяца работы - это 100% покрытие расходов в частных клиниках, включая стоматологию. Застраховать близких родственников можно со скидкой 50%. Для любителей путешествий - страховка в поездках за границу. А еще есть страхование жизни;
• Возможность взять IT ипотеку с низкой % ставкой;
• Очное и онлайн-обучение в Корпоративном университете, у внешних провайдеров, если это полезно для работы, обмен опытом во внутренних профессиональных сообществах, а также доступ к онлайн-библиотеке в полезными книгами и периодикой;
• Оплачиваемые выходные на значимые события в жизни сотрудника;
• Материальная помощь в сложных жизненных ситуациях;
• Предложения от партнёров для путешествий, развлечений и занятий спортом;
• Возможность участия в волонтерских программах: мы организуем благотворительные ярмарки, образовательные проекты для детей, конкурсы социальных проектов и экологические проекты.