Аналитик качества данных/Data Quality Analyst

IEK GROUP – один из ведущих производителей на рынке электротехнического оборудования. Мы разрабатывает и производим инновационные решения для энергетики, промышленности и инфраструктуры. В рамках цифровой трансформации бизнеса мы расширяем команду и ищем Аналитика качества данных.
Вам предстоит работать в отделе Управления данными офиса Данных компании IEK. Отдел - 9 человек с прямым подчинением CDO. 2 daily в неделю по 30 минут + полчаса на работу с тасктрекером.
Удаленка, любые часовые пояса.
Ваша главная задача — гарантировать, что данные, поступающие из различных систем-источников (CRM, ERP и др.) в хранилище, остаются точными, полными и пригодными для принятия стратегических решений.
Вы будете выстраивать процессы кросс-проверок, профилировать сырые данные и внедрять стандарты качества, которые помогут бизнесу доверять каждой цифре в отчетах.
Чем предстоит заниматься:
Профилирование и мониторинг: использование инструментов для обнаружения дефектов, аномалий и несоответствий в данных
Очистка и валидация: приведение данных в порядок для сохранения их целостности и проверка на соответствие бизнес-правилам
Анализ систем-источников: аудит данных в первичных системах (CRM, ERP, логи) перед их загрузкой в DWH, чтобы минимизировать попадание «грязных» данных в хранилище. Кросс-проверки (Reconciliation): проведение сверки данных между системами-источниками и DWH. Выявление изменений на системах - источниках.
Взаимодействие с бизнес-владельцами: сбор и формализация требований к качеству данных от владельцев бизнес-процессов, помощь в интерпретации правил валидации.
Анализ первопричин (Root Cause Analysis): отслеживание того, как ошибки распространяются от систем-источников до конечных витрин данных
Отчетность и управление (Governance): разработка метрик и отчетов для контроля «здоровья» данных.
Коллаборация: работа с дата-инженерами и стюардами данных для определения стандартов загрузки.
Наши ожидания:
Опыт работы в роли аналитика данных, инженера данных или аналитика качества данных
Опыт построения систем мониторинга качества данных с нуля или масштабирования существующих процессов DQ (Data Quality)
Успешное участие в миграции данных, настройке ETL/ELT процессов с фокусом на валидацию данных на входе и выходе
Успешный опыт профилирования данных (SQL-анализ) в DWH (Snowflake, ClickHouse, Greenplum).
Hard Skills:
SQL: продвинутый уровень (знание оконных функций, оптимизация запросов, написание сложных аналитических запросов для профилирования данных)
Понимание DWH, ETL/ELT. Инструменты DQ: опыт работы с фреймворками (Great Expectations [python]) или коммерческими платформами (Data Quality в DWH, Collibra, OMD)
Инженерия данных: понимание архитектуры (Airflow, SSIS)
Навыки написания тестов
Аналитика: умение проводить профилирование данных (выявление аномалий, дублей, нулевых значений, статистических выбросов)
Скриптинг: Python (pandas, pyspark) для автоматизации проверок качества и написания скриптов очистки данных
Методологии: знание подходов к оценке качества данных по методологии (точность, полнота, целостность, своевременность). Опыт настройки алертингов (мониторинг аномалий, свежести данных, полноты).
Soft skills:
Скептицизм и критическое мышление: «Доверяй, но проверяй»
Склонность подвергать сомнению входные данные и готовность аргументированно доказывать необходимость исправления ошибок
Структурное мышление: cпособность формализовать требования к качеству данных в виде кода и чек-листов
Коммуникабельность: умение мягко, но настойчиво доносить до владельцев данных (бизнес-юнитов) и разработчиков необходимость исправления корневых причин проблем, не ограничиваясь «закрытием инцидента»
Стрессоустойчивость: умение быстро локализовать проблему
Документирование: педантичность в ведении документации (Data Catalog, Data Lineage, реестр инцидентов)
Мы предлагаем
Удаленный график работы
Достойный уровень дохода (зависит от профессиональных компетенций)
Расширенный социальный пакет: ДМС, дополнительные отпускные дни, оплата больничного листа, материальная помощь в критических ситуациях, бесплатные оздоровительные/спортивные мероприятия
Правительственные льготы – мы аккредитованная IT-компания
Комфортная, доброжелательная рабочая атмосфера
Корпоративные традиции и праздники, коллективные мотивационные программы