Ведущий инженер / Senior Data Engineer по развитию корпоративного DWH
Описание
Мы — динамично развивающаяся производственная компания. Наше основное направление — создание и реализация качественной продукции сегмента FMCG для конечного потребителя. Сейчас мы активно развиваем корпоративное хранилище данных DWH. Наша цель — объединить данные учетных систем, управленческих материалов и внешних источников в единую экосистему для принятия точных бизнес-решений. Мы ищем Senior Data Engineer, который станет техническим владельцем нашего DWH, возглавит его проектирование и заложит надежный фундамент для аналитики больших данных. Чем предстоит заниматься: Развивать DWH: участвовать в проектировании и масштабировании корпоративного хранилища данных компании. Интегрировать источники: собирать, очищать и консолидировать данные из учетных систем на базе 1С (1С:ERP, 1С:Бухгалтерия), управленческих материалов (на базе XLS) и прочих внешних платформ. Проектировать витрины данных: переводить требования бизнеса и топ-менеджмента в понятные технические алгоритмы и отчеты. Обеспечивать качество данных: контролировать корректность выгрузок, искать и устранять расхождения в цифрах. Быть техническим лидером: Выступать в роли эксперта, выбирать стек технологий, формировать лучшие практики разработки и в перспективе развивать команду Data-инженерии. Обязанности: Архитектура и моделирование DWH. Аудит текущей реализации; разработка логической и физической модели хранилища, целевой архитектуры, состава слоев и поэтапного плана внедрения; управление техническим долгом. Проектирование целевого слоя витрин данных. Формирование единой модели данных по продажам, производству и остаткам, и прочим предметным областям, обеспечивающей сопоставимость показателей и дальнейшее использование в Power BI и Analysis Services. Интеграция с учетными системами. Организация загрузки данных из 1С ERP и 1С Бухгалтерии; анализ источников, постановка задач 1С-разработчикам, согласование требований и приемка результатов; участие в переходе к интеграции через 1С: Шину. Разработка и эксплуатация ETL-контура. Проектирование, реализация и развитие процессов загрузки из 1С, XLS и других источников; выбор оптимальных инструментов ETL и оркестрации. Обеспечение стабильной ежедневной загрузки. Обработка прогнозных данных. Развитие и сопровождение Python-решения для регулярной загрузки и выгрузки данных в XLS-файлы. Качество и управляемость данных. Организация валидации, сверок, мониторинга, журналирования и обработки ошибок; документирование архитектуры, источников, моделей и ETL-процессов. Развитие команды. Наставничество junior-специалиста, в перспективе – расширение команды DWH. Требования: Опыт работы в области DWH, ETL или Data Engineering - от 5 лет. Практический опыт проектирования и развития хранилищ данных, включая запуск или восстановление DWH на начальной либо нестабильной стадии. Уверенное владение Microsoft SQL Server и T-SQL. Практический опыт промышленного использования Python для обработки и загрузки данных. Практический опыт логического и физического моделирования DWH: определение уровня детализации фактов, проектирование фактов и измерений, ключей и связей, историчности данных, а также сопоставления источников с целевыми объектами (source-to-target mapping). Опыт построения надежных ETL-процессов: контроль ошибок, повторный запуск, журналирование, сверки и контроль полноты загрузки. Обязателен опыт работы с 1С ERP. Понимание основных принципов хранения данных в 1С ERP и 1С Бухгалтерии: документы, справочники, регистры и связи между объектами. Умение формировать технические задания специалистам по 1С и принимать результаты их работы. Понимание требований BI-систем к структуре и качеству данных; опыт работы с Power BI и/или Analysis Services. Английский язык на рабочем уровне: чтение технической документации, переписка и участие в рабочих обсуждениях. Умение самостоятельно принимать технические решения, документировать их и доводить до промышленного результата. Что мы предлагаем: Масштабные задачи: Реальная возможность построить современную систему аналитики и возглавить её, став ключевым технологическим лидером компании. Стабильность и защищенность: Официальное оформление согласно ТК РФ, полностью «белая» и конкурентная заработная плата (размер обсуждается индивидуально по результатам интервью). Финансовая мотивация: Прозрачная годовая премия по результатам работы компании и выполнения KPI. Забота о здоровье: Полноценный пакет ДМС сразу после успешного прохождения испытательного срока. Комфортный график: Пятидневная рабочая неделя (5/2) с 9:00 до 17:30. Приятный бонус: Короткая пятница с 9:00 до 16:30 для отличного старта выходных. Локация и атмосфера: Классический офисный формат в самом центре Москвы (всего 5 минут от метро). Это позволяет команде быть на одной волне и оперативно решать любые архитектурные вопросы. Корпоративная культура: Корпоративные скидки на качественную FMCG-продукцию компании. Подарки сотрудникам на общепринятые праздники и новогодние подарки для детей. Социальные программы и материальная поддержка от компании к значимым жизненным событиям (свадьба, рождение ребенка и др.).