Инженер DWH
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Технический лидер DWH
Технический лидер направления DWH в ООО «Датаномика» на проект крупного российского банка. Задачи: анализ требований и Data Governance, проектирование и разработка ETL-витрин на SQL/Python/Spark/Airflow, постановка задач разработчикам, тестирование, документация (FSD, ER-модели, архитектурные Vision/OTAP), контроль качества данных и поддержка решений как 3-я линия. Формат удалённый или гибридный, официальное оформление по ТК РФ.
Data Engineer
Развитие корпоративной платформы данных и DWH крупнейшего DIY/e-commerce ритейлера: миграция ETL-процессов с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, разработка надёжных пайплайнов и проверок качества данных. Требуется опыт Data Engineer от 3 лет, уверенный SQL/Microsoft SQL Server, Python, Airflow, dbt и понимание архитектуры DWH.
Java-разработчик
Разработка хранилища данных и ETL для финансового блока банка из топ-5: реализация алгоритмов обработки распределённых данных на Java 8+ и Apache Spark, оптимизация, рефакторинг, code review и покрытие кода тестами. Требуется уверенное знание Java, Spring, SQL и базовое — Hadoop.
Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.