Ведущий разработчик DWH
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.
Программист DWH
Разработка и развитие платформы интеграции данных (Data Integration Hub): загрузка данных из источников (CDC, S3, REST, Oracle), проектирование staging-слоя в Oracle, реализация инкрементальных выгрузок и настройка коннекторов Kafka Connect. Требуются SQL/PLSQL, Oracle 19c/12c, Python и оптимизация производительности на больших объёмах данных.
Middle Data Engineer (СберAds)
Проектирование, разработка и поддержка data pipeline'ов в облачной среде, оптимизация производительности Spark-задач, настройка мониторинга и алертинга, внедрение практик Data Quality и DataOps. Требуется опыт от 3 лет, уверенные SQL и Apache Spark, промышленная разработка на Scala (или Python/PySpark), понимание архитектуры Lakehouse и оркестраторов типа Airflow.
Программист DWH
Разработка и развитие платформы интеграции данных (Data Integration Hub): загрузка данных из источников (CDC, S3, REST, Oracle), поддержка staging-слоя в Oracle, реализация инкрементальных выгрузок и коннекторов Kafka Connect. Требуется уверенное знание SQL/PL/SQL и опыт работы с Oracle 19c/12c и Python; плюсом — Kafka, Airflow, BI и навыки проектирования хранилищ данных. Формат работы на выбор: офис, гибрид или удалёнка, гибкий график, ДМС и полугодовые премии.