Senior/Middle+ Big Data Engineer (Рекламная платформа)
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.
Senior Data Engineer
Разработка и сопровождение корпоративной платформы данных: batch/streaming пайплайны, ETL/ELT, модели данных, оптимизация SQL, DataOps/CI-CD. Требуется опыт Data Engineer от 5 лет, Data Vault 2.0, Spark, Kafka, Airflow, Hadoop/Iceberg, dbt. Удалённо, оформление по ГПХ.
Data Engineer (команда B2C-SQL)
Разработка и доработка компонентов фреймворка для построения batch- и streaming-витрин данных на Scala/Java, включая оркестрацию, метаданные, Data Quality и API. Оптимизация производительности Spark-приложений на больших объёмах данных, покрытие кода тестами и взаимодействие с командами-пользователями платформы. Офисный формат в Москве, работа в кросс-функциональной Scrum-команде центра компетенций Data Engineering Сбера.
Инженер данных (Hadoop)
Разработка и поддержка витрин данных на базе Hadoop в Едином ПКАП B2C, подготовка датасетов для обучения моделей в FeatureStore, разработка ETL-процессов и реплик первичных данных. Требуется опыт построения витрин и ETL, уверенный SQL, Hadoop (HDFS, YARN, Hive), Spark, Java/Scala и Python. Работа в офисе рядом с м. Кутузовская с возможностью гибридного графика.