Big Data Engineer
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.
Инженер данных (Hadoop)
Разработка и поддержка витрин данных на базе Hadoop в Едином ПКАП B2C, подготовка датасетов для обучения моделей в FeatureStore, разработка ETL-процессов и реплик первичных данных. Требуется опыт построения витрин и ETL, уверенный SQL, Hadoop (HDFS, YARN, Hive), Spark, Java/Scala и Python. Работа в офисе рядом с м. Кутузовская с возможностью гибридного графика.
Data Engineer
Ищем опытного Data Engineer для разработки и развития корпоративного хранилища данных: проектирование ETL/ELT-потоков, создание витрин, оптимизация SQL-запросов на PL/pgSQL и развитие архитектуры DWH. Требуется практический опыт с экосистемой Hadoop (HDFS, YARN, Spark, Kafka, NiFi), Greenplum или PostgreSQL и ETL-инструментами (SAS DI, Informatica PowerCenter). Формат работы — можно удалённо, полная занятость, уровень Senior.
Data Engineer / Аналитик-разработчик (Middle/Middle+)
Разработка и оптимизация витрин данных (DWH) и ETL-процессов для проекта в интересах Сбера, работа с большими объёмами данных. Роль совмещает функции аналитика (сбор и анализ бизнес-требований к данным) и разработчика. Стек: SAS, Oracle, Greenplum, Hadoop, Kafka, Spark, Hive, Java, Python, а также DevOps-практики и Confluence/Jira.