Senior Data Engineer
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Senior Python-разработчик
Разработка высоконагруженных распределённых решений на Apache Spark для системы индивидуализации ценообразования банковских продуктов физлиц с использованием AI-агентов. Проектирование batch/streaming ETL, поддержка DWH/Data Lake/LakeHouse, оптимизация SQL и Spark SQL, участие в архитектурных сессиях и code review.
Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.
Data Engineer
Домклик ищет Data Engineer в AI-команду для развития Feature Store с тысячами фичей по недвижимости, клиентам и рынку. Задачи: поддержка и развитие Feature Store, Data Governance/Data Quality (OpenMetaData), проектирование пайплайнов для ML-моделей и переход от офлайн-батчей к потоковой архитектуре реального времени. Требуются Python, оркестрация (dbt/airflow/beam), Greenplum/PostgreSQL/ClickHouse, понимание архитектуры данных (SCD).
Data Engineer
Ищем опытного Data Engineer для разработки и развития корпоративного хранилища данных: проектирование ETL/ELT-потоков, создание витрин, оптимизация SQL-запросов на PL/pgSQL и развитие архитектуры DWH. Требуется практический опыт с экосистемой Hadoop (HDFS, YARN, Spark, Kafka, NiFi), Greenplum или PostgreSQL и ETL-инструментами (SAS DI, Informatica PowerCenter). Формат работы — можно удалённо, полная занятость, уровень Senior.