Разработчик корпоративного хранилища данных
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Data Engineer DWH
Разработка платформы данных: создание инструментов и сервисов для инженеров данных, пайплайнов и ETL/ELT-процессов на Python и Apache Spark, оптимизация импорта/экспорта данных между Greenplum, ClickHouse, PostgreSQL и S3. Работа с большими объёмами данных, распределёнными и MPP-системами, участие в проектировании архитектуры платформы.
Data Engineer
Ищем опытного Data Engineer для разработки и развития корпоративного хранилища данных: проектирование ETL/ELT-потоков, создание витрин, оптимизация SQL-запросов на PL/pgSQL и развитие архитектуры DWH. Требуется практический опыт с экосистемой Hadoop (HDFS, YARN, Spark, Kafka, NiFi), Greenplum или PostgreSQL и ETL-инструментами (SAS DI, Informatica PowerCenter). Формат работы — можно удалённо, полная занятость, уровень Senior.
Data engineer
Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.
SQL Разработчик
Разработка и поддержка корпоративных информационно-аналитических систем в BI-компании GlowByte: оптимизация SQL-запросов, настройка ETL-процессов, построение аналитических витрин и DAG в Airflow на Greenplum/MPP-СУБД. Работа в офисе на Кутузовской, опыт 1–3 года, доход до 180 000 RUB до вычета налогов.