Вступить в клуб →
← К вакансиям
X5 Tech60/100

Data Engineer (Python + Spark)

Опубликовано: 1 июля 2026
onsiteotherМоскваrupysparkspark sqlhadoophiveairflowpython3dockerkubernetespostgresqlclickhousepytesttrino
Контакты и отклик открываются после вступления в клубВступить →
Data Engineer (Python + Spark) #офис Москва Компания: X5 Tech ☑️ Задача Мы строим end-to-end пайплайны, которые собирают данные из разных источников (онлайн и оффлайн-продажи, ERP, внешние API), очищают, трансформируют и подготавливают их для моделей машинного обучения (бустинг и нейронные сети). От качества этих пайплайнов зависит точность прогноза и миллионы управленческих решений в закупках и логистике • Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно) • Настраивать хранение и доступность данных в DWH • Автоматизировать интеграцию данных: продажи, акции, цены, остатки, погода, календари • Работать в связке с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей • Участвовать в развитии платформы прогнозирования спроса, делая её более надёжной, масштабируемой и удобной ☑️Наш стек • PySpark{2,3} / Spark SQL • Hadoop / Hive / Trino / S3 / clickhouse / postgres/ greenplum • Airflow • Python3 • Docker, YARN / k8s • pytest Откликнуться Python Job в Telegram | в VK | в Max

Похожие вакансии

Все вакансии →
Ozon БанкМоскваhybridfulltimemiddle82

Инженер данных

Разработка пайплайнов и витрин данных для скоринга, риск-аналитики и мониторинга кредитного портфеля Ozon Банка. Работа в гибридном формате в Москве в связке с риск-аналитиками и дата-сайентистами на стеке Python, SQL, Airflow, Spark, Kafka, ClickHouse/Vertica.

pythonsqlairflowsparkpysparkpostgresql+6
19 ноября 2026
STARTRIBE LTD.Сербия, Белградonsitefulltimemiddle74

Data Engineer

Продуктовая IT-компания ищет Data Engineer для построения и оптимизации инфраструктуры обработки больших данных в B2B-проектах сферы развлечений, игр и спорта. Задачи: проектирование DWH, ETL/ELT (batch и streaming), интеграции через Kafka/API/БД, Data Quality и мониторинг в Grafana. Стек: S3, Iceberg, ClickHouse, Trino, PySpark, Airflow, PostgreSQL, Docker/Kubernetes. Работа в офисе в Белграде.

pythonpysparkapache airflowsqlclickhousetrino+6
4 ноября 2026
Top SelectionРФ, удалённо, MSK ±3чremotefulltimesenior82

Senior Data Engineer (ETL-миграция)

Ищут Senior Data Engineer для миграции ETL-системы телеком-оператора с Oracle/Informatica на Apache стек. Задачи включают перенос бизнес-логики в SQL, разработку DAG в Airflow, пайплайны NiFi, Spark-джобы и мониторинг. Оформление только как ИП, удалённая работа по МСК ±3ч.

airflowapache sparkclickhouseetlgreenplumhadoop+9
30 октября 2026250 000–270 000 RUB
МТСМоскваhybridintern80

Стажер Data Engineer

Разработка ETL-процедур для сервисов datagov с использованием Python, Pyspark, Hadoop, Airflow; сбор данных из различных источников; создание и наполнение витрин в Hive/Postgres/Clickhouse/Greenplum.

pythonsqlpysparkhadoopairflowpandas+5
4 июля 2026