Вступить в клуб →
← К вакансиям
Wildberries70/100

Data Engineer

Опубликовано: 5 августа 2026
remoteБэкендfulltimerutrinosparks3iceberghive metastorelinuxbashpythonrangergreenplumclickhouse
Контакты и отклик открываются после вступления в клубВступить →
Data Engineer в Корпоративное хранилище #удаленка Компания: Wildberries 🔹Что нужно делать -Обеспечивать стабильную, производительную и безопасную работу Data Platfrorm на базе Trino, Spark, S3 и Apache Iceberg, включая администрирование и управление ролевой моделью доступа, документирование изменений в проекте -Настраивать, обновлять, мониторить и тюнить кластера Trino -Настраивать коннекторы (Iceberg, S3) -Оптимизировать производительность запросов (resource groups, query analysis) -Оптимизировать производительность Iceberg (partitioning, clustering, metadata management) -Разрабатывать и внедрять централизованные ролевые модели для доступа к данным и ресурсам платформы 🔹Какой опыт и знания нужны -Обладаете пониманием взаимодействия Spark с Iceberg и S3 -Имеете опыт эксплуатации Apache Iceberg (администрирование таблиц в формате Iceberg, настройка и использование Hive Metastore) -Обладаете пониманием и применением: compaction, expiration snapshots, time travel, schema evolution -Имеете навыки Linux, Bash, Python для автоматизации -Обладаете опытом управления политиками доступа и правами доступа через Ranger в S3 и Iceberg -Имеете опыт разработки и внедрения централизованной ролевой модели для доступа к данным и ресурсам платформы -Иметь опыт администрирования Greenplum или ClickHouse (установка, настройка, оптимизация, интеграция с S3/Iceberg). Откликнуться IT Jobs в Telegram | в VK | в Max

Похожие вакансии

Все вакансии →
MayflowerЛимасол, Кипрonsitefulltimesenior72

Senior Data Engineer

Mayflower ищет Senior Data Engineer для крупномасштабных развлекательных продуктов. Нужен опыт с ClickHouse, Spark, S3 с Iceberg/Hudi, dbt, Python, Airflow и Docker. Работа в офисе в Лимасоле, предусмотрена помощь с переездом.

airflowclickhousedbtdockerhudiiceberg+3
26 октября 2026
S7 GroupМоскваhybridfulltimelead75

TeamLead Data Engineer

TeamLead Data Engineer в S7 Techlab (IT-подразделение S7 Group) для управления командой разработки DWH и ETL процессов. Задачи: управление командой, формирование технических решений, разработка и оптимизация ETL, миграция с легаси. Требуется опыт от 3 лет, экспертный SQL и Python, знание MPP БД и оркестраторов ETL.

airflowdwhetlgreenplumkafkakubernetes+7
11 октября 2026
АБПМоскваremotefulltimesenior82

Data Engineer

Разработка, поддержка и оптимизация интеграционных потоков и витрин данных на стеке Lakehouse/BigData (Trino, Iceberg, S3, Spark, Airflow, Kafka, Flink) в крупном проекте, удалённо. Требуется опыт более 6 лет, знание SQL, Java/Python, реляционных БД, Hadoop-экосистемы и форматов данных.

sqljavapythonsparkhadoopdbt+6
9 октября 2026от 300 000 RUB
Сбер. ITМоскваonsitefulltimemiddle82

Data engineer

Разработка и поддержка дата-платформы банка в архитектуре Data Lakehouse на Hadoop: витрины данных, ETL/CTL на Spark и Oozie, NRT-пайплайны на Kafka. Задачи включают построение поставки данных в режимах Batch/NRT/RealTime, оптимизацию ETL и снижение latency доступа к данным, проектирование и валидацию архитектуры данных.

airflowapache airflowapache nifiapache sparkbibig data+36
8 октября 2026от 480 000 RUB