Scala Developer (Hadoop, ETL)
Похожие вакансии
Все вакансии →Разработчик Scala
Разработка ETL-потоков на платформе Hadoop (Scala + Spark SQL) для Корпоративного хранилища данных Сбера, оптимизация расчётов и повышение стабильности приложений. Требуется уверенное знание Scala, SQL/JDBC, опыт работы с технической документацией; плюсом — Hadoop, Hive, Spark, DWH и Unix.
Big Data Engineer
Инженер данных в команду аналитики транзакционного бизнеса Сбера: проектирование и разработка аналитических витрин и ETL/ELT-пайплайнов в Hadoop-экосистеме, оптимизация Hive/Spark SQL, работа с HDFS и Parquet. Требуется от 1 года опыта DE/DA/ETL, знание SQL и Hadoop-стека; работа в офисе у м. Кутузовская.
Инженер данных (Hadoop)
Разработка и поддержка витрин данных на базе Hadoop в Едином ПКАП B2C, подготовка датасетов для обучения моделей в FeatureStore, разработка ETL-процессов и реплик первичных данных. Требуется опыт построения витрин и ETL, уверенный SQL, Hadoop (HDFS, YARN, Hive), Spark, Java/Scala и Python. Работа в офисе рядом с м. Кутузовская с возможностью гибридного графика.
Data Engineer (Hadoop, Scala)
Разработка и оптимизация ETL/ELT-конвейеров и администрирование Hadoop/Spark-инфраструктуры (HDFS, YARN, Hive, HBase) для высоконагруженной системы сбора и анализа данных из СМИ и соцмедиа (100+ млн сообщений в сутки). Работа с потоковой обработкой (Kafka, Spark Streaming), оптимизация распределённых вычислений и участие в проектировании архитектуры данных.
