Data Engineer

Data Engineer в Маркет #офис #гибрид Компания: Яндекс 🔹Какие задачи вас ждут -Принятие конечных сетевых решений по реализации поставок данных Вам предстоит проектировать схемы поставок данных, выбирать подход к внесению доработок в витрины за оптимальное время с минимизацией рисков от релизов. И ещё нужен будет критический взгляд на результат в интересах потребителей данных. -Развитие фреймворков обработки данных Вы будете применять существующие инструменты работы с данными и выделять их недостатки, продвигать повестку по их улучшению или поиску новых для более эффективного решения задач. -Руководство реализацией сложных технических поставок Нужно будет разбираться в алгоритмической составляющей инструментов и находить эффективные решения, в том числе упрощая постановку задачи. 🔹Мы ждём, что вы -Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов -Умеете проектировать DWH: слои, модели хранения данных, процессы ETL -Хорошо понимаете принципы работы распределённых систем Hadoop или YTsaurus, ClickHouse -Умеете выбирать технологии для решения конкретных задач -Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными -Имеете опыт работы от трёх лет -Умеете работать в командной строке Unix-подобных систем (Linux, macOS) Откликнуться IT Jobs в Telegram | в VK | в Max