Data Engineer
генерация резюме под вакансию
сопроводительное письмо
описание
Cinimex является разработчиком программного обеспечения и системным интегратором, работающим с российскими банками, ритейлерами, производственными и добывающими компаниями. Организация занимается разработкой на микросервисной архитектуре, машинным обучением, искусственным интеллектом, интернетом вещей, продуктовым направлением и автоматизацией предприятий.
задачи
- Разрабатывать ETL-пайплайны (Apache Spark, HDFS, ClickHouse, Hive, Greenplum);
- Разрабатывать витрины данных в Greenplum и ClickHouse;
- Оркестровать ETL-процессы;
- Оптимизировать ETL-процессы (батчинг, ретраи, SLA-контроль);
- Взаимодействовать с BI-разработчиками и DevOps для доставки данных в Superset.
требования
- Экспертный опыт работы с Apache Spark от 4-5 лет (оптимизация джобов, работа с зависимостями, настройка памяти и shuffle-операций);
- Опыт работы с ClickHouse;
- Опыт работы с Hadoop (HDFS, Hive);
- Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных;
- Опыт оптимизации ETL-пайплайнов и SQL кода;
- Продвинутые знания SQL;
- Готовность осваивать Java для использования Spark.
условия
- Работа в аккредитованной IT-компании;
- Гибкое начало рабочего дня с 08:00 до 11:00 по МСК;
- ДМС со стоматологией, телемедициной и полисом ВЗР;
- Возможность взять 7 дней больничного в году без оформления документов;
- Поэтапная адаптация от HR и линейного руководителя;
- Регулярные ревью, обсуждение карьерных целей и индивидуальный план развития;
- Оплата IT-конференций, курсов, тренингов и сертификаций;
- Корпоративный английский;
- Поддержка в развитии личного бренда, подготовке к выступлениям и написании статей;
- Внутренние митапы и корпоративные активности.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.