data engineer

выше рынка на 35,5%

вакансия 280 000 ₽

в среднем 206 681 ₽

Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

генерация резюме под вакансию

Добавь резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Подразделение в Министерстве здравоохранения, находящееся в прямом подчинении у Министра, привлекается для решения приоритетных задач и управления ведомственными проектами.

задачи

Проектировать, разрабатывать и сопровождать ETL/ELT-процессы для загрузки, преобразования и контроля качества данных;
Разрабатывать и оптимизировать сложные DAG в Apache Airflow;
Проектировать архитектуру пайплайнов данных с учетом надежности, масштабируемости и производительности;
Интегрировать данные из различных источников: PostgreSQL, внешние API, webhook, S3-совместимые хранилища и другие системы;
Разрабатывать и сопровождать пайплайны обработки данных на Python и Apache Spark;
Работать с lakehouse-архитектурой и таблицами Apache Iceberg;
Оптимизировать SQL-запросы, ETL/ELT-процессы и инфраструктуру обработки данных;
Писать тесты для пайплайнов данных, обеспечивать качество и стабильность решений;
Проводить code review и участвовать в развитии инженерных стандартов команды;
Взаимодействовать с аналитиками, BI-специалистами и разработчиками для реализации бизнес-требований к данным;
Участвовать в сопровождении инфраструктуры и разборе инцидентов.

требования

Опыт работы дата-инженером, ETL-разработчиком или бэкенд-разработчиком от 1 года;
Уверенное знание Python;
Уверенное знание SQL, опыт написания и оптимизации сложных запросов;
Практический опыт работы с PostgreSQL;
Опыт работы с Apache Airflow, умение самостоятельно создавать и сопровождать сложные DAG;
Понимание архитектуры пайплайнов данных и умение проектировать технические решения;
Опыт разработки ETL/ELT-пайплайнов;
Опыт оптимизации производительности обработки данных;
Навыки написания тестов;
Опыт проведения code review;
Опыт работы с различными источниками данных и интеграциями;
Самостоятельность, системное мышление, ответственность.

условия

Зарплата 200 000 – 280 000 ₽ на руки;
Полностью белая заработная плата по ТК РФ;
Ненормированный график с компенсацией переработок дополнительными выходными днями;
Офис в центре города (м. Трубная/Цветной бульвар).

навыки

python sql etl apache airflow apache spark postgresql lakehouse apache iceberg api webhook s3 code review

Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

Добавить в отклики

Telegram В отклики