Дата аналитик
генерация резюме под вакансию
сопроводительное письмо
описание
Команда занимается развитием интеллектуальных агентов Алисы, улучшением качества ответов моделей, анализом поведения нейросетей, а также построением процессов оценки и обучения языковых моделей.
задачи
- Улучшать качество LLM-агентов Алисы через изучение ответов моделей, выявление ошибок и применение методов prompt engineering и context engineering;
- Участвовать в приёмке новых версий моделей, анализировать результаты экспериментов и сравнивать модели по ключевым метрикам качества;
- Формировать задания на разметку, готовить корзины данных, контролировать качество разметки и подготавливать обучающие датасеты;
- Применять статистические методы для проверки гипотез и работать с системами автоматической оценки ответов;
- Писать аналитические скрипты на Python для обработки данных и участвовать в развитии процессов оценки и улучшения работы LLM-агентов.
требования
- Уверенное владение Python и опыт работы с данными;
- Опыт работы с текстовыми данными или задачами NLP;
- Понимание базовых статистических методов и опыт анализа результатов экспериментов с помощью статистических тестов;
- Умение анализировать метрики качества моделей и проверять гипотезы;
- Опыт подготовки и структурирования датасетов;
- Внимательность к деталям и способность работать с большими объёмами текстовых данных;
- Способность разбираться в сложных системах и находить причины ошибок моделей;
- Будет плюсом опыт работы с LLM или генеративными моделями, опыт работы с разметкой данных или управления процессом разметки, опыт построения evaluation-пайплайнов для моделей, понимание принципов работы современных LLM.
условия
- Расширенная медицинская страховка с первого месяца, включающая плановую и неотложную помощь, лечение критических заболеваний, ментальное здоровье, ежегодные чекапы и стоматологию;
- Оплата 30 дней больничного в году в полном объёме;
- Покрытие коррекции зрения после года работы;
- Наличие кабинетов терапевтов в крупных офисах;
- Оплата ведения беременности и родов для сотрудников и их супругов при стаже от двух лет;
- Страхование родственников по системе 80/20.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.