Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Дата аналитик
генерация резюме
сопроводительное письмо
описание
Команда GigaSearch создает поисковый сервис, отвечающий на запросы пользователей на естественном языке. Сервис обеспечивает доступ к актуальной информации для GigaChat, позволяя получать точные ответы на вопросы, включая свежие новости и события.
задачи
- Проектировать стратегии семплирования для потоковой оценки качества.
- Разрабатывать и поддерживать метрики качества поиска и генерации.
- Строить автоматические пайплайны оценки на основе языковых моделей.
- Организовывать краудсорсинговую разметку, включая написание инструкций и настройку контроля качества.
- Реализовывать пайплайны оценки от SQL-запроса до дашборда.
- Участвовать в дизайне и анализе A/B тестов.
- Генерировать гипотезы о причинах деградации качества и ставить задачи смежным командам.
требования
- Опыт в аналитике данных или оценке качества ML/NLP систем от трех лет.
- Уверенное знание статистики: доверительные интервалы, гипотезы, A/B тесты, метрики согласованности разметчиков.
- Практический опыт проектирования схем семплирования для потоков данных.
- Знание метрик поиска и понимание их применимости в разных задачах.
- Уверенное владение Python (Pandas, NumPy, SciPy, работа с API языковых моделей).
- Продвинутый SQL (ClickHouse, PostgreSQL): оконные функции, сложные агрегации, оптимизация.
- Умение самостоятельно закрывать задачу от идеи до результата.
- Будет плюсом опыт работы с RAG-системами, практика с фреймворками автоматической оценки (Ragas, DeepEval, TruLens, MLflow Evaluate), опыт работы с краудсорсинговыми платформами, знакомство с OpenSearch, ElasticSearch, опыт построения дашбордов и систем мониторинга, знакомство с Airflow.
условия
- Комфортный современный офис рядом с м. Кутузовская.
- Ежегодный пересмотр зарплаты, годовая премия.
- Корпоративный спортзал и зоны отдыха.
- Система обучения для профессионального и карьерного развития.
- Расширенный полис ДМС с первого дня работы и страхование для семьи.
- Программа ипотеки для сотрудников.
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
- Вознаграждение за рекомендацию друзей в команду Сбера.
навыки