Текст заказа
Работа в компании Яндекс для специалиста «Дата-аналитик». От 3 лет. Высокая заработная плата и социальные гарантии в IT-компании России
Вакансия «Дата-аналитик» в Яндексе — работа в компании Яндекс для IT-специалистов
Общие сервисы Яндекса
От 3 лет
Офис
Гибридный
Войти и откликнуться
AI-продукту нужны точные критерии качества: насколько полезен ответ, справляется ли агент с задачей, что меняется для пользователя. Ищем аналитиков, которые превращают такие вопросы в исследования и обоснованные выводы
Какие задачи вас ждут
Качество генеративных моделей — Yandex R&D
Предстоит оценивать достоверность и качество ответов генеративных моделей, разрабатывать метрики и подходы к оценке LLM, анализировать данные и координировать процесс разметки.
Качество поиска — Поиск с Алисой AI
Вы будете оценивать, насколько хорошо работают ранжирование, быстрые ответы, ответы Алисы и другие AI-сценарии.
Пользовательские и транзакционные сценарии — Независимый Ecom
Нужно будет исследовать работу агентов Алисы, качество органического ранжирования и путь пользователя в еком-сценариях.
Чат и Моя Память Алисы — Алиса и Умные устройства
Предстоит исследовать, как люди взаимодействуют с AI, и оценивать качество этих сценариев.
Другое
Также у нас есть много других задач в разных командах.
Почему здесь интересно:
Проверяем AI на сложных сценариях
Разрабатываем собственные бенчмарки: проверяем логику моделей, знание фактов, этичность, понимание контекста и реакцию на провокации
Используем AI в собственной работе
Внедряем LLM-агентов в аналитику: с их помощью ищем и быстрее обрабатываем данные, оптимизируем скрипты и находим инсайты на дашбордах
Видим эффект исследований в продукте
Ведём полный цикл анализа: выясняем, что ценно для пользователей, а после изменений измеряем их эффект. Связываем исследовательский вопрос с тем, как развивается продукт
Мы ждём, что вы
Уверенно владеете Python и SQL или YQL, умеете самостоятельно работать с большими объёмами данных
Знаете теорию вероятностей, математическую статистику и методы проверки гипотез, умеете проектировать и интерпретировать A/B-тесты и офлайн-эксперименты
Занимались машинным обучением, понимаете устройство ML-моделей и метрики их качества
Умеете формализовать исследовательский вопрос, обосновать выбор метрик, проверить их валидность и объяснить аномалии
Самостоятельно проводили исследования полного цикла и готовили обоснованные выводы
Будет плюсом, если вы
Работали с LLM, оценкой качества генерации или другими AI-системами
Работали с большими объёмами событийных данных и текстовых логов
Работали с DWH, BI-инструментами, продуктовыми воронками или деревьями метрик
Проектировали офлайн-метрики, бенчмарки или системы оценки качества моделей и продуктов
Автоматизировали аналитические процессы, разрабатывали и поддерживали собственные инструменты или пайплайны
Как выберем команду:
Обсудим ваш опыт и интересы, проведём технические секции и встречи с подходящими командами. После успешного прохождения этапов обсудим предложение о работе.
Узнать больше
Общие сервисы Яндекса
Бенефиты работы в Яндексе
AI-инструменты
Компенсация от 100М токенов для ваших экспериментов и оптимизации рутины.
Доступ к передовым моделям для ежедневной работы.
Здоровье
Рост и развитие
Спорт
И ещё
Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят:
Базовые услуги
Плановая помощь и неотложная за рубежом, страхование от несчастных случаев для любителей активного отдыха и лечение критических заболеваний.
Ментальное здоровье
Врачи в клиниках по ДМС, онлайн-консультации с психологами. А также психотерапия в офисах, где есть кабинет психотерапевта.
Ежегодные чекапы
Мы за превентивную заботу о здоровье, поэтому по ДМС можно проходить чекапы и регулярно вакцинироваться.
Больничный
30 дней в году оплачиваются — вы получите полную зарплату, как будто не болели.
Стоматология
Плановые процедуры, профессиональная чистка и экстренная помощь за рубежом.
Коррекция зрения
После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия.
Терапевты в офисах
Если почувствовали себя неважно, можно обратиться в кабинет врача-терапевта, такие есть во всех крупных офисах Яндекса.
Ведение беременности и роды
Оплачиваем ведение беременности и роды для сотрудниц и жён сотрудников, которые с нами более двух лет.
Страховка для родственников по системе 80/20: мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%. В страховку входит всё то же самое, что и у вас.
Больше о бенефитах
Все интересные вам вакансии в одном профиле
Войти и откликнуться
Посмотреть ещё
Аналитик-разработчик
Общие сервисы Яндекса
Аналитик-разработчик Общие сервисы Яндекса