← Все заказы

Инженер данных в Путешествия

12 ч назад

Текст заказа

Инженер данных в Путешествия
Вакансия Инженер данных в Путешествия, работа в компании Яндекс (Поисковый портал), в Москве. Локации: Москва. Зарплата: 400 000 — 500 000 ₽/мес на руки. Дата публикации: 07.10.2026.
Вакансия Инженер данных в Путешествия, работа в Яндекс (Поисковый портал), в Москве — getmatch — getmatch В приложении удобнее Установить Вакансия в архиве Компания больше не ищет сотрудника. Посмотрите похожие предложения Все вакансии Data Engineering Москва Senior в Яндекс (Поисковый портал) 400 000 — 500 000 ₽/мес на руки Москва (Парк культуры) Гибрид Специализация Data Engineering Уровень Senior Требуемый опыт 3 + лет Поделиться Поделиться Технологии/инструменты SQL Python Java Go ClickHouse API Apache Airflow Databases ETL Наша команда превращает терабайты данных в понятные и полезные инсайты, которые используют аналитики и сервис, помогающий миллионам людей путешествовать. Наш продукт растёт огромными темпами, и вместе с ним растут наши задачи, например, развитие собственного DWH. Хранилище у нас построено на системах хранения данных YTsaurus (кластер MapReduce собственной разработки) и ClickHouse. Для разработки, оркестрации и мониторинга ETL-процессов используется собственный фреймворк, созданный внутри Яндекса. Для организации модели хранения данных на разных уровнях применяются различные методологии проектирования хранилищ данных: Lambda-архитектура, Data Lake, Data Vault. Какие задачи вас ждут: Разработка, сопровождение и ревью ETL-процессов поставки данных. Вам предстоит создавать конвейеры для извлечения, трансформации и загрузки данных из различных источников, настраивать их расписание и мониторинг. Важно будет регулярно проверять и улучшать существующий код, оперативно исправлять возникающие ошибки, а также тщательно документировать все преобразования и потоки данных — как собственные, так и коллег, обеспечивая соответствие стандартам качества и производительности. Проектирование структуры хранения данных в разных слоях хранилища. Вы будете определять оптимальные схемы организации данных для каждого слоя, учитывая требования к скорости запросов и объёму хранения. Задача включает разработку моделей данных, настройку партиционирования, индексации и сжатия для повышения производительности, а также согласование структур с командами аналитики и разработки и адаптацию схем при изменении бизнес-процессов. Выявление и оптимизация неэффективных участков в процессах поставки данных. Вам нужно будет анализировать время выполнения ETL-задач, профилировать данные для обнаружения аномалий и избыточности, пересматривать алгоритмы трансформации для снижения нагрузки на систему. Погружение в данные прикладных бизнес-областей и становление в них экспертом. Вы будете детально изучать бизнес-процессы и ключевые метрики компании, разбираться в логике расчёта показателей и источниках их формирования. Мы ждем, что вы: Проектировали DWH (слои, модели хранения данных, ETL-процессы). Разрабатывали ETL-процессы на Apache Airflow или аналогах. Настраивали поставки данных по API. Разбираетесь в SQL на уровне эксперта. Пишете на одном из языков высокого уровня (Python, Go, Java и т. д.). Понимаете устройство и архитектуру реляционных баз данных. Знаете основные алгоритмы и структуры данных, особенно используемые в работе с большими данными. Будет плюсом, если вы: Пользовались хотя бы одной MPP-СУБД (Greenplum, ClickHouse, Vertica, Teradata и т. д.). Понимаете принципы работы технологий распределённой обработки данных (Hadoop, MapReduce и MPP). Что вы получите: Масштаб: работа с инфраструктурой и данными Яндекса — это задачи, которые редко встречаются даже в крупных международных компаниях. Влияние: ваши решения будут напрямую влиять на эффективность ключевых бизнес-процессов. Экспертность: возможность обмениваться опытом с сильнейшими специалистами отрасли и расти профессионально. Ресурсы: доступ к передовым технологиям и инструментам для реализации самых смелых идей. Карьерные перспективы: возможности для профессионального и лидерского роста внутри одной из ведущих IT-компаний России. Поделиться О компании Яндекс (Поисковый портал) Сфера Продуктовая компания Инвестиции $100M+ Размер 1001+ Яндекс — одна из крупнейших ИТ-компаний в России. Мы развиваем самую популярную в стране поисковую систему и создаём сервисы, которые помогают людям в повседневных делах. С их помощью можно искать информацию в интернете, слушать музыку, выбирать товары и места, заказывать еду, перемещаться по городу и делать многое другое. Яндекс предлагает также продукты для бизнеса.

Похожие заказы