Data Acquisition Tech Lead (GigaChat)
Grade: Lead
Salary: от 700 000 ₽/мес до налогов
Skills: NLP, Python, Ytsaurus, Go, C++, Data Scientist & Machine Learning / Data Engineering
Company URL:
Description:
Мы создаём языковые модели нового поколения, и качество обучающих данных лежит в основе всего, что мы делаем. Команда сбора данных отвечает за поиск источников, веб-краулинг, загрузку и лицензирование разнообразных высококачественных датасетов, на которых обучаются наши модели.
В этой роли вы будете отвечать за техническое развитие систем веб-краулинга и загрузки данных, которые поставляют петабайты текстов в обучающие пайплайны. Это роль для сильного техлида: человека, который не только проектирует и развивает критически важные системы, но и задаёт инженерные стандарты, помогает команде принимать сильные технические решения и распространяет экспертизу внутри направления.
Позиция предполагает значительное влияние на архитектуру и развитие команды и даёт естественную траекторию роста в сторону роли тимлида.
Чем предстоит заниматься
Проектировать, развивать и поддерживать масштабируемую инфраструктуру веб-краулинга, способную обрабатывать миллиарды страниц на разных языках и из разных доменов.
Развивать пайплайны загрузки данных, которые преобразуют сырой контент в структурированные, дедуплицированные и обогащённые метаданными датасеты, готовые к дальнейшей обработке.
Разрабатывать алгоритмы планирования и приоритизации краулинга, повышающие актуальность, покрытие и разнообразие данных в условиях ограничений по вычислительным ресурсам и пропускной способности.
Создавать и поддерживать системы поиска и индексирования, которые позволяют исследователям и инженерам находить, запрашивать и отбирать данные из полного корпуса.
Вместе с командой обработки данных определять схемы, сигналы качества и интерфейсы передачи данных между этапами сбора и подготовки.
Обеспечивать наблюдаемость систем: метрики, логирование, алертинг и инструменты для быстрого реагирования на инциденты.
Оценивать и подключать внешние источники данных, согласовывая технические требования к форматам поставки и API.
Выступать техническим ориентиром для команды: помогать коллегам в выборе решений, проводить архитектурные обсуждения, участвовать в code review и повышать инженерную зрелость направления.
Менторить инженеров команды и распространять лучшие практики проектирования, эксплуатации и развития систем сбора данных.
Мы ожидаем
Высшее образование в области computer science, математики или смежной области.
Не менее 6 лет опыта в разработке ПО, из которых как минимум 3 года — в создании масштабных распределённых систем.
Глубокую экспертизу в веб-краулинге, скрейпинге или информационном поиске в масштабе миллиардов документов.
Уверенное владение Python, Go или C++, а также опыт работы с Kubernetes или аналогичными системами оркестрации контейнеров.
Практический опыт работы с распределёнными системами хранения данных и key-value- или документоориентированными базами данных.
Хорошее понимание сетевых протоколов и веб-стандартов, значимых для краулинга.
Опыт ведения сложных технических инициатив — от архитектурного замысла до production-эксплуатации.
Способность быть техническим лидером для команды: аргументированно принимать решения, синхронизировать инженеров вокруг архитектурного подхода и развивать экспертизу коллег.
Сильные письменные и устные коммуникативные навыки; умение влиять на технические решения в кросс-функциональном взаимодействии.
Будет плюсом
Опыт работы с YTSaurus.
Опыт эксплуатации веб-краулеров петабайтного масштаба.
Бэкграунд в NLP, извлечении текста или определении языка для многоязычных корпусов.
Опыт менторинга инженеров и неформального лидерства в сильной технической команде.
Что предлагаем
Кластеры YTSaurus с большим количеством ресурсов: десятки петабайт + десятки тысяч ядер.
Сильная команда выпускников МФТИ, ВШЭ, МГУ, много людей с опытом работы в профильном БигТехе.
комфортный современный офис рядом с м. Кутузовская.
гибридный формат работы (2 дня в офисе, 3 дня на удалёнке).
ежегодный пересмотр зарплаты, годовая премия.
корпоративный спортзал и зоны отдыха.
система обучения для профессионального и карьерного развития.
расширенный полис ДМС с первого дня работы и страхование для семьи.
льготная программа ипотеки для сотрудников.
бесплатная подписка СберПрайм+, скидки на продукты компаний-партнёров.
вознаграждение за рекомендацию друзей в команду Сбера.
17:["$","$L18",null,{"initialState":{"status":"anonymous"},"children":[["$","$L19",null,{}],["$","main",null,{"children":["$","$L1a",null,{"vacancySlug":"34614-data-acquisition-tech-lead-gigachat","initialVacancy":{"published_at":"2026-06-28T09:00:56.159499","is_active":true,"position":"Data Acquisition Tech Lead (GigaChat)","language":"ru","type":"web_and_tg","id":34614,"offer_type":"vacancy","cover_letter_required":false,"cover_letter_placeholder":null,"source":"manual","incognito_publication":false,"analytics_id":"plMoK7vm","salary_description":"от 700 000 ₽/мес до налогов","salary_hidden":true,"salary_display_from":null,"salary_display_to":null,"salary_currency":null,"salary_taxes":"gross","salary_is_total":false,"salary_by_our_version":false,"salary_hidden_variant":null,"offer_description":"Что делать: Проектировать и поддерживать масштабируемую инфраструктуру веб-краулинга для обработки миллиардов страниц, развивать пайплайны загрузки и преобразовывать сырой контент в дедуплицированные датасеты с метаданными, разрабатывать алгоритмы планирования и приоритизации краулинга.\n\nО компании: Сбербанк — крупнейший банк в России, Центральной и Восточной Европе, один из ведущих международных финансовых институтов.","skills_objects":[{"name":"NLP","slug":"nlp","is_custom":false},{"name":"Python","slug":"python","is_custom":false},{"name":"Ytsaurus","slug":"ytsaurus","is_custom":false},{"name":"Go","slug":"go","is_custom":false},{"name":"C++","slug":null,"is_custom":true}],"url":"/vacancies/34614-data-acquisition-tech-lead-gigachat","description_html":null,"english_level":{"name":"C1/C2 — Advanced / Fluent","vacancy_description":"Говорите, читаете, пишете одинаково свободно на любые темы"},"location_requirements":[{"location_id":"moscow__mo__russia","format":"hybrid","exclude":false,"ancestors":["moscow","mo__russia","russia","_cu-europe","_cu-emea","_cu-world"],"metros":[],"city":"Москва","country":"Россия"},{"location_id":"moscow__mo__russia","format":"hybrid","exclude":false,"ancestors":["moscow","mo__russia","russia","_cu-europe","_cu-emea","_cu-world"],"metros":["м. Кутузовская"],"city":"Москва","country":"Россия"}],"location_items":[{"label":"Москва","format":"hybrid","exclude":false},{"label":"Москва (м. Кутузовская)","format":"hybrid","exclude":false}],"application":null,"viewed":false,"company":{"id":null,"name":"Сбер","logotype":"8f5d6d49-bb76-4250-9aa9-267e36fc5273.png","salary_hidden_variant":null,"url":"/companies/GNRXrNQz-sber","industry":"Банки / Финтех","post_to_job_aggregators":true,"investments":"","size":"1001+","short_description":"Сбербанк — крупнейший банк в России, Центральной и Восточной Европе, один из ведущих международных финансовых институтов. Самый дорогой российский бренд и самый сильный банковский бренд в мире по версии Brand Finance.
"},"one_day_offer_content":null,"one_day_offer_content_v3":null,"specialization":"Data Scientist & Machine Learning / Data Engineering","seniorities":["lead"],"team_size":null,"stack_description":"","short_description":"","description":"$1b","is_form_my_company":null,"is_my":null,"required_years_of_experience":5,"og":{"title":"Вакансия Data Acquisition Tech Lead (GigaChat), работа в Сбер, в Москве — getmatch","description":"Вакансия Data Acquisition Tech Lead (GigaChat), работа в компании Сбер, в Москве. Локации: Москва. Зарплата: от 700 000 ₽/мес до налогов. Дата публикации: 28.06.2026.","image_url":"