Ищем техлида в службу подготовки и качества больших данных в связи с тем, что перестраиваем архитектуру ключевых контуров подготовки данных.

Мы обрабатываем несколько петабайт данных в сутки в batch и micro-batch контурах, чтобы обеспечивать данными сервисы Яндекса (Поиск, Видео, Картинки и др.). От нашей работы зависит качество ответа пользователям и скорость рантайма. Кроме того, мы пишем библиотеки, позволяющие эффективно и дёшево строить data science процессы в продуктовых командах, чтобы легче и быстрее внедрять новые фичи.

• проектировать архитектуру пайплайна обработки данных и модифицировать инфраструктурный стек;
• контролировать, чтобы соблюдались продуктовые требования (latency, полнота, стоимость обработки больших данных);
• оптимизировать ETL-процессы;
• выстраивать инфраструктуру для контроля качества данных;
• помогать потребителям обогащать данными ответы пользователям.

• работали с большими объёмами данных (поговорим о ваших завершённых проектах, о текущем стеке технологий);
• умеете спроектировать и защитить грамотное архитектурное решение, а также довести его до внедрения совместно с командой (предложим спроектировать сервис/систему, чтобы решить реальную задачу);
• умеете писать, читать и ревьюить код (стек преимущественно на C++, есть также Python);
• умеете добиваться результата в команде (были тимлидом или старшим разработчиком).