Старший Java-разработчик, Инфраструктура данных

Привет! Это команда Инфраструктуры данных ML платформы. Команда занимается созданием и развитием Feature Store - ключевого продукта для всех команд машинного обучения в компании.

О продукте: Feature Store - это новый и активно развивающийся сервис, который:

• хранит исходные данные для обучения моделей.

• используется командами поиска, рекомендаций, модерации и рекламы.

• хранит более 10 ПБ данных.

• обрабатывает нагрузки в тысячи RPS.

• является критически важной частью ML-инфраструктуры компании.

Наш стек

• Java, Python, PostgreSQL, Kafka, Linux, Hadoop, Spark, Go.

Вы будете

• Разрабатывать и развивать высоконагруженные сервисы Feature Store.

• Проектировать и внедрять надежные и масштабируемые решения для хранения и обработки данных.

• Интегрировать сервисы с ML-пайплайнами и инфраструктурой данных.

• Оптимизировать производительность, устойчивость и отказоустойчивость системы.

• Принимать участие в архитектурных решениях и техническом развитии платформы.

Нам важно

• Уверенное знание Java.

• Опыт разработки под Linux.

• Понимание принципов работы распределённых систем.

Будет плюсом

• Опыт работы с Hadoop, Spark.

• Знание Python и/или Go.

• Опыт работы с высоконагруженными сервисами и data-platform решениями.

• Понимание ML-инфраструктуры и жизненного цикла данных.

Мы предлагаем

• Работу над продуктом, который используется всеми ML-командами компании.

• Большие данные, реальные высокие нагрузки и сложные инженерные задачи.

• Возможность влиять на архитектуру и развитие нового продукта.

• Профессиональный рост в области data и ML-инфраструктуры.