Стажёр Аналитик данных, ML модерация и контроль качества

Привет! Это команда Обработки данных в отделе ML-модерации.
Мы ищем начинающего специалиста, которому интересно работать на стыке ML и данных. Команда состоит из опытных и весёлых аналитиков данных, которые всегда готовы прийти на помощь в трудную минуту!

ML-модерация наполнена различными процессам обработки и проверки пользовательских данных, поэтому в нашу команду могут прилетать абсолютно разные задачи связанные с анализом данных и моделей, исследованиями новых подходов к оценке качества существующих решений, разработку новых продуктовых решений и многое другое.

Ты будешь

• Тестировать новые алгоритмы обработки и исследования данных, а также выстраивать автоматизированые процессы, для упрощения жизни.

• Организовывать и планировать хранение больших данных.

• Писать sql–запросы в различные БД.

• Обрабатывать данные с помощью spark.

• Использовать различные ML-модели для автоматической проверки данных.

• Строить и изучать зависимости с помощью инструментов python.

Нам важно

• Знание основных библиотек Python (в том числе регулярные выражения).

• Знание теории вероятностей и математической статистики.

• Понимание устройства DWH системы.

• Умение работать с hdfs и pyspark.

• Знание SQL (диалекты clickhouse, vertica), умение оптимизировать запросы.

• Понимание и использование ML-алгоритмов для анализа данных желательно.

Будет плюсом

• Grafana

• Superset

• AirFlow

• опыт работы с запросами http/grpc, в том числе через swagger

• опыт работы с CI/CD пайплайнами в gitlab

• опыт работы c NVIDIA Triton Inference Server и docker