Старший Python - разработчик, DWH tools

Привет! Мы команда, которая разрабатывает инфраструктуру и фреймворк для создания ETL-процессов на основе конфигураций. Мы ищем сильного Python-разработчика, который будет развивать инструменты обработки данных, создавать backend-компоненты и помогать командам эффективно работать с большими объёмами данных.

Наш стек

• Python, PostgreSQL, Redis, Kafka.

• Vertica, Trino, Hadoop.

Вы будете

• Развивать ETL-фреймворк: создавать и улучшать инфраструктуру, которая позволяет описывать процессы обработки данных через конфигурации.

• Разрабатывать backend-компоненты и обвязки: реализовывать прикладную логику и вспомогательные сервисы, необходимые для работы фреймворка.

• Работать с SQL-шаблонами: дорабатывать шаблоны, из которых формируются SQL-запросы, учитывая особенности используемых баз данных.

• Решать задачи на стыке Python и баз данных: разрабатывать компоненты, взаимодействующие с БД, и учитывать принципы их работы, в том числе при асинхронном выполнении операций.

• Развивать инфраструктуру обработки данных: помогать обеспечивать преобразование исходных данных в структурированные и подготовленные для дальнейшего использования наборы данных.

• Взаимодействовать с командами данных: развивать инструменты и инфраструктуру с учётом задач специалистов, которые непосредственно работают с данными.

Нам важно

• Сильные навыки разработки на Python.

• Хорошее знание SQL и понимание принципов работы реляционных баз данных.

• Понимание асинхронного программирования и умение писать асинхронный код.

• Понимание того, как устроены базы данных и как особенности их работы влияют на выполнение запросов.

Будет плюсом

• Понимание принципов работы аналитических и распределённых баз данных.

• Общее представление о Big Data и инструментах обработки больших объёмов данных.

• Опыт работы с Vertica, Trino или Hadoop.