Работа в Москве, вакансия - Python developer (Data Engineer) • Москва - id359 (вакансия в архиве)

Работа в Admitad - это работа в международной компании. Наша команда - это единомышленники и друзья, объединенные общей целью. Наши офисы расположены в Германии, России, Украине, Белоруссии, Индии, Бразилии и ОАЭ, а всего нас более 700 человек.
Наша Миссия состоит в создании глобальной экосистемы, позволяющей продавать и зарабатывать в интернете, соединяя рекламодателей и партнеров на одной платформе.

В данный момент мы расширяем наш Отдел по работе с Big Data и ищем в команду Data Engineer для организации перехода на Data Driven стратегию развития компании.

Используемые технологии: ClickHouse, Logstash, Python, Ansible, Grafana, Gitlab.

Ваши задачи:

• Проектирование, разработка и поддержка инфраструктуры для хранения и обработки BigData в ClickHouse

• Разработка и оптимизация ETL-процессов обработки и анализа данных на Python и Logstash

• Отслеживание качества данных и своевременное решение связанных проблем

• Визуализация и аналитика данных (matplotlib/plotly, numpy, pandas, jupyter и т.д. или аналоги)

• Разработка внутренних и публичных API для взаимодействия между сервисами

• Создание ML-моделей и перенос моделей машинного обучения в кластер

• Тестирование и внедрение новых Business Intelligence продуктов

• Помощь и консультирование разработчиков, аналитиков и data scientist’ов

• Ведение документации по разрабатываемым и внедряемым решениям.

Что хотим:

• Умение работать с системой контроля версий Git

• Уверенно владеет Python 3.6+

• Знание и опыты работы с bash и Linux (Ubuntu + утилиты)

Идеальный кандидат имеет опыт работы с:

• ClickHouse (или другими OLAP базами данных)

• стэком ELK (в т.ч. написание и отладка конфигов Logstash)

• SQL-базами данных (MySQL, PostgreSQL)

• Хорошее знание SQL, оптимизация и отладка запросов

• Мониторингом высоконагруженных сервисов

• Docker

• Написанием пайплайнов для Gitlab CI или аналогов

Будет плюсом:

• Желание и способность самостоятельно изучать новые BigData технологии, постоянное самосовершенствование
• Опыт создания REST сервисов c применением Flask / Redis / RabbitMQ / Kafka / Zookeeper
• Опыт проектирования высоконагруженных сервисов (в т.ч. управление очередями для задач на высоконагруженных сервисах)
• Знание Grafana
• Знание дополнительно одного из языков JS / Java / Ruby / C++
• Знания в области data science и аналитики.

Что предлагаем:

• ТК РФ, все белое и прозрачное
• Расширенный ДМС со стоматологией
• Комфортный офис рядом с м. Дмитровская
• MacBook или любой другой компьютер на выбор
• Возможность бесплатно посещать фитнес-клуб с бассейном в 2 минутах ходьбы от работы
• Завтраки, кофе и фрукты в офисе, игровая комната с playstation и кикером
• Команду, где поддерживают развитие каждого. Мы ставим цели и milestone' s, отправляем на технические конференции за счет компании, по пятницам разработка собирается на воркшопы, а в работе практикует подробный code-review
• И конечно же у нас есть возможность карьерного роста, если есть такое желание