
Data Engineer, Москва.
▷ Работодатель: Газпром-медиа Развлекательное телевидение...
(профиль,отзывы)
💰 From 0 RUR. | Режим: office |
10
* This listing is inactive or archived *
О ПРОЕКТЕ:
Основная часть многих терабайт, с которыми мы работаем, это данные веб-счетчиков (собственная разработка ГПМ ДАТА), поступающих от приложений, сайтов и видеоплееров активов холдинга ГПМ (PREMIER, МАТЧ ТВ \ СПОРТБОКС, ТНТ, ПЯТНИЦА, СУПЕР, ТВ3, НТВ+, RUTUBE, ГПМ РАДИО и др.). Нужны специалисты по обработке данных и извлечения из них максимальной пользы для компании и пользователей.
Вам предстоит заниматься:
-
Разработка и сопровождение ETL / ELT пайплайнов загрузки из различных источников (батчи и стриминг)
-
Мониторинг и оптимизация процессов сборки витрин
-
Участие в проектировании и разработки аналитических витрин данных в ClickHouse
-
Участие в аналитических исследованиях
-
Предоставлять экспертную поддержку внутренним потребителям (data analysts, data scientists)
-
Поддержка и развитие базы знаний
Вы нам подходите, если есть:
-
Опыт работы над аналогичными задачами от 2 лет
-
Знание SQL (Clickhouse\PostgreSQL\MySQL)
-
Опыт разработки на Python от 1 года
-
Уверенная работа с Linux, Docker и Git
-
Понимание основных концепций DWH
-
Аккуратность, работа на качественный результат
-
Качественная и доскональная отладка
Кроме того, приветствуется:
-
ClickHouse, понимание его особенностей и ограничений
-
Работа с прочими СУБД в роли разработчика/аналитика
-
Написание пайплайнов в Airflow / NiFi / etc
-
Redash / Grafana / Superset / etc.
-
Django, DRF, Celery
Наш стек технологий
-
Clickhouse, PostgreSQL, MySQL, Python, Django, DRF, Zookeeper, Nginx, Celery, RabbitMQ, Redis, Docker, Git, Gitlab CI/CD, Airflow, Ansible, Kubernetes, Spark, Kafka
Мы предлагаем:
- Оформление по ТК РФ
- Knowledge sharing!
- Healthy команда :)
- ДМС после испытательного срока
- Работаем удаленно (предпочтительно) или в офисе м. Киевская (Раевского, 4)