
Data Engineer pySpark Hadoop, Москва.
▷ Работодатель: Accenture
(профиль,отзывы)
💰 From 0 RUR. | Режим: office |
10
* This listing is inactive or archived *
Компания Axenix (ранее Accenture) продолжает работу на российском рынке и аккумулирует 30-ти летний консалтинговый опыт внедрения инновационных решений.
Наша экспертиза - стратегия и консалтинг, технологии и операции, направленные на цифровизацию бизнеса.
В своей деятельности мы сочетаем обширные знания, опыт в различных отраслях и глубокое понимание специфики и возможностей российского бизнеса.
Офисы компании находятся в Москве, Твери и Ростове-на-Дону, Алматы и Ереване.
Помимо этого, у нас есть команды в Санкт-Петербурге, Краснодаре и Воронеже, а также сотрудники, работающие удаленно из других городов.
И сейчас мы в поиске талантливых Data Engineer в нашу команду.
Чем предстоит заниматься:
- Оптимизация времени выполнения джобов на pySpark, унификация кода между Trino и Spark версиями;
- Технические ДАГи для сбора стастики и сжатию файлов;
- Динамическая генерация ДАГа проверок (итератор и раннер на Python);
- Реализация проверок с помощью фреймворка Amazon Deequ на Spark;
- Настройка CDC репликации с использованием Debezium и Spark Streaming джобы для применения изменений в сырой слой.
Мы ждем что у тебя есть:
- В идеале - pySpark, Python, Trino/Presto/Athena, Microsoft Azure Databricks или AWS EMR с поддержкой DeltaLake / Apache Iceberg, Yandex.Cloud, Airflow, git, JIRA/Confluence
- Желательный минимум - PySpark (или любой Spark) + Hadoop
Мы предлагаем:
-
Динамичную работу без рутины в ведущей IT компании;
-
Возможность использовать передовые технологии и стратегии и менять бизнес наших клиентов к лучшему;
-
Проекты в разных индустриальных направлениях с передовыми технологическими решениями и современной архитектурой приложений;
-
Конкурентоспособный уровень дохода, годовые бонусы и регулярное повышение по результатам Performance Review;
-
Культуру непрерывного обучения: сертификация, online и offline обучение в России, менторство в профессиональном развитии;
-
ДМС с первого дня работы, включая стоматологию, в лучших клиниках Москвы и МО для cотрудника и его семьи (жена/муж, дети до 18 лет);
-
Страхование жизни в размере годового оклада сотрудника;
-
Программу поддержки сотрудника и его родственников по психологическим, юридическим, финансовым вопросам;
-
Дополнительные дни оплачиваемого отпуска в год;
-
Ежемесячную денежную компенсацию на питание.