Data Engineer pySpark Hadoop, Москва.

▷ Работодатель: Accenture (профиль,отзывы)
💰 From 0 RUR. | Режим: office | 10

* This listing is inactive or archived *

Компания Axenix (ранее Accenture) продолжает работу на российском рынке и аккумулирует 30-ти летний консалтинговый опыт внедрения инновационных решений.
Наша экспертиза - стратегия и консалтинг, технологии и операции, направленные на цифровизацию бизнеса.

В своей деятельности мы сочетаем обширные знания, опыт в различных отраслях и глубокое понимание специфики и возможностей российского бизнеса.

Офисы компании находятся в Москве, Твери и Ростове-на-Дону, Алматы и Ереване.
Помимо этого, у нас есть команды в Санкт-Петербурге, Краснодаре и Воронеже, а также сотрудники, работающие удаленно из других городов.

И сейчас мы в поиске талантливых Data Engineer в нашу команду.

Чем предстоит заниматься:

  • Оптимизация времени выполнения джобов на pySpark, унификация кода между Trino и Spark версиями;
  • Технические ДАГи для сбора стастики и сжатию файлов;
  • Динамическая генерация ДАГа проверок (итератор и раннер на Python);
  • Реализация проверок с помощью фреймворка Amazon Deequ на Spark;
  • Настройка CDC репликации с использованием Debezium и Spark Streaming джобы для применения изменений в сырой слой.

Мы ждем что у тебя есть:

  • В идеале - pySpark, Python, Trino/Presto/Athena, Microsoft Azure Databricks или AWS EMR с поддержкой DeltaLake / Apache Iceberg, Yandex.Cloud, Airflow, git, JIRA/Confluence
  • Желательный минимум - PySpark (или любой Spark) + Hadoop

Мы предлагаем:

  • Динамичную работу без рутины в ведущей IT компании;

  • Возможность использовать передовые технологии и стратегии и менять бизнес наших клиентов к лучшему;

  • Проекты в разных индустриальных направлениях с передовыми технологическими решениями и современной архитектурой приложений;

  • Конкурентоспособный уровень дохода, годовые бонусы и регулярное повышение по результатам Performance Review;

  • Культуру непрерывного обучения: сертификация, online и offline обучение в России, менторство в профессиональном развитии;

  • ДМС с первого дня работы, включая стоматологию, в лучших клиниках Москвы и МО для cотрудника и его семьи (жена/муж, дети до 18 лет);

  • Страхование жизни в размере годового оклада сотрудника;

  • Программу поддержки сотрудника и его родственников по психологическим, юридическим, финансовым вопросам;

  • Дополнительные дни оплачиваемого отпуска в год;

  • Ежемесячную денежную компенсацию на питание.

Москва, Павелецкая пл., 2, строение 2
http://www.accenture.ru
Microsoft Azure DatabricksYandex.CloudPySparkAWSSparkHadoop

Created: .
Expires after: .
Responses: 27

Откликнуться на вакансию  Работодатель: профиль,отзывы