
ETL developer, Петербург.
▷ Работодатель: Оператор Газпром ИД
(профиль,отзывы)
💰 From 0 RUR. | Режим: office |
10
* This listing is inactive or archived *
«Газпром ИД» («ГИД») – технологичная молодая компания в структуре холдинга. Мы создаем уникальное приложение "ГИД", в котором сотрудники Группы Газпром получают доступ ко всем продуктам и цифровым сервисам компании.
Проект: Построение дата-платформы компании, от выбора технологий, до реализации задач развёртывания компонентов для построения современного стека для принятия решений на данных
Стек: Java/Python, Kubernetes, Kafka, Kafka connect, Spark/Flink, Data lake (dremio), SQL (Postgres, Clickhouse), temporal database, GitOps, Argo CD
На данный момент мы формируем команду, и в поиске ETL developer (Удаленка или офис/гибрид Мск, Спб).
Что делать:
- Построение и поддержка интеграций с различными системами
- Написание коннекторов, адаптеров и SQL кода по загрузке, трансформации и валидации данных Активное участие в построении мониторинга таких процедур и качества данных (совместно с DQ-инженерами)
- Участие в построении DataOps, GitOps процедур
От Вас:
- уверенные знания SQL middle+ (Postgres, Clickhouse)
- Понимание ETL процедур ( REST, SQL, Java, Python, и способов интеграции
- Опыт общения со стриминговыми данными (kafka)
- Базовое понимание GitOps, умение работать с Kubernetes, Linux
- Опыт написания автотестов
Как плюс:
- Опыт анализа данных (Jupyter lab)
- Опыт построения BI
- Опыт использования стека Hadoop
Взамен:
- ТК РФ, ДМС (включая стоматологию и госпитализацию)
- Новый социально значимый проект в начальной стадии разработки
- Дружный доброжелательный коллектив, в котором приятно работать, лояльное руководство
- Скидки на спорт, кино, языковые курсы
PostgreSQLHadoopKafkaJavaETLClickHousePythonREST