Data Engineer Junior, Москва.

▷ Работодатель: Открытые Технологии (профиль,отзывы)
💰 From 80000 RUR. | Режим: office | 10

* This listing is inactive or archived *

В нашу команду нужны грамотные админы, которые хорошо разбираются в базовых информационных технологиях (ОС (unix/linux, windows), сетевые технологии, БД, ИТ-безопасность, виртуализация и т.п.) и хотят прокачаться в технологии больших данных, исследовании данных, реверс-инжиниринге, программировании на Python/SCALA/Java, проектировании и поддержке больших информационно-аналитических систем с элементами Искусственного Интеллекта.

Обязанности:

  • Решение сложных творческих задач в рамках внедрения аналитических систем на платформе собственной разработки.
  • Организация ETL-процессов и построение Data Lake:
  • Разработка пайплайнов обработки интенсивных потоков данных;
  • Разработка и реализация алгоритмов мониторинг и анализа качества данных;
  • Диагностика проблемных участков в обработке данных и оптимизация скорости обработки;
  • Построение систем сбора данных с различных ИТ и промышленных объектов;

  • Наделение данных смыслом путём быстрого погружения в новую предметную область и работы со специалистами заказчика;

  • Исследование САУ и АСУ ТП промышленных установок с целью извлечения информации и построения Озёр данных;

  • Построение зонтичных систем мониторинга ИТ и индустриальных систем;

  • Участие в создании цифровых двойников.

Требования:

  • Опыт администрирования систем Unix/Linux/Windows;
  • Опыт работы с СУБД: SQL-запросы; понимание принципов CDC, работы с транзакционными логами;
  • Уверенные знания в области сетевых технологий;
  • Навыки программирования на Python и bash; Представление о применении powershell;
  • Навыки разработки на JavaScript, Java/Scala (как преимущество);
  • Опыт использования Open Source решений (Hadoop, Spark, NiFi и др.) - приветствуется;
  • Также приветствуется опыт реверс-инжиниринга/исследования защищённости устройств и систем;
  • Будет плюсом, если знакомо: Airflow, Informatica, Git.
Условия:
  • ДМC
  • Полное соблюдение норм Трудового Кодекса РФ
  • Профессиональный рост
  • Участие в масштабных проектах
  • Возможна удаленная работа.
Москва, Стремянный переулок, 26
http://www.ot.ru
GitPythonLinuxSQL

Created: .
Expires after: .
Responses: 2

Откликнуться на вакансию  Работодатель: профиль,отзывы