
Архитектор по работе с данными, Петербург.
▷ Работодатель: Самокат ООО Умное пространство
(профиль,отзывы)
💰 From 0 RUR. | Режим: office |
10
* This listing is inactive or archived *
Обязанности:
- Разработка архитектуры продуктов и платформенных фреймворков с использованием data сервисов (в т.ч. варианты решений, обоснование выбора, архитектурное видение, application architecture);
- Поддержка актуальности документации по архитектурным разделам;
- Выявление архитектурных требований в части интеграции продуктов с помощью data сервисов, проектирование и согласование интеграционных решений (в т.ч. требованиям по нагрузке);
- Контроль качества проектных документов, подготовленных в рамках системного анализа;
- Контроль реализации и испытаний продуктов/сервисов с точки зрения согласованной архитектуры;
- Участие в: o определении технологического стека Компании и оптимизации его использования оптимизации и развитии производственных процессов разработки продуктовo анализе потребностей, уточнении, описании детальных бизнес-требований к разрабатываемому ПО.
- Опыт работы от 5 лет в ИТ продуктовой компании;
- Опыт проектирования систем по обработке и анализу данных и отдельных компонент (DataLake, DWH, BI, Стриминг приложения);
- Понимание принципов проектирования структур хранения данных для различных “слоёв” аналитических систем (STG, DDS, DataMarts), ETL/ELT, стриминг процессов;
- Опыт работы с реляционными и NoSQL базами;
- Владение одним из языков программирования (Pyhon/Java/Scala) на уровне чтения кода;
- Понимание основных дата фреймворков (Spark или Flink);
- Понимание принципов работы систем очередей сообщений (Kafka, RabbitMQ etc) и синхронного взаимодействия (Rest, GraphQL);
- Опыт работы с планировщиками и оркестраторами потоков (Airflow, Prefect).
Будет плюсом:
- Опыт работы с Kubernetes (в особенности с сервисами по обработке данных);
- Опыт работы с ML Ops инструментами (DVC, MLFlow, Feast).
Apache SparkGreenplumK8sCassandraDBTAirflowClickHouseMS SQL