Старший разработчик ETL
Remote work
Описание вакансии
Мы набираем IT специалистов в большую команду для работы на проектах для одного из крупнейших Банков РФ.
На инновационный проект по созданию нового продукта «Кластер доменов данных Службы управления рисками» в одном из ведущих банков РФ набирается команда инициативных людей.
В архитектуру продукта заложены принципы Data Meshы, создается новый Data-продукт в интересах Службы управления рисками.
Мы создаем инфраструктуру на базе современно стека технологий с открытым кодом.
Ждем Вас в своем команде.
Обязанности
Разработка/наполнение детального слоя и модели витрин DWH;
В перспективе участие в миграция DWH на новую платформу данных(Greenplum, ClickHouse, ...) и Open Source стэк доставки данных (DBT, Spark/Flink, Airflow, Kafka, ...);
Разрабатывать утилиты автоматизации процессов разработки корпоративного хранилища данных (Data Warehouse);
Внедрять лучшие практики CI/CD в существующие процессы разработки ПО;
Интеграция с стэком технологий Hadoop, Open Source;
А так же для решения текущих задач и потребностей банка в DWH;
Участие в внедрении фреймворка DBT в масштабной платформе данных банка ТОП-3;
Участие в согласовании функциональной, компонентной и технической архитектуры-инфраструктуры DBT, выработка решений и их реализация "руками" для внедрения DBT;
Участие в проекте создания Платформы данных банка (GreenPlum, ClickHouse, S3, DBT, AirFlow, Spark, OpenMetadata, etc / DataMesh);
Участие в разработке и согласовании методологии, стандартов для разработки моделей DBT для большой распределенной команды;
Участие в работах по интеграции с сервисами оркестрации, доставки данных (AirFlow, Spark, GreenPlum, etc);
Реализация API для DG/DQ решений.
Требования к кандидату
Обязательные требования
Разработка ETL/ELT;
Разработка детального слоя, витрин, view, proc;
Подготовка документации;
Уверенные навыки работы с одной из заявленных СУБД (GreenPlum, PostgeeSQL, MS SQL Server, Oracle, Teradata, и т.д.).
Хорошее знание SQL, опыт написания и оптимизации SQL запросов, процедур, представлений;
Рассматриваем кандидатов с опытом развития решений в банковских АБС (Диасофт, ЦФТ, ...), желающих развиваться в области хранилищ данных (DWH);
Умение анализировать поставленные задачи;
Обязателен опыт работы с DBT, Python или вы разработчик фреймворка трансформации данных и хорошо на практике разбираетесь в построении CORE DWH.
Желательные требования
Желателен опыт разработки и сопровождения ETL/ELT процессов (Informatica, Pentaho, MS SSIS, DBT, AirFlow, Spark, Kafka, ...) + Python;
Желателен опыт разработки и внедрения корпоративных хранилищ данных (DWH);
Желателен опыт работы в банковской сфере;
Желателен опыт участия в разработке и внедрении корпоративных хранилищ данных либо аналитических платформ.
Работа у нас — это
Команда профессионалов, готовых поддержать ваши инициативы
Возможность работы с новыми технологиями
Возможности карьерного роста
Обучение за счёт компании
Красивый и комфортный офиc
Гибкий график
ДМС
Мощное железо и дополнительное оборудование
Ссылка на страницу с описанием вакансии скопирована в буфер обмена