Разработчик ETL

Описание вакансии

Мы набираем IT специалистов в большую команду для работы на проектах для одного из крупнейших Банков РФ.

Наша команда строит единую платформу для обработки BigData. Многое уже сделано, но впереди еще много интересных задач.
Мы уже набрали некоторый опыт и готова им поделиться с тобой.
Если мы близки тебе по духу, если хочешь набираться знаний и расти вместе с нами, присоединяйся к нашей команде.

В данный момент на проекте осуществляем анализ и прототипирование алгоритмов расчета «широких» витрин в части агрегатов БКИ по внешней и внутренней кредитной истории.

Задачи: реализация витрин и выгрузок новых данных по направлению розничного СРМ (выгрузки в АС СРМ) и постановка на регламентный расчет скриптов моделей.

Обязанности

Проектирование потоков данных, интеграционных решений и витрин данных;
Разработка процессов загрузки данных из систем источников, процессов архивной и инкрементальной загрузок, процессов трансформации данных и построения витрин данных ( Hadoop(Impala));
Разработка средств запуска аналитических моделей;
Разработка (или подключение и настройка) средств протоколирования действий пользователей и процессов (систем/компонент);
Подготовка итогового дистрибутива, установка его на тестовые и промышленные стенды (желательно с учетом версионирования кода, авто-сборки и -установки);
Участие в приемо-сдаточных испытаниях;
Сопровождение внедрения и внедренных решений;
Разбор инцидентов и формирование отчетов по результатам анализа.