Data Engineer (ETL)
Moscow
Описание вакансии
Наша agile-команда создает информационную платформу GM TA (Global Markets Trading Analytics) в интересах Департамента Глобальных Рынков (ДГР).
ДГР - предоставляет корпоративным и розничным клиентам широкий спектр продуктов и услуг на локальных и зарубежных финансовых рынках.
Ключевые направления бизнеса - Fx trading, Commodities, Equity, Founding, Fixed Income, Rates, Credit Valuation Adjustment, Structured Products, Investment Banking.
Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:
поддержки регулярных бизнес-операций
проведения Ad hoc анализа
подготовки регулярной аналитической / управленческой отчетности
разработки моделей машинного обучения, направленных на решение широкого спектра прикладных задач прогнозирования, классификации, кластеризации, выявления поведенческих паттернов и отклонений от них, сентимент-анализ и т.д.
Обязанности
проектирование и разработка корпоративной аналитической платформы (ПКАП);
системная разработка, поддержка и оптимизация ETL-процессов на платформах Greenplum и Hadoop;
R&D, реализация пилотов по выбору технологий и решений;
поддержка промышленной эксплуатации разработанных решений;
поддержание технической документации в актуальном состоянии;
эффективное взаимодействие внутри команды и кластера.
Требования к кандидату
Обязательные требования
опыт с экосистемой Hadoop (HDFS, Hive, Impala, Spark, Oozie, ...);
опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git;
опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, MSSQL);
знание SQL, PL/SQL;
знание основ администрирования ОС Linux;
понимание построения хранилищ данных (DWH)
Желательные требования
начальная экспертиза в предметной области (финансовые рынки)
понимание основ облачных технологий и технологий виртуализации и контейнеризации;
практический опыт с автоматизацией развертывания ПО;
опыт администрирования РСУБД
Работа у нас — это
Команда профессионалов, готовых поддержать ваши инициативы
Возможность работы с новыми технологиями
Возможности карьерного роста
Обучение за счёт компании
Красивый и комфортный офиc
Гибкий график
ДМС
Мощное железо и дополнительное оборудование
Ссылка на страницу с описанием вакансии скопирована в буфер обмена