Архитектор ETL Platform в компании Т-Банк

Описание

В Data Platform Т‑Банк большое и продвинутое хранилище данных — 6000 объектов, 200 ТБ в Greenplum и 2 ПБ в Hadoop. С данными активно работают более 400 специалистов — они ежедневно принимают десятки решений с опорой на них. 

На стороне команды Data Platform созданы инструменты, которые позволяют получать, обрабатывать, загружать и визуализировать данные.

Мы в поиске архитектора, который будет выявлять операционную нагрузку в аналитическом хранилище и прорабатывать архитектуру решения по вынесению операционной нагрузки из платформы.

Наша инфраструктура:

— Greenplum, Hadoop и Clickhouse в качестве ядра обработки данных;

— решения на базе Apache Zeppelin, Apache Airflow и Apache Flink в качестве инструментов трансформации данных для аналитиков — Self-Service ETL.

Обязанности:

• Выстраивать архитектуру хранения и обработки данных
• Развивать сервис обработки данных для операционной и регуляторной отчетности на основе компонентов платформы данных
• Проектировать методологии и подходы разработки потоков данных для операционной и регуляторной отчетности
• Работать с гарантиями масштабируемости и отказоустойчивости сервиса
• Проводить регулярный аудит процессов разработки и поставки данных с целью формирования идей оптимизации и улучшения

Требования:

• У вас есть опыт работы в сфере Data Architecture, DWH или ETL от 3 лет
• Проектировали ETL-процессы в распределенных системах
• Есть опыт оптимизации процессов
• Понимаете архитектуру хранилищ и инструментов, которые с ним связаны
• Разбираетесь в бизнес-сценариях работы с данными
• Глубоко понимаете жизненный цикл ETL-пайплайнов и модели данных
• Хорошо понимаете и работали с MPP СУБД

Мы предлагаем:

• Работу в офисе или гибридный формат — по договоренности с руководителем
• Платформу обучения и развития «Т‑Банк Апгрейд». Курсы, тренинги, вебинары и базы знаний. Поддержку менторов и наставников, помощь в поиске точек роста и карьерном развитии 
• Линейку льготных тарифов на продукты Т‑Банка
• Комплексную программу заботы о здоровье. Оформим полис ДМС с широким покрытием и страховку от несчастных случаев. Предложим льготные условия страхования для ваших близких
• Возможность работы в аккредитованной ИТ-компании
• Частичную компенсацию затрат на спорт по окончании испытательного срока
• Компенсацию обедов и транспорта в дни посещения офиса
• Well-being-программу, которая помогает улучшить психологическое и физическое здоровье, а также разобраться с юридическими и финансовыми вопросами
• Три дополнительных дня отпуска в год
• Достойную зарплату — обсудим ее на собеседовании