Разработчик DWH
РСХБ-Интех
Москва
🏢 Офис
Middle
Полная занятость
Россия
Описание вакансии
Разработка сервисного ядра хранилища. Реализация нового функционала для разработки витрины данных на GP.
ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ
•Разрабатывать и развивать внутренний framework для построения корпоративного DWH;
•Проектировать и реализовывать универсальные механизмы загрузки и трансформации данных;
•Разрабатывать решения для автоматизации создания витрин и ETL-процессов;
•Оптимизировать производительность Greenplum и повышать эффективность работы платформы;
•Разрабатывать интеграции с внешними источниками данных (PXF и другие механизмы);
•Создавать и поддерживать DAG'и в Airflow;
•Разрабатывать сервисы и утилиты на Python;
•Участвовать в проектировании архитектуры платформы данных и определении технических стандартов;
•Проводить код-ревью и участвовать в принятии архитектурных решений.
МЫ ЖДЕМ ОТ ВАС
•Отличное знание Greenplum и понимание его внутреннего устройства;
•Глубокие знания SQL и опыт оптимизации сложных запросов;
•Практический опыт работы с:
•PXF;
•партиционированием;
•распределением данных;
•MPP-архитектурой;
•анализом производительности и оптимизацией запросов.
•Уверенное владение Python;
•Опыт разработки и сопровождения пайплайнов в Apache Airflow;
•Понимание принципов построения корпоративных DWH и ETL/ELT-процессов;
•Опыт проектирования архитектурных решений и разработки внутренних платформ или библиотек.
Будет плюсом
•Опыт разработки собственных framework или платформенных решений;
•Знание PostgreSQL на уровне внутренних механизмов;
•Опыт работы с Git, CI/CD;
•Опыт работы с контейнеризацией (Docker/Kubernetes);
•Понимание принципов DataOps.
МЫ ПРЕДЛАГАЕМ
•Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д);
•Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы;
•Забота о вашем здоровье: ДМС после испытательного срока, куда входит стоматология;
•Гибкий график;
•Комфортные и современные офисы;
•Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (скидки на спортзалы, рестораны, маркетплейсы и т.д.).
