Data Engineer (Новосибирск)

Ориентир по рынку≈ 140 000 – 300 000 ₽наш грубый ориентир по 200 вакансиям этого грейда на рынке, без учёта специальности: у работодателя вилка не указана

🏢 ОфисMiddleПолная занятостьКорпорация

≈ 140 000 – 300 000 ₽наша приблизительная оценка

Хорошие условия

Навык редкий и дорогой (CI/CD), спрос на навык растёт (Hadoop). Но вилки нет, про деньги придётся договариваться с нуля.

Нажмите на сигнал, чтобы увидеть, на чём он основан

Наша компания

Мы - команда разработки Аналитической Платформы (АПЛ) розничного взыскания, занимаемся разработкой дата-продуктов на основе большого объема данных и ищем высоквалифицированного разработчика / дата инженера хранилища данных, способного принять активное участие в развитии нашей аналитической платформы (тех стек Greenplum / PostgreSQL / Hadoop). АПЛ - это платформа с 3000+ активных пользователей, предоставляющая возможность разработки аналитических продуктов на основе современной микросервисной архитектуры с использованием стека Greenplum, PostgreSQL, Openshift, Hadoop экосистемы (Spark и т.д. ),

Чем предстоит заниматься

Поиск и анализ источников данных

Аналитика и проектирование витрин данных под потребности бизнес-заказчиков

Разработка витрин данных на основе Greenplum (PL/pgSQL) и Hadoop (Java spark) и вывод их в пром в соответствии с банковским релизным процессом

Подготовка и сборка дистрибутивов, сопровождение по стендам разработки и тестирования

Разработка решений потоковой обработки данных в режиме Near Real Time (NRT) и пакетной(Batch)

Выстраивание и оптимизация производительности ETL-процессов

Наши требования

Опыт работы дата-инженером от 2-х лет с MPP и реляционными СУБД: Greenplum, PostgreSQL, способность выбирать архитектурные паттерны, связанные с этими особенностями будет являться преимуществом

Уверенное знание SQL: агрегатные, аналитические функции, опыт написания и оптимизации сложных запросов, программных единиц на PL/pgSQL

Опыт разработки и внедрения корпоративных хранилищ данных (DWH)

Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git

Навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе