Data Engineer (Hadoop)

🏢 ОфисMiddleПолная занятостьКорпорация

Зарплата не указана

Есть о чём спросить

Навык востребован (Python), за такой навык на рынке платят больше. Но вилки нет, про деньги придётся договариваться с нуля.

Нажмите на сигнал, чтобы увидеть, на чём он основан

Чем предстоит заниматься

Проектирование, разработка и сопровождение витрин данных на базе Hadoop

Оптимизация производительности существующих витрин данных

Участие в разработке ETL-процессов для загрузки данных в витрины

Поддержка и мониторинг работы витрин данных

Взаимодействие с бизнес-пользователями для понимания их потребностей и перевода их в технические требования

Взаимодействие с командами разработки и дата-аналитики, по вопросам сбора, обработки и хранения данных

Разбор инцидентов качества данных, развитие автоматизированных тестов (Data Quality)

Документирование разработанных решений

Наши требования

Практический опыт в разработке витрин данных, выстраивании ETL-процессов

Уверенное владение SQL (аналитические функции, подзапросы, хранимые процедуры/функции, оптимизация производительности),готовность к созданию инструментов для нужд инфраструктуры и разработки

Опыт работы с Hadoop (HDFS, YARN, Hive) и Spark

Знание Java/Scala и опыт разработки на нём

Опыт разработки на Python

Понимание инструментов и технологий Big Data

Знание принципов построения распределённых систем хранения и обработки данных

Опыт обработки и миграции больших объёмов данным между различными источниками

Опыт работы с системами контроля версий (Git)

Опыт работы с Kafka

Опыт работы с CI/CD инструментами (Jenkins, GitLab CI)

Базовые знания Docker и иных технологий контейнеризации

Опыт работы с системами Unix (bash)

Мы предлагаем

Комфортный современный офис рядом с м. Кутузовская

Возможность выбрать удобный график – офис/гибрид

Ежегодный пересмотр зарплаты, годовая премия

Корпоративный спортзал и зоны отдыха

Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития

Программа адаптации и помощь руководителя на старте

Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа

Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ

Подписка Прайм с возможностью совместного использования на трёх близких

Вознаграждение за рекомендацию друзей в команду Сбера

Дополнительно

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее

Ждем именно тебя!

Мы команда: витрины данных по продукту «Пакеты услуг». Пакеты услуг – комплексный продукт, предоставляющий спец. офферы на продукты Банка и экосистемы Сбера

Мы ищем инженера по созданию витрин данных, который присоединится к нашей команде и займётся разработкой и поддержкой витрин данных на базе Hadoop. Вам предстоит участвовать в полном цикле разработки, начиная с анализа требований и заканчивая реализацией и поддержкой решений. Мы ожидаем, что кандидат обладает знаниями в области обработки больших данных, владеет Java/Scala и и Python, а также умеет работать с экосистемой Hadoop и Spark