Data Engineer

Aston
Москва
🏢 Офис
Middle
Полная занятость
Россия
Описание вакансии

Aston — аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом.

Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика.

Заказчик - крупнейший коммерческий банк страны, лидер по объему активов и цифровому развитию. Активно продвигает мобильные сервисы, ценит скорость, гибкость и неформальный подход внутри команд. Многократно отмечен престижными наградами, в том числе «Bank of the Year in Russia 2019» (The Banker) и «Best Mortgage Bank in CEE» (Global Finance).

Чего мы ждем от специалиста?

опыт работы в роли Data Engineer от 3-х лет;
отличные знания Python;
отличные знания SQL;
опыт разработки сервисов пакетной и потоковой обработки данных для вычисления их векторного представления (embedding) и сохранения в векторном хранилище для обогащения больших языковых моделей (LLM) релевантными контекстными данными (RAG);
опыт реализации промышленных отказоустойчивых сервисов ETL на Python для пакетной загрузки и трансформации данных под управлением Apache Airflow, Argo Workflows;
опыт работы с Pyspark;
опыт асинхронного программного взаимодействия с веб-сервисами по REST API с использованием библиотек aiohttp, httpx;
знание реляционной СУБД (MySQL, PG, Oracle, MSSQL) на уровне написания сложных запросов;
опыт работы с любым объектным/файловым хранилищем;
опыт работы в интерактивных средах (Jupyter, Databricks, Datalore);
знание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных parquet, orc.
Будет плюсом
знание любого векторного хранилища;
опыт использования платформ потоковой обработки данных: Apache Kafka, Apache Flink;
опыт работы с S3;
опыт чтения и записи потока данных Apache Kafka с помощью библиотек aiokafka, confluent-kafka, kafka-python, разработка потоковых приложений Apache Flink.

Что мы предлагаем?

Хорошая зарплата: уровень обсуждается индивидуально, есть доплаты за менторство и профактивности.

Развитие: долгосрочные проекты от российских заказчиков, возможность менять направления, прозрачная система Performance Review.

Комфорт и свобода: релокейт между офисами, выбор формата работы (удалённо, офис, гибрид), адаптация для новых сотрудников.

Обучение: доступ к корпоративному порталу, митапам, конференциям (и как гость, и как спикер).

Социальный пакет: ДМС со стоматологией, частичная компенсация спорта, бесплатный английский, оплачиваемый отпуск и больничные.

Корпоративная жизнь: тимбилдинги, детские праздники, внутренние мероприятия.

Наши офисы

Москва (ул. Вильгельма Пика, 11, БЦ «Ботаника», 13 эт., оф. 1310),

Санкт-Петербург (Владимирский проспект, д. 23, 8 этаж),

Казань (Н. Ершова, 76/1),

Самара (IT парк Монте Роза).

Откликайтесь, если вы готовы расти и развиваться вместе с командой ASTON! Наш рекрутер свяжется с вами, чтобы обсудить детали.

Технологии и навыки
AI-помощник
ИсточникСкрыто
Опубликовано7 июл.
Настоящий работодатель никогда не попросит перевести деньги, продиктовать код из SMS, войти под чужим аккаунтом или поставить непонятное приложение. Столкнулся с таким при отклике — прекращай переписку и расскажи нам в чате с основателем или через форму обратной связи.