Data engineer ( Рекламная платформа)

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя!

Мы ищем Data engineer в команду развития специализированных витрин данных.

Обязанности

Чем предстоит заниматься:

• разрабатывать и поддерживать витрины данных в облачной экосистеме
• проектировать и улучшать архитектуру системы
• разрабатывать и оптимизировать пайплайны обработки данных/ETL на Python / Scala, а также помогать другим командам
• внедрять контроль качества данных (SODA).

Требования

• высшее образование
• опыт работы в аналогичной роли от 3 лет
• глубокое понимание принципов модели распределённых вычислений, а также уверенные навыки поиска, обработки данных и построения витрин с помощью Spark и SQL.
• опыт промышленной разработки на стеке Scala/Java/Python, знание инструментов по обработке больших данных (Spark, Trino, Polars) и опыт работы со стримингом (Flink, Spark Streaming, Kafka).
• продвинутые знания SQL и практический опыт работы с одной из реляционных СУБД (Oracle, PostgreSQL, mySQL, MS SQL Server), а также работа с объектными хранилищами S3 и файловой системой HDFS.
• знание любого оркестратора рабочих процессов (AirFlow, Oozie, Dagster, Argo Workflows) и понимание подходов к организации разработки (CI/CD, DevOps).

Будет плюсом:

• опыт работы с Iceberg,DataHub/OpenMetaData,SODA/GreateExpectation, ClickHouse,Kubernetes
• навыки работы с генеративными AI-моделями
• опыт создания AI-агентов и использования их в работе опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов.

Условия

• офис рядом с метро Маяковская
• гибридный формат работы
• годовой бонус и ежегодный пересмотр
• расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
• корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
• 90 дней удаленной работы из любого региона РФ
• льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм, скидки от партнеров и сервисов группы компаний.