Python Developer (Hadoop, PySpark)

Зарплата Не указана
Компания Сбербанк
Город Москва
Требуемый опыт От 1 года
Опубликована 15 апреля 2022 г.
К сожалению, эта вакансия уже закрыта. Но вы можете посмотреть другие вакансии

Сервис пакетной загрузки данных ETL4Hadoop – это инструмент репликации данных источников из РСУБД (PostgreSQL, Oracle, MS SQL Server) и файлов (csv, xml, json) в КАП (DataLake Сбербанка на основе Hadoop).

Стек технологий: Python, PySpark, Ozzie, SQL

Обязанности:

  • Разработка и проектирование новой функциональности
  • Написание/расширение автотестов по реализованной функциональности
  • Оптимизация и настройка производительности
  • Анализ и исправление дефектов
  • Хорошая коммуникабельность

Требования:

  • Опыт разработки на Python и PySpark не менее 3 лет
  • Опыт работы с DevOps инструментами (Jira, Jenkins, Ansible, Git и пр.)
  • Опыт работы с реляционными СУБД (PostgreSQL, Oracle, MS SQL)
  • Хорошее знание SQL, навыки оптимизации запросов
  • Навыки работы с Unix shell, системами версионирования кода
  • Наличие проектного опыта работы с экосистемой Hadoop (HDFS, Hive, Scoop, Oozie)
  • Фундаментальные знания принципов построения распределенных систем хранения и обработки данных
  • Хорошая коммуникабельность
Условия:
  • Бесплатный фитнес-зал в БЦ
  • Профессиональное обучение, семинары, тренинги, конференции, корпоративная библиотека
  • ДМС, страхование жизни
  • Самые инновационные, амбициозные проекты и задачи
  • Свободный дресс-код
  • Льготные кредиты и корпоративные скидки
  • Конкурентная компенсация (оклад и премии по результатам деятельности)