Data Engineer

Дата создания: 15 августа 2020

Москва

Постоянная работа

1-2 года

Постоянная

Полная занятость

Перейти

Обязанности:

  • Организация автоматизированного сбора данных из различных источников в Data Lake;
  • Перемещение и хранение информационных массивов;
  • Настройка, интеграция и создание витрин данных для работы DA/DS;
  • Создание конвейеров регулярной и непрерывной подготовки данных (CI/CD pipelines);
  • Контроль и повышение качества данных.

 

Требования:

  • Высшее техническое образование;
  • Уверенные знания Java или Scala;
  • Уверенные знания и опыт работы от года со стеком Hadoop: HDFS, Yarn, Hive, Spark;
  • Навыки работы с реляционными БД и key-value хранилищами: noSQL (HBase, Elasticsearch) и SQL (PortgreSQL);
  • Навыки и культура работы с промышленным исходным кодом;
  • Знание систем контроля версий (Git);
  • Знание основ DevOps.

Будет плюсом:

  • Знания и опыт использования Apache Kafka, Apache Flink, Apache Ignite, Apache Ni-Fi;
  • Опыт работы с Docker и Kubernetes/OpenShift;
  • Опыт разработки ETL процессов с использованием стека Hadoop;
  • Знания Python.


Условия:

  • Профессиональное обучение, семинары, тренинги, конференции;
  • ДМС, сниженные ставки по кредитованию, программы лояльности для сотрудников;
  • Инновационные, амбициозные проекты и задачи;
  • Комфортный офис,бесплатный фитнес-зал.

http://sberbank.ru

50 открытых вакансий

ПАО Сбербанк — российский финансовый конгломерат, крупнейший транснациональный и универсальный банк Российской Федерации — России, Центральной и Восточной Европы.