Data-инженер (DWH) / Разработчик SQL + Python
| Зарплата | Не указана |
|---|---|
| Компания | Делимобиль |
| Город | Москва |
| Требуемый опыт | От 1 года |
| Опубликована | 11 января 2022 г. |
К сожалению, эта вакансия уже закрыта.
Но вы можете посмотреть другие вакансии
Нам в Делимобиле нужен data engineer. В его качестве вам предстоит поддерживать и развивать систему, состоящую сейчас из batch-processing (DWH) на базе Vertica, real-time аналитики на основе MemSQL и пайплайнов с применением Kafka, Airflow, Python.
Обязанности:
- проектирование логической и физической модели данных аналитических систем;
- обеспечение качества данных (своевременность, полнота, отсутствие ошибок, доступность документации, прозрачность потоков преобразования данных);
- интеграция внутренних и внешних источников данных компании;
- построение внутренних инструментов data discoverу.
Желательно:
- знание современных архитектурных подходов DWH/Data Lake, Data Vault/Anchor Modeling, Lambda Architecture/Kappa Architecture;
- уверенная практика в MPP RDBMS (Vertica, Greenplum, Teradata, etc);
- отличное владение Python 3, в том числе умение писать многопоточные приложения;
- экспертное знание SQL, предпочтительно Vertica-SQL;
- опыт работы с планировщиками/оркестраторами (Apache Airflow, Luigi, etc)
- опыт работы с Kafka;
- опыт работы с NoSQL базами: MongoDB, Redis, Elasticsearch, etc.
Будет плюсом:
- опыт работы с технологиями стека Hadoop;
- опыт работы с CDC-системами (Debezium, GoldenGate, etc);
- опыт работы с Docker, Kubernetes;
- опыт разработки в парадигме CI/CD;
- опыт работы с BI-инструментами (PowerBI, Tableau, QlikView, etc.)
Условия:
- Работа в международном и развивающемся по всему миру сервисе;
- Мы располагаемся в современном офисе недалеко от станций метро Преображенская площадь (7 мин. пешком);
- График работы 5/2 офис либо гибрид.
- Скидки на каршеринг;
- Обеды;
- Мы предоставляем ДМС после испытательного срока.