Python-разработчик (Data engineer)
| Зарплата | Не указана |
|---|---|
| Компания | Лига Цифровой Экономики |
| Город | Москва |
| Требуемый опыт | От 3 лет |
| Опубликована | 27 января 2025 г. |
Ищем коллегу Разработчика Python (Data engineer) на крупный банковский проект. Цель проекта: создание нового комплексного продукта по выявлению дипфейков (видео, аудио, текст) командой кибербезопасности банка.
Твои задачи:
- Автоматизация процессов по получению характеристик и описания данных (видео, аудио, изображения, текст) и разработка инструментов для автоматизации задач, связанных с обработкой данных
- Описание потребности для разработки специализированного ПО DataScientist-ами
- Поиск, извлечение, очистка, загрузка и предобработка данных из свободного доступа
- Реализация регулярных процессов поставки данных для продуктовых команд и DataScientist-ов
- Проектирование и организация хранилища данных, артефактов и логов обучения ML-моделей, артефактов работы продукта
- Опыт разработки на Python (от 2-3 лет)
- Опыт работы со специализированными аналитическими инструментами на базе Python (Jupyter, Pandas, Numpy, Matplotlib)
- Опыт работы с БД PostgreSQL, Oracle и т.д.
- Знание SQL на продвинутом уровне (аналитические функции, хранимые процедуры, оптимизация)
- Опыт запуска open-sourse проектов и ML-моделей для генерации и аугментации данных
- Опыт создания, поддержания и развития баз данных
- Опыт работы с очередями Kafka, RabbitMq
Будет плюсом
- Наличие опыта по разработке и оптимизация архитектуры данных, хранилищ данных DWH, создание процессов ETL
- Наличие опыта работы с Airflow, Kafka, Spark
- Понимание принципов разработки, внедрения и сопровождения ML-решений
- Поездки на конференции и тренинги за счет компании, внутренние семинары, внутренние митапы, мы очень любим учиться новому
- Современную технику для комфортной работы
- Сессия профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
- Сообщества по интересам: Лига Спорта, Лига Экспертов, Cyber Лига , а также возможность организовать свое сообщество и получить поддержку от компании
- Корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды