Инженер данных
Data Engineer
Москва, Санкт-Петербург
От 3 лет
Удаленная работа, Офис
Полная занятость
Что вы будете делать
Команда Data Office сегмента Royal Canin ищет инициативного сотрудника, которому интересно преуспевать в развивающейся организации и который обладает способностью привносить структуру в неструктурированные ситуации
- Проектировать и разрабатывать витрины данных
- Проектировать, разрабатывать и поддерживать процессы ETL для загрузки данных в/из Data Lake
- Оптимизировать работу существующих дата-пайплайнов
- Интегрировать новые источники данных в Data Lake
- Разрабатывать механизмы контроля качества загружаемых данных (ручные и автоматические тесты DQ)
- Проводить и проходить код-ревью
- Помогать и обучать менее опытных коллег
- Прививать практики "хорошего кода" в команде
Мы ожидаем
- Образование в ИТ, фундаментальных науках
- Свободный русский, английский на уровне выше среднего
- Понимание работы базы данных и принципов разработки DWH
- Понимание хранилищ данных, очистки данных, конвейеров данных и других аналитических методов, необходимых для использования данных
- Опыт работы с технологиями, S3, Airflow, Apache Spark, Clickhouse, Postgres от 5 лет
- Хорошее знание SQL, Python (PySpark) / Scala от 5 лет
- Опыт разработки потоковой передачи данных, опыт работы с CDC
- Опыт работы со стеком Yandex Cloud Platform/ Azure от 3 лет
- Опыт работы с Docker, Kubernetes
Работать в Mars – здорово!
Узнайте, что вас ждёт в нашей команде.
Чтобы вы могли расти и развиваться вместе с нами
Чтобы вы могли расти и развиваться вместе с нами
