Дата команда DemirBank в поисках Дата инженера с практическим опытом работы.
Задачи:
- Разработка и оптимизация/масштабирование ETL-процессов для работы с источниками данных как структурированные БД, файлы, API с использованием Python, dbt, Apache Spark, PostgreSQL
- Работа с оркестраторами ETL-процессов типа Apache Airflow
- Разработка потоковых дата пайплайнов с использованием Apache Kafka и CDC инструментов
- Оптимизация SQL запросов в MPP базах данных, PostgreSQL, Oracle DB
- Моделирование данных по архитектуре Data Vault
- Обеспечение качества данных (авто тестирование) и мониторинг производительности ETL-процессов
Кого мы ищем:
- 2-4 года опыта в дата инжиниринге с практическими навыками
- Уверенное владение Python, SQL, Apache Airflow, dbt-core, Apache Kafka, Apache Spark, инструментами CDC
- Опыт работы с MPP базами данных на базе PostgreSQL
- Навыки моделирования данных, знания методологии Data Vault 2.0
- Практические навыки работы с Git, CI/CD пайплайнами, Bash/Bash scripting, Docker
- Сильные аналитические навыки и умение работать в команде
Будет плюсом:
- Опыт работы в банках или в других крупных корпорациях
- Хороший английский
Условия работы:
- В офисе, график 5/2, 09:00 – 18:00
- ЗП от 100000 kgs/месяц обсуждается индивидуально
Подробное резюме с описанием опыта работы и названием позиции просьба отправлять на [email protected]