Ptolemay - аутсорсинговая IT-компания полного цикла по разработке мобильных и веб-приложений для бизнеса и стартапов. Ищем Middle+ Data Engineer для зарубежного аутстафф-проекта.
Задачи:
- Разработка, оптимизация и поддержка ETL-процессов на базе Databricks и Spark.
- Разработка и поддержка API на Python для обработки и трансформации данных.
- Разработка и поддержка масштабируемых архитектур данных для высоконагруженных систем.
- Мониторинг, отладка и улучшение производительности ETL-пайплайнов.
- Работа с MongoDB и другими NoSQL базами данных: проектирование, написание запросов, оптимизация производительности.
Требования:
- Опыт работы на аналогичной позиции от 3-х лет.
- Уверенное знание английского языка для устной и письменной коммуникации в рабочем процессе.
- Подтвержденный опыт работы с Databricks и Spark.
- Отличное владение Python, включая объектно-ориентированное программирование и разработку API.
- Знание NoSQL (MongoDB предпочтительно), включая выполнение запросов, моделирование данных и оптимизацию.
- Сильные аналитические навыки, способность решать проблемы и оптимизировать процессы обработки данных.
- Опыт работы с обработкой больших данных и распределенными системами.
Будет плюсом:
- Глубокое понимание архитектуры данных, ETL-процессов и концепций хранилищ данных.
- Знание других технологий работы с большими данными, таких как Delta Lake, Hadoop или Kafka.
- Опыт работы с облачными платформами (AWS, Azure, GCP).
- Знание принципов CI/CD и работы с системами контроля версий, такими как Git.
Условия:
- Удалённый формат работы.
- Полная занятость.
- Гибкий график.
- Оформление по ИП, СМЗ.
- Оплата 3000 - 3500$ net.
Буду рад ответить на вопросы и ознакомиться с резюме: @Dmitriy_Ptolemay