Senior Data Engineer

Data Engineer
IT
#Python
#SQL
#CI/CD
#Hadoop
#Hive
#Airflow
#Snowflake
#Scrum
#Kanban
#Pyspark
#Presto
фултайм
удаленка

Опыт более 5 лет

от 4.000 $ до 5.000 $

Описание вакансии

Вакансия: Senior Data Engineer
Формат: Удалённый
Занятость: Полная
Оплата: 4000 - 5000$ net.

Ptolemay
- аутсорсинговая IT-компания полного цикла по разработке мобильных и веб-приложений для бизнеса и стартапов. Ищем Senior Data Engineer для аустафф-проекта по разработке, эксплуатации и сопровождению инфраструктуры обработки данных на инженерное предприятие.

Задачи:
- Сотрудничать с межфункциональными командами для разработки и внедрения масштабируемых и эффективных архитектур данных.
- Проектировать, разрабатывать и поддерживать надежные процессы ETL для обеспечения бесперебойного потока данных из различных источников.
- Писать, тестировать и поддерживать качественный и программный код.
- Планировать, отслеживать и составлять отчеты о ходе выполнения задач и проектов, обеспечивая соблюдение сроков и достижения целей проекта.
- Управлять запросами на сбор данных в платформу данных и через нее для поддержки их бизнес-вариантов использования.

Требования:
- Опыт работы в области разработки данных от 5 лет, включая опыт на руководящей роли от 1 года.
- Знание английского языка не ниже B2-уровня.
- Опыт работы как минимум с одной технологией обработки Big Data (например, Hive, Hadoop, Presto или Snowflake).
- Сильные технические навыки в Python, Pyspark и SQL.
- Значительный опыт работы с процессами ETL с архитектурами Data Lake и Data Warehouse.
- Знание технологии документооборота (например, Airflow).
- Опыт работы с конвейерами CI/CD, модульными и интеграционными тестами, а также мониторингом и оповещением приложений.
- Владение методологиями гибкой разработки, включая Scrum и/или Kanban.
Будет плюсом:
- Практический опыт работы с Hive, Presto, Airflow, Qubole, EMR и сторонними API.
- Знакомство с сервисами AWS, такими как EC2, RDS и S3.
- Знакомство с инструментами визуализации, такими как Domo.
- Опыт работы с инструментами мониторинга и устранения неполадок AWS.
- Использование генеративного ИИ для оказания помощи в SDLC ПО.
- Знание концепций и приложений машинного обучения.

Условия:
- Удалённый формат работы.
- Полная занятость.
- Гибкий график.
- Оформление по ИП, СМЗ.
- Оплата 4000 - 5000$ net по результатам собеседования.