Data Engineer (Python)

#вакансия #Python #DE #DataEngineer #Senior #удалённаяработа #remote #Airflow #OpenMetadata #интеграции

🚀 Позиция: Data Engineer (Python) — Senior
💰 Ставка: 260 000 — 280 000 ₽ gross
📍 Локация: строго РФ
🌐 Формат работы: Удалённый
📋 Занятость: Полная

📋 Обязанности:
▪️ От 3 лет коммерческой разработки интеграций на Python 📅
▪️ Уверенный Python (Pydantic, классы, генераторы) 🐍
▪️ Понимание архитектуры Source → Sink в OpenMetadata 🔄
▪️ Опыт работы с Airflow и SQL 🛠️
▪️ Знание, как использовать AI-инструменты для скаффолдинга коннекторов (команда scaffold-connector) для ускорения разработки ⚡

➕ Будет +:
▪️ Практический опыт с Kafka или RabbitMQ в production (consumer groups, DLQ, гарантии доставки) 📨
▪️ Опыт с gRPC / Protobuf и Redis (reactive Lettuce, кеширование, TTL) 🧩
▪️ Опыт с Docker, Kubernetes, CI/CD и observability (Micrometer, Prometheus, Grafana, OpenTelemetry) 📊

🎓 Образование: в приоритете кандидаты с высшим IT-образованием

💻 Стек: Python, Pydantic, Apache Airflow, OpenMetadata (Server + Ingestion Framework), PostgreSQL, REST API, OpenMetadata SDK

📋 Задачи:
▪️ Реализация интеграций на проекте 🔌
▪️ Разработка кастомных коннекторов (Ingestion Framework) и скриптов миграции метаданных 🧱
▪️ Автоматизация через SDK ⚙️
▪️ Настройка и оркестрация пайплайнов в Airflow 🌀

📩 Если ваш опыт соответствует требованиям, присылайте резюме: контакт скрыт