Data engineer

#вакансия #удаленнаяработа #Data #Dataengineer #РФ #middle

✅Позиция:Data engineer💻
✅Вилка: 260.000 - 280.000 руб. гросс💰
✅Занятость: Полная
✅Локация и гражданство:РФ 📌 
✅Оформление: Как ИП

👋Привет! Меня зовут Ирина. Я представляю группу компаний Top Selection.
🔥В данный момент мы в поисках Data engineer 🔥

🛠Требования:
- Общее представление о стеке технологий Lakehouse;
- Понимание различия работы между BigData/Lakehouse и с данными обычного размера;
- Знание SQL (индексы, функции, оптимизация, профилирование производительности);
- Знание языков программирования (JAVA, Python);
- Опыт работы c реляционными БД (Oracle, Postgres, MySQL, MsSQL,т.п.);
- Умение работать с Git (знание команд git pull/commit/push);
- Опыт работы с DBT, Cosmos, Ni-Fi;
- Опыт разработки на Spark;
- Понимание особенностей Trino;
- Понимание форматов данных Iceberg, Parquet, Avro;
- Понимание работы с minio или любого другого хранилища на основе S3;
- Опыт использования системами ведения проектов и документации.

📌Обязанности:
Сбор требований с бизнес-заказчиков и анализ источников данных;
- Разработка, реализация и поддержка интеграционных потоков, а также потоков сборки витрин-данных на стеке технологий, принятых в команде: Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink;
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок;
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных;
- Предоставление отчетности о своей деятельности руководителю.


📲Контакт для связи: @Iryn_pnz