EDW-разработчик (ETL/ELT)

#РФ #вакансия #удаленно #remote #EDW #ETL

Вакансия: EDW-разработчик (ETL/ELT)
Грейд: Senior
Компания: JETLYN
Формат: удаленно
Локация: Россия
Гражданство: РФ
Вилка ЗП: от 190 000 до 220 000 рублей на руки в месяц
Условия оформления, формат: ТК/ИП

🟡О проекте:
Мы развиваем платформу для анализа больших данных в финтехе и ищем инженера, который поможет масштабировать наше хранилище.

🟡Обязанности:
Разработка потоков данных: Проектирование и реализация ETL/ELT-процессов для загрузки и трансформации данных из разнородных источников;
Кастомные трансформации: Имплементация сложной бизнес-логики и нестандартных преобразований данных;
Прототипирование и витрины: Проектирование и построение прототипов, создание витрин данных для аналитики и отчетности;
Оптимизация и масштабирование: Анализ производительности существующих пайплайнов, оптимизация SQL-запросов и структур баз данных, участие в масштабировании систем;
Разработка на PL/pgSQL: Написание хранимых процедур, функций и триггеров для PostgreSQL;
Архитектура DWH: Развитие архитектуры хранилища данных, анализ и выбор оптимальных технологий, методологий (Data Vault, Inmon, Kimball) и инструментов;
Документация и знания: Создание и актуализация базы знаний, технической документации и гайдов для пользователей DWH.

❗️Требования:

Ключевые компетенции
ETL
elt
Data Vault
EDW
Data Lake

Опыт разработки ETL/ELT-процессов от [2-3] лет;
Уверенное владение SQL и опытом оптимизации сложных запросов;
Опыт разработки на PL/pgSQL (хранимые процедуры, функции, триггеры);
Понимание методологий проектирования хранилищ данных: Data Vault, EDW, Data Lake;
Опыт проектирования витрин данных и работы с большими объемами информации;
Понимание принципов масштабирования и оптимизации производительности БД;
Навыки документирования решений и передачи знаний команде.
Будет преимуществом:
Опыт работы с инструментами оркестрации: Apache Airflow, Luigi, Dagster;
Знакомство с распределенными системами: Apache Spark, Hadoop, Kafka;
Опыт работы с облачными платформами (Yandex Cloud, S3, ClickHouse, Greenplum);
Знание Python/Java для разработки кастомных трансформаций;
Опыт внедрения Data Quality-процессов и мониторинга пайплайнов.

Резюме и вопросы направляйте, пожалуйста, в телеграмм в ЛС [контакт скрыт] 📲