Data Engineer

Data Engineer

PaynetEasy (Fintech)
ЗП: 3000-4000 $ на руки (выше тоже готовы обсуждать)
Условия: полная занятость, удаленка (разные страны), или офис\ гибрид (Москва).

О позиции

Мы ищем опытного SQL-разработчика, который будет проектировать, разрабатывать и оптимизировать аналитические и транзакционные решения на базе ClickHouse и YDB. Вы станете частью команды, отвечающей за работу с данными на масштабах, где скорость и надёжность — не пожелание, а требование.

Задачи:
- Проектировать схемы данных и писать высоконагруженные SQL-запросы для аналитических и OLTP-задач.
- Разрабатывать и поддерживать ETL/ELT-пайплайны, обеспечивая качество и консистентность данных.
- Оптимизировать производительность запросов: профилирование, анализ планов выполнения, выбор стратегий партиционирования и шардирования в ClickHouse.
- Участвовать в проектировании архитектуры хранения данных, выбирая подходящий движок (MergeTree, ReplacingMergeTree и др.) под конкретную задачу.
- Взаимодействовать с бэкенд-командой для интеграции слоя данных с сервисами приложения. Документировать решения, схемы и подходы для команды.

Требования:
- Уверенное владение SQL - сложные аналитические запросы, оконные функции, CTE, подзапросы.
- Опыт работы с ClickHouse от 3 лет: понимание архитектуры колоночного хранения, движков таблиц, материализованных представлений, настройки репликации и шардирования.
- Понимание принципов проектирования схем данных для OLAP-систем. Опыт работы с большими объёмами данных (десятки и сотни миллиардов строк).
- Навыки профилирования и оптимизации запросов.
- Знакомство с Linux на уровне уверенного пользователя.

Будет плюсом:
- Опыт работы с YDB — понимание модели данных, работа с YQL, знание подходов к проектированию распределённых транзакционных схем.
- Опыт с другими СУБД: MySQL, MariaDB.
- Знакомство с инструментами миграции данных (debezium).
- Понимание принципов распределённых систем и CAP-теоремы.

Мы предлагаем:
- Полная занятость.
- Удаленка, офис\ гибрид (Москва).
- Возможность гибкого графика.

Контакты ТГ: @DmitryITRecruiter