Компания "Match me"
Наш клиент - аутсорсинговая IT-компания. Работаем сейчас над мобильными приложениями для клиентов. Текущий проект: мобильное приложение для покупки и управления недвижимостью. Продукт интегрируется с CRM/ERP, работает с реальными транзакциями и персональными данными.
Команда расширется, и сейчас мы ищем data engineer.
Задачи:
Разработка и поддержка DWH (модели, витрины, слои staging / intermediate / marts)
Построение и оптимизация ETL/ELT пайплайнов
Работа с источниками данных (продуктовые БД, внешние API, события, CRM)
Обеспечение качества данных:
контроль целостности, обработка NULL / дубликатов, валидация бизнес-логики
Оптимизация SQL-запросов и производительности хранилища
Настройка прав доступа (PostgreSQL / ClickHouse)
Работа с аналитиками и продуктовой командой: помощь в формулировке метрик, проверка корректности данных
Документирование моделей и бизнес-логики
Требования:
Уверенный SQL (сложные JOIN, оконные функции, оптимизация)
Опыт работы с REST API
Опыт работы с DWH (понимание слоёв и моделирования)
dbt (моделирование, тесты, документация)
Apache Airflow ( построение и мониторинг DAG)
Python (для data-пайплайнов и дата скрапинга)
PostgreSQL (DDL/DML, права доступа, оптимизация)
ClickHouse (аналитические запросы, оптимизация)
Опыт построения ETL/ELT процессов
Опыт работы с большими объемами данных
Условия:
16 Июня
Facebook/Meta API Engineer/Researcher
Астана
Компания "Dolphin" Dolphin — IT-компания, которая занимается разработкой высокотехнологичных продуктов для автоматизации профессиональной...
15 Июня
Астана
Компания "Yurt Tech" Что нужно делать? 1. Разработка и доработка ML-моделей * Разработка моделей машинного обучения и глубокого...
17 Июня
Speech / ASR Data Manager (Kazakh Language)
Астана
Компания "Bilim Land" Bilim Group - это продуктовая EdTech-компания в Казахстане. Мы работаем с огромным масштабом изменений - со всей...
18 Июня
Senior SecOps / Threat Hunting / Detection Engineer
Астана
Компания "Pro People" Задачи: Мониторинг, анализ и обеспечение visibility событий безопасности корпоративной инфраструктуры. Развитие и...
19 Июня
Астана
Компания "Pro People" Чем предстоит заниматься: 1. Тестирование продукта Проведение функционального, регрессионного и интеграционного...
Вакансия размещена в отрасли