Data Engineer (в архиве)

08 Февраля

Партнерские Вакансии

Город:

Астана

Занятость:

Полная занятость

Опыт:

Более 6 лет

Компания "Транстелеком"

Ключевые задачи:
  • Проектирование и разработка архитектуры корпоративного хранилища данных (КХД) из различных источников данных;

  • Создание, оптимизация и поддержка многослойной архитектуры DWH;

  • Разработка и сопровождение ETL/ELT процессов с использованием

    Python,SQL и Airflow;

  • Проектирование и реализация пайплайнов обработки данных с учетом требований производительности и масштабируемости;

  • Оркестрация процессов обработки данных — написание, оптимизация и поддержка DAG в Apache Airflow;

  • Интеграция данных из различных источников: реляционных БД,

    API, файловых систем, потоковых источников;

  • Работа с SQL базами данных (PostgreSQL,Clickhouse) — проектирование схем,

    оптимизация запросов;

  • Разработка и поддержка API для доступа к данным и интеграции систем;

  • Настройка и поддержка конвейеров данных с использованием

    Docker и контейнеризации.

Навыки, которые нам необходимы:
  • Высшее техническое образование (информационные технологии, математика, физика или смежные специальности);

  • Опыт работы инженером данных или в смежной роли не менее 3-х лет;

  • Уверенное знание Python для разработки ETL/ELT процессов (pandas,requests,

    библиотеки для работы с БД);

  • Опыт проектирования и работы с многослойными архитектурами хранилищ данных(DWH);

  • Опыт работы с Kubernetes для оркестрации контейнеров;

  • Знание Greenplum или других MPP систем;

  • Опыт работы с инструментами визуализации данных (Power BI, Tableau,Qlik

    Sense,Superset);

  • Опыт построения real-time/near real-time пайплайнов обработки данных.

То, что ждет вас в команде:
  • Работа в стабильной и динамичной Компании;
  • Карьерный рост;
  • Добровольное медицинское страхование (ДМС);
  • Материальная помощь по памятным событиям;
  • Отпуск 28 дней;
  • Яркая корпоративная жизнь.
Похожие вакансии

19 Февраля

QA Engineer( Hard Code )

Астана

Компания "Hard Code" Обязанности: Тестирование REST API с помощью Postman / Swagger Регистрация багов и составление протокола по...

Отправить резюме подробнее

19 Февраля

AI Agent Engineer

Астана

Компания "DATAPAX" Это инженерный R&D-проект на стыке: LLM / AI agents Retrieval-Augmented Generation (RAG) backend-систем интеграций...

Отправить резюме подробнее

19 Февраля

Senior Software Engineer (Gameplay)

Астана

Компания "Playrix" Playrix — одна из самых успешных компаний по разработке мобильных игр в мире. По доходам среди всех мобильных приложений мы...

Отправить резюме подробнее

19 Февраля

Senior Software Engineer С++ (Gameplay)

Астана

Компания "Playrix" Playrix — одна из самых успешных компаний по разработке мобильных игр в мире. По доходам среди всех мобильных приложений мы...

Отправить резюме подробнее

17 Февраля

Lead Unity Software Engineer (Gameplay)

Астана

Компания "Playrix" Playrix — одна из самых успешных компаний по разработке мобильных игр в мире. По доходам среди всех мобильных приложений мы...

Отправить резюме подробнее

Вакансия размещена в отрасли

Информационные технологии / IT / Интернет: