Data Engineer / Инженер данных

KazInSys Казахстан, Астана 2025-08-12 12:32:15
Откликнуться на astana.hh.kz

Описание

О проекте:

Мы реализуем проект по созданию аналитических кейсов и дашбордов для принятия управленческих решений на основе данных.
Работаем с 120+ интеграциями в рамках системы SDU, подключаем базы данных госорганов и квазигосударственного сектора, используем Apache Superset как основной инструмент визуализации, а также PostgreSQL, Clickhouse, Apache Airflow для обработки и интеграции данных.

Задачи:

  • Интеграция источников данных в SDU (Smart Data Ukimet) в соответствии с регламентами (Приложение 2 ТС).

  • Разработка и оптимизация ETL/ELT-пайплайнов с использованием Apache Airflow, Pentaho, Python, SQL.

  • Проектирование и настройка витрин данных нулевого и первого уровня (PostgreSQL, Clickhouse).

  • Обеспечение качества данных: валидация, проверка полноты, уникальности, актуальности.

  • Автоматизация обновления данных в аналитических кейсах.

  • Подготовка датафлоу, ER-диаграмм, спецификаций витрин и бизнес-правил.

  • Взаимодействие с бизнес-аналитиком и менеджером проекта для уточнения требований и источников.

  • Поддержка разработки визуализаций в Apache Superset (подключение к витринам, оптимизация запросов).

Технологический стек:

  • Базы данных: PostgreSQL, Clickhouse, MS SQL, MySQL.

  • ETL/ELT: Apache Airflow, Pentaho Data Integration, Python (pandas, SQLAlchemy).

  • Визуализация: Apache Superset (базовые навыки интеграции и оптимизации запросов).

  • Инструменты: Git, DBeaver, Knime, REST API, JSON, XML.

  • Методологии: работа с регламентами интеграции, проектирование DWH.

Требования:

  • Опыт работы Data-инженером или в смежных ролях от 2 лет.

  • Уверенное владение SQL (оптимизация запросов, индексы, партиционирование).

  • Опыт интеграции данных из различных источников (API, файлы, БД).

  • Навык построения ETL/ELT-процессов, автоматизации загрузок.

  • Опыт работы с PostgreSQL и одной из колонночных БД (Clickhouse будет плюсом).

  • Понимание архитектуры DWH и принципов построения витрин данных.

  • Базовые навыки работы с BI-платформами (Superset, Power BI, Tableau и др.).

  • Понимание принципов проверки качества данных.

Будет плюсом:

  • Опыт работы в государственных или квазигосударственных проектах.

  • Знание регламентов интеграции БД в SDU или аналогичные системы.

  • Навыки написания документации (датафлоу, схемы, методики расчета).

  • Опыт в автоматизации тестирования качества данных.

  • Опыт работы с большими объемами данных (Big Data, Kafka, Spark).

Откликнуться на astana.hh.kz

Похожие вакансии

  • DG & DQ (Data Governance & Data Quality)

    Центр цифрового развития Национального Банка Казахстана Казахстан, Астана 15 дней назад
    ... — для анализа, очистки и аудита данных. Опыт работы с инструментами качества данных: Informatica Data Quality, Talend Data Quality, Ataccama, SAP Information Steward, ...
    astana.hh.kz

  • Master Data Manager (MDM)

    Центр цифрового развития Национального Банка Казахстана Казахстан, Астана 15 дней назад
    ... по вопросам политики работы с данными. Требования: Понимание принципов Data Governance (управление данными): Роли и ответственности (data owner, data steward, data consumer); Политики доступа и безопасности; ...
    astana.hh.kz

  • Data Engineer

    Группа компаний Аллюр (Allur) Казахстан, Астана, проспект Туран, 53А 15 дней назад
    ... с SQL и NoSQL базами данных (например, MongoDB, Cassandra). Знание облачных ... парсинга веб-сайтов и извлечения данных из различных веб-источников для ...
    astana.hh.kz

  • Инженер данных

    СЕРВИСНЫЙ ЦЕНТР ERG Казахстан, Астана 7 дней назад
    ... и процессы ETL ELT: собирать данные, из различных источников, такие как: ... в области построения корпоративного хранилища данных (DWH), инженерии данных не менее 3 лет. Опыт в построении пайплайнов больших данных, в промышленной разработке DWH и ...
    astana.hh.kz

  • Senior Data Engineer

    BI Group Казахстан, Астана 6 дней назад
    ... инженером по данным или в аналогичной должности. Внимание к деталям, умение анализировать данные и обеспечивать их высокое качество, проводить контроль качества данных. Наличие сертификатов в области инженерии данных (например, IBM Certified Data Engineer ...
    astana.hh.kz

  • Senior ML Engineer

    Казахтелеком Казахстан, Астана 8 дней назад
    ... от 3 лет в роли Data Engineer или аналогичной, с акцентом на продакшн-инженерию данных. Уверенное владение Python и или ...
    astana.hh.kz

  • Senior Data Engineer

    Казахтелеком Казахстан, Астана 8 дней назад
    ... от 3 лет в роли Data Engineer или аналогичной с акцентом на продакшн-инженерию данных. Уверенное владение Python и или ...
    astana.hh.kz

  • Data Engineer

    Bilim Land (Bilim Group) Казахстан, Астана 9 дней назад
    ... уровень вовлеченности. Мы в поисках Data Инженера с опытом в аналитике данных системного аналитика Опыт работы: От ... 3 лет опыта в роли инженера, аналитика данных или системного аналитика в продуктовой ...
    astana.hh.kz

  • Нумератор (по сбору данных) по проведению опросов с потенциальными эмигрантами

    The Mission of the International Organization for Migration in Kazakhstan, межправительственная организация Казахстан, Астана 23 дня назад
    ... (MWS). Оба мероприятия по сбору данных будут проводиться по всему Казахстану ... , а также предоставления критически важных данных о намерениях миграции и процессах ... - 30 октября 2025 г.) Сбор данных будет проводиться в три разные ...
    astana.hh.kz

  • BI Developer

    Andersen Казахстан, Астана 10 дней назад
    ... . Experience in building and maintaining data extraction, transformation, and loading processes. ... or experience with real-time data streaming. Level of English – from ... for sports activities. Your personal data is protected in accordance with ...
    astana.hh.kz

  • Data Governance Manager (Baku, Azerbaijan)

    KPMG Казахстан, Астана 3 дня назад
    ... hands-on experience in Enterprise Data Management (EDM), including data governance, data quality, and metadata management Possess ...
    astana.hh.kz

  • Technical Solutions Engineer

    Selecty Казахстан, Астана 2 дня назад
    ... : Опыт работы техническим инженером, аналитиком данных систем, data scientist или техническим менеджером проектов; ... ; Навыки общения с инженерами данных и разработчиками на техническом уровне; Интерес к crowdsourcing и data science, стремление к развитию в ...
    astana.hh.kz

  • Tech Lead / Senior Data Engineer

    от 1500 до 3000 USD
    SAUDATA Казахстан, Астана 2 дня назад
    ... мониторинга Сопровождать интеграцию новых источников данных (ОФД) Участвовать в сборе и управлении технической командой Что важно Опыт от 5 лет в роли Data Engineer ML Engineer Уверенное знание Apache Spark, HDFS, ...
    astana.hh.kz

  • Дата-инженер

    ЦРЦЭ Казахстан, Астана день назад
    ... и навыки: Python (Data processing, API) Data modeling: Kimball, Inmon, OBT Опыт работы с DBT Глубокие знание SQL (оптимзация запросов, window functions, cte) Опыт работы с ETL-процессами и инструментами Опыт работы с MPP базами данных (Clickhouse) Tech ...
    astana.hh.kz

  • Data Analytics Engineering

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Астана день назад
    ... you are interested in creating data products and exploring the power of data to turn raw information into ... build a strong foundation in Data & Analytics. Heres what to expect: ... skills to tackle real-world data challenges confidently. What is required ...
    astana.hh.kz

  • Data Analytics Engineering

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Актобе день назад
    ... you are interested in creating data products and exploring the power of data to turn raw information into ... build a strong foundation in Data & Analytics. Heres what to expect: ... skills to tackle real-world data challenges confidently. What is required ...
    aktobe.hh.kz

  • Data Scientist

    Автономный кластерный фонд Парк инновационных технологий (Astana hub) Казахстан, Астана 13 дней назад
    ... с продуктологами, инженерами, аналитиками, дизайнерами; Участие в формулировании ... накопления новых данных. Ведение технической документации; Обеспечение воспроизводимости моделей и экспериментов. Работа с Big Data (Spark, Hadoop); Разработка моделей с ...
    astana.hh.kz

  • Middle Data Engineer

    от 400000 до 800000 KZT
    Dreamlab Technologies Ltd Казахстан, Астана, проспект Туран, 55А день назад
    ... работы в роли Data Engineer или Python-разработчика от 2 лет Уверенное знание Python 3.x, умение писать чистый, поддерживаемый код Практический опыт работы с ETL ELT процессами Хорошее знание SQL, опыт работы с реляционными базами данных Опыт работы с ...
    astana.hh.kz

  • Data Engineering (Tech Orda Voucher) Trainee

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Астана 14 дней назад
    ... selection process. The Big Data Engineering program equips you with ... applications for real-time data transformation and processing. Automate data flows with Apache NiFi and ... , and Jenkins in modern data projects. Explore Elasticsearch – learn how ...
    astana.hh.kz

  • Data Engineering (Tech Orda Voucher) Trainee

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Актау 14 дней назад
    ... selection process. The Big Data Engineering program equips you with ... applications for real-time data transformation and processing. Automate data flows with Apache NiFi and ... , and Jenkins in modern data projects. Explore Elasticsearch – learn how ...
    aktau.hh.kz

  • Senior Software Engineer

    Казахтелеком Казахстан, Астана 8 дней назад
    ... Software Engineer для работы над высоконагруженными системами обработки данных. В этой роли вы будете ... партиционирования данных. Знание Kubernetes, Helm. Участие в создании Data Platform DMP CDP. Понимание Data Mesh, микросервисной архитектуры. Мониторинг и ...
    astana.hh.kz

  • Data Engineer (Дата инженер)

    от 500000 KZT
    Geometry Казахстан, Астана 9 дней назад
    ... массивами данных BigData, Знание Kubernetes, опыт работы с CI CD пайплайнами (Jenkins, GitLab CI CD), Навыки тестирования кода, обеспечение надежности операций. Опыт интеграции AI ML‑решений Что мы ждём от вас: От 3 лет опыта в роли Data Engineer ETL ...
    astana.hh.kz

  • Lead Data Science

    BI Group Казахстан, Астана 7 дней назад
    ... и метрики Проведение глубокого анализа данных и построение деревьев метрик для ... сертификаты (например, Google Cloud Professional Data Engineer, AWS ML Specialist, Microsoft AI Engineer и др.). Условия: Гибкий график ...
    astana.hh.kz

  • Специалист по работе с персональными данными

    ЧАСТНАЯ КОМПАНИЯ INTERNATIONAL TRADING SYSTEM LIMITED Казахстан, Астана 22 дня назад
    ... преимуществом, Умение определять категории персональных данных, Опыт проведения оценки угроз безопасности персональных данных, Знание GDPR, Знание ISO IEC ...
    astana.hh.kz

  • Аналитик данных (ГПХ)

    СЕРВИСНЫЙ ЦЕНТР ERG Казахстан, Астана 6 дней назад
    ... математика с уклоном в анализ данных). Опыт в DWH, Data Science или BI от 1 ... Будет плюсом: Сертификаты в области Data Science. Опыт работы с open source аналитическими решениями. Знания в инженерии данных (ELT), опыт в горно-металлургической ...
    astana.hh.kz

  • Старший BI аналитик

    BI Group Казахстан, Астана 6 дней назад
    ... 3–5 лет на позиции Data-аналитика. Успешный опыт работы с большими объемами данных и извлечения из них ценных ... дополнительные сертификаты в области анализа данных и BI (например, Tableau, Power BI, Google Data Analyst). Условия: Социальный пакет (фитнес, ...
    astana.hh.kz

  • BI Analyst

    Nexters Global LTD Казахстан, Астана 22 дня назад
    ... Data Ecosystem. Ты станешь экспертом команды ... игровая телеметрия, маркетинговые данные) и коллаборация с дата-инженерами для их объединения, преобразования и загрузки в наши хранилища данных (ClickHouse, Databricks). Качество данных и документирование, ...
    astana.hh.kz

  • Инженер

    от 200000 до 350000 KZT
    ТОНЕРИКО Казахстан, Астана 5 дней назад
    ... документации. Ищем квалифицированных инженеров, готовых быть включёнными в состав ... - Поддержание актуальности предоставленных данных Требования: Высшее техническое образование:«Инженер электросвязи» «Инженер радиосвязи»• Подтверждённый опыт работы от ...
    astana.hh.kz

  • Data Science Trainee

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Астана день назад
    ... pave your way in the data-driven world, then this program ... our mentoring programs in specialized Data Science domains After successfully completing ... build a strong foundation in Data Science. Heres what to expect: ...
    astana.hh.kz

  • Data Science Trainee

    Epam Kazakhstan (Эпам Казахстан),ТОО Казахстан, Актобе день назад
    ... pave your way in the data-driven world, then this program ... our mentoring programs in specialized Data Science domains After successfully completing ... build a strong foundation in Data Science. Heres what to expect: ...
    aktobe.hh.kz

  • Mid‑Level Machine Learning Engineer

    Dreamlab Technologies Ltd Казахстан, Астана, проспект Туран, 55А день назад
    ... a Mid‑Level Machine Learning Engineer, you’ll contribute to the design, ... Key Responsibilities: Assist in building data pipelines for model training Run ... in applied machine learning or data science roles. Hands‑on with ...
    astana.hh.kz

  • Инженер по техобслуживанию / Maintenance engineer

    Patentes Talgo, S.L. Филиал в Республике Казахстан Казахстан, Астана, улица Мунайшылар, 24/4 день назад
    ... . в Республике Казахстан открыта вакансия Инженер электрик Maintenance electrical engineer Откликаться только тем кандидатам, кто ... бортовых диагностических систем; Поддерживать базу данных центра по инструментам и оборудованию ...
    astana.hh.kz

  • DevOps Engineer

    Коркем Телеком Казахстан, Астана день назад
    ... , Red Hat. Знание баз данных: Опыт работы с реляционными базами данных - уверенное знание PostgreSQL Знание S3 ... Kubernetes. Настройка и обслуживание баз данных: Установка, настройка и обслуживание различных баз данных, таких как PostgreSQL и обеспечение ...
    astana.hh.kz

  • Senior DevOps Engineer

    Коркем Телеком Казахстан, Астана 22 дня назад
    ... , Red Hat. Знание баз данных: Опыт работы с реляционными базами данных - уверенное знание PostgreSQL Знание S3 ... Kubernetes. Настройка и обслуживание баз данных: Установка, настройка и обслуживание различных баз данных, таких как PostgreSQL и обеспечение ...
    astana.hh.kz

  • Аналитик данных

    от 500000 до 500000 KZT
    Алшериев А К Казахстан, Астана день назад
    ... для извлечения, преобразования и загрузки данных (ETL). Требования: Глубокие знания Excel: ...
    astana.hh.kz

  • Python разработчик (Middle/Middle+)

    от 400000 до 800000 KZT
    Dreamlab Technologies Ltd Казахстан, Астана, проспект Туран, 55А день назад
    ... таких как Selenium, для сбора данных.- Опыт работы с Docker и ... и методов сбора открытых данных.Приветствуется: - Опыт работы с другими графовыми базами данных или инструментами для анализа больших данных.- Знание инструментов мониторинга и логирования ( ...
    astana.hh.kz

  • Аналитик данных

    от 500000 до 500000 KZT
    Real Trade Astana Казахстан, Астана, проспект Республики, 24 3 дня назад
    ... сфере ИТ, компьютерных наук, Big Data или смежных направлений Обязанности: Поиск, подключение и интеграция источников данных (ERP, 1С, SQL, API и ...
    astana.hh.kz

  • Data Scientist

    Butterfly Effect Казахстан, Астана 3 дня назад
    ... . Требования: Знание и понимание технологии Data Science, в том числе ML и DL; Знание основ алгоритмов и структуры данных; Уверенное владение Python (numpy, pandas, ...
    astana.hh.kz

  • Senior Data Scientist

    Казахтелеком Казахстан, Астана 8 дней назад
    ... этапах проектов — от исследования данных до внедрения; Работа с большими данными: очистка, анализ, создание признаков (фичей); ... Взаимодействие с архитекторами, аналитиками и инженерами данных. Требования: Опыт работы Data Scientist от 3 лет; Уверенное ...
    astana.hh.kz

Карточка вакансии:

  • Должность Data Engineer / Инженер данных
  • Размещено: 2025-08-12 12:32:15
  • Город Казахстан, Астана
  • Зарплата:
  • Компания: KazInSys