Data Engineer at Dreamlab Technologies Ltd — NeverHard

Обязанности: Разработка и поддержка ETL/ELT пайплайнов на Python Интеграция данных из различных источников (API, базы данных, файлы, облачные хранилища) Работа с хранилищами и базами данных (PostgreSQL, MySQL, MS SQL, ClickHouse и др.) Настройка и сопровождение процессов в Airflow (или аналогичных инструментах) Оптимизация производительности пайплайнов и SQL-запросов Миграция больших объемов данных между системами хранения с обеспечением целостности и минимизацией простоя Участие в проектировании архитектуры data-инфраструктуры Сотрудничество с аналитиками, разработчиками и Data Science командой Требования: Опыт работы в роли Data Engineer или Python-разработчика от 2 лет Уверенное знание Python 3.x, умение писать чистый, поддерживаемый код Практический опыт работы с ETL/ELT процессами Хорошее знание SQL, опыт работы с реляционными базами данных Опыт работы с системами оркестрации задач (Airflow, Prefect или др.) Опыт работы с Apache Spark, Data Lake / Data Warehouse, Kafka. Опыт работы с системами контроля версий (Git) и контейнерами (Docker) Знание архитектуры Data Lake / Data Warehouse Условия: Официальное трудоустройство согласно Трудовому кодексу Республики Казахстан; График работы: 5/2, с 09:00 до 18:00; Формат работы: офис в г. Астана; Стабильная заработная плата, размер обсуждается по итогам собеседования; Оплачиваемый ежегодный трудовой отпуск; Современное рабочее место и необходимая техника; Возможность профессионального и карьерного роста; Сильная команда разработчиков, аналитиков и менеджеров; Возможность принимать участие в развитии архитектуры и технических решений проектов; Корпоративные мероприятия и комфортная рабочая атмосфера.