Data Engineer at HALYK FINANCE, дочерняя организация АО Народный банк — NeverHard

Ваши главные задачи: Участвовать в разработке отчетной системы; Разрабатывать и поддерживать batch ETL-процессы (Python, SQL, Airflow); Разрабатывать и поддерживать обработку потоков данных (Python, RabbitMQ); Дорабатывать и развивать хранилище данных, строить витрины данных; Интегрировать новые источники данных в DWH; Реализовывать проверки качества данных DQ; Внедрять новые инструменты по работе с данными в компании; В ходе работы выстраивать процессы коммуникации с заказчиками; Нас интересует: Хорошое знание SQL - оконные функции, сложные join'ы и подзапросы, опыт оптимизации больших SQL запросов; Понимание принципов работы реляционных и колоночных СУБД, опыт проектирования DWH моделирование данных, разбиение по слоям; Хорошее знание Python (навыки работы с Pandas будут плюсом), опыт построения data pipeline’ов при помощи Airflow; Владение инструментами - Git, Docker, навыки работы с NoSQL СУБД; Знание технологий DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi. Мы предлагаем: Работу в крупнейшей финансовой группе страны с устойчивыми возможностями профессионального и карьерного роста; Годовой бонус и премию ко Дню Независимости; ДМС после прохождения испытательного срока; 26 календарных дней отпуска + дополнительные дни при важных жизненных событиях; Медицинский check-up после 1 года работы; Льготные условия на корпоративный паркинг; Открытую корпоративную культуру: спортивные турниры, занятия йогой, корпоративные мероприятия; Профессиональное развитие: тренинги, обучение и индивидуальный план развития; Участие в новых проектах группы Halyk и возможность реализовывать собственные инициативы; Формат работы: график 5/2, 09:00–18:00.