УКРЕКСІМБАНК запрошує прийняти участь у конкурсі на вакансію Data Engineer
Ми шукаємо Дата інженера для побудови та супроводження ETL/ELT-пайплайнів у команду дата інженерів . Головна задача — проєктування, розробка та надійна експлуатація конвеєрів даних між джерелами (Oracle / PostgreSQL) та цільовими сховищами (PostgreSQL, AWS), з оркестрацією через Apache Airflow.
З нами ви отримаєте:
Роботу в державному експортно-імпортному банку;
Офіційне працевлаштування;
Додаткові дні календарної відпустки;
Доступ до програм навчання та тренінгів;
Широкі можливості для професійного розвитку.
Функціональні обов’язки:
Розробка та підтримка DAG’ів в Apache Airflow: розклад, залежності, retry-логіка, алертинг
Побудова ETL/ELT-пайплайнів для завантаження даних з Oracle та/PostgreSQL
Реалізація інкрементальних (delta) завантажень за датою/ID з автоматичним визначенням змін
Оптимізація продуктивності завантажень (bulk-операції, COPY FROM STDIN, партиціювання)
Побудова пайплайнів вивантаження даних у AWS (S3, Parquet-формат )
Реалізація інкрементальних (delta) завантажень за датою/ID з автоматичним визначенням змін
Оптимізація продуктивності завантажень (bulk-операції, COPY FROM STDIN, партиціювання)
Побудова пайплайнів вивантаження даних у AWS (S3, Parquet-формат )
Моніторинг якості даних: валідація, узгодженість схем, обробка помилок і дублікатів
Супроводження існуючих пайплайнів: діагностика збоїв, рефакторинг, документування
Взаємодія з аналітиками та власниками систем-джерел для узгодження структур даних
Ведення технічної документації по пайплайнах і схемах даних
Наші очікування:
Вища освіта
Досвід роботи з Apache Airflow від 1 року (DAG’и, оператори, sensors, XCom)
Впевнене знання SQL та досвід роботи з Oracle або MSSQL
Досвід роботи з PostgreSQL як цільовою СУБД
Python на рівні написання production-коду (ETL-скрипти, обробка помилок, логування)
Розуміння принципів ETL/ELT: full load, incremental load, CDC
Базовий досвід роботи з AWS (S3 щонайменше; розуміння IAM/ролей доступу)
Розуміння роботи з форматом Parquet та колонковими сховищами
Буде плюсом:
PL/SQL (пакети, процедури, тригери) — при роботі з Oracle
Docker / Docker Compose
BI-інструменти (Superset, Power BI тощо)
Досвід у банківській/регульованій сфері
AWS
Просимо надсилати розгорнуті резюме із зазначенням назви вакансії та бажаного рівня з/п.
Ми уважно розглядаємо кожне отримане резюме. Якщо ви не отримали відповідь протягом 14-ти днів, це означатиме, що на даний момент у нас немає вакансії, яка відповідає вашому досвіду роботи та кваліфікації.
