Инженер данных / эксперт отдела информационных систем управления

Əsas Vəzifələr

• Etibarlı ETL/ELT data pipeline-larının dizaynı, işlənməsi, test edilməsi və dəstəklənməsi.
• Əsas bank sistemi və digər əməliyyat mənbə sistemlərindən datanın inteqrasiyası.
• Mənbə sistem cədvəllərinin təhlili və mənbədən hədəfə (source-to-target) mapping-lərin hazırlanması.
• Fakt cədvəllərinin, ölçülərin (dimension), arayış datasının, data marketlərinin və tarixi data strukturlarının dizaynı və dəstəklənməsi.
• Tam və artan (full və incremental) data yükləmə proseslərinin tətbiqi.
• Data validasiyası, uzlaşdırma (reconciliation), loglama, monitorinq və xəta idarəetmə mexanizmlərinin hazırlanması.
• ETL işlərinin monitorinqi və uğursuz və ya gecikmiş data yüklərinin araşdırılması.
• SQL sorğularının, PL/SQL proqramlarının, verilənlər bazası obyektlərinin və ETL iş axınlarının işlənməsi və optimallaşdırılması.
• Biznes analitiklər, hesabat developer-ləri, verilənlər bazası administratorları, informasiya təhlükəsizliyi komandaları və biznes maraqlı tərəflərlə əməkdaşlıq.
• Data modelləri, ETL iş axınları, asılılıqlar və transformasiya qaydaları üzrə texniki sənədləşmənin hazırlanması və dəstəklənməsi.
• Bankın informasiya təhlükəsizliyi, giriş nəzarəti, audit və data idarəetməsi (governance) tələblərinə əməl olunması.
• Gələcək data lake, streaming və qabaqcıl analitika təşəbbüslərinə töhfə vermək.

Tələblər

• Data mühəndisliyi, ETL developmenti, verilənlər bazası developmenti və ya oxşar sahədə ən azı 3 il təcrübə.
• SQL və PL/SQL üzrə güclü praktiki bilik.
• PL/SQL prosedurları, funksiyaları, paketləri və mürəkkəb SQL sorğularının işlənməsi təcrübəsi.
• ETL/ELT pipeline-larının dizaynı, işlənməsi və dəstəklənməsi təcrübəsi.
• Ən azı bir korporativ (enterprise) ETL aləti ilə praktiki təcrübə.
• Oracle və/və ya PostgreSQL kimi relyasion verilənlər bazaları ilə iş təcrübəsi.
• ETL arxitekturası və tam/artan data yükləmə modellərini anlama.
• Data Anbarı (Data Warehouse) arxitekturası və ölçülü (dimensional) data modelləşdirməsini anlama.
• Fakt cədvəlləri, ölçülər, data marketləri və tarixi data ilə iş təcrübəsi.
• Data validasiyası, uzlaşdırma, problemlərin həlli və performans optimallaşdırılması üzrə təcrübə.
• Git və ya digər versiya nəzarəti sistemini anlama.

Üstünlük təşkil edən tələblər

Aşağıdakı bacarıqlar üstünlük hesab olunacaq:

• Data emalı və avtomatlaşdırma üçün Python bilikləri.
• Paylanmış data emalı üçün Apache Spark və ya PySpark təcrübəsi.
• Data daxiletmə və inteqrasiya üçün Apache NiFi təcrübəsi.
• Apache Airflow və ya digər iş axını orkestrasiya platforması təcrübəsi.
• Apache Kafka və ya digər mesajlaşma platforması bilikləri.
• Data lake və lakehouse arxitekturaları ilə tanışlıq.
• Docker, Kubernetes və CI/CD təcrübələri üzrə bilik.
• Data keyfiyyəti, metadata idarəetməsi, data lineage və data governance haqqında anlayış.
• Bank və ya maliyyə xidmətləri sahəsində əvvəlki təcrübə.

Təhsil

• Kompüter Elmləri, İnformasiya Texnologiyaları, Mühəndislik, Riyaziyyat və ya əlaqəli sahədə bakalavr dərəcəsi.

Dil Tələbləri

• Azərbaycan dili: Səlis.
• İngilis dili: Orta və ya yuxarı səviyyə.
• Rus dili: Üstünlük təşkil edir.