Ведущий специалист по инженерии данных

Vəzifə haqqında

DataLead olaraq müxtəlif müəssisələr üçün Data Lakehouse, Data Warehouse, Data Integration və Analytics platformaları qururuq. Mövcud layihələrimizin texniki istiqamətini idarə edəcək, yeni həllərin arxitekturasında iştirak edəcək və Data Engineering komandasının inkişafına töhfə verəcək Lead Data Engineer axtarırıq.

Bu rol həm güclü hands-on texniki təcrübə, həm də layihə və komanda səviyyəsində ownership tələb edir. Namizəd yalnız texniki həll hazırlayan mühəndis deyil, eyni zamanda layihənin texniki istiqamətini müəyyən edən əsas şəxslərdən biri olacaq.

Əsas məsuliyyətlər

• Mövcud Data Lakehouse və Data Warehouse layihələrinin texniki istiqamətinin idarə edilməsi;
• Yeni data platformalarının arxitekturasının hazırlanması və uyğun texnologiya seçimlərinin edilməsi;
• Müştəri ehtiyaclarının texniki tələblərə və icra planına çevrilməsi;
• ETL/ELT, batch, streaming və CDC əsaslı data pipeline-ların dizaynı və inkişafına rəhbərlik;
• Müxtəlif məlumat mənbələrinin vahid analitik platformalara inteqrasiyasının təşkili;
• Legacy sistemlərdən müasir data platformalarına keçid və migration layihələrinin texniki planlaşdırılması;
• Data modeling, data quality, metadata və lineage yanaşmalarının layihələrdə tətbiqi;
• Data platformalarının performans, etibarlılıq və miqyaslana bilmə baxımından optimallaşdırılması;
• Data pipeline-ların monitorinqi, troubleshooting və production problemlərinin həllində texniki liderlik;
• Komanda tərəfindən hazırlanmış həllərin, kodların və data flow-ların review edilməsi;
• Texniki standartların, reusable yanaşmaların və Data Engineering best practice-lərin formalaşdırılması;
• Data Engineer-lərə gündəlik texniki dəstək və mentorluq verilməsi;
• Layihələr üzrə workload, prioritet və texniki risklərin idarə edilməsində iştirak;
• Müştərilərlə texniki workshop və görüşlərdə iştirak;
• Təklif olunan həllərin arxitektura və texniki baxımdan təqdim edilməsi;
• Yeni layihələr üçün solution design, estimation və technical proposal hazırlanmasına töhfə verilməsi;
• Yeni Data Engineer namizədlərinin texniki qiymətləndirilməsində iştirak;
• Yeni texnologiyaların qiymətləndirilməsi və uyğun olduqda layihələrdə tətbiqi.

Texnologiyalar

Apache Spark, Spark SQL, PySpark, Python, SQL, Apache Iceberg, Parquet, MinIO, S3-compatible Object Storage, Apache Kafka, CDC, Apache Airflow, dbt, Oracle, PostgreSQL, Microsoft SQL Server, MySQL, Kubernetes, Docker, Linux, Git, CI/CD, OpenMetadata, REST API, Power BI, Apache Superset.