Data Platforması üzrə Mühəndis
PAŞA Sığorta ASC namizədləri Data Platforması üzrə Mühəndis vəzifəsinə müraciət etməklə peşəkar komandanın üzvü olmağa dəvət edir.
Data Platform Engineer təşkilatın məlumat platformasının sabitliyini və təhlükəsizliyini təmin etmək, performansını optimallaşdırmaq, eləcə də məlumat komandalarına texniki dəstək göstərmək üçün kritik rol oynayır. Bu vəzifə, platformanın idarə olunması, resursların səmərəli bölüşdürülməsi, avtomatlaşdırılmış proseslərin qurulması və məlumat axınlarının effektiv şəkildə idarə olunması ilə biznesin davamlı inkişafına və rəqəmsal transformasiyasına töhfə verir.
Öhdəliklər
Məlumat platformasının (Trino, Spark, S3, Apache Iceberg) sabitliyini və təhlükəsizliyini təmin etmək.
Platformanın performansını optimallaşdırmaq, resurs qruplarını konfiqurasiya etmək və SQL sorğularını təhlil edib tənzimləmək.
ELT boru xətlərinin və Airflow DAG-larının yerləşdirilməsi üçün CI/CD proseslərini qurmaq və məlumat komandalarına problemlərin həllində dəstək olmaq.
Platformada rol əsaslı girişə nəzarət (RBAC) və məlumatlara çıxış siyasətlərini idarə etmək.
Mövcud problemləri qiymətləndirmək və həll yolları tapmaq.
Proqram təminatlarının yerləşdirilməsində yaranan çətinlikləri müəyyənləşdirmək və həll etmək.
Kodun (script) hazırlanmasına və keyfiyyətinə nəzarət etmək, proseslərin səmərəliliyinin artırılması layihələrində iştirak etmək.
Kodlaşdırmanın standartlaşdırma və avtomatlaşdırma prosesləri üzrə planların hazırlanmasında iştirak etmək.
Sistemlərin vəziyyətini yoxlamaq, nəzarət etmək və müvafiq hesabatların hazırlanması kimi gündəlik tapşırıqları yerinə yetirmək.
Konfiqurasiyanın idarə edilməsi və problemlərin aradan qaldırılması biliklərini formalaşdırmaq.
Bilik və Bacarıqlar
Spark, Airflow və Kafka ilə praktik biliklər.
Apache Iceberg və S3 ilə Spark inteqrasiyasını başa düşmək.
SQL üzrə güclü biliklər və sorğu optimallaşdırma təcrübəsi.
Relational verilənlər bazaları (PostgreSQL) ilə işləmə bacarığı.
Apache Iceberg-də cədvəllərin idarə olunması və Hive Metastore və ya Nessie ilə işləmə təcrübəsi.
Python proqramlaşdırma bacarıqları, xüsusilə ELT boru xətləri və Airflow DAG-ları üçün.
CI/CD (GitLab) prosesləri ilə işləmə bacarığı.
Kubernetes, Terraform və ya Ansible ilə işləmə bacarığı üstünlükdür.
dbt və Debezium ilə təcrübə üstünlükdür.
Greenplum idarəetməsi üzrə biliklər üstünlükdür.
Provisioning, container və orchestration texnologiyaları (Kubernetes, Helm Chart, helm operatorlar) ilə tanışlıq.
Non-relational bazalar (Redis, Mongo) üzrə biliklər və təcrübə.
Monitorinq və logging texnologiyaları (Nagios, ELK, GrayLog, Prometheus, Alert manager) ilə biliklər.
Mikroxidmətlər üzrə anlayış və təcrübə.
Versiya kontrol sistemləri ilə işləmə bacarığı.
Ünsiyyət, dəqiqlik, fikirləri aydın ifadə etmək, tez reaksiya vermək və komanda ilə işləmək bacarıqları.
Dil bilikləri: Azərbaycan, İngilis
Təhsil və Təcrübə
Müvafiq texniki sahə üzrə ali təhsil.
Məlumat platformaları və ya İT infrastrukturu üzrə minimum 1 il iş təcrübəsi.
Bizim Təklifimiz
Peşəkar və dinamik komandada inkişaf və öyrənmə imkanı.
Rəqəmsal transformasiya və innovativ layihələrdə iştirak şansı.
Açıq və şəffaf korporativ mühit.
“Great Place To Work” sertifikatlı şirkətdə çalışma imkanı.
*Yalnız ilkin seçim tələblərinə cavab verən namizədlərlə əlaqə saxlanılacaqdır.
PASHA Insurance OJSC invites candidates to apply for the position of Data Platform Engineer and become a member of our professional team.
The Data Platform Engineer plays a critical role in ensuring the stability and security of the organization’s data platform, optimizing its performance, and providing technical support to data teams. This position contributes to business continuity and digital transformation by managing the platform, efficiently allocating resources, building automated processes, and effectively handling data flows.
Responsibilities
Ensure the stability and security of the data platform (Trino, Spark, S3, Apache Iceberg).
Optimize platform performance by configuring resource groups and analyzing and tuning SQL queries.
Build CI/CD processes for deploying ELT pipelines and Airflow DAGs, and support data teams in troubleshooting and debugging issues.
Manage role-based access control (RBAC) and data access policies for the platform.
Evaluate existing problems and identify solutions.
Identify and resolve challenges in software deployment.
Oversee timely preparation and quality of code (scripts), and participate in projects aimed at increasing process efficiency.
Participate in planning for standardization and automation of coding processes for the organization.
Monitor system status, perform daily control tasks, and prepare relevant reports.
Develop knowledge in configuration management and troubleshooting.
Knowledge and Skills
Practical experience with Spark, Airflow, and Kafka.
Understanding of Spark integration with Apache Iceberg and S3.
Strong SQL skills and experience in query optimization.
Ability to work with relational databases (PostgreSQL).
Experience administering Apache Iceberg tables and working with Hive Metastore or Nessie.
Python programming skills, especially for ELT pipelines and Airflow DAGs.
Experience with CI/CD (GitLab) for data projects.
Experience with Kubernetes, Terraform, or Ansible is a plus.
Experience with dbt and Debezium is a plus.
Knowledge of Greenplum administration is a plus.
Familiarity with provisioning, container, and orchestration technologies (Kubernetes, Helm Chart, helm operators).
Knowledge and experience with non-relational databases (Redis, Mongo).
Knowledge of monitoring and logging technologies (Nagios, ELK, GrayLog, Prometheus, Alert manager).
Understanding and experience with microservices.
Ability to work with version control systems.
Strong communication, accuracy, clarity in expressing ideas, quick response, and teamwork skills.
Language skills: Azerbaijani, English
Education and Experience
Higher education in a relevant technical field.
At least 1 year of experience in data platforms or IT infrastructure.
What we offer
Opportunities for growth and learning in a professional and dynamic team.
Chance to participate in digital transformation and innovative projects.
Open and transparent corporate environment.
Opportunity to work in a “Great Place To Work” certified company.
*Only candidates who meet the initial selection criteria will be contacted.
- Department
- İT İNFRASTRUKTURU DEPARTAMENTİ
- Locations
- Bakı
- Employment type
- Full-time