PASHA Holding

Data engineer

Son tarix 01 apr 2024 [email protected]

We are looking for an experienced Data Engineer whose primary responsibility will be to design, build, and maintain data pipelines that will be leveraged by multiple teams including the analytics and data science teams in a group of companies to enable efficient and scalable analytics, reporting, and modeling. Someone who will work with key members of technical and non-technical staff to get a deep understanding of what questions the teams are trying to answer and what is the best way for them to get to a solution that satisfies their needs. Analyze new data sources and work with strategic assets to onboard their data on our Data Sharing Platform and integrate it into existing data pipelines and models. Ensure data quality and governance and cataloging data for easy access to data while maintaining strict quality controls to support data office responsibilities. Help evangelize the Data Sharing Platform within the whole holding and third parties.

Job description:

• Designs and implements the data pipelines and transformations necessary for our Data Sharing Platform
• Ensures quality and accuracy of data used by performing data quality measurement and analysis
• Works closely with Data Scientists, architects, and engineers to ensure that we produce high-quality data solutions
• Maintains high quality of our data pipelines in production, ensuring data quality and performance
• Suggest improvements, new tools, approaches to enhance and expand data platform’s capabilities and performance
• Implement strategies, standards, and best practices for data ingestion and integration
• Analyze new sources of data to quantify quality, uniqueness, value, and overlap with existing data sources
• Participate in the platform governance process improvement
• Stays current with rapidly developing data technologies and tools. Shares knowledge with others

Experience, Competencies and Skills Required:

• Bachelor’s degree in Computer science, Engineering, Data analysis
• Minimum 3 years of experience in operations;
• Experience with data integration (ETL/ELT) concepts, demonstratable skills of implementing data pipelines
• Experience with orchestration tools (Airflow, Dagster, etc.)
• Experience with SQL and at least one programming language (Python);
• Knowledge of good engineering practices around data modelling (Star, Snowflake, Data Vault, etc), data access and code writing
• Good knowledge of DataBase administration;
• Understanding of containers and Kubernetes
• Good grasp of data pipelines monitoring
• Ability to write, debug, unit test, and performance test data integration processes
• Ablility to clearly define data quality issues
• Strong problem solving/critical thinking skills
• At least Intermediate English is a must, spoken Russian is a plus.
• Desire to work with DataOps practices and methodologies in a highly collaborative environment

How to apply:

Interested candidates are requested to submit:

• CV to e-mail;
• Put “Data engineer” in the subject line;
• CVs should be sent by March 31, 2024.

Attention: The candidates will go through initial CV screening review. Those candidates ONLY who succeeds based on CV screening will be contacted via email and/or phone and will be invited to interview.

Biz səmərəli və genişləndirilə bilən analitika, hesabat, və modelləşdirməyə imkan yaratmaq üçün PAŞA şirkətlər qrupunda analitika və data mütəxəssisi heyətləri də daxil olmaqla, çoxsaylı komandaların istifadə edəcəyi data konveyerlərinin (data işləmə və ötürmə prosesləri) layihələndirilməsi, qurulması və saxlanmasına birbaşa cavabdeh olacaq təcrübəli Data Mühəndisi axtarırıq. Bu vəzifəni tutacaq şəxs heyətlərin hansı suallara cavab tapmağa çalışdığını və onların ehtiyaclarını qarşılayacaq bir həll yolunu necə ən yaxşı şəkildə tapa biləcəklərini dərindən başa düşmək üçün texniki və qeyri-texniki heyət üzvləri ilə işləyəcək. O, yeni data mənbələrini təhlil edəcək və strateji aktivlərlə işləyərək onların məlumatlarını bizim Data Mübadiləsi Platformasına yükləyəcək və mövcud data konveyerlərinə və modellərinə inteqrasiya edəcək. O, data ofisinin cavabdehliklərinə dəstək vermək üçün məlumatların keyfiyyətini və idarə olunmasını təmin edəcək, habelə məlumatlara rahat giriş məqsədilə (eyni zamanda ciddi keyfiyyətə nəzarət tədbirlərinə riayət etməklə) datanın kataloqlaşdırılmasını təmin edəcək. Bütün holdinq daxilində və üçüncü tərəflər arasında Data Mübadiləsi Platformasının təbliğinə yardım edəcək.

İşin təsviri:

• Data Mübadiləsi Platforması üçün lazım olan data konveyerlərin və transformasiyaların layihələndirilməsi və tətbiq edilməsi;
• Data keyfiyyətinin ölçülməsi və təhlilini aparmaqla istifadə edilmiş datanın keyfiyyətinin və dəqiqliyinin təmin edilməsi;
• Data mütəxəssisləri, arxitektorlar və mühəndislər ilə sıx işləyərək yüksək keyfiyyətli data həlləri hazırlanmasının təmin edilməsi;
• Data keyfiyyətini və performansını təmin etməklə hazırlanan data konveyerlərin yüksək keyfiyyətinin qorunub saxlanması;
• Datanın qəbulu və inteqrasiyası üçün strategiyalar, standartlar və qabaqcıl təcrübələrin tətbiq edilməsi;
• Kəmiyyəti, unikallığı, dəyəri və mövcud data mənbələri ilə üst-üstə düşmə potensialını ölçmək üçün yeni data mənbələrinin təhlil edilməsi;
• Platformada idarəetmə prosesinin təkmilləşdirilməsində iştirak edilməsi;
• Sürətlə inkişaf edən data texnologiyaları və alətləri barədə ən son yeniliklərdən xəbərdar olması, biliklərinin digərləri ilə bölüşülməsi;

Tələb olunan Təhsil, Təcrübə və Bacarıqlar:

• Kompüter elmləri, mühəndislik, data analitikası üzrə bakalavr dərəcəsi;
• Əməliyyatlarda minimum 3 il təcrüə;
• Data inteqrasiyası (ETL/ELT) konsepsiyaları ilə işləmə təcrübəsi, data konveyerlərinin tətbiqi üzrə nümayiş edilə bilən bacarıqlar
• Orkestrləşdirmə alətləri ilə təcrübə (Airflow, Dagster və s.)
• SQL və ən azı bir proqramlaşdırma dili (Python) ilə iş təcrübəsi;
• Məlumatların modelləşdirilməsi (Star, Snowflake, Data Vault və s.), dataya giriş və kod yazılması üzrə qabaqcıl mühəndislik təcrübələri haqqında biliklər
• DataBase idarə edilməsi barədə yaxşı biliklər;
• Konteynerlər və Kubernetes haqqında anlayış
• Data konveyerlərinin monitorinqini yaxşı başa düşmək
• Datanın inteqrasiyası prosesləri üzrə yazmaq, xətaları aradan qaldırmaq (debug), vahid testi və funksional test aparmaq bacarıqları 
• Datanın keyfiyyəti məsələlərini aydın şəkildə müəyyən etmək bacarığı
• Güclü problem həll etmə/tənqidi düşünmə bacarığı
• Ən azı orta səviyyədə ingilis dili bilmək mütləqdir, rus dilində danışıq bacarığı üstünlükdür.
• Yüksək əməkdaşlıq mühitində DataOps təcrübələri və metodologiyaları ilə işləmək həvəsi

Müraciət etmə qaydaları: 

Maraqlanan namizədlərdən aşağıda göstərilən qaydada müraciət etmək xahiş olunur:

• CV e-mail ünvanına göndərilməlidir;
• Mövzu sətrində “Data mühəndisi” qeyd olunmalıdır;
• CV-lər 31 mart 2024-cü il tarixinə qədər göndərilməlidir.

Diqqət: Müraciət edən namizədlərin CV-ləri seçim üçün ilkin baxışdan keçiriləcəkdir. İlkin CV seçimi zamanı qeyd edilən tələblərə uyğun namizədlər ilə e-poçt və / və ya telefon vasitəsilə əlaqə saxlanılacaq.