Data Engineer

Data

Data Engineer

Data

Komitetu Obrony Robotników 43, Warszawa

Polska Grupa Lotnicza

Full-time
B2B
Mid
Hybrid

Tech stack

    ETL

    advanced

    SQL

    advanced

    Python

    advanced

    Spark

    regular

    Azure

    regular

    Azure Data Factory

    regular

    Databricks

    regular

Job description

Twój zakres zadań:

  • Projektowanie, implementacja oraz utrzymanie procesów ETL/ELT w architekturze Lakehouse wykorzystując platformę Azure Databricks, Azure Data Factory, SSIS, etc.; 
  • Przetwarzanie danych w trybie batch i real-time na potrzeby raportowania, analityki 
  • Analiza danych ad hoc z użyciem SQL, Spark, Python; 
  • Czynny udział w pracach przy Data Governance 
  • Czynny udział w projektowaniu rozwiązań Business Intelligence; 
  • Optymalizacja zapytań, procedur; 
  • Prace przy tworzeniu i modyfikowaniu raportów w PowerBI; 
  • Zarządzanie spójnością i jakością danych; 
  • Identyfikacja i naprawa usterek w istniejących procesach; 
  • Dokumentowanie zmian; 
  • Weryfikacja techniczna zmian wprowadzanych przez zewnętrznych dostawców

 

Nasze wymagania:

  • Doświadczenie w projektowaniu i implementacji procesów ETL;
  • Doświadczenie w projektowaniu i wdrażaniu rozwiązań przetwarzania danych w środowiskach chmurowych (Azure, AWS lub Google Cloud);
  • Praktyczna znajomość platformy Databricks i silnika Spark;
  • Bardzo dobra znajomość języka SQL od strony tworzenia zaawansowanych zapytań i procesów ETL;
  • Doświadczenie w pracy z różnorodnymi strukturami danych - parquet, json, csv, xml;
  • Znajomość zagadnień związanych z relacyjnymi i wielowymiarowymi bazami danych, Data Martami, hurtowaniami danych lub analizą danych;
  • Znajomość Azure Data Factory (SSIS będzie dodatkowym atutem);
  • Zdolności analitycznego myślenia i rozwiązywania problemów;
  • Wykształcenie wyższe informatyczne lub pokrewne


Mile widziane:

  • Praktyczna znajomość języka Python z uwzględnieniem pakietów do przetwarzania i wizualizacji danych (Pandas, Matplotlib, NumPy, SciPy, PySpark, Seaborn)
  • Znajomość narzędzi raportowych, np. Power BI


Nasza oferta:

  • Unikalną na polskim rynku możliwość pracy w branży lotniczej
  • Udział w ciekawych projektach w dużej i złożonej organizacji
  • Możliwość wdrażania własnych pomysłów i innowacyjnych rozwiązań oraz rozwoju kompetencji
  • Możliwość rozwoju w strukturach organizacji 
  • Pakiet benefitów, w tym bilety lotnicze w ramach siatki połączeń LOT-u 
  • Atrakcyjny system premiowy


Published: 04.03.2024
Office location
ADVERTISEMENT: Recommended by Just Join IT