Senior Azure Data Engineer

Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko Senior Azure Data Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, finanse, bankowość czy produkcja. 

• Stack i koncepcje wykorzystywane w projektach:

  • Języki programowania: Python

  • Platformy chmurowe: Microsoft Azure (Data Lake, Databricks, Delta Lake)

  • ETL i przetwarzanie danych: Azure Data Factory, Spark

  • Frameworki i biblioteki: Pyspark, Pandas, NumPy

• Projektowanie, rozwijanie i utrzymywanie danych z wykorzystaniem Azure Databricks i Delta Lake.

• Migracja tradycyjnych rozwiązań ETL (np. Informatica) do nowoczesnej architektury opartej na chmurze Microsoft Azure.

• Implementacja aplikacji danych w Pythonie z wykorzystaniem PySparka (transformacje, agregacje, pobieranie, integracja, filtrowanie).

• Tworzenie i utrzymanie frameworków kontroli jakości danych, narzędzi do monitoringu i observability.

• Optymalizacja wydajności i kosztów przetwarzania danych w środowisku Azure.

• Współpraca z zespołami biznesowymi, DevOps i inżynierii infrastruktury w celu realizacji projektów migracyjnych i modernizacyjnych.

• Udział w planowaniu, analizie i wdrażaniu innowacyjnych rozwiązań w obszarze inżynierii danych.

Oczekujemy:

• Minimum 7 lat doświadczenia zawodowego w obszarze inżynierii danych.

• Praktyczne doświadczenie w pracy z usługami chmurowymi Microsoft Azure, w szczególności Data Lake, Databricks, Delta Lake.

• Doświadczenie w pracy z tradycyjnymi systemami ETL i hurtowniami danych (Informatica – mile widziana).

• Zaawansowana znajomość Pythona i PySparka w przetwarzaniu danych w środowiskach rozproszonych.

• Umiejętność projektowania i optymalizacji data pipelines oraz automatyzacji procesów.

• Znajomość zasad Data Governance i bezpieczeństwa danych w środowiskach chmurowych.

• Gotowości do pracy w modelu hybrydowym: ok. 40% obecności w biurze (Poznań lub Wrocław), z elastycznością w ustaleniu harmonogramu.

• Mile widziane doświadczenie w dużych projektach migracji danych z systemów on-premise do chmury.

• Mile widziana jest dostępność ASAP, akceptowalny jest maksymalnie miesięczny okres wypowiedzenia, ze skutkiem na koniec miesiąca.

• Znajomość języka angielskiego na poziomie B2 lub C1 - umożliwiająca swobodną komunikację w międzynarodowym środowisku.

Oferujemy:

• Długofalowa współpraca z wynagrodzeniem w przedziale 160-180 PLN netto/godz. + VAT.

• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.

• Sprawny i szybki proces rekrutacyjny - jedna, maksymalnie dwie rozmowy techniczne z managerami, online (każda po godzinie).

• Pracę w modelu hybrydowym (ok. 40% obecności w biurze w Poznaniu lub we Wrocławiu).

• Benefity - prywatna opieka medyczna, karta Multisport.

• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.