Lead Data Engineer (Databricks/Azure)

Data

Lead Data Engineer (Databricks/Azure)

Data
Plac Trzech Krzyży, Warszawa +3 Locations

CGI

Full-time
B2B, Permanent
Senior
Remote

Job description

Poszukujemy Lead Platform Engineer, który wesprze realizację dużego programu transformacji platformy danych polegającego na migracji legacy środowisk Data Warehouse do architektury Databricks Lakehouse na platformie Azure.

Osoba na tym stanowisku będzie pracować w ramach Central Migration Team (CMT) oraz współpracować z Local Migration Teams (LMT) w wielu krajach (m.in. w Polsce, na Węgrzech i na Słowacji). Inżynier będzie odpowiedzialny za prowadzenie działań technicznych związanych z platformą oraz zapewnienie zgodności z referencyjną architekturą Data Platform.

Do Twoich obowiązków będzie należało:

• Prowadzenie technicznej implementacji środowiska platformy Databricks

• Wsparcie w konfiguracji oraz optymalizacji infrastruktury Azure Databricks

• Zapewnienie zgodności z referencyjną architekturą oraz architekturą Lakehouse

• Wspieranie zespołów inżynierskich w zakresie najlepszych praktyk dotyczących budowy pipeline’ów danych i korzystania z platformy

• Wsparcie wdrażania akceleratorów migracyjnych oraz frameworków automatyzacji

• Zapewnienie efektywnej konfiguracji środowiska platformowego

• Odpowiedzialność za niezawodność, skalowalność oraz wydajność platformy

• Zapewnianie wsparcia technicznego dla lokalnych zespołów migracyjnych

• Wsparcie w rozwiązywaniu problemów technicznych oraz podejmowaniu decyzji projektowych w środowisku międzynarodowym

Idealnie abyś posiadał/a:

• Bardzo dobrą znajomość Azure Databricks

• Ekspercką wiedzę z zakresu Apache Spark

• Bardzo dobrą znajomość Python oraz SQL

• Doświadczenie w projektowaniu i utrzymaniu platform danych na platformie Azure

• Doświadczenie w pracy z architekturą data lakehouse

• Praktyczne doświadczenie z Unity Catalog oraz Delta Lake

• Doświadczenie w budowaniu i utrzymaniu pipeline’ów CI/CD dla platform danych

• Doświadczenie w dużych programach migracji lub modernizacji platform danych

• Znajomość języka angielskiego na poziomie minimum B2 oraz płynną znajomość języka polskiego w mowie i piśmie – wymóg konieczny

Ze swej strony możemy zaoferować:

Benefity w całości opłacane przez CGI (przy UOP):

Opiekę zdrowotną - rozbudowany plan Medicover Maxima obejmujący opiekę stomatologiczną.

Kartę Medicover Sport.

Ubezpieczenie na życie, od wypadku i poważnego zachorowania.

Program Wsparcia Pracowników, który zapewnia Tobie i Twojej rodzinie bezpłatny i anonimowy dostęp do pomocy specjalistów: psychologa, terapeuty oraz prawnika.

Plan Zakupu Akcji CGI - jeśli zdecydujesz się na inwestycje w akcje ramach naszego programu, my dołożymy drugie tyle. Swobodnie i bez kosztowo możesz obsługiwać swój rachunek maklerski.

Sformalizowany program pracy twórczej - aż 90% swojego czasu możesz zaraportować jako pracę podlegającą autorskim kosztom uzyskania przychodu.

PPP (Profit Participation Plan) - roczną premię zależną od wypracowanych wyników Business Unitu.

Referral Program – otrzymasz ponad 6000 zł za każdą osobę zatrudnioną z Twojego polecenia.

Program Be Consultant, który daje możliwość rozwijania kompetencji, rotację przy projektach, a nawet zmianę ścieżki zawodowej w ramach firmy.

Mentoring Program, dzięki któremu możesz rozwijać swoje kompetencje poszerzać wiedzę, czerpiąc ją od swoich kolegów z CGI. Jeśli sam posiadasz duże doświadczenie, możesz się dzielić wiedzą z innymi!

Atrakcyjny program szkoleń - masz dostęp do szerokiego pakietu szkoleń: partnerskich szkoleń, profesjonalnych certyfikatów po szkolenia na platformie CGI Academia.

Tech stack

    Polish

    C2

    English

    B2

    Azure Databricks

    advanced

    Apache Spark

    advanced

    Delta Lake

    advanced

    Azure Data Platform

    advanced

    Python

    advanced

Office location

Lead Data Engineer (Databricks/Azure)

Summary of the offer

Lead Data Engineer (Databricks/Azure)

Plac Trzech Krzyży, Warszawa
CGI
By applying, I consent to the processing of my personal data for the purpose of conducting the recruitment process. Informujemy, że administratorem danych jest CGI ISMC (Polska) Sp. z o.o z siedzibą w Warszawie, ul. Królewska 16, 00-103 (dalej jako ... MoreThis site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.