Lead Data Engineer (Databricks/Azure)
Poszukujemy Lead Platform Engineer, który wesprze realizację dużego programu transformacji platformy danych polegającego na migracji legacy środowisk Data Warehouse do architektury Databricks Lakehouse na platformie Azure.
Osoba na tym stanowisku będzie pracować w ramach Central Migration Team (CMT) oraz współpracować z Local Migration Teams (LMT) w wielu krajach (m.in. w Polsce, na Węgrzech i na Słowacji). Inżynier będzie odpowiedzialny za prowadzenie działań technicznych związanych z platformą oraz zapewnienie zgodności z referencyjną architekturą Data Platform.
Do Twoich obowiązków będzie należało:
• Prowadzenie technicznej implementacji środowiska platformy Databricks
• Wsparcie w konfiguracji oraz optymalizacji infrastruktury Azure Databricks
• Zapewnienie zgodności z referencyjną architekturą oraz architekturą Lakehouse
• Wspieranie zespołów inżynierskich w zakresie najlepszych praktyk dotyczących budowy pipeline’ów danych i korzystania z platformy
• Wsparcie wdrażania akceleratorów migracyjnych oraz frameworków automatyzacji
• Zapewnienie efektywnej konfiguracji środowiska platformowego
• Odpowiedzialność za niezawodność, skalowalność oraz wydajność platformy
• Zapewnianie wsparcia technicznego dla lokalnych zespołów migracyjnych
• Wsparcie w rozwiązywaniu problemów technicznych oraz podejmowaniu decyzji projektowych w środowisku międzynarodowym
Idealnie abyś posiadał/a:
• Bardzo dobrą znajomość Azure Databricks
• Ekspercką wiedzę z zakresu Apache Spark
• Bardzo dobrą znajomość Python oraz SQL
• Doświadczenie w projektowaniu i utrzymaniu platform danych na platformie Azure
• Doświadczenie w pracy z architekturą data lakehouse
• Praktyczne doświadczenie z Unity Catalog oraz Delta Lake
• Doświadczenie w budowaniu i utrzymaniu pipeline’ów CI/CD dla platform danych
• Doświadczenie w dużych programach migracji lub modernizacji platform danych
• Znajomość języka angielskiego na poziomie minimum B2 oraz płynną znajomość języka polskiego w mowie i piśmie – wymóg konieczny
Ze swej strony możemy zaoferować:
• Benefity w całości opłacane przez CGI (przy UOP):
• Opiekę zdrowotną - rozbudowany plan Medicover Maxima obejmujący opiekę stomatologiczną.
• Kartę Medicover Sport.
• Ubezpieczenie na życie, od wypadku i poważnego zachorowania.
• Program Wsparcia Pracowników, który zapewnia Tobie i Twojej rodzinie bezpłatny i anonimowy dostęp do pomocy specjalistów: psychologa, terapeuty oraz prawnika.
• Plan Zakupu Akcji CGI - jeśli zdecydujesz się na inwestycje w akcje ramach naszego programu, my dołożymy drugie tyle. Swobodnie i bez kosztowo możesz obsługiwać swój rachunek maklerski.
• Sformalizowany program pracy twórczej - aż 90% swojego czasu możesz zaraportować jako pracę podlegającą autorskim kosztom uzyskania przychodu.
• PPP (Profit Participation Plan) - roczną premię zależną od wypracowanych wyników Business Unitu.
• Referral Program – otrzymasz ponad 6000 zł za każdą osobę zatrudnioną z Twojego polecenia.
• Program Be Consultant, który daje możliwość rozwijania kompetencji, rotację przy projektach, a nawet zmianę ścieżki zawodowej w ramach firmy.
• Mentoring Program, dzięki któremu możesz rozwijać swoje kompetencje poszerzać wiedzę, czerpiąc ją od swoich kolegów z CGI. Jeśli sam posiadasz duże doświadczenie, możesz się dzielić wiedzą z innymi!
• Atrakcyjny program szkoleń - masz dostęp do szerokiego pakietu szkoleń: partnerskich szkoleń, profesjonalnych certyfikatów po szkolenia na platformie CGI Academia.
Lead Data Engineer (Databricks/Azure)
Lead Data Engineer (Databricks/Azure)