DevOps Engineer (Databricks / BI)
Tryb pracy: hybrydowy (3x w tygodniu w biurze: Warszawa, Poznań lub Lublin)
Kogo poszukujemy?
Nasz klient to wiodąca niemiecka firma z branży telekomunikacyjnej i usług IT. W związku z dynamicznym rozwojem organizacja uruchamia Europejskie Centrum Technologiczne w Polsce, do którego poszukuje Inżyniera DevOps odpowiedzialnego za uruchomienie, konfigurację oraz operacjonalizację nowego środowiska Databricks, ze szczególnym naciskiem na business intelligence (BI), analitykę oraz procesy data engineering.
Zakres obowiązków
Wdrażanie i konfiguracja środowisk Databricks dla wielu zespołów
Zarządzanie klastrami (shared, job, interactive) oraz optymalizacja ich kosztów
Konfiguracja uprawnień i dostępów zgodnie z zasadami data governance
Integracja Databricks z lokalnymi i chmurowymi źródłami danych
Budowa i automatyzacja potoków ingestii danych
Integracja z narzędziami BI (np. Power BI, JDBC/ODBC)
Implementacja monitoringu, logowania oraz procesów backup / disaster recovery
Tworzenie i utrzymanie pipeline’ów CI/CD dla rozwiązań data engineering
Współpraca z zespołami ML Ops, Data Engineering i Security
Wymagania (must have):
Minimum 3 lata doświadczenia w obszarze DevOps / Cloud / Data Platform
Doświadczenie w administracji środowiskiem Databricks
Bardzo dobra znajomość Terraform
Dobra znajomość Pythona (automatyzacja, skrypty)
Znajomość SQL oraz podstaw data engineering
Doświadczenie w pracy z chmurą (preferowany Azure)
Znajomość zagadnień IAM i bezpieczeństwa danych
DevOps Engineer (Databricks / BI)
DevOps Engineer (Databricks / BI)