Regular Data Engineer / Data Contract Engineer
Data Engineer / Data Contract Engineer 🚀
Tryb współpracy: B2B
Start: ASAP
Długość projektu: długoterminowa współpraca
Poziom: Regular
Szukamy Data Engineera do długoterminowego projektu związanego z wdrożeniem i standaryzacją Data Contracts w organizacji. Projekt dotyczy poprawy jakości, spójności i przewidywalności danych w ekosystemie DWH / Big Data w środowisku GCP ☁️
Będziesz odpowiadać za projektowanie, implementację i automatyzację kontraktów danych pomiędzy producentami i konsumentami danych – od definiowania schematów i reguł jakościowych, po walidację, monitoring oraz dokumentację techniczną 📊
Zakres obowiązków:
🔹 Projektowanie i definiowanie Data Contracts, w tym schematów danych, reguł jakościowych oraz SLA danych
🔹 Implementacja kontraktów danych z wykorzystaniem standardów takich jak ODCS, OpenAPI, JSON Schema
🔹 Automatyzacja walidacji kontraktów danych w potokach CI/CD
🔹 Tworzenie testów jakości danych oraz mechanizmów monitoringu i alertowania
🔹 Analiza, przetwarzanie i modelowanie danych w środowisku DWH / Big Data
🔹 Tworzenie i optymalizacja zaawansowanych zapytań SQL
🔹 Projektowanie modeli danych oraz logicznych i fizycznych warstw danych
🔹 Udział w code review i przygotowywanie dokumentacji technicznej
🔹 Współpraca z zespołami Data Governance, Data Quality, biznesowymi, analitycznymi i technicznymi
Wymagania:
✅ Minimum 2–3 lata doświadczenia na stanowisku Data Engineer lub podobnym
✅ Praktyczna znajomość zagadnień związanych z Data Contracts, mile widziany standard ODCS
✅ Doświadczenie z OpenAPI / JSON Schema lub narzędziami wspierającymi automatyzację kontraktów danych
✅ Doświadczenie w analizie, przetwarzaniu i modelowaniu danych
✅ Znajomość architektury rozwiązań Hurtowni Danych / Big Data
✅ Bardzo dobra znajomość SQL, w tym optymalizacja zapytań, agregacje i zarządzanie indeksami
✅ Doświadczenie w projektowaniu modeli danych i budowie warstw danych
✅ Praktyka w obszarze jakości danych: testowanie, monitoring, alertowanie
✅ Doświadczenie w dokumentacji technicznej i code review
✅ Komunikatywność, samodzielność, proaktywność i nastawienie na jakość
Mile widziane:
⭐ Doświadczenie z GCP
⭐ Znajomość Oracle DWH
⭐ Doświadczenie z dbt lub Dataform
⭐ Znajomość Dataplex lub Data Catalog
⭐ Doświadczenie w migracjach danych z systemów on-premise
⭐ Znajomość zagadnień z obszaru Data Governance i Data Quality
⭐ Doświadczenie z ekosystemem Big Data / Hadoop
Oferujemy:
🤝 Przelew w dogodnej formie
🧾 Krótki, 14-dniowy termin płatności faktury
🏥 Bogaty pakiet usług prywatnej opieki medycznej
🎁 Dostęp do platformy kafeteryjnej MyBenefit, umożliwiającej zamawianie m.in. kart Multisport, kart przedpłaconych do Ikea, Zalando, Notino i wielu innych benefiów
Regular Data Engineer / Data Contract Engineer
Regular Data Engineer / Data Contract Engineer