Data Engineer (AI & Data Platforms)

O projekcie:
Dołączysz do zespołu rozwijającego nowoczesną platformę odpowiedzialną za standaryzację oraz dostarczanie danych pomiędzy różnymi domenami biznesowymi w organizacji. Projekt koncentruje się na budowie i rozwoju frameworku do transformacji danych źródłowych do ustandaryzowanych formatów wykorzystywanych przez downstreamowe produkty danych

Twój zakres obowiązków:

• Budowa i rozwój pipeline’ów transformujących dane do ustandaryzowanych formatów

• Tworzenie i rozwój logiki transformacji danych w SQL

• Rozwój AI-assisted workflows wspierających zespoły engineeringowe

• Implementacja AI quality gates oraz automatyzacji opartych o LLM

• Integracja rozwiązań AI/LLM z procesami CI/CD

• Zarządzanie lifecycle’em schematów danych oraz compatibility validation

• Współpraca z architektami i zespołami platformowymi przy rozwoju frameworku danych

Nasze wymagania:

• Doświadczenie w obszarze Data Engineering

• Bardzo dobra znajomość: Kafka, SQL, Spark lub Flink

• Doświadczenie w pracy z Kubernetes

• Wiedza i praktyczne doświadczenie związane z: LLM, GenAI, AI-assisted engineering workflows

• Doświadczenie w projektowaniu i rozwijaniu pipeline’ów danych

• Znajomość języka angielskiego m.in. B2