Senior Data Engineer

Senior Data Engineer (min. 6 lat doświadczenia)

Tryb: 100% zdalnie

Forma współpracy: B2B 

Wynagrodzenie: 160-180zł/h

O projekcie

Dołączysz do międzynarodowego projektu realizowanego dla globalnej organizacji z sektora fintech, budującej nowoczesną platformę analityczną do przetwarzania danych transakcyjnych w czasie zbliżonym do rzeczywistego.

System obsługuje setki milionów rekordów dziennie z wielu źródeł (API, strumienie zdarzeń, systemy legacy). Główne cele platformy:

• wykrywanie nadużyć finansowych,

• budowa modeli scoringowych,

• personalizacja ofert produktowych,

• raportowanie regulacyjne.

Architektura oparta jest o rozwiązania chmurowe (AWS), przetwarzanie rozproszone w Spark oraz hurtownię danych Snowflake. Zespół pracuje w modelu produktowym, z dużą autonomią techniczną i realnym wpływem na decyzje architektoniczne.

Zakres odpowiedzialności

• Projektowanie i rozwój skalowalnych pipeline’ów danych (batch i streaming)

• Budowa i optymalizacja procesów ETL/ELT w Pythonie i PySparku

• Modelowanie danych w Snowflake (schema design, performance tuning)

• Zapewnienie jakości danych (walidacja, monitoring, testy)

• Współpraca z Data Scientistami oraz zespołem BI

• Udział w decyzjach architektonicznych i code review

• Wdrażanie dobrych praktyk DevOps/DataOps

Wymagania

• Minimum 6 lat doświadczenia jako Data Engineer

• Bardzo dobra znajomość Python

• Komercyjne doświadczenie z PySpark

• Praktyczna znajomość Snowflake (modelowanie danych, optymalizacja zapytań)

• Doświadczenie w pracy z dużymi wolumenami danych

• Znajomość architektury chmurowej (preferowany AWS)

• Bardzo dobra znajomość SQL

• Umiejętność projektowania skalowalnych i odpornych rozwiązań

Mile widziane:

• Doświadczenie w przetwarzaniu strumieniowym (np. Kafka)

• Znajomość narzędzi orkiestracyjnych (np. Airflow)

• Doświadczenie w środowisku regulowanym (fintech/bankowość)

Oferujemy

• Realny wpływ na architekturę platformy przetwarzającej setki milionów rekordów dziennie

• Pracę przy projekcie o wysokiej skali i dużej złożoności technologicznej

• Elastyczne godziny pracy i możliwość pracy zdalnej

• Budżet szkoleniowy oraz certyfikacje

• Prywatną opiekę medyczną i kartę sportową

• Stabilną, długoterminową współpracę