Senior Data Engineer

Zakres obowiązków:

Projektowanie i realizacja rozwiązań informatycznych w obszarze zasilania danych

Analiza danych oraz przygotowanie dla nich modeli logicznych i fizycznych

Tworzenie koncepcji rozwiązań i implementacji rozwiązań w oparciu o wymagania i potrzeby biznesu

Usuwanie incydentów oraz udział w rozwiązywaniu problemów

Tworzenie przepływów off-linowe i on-linowe zarówno w narzędziach on-prem jak i GCP

Wymagania:

Doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake

Doświadczenie w programowaniu w językach programowania typu: Python i/lub Rust

Znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takie jak np. Kafka, Pub/Sub

Dobra znajomość baz danych GCP: GCP Big Query (projektowanie, budowa i tuning baz danych)

Znajomość Oracle, PostgreSQL (projektowanie, budowa i tuning baz danych)

Znajomość systemu operacyjnego Linux na poziomie zaawansowanego użytkownika

Mile widziane:

Znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI (przetwarzania danych niestrukturyzowanych takie jak transkrypcje audio, konwersje dokumentów tekstowych, obrazów itp.)

Znajomość: Automate Now, AirFlow, Apache Spark (najlepiej Data Proc), Apache Beam (najlepiej GCP DataFlow), Informatica Power Center

Oferujemy:

Dofinansowanie karty sportowej

Stałe wsparcie konsultanta

Program rekomendacji pracowników