Senior Data Engineer
Zakres obowiązków:
Projektowanie i realizacja rozwiązań informatycznych w obszarze zasilania danych
Analiza danych oraz przygotowanie dla nich modeli logicznych i fizycznych
Tworzenie koncepcji rozwiązań i implementacji rozwiązań w oparciu o wymagania i potrzeby biznesu
Usuwanie incydentów oraz udział w rozwiązywaniu problemów
Tworzenie przepływów off-linowe i on-linowe zarówno w narzędziach on-prem jak i GCP
Wymagania:
Doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake
Doświadczenie w programowaniu w językach programowania typu: Python i/lub Rust
Znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takie jak np. Kafka, Pub/Sub
Dobra znajomość baz danych GCP: GCP Big Query (projektowanie, budowa i tuning baz danych)
Znajomość Oracle, PostgreSQL (projektowanie, budowa i tuning baz danych)
Znajomość systemu operacyjnego Linux na poziomie zaawansowanego użytkownika
Mile widziane:
Znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI (przetwarzania danych niestrukturyzowanych takie jak transkrypcje audio, konwersje dokumentów tekstowych, obrazów itp.)
Znajomość: Automate Now, AirFlow, Apache Spark (najlepiej Data Proc), Apache Beam (najlepiej GCP DataFlow), Informatica Power Center
Oferujemy:
Dofinansowanie karty sportowej
Stałe wsparcie konsultanta
Program rekomendacji pracowników

DCG
DCG to przestrzeń, w której spotykają się potrzeby biznesu i ambicje ludzi. Znamy wartość dobrze dopasowanej współpracy, dlatego pomagamy kandydatom znaleźć środowisko, w którym będą mogli rozwinąć skrzydła, a firmom - z...
Senior Data Engineer
Senior Data Engineer