Big Data Developer/Developerka

Opis projektu

Do międzynarodowego zespołu bankowego poszukujemy Scala / Spark / Big Data Developera/Developerki, który/a dołączy do prac nad nowym, globalnym silnikiem raportowym dla klientów banku. Celem projektu jest zastąpienie istniejących rozwiązań legacy oraz konsolidacja wszystkich danych transakcyjnych i kontowych w środowisku Hadoop.

System będzie obsługiwał raporty dla ponad 10 milionów klientów w krajach nordyckich, przetwarzając miliardy transakcji miesięcznie. Projekt realizowany jest w modelu Agile (SAFe).

Lokalizacja: Warszawa, Gdynia, Gdańsk

Tryb pracy: Hybrydowy – 3 dni w tygodniu z biura

Zakres obowiązków

• Projektowanie i implementacja wydajnego, skalowalnego i łatwego w utrzymaniu rozwiązania raportowego

• Rozwój aplikacji Spark w Scali

• Praca z dużymi wolumenami danych w ekosystemie Hadoop

• Współpraca z Product Ownerem, Architektami, Analitykami, Testerami i Developerami

• Praca w zespole Corporate Access Account Reporting (CAAR), w ramach Payments Train

  
  

Wymagania (must-have)

• Min. 3 lata doświadczenia w programowaniu funkcyjnym w Scali

• Doświadczenie w tworzeniu aplikacji Spark (Scala)

• Znajomość technologii Hadoop: Hive, Oozie, Kafka

• Doświadczenie z Dockerem i Kubernetesem

• Doświadczenie w pracy w zespołach Agile

  
  

Mile widziane

• Dogłębna znajomość systemów rozproszonych

• Doświadczenie w data engineering oraz budowie pipeline’ów ETL/ELT

• Optymalizacja wydajności Spark / Hadoop

• Tworzenie REST API

• Znajomość ReactJS i Bootstrap

• Doświadczenie w środowisku SAFe