Big Data Developer (Scala, Spark, Hadoop)

Big Data Developer (Scala, Spark, Hadoop)

Hybryda: Warszawa, Gdynia, Gdańsk (2x w tygodniu)

100-120 zł/h net+vat B2B

Regular

Wymagania:

• Minimum 3 lata doświadczenia w programowaniu funkcyjnym w języku Scala

• Doświadczenie w tworzeniu aplikacji opartych na Spark przy użyciu Scali

• Znajomość technologii Hadoop, Hive, Oozie, Kafka

• Znajomość rozwiązań kontenerowych, w tym Docker i Kubernetes

• Biegłość w języku angielskim oraz polskim

Zakres obowiązków:

• Projektowanie, implementacja i optymalizacja aplikacji Big Data z wykorzystaniem Scali, Apache Spark i Hadoop

• Tworzenie oraz utrzymywanie pipeline’ów przetwarzania danych w środowisku rozproszonym

• Integracja danych z różnych źródeł z wykorzystaniem narzędzi takich jak Hive, Oozie i Kafka

• Współpraca z zespołem DevOps przy wdrażaniu rozwiązań w kontenerach

• Wsparcie w projektowaniu i wdrażaniu skalowalnych, wydajnych rozwiązań danych

• Udział w codziennej pracy zespołu w środowisku Agile