Senior Big Data Engineer

Dołącz do naszego Centrum Kompetencyjnego Digital i nowego zespołu, który koncentruje się na przechwytywaniu danych i podejmowaniu decyzji w czasie rzeczywistym. Będziesz pracować nad aplikacjami o dużym natężeniu ruchu i widoczności, obsługując ogromne ilości danych i rozwiązując trudne problemy związane ze skalowaniem w projekcie dla amerykańskiej firmy technologicznej specjalizującej się w oprogramowaniu i usługach cyfrowych. Będziesz przyczyniać się do dostarczania usprawnionego zestawu podstawowych usług zbudowanych na warstwie danych, koncentrując się na podstawowych elementach, takich jak tożsamość, profil, segmentacja i komponenty brzegowe.

Twoje zadania

• Integracja i ulepszanie narzędzi i struktur Big Data w celu zapewnienia wymaganych możliwości

• Opracowywanie i wdrażanie krytycznych części usług oraz dostarczanie ich do produkcji

• Wybór odpowiednich narzędzi i technologii

• Przekładanie wymagań wysokiego poziomu na konkretne zadania i działania

• Optymalizacja rozproszonych mikrousług i aplikacji Spark w celu obniżenia kosztów i zwiększenia dostępności

• Uczestniczyć w zaawansowanych projektach na dużą skalę w środowisku Agile przy użyciu Java, Jenkins i Spark

• Współpraca z wielofunkcyjnymi specjalistami (Product Manager, Design, Engineering itp.) w celu wprowadzania rozwiązań zorientowanych na klienta

Wymagania

• Min. 9 lat doświadczenia w tworzeniu oprogramowania

• Praktyczne doświadczenie z technologiami open-source, takimi jak Spark, Hadoop Stack i Kafka

• Udokumentowane doświadczenie w dostarczaniu wysoce zoptymalizowanego kodu w Javie

• Doświadczenie w pracy z bazami danych NoSQL, najlepiej HBase i Cassandra

• Biegła znajomość struktur danych i algorytmów

• Udokumentowana znajomość języka Java, zasad OOP, czystego projektowania i wzorców projektowych

• Dogłębne zrozumienie nowoczesnych technologii chmurowych i wzorców projektowych do budowania usług "always-up"

• Niekończąca się ciekawość, dokładność, wytrwałość i koncentracja na szybkim projektowaniu i budowaniu zaawansowanych systemów oprogramowania o doskonałej jakości w celu rozwiązywania problemów klientów

• Doświadczenie z kontenerami i systemami CI/CD, takimi jak Argo CD i GitOps

• Wymagana biegła znajomość języka angielskiego

• Wymagane miejsce zamieszkania w Polsce

Mile widziane

• Doświadczenie z innymi technologiami Big Data

• Znajomość rozwiązań chmurowych

• Zainteresowanie generatywną sztuczną inteligencją