Senior Data Engineer

O nas

Data Force Group sp. z o.o. to polska firma IT z ponad 17-letnim doświadczeniem w obszarze analityki danych, sztucznej inteligencji i Big Data. Realizujemy innowacyjne projekty, które wspierają procesy biznesowe (m.in. CRM i marketing) u klientów z branż takich jak bankowość, telekomunikacja czy handel detaliczny. Nasz zespół łączy kompetencje biznesowe i techniczne, dostarczając rozwiązania nastawione na mierzalne efekty dla klienta.

Kogo szukamy

Obecnie, w związku z kolejnymi długoterminowymi projektami dla klientów z sektora finansowego, rozbudowujemy nasz zespół Data. Szukamy doświadczonego Inżyniera Danych, który z pasją podchodzi do pracy z danymi i pomoże nam tworzyć nowoczesne rozwiązania analityczne dla branży finansowej.

Zakres obowiązków

• Analiza wymagań biznesowych w zakresie danych oraz udział w projektowaniu koncepcji odpowiednich rozwiązań
• Projektowanie i implementacja skalowalnych rozwiązań do gromadzenia, przetwarzania i analizy danych (np. hurtowni danych, procesów ETL/ELT)
• Analiza dużych zbiorów danych oraz tworzenie i utrzymywanie kontraktów dany, testów i metryk jakości (freshness, completeness, accuracy)
• Ścisła współpraca z zespołami biznesowymi i IT po stronie klienta w celu doprecyzowania wymagań i usprawniania działania rozwiązania
• Zapewnienie wysokiej jakości danych oraz optymalizacja wydajności tworzonych procesów i narzędzi
• Tworzenie dokumentacji technicznej oraz udział w utrzymaniu i rozwoju istniejących rozwiązań data

Nasze wymagania

• Minimum 3 lata komercyjnego doświadczenia w obszarze inżynierii danych z naciskiem na duże zbiory liczone w wielu TB
• Minimum 6 lat komercyjnego doświadczenia w programowaniu w Python
• Bardzo dobra znajomość SQL oraz relacyjnych baz danych (projektowanie schematów, optymalizacja zapytań), time-series oraz kolumnowych DWH jak też baz NoSQL
• Doświadczenie w pracy z co najmniej jednym z narzędzi: Apache Airflow, Spark, Beam, NiFi, Flink
• Doświadczenie w budowie procesów ETL/ELT i integracji danych z wielu źródeł
• Umiejętność analitycznego myślenia i rozwiązywania złożonych problemów na podstawie danych
• Komunikatywność oraz umiejętność współpracy zarówno z zespołem technicznym, jak i z biznesem
• Biegła znajomość języka polskiego (min. C2) oraz dobra znajomość angielskiego (min. poziom B2)

Mile widziane

• Doświadczenie w projektach dla sektora finansowego (bankowość, ubezpieczenia itp.)
• Znajomość usług chmurowych w obszarze danych (szczególnie GCP)
• Znajomość technologii Big Data i przetwarzania danych w dużej skali (Spark, Kafka)
• Znajomość metodologii Agile/Scrum i doświadczenie w pracy w zwinnym środowisku projektowym