Data Engineer

Team Connect jest wiodącym polskim dostawcą usług IT typu nearshore i offshore. Od 2008 roku z sukcesem tworzymy i rozwijamy oprogramowanie dla naszych klientów. Specjalizujemy się w tworzeniu oprogramowania w oparciu o Agile i DevOps. Od etapu analizy po wdrożenie. Tworzymy aplikacje backendowe, frontendowe i mobilne.

Jesteśmy również certyfikowanym partnerem Salesforce.

Do współpracy z naszym Klientem z branży bankowej poszukujemy Data Engineera.

Lokalizacja: praca zdalna z 1 wizytą na kwartał w biurze w Krakowie

Wymagania:

• min. 3-4 lata doświadczenia na stanowisku Data Engineer/Big Data Engineer
• Wykształcenie wyższe z zakresu informatyki, matematyki, nauk przyrodniczych lub podobnej dziedziny oraz odpowiednie doświadczenie zawodowe
• Doskonałe umiejętności SQL, w tym zaawansowane koncepcje
• Bardzo dobre umiejętności programowania w języku Scala
• Doświadczenie w Spark i Hadoop
• Doświadczenie w OOP
• Doświadczenie w korzystaniu ze zwinnych frameworków, takich jak Scrum
• Zainteresowanie usługami finansowymi i rynkami
• Mile widziane: doświadczenie lub znajomość GCP
• Płynna komunikacja w języku angielskim i umiejętności prezentacji

Must have:

• Doświadczenie komercyjne z Scala, OOP, Spark, SQL, Hadoop

Nice to have:

• Znajomość GCP, Big Query, Kafka, Juniper, Apache NiFi, Hive, Impala, Cloudera, CI/CD

Zadania:

• Projektowanie, rozwijanie i utrzymywanie solidnych potoków danych przy użyciu Scala, Spark, Hadoop, SQL do wsadowego i strumieniowego przetwarzania danych
• Współpraca z zespołami wielofunkcyjnymi w celu zrozumienia wymagań dotyczących danych i projektowania wydajnych rozwiązań spełniających potrzeby biznesowe
• Optymalizacja zadań Spark i przepływów pracy przetwarzania danych pod kątem wydajności, skalowalności i niezawodności
• Zapewnianie jakości, integralności i bezpieczeństwa danych w całym cyklu ich życia
• Rozwiązywanie problemów i rozwiązywanie problemów z potokiem danych w odpowiednim czasie, aby zminimalizować przestoje i wpływ na operacje biznesowe
• Bycie na bieżąco z najlepszymi praktykami branżowymi, nowymi technologiami i trendami w przetwarzaniu i analizie dużych zbiorów danych
• Dokumentowanie, projektowanie specyfikacji, procedur wdrażania i wytycznych operacyjnych dla potoków danych i systemów
• Zapewnianie wskazówek technicznych i mentoringu dla nowych pracowników

Benefity:

• Długofalowa współpraca.
• Pakiet benefitów – Multisport, prywatna opieka medyczna, ubezpieczenie na życie.
• Budżet szkoleniowy.
• Bezpłatne lekcje angielskiego.
• Indywidualne wsparcie ze strony dedykowanego opiekuna firmy.