Senior Big Data

Lumicode Sp. z o.o. należy do Grupy Pentacomp, która jest producentem rozwiązań informatycznych i dostawcą profesjonalnych usług IT dla dużych przedsiębiorstw i sektora publicznego.

Jako Pentacomp tworzymy rozwiązania IT łączące innowacyjność z latami doświadczeń - a ich mamy całkiem sporo. Istniejemy na rynku prawie 30 lat i możemy pochwalić się wieloma zrealizowanymi projektami.

Poszukujemy Starszego programisty Big Data do projektu dotyczącego wytwarzania i utrzymania kluczowych rozwiązań IT (systemy analityczne i transakcyjne) dla systemu finansów publicznych oraz administracji skarbowejRust

Zakres obowiązków:

• Tworzenie i optymalizacja rozwiązań w językach Python oraz Rust.

• Projektowanie i wdrażanie procesów przetwarzania danych (Big Data) oraz rozwiązań agentowych opartych o LLM.

• Praca w środowisku Kubernetes z wykorzystaniem: Apache Spark, Apache Airflow, Jupyter, StarRocks.

• Utrzymanie i rozwój systemów rozproszonych oraz dbanie o ich wydajność.

• Techniczne wsparcie testów (jednostkowe, integracyjne, UAT).

• Tworzenie dokumentacji technicznej kodu i przepływów danych.

  
  

Wymagania:

• Min. 5 lat udokumentowanego doświadczenia w programowaniu (Python/Rust).

• Min. 5 lat udokumentowanego doświadczenia z rozwiązaniami Big Data (w tym praktyczna znajomość Kubernetes, Apache Spark, Apache Airflow).

• Ekspercka wiedza z zakresu wydajności i optymalizacji rozwiązań Kubernetes/Spark.

• Komercyjne doświadczenie w realizacji projektów rozproszonych Big Data.

• Bardzo dobra znajomość SQL i RDBMS.

• Dobra znajomość baz NoSQL (MongoDB, Cassandra, HBase lub podobne).

• Znajomość rozwiązań opartych o protokół S3 (np. HCP, CEPH).

• Wiedza z zakresu integracji systemów na dużą skalę (RESTful, SOAP/ESB).

• Dobra znajomość środowiska Linux i języków skryptowych.

  
  

Mile widziane:

• Min. 2 lata udokumentowanego doświadczenia z chmurą w obszarze Big Data.

• Min. 3 lata doświadczenia w ML/Deep Learning.

• Doświadczenie w systemach AI (rozwiązania agentowe), MLOps i architekturze AI.

• Praktyczna znajomość narzędzi ETL (MS SSIS lub Pentaho).