All offersKrakówDataSpark Engineer
Spark Engineer
Data
TIDK

Spark Engineer

TIDK
Kraków
Type of work
Full-time
Experience
Mid
Employment Type
Permanent
Operating mode
Hybrid

Tech stack

    Spark
    regular
    Azure
    regular
    Kafka
    regular
    PySpark
    junior
    SparkSQL
    junior

Job description

Jesteśmy firmą zajmującą się zaawansowaną analityką, rozwiązaniami Big Data, Business Intelligence, Data Science oraz szeroko pojętą sztuczną inteligencją. 


Dla naszych klientów podejmujemy się rozmaitych projektów związanych z tymi obszarami. Często nie są to zagadnienia trywialne, wymagają badań, dogłębnego zrozumienia sytuacji oraz wyzwań przed którym stoi klient. W efekcie uzyskujemy rozwiązania, które są innowacyjne, dopasowane do rosnących potrzeb biznesowych konkretnej organizacji.


Obecnie do naszego zespołu w Poznaniu poszukujemy osoby na stanowisko:

SPARK ENGINEER



DO TWOICH OBOWIĄZKÓW NALEŻEĆ BĘDZIE:

1. Budowanie skalowalnych rozwiązań opartych o technologie BigData 

2. Implementacja procesów zasilania i transformacji danych z wykorzystaniem PySpark. 

3. Przygotowywanie wydajnych zapytań w SparkSQL. 

4. Tworzenie dokumentacji.



WYMAGANE NA TYM STANOWISKU:

  • Wykształcenie wyższe (kierunki techniczne: matematyka, informatyka, ekonometria). 
  • Minimum rok doświadczenia komercyjnego w Spark. 
  • Dobra znajomość języka angielskiego pozwalająca na rozumienie dokumentacji technicznej. 
  • Znajomość usług platformy Azure (szczególnie z obszarów Data). 
  • Znajomość technologii i założeń Kafka, Spark, Data Lake, Delta Lake, DataBricks będzie dodatkowym atutem. 
  • Znajomość PySpark i SparkSQL będzie dodatkowym atutem. 
  • Umiejętności algorytmiczne i matematyczne.


CO OFERUJEMY:

  • pracę hybrydową po okresie próbnym,
  • pracę przy projektach z zakresu analityki dla największych firm w Polsce (branże: retail, e-commerce, farmacja, energetyka, produkcja przemysłowa, logistyka), 
  • dostęp do najnowszych technologii IT i wykorzystywanie w pracy, 
  • szkolenia oraz udział  w konferencjach branżowych, 
  • możliwość rozwoju i wsparcie zespołu - najlepszych specjalistów dziedziny BI i zaawansowanej analityki w Polsce, 
  • swobodną atmosferę oraz pracę w komfortowych warunkach.