All offersKrakówDataBig Data Engineer
Big Data Engineer
Data
Relyon IT Services

Big Data Engineer

Relyon IT Services
Kraków
Type of work
Undetermined
Experience
Mid
Employment Type
B2B
Operating mode
Office

Tech stack

    Java / Scala
    regular
    Apache Hadoop
    regular
    ETL tools
    regular
    Oracle lub SQL server
    regular
    Big Data
    junior

Job description

Wymagania:
  • Co najmniej 3-letnie doświadczenie w programowaniu (min. 1 rok w obszarze Big Data
  • Znajomość Scala lub J2EE i baz danych: Oracle i / lub SQL Server 
  • Praktyczne doświadczenie w tworzeniu systemów / aplikacji w: Hadoop (Hortonworks lub Cloudera), mapie Reduce Pig, Hive, Sqoop i Flume
  • Doświadczenie z dowolnym narzędziem ETL
  • Znajomość Jira, Confluence i IntelliJ 
  • Dobra znajomość języka angielskiego. 
 
Mile widziane: 
  • Doświadczenie ze Spark/Spark Streaming/ Kafka/Cassandra/HBASE

Obowiązki:
  • Rozwój platformy do analizy danych 
  • Projektowanie warstw pamięci i przetwarzania 
  • Opracowywanie potoków przetwarzania danych, 
  • Optymalizacja procesów ETL 
  • Sprawdzanie wydajności rozwiązań 
  • Projektowanie i kodowanie efektywnych i skutecznych rozwiązań
  • Współpraca z architektami, programistami i zespołem produktowym oraz przedstawienie alternatywnych podejść do złożonych problemów