All offersWarszawaDataBig Data Engineer with AWS (Mid/Senior)
Big Data Engineer with AWS (Mid/Senior)
Data
GetInData

Big Data Engineer with AWS (Mid/Senior)

GetInData
Warszawa
Type of work
Undetermined
Experience
Mid
Employment Type
B2B
Operating mode
Office

Tech stack

    Amazon AWS
    advanced
    Java
    advanced
    Apache Kafka
    nice to have
    Apache Spark
    nice to have
    Flink
    nice to have

Job description

O GetInData


GetInData jest warszawską firmą założoną przez byłych pracowników Spotify w 2014 roku. Obecnie liczymy ponad 50 osób i skupiamy się tylko i wyłącznie na projektach typu Big Data, Cloud, AI/ML, które wymagają budowy niezawodnych i skalowalnych platform danych. Mamy na koncie projekty dla m.in. Spotify (2500+ węzłów), Truecaller (petabajty danych), Kcell (500k+ zdarzeń na sekundę), ING i wiele innych firm. Prowadzimy też eksperckie szkolenia i warsztaty. 

W GetInData staramy się stworzyć miejsce pracy umożliwiającemu każdemu specjaliście wejście na jeszcze wyższy poziom, co przekłada się na projekty, które realizujemy, na osoby które zatrudniamy oraz sposób naszej pracy.

Jeśli chcesz rozwijać się w kierunku Big Data i pracować z ekspertami w tej dziedzinie to nie znajdziesz do tego lepszego miejsca niż praca z nami :)

Kogo szukamy


Poszukujemy doświadczonego inżyniera danych z mocnymi kompetencjami AWS jako uzupełnienie do naszego eksperckiego zespołu pracującego nad nowoczesną platformą Big Data dla klienta z USA.
Członkowie zespołu mają bardzo duże doświadczenie z technologiami Big Data, osoba której szukamy będzie miała okazję pracować z osobami z ekstraligi w tym obszarze uzupełniając jednocześnie kompetencje zespołu o swoją wiedzę dotyczącą pracy z AWS.  

Projekt


Zadaniem projektu jest przebudowanie i rozwój istniejącej  platformy do zbierania i analizowania danych. Nowo tworzona platforma budowana jest w chmurze AWS z wykorzystaniem kombinacji natywnych usług oraz innych technologii Big Data. Jednocześnie wykonywane jest odejście od wykorzystywanego obecnie przetwarzania batchowego w stronę przetwarzania strumieniowego, by skrócić czas oczekiwania na raporty i wnioski płynące z danych, co ma olbrzymi wpływ na sukces biznesowy klienta.

Zalety
  • Nowoczesny stack technologiczny m.in. AWS, Flink, Spark, Kafka, Kubernetes
  • Praca zgodnie z najlepszymi praktykami dotyczącymi data engineering i devops
  • Bardzo doświadczone osoby w zespole, od których można się dużo nauczyć, szczególnie w obszarze Big Data


Wymagania


  • zaawansowana umiejętność programowania w Java lub Scala
  • AWS data engineering: scheduling, przetwarzanie dużych zbiorów danych (EMR, Batch, Glue), data storages (S3, RDS), katalogowanie danych (Glue Data Catalog)
  • mikroserwisy w AWS: serverless functions (lambda), kolejki wiadomości (SQS, SNS), API gateways, No-/SQL databases (DynamoDb, RDS, Elasticache), kontenery (EKS, ECS, Fargate)
  • DevOps w AWS: automatyzacja i CICD (Terraform, CloudFormation)
  • zarządzanie politykami dostępu z IAM
  • dobra znajomość SDK (boto3 for python, aws-java-sdk for JVM)
  • mile widziane doświadczenie z technologiami Big Data open-source takimi jak Flink, Spark czy Kafka
  • bardzo dobra znajomość języka angielskiego


Warunki

  • Zarobki: 120-160 zł + VAT / h na B2B w zależności od kwalifikacji i doświadczenia. Szukamy osoby o profilu mid-level lub senior.
  • Preferowana praca z naszego biura przy Puławskiej 39 (Stary Mokotów). Jest też możliwość pracy zdalnej. 

Zaaplikuj już teraz!


Czy zaciekawił Cię ten opis?