Data Engineer (Senior)

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom.

Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

Cześć! U nas znajdziesz to, czego szukasz - przekonaj się!

W Scalo czeka na Ciebie:

• praca w obszarze procesów integracji danych na GCP,

• praca w obszarze procesów integracji danych on-prem,

• projektowanie, budowa i tuning baz danych,

• korzystanie z narzędzi ETL na GCP i on-prem,

• korzystanie z kolejek Kafka oraz GCP Pub / Sub,

• wystawianie usług Rest API,

• praca w języku Python oraz z frameworkiem PySpark,

• wykorzystanie języka Rust do pisania narzędzi i frameworków wspomagających wydajne ładowanie danych,

• z czasem przejęcie odpowiedzialności za wybrany obszar przetwarzania i wystawiania danych pod usługi w wysokim reżimie wydajnościowym,

• praca w modelu hybrydowym 1 raz w tygodniu z biura w Warszawie.

Ta oferta jest dla Ciebie, jeśli:

• masz co najmniej 5-letnie doświadczenie jako Data Engineer GCP w obszarze procesów integracji danych na GCP,

• bardzo dobrze znasz bazy danych GCP: GCP Big Query, GCP Big Table, Scylla Cloud,

• dobrze znasz narzędzia ETL Flow na GCP: Apache AirFlow, GCP Data Flow, GCP Data Proc,

• korzystasz z kolejek Kafka oraz GCP Pub / Sub,

• masz co najmniej 4-letnie doświadczenie jako Developer ETL w obszarze procesów integracji danych on-prem,

• biegle posługujesz się narzędziami ETL on-prem na poziomie zaawansowanym: Informatica Power Center, NIFI,

• posiadasz ekspercką znajomość relacyjnych baz danych Oracle, PostgreSQL, ScyllaDB,

• bardzo dobrze znasz narzędzie harmonogramujące Automate Now firmy Infinity Data,

• potrafisz wystawiać usługi Rest API,

• masz co najmniej 3-letnie doświadczenie jako programista,

• biegle znasz Python w obszarze integracji i analizy danych oraz framework PySpark,

• znasz język Rust do pisania narzędzi i frameworków wspomagających wydajne ładowanie danych.

Mile widziane:

• podstawowa wiedza w zakresie programowania MicroServices w języku JAVA,

• korzystanie z systemu operacyjnego Linux na poziomie zaawansowanego użytkownika,

• doświadczenie w pracy z dużymi wolumenami danych ~100TB,

• umiejętności analitycznego myślenia i szybkiego przyswajania wiedzy,

• samodzielność i kreatywność w rozwiązywaniu problemów,

• terminowość i rzetelność w realizacji projektów,

• znajomość narzędzi pomocniczych: repozytorium GIT, narzędzi do monitorowania jak np. Grafana, narzędzi do testów wydajności jak Apache JMeter

Co dla Ciebie mamy?

• Stabilną współpracę i różnorodne projekty (Software, Embedded, Data, Cloud Services), 

• możliwość rozwoju kompetencji jako Ambasador Scalo - doskonal skille techniczne i presalesowe w społeczności naszych ekspertów, wpływaj na rozwój organizacji, wspieraj innych,

• przestrzeń do budowania marki osobistej - twórz wartościowe treści, dziel się wiedzą i doświadczeniem, występuj jako prelegent na wydarzeniach (np. ProMeet),

• prywatną opiekę medyczną - Luxmed,

• kafeteryjny system benefitów - Motivizer, 

• dostęp do karty Multisport, 

• program poleceń pracowniczych z nagrodami,

• integracje i wydarzenia firmowe.