Senior Big Data Engineer

Jesteśmy 12 osobowym zespołem pracującym w SCRUMie w obszarze Big Data. Realizujemy projekty biznesowe jak i te R&D. Moglibyśmy o nich opowiadać godzinami, ale krótko nakreślając. Jesteśmy odpowiedzialni m.in za implementację rozwiązań z zakresu przetwarzania streamingowego (znacznie skróciliśmy czas ładowania danych pod raporting w banku). Dodatkowo, na co dzień blisko współpracujemy z zespołem Data Science, wdrażając i rozwijając rozwiązania ML/AI. Do naszych głównych obowiązków należy też wsparcie architektoniczne i wdrożeniowe dla innych zespołów projektowych. 

Tech stack w którym pracujemy to m.in. Python, Java, Kubeflow, Kafka, Hadoop Cloudera (CDP), Spark, Nifi, GX i wiele więcej 😉 

Przed nami również droga wchodzenia w chmurę (GCP i Azure). 

forma współpracy: umowa o pracę 

tryb działania: praca zdalna + spotkania zespołowe w Warszawie (2x/miesiąc) 

w tej roli będziesz

odpowiadać za:

• projektowanie architektury i wdrażanie nowoczesnych systemów przetwarzania danych w obszarze Big Data. Systemy mogą również obejmować elementy analityki strumieniowej i uczenia maszynowego
• dbanie o wysoką jakość procesu rozwojowo-wdrożeniowego
• dbanie o wysoką jakość dokumentacji technicznej
• poszukiwanie nowych rozwiązań oraz ich implementację (R&D) 
• współpraca z innymi zespołami w celu wsparcia developmentu 

zaaplikuj, jeśli:

• masz min. 5 lata komercyjnego doświadczenia w programowaniu w Spark procesów batch/streaming w Python  
• masz doświadczenie w projektowaniu architektury rozwiązań 
• posiadasz wiedzę z zakresu Big Data, Hurtowni Danych i Zarządzania Danymi  
• znasz platformę Hadoop Cloudera/Hortonworks 
• posiadasz wiedzę z zakresu dobrych praktyk przetwarzania dużych zbiorów danych, w tym standardów projektowania, kodowania, dokumentowania, testowania i wdrażania 
• znasz technologie i narzędzia strumieniowe takie jak Kafka, Apache Nifi 
• masz doświadczenie z różnymi formatami danych: JSON, PARQUET, ORC, AVRO 
• posiadasz zrozumienie typów baz danych i scenariuszy użycia, np. hive, kudu, hbase, Iceberg itp.
• znasz język SQL na poziomie zaawansowanym 
• masz doświadczenie w integracji danych z wielu źródeł 

mile widziane: 

• praktyczna znajomość procesów i narzędzi Agile: Jira, Confluence, Kanban, Scrum itp. 
• praktyczna wiedza w zakresie automatyzacji CI/CD 

Proces rekrutacji:

1. Zapoznamy się z Twoim CV.
2. Porozmawiasz z rekruterką.
3. Spotkasz się online z przyszłą menadżerką i osobą z zespołu.
4. Damy znać, jak Ci poszło - trzymamy kciuki!

Twój rozwój:

• mamy różnorodne obszary - od infrastruktury IT, przez deweloperskie, aż po cyberbezpieczeństwo, wspieramy mobilność wewnętrzną pomiędzy zespołami i projektami,
• pomagamy zdobyć wiedzę i umiejętności branżowe (certyfikowane kursy online z zakresu chmury, LinkedIn Learning, Pluralsight),
• oferujemy programy rozwojowe mBanku, np.: Data Academy, Akademia Bezpieczeństwa, Z energią po zdrowie, Piątki z rozwojem, ODnowa (program wspierający pracę i zarzadzanie w środowisku zdalnym i hybrydowym,
• wspieramy w opracowaniu indywidualnych planów rozwojowych i odkrywaniu mocnych stron wykorzystując podejście Instytutu Gallupa,
• możliwość aktywnego udziału w organizacji Wielkiej Orkiestry Świątecznej Pomocy, Pol’and’Rock Festival oraz wspierania innych dobroczynnych inicjatyw.

dostaniesz od nas:

• dofinansowanie do opieki medycznej LuxMed
• dofinansowanie do karty Multisport
• dofinansowanie ubezpieczenia Uniqua
• dofinansowanie świąt, wypoczynku, ZFŚS
• dostęp do aplikacji Legimi, LinkedIn Learning, do nauki języków obcych
• zniżki u partnerów
• rozwój pasji i zainteresowań w ramach mKlubów
• nagrodę pieniężną za skuteczne polecenie w ramach programu poleceń
• możliwość udziału w rekrutacji wewnętrznej