Senior Data Engineer
Czerniakowska 87a, Warszawa
Polski Standard Płatności S.A.
O projekcie
Szukamy samodzielnych seniorów, którzy chcą mieć realny wpływ, a nie tylko "dowodzić tickety". Pracujemy w modelu "wolno, drogo, ale dobrze". Budujemy platformę danych od zera, kształtujemy kulturę data-driven w całej organizacji i decydujemy, jak będzie wyglądał ekosystem danych na najbliższe lata. Pracujemy na nowoczesnym stacku opartym o Google Cloud, BigQuery, Python. Przetwarzamy miliardy eventów, a przy tym dbamy, żeby była przestrzeń na eksperymenty, dyskusje architektoniczne i zwykłą radość z rozwiązywania trudnych problemów (i czytanie whitepaperów o algorytmach i strukturach danych). Projekt nie ma "daty końca", a większość przed nami. Jesteśmy nowym, autonomicznym zespołem w BLIKu i naprawdę interesujemy się tym, co robimy i jak to działa kilka poziomów abstrakcji pod spodem. Techniczne wyzwania i sensowny wpływ na biznes - to jest dokładnie to miejsce.
Twój zakres obowiązków
Praca przy tworzeniu globalnej platformy analitycznej w firmie, z myślą o skalowalności i kosztach.
Projektowanie i rozwój data pipeline'ów (batch, streaming).
Tworzenie i utrzymywanie kontraktów danych, testów i metryk jakości (freshness, completeness, accuracy).
Projektowanie algorytmów (deduplikacja, windowing, segmentacja) i struktur danych zoptymalizowanych dla tysięcy eventów na sekundę.
Zbieranie, analiza i synteza wymagań od zespołów produktowych, analityków i Data Science.
Propagowanie kultury data-driven w organizacji.
Tworzenie dokumentacji oraz proponowanie nowych rozwiązań i kierunków dalszego rozwoju.
Nasze wymagania
Minimum 6 lat komercyjnego doświadczenia w programowaniu w języku Python lub Go
Doświadczenie w pracy z co najmniej jednym z narzędzi: Apache Airflow, Spark, Beam, NiFi, Flink
Biegłość w SQL (PostgreSQL) i NoSQL - key-value, dokumentowe, time-series oraz kolumnowe DWH
Pisanie kodu wg zasad Clean Code (np. "Meaningful Variable and Function Names", "Keep Functions and Methods Short.)
Doświadczenie z silnikami kolejek
Znajomość powszechnie stosowanych formatów, algorytmów i struktur danych
Mile widziane
Doświadczenie w pracy w chmurach publicznych (wykorzystujemy Google Cloud, natomiast jeśli znasz dobrze inną - na pewno dojdziemy do porozumienia)
Znajomość technologii CI/CD oraz IaC (Terraform, Ansible)
To oferujemy
Możliwość pracy nad kluczowym systemem płatniczym w Polsce, mającym realny wpływ na codzienne życie milionów użytkowników
Autonomię w podejmowaniu decyzji technicznych i możliwość wprowadzania innowacyjnych rozwiązań
Pracę w środowisku, które ceni wiedzę ekspercką, argumenty merytoryczne i wspiera kulturę ciągłego uczenia się
Elastyczne godziny pracy, praca hybrydowa
Pakiet standardowych benefitów (zawierający m.in. opiekę medyczną, ubezpieczenie na życie, naukę języka angielskiego, nieograniczony dostęp do dużej platformy e-learningowej, MyBenefit)
Budżet szkoleniowy i konferencyjny
Senior Data Engineer
Senior Data Engineer
Czerniakowska 87a, Warszawa
Polski Standard Płatności S.A.