Data Engineer | Branża medialna

Data

Data Engineer | Branża medialna

Data
Full-time
B2B
Mid
Hybrid

Job description

O nas

Społeczność Edge One Solutions powstała z miłości do nowych technologii. Liczymy ponad 350 ekspertów, a w Grupie Euvic, której jesteśmy częścią, jest nas już 5500. Indywidualne podejście pozwala na dopasowanie projektów do umiejętności, przez co realnie wspieramy się w rozwoju kompetencji.

O kliencie

Nasz klient to globalna firma technologiczna działająca w sektorze wywiadu i pomiarów medialnych. Specjalizuje się w szeroko zakrojonych, prowadzonych w czasie rzeczywistym analizach uwagi konsumentów w środowiskach cyfrowych i telewizji internetowej. Jej platforma danych wspiera niektóre z największych światowych marek w podejmowaniu decyzji opartych na danych, w oparciu o kulturowo istotne sygnały behawioralne.

O projekcie

Projekt jest realizowany w obszarze Technology Operations klienta, który odpowiada za operacyjne dostarczanie opartych na danych produktów pomiarowych oraz produktów związanych z licencjonowaniem danych stanowiących główne źródła przychodów firmy. Data Engineer będzie koncentrować się na budowaniu, utrzymywaniu i ciągłym usprawnianiu produkcyjnych systemów dostarczania danych. Rola łączy klasyczną inżynierię danych z odpowiedzialnością operacyjną i automatyzacją, w tym z wykorzystaniem agentowych workflow opartych na AI, w celu ograniczenia pracy manualnej i zwiększenia niezawodności.

Tryb pracy

Praca hybrydowa z biura Klienta w Warszawie

Realizację projektu ułatwi Ci

  • Minimum 2 lata doświadczenia zawodowego w obszarze Data Engineering, Software Engineering lub Operational Engineering

  • Doświadczenie z Databricks i PySpark

  • Bardzo dobra znajomość Pythona, w tym budowanie i debugowanie pipeline’ów danych oraz skryptów automatyzujących

  • Praktyczne doświadczenie z Apache Airflow, w tym tworzenie DAG-ów, praca z operatorami i troubleshooting

  • Bardzo dobra znajomość SQL

  • Doświadczenie w pracy z platformami chmurowymi, takimi jak AWS i/lub GCP

  • Doświadczenie z Unity Catalog

  • Doświadczenie z migracjami baz danych oraz zarządzaniem schematami i wersjonowaniem

Mile widziane

  • Doświadczenie w budowaniu agentowych lub opartych na AI workflow automatyzujących

  • Doświadczenie w obszarze jakości danych, frameworków walidacyjnych lub obserwowalności danych

Twój wkład do projektu

  • Projektowanie, budowanie i utrzymywanie kompleksowych pipeline’ów danych dla raportów pomiarowych skierowanych do klientów oraz licencjonowanych zbiorów danych

  • Obsługa i troubleshooting DAG-ów Apache Airflow wspierających zaplanowane oraz ad hoc dostarczanie danych

  • Zarządzanie workflow opartymi na modelu push-based delivery, obejmującymi cloud storage, transfery plików oraz weryfikację dostarczenia danych

  • Analiza i rozwiązywanie incydentów produkcyjnych w systemach rozproszonych, takich jak Airflow, bazy danych i cloud storage

  • Wdrażanie automatyzacji oraz agentów opartych na AI w celu usprawnienia procesów operacyjnych i walidacji danych

  • Wsparcie niestandardowych zgłoszeń dotyczących dostarczania danych, w tym dopasowywania plików, zbiorów cross-reference oraz dedykowanych konfiguracji dla klientów

  • Tworzenie narzędzi do kontroli jakości i walidacji danych w celu zapewnienia ich poprawności przed dostarczeniem do klienta

  • Pisanie i utrzymywanie migracji bazodanowych dla konfiguracji dostaw oraz ustawień klientów

  • Współpraca z zespołami produktowymi, inżynieryjnymi, measurement science oraz zespołami mającymi bezpośredni kontakt z klientem

  • Dokumentowanie procesów operacyjnych, runbooków oraz workflow związanych z dostarczaniem danych

Tak o Ciebie zadbamy

Dołączając do Edge One Solutions, otrzymujesz pełne wsparcie w rozwoju zawodowym i osobistym, co daje Ci realną szansę na budowanie kariery zgodnie z własnymi celami.

  • Zyskujesz indywidualne wsparcie Service Delivery Managera, który pomoże Ci zaplanować ścieżkę kariery i zadba o Twój komfort i satysfakcję z pracy w projekcie

  • Szkolenia, certyfikaty i konferencje - dofinansowujemy lub w pełni pokrywamy koszty rozwoju kompetencji technicznych

  • #SmartChange – umożliwiamy zmianę projektu i dobieramy kolejny zgodnie z Twoimi preferencjami

  • Dbamy o Twój work-life balance, dlatego poza pracą oferujemy wyjścia integracyjne, aktywności sportowe i inspirujące webinary #edge1talks, które rozwijają i łączą ludzi.

  • Aktywność fizyczna – wspieramy sportowe inicjatywy i wynajem sal treningowych

  • Pakiet zdrowotny – prywatna opieka, karta sportowa, ubezpieczenie i wsparcie psychologiczne (HearMe)

  • Elastyczne benefity – sam decydujesz, na co przeznaczasz punkty w naszym systemie benefitowym

  • Lekcje języka angielskiego – dopasowane do Twojego poziomu, idealne do pracy w międzynarodowym środowisku

Nie spełniasz wszystkich wymagań, a projekt Cię zainteresował? Nie wahaj się i aplikuj. Porozmawiajmy!

Tech stack

    Pythona

    advanced

    SQL

    advanced

    Databricks

    regular

    PySpark

    regular

    Apache Airflow

    regular

    DAG

    regular

    AWS

    regular

    Google Cloud Platform

    regular

    Unity Catalog

    regular

Office location

Data Engineer | Branża medialna

Summary of the offer

Data Engineer | Branża medialna

-, Warszawa
Edge One Solutions Sp. z o.o
By applying, I consent to the processing of my personal data for the purpose of conducting the recruitment process. Informujemy, że administratorem danych jest Edge One Solutions sp. z siedzibą w Warszawie, Aleje Jerozolimskie 132 (dalej jako "admini... MoreThis site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.