Data Engineer

Opis projektu

Dołączysz do zespołu Data Engineering odpowiedzialnego za rozwój i utrzymanie nowoczesnych rozwiązań w obszarze przetwarzania i analizy danych. Projekt obejmuje budowę i optymalizację potoków danych, wdrażanie rozwiązań streamingowych oraz zapewnienie wysokiej jakości i dostępności danych dla procesów biznesowych i analitycznych.

Wymagania obligatoryjne

• Bardzo dobra znajomość zasad Change Data Capture (CDC) oraz praktyczne doświadczenie w ich stosowaniu

• Doświadczenie w pracy z Apache Kafka w kontekście przetwarzania strumieniowego

• Doświadczenie w pracy z Apache Spark lub Databricks (przetwarzanie i analiza danych)

• Umiejętność pracy w międzynarodowym środowisku, dobra komunikacja techniczna

• Angielski na poziomie pozwalającym na swobodne korzystanie z dokumentacji i współpracę w zespole

  
  

Wymagania dodatkowe

• Doświadczenie w pracy z chmurą (Azure, AWS lub GCP)

• Znajomość narzędzi do orkiestracji danych (np. Airflow, dbt)

• Doświadczenie w tworzeniu i optymalizacji hurtowni danych

• Znajomość Python i SQL w kontekście data engineering

• Znajomość metodologii Agile / Scrum