Mid Data Engineer

W tej roli będziesz pełnić kluczową funkcję, współpracując z zespołem inżynierów danych nad projektowaniem, rozwojem i utrzymaniem zaawansowanych systemów przetwarzania danych. Idealny kandydat powinien posiadać solidne doświadczenie w technologiach chmurowych, architekturze danych i rozwiązywaniu złożonych problemów związanych z danymi.

Kluczowe obowiązki:

Tworzenie, wdrażanie i utrzymywanie skalowalnych przepływów danych, zapewniając ich integralność i optymalizację. Współpraca z zespołami międzydziałowymi w celu zbierania wymagań dotyczących danych i przekładanie ich na efektywne rozwiązania, z wykorzystaniem inżynierii danych w chmurze. Rozwój i optymalizacja procesów ETL, aby zapewnić terminowe i precyzyjne dostarczanie danych do aplikacji biznesowych, z zachowaniem najlepszych praktyk w zakresie bezpieczeństwa danych. Rozwiązywanie problemów związanych z przepływami danych, zapewniając ciągłą ich dostępność i niezawodność. Monitorowanie najnowszych technologii i trendów, wprowadzanie innowacyjnych rozwiązań oraz dokumentowanie procesów technicznych.

Narzędzia i technologie:

• Python
• PySpark
• SQL
• TypeScript

Wymagania:

• Minimum 2,5-3 lata doświadczenia w inżynierii danych, ze szczególnym uwzględnieniem rozwiązań chmurowych
• Zaawansowana znajomość Pythona i PySparka
• Praktyczne doświadczenie z chmurowymi usługami przetwarzania danych
• Znajomość TypeScript oraz umiejętność jego wykorzystania w projektach
• Doświadczenie w modelowaniu i optymalizacji danych
• Znajomość technologii Big Data będzie dodatkowym atutem
• Silne umiejętności analityczne, rozwiązywania problemów oraz współpracy w zespole

Dodatkowe atuty:

• Certyfikaty w zakresie technologii chmurowych
• Doświadczenie z konteneryzacją (np. Docker, Kubernetes)
• Znajomość API oraz technologii wyszukiwania
• Znajomość przepisów dotyczących ochrony danych i regulacji branżowych