Data Enginner

Zakres obowiązków:

• Rozwój procesów ETL – wymagane doświadczenie z Matillion (1-2 lata – must have).
• Praca z hurtownią danych (Snowflake) – projektowanie i zarządzanie architekturą Snowflake, w tym optymalizacja schematów, partycjonowania i wydajności.
• Integracja danych – łączenie danych z różnych źródeł i wdrażanie ich w Snowflake, AWS S3, z naciskiem na efektywność procesów ETL i dokładność danych.
• Programowanie w Pythonie – tworzenie skryptów automatyzujących przetwarzanie danych, migracja danych ze Snowflake do AWS S3.
• Zaawansowana praca z SQL – pisanie złożonych zapytań, transformacje danych i optymalizacja wydajności.
• Zarządzanie danymi w chmurze (AWS S3) – wykorzystanie AWS S3 do przechowywania i zarządzania danymi w procesach ETL.
• Migracja danych – przenoszenie dużych zbiorów danych do chmury, w szczególności do Snowflake.

Wymagania:

• Doświadczenie w pracy z Matillion (minimum 1-2 lata).
• Bardzo dobra znajomość Snowflake i optymalizacji jego architektury.
• Umiejętność integracji danych z różnych źródeł oraz ich efektywne przetwarzanie.
• Bardzo dobra znajomość Python i SQL.
• Doświadczenie w pracy z AWS S3.
• Praktyczna wiedza z zakresu migracji dużych zbiorów danych do chmury.

Jeśli interesuje Cię ta rola i chcesz pracować nad ciekawymi projektami dla globalnej marki – aplikuj