Senior Data Engineer/ Architekt

Jesteśmy częścią Grupy ASTEK, która od 1988 roku gromadzi doświadczenie na globalnym rynku usług konsultingowych. Grupa ASTEK jest globalnym graczem w dziedzinie inżynierii i doradztwie technologicznym, obecnym na 5 kontynentach.

Czego uczymy się od innych podmiotów Grupy w naszej codziennej pracy? Przede wszystkim: inspiracji, celów, dobrych praktyk, innowacyjnych działań i wartości. W 2020, 2021, 2022 i 2023 roku otrzymaliśmy certyfikat Great Place to Work i znaleźliśmy się w gronie 15 Najlepszych Miejsc Pracy w Polsce w kategorii: duże firmy.

Poszukujemy Senior Data Engineera/ Architekta do współpracy przy projekcie R&D:

Model pracy: zdalna (konieczność przyjazdu do Wrocławia: pierwszego dnia współpracy oraz raz na trzy miesiące (PI planning)- koszty dojazdu są po stronie projektu)

Forma współpracy: B2B

Budżet:

• B2B: do 1300 PLN netto na FV + VAT/ dziennie

Dostępność: ASAP

Start współpracy: od zaraz

Projekt: System Business Intelligence działający w chmurze AWS, wspierający analizę i wizualizację danych logistycznych. Wykorzystuje technologie takie jak Kafka, AWS Lambda, Redshift i Oracle. System jest przygotowywany do obsługi milionów rekordów dziennie, z możliwością dalszej skalowalności. Zespół rozwija architekturę ETL oraz optymalizuje procesy przetwarzania i transferu danych na dużą skalę, aby zapewnić maksymalną wydajność i niezawodność. Senior Data Engineer odgrywa kluczową rolę w projekcie, mając realny wpływ na kierunek rozwoju systemu oraz dobór technologii.

Do Twoich codziennych obowiązków należeć będzie:

• Analiza obecnych rozwiązań, wskazywanie obszarów do poprawy i usprawnień, wdrażanie najlepszych praktyk
• Projektowanie i optymalizacja procesów ETL oraz modelowanie przepływów danych w kontekście dużych wolumenów (miliony rekordów dziennie)
• Praca z AWS Lambda i Kafka, wsparcie w zmianie podejścia do streamingu danych
• Rozwój i optymalizacja Data Warehouse (AWS Redshift), analiza i usprawnianie procesów przechowywania danych
• Tworzenie oraz optymalizacja raportów i dashboardów, wsparcie w zakresie wizualizacji danych
• Współpraca z zespołem (PO, Scrum Master, Testerzy, Developerzy, Data Engineerowie, DevOps) oraz uczestnictwo w PI planning (raz na 3 miesiące)

Wymagania techniczne:

• Minimum 5 lat doświadczenia na stanowisku Data Engineera
• Doświadczenie w pracy z dużymi zbiorami danych i systemami rozproszonymi
• Praktyczne doświadczenie w projektowaniu i implementacji architektury baz danych w chmurze
• Udokumentowane projekty wykorzystujące Kafka, Airflow, Redshift, AWS
• Znajomość dobrych praktyk DevOps w kontekście zarządzania infrastrukturą danych
• Zaawansowana znajomość środowiska AWS, w szczególności usług związanych z przetwarzaniem i przechowywaniem danych (Redshift, S3, Lambda)
• Doświadczenie w modelowaniu baz danych, ze szczególnym uwzględnieniem star schema i optymalizacji pod kątem analityki
• Ekspercka wiedza z architektury baz danych w chmurze
• Znajomość Kafka i rozwiązań opartych na przetwarzaniu strumieniowym danych
• Doświadczenie w budowie i optymalizacji procesów ETL/ELT w narzędziach takich jak Airflow
• Znajomość narzędzi do wizualizacji danych, np. Superset
• Bardzo dobra znajomość SQL i umiejętność optymalizacji zapytań
• Praktyczna znajomość języków obiektowych takich jak np. Javy i Pythona (preferowane doświadczenie w implementacji pipeline’ów danych i integracji systemów)
• Znajomość j. angielskiego na poziomie min. B2, najlepiej C1

Mile widziane:

• Doświadczenie w pracy z Lakehouse Architecture
• Doświadczenie z Terraform do zarządzania infrastrukturą
• Znajomość Docker/Kubernetes

Wartość dodana dla Ciebie:

• Długoterminowa współpraca
• Możliwość wyboru preferowanego rodzaju współpracy (regularna umowa o pracę ze wszystkimi korzyściami lub elastyczny kontrakt B2B)
• Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
• Mentoring Competence Center - będziesz członkiem społeczności CC od pierwszego dnia pracy. Będziesz miał szansę rozwijać swoje umiejętności, uczestniczyć w różnych konferencjach oraz dzielić się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
• Jasna ścieżka kariery
• Pakiet benefitów pracowniczych
• Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

Potrzebujesz więcej informacji? Skontaktuj się ze mną: justyna.karpierz@astek.net

Nie chodzi o Ciebie?Poleć nas swojemu znajomemu i zgarnij bonus do 7000 zł

Link: https://astek.pl/system-rekomendacji/