Data Engineer AWS/Azure

.ASTEK Polska

Jesteśmy częścią Grupy ASTEK, która od 1988 roku gromadzi doświadczenie na globalnym rynku usług konsultingowych. Grupa ASTEK jest globalnym graczem w dziedzinie inżynierii i doradztwie technologicznym, obecnym na 5 kontynentach.

Czego uczymy się od innych podmiotów Grupy w naszej codziennej pracy? Przede wszystkim:

inspiracji, celów, dobrych praktyk, innowacyjnych działań i wartości. W 2020, 2021, 2022 i 2023 roku otrzymaliśmy certyfikat Great Place to Work i znaleźliśmy się w gronie 15 Najlepszych Miejsc Pracy w Polsce w kategorii: duże firmy.

Wynagrodzenie: do 16 - 20 tys. zł brutto UOP

Typ kontraktu: CoE (Contract of Employment)

Model pracy: Zdalna/Hybryda (Warszawa, Wrocław) - do ustalenia w zależności od projektu od 1 dnia/ tydzień do 1 dnia na miesiąc.

Projekt:

Osoba na tym stanowisku odpowiedzialna jest za projektowanie, rozwój utrzymanie baz danych. W zależności od projektu, może pracować nad integracją systemów, elastycznie w zakresie sektora działalności.

Twoje zadania:

• Projektowanie, rozwój i utrzymanie procesów ETL/ELT w środowiskach

chmurowych (Azure, AWS, GCP) oraz on-premise

• Tworzenie i zarządzanie data pipelines umożliwiających integrację,

transformację, oczyszczanie i ładowanie danych z wielu źródeł

• Budowa i rozwój hurtowni danych, data lake oraz lakehouse z wykorzystaniem

nowoczesnych narzędzi i architektur

• Automatyzacja wdrożeń infrastruktury danych z użyciem podejścia

Infrastructure as Code (Terraform, CloudFormation, ARM, Pulumi)

• Implementacja i utrzymanie workflowów CI/CD (CodePipeline, GitLab CI/CD,

Jenkins) dla procesów danych i komponentów infrastruktury

• Wdrażanie i utrzymywanie rozwiązań w zakresie konteneryzacji i orkiestracji

(Docker, ECS, Kubernetes, AKS, GKE)

• Optymalizacja zapytań i procesów w oparciu o SQL/NoSQL, BigQuery,

Redshift, Synapse, Snowflake

• Monitorowanie, logowanie i diagnostyka potoków danych z użyciem narzędzi

(Prometheus, Grafana, ELK, CloudWatch, DataDog)

• Wdrażanie mechanizmów bezpieczeństwa, szyfrowania i kontroli dostępu

zgodnie z dobrymi praktykami Data Governance i regulacjami (np. RODO, GDPR)

• Współpraca z zespołami Data Science, BI, ML oraz zespołami biznesowymi w

zakresie dostarczania wysokiej jakości danych

• Ciągła optymalizacja wydajności, kosztów i niezawodności systemów danych.

Wymagania:

• Doświadczenie w pracy jako Data Engineer w środowiskach Azure, AWS lub

GCP

• Bardzo dobra znajomość procesów ETL/ELT, modelowania danych

projektowania architektur hurtowni danych

• Praktyczna znajomość narzędzi IaC (Terraform, CloudFormation, ARM, Pulumi)

oraz systemów CI/CD (CodePipeline, GitLab CI, Jenkins)

• Doświadczenie w pracy z kontenerami i orkiestracją (Docker, ECS, Kubernetes)

• Znajomość baz danych: relacyjnych (SQL Server, PostgreSQL, Oracle, MySQL)

oraz nierelacyjnych (MongoDB, Cassandra, DynamoDB)

• Umiejętność pracy z dużymi wolumenami danych w oparciu o Big Data (Spark,

Hadoop, Databricks)

• Znajomość narzędzi i platform do przetwarzania strumieniowego (Kafka,

Kinesis, Pub/Sub)

• Zrozumienie zagadnień Data Governance, Data Quality, Security i

implementacja dobrych praktyk w tym obszarze

• Znajomość języków skryptowych i programowania (np. Python, Bash, Go, Java,

Scala)

• Doświadczenie w monitorowaniu i automatyzacji systemów danych

(Prometheus, Grafana, ELK, CloudWatch)

• Komunikatywność, samodzielność, orientacja na cel oraz chęć ciągłego rozwoju w obszarze technologii danych

Mile widziane:

• Doświadczenie w bankowości/ finansach/ ubezpieczeniach

Wartość dodana dla Ciebie:

• Długoterminowa współpraca

• Możliwość wyboru preferowanego rodzaju współpracy (regularna umowa o pracę ze wszystkimi korzyściami lub elastyczny kontrakt B2B)

• Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji

• Mentoring Competence Center - będziesz członkiem społeczności CC od pierwszego dnia pracy. Będziesz miał szansę rozwijać swoje umiejętności, uczestniczyć w różnych konferencjach oraz dzielić się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami

• Jasna ścieżka kariery

• Pakiet benefitów pracowniczych

• Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

📩 Potrzebujesz więcej informacji? Kontakt: anna.jarecka@astek.net

Nie chodzi o Ciebie? Poleć nas swojemu znajomemu i zgarnij bonus do

7000 złLink: https://astek.pl/system-rekomendacji/

AO201975