Data Platform Engineer

Kim jest H2B Group?

Jesteśmy firmą konsultingową, która pomaga klientom w automatyzacji procesów biznesowych przy pomocy AI, a specjalistom IT rozwijać karierę w modelu B2B. Oferujemy projekty z branż takich jak fintech, medtech, edutech czy automatyka przemysłowa. Dzięki ścisłej współpracy wspieramy rozwój naszych klientów poprzez dostarczanie szybkich i mierzalnych efektów, jednocześnie zapewniając specjalistom IT możliwości rozwoju kariery i zdobywania cennego doświadczenia.

Dlaczego warto z nami współpracować?

✨ Elastyczność – Wybierasz projekty dopasowane do swoich umiejętności i zainteresowań, z możliwością zmiany w ramach naszej firmy lub grupy Euvic, której jesteśmy częścią.

💡 Przejrzystość – Masz jasne zasady współpracy i pełną transparentność wynagrodzenia oraz warunków.

🚀 Szybkość działania – Dzięki naszej efektywności szybko znajdziesz lub zmienisz projekt, który idealnie odpowiada Twoim kompetencjom.

🌟 Możliwość rozwoju – Pracujesz przy innowacyjnych projektach, rozwijając kluczowe kompetencje i zdobywając cenne doświadczenie.

Do projektu naszego klienta poszukujemy osoby na stanowisko Data Platform Engineer, która zaprojektuje i wdroży chmurową platformę danych typu lakehouse. Platforma będzie pobierać dane z narzędzi inżynieryjnych i bezpieczeństwa, przetwarzać je w wielu warstwach oraz udostępniać zarówno do dashboardów analitycznych, jak i agentów AI.

Doświadczenie

• 7+ lat doświadczenia w rolach data engineeringowych, w tym co najmniej 2 lata przy budowie architektur lakehouse (Bronze/Silver/Gold lub równoważne wzorce medallion)

• Udokumentowane doświadczenie w dostarczaniu produkcyjnych platform danych

• Doświadczenie z grafowymi bazami danych (Neo4j, Amazon Neptune, TigerGraph) do modelowania relacji

• Praktyczna znajomość przetwarzania strumieniowego (Kafka, Flink, Spark Streaming, Kinesis)

Umiejętności techniczne (kluczowe)

• Platformy chmurowe: Zaawansowana znajomość AWS (S3/Blob, RDS/SQL Database, zarządzany Kafka, obliczenia serverless)

• SQL i modelowanie danych: Ekspercka znajomość SQL, modelowanie wymiarowe, SCD2, kompromisy między normalizacją a denormalizacją

• Narzędzia transformacji: dbt, Databricks SQL, Dataform lub własne frameworki SQL/Python

• Programowanie: Python lub Scala do przetwarzania danych, skryptów i automatyzacji

• Orkiestracja: Airflow, Prefect, Dagster, Step Functions lub Azure Data Factory

• IaC: Terraform, CloudFormation, Pulumi lub szablony ARM

Umiejętności techniczne (mile widziane)

• Wyszukiwanie: OpenSearch, Elasticsearch lub Solr do indeksowania i wyszukiwania tekstu

• Grafy: Neo4j Cypher, SPARQL lub Gremlin do zapytań grafowych; doświadczenie w ETL dla grafów

• Jakość danych: Great Expectations, testy dbt lub własne frameworki walidacyjne

• Czas rzeczywisty: Flink, Spark Streaming lub serverlessowe przetwarzanie zdarzeń (Lambda, Cloud Functions)

• Monitoring: Grafana, Datadog lub CloudWatch do obserwowalności pipeline’ów danych

Umiejętności miękkie

• Komunikacja: Umiejętność wyjaśniania kompromisów technicznych (koszt, wydajność, złożoność) osobom nietechnicznym

• Rozwiązywanie problemów: Debugowanie problemów z jakością danych, optymalizacja wolnych zapytań, rozwiązywanie konfliktów schematów

• Współpraca: Praca z data scientistami, inżynierami DevOps oraz zespołami compliance

• Samodzielność: Radzenie sobie z niejednoznacznością; proponowanie rozwiązań przy niekompletnych wymaganiach

Co oferujemy?

💻 Pracę zdalną – elastyczność, która pozwala pracować z każdego zakątka świata!

🚀 Ciekawe projekty – dopasowane do Twoich umiejętności i zainteresowań, z możliwością pracy nad innowacyjnymi rozwiązaniami.

🤝 Umowę B2B bez zapisu o wyłączności – współpracuj z nami na swoich zasadach.

📚 Rozwój zawodowy – praca z najnowszymi technologiami i w zróżnicowanych projektach gwarantuje stały rozwój.