Kafka Engineer

W ITLT pomagamy naszym zaprzyjaźnionym firmom przekształcać ambitne pomysły w cyfrową rzeczywistość.

Z nastawieniem na wyzwania, ciekawość technologii i zwinność - współtworzymy wyjątkowe rozwiązania IT.

Aktualnie poszukujemy osób na stanowisko: Kafka Engineer

Konkrety:

• Stawka: 150 - 170 PLN/h na FV

• Miejsce pracy/praca zdalna: Zapewniamy dużą swobodę pracy zdalnej, przy czym zapraszamy 1 dzień w miesiącu do wrocławskiego biura

• Wymiar pracy: Fulltime

• Sektor: Money Services

• Projekt: Budowa hybrydowego środowiska Kafka łączącego klastry on-premise i AWS

• Zespół: Data Platform - Data Engineers, DevOps, Security

• Proces rekrutacji: 1-etapowy (spotkanie zdalne via MS Teams). Sporadycznie możliwe dodatkowe krótkie spotkanie - połączone z decyzją

• Szacowany czas trwania projektu: Długoterminowy/bezterminowy

• Czas pracy/Strefa czasowa: Standardowe polskie godziny pracy

• Technologie/tematy na projekcie: Apache Kafka, Confluent Platform, Confluent Cloud, AWS (MSK, EKS, Aurora, VPC, IAM, EC2, S3, KMS, Secrets Manager), MirrorMaker 2, Cluster Linking, Confluent Replicator, Terraform, Ansible, GitHub Actions/GitLab CI/Jenkins, Python, Bash, Prometheus, Grafana, Confluent Control Center, OpenTelemetry, Elastic Stack

Do Twoich głównych obowiązków na tym stanowisku należeć będzie:

Projektowanie i rozwój hybrydowej architektury Kafka on-prem ↔ AWS

• Dobór i konfiguracja komponentów Confluent Platform (m.in.:Schema Registry / Flink / Control Center / Tableflow)

• Budowa i konfiguracja środowiska Kafka w AWS, w tym MSK, EKS i powiązanych usług

• Implementacja replikacji i synchronizacji danych pomiędzy klastrami on-prem i AWS

• Konfiguracja i utrzymanie MirrorMaker 2 / Cluster Linking / Confluent Replicator

• Zapewnienie spójności danych oraz niskich opóźnień podczas replikacji

• Projektowanie i wdrażanie CI/CD dla Kafki, schematów oraz aplikacji konsumenckich

• Tworzenie i utrzymanie Infrastructure-as-Code w Terraform

• Automatyzacja wdrożeń, testów oraz infrastruktury

• Implementacja i utrzymanie monitoringu oraz observability - Prometheus, Grafana, Control Center, OpenTelemetry, Elastic

• Tworzenie runbooków, alertów oraz SLA/SLO

• Rozwiązywanie incydentów i problemów technicznych podczas budowy oraz utrzymania rozwiązania

• Optymalizacja wydajności i tuning konfiguracji Kafka

• Współpraca z zespołem Data Platform, Data Engineering, DevOps i Security

• Mentoring mniej doświadczonych inżynierów i prowadzenie warsztatów technicznych

Ta oferta będzie idealna dla Ciebie, jeśli posiadasz większość z poniższych:

• Minimum 4 lata doświadczenia z Apache Kafka

• Bardzo dobrą znajomość Confluent Platform (Enterprise) oraz Confluent Cloud

• Doświadczenie w migracji i replikacji klastrów Kafka (w szczególności:MirrorMaker 2 / Cluster LinkingC / Confluent Replicator)

• Praktyczną znajomość AWS (w tym: VPC / IAM / EC2 / EKS / MSK / S3 / KMS / Secrets Manager)

• Doświadczenie w budowie i utrzymaniu środowisk hybrydowych on-prem ↔ AWS

• Doświadczenie z Terraform - tworzenie modułów, wersjonowanie, testowanie planów (mile widziane Terratest i tfsec) oraz Ansible

• Doświadczenie z CI/CD (GitHub Actions, GitLab CI lub Jenkins)

• Programowanie / scripting: Python, Ansible, Bash

• Automatyzacja testów integracyjnych dla Kafka

• Monitoring i observability (Prometheus / Grafana / Confluent Control Center / OpenTelemetry / Elastic Stack)

• Znajomość security w Kafka:(TLS, SASL, ACL, RBAC, szyfrowanie danych at rest / in transit

Warto do nas dołączyć, ponieważ oferujemy:

• Dużą swobodę pracy zdalnej

• Długofalowe stabilne zatrudnienie

• Szansę na uczestniczenie w kluczowych projektach dla dużej firmy działającej w bardzo stabilnym sektorze

• Atrakcyjne wynagrodzenie (adekwatne do umiejętności i doświadczenia)

• Benefity (Lux Med, MultiSport...)

W razie pytań pingnij śmiało na Linkedin'ie do Kuby