Senior Data Engineer

Twoja rola

Jako Senior Data Engineer będziesz częścią zespołu Xelerit wspierając naszego klienta LEXGEN w budowaniu i skalowaniu infrastruktury danych napędzającej rozwiązania AI. Twoja praca bezpośrednio wpłynie na to, jak skutecznie chatbot rozumie i przetwarza złożone informacje prawne.

O projekcie

LEXGEN buduje inteligentnego chatbota AI dla branży legal-tech, który wspiera specjalistów w obsłudze złożonych procesów prawnych i księgowych na rynku holenderskim. Platforma łączy w sobie dostęp do wielu źródeł danych (publicznych i prywatnych) z głęboką integracją systemów klientów, dostarczając rozwiązania, które realnie upraszczają codzienną pracę prawników i księgowych. 

Więcej informacji znajdziesz na https://lexgen.nl/en/home-en/

Czym będziesz się zajmować:

• Rozwój RAG pipelines - projektowanie i optymalizacja systemów Retrieval-Augmented Generation dla specyfiki danych prawnych

• Integracje z systemami DMS - budowanie solidnych, skalowalnych połączeń z Document Management Systems klientów korporacyjnych

• REST API - tworzenie i utrzymanie API do zarządzania przepływem danych i integracjami

• AI-powered metadata extraction - implementacja rozwiązań do automatycznej ekstrakcji i wzbogacania metadanych z wykorzystaniem modeli AI

• Rozwój wewnętrznych bibliotek - tworzenie lekkich, modularnych bibliotek do obsługi źródeł danych i core funkcjonalności (przetwarzanie dokumentów, wzbogacanie tekstu o metadane) w duchu Unix philosophy

• Optymalizacja wydajności - dbanie o efektywne przetwarzanie dużych wolumenów dokumentów na Databricksie

• Współpraca z zespołem AI/ML - ścisła współpraca z zespołem retrieval - jakość ekstrakcji danych ze źródeł bezpośrednio determinuje skuteczność wyszukiwania i odpowiedzi AI

Czego oczekujemy:

• Płynnie piszesz i debugujesz kod w Pythonie i Sparku

• Masz 3-letnie doświadczenie na analogicznym stanowisku

• Masz praktyczne doświadczenie w pracy z Databricks

• Potrafisz projektować skalowalne systemy przetwarzania danych

• Masz doświadczenie z platformami chmurowymi (AWS/GCP/Azure/Scaleway)

• Płynnie posługujesz się językiem  angielskim (zespół międzynarodowy)

Wyróżnisz się, jeśli:

• Masz doświadczenie w budowaniu RAG/LLM pipeline'ów 

• Pracowałeś w branży legal-tech lub fintech

• Masz doświadczenie z Elasticsearch

• Budowałeś REST API (FastAPI, Flask)

• Zarządzałeś własną infrastrukturą za pomocą kodu (najlepiej Terraform)

Co oferujemy w zamian:

💲 Długoterminowa współpraca B2B widełki: 22 000–28 000 PLN net + VAT / miesiąc

🌞 26 płatnych dni wolnych w ciągu roku

📍 Elastyczny model hybrydowy 2 dni w tygodniu w naszym biurze w Gdańsku (Oliva Center)

🥇 Budżet rozwojowy 1000 PLN rocznie na kursy, szkolenia lub książki

🩺 Prywatna opieka medyczna Medicover

🏋‍♂️ Karta sportowa Medicover Sport

🤸‍♂️ Luźna atmosfera, minimum biurokracji i formalności