AI Test Engineer

Twoje zadania:

• Tworzenie i wykonywanie testów dla aplikacji AI, automatyzowanie procesów testowych w języku Python.

• Automatyzacja testów z wykorzystaniem narzędzi takich jak pytest, Selenium oraz Playwright.

• Testowanie i ocena modeli AI, w tym znajomość metod Prompt Engineering i oceny jakości różnych modeli LLM (Large Language Models).

• Projektowanie i implementowanie testów wydajnościowych i funkcjonalnych dla algorytmów AI, w tym testowanie generacji danych i wyników.

• Optymalizacja procesów testowych w obszarze AI, integracja testów z pipeline’ami CI/CD.

• Dokumentowanie wyników testów, tworzenie raportów z wykonanych testów i zgłaszanie błędów w procesie QA.

• Współpraca z zespołami inżynierskimi oraz Data Science w celu wdrażania najlepszych praktyk testowych w procesie rozwoju aplikacji AI.

Czego oczekujemy:

• Minimum 4 lata doświadczenia w roli Test Engineera lub QA Engineer, w tym doświadczenie w testowaniu rozwiązań AI.

• Biegłość w Pythonie i znajomość narzędzi takich jak pytest, Selenium, Playwright.

• Doświadczenie w testowaniu i ocenie modeli AI, w tym Prompt Engineering oraz LLM Evaluation.

• Znajomość QA fundamentals – doświadczenie w pracy z procesami testowymi, testowaniem automatycznym i ręcznym.

• Praktyczna znajomość narzędzi CI/CD – integracja testów z pipeline'ami do automatyzacji procesów testowych.

• Umiejętności analityczne – umiejętność pracy z wynikami testów, wykrywania problemów i przedstawiania rekomendacji na podstawie danych.

• Dobre umiejętności komunikacyjne w języku angielskim, umożliwiające współpracę z zespołami międzynarodowymi.

Dodatkowe atuty:

• 🧑‍💻 Doświadczenie z narzędziami do testowania w chmurze – znajomość AWS lub Azure.

• 🌍 Znajomość narzędzi do testowania i oceny LLM – takich jak OpenAI GPT, BERT, T5, itp.

• 📈 Doświadczenie z testowaniem aplikacji opartych na NLP i rozwiązań AI w kontekście przetwarzania języka naturalnego.