Senior QA Engineer

Senior QA Engineer – GenAI

Opis stanowiska:

Poszukujemy Senior QA Engineera z co najmniej 5-letnim doświadczeniem, który dołączy do naszego zespołu i będzie odpowiedzialny za zapewnienie najwyższej jakości oprogramowania w projektach z obszaru GenAI. Szukamy osoby, która ma doświadczenie w testowaniu systemów opartych na LLM (Large Language Models), chatbotach, agentach AI oraz RAG (Retrieval-Augmented Generation).

Idealny kandydat powinien posiadać silne umiejętności w zakresie automatyzacji testów przy użyciu Javy, Pythona lub C#, a także rozumieć specyfikę testowania systemów AI, w tym ich spójności, wydajności i niezawodności.

Zakres obowiązków:

• Projektowanie, rozwijanie i utrzymywanie testów automatycznych dla rozwiązań opartych na GenAI.
• Testowanie modeli LLM, chatbotów i agentów AI, ocena ich poprawności, wydajności i zgodności z wymaganiami biznesowymi.
• Weryfikacja systemów RAG pod kątem skuteczności mechanizmów wyszukiwania i generowania treści.
• Tworzenie strategii testowych i planów testowych dla projektów AI, uwzględniających specyficzne wyzwania związane z modelami uczenia maszynowego.
• Analiza wyników testów, raportowanie błędów i współpraca z zespołem deweloperskim w celu zapewnienia wysokiej jakości produktów.
• Monitorowanie i poprawa jakości danych testowych wykorzystywanych do walidacji modeli AI.
• Praca w metodykach Agile i DevOps, udział w code review i Continuous Testing.
• Tworzenie narzędzi i frameworków testowych wspierających testowanie systemów AI.

Wymagania:

• Minimum 5 lat doświadczenia w testowaniu oprogramowania, w tym automatyzacji testów.
• Znajomość języków programowania: Java, Python lub C#.
• Doświadczenie w testowaniu systemów AI, w szczególności LLM, chatbotów, agentów AI i RAG.
• Znajomość narzędzi do testowania API (np. Postman, RestAssured).
• Doświadczenie w pracy z frameworkami do testów automatycznych (np. Selenium, Cypress, PyTest, JUnit, NUnit).
• Znajomość CI/CD i narzędzi takich jak Jenkins, GitHub Actions czy Azure DevOps.
• Umiejętność testowania aplikacji w chmurze (AWS, Azure lub GCP).
• Doskonałe umiejętności analityczne i dbałość o szczegóły.
• Biegła znajomość języka angielskiego (C1/C2) – wymagana do pracy w międzynarodowym zespole.

Mile widziane:

• Doświadczenie w testowaniu modeli uczenia maszynowego i ich integracji z systemami produkcyjnymi.
• Znajomość narzędzi do analizy danych i testowania jakości modeli AI (np. TensorFlow Model Analysis).
• Doświadczenie z syntetycznymi danymi testowymi i ich generowaniem dla modeli AI.
• Certyfikaty ISTQB lub związane z AI/ML.

Jeżeli masz pasję do GenAI, chcesz pracować nad zaawansowanymi rozwiązaniami AI i masz solidne doświadczenie w testowaniu – zapraszamy do aplikowania! 🚀