QA Engineer (ML & Agentic AI)

ComarchKraków
ActiveVerified 5h ago

Job description

Chcesz wyjść poza klasyczną automatyzację testów webowych i wejść w najbardziej dynamiczny obszar technologii? W Comarch szukamy QA Engineera, który pomoże nam weryfikować i zapewniać jakość zaawansowanych systemów opartych o Agentic AI oraz modele ML.

Będziesz odpowiadać za budowanie rozwiązań testowych dla autonomicznych agentów AI, walidację ich zachowań, spójności odpowiedzi oraz integrację testów z procesami CI/CD.

Profil pracownika

  • Min. 2-3 lata doświadczenia w automatyzacji testów oprogramowania (Java lub Python)
  • Dobra znajomość testowania API (np. REST Assured, Postman, PyTest) oraz narzędzi CI/CD (Git, Jenkins, GitLab CI)
  • Zrozumienie wyzwań związanych z GenAI / LLM (RAG, prompt evaluation, halucynacje) lub silna motywacja do szybkiego wejścia w ten obszar
  • Dobra znajomość języka angielskiego (min. B2)

Mile widziane:

  • Znajomość Pythona (jeśli Twoim głównym językiem jest Java) lub Javy (jeśli piszesz w Pythonie)
  • Doświadczenie z dedykowanymi narzędziami do ewaluacji LLM (np. Promptfoo, Deepeval, LangSmith)

Twoje zadania

  • Testowanie Agentic AI: Weryfikacja autonomicznych agentów (planowanie zadań, wywoływanie narzędzi, odporność na halucynacje, jakość RAG)
  • Automatyzacja: Projektowanie i rozwój frameworków testowych (głównie Java / REST Assured lub Python)
  • Wydajność i Jakość: Testowanie API, analiza jakości danych wejściowych/wyjściowych oraz weryfikacja modeli AI na środowisku produkcyjnym
  • Cooperation: Ścisła współpraca z zespołem Machine Learning przy wdrażaniu testów do pipeline'u CI/CD

Dla ciebie

  • Prywatna opieka medyczna w Allianz - dostęp do specjalistów i badań diagnostycznych dla Ciebie i Twoich najbliższych
  • System kafeteryjny - możesz wybrać pełne dofinansowanie do karty Multisport czy przeznaczyć środki na kulturę, wypoczynek lub sport i zakupy
  • Możliwość pracy w modelu hybrydowym po okresie wdrożenia (2 dni pracy zdalnej, 3 dni pracy z biura)
  • Możliwość korzystania z zaawansowanych narzędzi AI i Google Workspace
  • Profesjonalny rozwój zawodowy - możliwość ścieżki kariery na stanowiskach eksperckich technicznych, biznesowych i managerskich
  • Indywidualny plan szkoleń i konferencji
  • Przyjazna atmosfera pracy w zgranych zespołach, o co dbamy m.in. poprzez udział w imprezach integracyjnych czy wspólnych inicjatywach dla lokalnych społeczności
  • Możliwość udziału w akcjach i wydarzeniach promujących aktywny tryb życia