Softwaretester für KI-basierte Systeme

AVABIS GmbH
Dortmund, Germany
21 days ago
Apply on jobs.meinestadt.de
Prepare application

Role details

Contract type
Permanent contract
Employment type
Full-time (> 32 hours)
Working hours
Regular working hours
Languages
English, German

Tech stack

Artificial Intelligence Automation of Tests Continuous Integration Regression Testing Strategies of Testing Large Language Models Machine Learning Operations

Job description

Personal Management Test Automation Testdurchführung Transport Englisch E-Commerce Automated Testing Automation Testing Zertifizierung Logistik Continuous Integration Automatisierung Deutsch Flexibilität Zuverlässigkeit Lernbereitschaft, Als Softwaretester (m/w/d) mit Schwerpunkt auf dem Testen von KI-basierten Systemen übernimmst Du herausfordernde Aufgaben wie:

  • Qualitätssicherung für generative KI-Systeme - von Agentenarchitekturen bis zu LLM-basierten Workflows
  • Entwicklung von Teststrategien für nicht-deterministische Systeme - Bias, Halluzinationen, Robustheit, Erklärbarkeit
  • Durchführung von Adversarial Testing - Jailbreaking, Prompt Injection, Sicherheits- und Datenschutztests
  • Automatisierung von KI-gestützten Tests mit modernen Tools für Modellüberwachung, Regressionstests und Drift-Erkennung
  • Zusammenarbeit mit Data Scientists, Entwicklern und Produktteams, um Testbarkeit von KI-Systemen sicherzustellen
  • Evaluierung neuer KI-Testing-Tools und Best Practices -Deine Expertise prägt den Testprozes

Requirements

Techniker (einschl. staatl. gepr. Landwirte, Gestalter u.ä), Persönlichkeit & Mindset

  • Innovationsgeist - Du hast Spaß daran, neue Testmethoden für KI zu entwickeln
  • Analytische Schärfe - Du erkennst Muster, Schwächen und neue Risikoszenarien in KI-Modellen
  • Neugier & Lernbereitschaft - KI-Testing entwickelt sich schnell, Du bleibst up to date Methodische Skills

  • Exploratives & heuristisches Testen - klassische Testkonzepte reichen nicht, Du denkst weiter
  • KI-Sicherheitsanalyse - Du kennst gängige Angriffsmuster auf LLMs und entwickelst Abwehrtests
  • Erfahrung mit KI-Metriken - Du kannst KI-Leistung bewerten: Fairness, Erklärbarkeit, Robustheit Technisches Know-how & Tools

  • Praxis mit Testautomatisierung & CI/CD für KI-Modelle
  • Erfahrung mit Frameworks für LLM-Testing (z. B. DeepChecks, AI Fairness 360, LangTest)
  • Optional: Kenntnisse in MLOps & Modell-Monitoring (z. B. Weights & Biases, MLflow) Sehr gute Deutsch- und Englischkenntnisse

Benefits & conditions

Ein dynamisches Team, mit viel Freiraum für die Umsetzung eigener Karrierepläne und Entwicklungsrichtungen in einer attraktiven Branche wartet auf Dich.

(Fokus: Testen von KI-Systemen, z. B. LLMs, ML-Modelle, Agentensysteme)

Du suchst neue Herausforderungen und eine langfristige Zusammenarbeit?

Du möchtest Dich fachlich und individuell weiterentwickeln und Deine Tatkraft in ein gutes Team einbringen?

Wenn ja, dann bist Du bei uns richtig!, Ein interessantes Arbeitsumfeld mit einer modernen Unternehmenskultur und mit sehr flachen Hierarchien.

Sowie

  • Zuverlässigkeit und Loyalität mit gegenseitigem Vertrauen
  • Ein Überstundenkonto und einen 1:1 Freizeitausgleich
  • Flexible Heimarbeit (je nach Rolle und Projekt)
  • Sehr gute Weiterbildungsmaßnahmen
  • Eine betriebliche Altersvorsorge
  • Private Bahncard-Nutzung, Firmenwagen oder -fahrrad (je nach Tätigkeit)
  • Regelmäßige Gruppen - und Firmenevents
  • Und nicht zuletzt: Gutes Geld für gute Arbeit Bei der AVABIS erwartet Dich zudem der Zugang zu einem spannenden Wachstumsmarkt.

About the company

Die AVABIS GmbH ist ein mittelständisches Beratungsunternehmen. Unsere Schwerpunkte liegen in den Bereichen Softwareentwicklung und Softwaretesten. Wir sind vor allem für Marktführer in den Branchen Automotive, E-Commerce, Gesundheit, Telekommunikation und Transport & Logistik tätig.

Mit dem Hauptsitz in Dortmund, unserer Geschäftsstelle in Berlin und unseren bundesweiten Projektstandorten sind wir immer in Deiner Nähe.

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on jobs.meinestadt.de
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:56 min

Test automation strategy and following the testing pyramid

Daniel Strmečki +1 · World Congress 2022

3:32 min

Building evaluation frameworks for automated regression testing

Andreas Erben Andreas Erben · World Congress 2025

1:53 min

Actionable steps to improve team testing strategies immediately

Luise Freese Luise Freese · World Congress 2025

3:21 min

Automating complete quality assurance pipelines with artificial intelligence

Evelyn Haslinger · LIVE

3:08 min

Implementing local visual regression testing

Emma Britnor Emma Britnor · World Congress 2024

1:48 min

The future landscape of artificial intelligence in software testing

Alisa Hrustic Alisa Hrustic · Europe 2026 Virtual

Videos

See all

Related articles

See all