AI Test Engineer (F/M/*)
Amber Ggmbh
Köln, Germany
19 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
GermanJob location
Köln, Germany
Tech stack
Testing (Software)
API
Artificial Intelligence
Automation of Tests
Test Case Design
Test Data
Strategies of Testing
Web Applications
Large Language Models
Information Technology
Job description
- Du entwickelst, planst und optimierst Teststrategien für unsere KI-Anwendungen und sorgst dafür, dass Qualität von Anfang an mitgedacht wird
- Du führst manuelle und automatisierte Tests für AI-Features, APIs und Workflows durch und baust diese kontinuierlich aus
- Du validierst Antworten, Prompts, Modellverhalten und Agentenlogiken hinsichtlich Qualität, Konsistenz und Robustheit und stellst sicher, dass unsere KI zuverlässig performt
- Du identifizierst, dokumentierst und verfolgst Fehler, Edge Cases und Qualitätsrisiken damit nichts durch die Maschen fällt.
- Du erstellst Testfälle, Testdaten und Evaluationskriterien für unterschiedliche Anwendungsszenarien und schaffst damit die Grundlage für belastbare Qualitätsaussagen
- Du arbeitest eng mit Produktmanagement, Engineering und unseren Data/AI-Teams zusammen, um die Qualitätssicherung entlang des gesamten Entwicklungsprozesses sicherzustellen
- Du unterstützt aktiv beim Aufbau unserer QA-Prozesse, treibst Testautomatisierung voran und etablierst zuverlässige Release-Checks
- Du analysierst das Systemverhalten hinsichtlich Performance, Zuverlässigkeit und Nutzerqualität und leitest daraus konkrete Verbesserungen für unsere Plattform ab
Requirements
- Du hast ein abgeschlossenes Studium in Informatik, Wirtschaftsinformatik, Mathematik oder einem vergleichbaren Bereich
- Du bringst Erfahrung im Software Testing / QA mit und hast bereits Webanwendungen, APIs oder datengetriebene Systeme getestet
- Du interessierst dich für KI-Systeme, LLMs, Prompting oder AI-Workflows. Idealerweise hast du hier bereits erste praktische Erfahrung gesammelt
- Du beherrschst gängige Testmethoden sicher, vom Testfall-Design bis zur systematischen Fehleranalyse
- Du hast idealerweise Erfahrung mit Testautomatisierung und kennst dich mit gängigen Tools aus dem QA-Umfeld aus
- Du verfügst über ein solides technisches Verständnis für Schnittstellen, Datenflüsse und systematische Ursachenanalyse
- Du arbeitest strukturiert, präzise sowie analytisch und verlierst auch bei komplexen Sachverhalten nicht den Überblick
- Du kommunizierst klar und überzeugend und hast einen hohen Anspruch an die Qualität deiner Arbeit
About the company
* Team Offsites - Da du in einem internationalen Team arbeiten wirst, treffen wir uns Zweimal im Jahr alle zusammen irgendwo in Europa
* Du hast die Wahl: Entweder ein bezuschusstes Deutschlandticket oder eine Urban Sports Club Mitgliedschaft gehen auf uns
* Wir leben ein Hybrides Arbeitsmodell: Wir sind der Meinung, dass es wichtig ist regelmäßig in Person zusammenzuarbeiten. Darum treffen wir uns 3 mal wöchentlich an einem unserer Standorte
* Damit Du vor Ort auch gut versorgt bist, gibt es bei uns jeden Arbeitstag vor Ort digitale, steuerfreie Essensgutscheine direkt aufs Handy
* Attraktive Vergütung. Zusätzlich belohnen wir herausragende Mitarbeitende mit Unternehmensanteilen und lassen Sie so direkt am Unternehmenserfolg teilhaben
* Starte in einem Unternehmen, das Dich wachsen lässt - egal, ob Du deine Skills in Deinem Bereich ausbauen oder andere Fähigkeiten erlernen möchtest
* Wir fördern Deine persönliche Entwicklung durch Weiterbildung und Raum für Eigenverantwortung
* Ein Team von motivierten Leuten, die Bock haben, KI-Lösungen auch für mittelständische Unternehmen zugänglich zu machen
* Arbeite mit den neusten Technologien & Tools
Klingt spannend? Dann hilf uns jetzt und schick uns einfach kurz deinen CV. Wir freuen uns auf dich!
Bitte beachte: Für diese Position berücksichtigen wir ausschließlich Bewerber:innen mit Wohnsitz in Deutschland.