testKI-Engineer*in (all genders) - LLM-Infrastruktur und KI-Plattform

Fraunhofer-Gesellschaft
Erlangen, Germany
9 days ago
Apply on jobs.fraunhofer.de
Prepare application

Role details

Contract type
Temporary contract
Employment type
Part-time / full-time
Experience level
Starter
Working hours
Regular working hours
Languages
English, German

Tech stack

Application Programming Interfaces (APIs) Artificial Intelligence Amazon Web Services User Authentication Microsoft Azure Cloud Computing Cyber Security Computer Programming Continuous Integration Software Debugging Internet Information Services (IIS) Python (Programming Language)
+10 more
Management of Software Versions AI Infrastructure Data Logging Cloud Platform System Large Language Models Prompt Engineering Kubernetes Information Technology Machine Learning Operations Docker

Job description

Die Abteilung IT-Services stellt eine leistungsfähige und sichere IT-Infrastruktur fßr die Forschungs- und Verwaltungsbereiche des Instituts bereit. Im Zuge der zunehmenden Nutzung Kßnstlicher Intelligenz bauen sie ihre zentralen KI-Services kontinuierlich aus und schaffen die technischen Voraussetzungen fßr einen sicheren und effizienten Einsatz moderner KI-Technologien am Fraunhofer IIS.

  • KI-Infrastruktur betreiben und weiterentwickeln: Sie betreiben das IIS-zentrale LLM-Gateway, provisionieren LLM-Endpunkte in Cloud-Umgebungen wie AWS Bedrock und Azure sowie lokal und stellen den zuverlässigen Betrieb lokaler RAG-Systeme sicher.
  • KI-Services sicher bereitstellen: Sie wählen geeignete LLM-Endpunkte aus und ordnen diese in Abstimmung mit dem Informationssicherheitsbeauftragten (ISB) der jeweils freigegebenen Informationsklassifizierung zu. Dabei setzen Sie geeignete Verfahren fĂźr Zugriffskontrolle und Authentifizierung, insbesondere SSO, um und berĂźcksichtigen Anforderungen aus Datenschutz und Informationssicherheit.
  • Betrieb Ăźberwachen und Ressourcen steuern: Sie etablieren Monitoring und Observability fĂźr die bereitgestellten KI-Services, verantworten Logging, VerfĂźgbarkeit und Incident-Handling und behalten die Kosten sowie die Token-Nutzung im Blick.
  • Qualität und Sicherheit gewährleisten: Sie evaluieren und benchmarken LLMs, fĂźhren systematische Tests durch und stellen die Qualität der eingesetzten RAG-Systeme sicher. Dabei entwickeln Sie geeignete Schutzmaßnahmen gegen Prompt-Injection und weitere LLM-spezifische Risiken.
  • KI-Technologien kontinuierlich weiterentwickeln: Sie etablieren LLMOps-Prozesse fĂźr automatisierte Deployments, CI/CD sowie die Versionierung von Prompts und Konfigurationen. DarĂźber hinaus entwickeln Sie Best Practices, beispielsweise fĂźr Prompt Engineering, und stellen Coding-Agent-Tools und deren Konfigurationen bereit.
  • Innovative KI-LĂśsungen erschließen: Sie arbeiten bei Bedarf mit Fine-Tuning, Embeddings und Vektordatenbanken und beobachten aktuelle Entwicklungen im Bereich der LLM-Technologien, um deren Potenziale fĂźr das Fraunhofer IIS zu bewerten.
  • Forschung mit KI unterstĂźtzen: Sie behalten die KI-Use-Cases am Fraunhofer IIS im Blick und beraten Forschungsgruppen bei der Bewertung ihrer Use-Cases, der technischen Machbarkeit und der Auswahl geeigneter LĂśsungen.
  • Wissen und Kompetenzen aufbauen: Sie unterstĂźtzen den institutsweiten Wissenstransfer durch Workshops, Onboarding und Dokumentation und fĂśrdern damit die sichere und effiziente Nutzung von KI-Technologien.
  • KI strategisch weiterdenken: Sie beobachten den Markt sowie die Entwicklung neuer Modelle und Technologien und unterstĂźtzen bei Lizenz- und Vertragsthemen. Perspektivisch wirken Sie am Aufbau einer institutsweiten KI-Agentenplattform mit und Ăźbernehmen deren technischen Betrieb.

Requirements

  • Ein abgeschlossenes Studium der Informatik oder einer vergleichbaren Fachrichtung.
  • Praktische Erfahrung im Umgang mit Large Language Models (LLMs) und modernen KI-Technologien.
  • Sehr gute Programmierkenntnisse, idealerweise in Python, sowie Erfahrung in der Nutzung und Anbindung von APIs und im technischen Debugging.
  • Erfahrung mit Docker und Kubernetes sowie mit Cloud-Plattformen wie AWS und/oder Azure.
  • Kenntnisse in RAG-Architekturen und im Umgang mit Vektordatenbanken, beispielsweise FAISS, Qdrant oder Weaviate, sind von Vorteil.
  • Erfahrung mit API- und Gateway-Technologien, beispielsweise REST, LiteLLM oder Kong, ist wĂźnschenswert.
  • Ein ausgeprägtes Bewusstsein fĂźr Informationssicherheit und Datenschutz sowie die Bereitschaft, diese Anforderungen bei der Entwicklung und dem Betrieb von KI-LĂśsungen konsequent zu berĂźcksichtigen.
  • Ausgeprägte Kommunikations- und Beratungskompetenz sowie Freude an der Zusammenarbeit mit Forschungsgruppen und dem Informationssicherheitsbeauftragten (ISB).
  • Eine selbstständige, strukturierte und lĂśsungsorientierte Arbeitsweise, Eigeninitiative und die Bereitschaft, Verantwortung fĂźr neue Themenfelder zu Ăźbernehmen.
  • Offenheit fĂźr neue Technologien und die Fähigkeit, sich flexibel auf die dynamische Entwicklung im Bereich KĂźnstliche Intelligenz und Large Language Models einzustellen.
  • Sehr gute Deutsch- und Englischkenntnisse in Wort und Schrift.

Die Position ist auch fßr Berufsanfänger*innen mit entsprechenden Vorkenntnissen und Erfahrungen aus Praktika, Studien- oder Abschlussarbeiten geeignet.

Benefits & conditions

  • Spannende Tätigkeit: attraktives Arbeitsumfeld bei einem WeltmarktfĂźhrer in einer hochinnovativen SchlĂźsselbranche.
  • Praxisbezogene Projekte bieten unseren Mitarbeitenden Gestaltungsfreiraum: Sie motivieren dazu, Innovationen aktiv voranzutreiben und eigene Ideen einzubringen.
  • Engagierte Teams fĂśrdern Kreativität und Eigenverantwortung: Hier haben Sie die Freiheit, Ihre Ideen zu entwickeln und aktiv mitzugestalten.
  • PersĂśnlicher Kontakt ist uns wichtig: Durch strukturiertes Onboarding erweitern Sie Ihr Netzwerk und kommen gut an unserem Institut an.
  • Ihre BedĂźrfnisse nehmen wir ernst: Die bestmĂśgliche Vereinbarkeit Ihres Berufs- und Privatlebens unterstĂźtzen wir durch zeitliche Flexibilität und hybrides Arbeiten.+
  • Wir schaffen Raum fĂźr Begegnung: Sportliche Angebote vor Ort und remote, Events sowie Gemeinschaftsräume bringen unsere Mitarbeitenden zusammen.
  • Unsere Mitarbeitenden genießen unsere wertschätzende Kultur: Wir sind offen, hilfsbereit und pflegen einen vertrauensvollen Umgang miteinander.
  • Top Ausstattung am Arbeitsplatz: Mit unseren State-of-the-Art Technologien entwickeln wir LĂśsungen fĂźr Herausforderungen der Gegenwart und Zukunft.
  • Ihre Ziele und Interessen liegen uns am Herzen: Wir unterstĂźtzen Sie regelmäßig durch fachliche und persĂśnliche Seminare, Coachings sowie Sprachkurse.
  • Die wĂśchentliche Arbeitszeit beträgt 39 Stunden. Die Stelle kann auch in Teilzeit besetzt werden, jedoch mĂśglichst vollzeitnah. Die Stelle ist zunächst auf zwei Jahre befristet. Eine Verlängerung ist mĂśglich. Anstellung, VergĂźtung und Sozialleistungen basieren auf dem Tarifvertrag fĂźr den Ăśffentlichen Dienst (TVĂśD). Zusätzlich kann Fraunhofer leistungs- und erfolgsabhängige variable VergĂźtungsbestandteile gewähren.

About the company

Die Fraunhofer-Gesellschaft (www.fraunhofer.de) ist eine der weltweit fßhrenden Organisationen fßr anwendungsorientierte Forschung. 74 Institute entwickeln wegweisende Technologien fßr unsere Wirtschaft und Gesellschaft - genauer: 30 000 Menschen aus Technik, Wissenschaft, Verwaltung und IT. Sie wissen: Wer zu Fraunhofer kommt, will und kann etwas verändern. Fßr sich, fßr uns und die Märkte von heute und morgen.

Willkommen am Fraunhofer-Institut für Integrierte Schaltungen IIS! Als größtes Institut der Fraunhofer-Gesellschaft forschen wir seit mehr als 30 Jahren in vielfältigen Themen rund um Künstliche Intelligenz, Mikroelektronik, Sensorik und Datenerfassung sowie Signalverarbeitung und -übertragung. Talente aus unterschiedlichen Ingenieur- und Naturwissenschaften finden bei uns zahlreiche Forschungsfelder unter einem Dach. Einige Aushängeschilder, die unsere Innovationskraft widerspiegeln: Neuromorphes Computing, 5G/6G-Mobilfunktechnologien, Generative KI in der Sprach- und Signalverarbeitung sowie Röntgenbildgebung in der Elektromobilität. Und wir machen noch so viel mehr! Welche zukunftsfähigen Lösungen finden Sie mit uns?

Apply for this position

This job is hosted externally. Click below to view the full posting and apply.

Apply on jobs.fraunhofer.de
Prepare application

Good distractions

Talks and stories from around this role — technically off-topic, practically not.

2:47 min

Exploring career opportunities and recruitment open positions

Kurt Eder ¡ LIVE

2:07 min

Inspecting default bridge architectures and custom Docker networks

Oliver Seitz Oliver Seitz ¡ World Congress 2025

2:28 min

Understanding Kubernetes architecture and core cluster components

Marc Nimmerrichter ¡ World Congress 2022

1:10 min

Exposing sensitive information through partial search logs

Dennis Schulz Dennis Schulz +1 ¡ World Congress 2026 Europe

2:14 min

Exploring internal AI product initiatives and global engineering roles

Maria Apazoglou ¡ Coffee With Developers

2:34 min

Docker sandbox architecture and microVM environment integration

Manuel de la Peùa Manuel de la Peùa ¡ World Congress 2026 Europe

Videos

See all

Related articles

See all