Masterarbeit: Evaluation einer automatisierten Feedbackschleife zur Generierung von Structured Text

Die Fraunhofer-Gesellschaft (www.fraunhofer.de) betreibt in Deutschland derzeit 76 Institute und Forschungseinrichtungen und ist eine der führenden Organisationen für anwendungsorientierte Forschung. Rund 32 000 Mitarbeitende erarbeiten das jährliche Forschungsvolumen von 3,4 Milliarden Euro.

Das Fraunhofer-Institut für Kognitive Systeme IKS ist auf angewandte Forschung in zukunftsweisenden Bereichen wie Künstliche Intelligenz, kognitive Systeme und intelligente Softwarearchitekturen für autonome Systeme spezialisiert. Unser Schwerpunkt liegt auf sicherheitskritischen Anwendungen in den Bereichen Automatisierung, Mobilität und Gesundheit. Wir entwickeln zuverlässige Softwaretechnologien, die den Menschen zugutekommen. Beispielsweise führen wir umfassende Sicherheitsanalysen und Validierungen von Wahrnehmungsalgorithmen in der Automobilindustrie durch. Auf diese Weise legen wir das Fundament für eine vertrauenswürdige digitale Zukunft.

Was Du bei uns tust

Generative KI eröffnet neue Möglichkeiten für die automatische Erstellung von strukturiertem Text (ST) für SPSen. Obwohl LLMs bereits funktionalen ST-Code aus Anforderungen in natürlicher Sprache generieren können, ist die Qualität der Ergebnisse oft unzureichend. Eine automatisierte Feedbackschleife, die den Code analysiert, Fehler in geeignete Korrekturfeedbacks umwandelt und diese an das LLM zurückmeldet, verspricht hier deutliche Verbesserungen. Ziel dieser Masterarbeit ist es, die Funktionalität einer solchen automatisierten Feedbackschleife erstmals systematisch zu evaluieren.

Deine Aufgaben:

Systematische Literaturrecherche zu Feedbackmechanismen und Qualitätsmetriken für LLM-basierte Codegenerierung.
Identifizierung relevanter Metriken und Tests (statisch/dynamisch), die die Codequalität und funktionale Sicherheit von ST am besten widerspiegeln.
Ermittlung des optimalen Formats für die Übertragung der Metriken und Testergebnisse an das LLM.
Entwicklung eines Prototyp-Softwaremoduls, das aus den ausgewählten Metriken und Tests automatisch Feedback im definierten Format generiert.
Quantitative und qualitative Bewertung des Feedback-Prozesses durch Messung der durch das Feedback erzielten Code-Verbesserungen und Vergleich mit einer Baseline.

Was Du mitbringst

Derzeit Studium im Bereich Ingenieurwesen mit Schwerpunkt Informatik oder KI
Gute Kenntnisse in der Programmierung mit Python und in der Softwareentwicklung
Kenntnisse in LLMs und langchain sind von Vorteil
Analytisches und strukturiertes Denken
Gute Kenntnisse der englischen und deutschen Sprache (mindestens B2).

Was Du erwarten kannst

Mitarbeit in einem dynamischen Team mit innovativen Aufgabenbereichen und sehr netten Betreuern
Praxisorientierter Ansatz für Ihr Studium
Hervorragende Unterstützung bei Deiner Abschlussarbeit
Mitarbeit an praktischen Forschungsprojekten.

Wir wertschätzen und fördern die Vielfalt der Kompetenzen unserer Mitarbeitenden und begrüßen daher alle Bewerbungen – unabhängig von Alter, Geschlecht, Nationalität, ethnischer und sozialer Herkunft, Religion, Weltanschauung, Behinderung sowie sexueller Orientierung und Identität. Schwerbehinderte Menschen werden bei gleicher Eignung bevorzugt eingestellt.

Mit ihrer Fokussierung auf zukunftsrelevante Schlüsseltechnologien sowie auf die Verwertung der Ergebnisse in Wirtschaft und Industrie spielt die Fraunhofer-Gesellschaft eine zentrale Rolle im Innovationsprozess. Als Wegweiser und Impulsgeber für innovative Entwicklungen und wissenschaftliche Exzellenz wirkt sie mit an der Gestaltung unserer Gesellschaft und unserer Zukunft.

Haben wir Dein Interesse geweckt? Dann bewirb Dich jetzt online mit Deinen aussagekräftigen Bewerbungsunterlagen (Motivationsschreiben, Lebenslauf und aktuelle Noten). Wir freuen uns darauf, Dich kennenzulernen!

Technische Fragen beantwortet Euch gerne:

René Beck per eMail: rene.beck@iks.fraunhofer.de

Zustätzliche Fragen beantworten Euch gerne die Kolleg*innen aus der HR-Abteilung per eMail: recruiting@iks.fraunhofer.de

Fraunhofer-Institut für Kognitive Systeme IKS

www.iks.fraunhofer.de

Kennziffer: 80650 Bewerbungsfrist:

Jetzt bewerben »