Masterarbeit: Evaluation einer automatisierten Feedbackschleife zur Generierung von Structured Text

Das Fraunhofer-Institut für Kognitive Systeme IKS ist auf angewandte Forschung in zukunftsweisenden Bereichen wie Künstliche Intelligenz, kognitive Systeme und intelligente Softwarearchitekturen für autonome Systeme spezialisiert. Unser Schwerpunkt liegt auf sicherheitskritischen Anwendungen in den Bereichen Automatisierung, Mobilität und Gesundheit. Wir entwickeln zuverlässige Softwaretechnologien, die den Menschen zugutekommen. Beispielsweise führen wir umfassende Sicherheitsanalysen und Validierungen von Wahrnehmungsalgorithmen in der Automobilindustrie durch. Auf diese Weise legen wir das Fundament für eine vertrauenswürdige digitale Zukunft.

Was Du bei uns tust

Generative KI eröffnet neue Möglichkeiten für die automatische Erstellung von strukturiertem Text (ST) für SPSen. Obwohl LLMs bereits funktionalen ST-Code aus Anforderungen in natürlicher Sprache generieren können, ist die Qualität der Ergebnisse oft unzureichend. Eine automatisierte Feedbackschleife, die den Code analysiert, Fehler in geeignete Korrekturfeedbacks umwandelt und diese an das LLM zurückmeldet, verspricht hier deutliche Verbesserungen. Ziel dieser Masterarbeit ist es, die Funktionalität einer solchen automatisierten Feedbackschleife erstmals systematisch zu evaluieren.

Deine Aufgaben:

• Systematische Literaturrecherche zu Feedbackmechanismen und Qualitätsmetriken für LLM-basierte Codegenerierung.
• Identifizierung relevanter Metriken und Tests (statisch/dynamisch), die die Codequalität und funktionale Sicherheit von ST am besten widerspiegeln.
• Ermittlung des optimalen Formats für die Übertragung der Metriken und Testergebnisse an das LLM.
• Entwicklung eines Prototyp-Softwaremoduls, das aus den ausgewählten Metriken und Tests automatisch Feedback im definierten Format generiert.
• Quantitative und qualitative Bewertung des Feedback-Prozesses durch Messung der durch das Feedback erzielten Code-Verbesserungen und Vergleich mit einer Baseline.

Was Du mitbringst

• Derzeit Studium im Bereich Ingenieurwesen mit Schwerpunkt Informatik oder KI
• Gute Kenntnisse in der Programmierung mit Python und in der Softwareentwicklung
• Kenntnisse in LLMs und langchain sind von Vorteil
• Analytisches und strukturiertes Denken
• Gute Kenntnisse der englischen und deutschen Sprache (mindestens B2).

Was Du erwarten kannst

• Mitarbeit in einem dynamischen Team mit innovativen Aufgabenbereichen und sehr netten Betreuern
• Praxisorientierter Ansatz für Ihr Studium
• Hervorragende Unterstützung bei Deiner Abschlussarbeit
• Mitarbeit an praktischen Forschungsprojekten.

Wir wertschätzen und fördern die Vielfalt der Kompetenzen unserer Mitarbeitenden und begrüßen daher alle Bewerbungen – unabhängig von Alter, Geschlecht, Nationalität, ethnischer und sozialer Herkunft, Religion, Weltanschauung, Behinderung sowie sexueller Orientierung und Identität. Schwerbehinderte Menschen werden bei gleicher Eignung bevorzugt eingestellt.

Mit ihrer Fokussierung auf zukunftsrelevante Schlüsseltechnologien sowie auf die Verwertung der Ergebnisse in Wirtschaft und Industrie spielt die Fraunhofer-Gesellschaft eine zentrale Rolle im Innovationsprozess. Als Wegweiser und Impulsgeber für innovative Entwicklungen und wissenschaftliche Exzellenz wirkt sie mit an der Gestaltung unserer Gesellschaft und unserer Zukunft. 

Haben wir Dein Interesse geweckt? Dann bewirb Dich jetzt online mit Deinen aussagekräftigen Bewerbungsunterlagen (Motivationsschreiben, Lebenslauf und aktuelle Noten). Wir freuen uns darauf, Dich kennenzulernen! 

Technische Fragen beantwortet Euch gerne:

René Beck per eMail: rene.beck@iks.fraunhofer.de

Zustätzliche Fragen beantworten Euch gerne die Kolleg*innen aus der HR-Abteilung per eMail: recruiting@iks.fraunhofer.de

Fraunhofer-Institut für Kognitive Systeme IKS 

www.iks.fraunhofer.de 

Kennziffer: 80650                Bewerbungsfrist: