Künstliche Intelligenz (KI) ist in der Lage, von Menschen geschriebene Texte zu bewerten und konstruktives Feedback zu geben. Insbesondere kleine und mittlere Unternehmen (KMU) können auf diese Weise ihre Ausbildungsprozesse effizienter und wirkungsvoller gestalten.
Dass KI fundiertes Feedback geben kann, zeigt ein Projekt des Mittelstand-Digital Zentrums Hannover in Zusammenarbeit mit der Decisio Projekt- und Prozessmanagement GmbH, die Projektmanagement-Lehrgänge anbietet. Die Hauptaufgabe in diesen Lehrgängen ist das Verfassen umfangreicher Projektberichte. Diese Berichte sind zentral für die Bewertung der Fachkompetenz der Teilnehmenden und entscheidend für den Erwerb des Zertifikats.
Die manuelle Bewertung dieser Berichte durch die Ausbilder*innen ist jedoch ein zeitaufwendiger Prozess, der wertvolle Ressourcen bindet. Um diese Probleme zu adressieren, hat das Mittelstand-Digital Zentrum Hannover eine innovative Lösung erforscht: den Einsatz von KI-Sprachmodellen, speziell des Large Language Models GPT-3.5-Turbo, zur Automatisierung der Berichtsbewertung. Dieser Ansatz ermöglicht es, die Bearbeitungszeit signifikant zu reduzieren und die Bewertungsqualität durch konsistente Anwendung von Projektmanagementstandards zu erhöhen.
KI-Sprachmodell generiert fundiertes Feedback
Der mehrphasige Ansatz zur Implementierung des Bewertungssystems begann mit einer automatisierten Textextraktion. Dabei wurden Textbausteine aus den eingereichten Dokumenten präzise herausgelöst. Diese erste Phase war entscheidend, um eine robuste Datenbasis für den weiteren Einsatz der KI-Technologie zu schaffen. Im nächsten Schritt wurden Prompts speziell so gestaltet und optimiert, dass sie das Large Language Model (LLM) dazu anleiteten, konsistentes, robustes und korrektes Feedback zu generieren. Die Anpassung dieser Prompts erfolgte durch iterative Tests, um die Effektivität der Bewertungen zu maximieren.
Ein zusätzlicher Schritt zur Verbesserung der Feedbackqualität war die Einführung der Retrieval-Augmented Generation (RAG)-Technologie. Diese innovative Methode bereicherte die Informationsverarbeitung des KI-Modells durch den Zugriff auf eine eigens erstellte Datenbank mit projektmanagementrelevanten Texten. Dadurch wurde das vom Modell generierte Feedback nicht nur kontextbezogener, sondern auch inhaltlich fundierter.
Vorteile und Zukunftsperspektiven
Die Implementierung dieses KI-basierten Systems hat den Bewertungsprozess nicht nur effizienter gestaltet, sondern auch einen neuen Rahmen für das Feedback geschaffen. Lehrkräfte können sich in Zukunft verstärkt auf pädagogische Aufgaben konzentrieren und werden durch das KI-generierte Feedback dazu angeregt, ihre eigenen Rückmeldungen und sogar Lehrmethoden kritisch zu überdenken. Diese Interaktion mit der KI kann dazu führen, dass Lehrkräfte ihre Kenntnisse vertiefen und ihre Lehransätze weiterentwickeln.
Die Erfahrungen und Ergebnisse, die mit dem Prototyp gesammelt wurden, bilden eine solide Grundlage für zukünftige Verbesserungen und könnten als Modell für die Integration ähnlicher Technologien in anderen Bildungsbereichen dienen. Dabei bleibt es essenziell, eine Balance zwischen technologischer Unterstützung und menschlicher Einsicht zu finden, um die Zuverlässigkeit und Genauigkeit der Bewertungen zu gewährleisten. Dieses Projekt demonstriert eindrucksvoll das Potenzial von KI-Sprachmodellen als wertvolle Unterstützung im Bildungsbereich, um den Anforderungen der modernen Arbeitswelt gerecht zu werden.
Unterstützung im Bereich KI gesucht?
Sie möchten mehr über den Einsatz von Künstlicher Intelligenz zur automatisierten Qualitätskontrolle erfahren? Dann kontaktieren Sie uns gern! Unser Experte Paolo Pappe steht Ihnen unter pappe@mitunsdigital.de oder 0511 279 76 446 zur Verfügung.
