Von der Forschung zur Praxis

Eine der zentralen Innovationen war die Entwicklung eines sogenannten AI Proxies. Dieses Konzept fungiert als Vermittler zwischen Anwendungen und verschiedenen KI-Modellen, wodurch die Nutzung und Kombination unterschiedlicher KI-Technologien erleichtert wird. Der AI Proxy ermöglicht unter anderem:

• Flexible Modellwahl: Verschiedene KI-Modelle für Bild- und Texterkennung können kombiniert und ausgetauscht werden.
• Erweiterbarkeit: Neue Technologien lassen sich einfach in bestehende Systeme integrieren.
• Datenschutzkonforme Implementierung: Der AI Proxy kann lokal betrieben werden, um die Anforderungen der DSGVO zu erfüllen.

Ein wichtiger Bestandteil unserer Forschung war die Entwicklung einer KI-gestützten Alt-Text-Generierung für Bilder. Barrierefreie digitale Inhalte sind essenziell, um Informationen für alle Nutzer zugänglich zu machen, insbesondere für Menschen mit Sehbehinderungen. In diesem Zusammenhang haben wir Modelle zur automatischen Bildbeschreibung getestet und optimiert.

Unser Ansatz basiert auf modernen Open-Source-KI-Modellen, die Bildinhalte analysieren und präzise Beschreibungen generieren. Diese Technologie ermöglicht es, automatisiert Alt-Texte für Bilder zu erstellen, die dann von Screenreadern vorgelesen werden können. Dadurch wird die Barrierefreiheit von Webinhalten erheblich verbessert.

Obwohl das Projekt zahlreiche Erfolge erzielte, zeigten sich auch technologische Grenzen:

• Die Genauigkeit aktueller Speech2Text-Modelle liegt bei etwa 84,7 % – für eine vollständig automatisierte Nutzung ist dies nicht ausreichend.
• Die Verarbeitung rein visueller Inhalte (z. B. Stummfilme) bleibt eine Herausforderung.
• Bestehende KI-Modelle zur Aufmerksamkeitserkennung, die wir zur Steuerung von Videokonferenzen verwenden wollten, erwiesen sich als unzuverlässig.

Daher werden zukünftige Entwicklungen insbesondere die Verbesserung der Video-LLM-Technologien und die Optimierung des AI Proxies fokussieren.