ABILITY - Verbesserung der Zugänglichkeit von digitalen Bildern für blinde Nutzerinnen und Nutzer

Mithilfe moderner KI-Modelle, insbesondere im Bereich Computer Vision, Large Language Models (LLMs) und Visual Assistant LLMs, wird die vielseitige Analyse digitaler Bilder möglich. Doch zur Vereinfachung der Bildanalyse für blinde und sehbehinderte Nutzerinnen und Nutzer werden die Modelle in der Regel mit Daten von sehenden Personen trainiert. Daher bieten sie möglicherweise nicht alle Nuancen und Details, die für blinde Menschen erforderlich sind, um ein angemessenes "Bildmodell" im Kopf zu erstellen. Um die besten Methoden und Modelle zur Anpassung an blinde und sehbehinderte Nutzerinnen und Nutzer zu entwickeln, werden umfangreiche Nutzerstudien durchgeführt. Dazu werden taktile und andere relevante Daten gesammelt, um maßgeschneiderte Unterstützung anzubieten. Dafür ist die Zusammenarbeit mit blinden und sehbehinderten Nutzerinnen und Nutzern als Co-Designerinnen und Co-Designer und Endnutzerinnen und Endnutzer unerlässlich. In der ersten Nutzerstudie liegt das Hauptaugenmerk auf Anforderungen und Erkenntnissen, um die aktuellen KI-Modelle besser anpassen zu können. In den folgenden Studien werden spezifische Anwendungen getestet und mit der Hilfe blinder und sehbehinderter Nutzerinnen und Nutzer ausgewertet.

Von den Partnern wird ein spezielles Tablet für taktiles Feedback und ein Pin-Display entwickelt, mit dem verschiedene KI-Ausgaben visualisiert werden können. Beispielsweise können vereinfachte Umrisse ausgewählter Objekte für blinde Nutzerinnen und Nutzer dargestellt oder gezoomte Objekte angezeigt werden.