Ein Bildschirm, den du mit den Fingern fühlen kannst + test

Inhalt

• Eine Welt hinter Glas
• Sie begannen bei den Menschen, nicht bei der Technik
• Ein Tablet, das über die Fingerspitzen spricht
• Grafiken und PDFs zum Anfassen
• Künstliche Intelligenz als Dolmetscherin
• Nicht nur für Blinde
• Was Studierende davon haben
• Zusammenfassung
• Fünf Fragen: Wie zugänglich ist deine digitale Welt? (Test)

⇑Eine Welt hinter Glas

Ein Touchscreen wirkt wie das Einfachste der Welt: wischen, tippen, fertig. Doch diese ganze Einfachheit beruht auf Sehen und Hören. Für blinde und sehschwache Menschen ist eine glatte Fläche ohne eine einzige physische Taste oft eine Barriere statt einer Erleichterung. Das Problem betrifft sogar einfachen Text, der für diese Gruppe nach wie vor schwer zugänglich ist.

Sabrina Panëels, Forscherin für interaktive Systeme beim französischen CEA-List, sagt es deutlich: „Angesichts unserer zunehmenden Abhängigkeit von Technologien, der Entmaterialisierung und der Verwendung von tastenlosen Berührungsbildschirmen läuft ein erheblicher Teil der Bevölkerung Gefahr, vom Zugang zu Inhalten ausgeschlossen zu werden und aufgrund seiner Behinderung noch stärker stigmatisiert zu werden“.

⇑Sie begannen bei den Menschen, nicht bei der Technik

Panëels leitet das Konsortium des EU-finanzierten Projekts ABILITY. Das Projekt lief von September 2022 bis Februar 2026 und kostete rund 3,74 Mio. Euro. Sein Ziel fasst die Forscherin so zusammen: „Unser Ziel ist, mithilfe der Entwicklung neuer Technologien und Software sowie durch die Nutzung haptischer Lösungen digitale Inhalte und Geräte für alle greifbarer werden zu lassen“.

Interessant ist, womit das Team angefangen hat. Statt sich im Labor einzuschließen, arbeiteten die Forschenden mit 285 sehenden und sehbehinderten Nutzerinnen und Nutzern zusammen, um deren tatsächliche Bedürfnisse kennenzulernen.

⇑Ein Tablet, das über die Fingerspitzen spricht

Das Ergebnis ist der Prototyp eines multisensorischen Tablets. Er hat eine Bildschirmdiagonale von 10,5 Zoll, läuft unter Windows und nutzt einen Standard-OLED-Bildschirm, der um zusätzliche haptische Funktionen erweitert wurde. Das Herzstück der Lösung sind Vibrationen. „Bei dem Prototyp kommen lokalisierte und Multitouch-Schwingungen zum Einsatz, die je nach dem zugrunde liegenden Inhalt Texturen wiedergeben können – sowohl bei stillstehenden als auch bei sich bewegenden Fingern“, erklärt Panëels.

Am einfallsreichsten ist jedoch, dass jeder Finger etwas anderes spüren kann. „Er lässt sich auch unabhängig von verschiedenen Fingern ertasten, was bedeutet, dass beim Erkunden einer Karte beispielsweise ein Finger die Wellen des Meeres spüren kann, während ein anderer die Beschaffenheit von Wäldern und anderen topologischen Elementen erfühlt“, ergänzt die Forscherin.

⇑Grafiken und PDFs zum Anfassen

Beim Gerät allein blieb es nicht. Das Team entwickelte auch Strategien für die Gestaltung von Inhalten, die über Berührung vermittelt werden. Die Forschenden untersuchten, wie sich eine zweidimensionale Stiftanzeige mit dem multisensorischen Tablet und mit künstlicher Intelligenz kombinieren lässt, die Bilder, PDF-Dateien und Grafiken in Echtzeit in Inhalte verwandelt, die man unter den Fingern spürt.

⇑Künstliche Intelligenz als Dolmetscherin

Der zweite Teil des Projekts ist Software. Es entstand eine Reihe von Algorithmen für maschinelles Lernen, die auf die Bedürfnisse von Menschen mit Sehbehinderung zugeschnitten sind. Sie analysieren ein Bild und erzeugen Text, sodass sich derselbe digitale Inhalt auf mehrere Arten vermitteln lässt:

• als visuelle Alternative,
• als Klang,
• als etwas, das man ertasten kann.

Worauf ist das Team am meisten stolz? Panëels hat keinen Zweifel: „Besonders stolz sind wir auf den Einsatz einer Bildanalyse-Pipeline und KI-Lösungen zur Konversation, mit denen wir interaktive, auf die jeweilige Person zugeschnittene Bildbeschreibungen liefern können, sowie auf unsere App für vorausschauendes Schreiben, mit der Nutzende Emojis in ihre Kommunikation einfügen können“.

Emojis in einem Projekt über Barrierefreiheit? Das klingt nach einer Kleinigkeit. Aber gerade solche Kleinigkeiten entscheiden darüber, ob jemand seinen Freunden genauso unbeschwert schreiben kann wie alle anderen.

⇑Nicht nur für Blinde

Das Team hat gezeigt, dass sich ein erschwingliches, von KI unterstütztes multisensorisches Tablet bauen lässt. Damit hat es den Grundstein für ein kommerzielles Produkt gelegt und die Messlatte für europäische Technologien höher gelegt, die mit Blick auf die Nutzenden und auf Inklusion entwickelt werden. Panëels betont, dass deutlich größere Gruppen profitieren können: „Unsere Arbeit bringt uns in Richtung inklusives Design und Inklusion im Allgemeinen voran und kommt nicht nur Sehbehinderten, sondern auch Menschen mit anderen Behinderungen, älteren Menschen und sogar Kindern zugute“.

In die Läden kommt das Tablet noch nicht. Es ist weitere Arbeit nötig, und die Forschenden suchen jetzt nach Finanzmitteln und Partnern, die helfen, das Gerät weiterzuentwickeln und auf den Markt zu bringen.

⇑Was Studierende davon haben

Ziemlich viel, und zwar unabhängig vom Studienfach. Diese Geschichte liefert einige Lehren, die dir bei jedem eigenen Projekt nützen:

• eine gute Lösung beginnt mit einem Gespräch mit den Menschen, für die sie entsteht – bei ABILITY waren es 285;
• Barrierefreiheit ist kein Zusatz am Ende, sondern eine Produktidee, von der viele Gruppen profitieren können;
• künstliche Intelligenz kann wie ein Dolmetscher zwischen Bild, Klang und Berührung arbeiten;
• vom funktionierenden Prototyp bis zum Markt ist es noch ein weiter Weg – es braucht Partner und Geld.

Du entwirfst eine App, eine Website oder einfach eine Präsentation für ein Seminar? Es lohnt sich, sich selbst zu fragen, wer auf der anderen Seite der Scheibe zurückbleibt.

⇑Zusammenfassung

Das Projekt ABILITY hat gezeigt, dass ein Touchscreen für blinde und sehschwache Menschen keine Mauer sein muss. Vibrationen machen Texturen unter den Fingern spürbar, und künstliche Intelligenz verwandelt Bilder in Beschreibungen, Klang oder Berührung. Der Prototyp braucht noch Arbeit und Partner, doch die Richtung ist klar: Technologie soll für alle da sein.

⇑Fünf Fragen: Wie zugänglich ist deine digitale Welt? (Test)