Zurück zu Bigger Picture

BIGGER PICTURE Teilhabe & Selbstständigkeit

Aus einem Foto wird ein Gespräch, das Sie steuern können

Eine feste Bildbeschreibung kann nicht jede Frage eines blinden Menschen vorwegnehmen. Be My AI ermöglicht Rückfragen zu genau dem Detail, das für die betreffende Person wichtig ist.

KI-generierte Illustration: Eine fotografierte Alltagsszene wird zur interaktiven Beschreibung.
Eine fotografierte Alltagsszene wird zur interaktiven Beschreibung.KI-generierte Illustration der Idee, keine Aufnahme der tatsächlichen Personen, Geräte oder Ereignisse.
Interaktion
Foto, Beschreibung, Rückfragen
Nutzerforschung
14 sehbehinderte oder blinde Interviewteilnehmende
Menschliche Unterstützung
Eine ehrenamtliche Hilfsperson bleibt erreichbar

So funktioniert die Idee

  1. Ansicht teilen

    Ein Handyfoto oder geteiltes Bild liefert den visuellen Kontext.

  2. Nach einem Detail fragen

    Rückfragen lenken die Beschreibung auf das persönliche Anliegen.

  3. Lesen, hören oder prüfen

    Barrierefreier Text vermittelt die Antwort; menschliche Hilfe kann Zweifel klären.

Zugang bedeutet auch alltägliche Neugier

Ein Outfit, einen Raum oder ein geteiltes Foto zu verstehen kann ebenso wichtig sein wie ein Etikett zu lesen. Eine Studie mit vierzehn sehbehinderten oder blinden Menschen dokumentierte solche Alltagsanwendungen. Teilnehmende schätzten, ein Bild erkunden zu können, ohne stets eine andere Person um Beschreibung zu bitten.

Belege: [1]

Oft hilft erst die zweite Frage

Die App übermittelt ein Foto an ein Bild-Sprach-Modell und liefert eine mit Screenreadern nutzbare Beschreibung. Über die Rückfragefunktion lassen sich eine konkrete Frage oder ein weiteres Bild hinzufügen. So wird aus einem Überblick beispielsweise die Frage nach einer Kleidungsfarbe oder einem Detail auf einem persönlichen Foto.

Belege: [2]

Die nutzende Person bestimmt den Zweck

Die Interviewstudie zeigte, wie Nutzende das System gezielt lenkten, wenn allgemeine Beschreibungen an ihrem Anliegen vorbeigingen. Der Gewinn liegt in der Wahl, welche Bildinformation erkundet wird. Wiederholtes Nachfragen und das Abgleichen mit vertrauten Räumen verursachen allerdings auch zusätzliche Arbeit.

Belege: [1]

Eine kürzere Antwort kann die bessere Hilfe sein

Eine separate Studie aus Maryland analysierte 418 Interaktionen und stellte fest, dass lange Antworten die gesuchte Information häufig verdeckten. Ehrenamtliche Hilfspersonen bleiben in der App erreichbar. Daraus ergibt sich eine konkrete Weiterentwicklung: die Frage priorisieren und Unsicherheit leicht klärbar machen, statt immer mehr zu beschreiben.

Belege: [2][3]

Die Originalquellen

  1. CHI 2025 / author manuscriptBeyond Visual Perception: Insights from Smartphone Interaction of Visually Impaired Users with Large Multimodal Models
  2. Be My Eyes Help CenterUsing Be My AI
  3. University of MarylandApp’s AI ‘Eyes’ for Blind Users Fall Short, UMD Researchers Find

Was Sie als Nächstes entdecken können

Ein Gespräch im Geschäft wird auf dem Handy lesbarBeschädigte Gebäude finden, bevor jedes Dach geprüft ist
Alle 99 Anwendungen entdecken