Visionauta: Ein KI-Assistent, der für Sie sieht und spricht

Apps mit künstlicher Intelligenz gibt es viele. Visionauta ist ein besonderer Fall: Entwickelt hat sie Jonathan Santos, ein blinder Softwareingenieur, der zuvor bei Google und Samsung gearbeitet hat. Die App ist kostenlos für iPhone und Android erhältlich und richtet sich gezielt an blinde und sehbehinderte Menschen – von jemandem, der die Bedürfnisse selbst kennt.

Ein Gespräch statt Fotos auslösen und warten

Das Herzstück von Visionauta ist die sogenannte Echtzeit-Unterhaltung. Statt ein Foto aufzunehmen und auf eine Beschreibung zu warten, sprechen Sie ganz natürlich mit der KI – ohne Knopfdruck und ohne Warteschleife. Die künstliche Intelligenz sieht dabei über die Kamera des Smartphones mit und antwortet sofort per Sprache. Der Entwickler vergleicht das mit einem Freund, der neben Ihnen steht und die Umgebung beschreibt.

Während dieses Gesprächs kann der Assistent vielerlei leisten: Er beschreibt Räume und Szenen, sagt Ihnen, wo Sie sich befinden und was in der Umgebung liegt – etwa die nächste Apotheke oder Bushaltestelle –, sucht Informationen im Internet und beantwortet Fragen zu dem, was vor der Kamera liegt: Welches Produkt ist das? Wann läuft das Mindesthaltbarkeitsdatum ab? Was steht auf dem Schild?

Noten lesen, Fotos machen, Videos aufnehmen

Zwei Funktionen heben Visionauta von anderen KI-Apps ab. Die erste richtet sich an Musikerinnen und Musiker: Halten Sie die Kamera auf ein gedrucktes Notenblatt, erkennt die App die Noten, liest das Stück vor und spielt es auf dem Gerät ab; zusätzlich entstehen MusicXML- und MIDI-Dateien. Das ist ein Novum – blinden Musikern fehlten bisher oft Braille-Ausgaben oder fremde Hilfe. Die zweite ist der Fotoassistent: Er führt per Sprache durch den Bildausschnitt, meldet, wenn die Aufnahme passt, zählt rückwärts und löst aus. So gelingen Familienfotos, Dokumentaufnahmen oder Bilder für soziale Medien.

In der aktuellen Version kommt die sprachgeführte Videoaufnahme mit Ton hinzu: Sie bitten um eine Aufnahme, der Assistent führt Sie durch den Bildausschnitt, und die Aufnahme lässt sich pausieren, fortsetzen, abschließen oder abbrechen. Die Videos landen anschließend in der Aktivitätsübersicht der App.

Sechzehn Sprachen – auch Deutsch

Visionauta spricht inzwischen sechzehn Sprachen, von Englisch und Französisch über Arabisch und Chinesisch bis Hindi, Bengalisch, Vietnamesisch, Türkisch und Indonesisch. Die Übersetzung umfasst die gesamte App, die Sprachbefehle, die Texterkennung und die Antworten der KI. Für deutschsprachige Nutzerinnen und Nutzer bedeutet das: Das komplette Gespräch mit dem Assistenten läuft auf Deutsch.

Visionauta Magic für Android-Nutzer

Exklusiv für Android und Abonnenten des optionalen Visionauta Plus gibt es „Visionauta Magic“. Es arbeitet mit dem Screenreader des Geräts, etwa TalkBack, zusammen und löst zwei alte Probleme: Erstens beschreibt es Bilder ohne Beschriftung in beliebigen Apps, sobald der Screenreader-Fokus darauf landet. Zweitens führt es Aufgaben auf dem Smartphone aus – zum Beispiel „öffne WhatsApp und schicke Anna eine Nachricht“ –, liest den Plan laut vor und handelt erst nach Ihrer Bestätigung. Jeder Schritt wird angesagt, und ein Notfall-Knopf oder Doppeltipp mit zwei Fingern stoppt alles sofort.

Werkzeuge für den Alltag, oft offline

Über die Gesprächsfunktion hinaus bietet die App klassische Hilfsmittel, von denen viele auch ohne Internet funktionieren:

• Offline-Texterkennung für Dokumente, Verpackungen, Briefe und Schilder
• Erkennung von Banknoten mehrerer Währungen, darunter Euro und US-Dollar
• Einen Objektfinder, der etwa das verlegte Handy im Raum aufspürt und sich per Vibration und Sprache meldet
• Eine elektronische Lupe mit Zoom und Kontrastmoden wie invertierten Farben oder Gelb auf Schwarz
• Eigene, natürlich klingende Stimmen, die auch als Systemstimme für TalkBack oder VoiceOver dienen können

Auf dem iPhone ist Visionauta vollständig in VoiceOver integriert. Das Fahrt-Angebot ist ebenfalls praktisch: Nennen Sie einfach Ihr Ziel, und die App öffnet Uber, 99, Bolt oder Lyft mit vorbefüllter Fahrt – bestätigen müssen Sie nur noch selbst.

Kosten und Verfügbarkeit

Die App selbst ist kostenlos, und laut Hersteller lässt sich jede Funktion ohne Zahlung innerhalb von Tageskontingenten nutzen. Die optionale Subscription Visionauta Plus erhöht diese Kontingente und schaltet auf Android zusätzlich Visionauta Magic frei. Ob sich ein Abo für Sie lohnt, hängt vor allem davon ab, wie intensiv Sie die KI-Gespräche und die Bildbeschreibung nutzen.