Visual Intelligence in iOS 27: Das ist neu

Mit iOS 27 bekommt Visual Intelligence das bislang größte Update. Apple verschiebt die Funktion in die Kamera-App, koppelt sie eng an die neue Siri AI und stattet sie mit einer Reihe zusätzlicher Fähigkeiten aus. Gleichzeitig wandert Visual Intelligence erstmals auf iPad, Mac und Vision Pro – allerdings mit einer wichtigen Einschränkung für die EU.

Visual Intelligence erlaubt es, die Kamera oder ein Bild auf dem Bildschirm von der KI analysieren zu lassen – vom Bestimmen einer Pflanze bis zum Übersetzen eines Schilds. In iOS 27 baut Apple diese Funktion deutlich aus und verzahnt sie mit der neuen Siri AI, die in der EU auf iPhone und iPad zunächst nicht startet. Was sich konkret ändert, welche neuen Aktionen dazukommen und worauf es bei den Voraussetzungen ankommt, fasst dieser Überblick zusammen.

Visual Intelligence wandert in die Kamera-App

In iOS 27 ist Visual Intelligence in die Kamera-App eingezogen. Der Zugriff läuft über einen neuen Siri-Modus, der neben den bekannten Modi wie Foto und Video in der Auswahl sitzt. Ein Wisch dorthin, ein Foto – und Siri sieht, was du siehst. Nach einem Wisch nach unten liefert Siri Details zum erfassten Motiv, und Rückfragen sind direkt möglich.

Der Siri-Modus ersetzt die Kamerasteuerung (Camera Control) als primären Weg zu Visual Intelligence. Über ein langes Drücken der Camera-Control-Taste bleibt der bisherige Zugang aber erhalten. Je nach Motiv schlägt der Siri-Modus passende Aktionen vor: Bei einer Pflanze bietet Siri an, sie zu bestimmen, bei einem Teller Essen nennt Siri Informationen zum Nährwert.

Siri AI statt ChatGPT

Visual Intelligence ist in iOS 27 mit Siri AI verbunden und kann Fragen zum betrachteten Objekt direkt beantworten. Komplexere Anfragen wurden bisher an ChatGPT weitergereicht – das ist nun nicht mehr nötig. Die grundlegend überarbeitete Siri-Generation in iOS 27 übernimmt vieles davon selbst und zieht für Antworten auch Informationen aus dem Web heran. Technisch baut sie auf Apples Foundation Models der dritten Generation auf, die der KI das nötige Sprach- und Bildverständnis liefern.

Neue Funktionen in iOS 27

Mit iOS 27 kommen mehrere neue Aktionen hinzu:

• Nährwert-Infos: Ein Foto einer Mahlzeit oder eines Lebensmittels genügt, um dessen Nährwert einzuschätzen. Konkrete Kalorienangaben macht Siri nicht, ordnet aber ein, ob etwas nährstoffreich ist und was daran günstig oder ungünstig ist.
• Rechnung teilen (nur USA): Aus dem Foto einer Restaurantrechnung lässt sich der eigene Anteil herauslösen und per Apple Cash begleichen – oder der fällige Betrag pro Person berechnen und anfordern.
• Mehrere Termine importieren: Aus einem Zeitplan oder einer Liste lassen sich mehrere Einträge auf einmal in Kalender oder Erinnerungen übernehmen.
• Kontakte importieren: Aus dem Foto einer Visitenkarte wird ein Kontakt.
• Wallet-Pässe: Ein abfotografierter Barcode einer Mitgliedschaft oder eines Passes wird zu einem Pass in Wallet.

Den größeren Sprung macht Visual Intelligence durch die Web-Anbindung von Siri. So lassen sich Pflegehinweise auf Wäscheetiketten in klare Anweisungen übersetzen, Produkte nachschlagen und Testberichte finden, unbekannte Geräte oder Kabel identifizieren und einordnen, Rezepte hochskalieren, Zutatenlisten auf Allergene prüfen, unleserliche Notizen in Text umwandeln, verwirrende Parkschilder entschlüsseln, Pflegetipps für Pflanzen abrufen oder Matheaufgaben auf einem Arbeitsblatt lösen.

Was Visual Intelligence weiterhin kann

Viele Fähigkeiten gab es bereits in früheren iOS-Versionen, und sie bleiben erhalten. Dazu zählt das Bestimmen von Pflanzen, Tieren, Insekten, Sehenswürdigkeiten, Kunstwerken, Skulpturen oder Büchern. Termine lassen sich von einem Plakat oder Flyer in den Kalender übernehmen, und über die Google-Bildersuche findet Visual Intelligence ähnliche Bilder. Erfasste Gegenstände lassen sich in Apps wie Etsy, Amazon oder Anthropologie suchen, zu einem Geschäft im Blickfeld liefert die Funktion Details wie Öffnungszeiten, und Text kann übersetzt, zusammengefasst und vorgelesen werden.

Verlauf in der Siri-App

Alle Visual-Intelligence-Anfragen an Siri landen in der Siri-App und lassen sich dort später erneut aufrufen. Wie lange die Gespräche erhalten bleiben, ist einstellbar: einen Monat, ein Jahr oder dauerhaft.

Auf iPad, Mac und Vision Pro nutzen

Apple hat Visual Intelligence über das iPhone hinaus auf iPadOS 27, macOS Golden Gate und visionOS 27 ausgeweitet. Auf dem Mac genügt das Tastenkürzel Command-Shift-Leertaste; anschließend lässt sich ein Bereich des Bildschirms auswählen, zu dem eine Frage gestellt wird. Voraussetzung ist ein Mac mit Apple Silicon – passend dazu, dass macOS 27 die erste Mac-Version ausschließlich für Apple-Silicon-Macs ist. Auf dem iPad öffnest du Visual Intelligence über einen Screenshot oder per Wisch von der unteren linken Ecke mit dem Apple Pencil. Auf der Vision Pro reicht der Blick auf ein Objekt, auch auf physische Dinge in der Umgebung.

Voraussetzungen und die EU-Einschränkung

Auf dem iPhone setzt Visual Intelligence in iOS 27 ein iPhone 15 Pro oder neuer voraus. Auf dem Mac ist ein Apple-Silicon-Chip nötig, auf dem iPad ein Apple-Silicon-Chip oder das iPad mini mit A17 Pro.

Für die EU gilt eine wichtige Einschränkung: Weil die ausgebaute Visual Intelligence und der Siri-Modus in der Kamera zu den Funktionen der neuen Siri AI zählen, stehen sie auf iPhone und iPad in der Europäischen Union zum Start von iOS 27 nicht bereit. Apple verweist dafür auf die Vorgaben des Digital Markets Act, der Siri AI auf iPhone und iPad ausbremst. Auf dem Mac und der Vision Pro kommt Siri AI dagegen auch in der EU, sodass sich der ausgebaute Funktionsumfang dort nutzen lässt. Die zuvor bereits verfügbaren Visual-Intelligence-Grundfunktionen sind von dieser Einschränkung nicht betroffen.

Visual Intelligence in iOS 27 – das Wichtigste auf einen Blick

Visual Intelligence wird in iOS 27 vom praktischen Zusatz zum zentralen KI-Werkzeug: fest in der Kamera-App verankert, eng mit Siri AI verzahnt und um Aktionen von der Nährwert-Einschätzung bis zum Visitenkarten-Import erweitert. Auf iPad, Mac und Vision Pro steht die Funktion nun ebenfalls bereit. In der EU bleibt der ausgebaute Teil auf iPhone und iPad zum Start jedoch außen vor, während Mac und Vision Pro vollständig profitieren.

Die besten Produkte für dich: Unsere Amazon Storefront bietet eine breite Auswahl an Zubehörteilen, auch für HomeKit. (Bild: Apple)

• AirPods Ultra: Alle Gerüchte im Überblick
• iPhone 2027: Alle Gerüchte zum Jubiläumsmodell
• iPhone Ultra (iPhone Fold): Alle Gerüchte und Fakten im Überblick
• iPhone 18: Alle Gerüchte im Überblick
• iPhone 18 Pro: Alle Gerüchte im Überblick
• Siri AI in iOS 27: Alle Funktionen im Überblick
• Apfelpatient Weekly #10
• Diese Apple-Funktionen fehlen in der EU
• Safari in iOS 27: Diese neuen KI-Funktionen bringt der Browser
• iOS 27 erweitert Health und Fitness – von Ernährung bis Menopause
• MacBook Ultra: Alle Gerüchte im Überblick
• Apples Foundation Models der dritten Generation: So funktioniert die neue KI-Architektur
• Die Fotos-App in iOS 27: Alle Neuerungen im Überblick
• Siri AI basiert auf Gemini – ist aber nicht Gemini
• WWDC 2026: Apples Keynote bricht mit einer alten Tradition
• Warum der DMA Siri AI auf iPhone und iPad stoppt
• Apfelpatient Weekly #9
• WWDC 2026: Alle Erwartungen, Gerüchte und Hardware-Hoffnungen im Überblick
• Apple TV im Juni 2026: Alle Highlights im Überblick
• Apfelpatient Weekly #8
• Neues Apple TV 4K: Alle Gerüchte zum Update
• HomePod 3 & HomePod mini 2: Alle Gerüchte im Überblick
• Apple Glasses: Alle Gerüchte im Überblick

Häufige Fragen: Visual Intelligence in iOS 27

Kennt ihr schon unsere Amazon Storefront? Dort findet ihr eine handverlesene Auswahl von diversen Produkten für euer iPhone und Co. – viel Spaß beim Stöbern.

Der Beitrag enthält Partnerlinks.