Siri-tilstand: hvordan visuel AI vil revolutionere iPhone-kameraet

  • iOS 27 vil integrere en ny Siri-tilstand i Kamera-appen, hvilket fremhæver Visuel Intelligens med en nydesignet knap baseret på Apple Intelligence.
  • Tilstanden giver dig mulighed for at pege på objekter, tekster eller scener og starte smarte handlinger: forespørgsler til ChatGPT, omvendte søgninger på Google og avancerede genkendelsesfunktioner.
  • Apple vil tilføje sine egne funktioner såsom scanning af ernæringsetiketter, indsamling af kontaktoplysninger og oprettelse af digitale adgangskort i Wallet fra kameraet.
  • Disse nye funktioner er en del af en større renovering af Siri og økosystemet med nye bærbare enheder og en separat app til assistenten.

Nye funktioner i iPhone-kameraet med Siri-tilstand

Apples næste store opdatering til iPhone vil gå langt ud over det sædvanlige. fire interface-justeringer. Alt tyder på det iOS 27 Dette bliver vendepunktet, hvor Siri holder op med at være den assistent, alle griner af, og i stedet bliver en central del af systemet. Og det scenarie, Apple har valgt til at demonstrere dette, kunne ikke være tydeligere: Kamera-appen.

Ifølge adskillige meget konsekvente lækager fra Bloomberg og journalister som Mark Gurman forbereder Apple en ny “Siri-tilstand” integreret direkte i kameraetDette blev ledsaget af en komplet overhaling af Visual Intelligence-funktionen og en nydesignet udløserknap med Apple Intelligences æstetik. Resultatet: en iPhone, der forstår alt, hvad den ser, og handler derefter, uden at du behøver at pille ved skjulte menuer.

Hvad er den nye Siri-tilstand på iPhone-kameraet præcist?

Siri-tilstand integreret i iPhone-kameraet

Indtil nu har funktionen af Visuel intelligens Den var skjult bag kameraknappen på iPhone 16, og var kun tilgængelig ved at trykke og holde sideknappen nede. Den var kraftfuld, men meget få brugte den, simpelthen fordi mange ikke engang vidste, at den eksisterede. Med iOS 27 flyttede Apple alle disse funktioner til hjertet af Kamera-appen og gav dem deres egen knap: Siri-tilstand.

Denne nye tilstand vil blive vist som en ekstra mulighed i karrusellen for affyringstilstande. sammen med foto, video, portræt og firmaDu skal blot swipe, som du ville gøre, for at skifte fra Foto til Portræt, men når du vælger Siri, ændres adfærden: du forlader en klassisk fototilstand og går ind i et AI-centreret miljø, der er designet til at forstå, hvad der er foran dig, og hjælpe dig med det.

I det øjeblik du vælger Siri-tilstand, ændrer udløserknappen udseende: den sædvanlige hvide cirkel erstattes af et design. inspireret af Apple Intelligence-logoetDen lille visuelle detalje gør det tydeligt, at du ikke tager et normalt billede, men snarere aktiverer en række intelligente funktioner, der kombinerer Siri, Visuel Intelligens og eksterne tjenester som ChatGPT eller Google.

Apples idé er, at i stedet for at have adskillige spredte oplevelser, alt samles på et enkelt, velkendt punkt for brugerenKamera-appen, en af ​​de mest åbne og udbredte på systemet, vil stadig være tilgængelig fra den fysiske Camera Control, men den vil ikke længere åbne en separat brugerflade; i stedet vil den føre dig direkte til den nye Siri-tilstand i appen.

Sådan fungerer Siri-tilstand: fra "peg og skyd" til "peg og forstå"

Den grundlæggende opførsel af Siri-tilstand minder meget om det, vi allerede har set på platforme som Google Lens på AndroidDu peger kameraet mod et objekt, en tekst eller en scene, og iPhonen viser ikke bare et billede: den analyserer, hvad den ser, og tilbyder kontekstuelle handlinger baseret på kunstig intelligens.

I praksis betyder det, at du vil være i stand til at Tag din iPhone, fokuser på noget, og spørg Siri direkte. På dette punkt har assistenten allerede alle de visuelle oplysninger foran sig. Takket være integrationen med tredjepartstjenester såsom ChatGPT Med muligheden for at starte omvendte billedsøgninger på Google, vil systemet være i stand til at gå langt ud over grundlæggende identifikation.

Hvis du for eksempel fokuserer på en bygning og aktiverer Siri-tilstand, kan du spørge Hvilken slags virksomhed er det, hvad er dens kontaktoplysninger, eller hvilke anmeldelser har den?Hvis du peger på en genstand, du ikke genkender, kan du bede Siri om at identificere den og foreslå links til, hvor du kan købe den, brugervejledninger eller detaljerede oplysninger fra nettet.

Alt dette vil blive understøttet af en opdateret brugerflade, der gør det tydeligere, hvad du kan gøre i hver scene. I stedet for skjulte bevægelser eller utydelige ikoner ønsker Apple, at brugerne skal se tingene direkte. hvilke smarte muligheder der er tilgængelige på et givet tidspunktDen kan identificere, gemme, sende information til en anden app, stille spørgsmål osv. Det er i bund og grund et lag af visuel forståelse oven på det traditionelle kamera.

Visuel intelligens afsløres: hvorfor Apple integrerer den i kameraet

Visuel intelligens eksisterer allerede i dag, men dens hovedproblem var ikke, hvad den gjorde, men hvor gemte hun sigLangtryksbevægelsen på iPhone 16's kameraknap er en af ​​de detaljer, man opdager ved et tilfælde, eller fordi nogen viser den til én; den er ikke indlysende for de fleste. Resultatet: en kraftfuld, men undervurderet funktion med meget begrænset brug i den virkelige verden.

Ved at flytte Visuel Intelligens til Siri-tilstand i Kamera-appen løser Apple denne flaskehals med det samme. Kamera-appen er en af ​​de mest universelle adgangspunkter til iPhone: alle åbner den flere gange om dagen. At have Visuel Intelligens der, med sin egen placering i tilstandskarrusellen, betyder at give den en synlighed den aldrig har haft.

Ifølge lækager vil virksomheden ikke skabe et helt nyt værktøj fra bunden, men snarere tage det, der allerede fungerer, og placere det på en langt mere logisk måde. Det virkelig innovative aspekt er Siri-laget, der ligger oven på dette eksisterende fundament, sammen med integrationen med ChatGPT og Google Image Search, som allerede er blevet testet.

Mark Gurman taler om en forbedret version af visuel intelligensikke kun med hensyn til funktioner, men også med hensyn til præsentation. Den nye brugerflade skulle gøre det tydeligere, hvilke typer forespørgsler man kan køre, hvilke hurtige handlinger der er tilgængelige for hver type indhold (tekst, objekter, plakater, mad osv.), og hvordan man interagerer med scenen uden at det virker som et skjult trick.

Hvad Siri vil kunne gøre med kameraet, som det ikke kunne før.

Indtil nu var visuel intelligens allerede i stand til at genkende planter, dyr, tegn eller kontaktoplysningerUdover at omdanne koncertbannere til kalenderbegivenheder eller udtrække data fra virksomheder, ønsker Apple med iOS 27 at udvide udvalget af situationer, hvor kameraet kan spare dig tid og reducere skrivearbejdet betydeligt.

En af de største lækkede funktioner er muligheden for at scanning af næringsdeklarationer på fødevarerForestil dig, at du henter en karton mælk, en æske morgenmadsprodukter eller en hvilken som helst pakke fra supermarkedet: fokuser blot på det ved hjælp af Siri-tilstand, så Apple Intelligence kan læse næringsoplysningerne og Optag på en struktureret måde i Sundheds-appen.

Denne funktion handler ikke kun om at vise dig kalorier på skærmen; ideen er, at den skal være en del af en bredere kosthistorik og krydsreferere data, så du kan have mere præcis sporing af, hvad du spiser uden at skulle indtaste alt manuelt. For dem, der bruger iPhone som et sundheds- eller fitnesssporingsværktøj, vil dette være et betydeligt spring i bekvemmelighed.

Et andet nøgleområde er håndtering af kontaktdata fra den fysiske verden. Systemet vil være i stand til at opdage telefonnumre, postadresser eller visitkortoplysninger Du skal blot pege kameraet. Derfra vil det tilbyde dig tilføj dem direkte til Kontakteruden at skulle kopiere og indsætte eller skrive bogstav for bogstav.

Der vil også være en dybere integration med Wallet. Du vil kunne fotografere papirbilletter, fitnesskort eller lignende adgangskort og lade Apple Intelligence behandle dem. Fortolk indholdet og generer automatisk et digitalt adgangskort Kompatibel med Apple Wallet. Dette vil reducere din afhængighed af papir og sikre, at du altid har dine logins lige ved hånden uden at skulle håndtere dårligt designede tredjepartsapps.

Nydesignet udløserknap og ændringer i kameragrænsefladen

Kamerarevolutionen med Siri-tilstand er ikke begrænset til "usynlige" funktioner. Apple vil også finjustere hardwaren og det visuelle design for at gøre det klart, at dette er en sand revolution. en ny æra inden for intelligent fotograferingEn af de mest slående ændringer vil være det nye design af udløserknappen, der er forbundet med disse funktioner.

Indtil nu har Visual Intelligence-oplevelsen været afhængig af en klassisk hvid cirkel som en udløserknap. I iOS 27 vil dette element blive erstattet af en ny knap inspireret af Apple Intelligence-logoet. Det er ikke en rent æstetisk ændring: den tjener til mentalt at adskille den almindelige fotooplevelse fra den AI-drevne oplevelse.

Den fysiske kamerakontrolknap, der fulgte med iPhone 16 i 2024, vil fortsat spille en vigtig rolle. Hvis du trykker og holder den nede, aktiveres disse visuelle funktioner stadig, men den åbner ikke længere en sværtplaceret flydende brugerflade: den starter kameraet direkte. Siri-tilstand i Kamera-appenmed alle dens muligheder i sigte.

Med dette forenkler Apple brugerflowet: det er ligegyldigt, om du indtaster fra appens tilstandsvælger eller fra sideknappen, det ender altid i det samme miljøMindre forvirring, færre parallelle grænseflader og større sandsynlighed for, at brugeren vil forstå og anvende disse funktioner i deres dagligdag.

Integration med ChatGPT, Google Billedsøgning og tredjepartstjenester

Et af de punkter, der tiltrækker sig mest opmærksomhed, er, hvordan Apple, traditionelt set meget beskyttende over for sit økosystem, eller omvendt billedsøgning på Google direkte fra kameraets Siri-tilstand.

Når du peger på et objekt eller en scene, kan du sende en ChatGPT-forespørgsel for at få mere dybdegående forklaringer, yderligere kontekst eller forslag i naturligt sprog, baseret på hvad kameraet ser i realtid. Dette gør Siri meget mere som en visuel chatbot, der er i stand til at ræsonnere om sine omgivelser.

På samme måde vil systemet tilbyde omvendte billedsøgninger på Google for at finde produkter, identificere steder eller finde oplysninger relateret til et specifikt foto. Denne kombination af søgemaskiner – Apple Intelligence, ChatGPT og Google – sigter mod at give brugeren det mest brugbare svar i hvert tilfældeuden at skulle skifte manuelt mellem apps.

Parallelt hermed vil Apple fortsætte med at forbedre sit eget AI-lag og gradvist reducere sin afhængighed af tredjeparter. Nye indbyggede funktioner til scanning af ernæringsetiketter, avanceret tekstgenkendelse og oprettelse af digitale adgangskort i Wallet er gode eksempler på, hvordan virksomheden har til hensigt at... at reservere visse nøgleområder internthvilket efterlader ChatGPT og Google med de mere generiske eller åbne opgaver.

Ud over iPhone: Smarte briller, AirPods og bærbare enheder

De visuelle AI-forbedringer, der følger med iOS 27, er ikke kun designet til den nuværende iPhone. Ifølge lækager er de en del af en mere ambitiøs hardwareplan som inkluderer nye bærbare enheder med fokus på en version af Siri, der er i stand til løbende at analysere miljøet.

Blandt de nævnte enheder er nye AirPods med avancerede funktionerDisse kunne omfatte smarte briller og endda en vedhængsring designet til at blive båret hele tiden. Alle disse ville have en meget tæt integration med Siri og med evnen til at analysere dine omgivelser og dermed lukke kredsløbet mellem lyd, billede og kontekst.

Ideen er, at denne opdaterede Siri, drevet af Apple Intelligence, kan tilbyde dig kontekstuel information i realtid uden at du konstant skal tage din iPhone op af lommen. Telefonens kamera ville være laboratoriet, hvor disse funktioner testes og perfektioneres, før de rulles ud til resten af ​​økosystemet.

I mellemtiden forbereder Apple en opdateret version af Fotos-appen med nye AI-værktøjer, der er i stand til at Forbedr, forstør og omformuler billeder intelligent. Under paraplyen af Apple Intelligence-værktøjerDen nævner funktioner som at udvide kanterne på et foto ud over den originale ramme, avancerede automatiske justeringer og perspektivændringer, især i rumfotos.

Ny Siri, ny app og interne forbedringer i iOS 27

Kamerarevolutionen med Siri-tilstand passer ind i en bredere opdatering af Siri og selve operativsystemet. Apple arbejder på en selvstændig applikation til Siri, adskilt fra resten, med en brugerflade, der vil ligne en moderne chatbot meget mere end den traditionelle assistent fra tidligere år.

Ud over denne nye app forventes følgende generelle forbedringer af ydeevnen i iOS 27Justeringer for at forlænge batterilevetiden, optimeringer af stabilitet og en mere jævn systemrespons. Det handler ikke kun om AI og prangende effekter; Apple forstår, at et så betydeligt spring i funktioner skal ledsages af et robust og effektivt system.

Mange af disse nye funktioner vil blive lanceret under WWDC 2026, Apples årlige udviklerkonference, der afholdes i juni i Apple Park. Der vil iOS 27 og resten af ​​operativsystemerne officielt blive afsløret, med en Offentlig version planlagt til efteråret samtidig med lanceringen af ​​den nye iPhone 18 og iPhone 18 Pro.

Det har ikke alt sammen været problemfrit: nogle forbedringsplaner knyttet til iOS 26.4 blev forsinket, efter at der blev opdaget en fejl. problemer med ydeevne og pålidelighed i februar, hvilket ville have presset Apple til at koncentrere størstedelen af ​​Siri- og kamerarevolutionen direkte i iOS 27 i stedet for at udgive ændringerne stykkevis.

Samlet set fremkommer der en iPhone, hvor kameraet ophører med blot at være et værktøj til at tage billeder og videoer og bliver en indgangsport til et komplet kunstig intelligens-system i stand til at forstå, opsummere og handle på den fysiske verden omkring dig. Hvis lækagerne er sande, vil den måde, vi bruger kameraer på dagligt, ændre sig lige så meget som, eller endda mere end, da de første portrættilstande eller multikamerasystemer ankom.

Alt tyder på, at den såkaldte Siri-tilstand ikke blot vil være en skjult kuriositet i en menu, men tyngdepunktet i en oplevelse, hvor Tag din iPhone op, peg med den, og få nyttige svar Det vil blive lige så almindeligt som at tage et billede. Apples fremstød inden for visuel intelligens er sent i forhold til nogle konkurrenter, men det kommer med den klare intention at integrere med de bevægelser, du allerede kender, uden at tvinge dig til at genlære, hvordan du bruger din telefon hver dag.

Stor forandring for Siri i iOS 27
relateret artikel:
Siris store transformation i iOS 27: fra stemmeassistent til åben AI-platform