Prøvekjørt: Apples «Spatial Reframing» – AI-verktøyet som lar deg fikse bildet etter at du har tatt det

Funksjonen kommer sammen med to andre AI-drevne redigeringsverktøy – Extend og en oppgradert Clean Up – alle samlet i en ny "Apple Intelligence Tools"-seksjon i Photos-redigeringsgrensesnittet . Mens disse verktøyene forbedrer eksisterende redigeringsparadigmer, er Spatial Reframing en fundamentalt ny type redigering som visker ut grensen mellom et fanget minne og en databehandlet, nyskrevet scene .

Hvordan Spatial Reframing fungerer

Spatial Reframing bygger på Apples store satsing på romlig databehandling – spesifikt teknologien utviklet for Apple Vision Pro – for å forstå hvor motiver befinner seg i 3D-rom i forhold til omgivelsene .

Når du aktiverer verktøyet i redigeringsmodus, kan du trykke og dra inne i bildet for å finne et nytt perspektiv du foretrekker. Når du flytter synsvinkelen, panorerer bildet som om det var en 3D-scene . Det er ikke begrenset til bilder tatt med romlige kameraer; funksjonen fungerer på alle bilder i biblioteket ditt, inkludert bilder tatt med eldre eller tredjepartskameraer .

Fordi den nye synsvinkelen naturlig avslører "hull" som ikke fantes i det originale flate bildet, trer Apples generative AI inn. Apple understreket under presentasjonen at modellen, som kjører på en kombinasjon av prosessering på enheten og deres Private Cloud Compute (PCC)-infrastruktur, "bare genererer nytt innhold for å fylle hullene der perspektivet har blitt forskjøvet" .

Dette nygenererte innholdet er ikke bare malt inn som en skarp, kunstig tekstur. For å få det redigerte bildet til å se autentisk ut heller enn unaturlig forbedret, bruker Apple en naturlig dybdeskarphet-uskarpe på de AI-genererte områdene, og etterligner hvordan et objektiv ville gjengitt de delene av scenen . Det originale, fangede øyeblikket bevares alltid, og redigeringer er ikke-destruktive .

Personvernarkitektur og åpenhet

Den tekniske utfordringen med å endre perspektivet på et bilde er betydelig, og Apple bruker en trinnvis tilnærming for å beskytte brukernes personvern under behandlingen. Enklere perspektivjusteringer kjøres helt og holdent på enheten ved hjelp av Apples Foundation Models .

For mer datakrevende reframing-oppgaver blir forespørselen sendt videre til Private Cloud Compute. I Apples arkitektur er data som behandles på PCC-servere flyktige; de brukes kun mens beregningsoppgaven pågår og "fordampes" deretter uten å bli lagret eller tilgjengelig for noen, inkludert Apple .

Alle bilder som er justert med et Apple Intelligence-verktøy – enten det er en romlig reframing, et utvidet lerret eller en opprydding – mottar automatisk en usynlig SynthID-vannmerking . Denne digitale markøren, utviklet ved hjelp av Googles DeepMind-teknologi, er skjult i bildet og designet for å identifisere bilder som er modifisert med generativ AI, uten å endre den visuelle kvaliteten .

Det fullstendige iOS 27-verktøysettet for bilder

Spatial Reframing er stjernen, men den er en del av en trio av oppgraderinger til Photos-appen på iOS 27, iPadOS 27 og macOS 27 (kodenavn "Golden Gate"). De to andre verktøyene er :

• Extend: En generativ utmalingsfunksjon som utvider lerretet utover den opprinnelige rammen, og legger til AI-generert innhold som ekstra himmel, landskap eller bakgrunn for å forbedre beskjæringen .
• Clean Up (oppgradert): En betydelig forbedret versjon av det eksisterende objektfjerningsverktøyet som nå håndterer mer komplekse, travle scener og gir mer realistiske resultater når du fjerner uønskede objekter eller personer .

Tilgjengelighet

De første utviklerbetaversjonene av iOS 27, iPadOS 27 og macOS 27 ble sluppet umiddelbart etter keynote 8. juni 2026 . Funksjonene vil bli sendt til offentligheten i høst, samtidig som den neste iPhone-serien forventes lansert . Tilgang til den nye Apple Intelligence-redigeringspakken krever en iPhone 16 eller nyere, eller en iPad eller Mac med Apple-silisium .