Apple's Spatial Reframing: de AI-fototool die je compositie achteraf kan herstellen

Hoe Spatial Reframing werkt

Spatial Reframing bouwt voort op Apple's diepgaande investering in ruimtelijke computing, met name technologie die is ontwikkeld voor de Apple Vision Pro, om te begrijpen waar onderwerpen zich in de 3D-ruimte bevinden ten opzichte van hun omgeving .

Zodra je de tool activeert in de bewerkingsmodus, kun je in een foto aanraken en slepen om een nieuw perspectief te vinden dat je voorkeur heeft. Terwijl je het standpunt verschuift, beweegt de afbeelding alsof het een 3D-scène is . Dit is niet beperkt tot foto's die met ruimtelijke camera's zijn gemaakt; de functie werkt op elke foto in je bibliotheek, inclusief foto's die met oudere of camera's van derden zijn gemaakt .

Omdat het nieuwe standpunt vanzelfsprekend "gaten" onthult die niet in de oorspronkelijke platte afbeelding aanwezig waren, springt Apple's generatieve AI bij. Apple benadrukte tijdens de presentatie dat het model, dat draait op een combinatie van verwerking op het apparaat en de Private Cloud Compute (PCC)-infrastructuur, "alleen nieuwe content genereert om de gaten op te vullen waar het perspectief is verschoven" .

Cruciaal is dat deze nieuw gegenereerde invulling niet zomaar als een scherpe, kunstmatige textuur wordt ingeschilderd. Om de opnieuw samengestelde afbeelding er authentiek uit te laten zien in plaats van onnatuurlijk verbeterd, past Apple een natuurlijke scherptediepte-onscherpte toe op de AI-gegenereerde gebieden, waardoor wordt nagebootst hoe een lens die delen van de scène zou weergeven . Het oorspronkelijk vastgelegde moment blijft altijd bewaard en bewerkingen zijn niet-destructief .

Privacyarchitectuur en transparantie

De technische uitdaging om het perspectief van een foto te verschuiven is aanzienlijk, en Apple hanteert een gelaagde aanpak om de privacy van gebruikers te beschermen tijdens de verwerking. Eenvoudigere perspectiefaanpassingen worden volledig op het apparaat uitgevoerd met behulp van Apple's Foundation Models .

Voor meer computationeel complexe herkaderingen wordt het verzoek doorgestuurd naar Private Cloud Compute. In Apple's architectuur zijn gegevens die op PCC-servers worden verwerkt, van voorbijgaande aard; ze worden alleen gebruikt voor de duur van de computertaak en worden daarna "verdampt" zonder te worden opgeslagen of toegankelijk te zijn voor iemand, ook niet voor Apple .

Elke foto die met een Apple Intelligence-tool is bewerkt—of het nu gaat om een ruimtelijke herkadering, een uitgebreid canvas of een opgeruimde objectverwijdering—krijgt automatisch een onzichtbaar SynthID-watermerk . Deze digitale markering, ontwikkeld met technologie van Google DeepMind en onmerkbaar verborgen in de afbeelding, is ontworpen om foto's te identificeren die met generatieve AI zijn bewerkt, zonder de visuele kwaliteit van de opname te veranderen .

De complete iOS 27 Fototoolset

Spatial Reframing is de hoofdattractie, maar maakt deel uit van een trio van upgrades voor de Foto's-app op iOS 27, iPadOS 27 en macOS 27 (codenaam "Golden Gate"). De andere twee tools zijn :

• Extend: Een generatieve 'outpainting'-functie die het canvas uitbreidt voorbij het originele kader, waarbij AI-gegenereerde content zoals extra lucht, landschap of achtergrond wordt toegevoegd om de kadrering te verbeteren .
• Clean Up (verbeterd): Een aanzienlijk verbeterde versie van de bestaande objectverwijderingstool die nu overweg kan met complexere, drukke scènes en realistischere resultaten produceert bij het verwijderen van ongewenste objecten of omstanders .

Beschikbaarheid

De eerste bètaversies voor ontwikkelaars van iOS 27, iPadOS 27 en macOS 27 werden direct na de keynote op 8 juni 2026 uitgebracht . De functies zullen dit najaar voor het publiek beschikbaar komen, naar verwachting tegelijk met de volgende iPhone-line-up . Toegang tot de nieuwe Apple Intelligence-bewerkingssuite vereist een iPhone 16 of nieuwer, of een iPad of Mac met Apple silicon .