Applen Spatial Reframing -tekoälytyökalu: ota kuva, sommittele myöhemmin

Ominaisuus on osa kolmen tekoälymuokkausohjelman kokonaisuutta, johon kuuluvat Extend-työkalu ja paranneltu Clean Up -työkalu. Ne kaikki löytyvät uudesta Apple Intelligence Tools -osiosta Kuvat-sovelluksen muokkausnäkymässä . Siinä missä muut työkalut jalostavat olemassa olevia muokkausperiaatteita, Spatial Reframing on täysin uudenlainen muokkaustapa, joka hämärtää rajaa taltioidun muiston ja tietokoneella uudelleenkuvitellun kohtauksen välillä .

Näin Spatial Reframing toimii

Spatial Reframing perustuu Applen syvälliseen panostukseen tila- eli spatiaaliseen tietojenkäsittelyyn, erityisesti Apple Vision Proa varten kehitettyyn teknologiaan, jonka avulla ymmärretään, missä kohteet sijaitsevat kolmiulotteisessa tilassa suhteessa ympäristöönsä .

Kun työkalu aktivoidaan muokkaustilassa, voit koskettaa ja vetää valokuvan sisällä löytääksesi uuden haluamasi kuvakulman. Kun muutat näkökulmaa, kuva liikkuu ikään kuin se olisi 3D-kohtaus . Tämä ominaisuus ei rajoitu vain spatiaalisilla kameroilla otettuihin kuviin, vaan se toimii kaikilla kirjaston kuvilla, mukaan lukien vanhemmilla tai kolmannen osapuolen kameroilla otetut kuvat .

Koska uusi kuvakulma paljastaa luonnollisesti aukkoja, joita alkuperäisessä kaksiulotteisessa kuvassa ei ollut, Applen generatiivinen tekoäly paikkaa ne. Apple painotti esittelyssään, että malli, joka toimii yhdistelmällä laitteen sisäistä prosessointia ja Private Cloud Compute (PCC) -pilvipalvelua, "tuottaa uutta sisältöä vain täyttääkseen aukot, jotka syntyvät perspektiivin siirtämisestä" .

Merkittävää on, että tämä uudelleen tuotettu täyttö ei ole vain terävä keinotekoinen tekstuuri. Auttaakseen uudelleen sommiteltua kuvaa näyttämään autenttiselta eikä luonnottomalta Apple lisää tekoälyn tuottamiin alueisiin luonnollisen syväterävyyssumennuksen, joka matkii sitä, miltä linssi saattaisi toistaa kohtauksen osia . Alkuperäinen tallennettu hetki säilyy aina, ja muokkaukset eivät ole tuhoavia .

Yksityisyyden arkkitehtuuri ja läpinäkyvyys

Valokuvan perspektiivin muuttamisen tekninen haaste on suuri, ja Apple käyttää käyttäjän yksityisyyden suojaamiseksi porrastettua lähestymistapaa. Yksinkertaisemmat perspektiivin säädöt suoritetaan kokonaan laitteella Applen Foundation Models -mallien avulla .

Monimutkaisemmissa muokkauksissa pyyntö siirretään Private Cloud Compute -pilvipalveluun. Applen arkkitehtuurissa PCC-palvelimilla käsiteltävä data on väliaikaista: sitä käytetään vain laskentatehtävän ajan, ja se "haihtuu" sen jälkeen, eikä sitä tallenneta tai se ei ole kenenkään, edes Applen, saavutettavissa .

Jokainen Apple Intelligence -työkalulla muokattu valokuva – olipa kyseessä spatiaalinen uudelleenkehystys, laajennettu kangas tai puhdistettu kohteen poisto – saa automaattisesti näkymättömän SynthID-vesileiman . Tämä Google DeepMindin teknologialla kehitetty digitaalinen merkki on piilotettu huomaamattomasti kuvan sisään, ja se on suunniteltu tunnistamaan generatiivisella tekoälyllä muokatut kuvat muuttamatta niiden visuaalista laatua .

Koko iOS 27:n valokuvaustyökalupaketti

Spatial Reframing on pääuutinen, mutta se on osa kolmen työkalun kokonaisuutta, jotka uudistavat Kuvat-sovellusta iOS 27:ssä, iPadOS 27:ssä ja macOS 27:ssä (koodinimeltään "Golden Gate"). Kaksi muuta työkalua ovat :

• Extend: Generatiivinen ulosmaalaustyökalu, joka laajentaa kangasta alkuperäisen kehyksen ulkopuolelle ja lisää tekoälyn tuottamaa sisältöä, kuten lisää taivasta, maisemaa tai taustaa parantamaan sommittelua .
• Clean Up (paranneltu): Merkittävästi paranneltu versio olemassa olevasta kohteiden poistotyökalusta, joka käsittelee nyt monimutkaisempia ja vilkkaampia kohtauksia ja tuottaa realistisempia tuloksia poistettaessa ei-toivottuja esineitä tai henkilöitä .

Saatavuus

Ensimmäiset iOS 27:n, iPadOS 27:n ja macOS 27:n kehittäjäbetaversiot julkaistiin heti 8. kesäkuuta 2026 pidetyn pääpuheen jälkeen . Ominaisuuksien on määrä julkaista yleisölle tänä syksynä, oletettavasti seuraavan iPhone-sukupolven rinnalla . Uuden Apple Intelligence -muokkauspaketin käyttö edellyttää iPhone 16:ta tai uudempaa, tai iPadia tai Macia, jossa on Apple Silicon -siru .