Spatial Reframing opiera się na głębokich inwestycjach Apple w obliczenia przestrzenne, a konkretnie na technologii opracowanej dla gogli Apple Vision Pro, która pozwala rozumieć, gdzie znajdują się obiekty w trójwymiarowej przestrzeni względem otoczenia .
Po włączeniu narzędzia w trybie edycji wystarczy dotknąć i przeciągnąć palcem po zdjęciu, aby znaleźć nową, bardziej interesującą perspektywę. Obraz przesuwa się tak, jakbyśmy patrzyli na trójwymiarową scenę . Co ważne, funkcja nie jest ograniczona do zdjęć wykonanych aparatami przestrzennymi – działa na dowolnym zdjęciu w bibliotece, w tym na tych zrobionych starszymi lub zewnętrznymi aparatami
.
Ponieważ przy zmianie punktu widzenia w naturalny sposób pojawiają się "luki", które nie istniały na płaskim zdjęciu, do akcji wkracza generatywna sztuczna inteligencja Apple. Podczas prezentacji firma podkreśliła, że model, działający na połączeniu mocy obliczeniowej urządzenia i infrastruktury Private Cloud Compute (PCC), "generuje nowe treści tylko po to, by wypełnić luki powstałe w wyniku zmiany perspektywy" .
Nowo wygenerowane wypełnienie nie jest jednak sztuczną, idealnie ostrą teksturą. Aby poprawiony obraz wyglądał autentycznie, a nie nienaturalnie, Apple stosuje do wygenerowanych przez AI obszarów naturalne rozmycie głębi ostrości, naśladując sposób, w jaki obiektyw oddałby te części sceny . Oryginalne ujęcie jest zawsze zachowane, a edycje są niedestrukcyjne
.
Wyzwanie techniczne, jakim jest zmiana perspektywy zdjęcia, jest niebagatelne, dlatego Apple stosuje warstwowe podejście do ochrony prywatności użytkownika. Prostsze zmiany perspektywy są przetwarzane w całości na urządzeniu, z wykorzystaniem modeli Apple Foundation Models .
W przypadku bardziej złożonych operacji, zlecenie trafia do chmury Private Cloud Compute. W architekturze Apple dane przetwarzane na serwerach PCC są efemeryczne – są używane tylko na czas trwania obliczeń, a następnie „wyparowują”, nie będąc przechowywane ani dostępne dla nikogo, w tym dla Apple .
Każde zdjęcie zmodyfikowane za pomocą narzędzi Apple Intelligence – czy to poprzez Spatial Reframing, rozszerzenie kadru czy usunięcie obiektu – automatycznie otrzymuje niewidoczny znak wodny SynthID . Ten cyfrowy znacznik, opracowany przy użyciu technologii Google DeepMind i ukryty w obrazie w sposób niezauważalny dla oka, ma na celu identyfikację fotografii zmodyfikowanych przez generatywną AI, nie wpływając jednocześnie na ich jakość wizualną
.
Spatial Reframing gra pierwsze skrzypce, ale jest częścią trio ulepszeń w aplikacji Zdjęcia na systemy iOS 27, iPadOS 27 i macOS 27 (o nazwie kodowej "Golden Gate"). Dwa pozostałe narzędzia to :
Pierwsze bety systemów iOS 27, iPadOS 27 i macOS 27 dla deweloperów zostały udostępnione tuż po zakończeniu prezentacji 8 czerwca 2026 roku . Nowe funkcje trafią do publiczności jesienią tego roku, prawdopodobnie wraz z premierą kolejnej linii iPhone'ów
. Dostęp do nowego pakietu edycyjnego Apple Intelligence wymaga posiadania iPhone'a 16 lub nowszego, albo iPada lub Maca z procesorem Apple Silicon
.
Comments
0 comments