Spatial Reframing від Apple: AI-інструмент, який виправляє композицію фото після знімка

Функція з'являється разом із двома іншими інструментами редагування на основі ШІ — Extend та оновленим Clean Up — усі вони розміщені в новому розділі "Apple Intelligence Tools" в інтерфейсі редагування Photos . У той час як ці інструменти вдосконалюють існуючі парадигми редагування, Spatial Reframing є принципово новим типом правки, який стирає межу між захопленим спогадом і обчислювально переосмисленою сценою .

Як працює Spatial Reframing

Spatial Reframing спирається на глибокі інвестиції Apple у просторові обчислення, зокрема на технологію, розроблену для Apple Vision Pro, щоб розуміти, де в тривимірному просторі знаходяться об'єкти відносно їхнього оточення .

Щойно ви активуєте інструмент у режимі редагування, ви можете торкнутися та перетягнути палець у фото, щоб знайти нову перспективу, яка вам більше до вподоби. Коли ви змінюєте точку огляду, зображення фактично панорамується, ніби це 3D-сцена . Це стосується не лише фото, зроблених на камери з просторовою зйомкою; функція працює з будь-яким зображенням у вашій бібліотеці, включаючи фото, зроблені на старі або сторонні камери .

Оскільки нова точка огляду природним чином відкриває "прогалини", яких не було в оригінальному плоскому зображенні, генеративний ШІ від Apple заповнює їх. Під час презентації Apple наголосила, що модель, яка працює на комбінації обробки на пристрої та інфраструктури Private Cloud Compute (PCC), "генерує новий вміст лише для заповнення прогалин, де було зміщено перспективу" .

Важливо, що цей новостворений вміст не просто вмальовується як різка штучна текстура. Щоб допомогти перекомпонованому зображенню виглядати автентично, а не неприродно покращеним, Apple застосовує природне розмиття глибини різкості до згенерованих ШІ ділянок, імітуючи те, як об'єктив міг би відтворити ці частини сцени . Оригінальний знятий момент завжди зберігається, а редагування є недеструктивними .

Архітектура приватності та прозорість

Технічний виклик зміни перспективи фотографії є значним, і Apple використовує багаторівневий підхід для захисту конфіденційності користувачів під час обробки. Простіші налаштування перспективи виконуються повністю на пристрої з використанням фундаментальних моделей Apple .

Для більш обчислювально складних перекомпонувань запит передається до Private Cloud Compute. В архітектурі Apple дані, оброблені на серверах PCC, є ефемерними; вони використовуються лише протягом тривалості обчислювального завдання та "випаровуються" після цього, не зберігаючись і не будучи доступними нікому, включаючи Apple .

Кожне фото, відредаговане за допомогою інструменту Apple Intelligence — чи то просторове перекомпонування, розширене полотно або видалення об'єкта — автоматично отримує невидимий водяний знак SynthID . Ця цифрова мітка, розроблена з використанням технології Google DeepMind та непомітно прихована в зображенні, призначена для ідентифікації фото, які були модифіковані за допомогою генеративного ШІ, без зміни візуальної якості знімка .

Повний набір інструментів для фото в iOS 27

Spatial Reframing є головною функцією, але вона є частиною трійки оновлень програми Photos на iOS 27, iPadOS 27 та macOS 27 (кодова назва "Golden Gate"). Інші два інструменти :

• Extend: Функція генеративного розширення, яка збільшує полотно за межі оригінального кадру, додаючи згенерований ШІ вміст, такий як додаткове небо, ландшафт або фон, для покращення кадрування .
• Clean Up (оновлений): Значно покращена версія існуючого інструменту видалення об'єктів, яка тепер працює з більш складними, заповненими сценами та дає більш реалістичні результати під час видалення небажаних об'єктів або сторонніх осіб .

Доступність

Перші бета-версії для розробників iOS 27, iPadOS 27 та macOS 27 були випущені одразу після основної доповіді 8 червня 2026 року . Функції стануть доступні для публіки цієї осені, очікувано разом із наступним поколінням iPhone . Доступ до нового набору інструментів редагування Apple Intelligence вимагає iPhone 16 або новішої моделі, або iPad чи Mac з Apple Silicon .