Просторове рефреймінг від Apple — це генеративний штучний інтелект, який я можу відстати як фотограф

1

Apple врешті-решт наділив AI-редагування справжніми «зубами»

Від ІІ на WWDC ми чекали багато чого.
Чесно кажучи, ми чекали на це всією душею.

А чого ми не чекали? Фотографічного інструменту, який справді має сенс.

Не чергового «введи запит і отримаєш цуценя у космічному кораблі».
Це було зовсім інше.
Просторова реконфігурація (Spatial Reframing).

Під час ключового виступу у понеділок Apple представила новий набір інструментів для редагування. Стандартний набір? Функція “Прибрати зайве” (Clean Up). Корисна, але швидко забувається. Потім з’явилася можливість розширити межі зображення. Теж приємно.
Але саме Spatial Reframing змусило мене завмерти.

Вона дозволяє змінити точку зйомки, тобто місце, де ви стояли, коли натискали на затвор.

Все генеративно. Все розташоване у вкладці «Інструменти» у додатку «Фото» на iOS 26 (ну, тепер це вже iOS 27, час летить). Якщо хочете поекспериментувати, є бета-версія для розробників.

Менше «інфошуму». Більше душі.

Фотографи зараз ненавидять ІІ.
І на те є вагомі причини. Інтернет тоне в безликому, беззмістовному смітті, створеному нейромережами. Власний додаток Apple Image Playground лише роздмухує це багаття.
Так, навіть там.

Але генерація – це не бінарна величина.

Це не обов’язково означає створення реальності з нічого. Іноді це просто видалення бака для сміття поруч з черевиком вашого об’єкта зйомки. Це врятована ручна праця. Google Pixel теж вміє це робити своєю «Магічною гумкою». Це просто ефективна заміна пікселів.

Spatial Reframing використовує ту ж технологію, але в благих цілях виправлення поганої композиції.
Ви зробили знімок. Ви стояли на три дюйми ліворуч. Кадр виглядає перевантаженим. Тепер ні.

Гра з паралаксом

Apple вже займається крутими речами із глибиною через «Просторові фото». Система аналізує глибину на 2D-зображенні та створює ефект 3D. Ви нахиляєте телефон і об’єкт відокремлюється від фону. Це працює на екранах блокування. У Vision Pro виглядає, мабуть, нормально (я не володію шоломом, так що прийміть це з часткою скепсису).

Поділ не ідеальний. Воно не завжди виглядає як дешева робота із зеленим екраном, але помітно.

Реконфігурація бере цю карту глибини та робить її своєю зброєю.

Перетягніть зображення до редактора. Посуньте перспективу.
Фон рухатиметься інакше, ніж передній план. Начебто ви справді підійшли туди.

Lightroom намагається робити те саме. Ви можете обертати та спотворювати.
Але це ламає співвідношення сторін. Викривляє краї. Виглядає фальшиво.

Apple виправляє ці розриви на краях.

Після того як ви зрушуєте кадр, генеративний ІІ заповнює порожнечі. Для аналізу глибини використовують локальні моделі на пристрої, а для рендерингу нових пікселів підключається Private Cloud Compute від Apple.

Алок Дешпанда, керівник відділу програмних рішень для Камери та Фото в Apple, висловився дуже чітко:

Система генерує новий контент лише заповнення порожнеч, що виникають при зрушенні перспективи. Зберігається візуальна узгодженість.

Підсумок: ви отримуєте фото з тієї точки огляду, яка “хотілася”, але яку ви не змогли відобразити.

Це обман?

Можливо.
Чи перетворює воно розмите, тісне місиво на картинку, яку можна роздрукувати? Так.

Раніше я вважав, що у редагуванні є суворі правила. Кроп є кроп. Зсув є зрушенням. Тепер телефон просто… здогадується, як заповнити інше.
І це працює. Здебільшого.

Бета-тест уже відкрито. Потік «інфошуму» продовжується. Але цього разу?
ІІ не намагається замінити нас.

Він просто заповнив порожній простір, де мали стояти мої ноги.