У нещодавно опублікованому патенті Apple, поданому ще у вересні 2019 року, детально описується система захоплення об'ємних панорам на основі теорії світлового поля (подібна застосовується в камерах Lytro), яка, мабуть, призначена для використання в майбутніх пристроях iPhone і iPad. Ця технологія дозволить звичайному споживачеві знімати об'ємні сцени.
Отриманий таким чином контент може бути відтворений і переглянутий на пристрої або з використанням гарнітури віртуальної реальності. Патент детально описує технологію, яка буде спиратися на поточні зусилля компанії в області доповненої реальності, дозволяючи її споживчим пристроям знімати складні тривимірні сцени.
Щоб здійснити захоплення, користувачам потрібно буде певним чином зміщувати свій iPhone або iPad, оснащений масивом камер світлового поля: наприклад, пересуваючи пристрій у вигляді символу нескінченності, щоб захоплювати зображення навколишнього простору під різними кутами.
Механізм візуалізації перетворюватиме окремі зображення на 3D-панораму з шістьма ступенями свободи (6DOF). В результаті глядач матиме можливість дивитися на об'єкти під різними кутами. Патент був оформлений після поглинання в 2018 році компанією Google компанії Lytro, що займалася просуванням таких технологій на масовий ринок.
На відміну від звичайних камер, масив датчиків світлового поля дозволяє записувати не тільки інформацію про колір та інтенсивність світла, але також і вектор напрямку світла в кожній точці зображення, тим самим отримуючи більш повну інформацію про знімуваний сюжет, ніж звичайна камера. Для захоплення 3D-сцен це може бути відмінним варіантом.
Патент також згадує, що система Apple може використовувати датчики iPhone і iPad для захоплення положення стійки, його рухів та інших подібних метаданих разом із зображеннями з камер - поєднуючи цю інформацію, можна буде отримувати більш точні панорами. Цей метод реконструкції сцени суттєво відрізняється від традиційної 360-градусної панорами, яка знімається з однієї точки, дозволяючи глядачеві тільки переміщати голову у візуалізованій тривимірній сцені. Панорами, отриманими камерами світлового поля, будуть більш реалістичними, зберігаючи об'єкти в правильному положенні, коли користувач переміщується по сцені.
Ні для кого не секрет, що Apple приділяє велику увагу технологіям доповненої реальності: наприклад, ключовим нововведенням останньої моделі iPad Pro стала інтеграція лідара в масив камер. Датчик вимірює відстані до об'єктів, які знаходяться на відстані до 5 метрів.
Майбутнє розширення можливостей доповненої і віртуальної реальності з використанням технології світлового поля не стало б великим сюрпризом, особливо в світлі чуток про роботу Apple над гарнітурою AR/VR. Втім, патент зовсім не означає, що технологія буде виведена на ринок в осяжному майбутньому.
