Apple iPhone пространственное видео доступно в бета-версии и выглядит потрясающе на Vision Pro

Пространственное видео на Apple iPhone теперь доступно в бета-версии и выглядит потрясающе на Vision Pro!

Я смотрю на тарелку с суши, парящую передо мной в 3D. Шеф-повар довершает добавки на рыбные рулеты и тунец, разговаривая со мной во время работы. Выглядит ярко. Выглядит реально. Удивительно то, что я только что сделала это видео сама, всего несколько минут назад, на iPhone 15 Pro. И теперь это виртуальная реальность, которую я наблюдаю в красивом 3D на гарнитуре Vision Pro от Apple.

Я свайпаю пальцами и смотрю другие нереальные видео, предоставленные Apple. Семьи в доме, гуляющие по траве. Обнимающиеся вместе. Все в живописном 3D. Мне кажется, что я подсматриваю в их жизнь, что странно и интимно. Но яркость неоспорима.

Я испытываю новую функцию Spatial Video камеры iPhone от Apple, которая теперь доступна в публичной бета-версии iOS 17.2, с окончательной версией, которая выйдет в 17.2 позже в этом году. Она позволяет записывать 3D видео, но для использования ее, вам понадобится лучший телефон от Apple, iPhone 15 Pro, стоимостью 1000 долларов США. А чтобы смотреть видео в 3D, вам потребуется гарнитура Vision Pro от Apple, стоимостью 3500 долларов США, которая выйдет в начале следующего года.

Видео выглядят отлично, а 3D эффект впечатляюще реалистичен. Их очень легко записывать, и можно сохранить их в видеоформате, который будет воспроизводиться в 2D в обычном формате. Но в конечном итоге эта функция создана для продукта 2024 года, который, стоимостью 3500 долларов США, можно сказать, что большинство людей не купит в ближайшее время. Тем не менее, впечатление производит.

Посмотрите на это:

• Открытая бета-версия iOS 17.2 Приложение Journal и многое другое мо...
• Apple Seeds Вторую Открытую Бета-версию iOS 17.2 с Приложением Журн...
• Samsung может представить доступный смартфон за $400 с раскладкой в...

Vision Pro снова меня впечатлила

Впервые я использовала гарнитуру Vision Pro на конференции WWDC от Apple в июне, и я снова вспоминаю о ее выдающихся возможностях отображения. Фотографии и видео выглядят фантастически на гарнитуре от Apple. Можно смело сказать, что Vision Pro превосходит любой дисплей в моем доме прямо сейчас. Да, я бы хотела смотреть видео и фотографии – 3D и просто, если бы у меня был Vision Pro.

Мой второй погружение в Vision Pro, с приставными линзами, подходящими моим потребностям, напоминает мне о том, насколько этот гарнитур меньше, чем я помнил. И также, насколько интуитивный интерфейс.

Настройка отслеживания глаз произошла очень быстро; я смотрела на точки вокруг круга и прикасалась к ним. Я также попробовала новый набор жестов масштабирования, сжимая и раздвигая пальцы, чтобы увеличить фотографии. Этот жест работает с отслеживанием глаз, поэтому изображение увеличивается в том месте, на которое я смотрю. Это кажется как телепатия. Я посмотрела на несколько тестовых фотографий в приложении “Фотографии” и просмотрела фотографии в “Воспоминаниях”. После использования Quest 3 недавно, камеры прохода от Apple и разрешение дисплея находятся на другой планете.

Панорамные фотографии были приятным сюрпризом. Они открываются и окружают меня, будто окна в другие места – почти 3D, на самом деле. И пространственные видео тоже выглядят красиво. Их 3D, почти призрачное качество воспроизведения создает ощущение погружения не столько в видео, сколько в память. Но я смогла обнаружить некоторые ограничения даже во время краткой демонстрации этого опыта.

К сожалению, здесь нет ни одного захвата того, что я увидела или записала: все фотографии, предоставленные Apple, так что вам придется просто следовать и читать о моем опыте.

Пространственные видео на iPhone 15 Pro: Как они работают

Пространственные видео должны быть записаны, удерживая телефон горизонтально. iPhone 15 Pro использует свои главную и широкоугольную камеры рядом в альбомном режиме, чтобы создать 3D видео. Он записывает два видео с разрешением 1080p и 30fps одновременно, разрешая различия в объективе и расстоянии с помощью компьютерной фотографии. Файл сохраняется в формате HEVC, аналогично другим видеофайлам от Apple, с объемом памяти около 130 МБ в минуту. Это не так уж и плохо, вероятно, потому что файлы ограничены относительно низким разрешением и частотой кадров 1080p и 30 кадров в секунду.

Пространственные видеоклипы можно делить через “Сообщения” или “AirDrop”, но могут быть случаи, когда файлы сжимаются в других приложениях, что приводит к потере 3D-данных. Тем не менее, видеоклипы должны быть пригодными для использования в любом месте, как обычный видеофайл, что является отличной новостью для всех, кто задумывался (включая меня самого), нужно ли выбирать “особый” 3D-формат видео.

Вы должны активировать режим пространственного видео, либо в настройках камеры Apple, либо с помощью переключателя формы Vision Pro Mask в самом приложении Камеры. Это ограничивает разрешение и частоту кадров видео, а также означает, что вы должны снимать в альбомной ориентации. Извините, вертикальных 3D-видео не предусмотрено.

Камера дает рекомендации о повороте камеры на бок и поддерживании определенного расстояния от объекта. Мне сказали, что для хорошего пространственного видео я должен был оставаться в пределах 3-8 футов от объекта съемки, но когда я записывал свое тестовое видео человека, делающего суши за столом, я подошел ближе, и все выглядело прекрасно. Я также снимал в хорошо освещенной комнате, но, видимо, режим записи пространственного видео предотвращает регулировку яркости и контраста, что означает, что видеозаписи при низком освещении могут получиться более шумными, чем обычные видео.

Как будет развиваться и редактироваться пространственное видео?

У Apple нет API для 3D-видео в формате HEVC, что означает, что сторонние приложения пока не могут его распознавать. Но возможно разработчики приложений найдут какое-то решение. Также обидно, что нет другого способа просмотра видео в 3D, кроме Vision Pro.

Стереозапись 3D теоретически может быть адаптирована для других VR-очков, например, Meta Quest 3 за $500. Это простая стереозапись, не использующая лидар или 3D-считывание глубины для полностью объемного пространственного захвата. К сожалению, Apple пока не планирует такое.

Видео можно записывать без ограничений, поэтому теоретически можно снять полнометражный фильм в формате пространственного видео 3D. Но клипы можно только обрезать, либо на iPhone, либо на Vision Pro разделе. Финальный проект, программное обеспечение Apple для редактирования видео, получит поддержку редактирования пространственного видео, но только в следующем году. А пока, если вы попытаетесь отредактировать эти видеофайлы в приложении для редактирования видео на Mac или iOS, они будут преобразованы в 2D-файлы.

Также немного обидно, что видео нельзя записывать в разрешении 4K. Vision Pro от Apple имеет впечатляющее качество и разрешение, что становится очевидным, когда я смотрел фотографии iPhone в этих очках и увеличивал их размер, или смотрел панорамные фотографии в режиме оборачивающегося просмотра, который создавал ощущение полного погружения в виртуальную реконструкцию местности, похожую на 360-градусную фотографию. Пространственные видео выглядят очень хорошо, но мне хотелось бы видеть их с более плавными 60fps, в разрешении 4K или и то, и другое. Возможно, когда-нибудь.

Воспоминания о 3D-будущем

Apple часто кажется не просто производителем гаджетов, а компанией памяти. Автоматические фотоколлекции уже называются “Воспоминания”. И вот такое ощущение вызывает пространственное видео на Vision Pro: размытое, как цифровые воспоминания в будущем, похожее на “Менорити Репорт” или “Бегущий по Лезвию”. Это также напомнило мне о некоторой объемной реалистичности, которую я испытывал, используя технологию Google по реальному времени для 3D-конверсаций объемных световых полей Project Starline, но в данном случае я просто смотрел видео.

То, что Apple выбрала для пространственных видео нечеткую рамку, делает видео почти голографическими, словно они проецируются на комнату, а края слегка размываются. Но я бы хотел видеть, чтобы у видео также была стандартная рамка.

Формат пространственного видео от Apple появляется в новой категории в приложении “Фото” и пока не доступен в разделе “Воспоминания”. Возможно, этот новый раздел пространственного видео в “Фото” станет главным репозиторием для новых 3D-впечатлений. В настоящее время, Apple не позволяет делать 3D-пространственные фото на iPhone 15 Pro, только видео, хотя Vision Pro может делать фото сам по себе. Но явно Apple рассчитывает на то, что все начнут записывать видео в этом формате до появления очков, чтобы создать библиотеку подходящих видео.

Это означает, что вам придется помнить о включении пространственного видео и аккуратно его использовать. Владельцы Future Vision Pro будут иметь эту функцию включенной по умолчанию на iPhone 15 Pro, но это малая доля владельцев iPhone. Я включу его, потому что хочу увидеть, как будут выглядеть мои видеоролики на Vision Pro в следующем году. Но если вы не собираетесь покупать сам Vision Pro, то нет особых причин записывать пространственное видео сейчас, хотя, возможно, где-то в далеком будущем вы пожалеете о том, что не сняли съемку на День рождения в 3D. Я уже думаю о том, как я записывал видеоролики на бат-митцвеи своей племянницы на прошлой неделе, и как было бы здорово увидеть это в 3D. Этот новый переключатель пространственной видеокамеры уже вызывает у меня осознание того, что я могу пропустить что-то важное в будущем.

• apple
• Augmented Reality
• Virtual Reality