編譯｜Metaverse元宇宙 王秦州
在我眼前的盤子上，一盤懸浮的壽司栩栩如生，仿佛觸手可及。廚師在上面精心制作著黃尾魚卷和金槍魚，每一個(gè)動作都展現(xiàn)出專注與熱情。我驚訝地發(fā)現(xiàn)，宛如生靈的這盤壽司，是幾分鐘前我使用iPhone 15 Pro拍攝的。此刻，我佩戴著Apple的Vision Pro，沉浸在逼真的3D體驗(yàn)中，享受這獨(dú)特的視覺盛宴。
滑動屏幕，我瀏覽了更多神奇的3D視頻。一家人在草地上歡快地散步，彼此緊緊相擁，這一幕幕都讓我感到既陌生又親近。我感嘆這些視頻的生動逼真，卻也疑惑，這樣的體驗(yàn)是否真的能走進(jìn)大眾的生活?
Vision Pro再次給我留下了深刻的印象
現(xiàn)在，我體驗(yàn)著Apple的新款Spatial Video iPhone相機(jī)功能，這個(gè)功能如今已在Apple新的iOS 17.2公開測試版中上線，并將在今年晚些時(shí)候發(fā)布的17.2版本中大放異彩。它可以輕松記錄下3D視頻，但要體驗(yàn)這種功能，你需要使用Apple的最出色的手機(jī)——售價(jià)7999元的iPhone 15 Pro。而若想以3D形式觀看這些視頻，你還需購買售價(jià)高達(dá)3500美元的Vision Pro頭戴式耳機(jī)，這款產(chǎn)品預(yù)計(jì)明年年初上市。
這些視頻令人矚目，其3D效果之逼真讓人嘆為觀止。錄制過程簡單易操作，并且可以保存為普通的2D視頻格式。然而，值得注意的是，這個(gè)功能主要是為2024年的產(chǎn)品設(shè)計(jì)的。當(dāng)然，對于大多數(shù)人在短期內(nèi)可能不會購買。盡管如此，這樣的體驗(yàn)仍然給我留下了深刻的印象。
再次佩戴Vision Pro，那種震撼的視覺體驗(yàn)又一次俘虜了我。設(shè)備的高分辨率和出色的顯示效果讓我驚嘆不已。甚至可以說，這款設(shè)備的顯示效果比我家中的任何顯示器都要出色。我想象著，如果我有了一款Vision Pro，我會沉醉于觀看各種3D和其他格式的視頻和照片。
第二次嘗試使用Vision Pro時(shí)，我選擇了符合我個(gè)人需求的處方眼鏡來搭配使用。這一體驗(yàn)讓我更加深刻地感受到這款頭戴式設(shè)備的舒適度和易用性。設(shè)備操作簡單直觀，讓我可以全身心地投入到每一個(gè)視覺細(xì)節(jié)中。
設(shè)置眼動追蹤功能的過程非常簡單快捷。我只需看著屏幕上出現(xiàn)的圓圈并點(diǎn)擊即可。此外，我還嘗試了新的縮放手勢，只需捏住手指并伸展即可放大照片。這種手勢配合眼動追蹤功能的工作方式非常出色，無論我觀看何處，圖像都會隨之放大。感覺就像是一種心靈感應(yīng)般神奇。我在Photos應(yīng)用程序中瀏覽了一些測試照片，并在Memories中播放了一些照片回放。最近使用Quest 3的經(jīng)歷讓我對Apple的透視攝像頭和顯示屏分辨率有了新的認(rèn)識。
全景照片帶給我一種驚艷的感受。它們仿佛開啟了一扇通往其他世界的窗戶，環(huán)繞著我，讓我感到身臨其境。這些照片幾乎有了三維的效果，仿佛我將能走入其中。同時(shí)，空間視頻也給我?guī)砹藰O佳的視覺享受。這種3D效果、宛如鬼魅般的播放質(zhì)量，無疑讓我沉浸其中，而不僅僅是簡單地觀看視頻回放。
然而，在短暫的體驗(yàn)過程中，我也發(fā)現(xiàn)了一些限制。例如，盡管我能捕捉到照片和錄制的內(nèi)容，但由于所有照片都是由Apple提供的，我只能通過他們的描述來了解我的體驗(yàn)。
15 Pro上的空間視頻是如何工作的呢?
空間視頻錄制需要將手機(jī)保持水平狀態(tài)。iPhone 15 Pro在橫向模式下同時(shí)使用主攝像頭和超廣角攝像頭來創(chuàng)建3D視頻。它一次記錄兩個(gè)1080p、30fps的視頻，并通過計(jì)算攝影解決鏡頭和距離差異。這些文件以HEVC格式保存，與其他Apple視頻文件類似，存儲大小約為每分鐘130MB。值得注意的是，由于文件被限制為相對較低的1080p和30fps分辨率和幀率，這在一定程度上影響了視頻的質(zhì)量。
您可以通過Messages或AirDrop分享您錄制的空間視頻剪輯，但在其他應(yīng)用中可能會壓縮文件并丟失3D數(shù)據(jù)。不過，這些視頻剪輯可以在任何地方作為日常視頻文件使用，這對于那些想要選擇“特殊”3D視頻格式的人來說無疑是一個(gè)好消息。
要在Apple的Camera應(yīng)用程序中設(shè)置或查看Spatial Video模式，您需要使用形狀像Vision Pro的切換開關(guān)。這將限制您的視頻分辨率和幀速率，并要求您以橫向模式拍攝。目前沒有提供3D垂直視頻的功能。有人建議我將攝像頭轉(zhuǎn)向側(cè)面，并與物體保持一定距離。當(dāng)我拍攝制作壽司的人時(shí)，我靠近了一些并且效果非常好。我在一個(gè)光線充足的房間里進(jìn)行錄制，但空間視頻錄制模式阻止我調(diào)整亮度和對比度，這意味著在低光環(huán)境下錄制可能會產(chǎn)生比普通視頻更多的顆粒感。
空間視頻的演變與編輯
Apple的空間視頻，那是一種沉浸式的3D體驗(yàn)，采用HEVC格式，但目前沒有API支持，這意味著第三方應(yīng)用還無法識別這些文件。然而，未來的發(fā)展或許會改變這一現(xiàn)狀，因?yàn)殚_發(fā)者總是能找到解決之道。而且，除了在Vision Pro上觀看，還沒有其他的3D視頻觀看方式，這無疑是一種局限性。
空間3D錄制，理論上，它可以被應(yīng)用于如Meta Quest 3等虛擬現(xiàn)實(shí)(VR)頭顯。這是一種直接獲取的立體視頻，不依賴激光雷達(dá)或深度感知技術(shù)進(jìn)行全移動空間捕獲。然而，目前這還未被納入Apple的計(jì)劃之中，我們期待未來會有所改變。
錄制時(shí)間上沒有任何限制，理論上你可以制作空間視頻的3D長片電影。然而，這些視頻片段只能在iPhone或Vision Pro中進(jìn)行修剪，無法在其它設(shè)備上進(jìn)行編輯，這不得不說是一種遺憾。好消息是，F(xiàn)inal Cut Pro，Apple的視頻編輯軟件預(yù)計(jì)在明年會獲得空間視頻編輯的支持。如果你打算在Mac或iOS視頻編輯器中編輯這些視頻文件，它們最終將以2D格式呈現(xiàn)。
無法在4K分辨率下錄制視頻也是一種遺憾?？紤]到Apple的Vision Pro頭顯具有驚人的質(zhì)量和分辨率，一旦在頭顯中查看iPhone照片，并對它們進(jìn)行縮放或在環(huán)繞視圖模式下查看全景照片，高分辨率和高流暢度的需求就變得尤為明顯。這些空間視頻已經(jīng)表現(xiàn)得非常好，但如果有更高流暢度、更高清晰度的60fps或4K格式，那無疑會更好。也許未來的某一天我們能夠?qū)崿F(xiàn)這樣的錄制體驗(yàn)。
記憶的3D未來
Apple似乎在嘗試的不只是改變生活方式而是記憶的方式。自動化的照片集已經(jīng)被打上“記憶”的標(biāo)簽。在Vision Pro上使用空間視頻的體驗(yàn)，就如同觀看《少數(shù)派報(bào)告》或《銀翼殺手》中的數(shù)字回憶錄一般，給人一種身臨其境的感覺。這讓我想起了使用Google的實(shí)時(shí)3D光場對話時(shí)，所體驗(yàn)到的逼真的3D現(xiàn)實(shí)感，但在這個(gè)案例中我只是在觀看視頻。
蘋果在自己的Photos應(yīng)用程序中為空間視頻添加了一個(gè)新的類別。這在Memories中尚未出現(xiàn)，或許這個(gè)新的Photos應(yīng)用程序中的空間視頻選項(xiàng)，將成為新3D體驗(yàn)的主要存儲庫。目前蘋果只允許iPhone 15 Pro錄制3D視頻，雖然Vision Pro本身可以拍照，但蘋果的目標(biāo)顯然是希望所有人都開始使用這種格式進(jìn)行錄制建立一個(gè)可用的視頻庫。
這意味著你需要記住開啟空間視頻功能，并注意使用它，未來的Vision Pro用戶將在默認(rèn)情況下啟用iPhone 15 Pro上的這一功能，但這只占iPhone用戶的很小一部分。我會開啟這項(xiàng)功能，因?yàn)槲蚁肟纯匆曨l在明年的Vision Pro上的表現(xiàn)。除非你打算購買一臺Vision Pro，否則現(xiàn)在沒有理由去錄制空間視頻。雖然有可能很久以后你會后悔沒有以3D形式拍攝那些特別的瞬間。
原文作者：《華爾街日報(bào)》的喬安娜·斯特恩 (Joanna Stern)