0
雷鋒網(wǎng)按：Magic Leap 公布產(chǎn)品后，外媒滾石（Rolling Stone）便發(fā)布了這篇詳細的萬字長文。文中，該記者詳細描寫了他所體驗的一系列 Demo，盡管產(chǎn)品實物圖并未曝光，但 Magic Leap 首次向外公布了 6 年時間里，他們在光學方面的探索以及目前取得的進展。由于篇幅過長，雷鋒網(wǎng)將其分為上下兩個部分，整理如下。
今天 Magic Leap 發(fā)布了一款混合現(xiàn)實頭顯，被認為是一款可以重塑人-計算機-現(xiàn)實交互的方式的產(chǎn)品。不同于那種不透明的虛擬現(xiàn)實面罩用虛擬世界取代現(xiàn)實世界 ，Magic Leap 這款稱為 Lightwear 的設備，則類似于護目鏡，你可以同時看到現(xiàn)實世界和虛擬世界，就好像戴著一副特殊的眼鏡。護目鏡與一個稱為 Lightpack 的強大的口袋大小的計算機相連，可以將虛擬的機器人、太空飛船，幾乎任何東西都投射到人們眼前的現(xiàn)實世界中。
創(chuàng)立于 2011 年的 Magic Leap，對人們來說仍然有點神秘，公司聯(lián)合了各路科技作家和分析師，更是從各種大公司和科技大佬那里吸引了無數(shù)的關(guān)注和投資（該公司已經(jīng)籌集了 19 億美元的資金）。雖然這家神秘的增強現(xiàn)實創(chuàng)業(yè)公司已經(jīng)發(fā)布了一些高水平的概念視頻，展示了其將虛擬影像投射到現(xiàn)實世界中的設想，但它此前并沒有向公眾展示出任何一項正在研發(fā)的技術(shù)。所以有些刊物甚至公開懷疑整個事情是否只是一種愚人計劃。公司估值一度持續(xù)上漲，最終的報價為 60 億美元。
整個公司由創(chuàng)始人 Rony Abovitz 一手運作，他是一位生物工程師，曾幫助 Mako Surgical 公司設計出手術(shù)輔助機器手臂。而后在 Magic Lea 創(chuàng)立后的第四年，該公司以 16.5 億美元的價格被出售。
圖中展示了 Magic Leap One 的三個部件，左邊是 Lightpack，中間是 Lightwear，右邊是控制器
公司最后一次公開發(fā)言闡述任何技術(shù)細節(jié)的時間大約是一年前，當時 Wired 雜志應邀到它在南佛羅里達州總部觀看正在研發(fā)的技術(shù)，但卻被規(guī)定不能報道產(chǎn)品硬件的樣子。本月月初，滾石旗下 Glixel 也收到了類似的邀請。Abovitz 邀請我們?nèi)⒂^它在勞德代爾堡的公司總部，向公眾報道介紹其第一款消費級頭顯背后的技術(shù)及產(chǎn)品的外觀和體驗等最終細節(jié)。
這次的產(chǎn)品解密，是我們首次真正看到這個融資數(shù)十億美元的秘密公司這些年來究竟一直在努力研發(fā)些什么，同時也是公司打算于 2018 年發(fā)布其第一款消費級產(chǎn)品的第一步。更重要的是，我們也可以通過這次產(chǎn)品發(fā)布了解，為什么像 Google 和阿里巴巴這樣的大公司會為 Magic Leap 投入數(shù)億美元，為什么一些研究人員認為這個公司的產(chǎn)品也許能與互聯(lián)網(wǎng)的誕生有著一樣的重要性。USC 創(chuàng)新技術(shù)研究院 MxR實驗室的創(chuàng)意總監(jiān) David Nelson 說，像這樣的技術(shù)“正在將我們推向人機交互的新媒介，這是現(xiàn)實世界的死亡。”
我對 Magic Leap 技術(shù)的第一個體驗是在公司一幢獨立建筑物內(nèi)一個大舞臺上進行的，這是公司做測試的地方，可能會在未來被打造成一個主題公園或其他大型場所。我本可以描述出這一個多小時內(nèi)所有我經(jīng)歷的產(chǎn)品演示和我內(nèi)心的想法，但是我已經(jīng)同意公司不透露產(chǎn)品和知識產(chǎn)權(quán)的細節(jié)。很多保密情況下，這些都是永遠無法公開的經(jīng)驗，但是，這樣的不公開協(xié)議也讓像我一樣的來訪者有機會看到真實的魔法。
第一個超大的演示便使我仿佛進入了一個科幻世界，它展示了一個完整的場景，而強大的隱藏式風扇，搖動的揚聲器和一系列電腦控制的彩色照明系統(tǒng)則增強了這個場景的真實性。這是一次令人震撼的體驗，展示出未來的主題公園可以如何發(fā)揮潛在潛能，創(chuàng)造出一個沒有圍墻、不用等待的游樂場。最重要的是，它發(fā)生在舞臺布景中，現(xiàn)實中的布景道具凌亂散布在我周圍的地面和墻壁上，雖然與現(xiàn)實的舞臺布景看起來沒有什么區(qū)別，但卻離我很近。在眼鏡中，那些舞臺上的角色實際上并沒有出現(xiàn)在我周圍的世界，它好像是某種形式的動畫貼紙似的，但它們與舞臺布景相結(jié)合的時候，效果是驚人的。
接著，我們回到這幢建筑物里的一個大房間，房間裝修成一個大型起居室，配有沙發(fā)，桌子，小擺設和地毯。在演示區(qū)域中，我體驗了六十多個不同的產(chǎn)品示范。第一個體驗是和一個漂浮在我的眼睛和遠處墻壁之間的一個浮動機器 Gimble 一起參觀房間。我走過去繞著 Gimble，從不同的角度觀察它，但它仍然靜靜地徘徊在我的視野中，周圍的世界也依然存在，但我無法透過它看到周圍，這就好像它的確有實質(zhì)的重量一樣，完全不是一個平面的圖像。
同時，我驚訝地發(fā)現(xiàn)，我越接近這個機器人，在一定程度上，它的細節(jié)就越清楚。我靠近它時，它并沒有沒有像素曝光，而是突出了我無法從遠處看到的細節(jié)。但是如果我太接近它，它就有點模糊，我會感到與其合為一體，工作人員告訴我，這個演示文件還沒有被更細致地處理過。我還注意到，機器人的聲音也會隨著我的移動和轉(zhuǎn)身而移動。
接下來，系統(tǒng)工程高級總監(jiān) Sam Miller 和高級技術(shù)市場經(jīng)理 Shanna de luliis 向我介紹了將三個屏幕（主要是電腦顯示器）投放到我眼前真實世界的過程。它們看起來像大而平的電視屏幕或顯示器。更重要的是，我可以在任意位置讓它們彈出，甚至可以讓它們同時出現(xiàn)的。在這種情況下，我有三個屏幕，每一個都展示著內(nèi)容，我不得不轉(zhuǎn)頭來觀看他們。當然，Gimble 機器人依然跟隨在我身邊。
之后，我又嘗試了一個小型演示：創(chuàng)建一個浮動的四面電視，每個面的電視都在進行直播。我可以繞著它走，觀看不同的頻道。而且無論我是否在觀看，所有的頻道都在持續(xù)播放。
房間的另一處，一道墻突然出現(xiàn)一道白色的光線，照亮了門的輪廓。門開了，一個女人走了進來。
她走到我身邊，站在了離我?guī)壮哌h的地方，這個人物的細節(jié)程度令人印象深刻。雖然我不會把她誤認做一個真正的人，但她發(fā)出的光和她的設計卻讓她變得很真實。雖然她沒有對我說的話作出反應，但她確實有這種能力。Miller 選擇對她進行手動控制，向我展示了一系列的表情來表達她的情緒：微笑，憤怒，厭惡。我注意到，當我移動或環(huán)顧四周時，她的眼睛是不斷跟蹤著我的。Lightwear 內(nèi)部的攝像頭可以為她提供數(shù)據(jù)，以便保持眼神接觸。這其實有點讓人不安，我最終竟會覺得有些粗魯而避開了與她的眼神接觸。
未來的某一天，這種虛擬人將會是你的蘋果 Siri，亞馬遜的 Alexa 或者 OK Google，它們不再只是一個無形的聲音，他們會和你一起散步，與你對視，為你提供人工智能的幫助。
整個展示是一組奇怪想法的集合，包括一個巨大的漫畫，你可以走過去觀看，就好像好像透過窗戶看一樣。
今年早些時候，我和 Madefire 公司的人員聊天，他們正在努力讓漫畫書的閱讀變得更加生動。在佛羅里達州，我驚喜地看到他們正在進行一些實質(zhì)性的工作：漫畫書的書頁頁面飄浮在咖啡桌上，并且不同的部分漂浮在不同的深度。當我走近它們的時候，我可以在旁邊看到漂浮在空間中的平面圖像，或者從不同的角度觀看藝術(shù)品，比如墻上的一幅畫：畫中描繪了一場風暴，而畫周圍的空氣則充滿了降雨和雷雨的聲音。這是一個微妙卻很震撼的體驗，幫助我更直觀地感受藝術(shù)。
在另一個例子中，他們向我展示了一個他們稱之為容積捕獲（volumetric capture）的快速演示。這個團隊首先去一些拍攝工作室，讓他們用特殊設備拍攝演員的現(xiàn)場表演。然后他們把這個演員放到他們的系統(tǒng)中，基本上可以把演員的現(xiàn)場演出投射到用戶站在的任何房間里。雖然一些細節(jié)的捕捉是粗糙的，比如鼻子和嘴巴之間的細節(jié)有些圓潤，但整體上是能夠讓觀眾在這種投射的真人現(xiàn)場表演周圍走動和仔細觀賞的。我無法描述他們捕捉并顯示的是什么，只能說它的運動非常快，但我對它的視角可以保持不變。即使我在演出中走來走去，它也沒有停頓或減速。而且，我被告知，表演的投影大小可以控制，可以很大，也可以跟我的手掌一樣小。
Abovitz 說：“我把這叫做這個行業(yè)的蟑螂，因為它永遠不會死，它只需要停下來?！?我們正在看他辦公室里的一臺顯示器，上面顯示的是十九世紀三十年代的立體鏡的圖片。立體鏡給同一個物體拍攝兩張照片，每張照片的角度略有不同，然后將兩張圖片放在距離你眼睛一段距離的地方，把一種設備放在你的眼睛上，這種設備用一塊木頭擋住眼睛，使你看不到眼前近處的東西，接著你同時盯著兩張照片，你就會看到 3D 效果。但是 Abovitz 認為自己正在運作的技術(shù)比立體鏡更加實用一些。他說：“這個會引起視覺輻輳調(diào)節(jié)沖突，所以你的眼睛不能正常工作。你是通過一種不自然的方式查看這兩幅圖像，才得到了這個不自然的 3D 圖像。”
一切的 3D 技術(shù)都來自于 1838 年。Abovitz 說：“這對我來說有點令人不安。從 19 世紀開始，這種技術(shù)不斷重現(xiàn)。它出現(xiàn)在電影院的紅藍眼鏡里，出現(xiàn)在六十年代，一直到二十一世紀。當 VR 再次回來時，它好像還是一樣的東西，仿佛我們?nèi)匀煌Ａ粼谀欠N簡單的想法中?！?/p>
1900 年的立體鏡（或叫做 3D 觀察器）
1830 年代的技術(shù)需要使用兩個平面圖像，虛擬現(xiàn)實也要使用兩個屏幕。Abovitz 認為必須要有更好的方法。他對改善虛擬現(xiàn)實并不感興趣，相反，他要尋求一種更好的方式來創(chuàng)造出可以融入人們的現(xiàn)實世界視角的圖像?？傊?，他對混合現(xiàn)實感興趣。虛擬現(xiàn)實可以再現(xiàn)你看到的一切，增強現(xiàn)實可以將圖像投射到你的世界，混合現(xiàn)實則將既能夠?qū)⑻摂M圖像添加到現(xiàn)實世界，但也能意識到你和你的現(xiàn)實世界。所以，打個比方，混合現(xiàn)實中的馬可以知道你的家沙發(fā)在哪里，也不會橫穿你臥室的墻壁。
當 Abovitz 開始研究“我們被困在這個混亂之中，而出路在哪里”時，他發(fā)現(xiàn)在混合的現(xiàn)實和他想研究的世界里，有兩件事情正在發(fā)生。
第一個是所謂的“模擬光場信號”。光場基本上是所有的光線在所有物體上的反彈。當你拍攝一張照片的時候，你正在拍攝一個非常薄的光場。然而，你的眼睛可以看到更多的光場，使你能夠感知場景的深度、運動和許多其他的視覺微妙之處。Abovitz 想知道的另一件事是，光場信號是如何通過眼睛進入大腦，從而進入視覺皮層的。“你所感知的世界實際上是建立在你的視覺皮層上的，”他說，“這個想法是，你的視覺皮層和大腦的的一個部分就像是一個渲染引擎，你看到的外在世界正在被大約 100 萬億的神經(jīng)連接網(wǎng)絡所渲染?！?/p>
目前認為，大約有 40％ 的神經(jīng)功能都被用于視覺處理。當你在做某項運動時，這個比例可以達到 70％-80％。他說：“你基本上正在不斷創(chuàng)造視覺世界。你正在與這種我們稱之為動態(tài)模擬光場信號的巨大視覺信號來共同創(chuàng)造它。這就是我們對宇宙中所有光子波和粒子光場的總稱。就像這個巨大的海洋，它無處不在。這是一個無限的信號，包含了大量的信息?！?/p>
創(chuàng)造人造光場所涉及的大量復雜信息很難做到，更不用說包括運動的方式。2011年，Abovitz 試圖與他在加州理工學院學習理論物理學的朋友解決這個問題。他們提出了一個想法：人類的視覺系統(tǒng)就像一個過濾器。眼睛并沒有看到任何東西，而是從一個大塊光場地中濾出一道較薄的光線，然后將它傳送到視覺皮層上。他說：“在這一點上，我們有自己的一套理論?！?/p>
他們最終得出的結(jié)論是，視覺皮層的功能很像電腦中的圖形處理器。它需要用眼睛給它的信息，為人們創(chuàng)造一個視覺感知的世界。并且它只需要提供很少的數(shù)據(jù)來做到這一點。Abovitz 說：
“也許我們所有人都已經(jīng)在基因中獲得了世界的一個版本，一個持久的模型，我們所做的只是吸收少量變化的數(shù)據(jù)來更新這個模型。這似乎與人們?nèi)绾紊?，繁衍和建造住所這一意義上的演變有著緊密的聯(lián)系，我們所有的視覺空間系統(tǒng)似乎就是從眼球到指尖，從指尖到眼前視場，從眼前視場到遠處的荒野。這種整體結(jié)構(gòu)會讓我們覺得遠處的老虎看來像就像一塊硬紙板，而近處的老虎才是富有細節(jié)的立體形狀?！?/p>
這意味著大腦只會在需要的時候抓住更多的信息，呈現(xiàn)更多的細節(jié)。這完全改變了 Abovitz 和他的團隊在考慮光場問題的方式。如果理論是正確的，技術(shù)就不需要捕捉整個光場并重新創(chuàng)造場景; 它只需要抓住視覺中光場應有的部分，并通過眼睛將傳送送到視覺皮層。Abovitz 稱之為大腦的系統(tǒng)工程視圖。他說：
“我們的想法是，如果我們能夠弄清楚這個信號或是它的近似值，然后把它編碼到芯片里就可以了，這真的很酷。我們可以制造一個小芯片，在眼前再次發(fā)射數(shù)字光場信號。這就是我們的主要思路?！?/p>
一下子，Abovitz 就從試圖解決問題立即轉(zhuǎn)向開始設計解決方案。他確信，如果他們能創(chuàng)造出一個能夠?qū)⒄_部分的光場傳遞給大腦的芯片，他就可以“欺騙”大腦讓它認為看到的是真實的東西。這意味著他們將能擺脫傳統(tǒng)顯示器，而只用人類自身的東西?！岸U宗有兩個核心思想：不展示是最好的展示，外在世界就在心中。至少從我們目前看到的情況來看，這種思想是完全正確的。你所想的一切都在你之外，但卻完全由你自己渲染，由你和你的模擬光場信號共同創(chuàng)造?！?/p>
“每個人都具有天生的創(chuàng)造力，因為每個人都在不斷創(chuàng)造自己的化身世界。你生活的世界，是你自己在不斷創(chuàng)造，不斷的用大腦和光場信號共同創(chuàng)造，這是非常令人興奮的?！?/p>
下一步，就是做一些可以證明理論的東西。
via rollingstone.com 雷鋒網(wǎng)編譯
相關(guān)文章：
Magic Leap光場技術(shù)：是技術(shù)之躍，更是魔法之躍
解讀 Magic Leap One：除了娛樂，AR 眼鏡還能怎么用？ （二）
多個娛樂消費應用，Magic Leap One和其他AR眼鏡有什么不同
解讀 Magic Leap One：光學成像是怎么做的？（一）
關(guān)于 Magic Leap One，行業(yè)人士和讀者們都是怎么看的？
Magic Leap 終于揭開神秘面紗！產(chǎn)品將于 2018 年發(fā)貨
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
