0
雷鋒網按：Magic Leap 公布產品后，外媒滾石（Rolling Stone）便發布了這篇詳細的萬字長文。文中，該記者詳細描寫了他所體驗的一系列 Demo，盡管產品實物圖并未曝光，但 Magic Leap 首次向外公布了 6 年時間里，他們在光學方面的探索以及目前取得的進展。由于篇幅過長，雷鋒網將其分為上下兩個部分，整理如下。
“Hello World”
Magic Leap 的“Hello World”時刻（第一個演示程序）別人可能已經忘記了，但是對于那個四年來一直在努力證明他們的理論的團隊來說，這個時刻這是令人欣喜的。
而且，它只是一個單獨的像素。
Abovitz 說：“無人關心的真正的第一個時刻是當我們使用一個操縱桿操縱一個像素，讓它在房間里移動。“這就像 1970 年索尼的 Pong，當然，并沒有 Pong 復雜。只是一個小點在我們房間里走來走去，但那感覺就像'哇，我們剛才那樣做了嗎？'”
Magic Leap 研發中的“替補”
Abovitz 把 Magic Leap 在 2014 年突破之前的那段日子稱為“沙漠里游蕩”。2013 年，他們開始建造第一個工作原型。Abovitz 向我展示了一幅這個他們稱之為“替補”的原型機圖片。我告訴他，這看起來有點像一個巨大的蒸汽朋克斷頭臺，但他糾正了我。他說：“這更像是《發條橙》里的東西。你把你的頭放在一個巨大的懸掛的矩形電線下面，把你的整個頭鎖定在那里，你只能坐在那里，靜靜地等待，因為研究團隊需要使用信號發生器來欺騙你的大腦去看那里不存在的東西。”
這個過程很慢，并且非常令人沮喪。Abovitz 說，他經常前往“小鷹號”和“土星 5 號”建筑那里尋求靈感。那時，研究團隊是由 NASA 的人員，計算機科學家，物理學家，漫畫創作者等人員組成的。團隊不斷地迭代和重復他們的想法，終于，正如 Abovitz 所說，他們得到了那個可以移動的像素點。
這個點證明了這個理論，之后的創新變得越來越快。不久之后，他們將漫畫書中的角色放入了現實世界，并討論了創建“怪物戰爭”游戲的想法。這個概念可以讓孩子們走進一個真正的游樂場，然后讓他們的大怪物在頭頂上進行“決斗“。
Magic Leap 的“Cheesehead“
這個時間點很幸運。Abovitz 知道公司的啟動資金將要花完了，新的外部融資是必須的。幸運的是，像素和這兩個角色足以向 Google 和其他人展示 Magic Leap 正朝著正確的方向前進。所以 2014 年底，Magic Leap 成功籌集到了 5.4 億美元的風險投資。
他們用這些錢搬出了單間辦公室，開始研究他們技術的第一個可穿戴版本，公司現在親切地將其稱為“Cheesehead”。Abovitz 說：“那時，我們就把光場信號發生器和計算機視覺的東西放在上面，然后裝配起來，戴著頭上開始四處走動。它重達幾十磅。從那時起，我們就知道，是時候將運動和高端計算機視覺結合起來了。“
“Cheesehead“表明，他們可以將信號的關鍵元素提取到納米芯片結構中，并將其放置到晶圓芯片上，以創建數字光場信號，幫助人們欣賞這個新的混合現實世界。這個龐大而奇怪的設備也使得公司正在成長的軟件團隊能夠測試他們正在開發的代碼。
在接下來的兩年里，團隊繼續在軟件，硬件，技術和設計方面進行迭代。為了加快生產和測試周期，他們搬到勞德代爾堡外的一個大空地上，并在地下建立了一個晶圓制造廠。Abovitz 說：“從 2014 年 10 月到 2017 年 12 月，我們進行了非常瘋狂的沖刺。“
在 Magic Leap 龐大的綜合地下室里，機器手臂和工人們靜靜地合作著，組裝著穩定的光子芯片，為公司的新款（或許也是更好的）混合現實助力。Abovitz 指引我走過一條長長的水泥走廊，偶爾停在窗前指指里面的工作。Magic Leap 公司負責硬件和工程項目的高級副總裁 Paul Greco 解釋說，整個地下的地板必須經過修復和重建，才能成為他們所需要的設備。Magic Leap 的工作人員很少告訴我有關制造的晶圓的事情，可能是因為它們似乎是 Magic Leap 的魔法。Abovitz 把這些小巧的、半透明的長方形晶體稱為光子晶圓。但是如果他不說的話，我會把它描述為一種透鏡。
Abovitz 說：“直到目前為止，我們還在努力發展這種信號的概念，并試圖發明這種信號的晶體管。我們不是用晶體管來移動電子，我們正在移動光子，一種三維納米結構的光子信號。我們還沒有給它起名字，暫且先稱之為‘海猴（Sea Monkey）’，當然正式的名字不會是這個，我不想讓海猴們生我們的氣。所以我們要為我們的結構起一個很酷的名字。“
他說，晶圓可以在 3D 納米結構中移動光子，使其能夠輸出一個非常特定的數字光場信號。那些光子晶圓最終會進入一個更大更圓的鏡頭，這個鏡頭會被制造成一副光滑的護目鏡。在樓上一個安靜的展廳里，我第一次仔細觀察完整的 Magic Leap 硬件。Magic Leap 設備的所有組件都以相似的設計語言捆綁在一起，公司的高級副總裁 Gary Natsume 將這些灰色的晶圓稱為月球的灰塵和完美的圓圈。這個系統，也是公司的第九代硬件，由以下三部分組成：一個頭顯，一個由單根連線連接的豆莢型微型電腦和一個控制器。頭顯看起來就像一副用厚皮帶固定的護目鏡，它們既輕巧又時尚（至少比目前的 VR 頭顯都要更時尚）。“鏡頭的形式非常時尚，” Natsume 說，“我們最終的愿景就是它可以像眼鏡一樣，人們每天可以佩戴。”
較大型號的 Lightwear
Natsume 表示：“固定眼鏡的頭帶使用的是‘寺廟皇冠’的設計。這是我們研究如何平衡頭部重量的成果。”戴眼鏡時，用戶需要拿著帶子的任一側，拉開后，眼鏡會分開成左、右、后三部分，用戶可以像戴頭帶一樣放在頭上。兩根短的電線便從頭帶后面伸出，合并成一個，放入 Lightpack 中。Lightpack像是平滑連接起來的兩個圓形豆莢，中間留有一些空隙。這樣的設計可以讓你夾在口袋里，或者掛在類似于吉他上的那種肩帶上。
眼鏡將分為兩種尺寸，額頭墊、鼻托和太陽穴墊都可以定制，以符合用戶的舒適度和適合度。最終產品推出時，公司還將為戴眼鏡的客戶提供專門配鏡的細節。
控制器是一個圓形的塑料手柄，握感舒適，上面有一系列功能按鈕，是一個六度自由運動觸覺感應觸摸板。
Lightwear 和 Lightpack 在設計上幾乎如同玩具一般，并不是因為他們很廉價（事實上絕不便宜），是因為他們同其他頭顯和控制器相比實在太輕。不過，Abovitz 很快就指出制造這個小玩意需要多少錢。他說：
“這實際是一臺獨立的電腦。就像 MacBook Pro 或 Alienware PC 一樣，它有一個強大的 CPU 和 GPU。它有一個驅動器，配有無線網絡，所有應匹配的電子附件，所以它就像一臺折疊起來的電腦。”
較小型號的 lightwear
接著，他指著 Lightwear 說：“這里還有另一臺功能強大的計算機，它是一臺可以感知世界，進行視覺處理的實時計算機，它具有機器學習能力，因此能夠不斷了解用戶外界的情況。所以你在這里看到的可以說是一臺重量最輕的工程衛星。”
Lightwear 還可以通過四個內置麥克風感知用戶周圍的聲音，并使用一個實時計算機視覺處理器，以及六個外部攝像頭以實時跟蹤佩戴者和他們周邊的世界。內置于頭顯太陽穴位置內部的微型高端揚聲器為用戶提供了立體聲，并可以對用戶的動作以及與用戶做出的互動動作做出反應。他說：“這不是一副連著相機的眼鏡。這就是我們所認為的空間計算機，它有著完整的空間意識。“
不過，Abovitz 拒絕透露頭顯的 GPU，CPU 及其他信息，也沒有提供電池壽命信息。他說，除了他們還在進行電池優化之外，其他的信息他們需要稍后再發布。當我們離開的時候，我注意到一張被白紙罩著的長桌子。“那里有什么？”我問。Abovitz 說，“是下一個原型機。”
當大家在收拾演示室里的東西時候，Miller 問我在想什么，我告訴他：眼鏡非常舒服，我幾乎忘了正在戴著它。電腦的附件整齊地裝在我的口袋里，耳機的系繩也沒有纏在我身上，控制器的感知反應幾乎是即刻的，聲音既準確又響亮。但我還有一個擔心：視場。
像微軟使用不同技術來實現混現實的 HoloLens 一樣，Magic Leap 的 Lightwear 也不能提供一個與你的眼睛相匹配的視野。相反，Magic Leap 的虛擬圖像出現在一個大致為矩形的視野中。由于視野是在空間浮動的，我無法進行測量，所以我做了如嘗試：我花了幾分鐘先拿出一張信用卡在我面前，然后用我的手比劃測量這個看不見的框架的大小，結果是信用卡太小了。最終我得出這樣的結論：視野空間大約是距離你半臂遠的 VHS 錄像帶的大小。它比 HoloLens 的視野大得多，但視場依然是個問題。
Miller 說：“我可以說，我們下一代的硬件技術會大大地顯著拓展視野。因此，目前這些設備上所能提供的視野大概就是這么大。但下一代產品的視野將大得多。我們的同事正在實驗室研究這些東西。”
De Luliis 補充說，開發者還可以選擇淡化邊緣，這樣圖像就不會出現這樣尖銳的邊緣，而你的大腦則會自然而然地填補邊緣的空白。”
Miller 想給我展示另一個巧妙的“把戲”。他走到大房間的盡頭，叫我彈出機器人 Gimble。機器人乖乖地出現在遠處，漂浮在 Miller 旁邊。然后 Miller 走進機器人的那個空間，他突然就消失了，算是大部分的消失了，因為我仍然可以看到他的腿從機器人的下面顯出來。
我的第一反應是：“這個把戲確實挺有趣”，但是后來我才意識到，我剛剛看到的是一個由 Magic Leap技術創造的虛構物體，完全模糊了現實世界的人類的情景。我的眼睛看到同一地方存在了兩個物體，而我的大腦卻認為機器人是真的，而工程師是虛擬的，因此我忽略了 Miller 只能看到Gimble（至少這是后來Abovitz 后向我這么解釋的）。
最后，我去了一個單獨的房間，這里的體驗我終于可以描述所有細節。冰島實驗搖滾樂隊 Sigur Ros 早已經和 Magic Leap 進行了一些合作，創作出一種他們稱之為“音景（soundscape）”的體驗。對于這個特別的演示，團他們讓我把耳機插入頭顯里。“你將要看到的是一個叫 Tonandi（冰島語為聲音精神）的項目。”該項目的技術負責人 Mike Tucker 告訴我，“你將要看到的不是一段錄制的音樂，而是一段互動的音景。你看了就知道他們為何喜歡這樣稱呼它。“
Tonandi 首先會在你周圍創鍵一棵“空靈樹”，然后等著看你下一步做什么。漂浮在我周圍的是一些跳舞的小精靈。當我向他們揮手時，他們便會創造出一種哼鳴的音樂，繼而有的會消失，有的會圍著我轉圈。隨著時間的推移，不同的小精靈會發出不同類型的創作音樂，我會觸摸它們，向它們揮手，點擊它們，看看我與它們的各種互動會為我周圍越來越多的管弦樂合唱團增添什么樣的因素進去。
很快，豆莢就從地毯和咖啡桌上的長莖和草地上噴出。豆莢像花蕾一樣張開，我發現黃貂魚樣子的小精靈在我周圍漂浮著，發出五顏六色的光。我的動作，不只是在改變我周圍這個口袋般的世界，它還可以讓我參與到音樂共同創造中，將我的行動與 Sigur Ros 的聲音結合起來。
Tonandi 的體驗毫不費力。這種超現實的、魔幻現實主義的音樂創作，可以交給任何人去嘗試。但在幕后，卻需要很多努力。Tucker 說，這個項目使用了很多 Magic Leap 的技術。他說：“我們正在為 Magic Leap 使用一些獨特的功能。我們正在使用空間的網格劃分，使用眼動追蹤，而且我們將使用手勢輸入系統作為我們大部分的產品體驗技術。”
后來，在一間會議室午餐時，Abovitz 說：“這個團隊曾經嘗試過恐怖體驗的實驗。那真的這太可怕了。人們都不會想要再進那個屋子了。所以我們說，‘好吧，現在就把這個實驗放在一邊吧。’”
還有很多的可以體驗和觀看的東西，但是我的時間有限。我曾經希望看到的一個體驗是基于 Weta Workshop （那個為電影“指環王”，“銀翼殺手 2049 ”和“ 仙境傳說”等制作特效和道具的公司）而創造的。但是公司說它不能用于測試體驗。
一個正在進行開發的游戲是由 Weta workshop 新成立的 Weta Gameshop 部門創建的。它圍繞著“Grordbort 博士的神奇宇宙”概念展開（這個概念由 Weta 概念設計師 Greg Broadmore 創建并由 Weta聯合創始人 Richard Taylor 和 Tania Rodger 所共同擁有）。Taylor 告訴 Glixel，目前在 Broadmore 的新部門有大約 55 人正在進行這款游戲的開發工作。Taylor 說：“我們已經為此工作了大約五年。我們一直在開發與 Magic Leap 硬件和軟件開發直接相關的游戲。”
Taylor 相信 magic Leap 推出硬件的明年，這款游戲也將會推出。這款游戲是一個基于“Grordbort博士的世界”為背景的第一人稱射擊類游戲。在這個游戲的原小說中，一個機器人星球發現了一種個入侵地球的通道，玩家必須阻止他們的入侵，游戲中需要使用系統的控制器，看起來像是一種射線槍。Taylor說：“當你進入游戲時，你可以在所在空間的墻壁上看到這個通道，由此看到機器人星球。游戲從你身邊這個冷靜的機器人 Gimble 開始，接著是與 Grordbot 博士的聊天，最后一切都崩潰了，你必須加入戰斗。這是最狂熱的現實世界體驗。“
Magic Leap 數十億美元的技術有時很容易被低估。在某些方面，這個技術的關鍵創新之一卻讓你感覺到它的存在。
Abovitz 和他的團隊希望能夠解決的一個基本問題是：幾乎所有人都會發現，在長時間使用任何類型的屏幕后，使用 VR 頭顯會感到一些不適。Abovtiz 告訴我：“所以我們的最終目標是將空間計算做成世界上許多人可以在任何地方、全天使用的東西。這是個雄心勃勃的目標。實現目標仍然需要時間。但是較長時間的佩戴需要一些輕便舒適的東西。它必須像襪子和鞋子一樣適合你。它必須非常貼合你的臉，根據你的身體進行調整。而且我認為，為了佩戴整天，一個基本要求就是它的信號必須與你非常匹配。”
他說：“尋找一種重新創造光場的方式，意味著觀賞的體驗要如同你環顧四周一樣自然而舒適。這就是 Magic Leap 工作的基礎。你甚至不用再想這件事。你只是想知道我們把它設計的很好。我們認為這是重要的第一步。”
雖然這項技術的基礎可以得到解決，但是 Abovitz 承認，當我提出有限的視野時，就說明用戶體驗仍然并非完美。他表示，該公司仍在微調設備體驗。他說：“我們認為這樣的視野對 ML1（即 Magic Leap 第一款消費級頭顯）來說是可行的。視野問題我們將繼續在 ML2 和 ML3 以及更高版本中進行迭代的工作之一。 ”
Abovitz 并沒有真正回答我關于技術的另一個主要問題：能否提供多個焦點。從理論上講，光場應該允許你從透過一個虛擬形象看到背后到現實，同時讓這個更近的虛擬形象失焦。不過我所體驗的展示并沒有真正提供一個機會來查看 Magic Leap 的眼鏡是否能夠有效地實現這一點。所以當我問產品是否支持多重焦點技術時，他在接下來的電子郵件中告訴我：“Magic Leap 的 Lightwear 利用我們專有的數字光場技術，這是我們的模擬光場信號的數字版本。開發人員可以創建應用程序和各種角色，并在空間中正確地顯示，它允許用戶自然地關注感興趣的對象，就像他們在真實世界中一樣。”
當我提出一個更加明確的答案時，Abovitz 因為對專有信息的考慮拒絕了我的答案。
Abovitz 認為，他們首次發布的硬件的性能良好可行，這也解釋了為什么他們把它稱為 Magic One（創作者版）。對于 Magic Leap 來說，創作者是開發者、品牌商、代理商，也包括早期的消費使用者。他說：“購買第一臺 Mac 或第一臺 PC 的消費者，都會購買第一個 iPod。就是那樣的一群嘗鮮者。但 Magic One 絕對不只是一個開發工具包。如果你是一個“消費—創造者，拿到產品的你將會很高興。“
但是 Abovitz 也拒絕提供給我一個發貨日期或價格。但他確實表示，毫無疑問，第一個版本將在 2018 年發布。至于成本：“我們有一個內部的價格，但我們還沒有討論過這個問題。預購和定價將會在一起。我只能說，我們不只是一個高級計算系統。我們更是一個優質的手工藝術般的電腦。“
盡管沒有回答一些關鍵的問題，但是在 Magic Leap 的走廊和小路散步的那一天，讓我更加清楚地知道公司要做什么，他們要的不僅僅是頭顯，或是它正在運作的高科技光場技術。Magic Leap 在將他們的系統推向世界的時候，是將大量的技術整合到一起，有朝一日，他們可以徹底改變我們處理所有技術的方式。
光場光子學，這個可以將虛擬現實投射進真實的自然光場中的技術，可能是目前顯示技術中最大創新，但這里還有更多的東西。視覺感知系統正在跟蹤你活動的世界，它可以注意到平坦的表面、墻壁、各種物體等事物。其結果就是，這樣的頭顯可以看你在做什么，然后對你的行為做出適當的反應，這或許意味著在真正監視器旁邊掛一個混合現實監視器，或者是確保你的客廳中浮動的魚不會撞到沙發上。房間映射也可以用來跟蹤你放在真實世界里的東西，所以當你回來的時候，他們就在那里等著你。比如，如果你睡前將六臺虛擬現實顯示器排列在真實的桌面上方，那么第二天它們還在放那個桌子上排列著。
雖然我們不知道 Lightpack 內置的微型計算機的規格，但我們知道它是可以用于運行一個可以看到真實世界并做出反應的電子游戲的。控制器是與系統交互的一個直接方式，但它也可以使用 Magic Leap 自己的手勢跟蹤，其中不僅包括手和手指，還包括頭部位置、語音、眼動追蹤等等。
最后，這項技術不僅提供了光場，而且提供了一個聲場，可以跟蹤你的動作并作出反應，無論你身在何處，它都可以確保音頻始終來自物體。它甚至可以向用戶傳達距離和強度信息。這些只是用來創建 Magic Leap One 及其 Lightwear，Lightpack 和控制器的硬件和軟件。
明年年初，Magic Leap 公司計劃開放創建者門戶并提供對其軟件開發工具包的訪問權限。它不僅僅是 Magic Leap 和它的合作伙伴（如Weta，Sigur Ros，ILMxLAB和Twilio）獨享的，這將是每個人都能獲得的體驗。
當體驗活動的結束時，公司團隊走到 Abovitz 辦公室跟我說再見。他堅持把我帶到入口處。穿過 Magic Leap 的山洞，到達出口時，Abovitz 停下了腳步。在樓梯間的墻上，單獨懸掛著一幅畫。是薩爾瓦多·達利（Salvador Dali）的作品，標題是“用基于全息圖和計算機的眼鏡觀看想象中的物體”，Abovitz說，他認為這就代表著 Magic Leap 在重現光場方面所做的工作。他用手指向了圖中的相似之處：圖像下方的數學式涂鴉、眼鏡、視野的插圖以及似乎是亮起的視覺皮層。
在我看到了被視覺皮層和大腦吸收處理過的外部圖像的情況下，Abovitz 看到了相反的情況：一張畫顯示出計算機生成的圖像被注入大腦，然后投射到用戶的世界中。
這是 Dali 的“Magic Leap” ——通過超現實主義者的眼睛看到的魔幻現實主義。
via rollingstone.com雷鋒網編譯
相關文章：
解讀 Magic Leap One：除了娛樂，AR 眼鏡還能怎么用？ （二）
多個娛樂消費應用，Magic Leap One和其他AR眼鏡有什么不同
解讀 Magic Leap One：光學成像是怎么做的？（一）
關于 Magic Leap One，行業人士和讀者們都是怎么看的？
雷峰網原創文章，未經授權禁止轉載。詳情見轉載須知。
