4
嘉賓介紹: 聶崇嶺，進化動力CTO。曾任職于瑞士Enclustra設計咨詢公司，專注于機器學習、高性能異構計算系統(tǒng)，曾參與多項Credit Suisse、ABB、Siemens、Roche等跨國公司技術研發(fā)項目；碩士畢業(yè)于瑞士蘇黎世聯(lián)邦理工大學（ETH Zurich），師從ACM和IEEE Fellow, Gustavo Alonso教授。雷鋒網
今天Magic Leap發(fā)布全新“水母版”Demo 演示，讓一些AR癌患者又開始欲罷不能了，這么“黑”的黑科技，會成為下一個Google Glass還是全新的AR涅槃者，任我們怎么騷擾Rony Abovitz他也不告訴我，但不能阻止我大天朝人民的好奇心啊， 所以聶崇嶺大牛隆重登場，為我們解讀他眼里的Magic Leap，下面開始進入干貨時間（此處應有掌聲~）雷鋒網雷鋒網
這個問題我們和團隊成員討論過，我們認為可能有以下幾個點：
其一，Demo演示機器體積過大，這個通過外媒拍攝的照片也一定程度上得到了驗證；
其二，原型機必定操作繁瑣；
其三，拍攝Demo視頻，對周圍環(huán)境要求嚴格；
其四，效果不穩(wěn)定和系統(tǒng)魯棒性上 可能還有不足，導致不能直接進入；
最后沒有做過產品化的準備，如果放出操作機器演示的Demo，無疑會透露出以上各種弊端，極大的降低用戶的預期，這可能不是Magic Leap想看到的。
（系統(tǒng)魯棒性？）
是的。我們通過網上一些公開的信息和投資人的渠道了解過，Magic Leap的Demo是對拍攝房間提前做過建模的，但是依然有可能不能一次成功拍攝出理想效果的Demo視頻，對視頻中 Magic Leap設備定位的精度，房間3D模型構建的精度 都是影響系統(tǒng)魯棒性的因素，系統(tǒng)能否適應各種不同的應用場景都是系統(tǒng)魯棒性的體現(xiàn)，具體到現(xiàn)在ML的兩次Demo視頻來看，場景主要是室內，光線溫和不明亮的場景。
（從Magic Leap的技術演示視頻中，除了演示收到信息后，在桌子上加載珠穆朗瑪峰的全息信息圖，還展示了如何購物,水母漂浮等效果。這些效果相比之前的demo哪里驚艷了？）
這個是ML的第一個Demo視頻，我先討論這個視頻有哪些驚艷之處，之后對比第二個Demo視頻來看有哪些進步。
第一個Demo視頻中，一個小機器人從辦公桌下面彈跳亮相，之后隨著攝影機視角的變化，機器人被辦公桌腿所遮擋，這里已經有了一個關鍵技術，就是對物體（機器人）在空間的定位和空間周圍深度信息（桌子腿）的感知。
這是第二個Demo視頻，在這個Demo視頻中， 我們看到ML在桌子上加載了珠穆朗瑪峰的全息信息圖，在這里，我認為ML做了相對于第一個Demo更復雜的處理，就是要檢測出桌子的整個平面，之后把珠峰的全息圖放在這個桌面上。
（如何比第一個Demo更復雜？）
雖然它們都是提取深度，珠峰的全息圖像有個更動態(tài)的變化，這里要時刻保持全息圖像和桌子平面的相對關系。
最后一個水母漂浮的場景，我認為這是一個比較大的突破，這里攝影機的視角（ML的設備）和 水母本身都在移動，ML的算法能夠在計算自身位置的同時，計算水母群在空間中的位置，同時計算出兩者直接的關系，再把水母群投影回攝影機（ML設備）視角，這個相對于之前只有攝影機移動的Demo更近了一大步。
“AR的真正核心競爭力并不在于其顯示方式，而在于計算機視覺上。”這點我是同意的。
計算機視覺的創(chuàng)新點，說實話，我并沒有找到ML在CV領域的重大創(chuàng)新。它更像是一個顯示技術創(chuàng)新公司，這種創(chuàng)新的顯示技術可能可以把AR的用戶體驗帶上一個新的層次，Magic Leap Demo視頻中所展示的出的CV技術，在Microsoft RESEARCH, Google等公司，已經SIGGRAPH等頂級會議上都可以看到，Magic Leap做的好是 把這個前沿的CV技術和自家創(chuàng)新的顯示技術融合進了AR的應用，給大家展示出了Demo。
是說它的進步 在計算機視覺上還停留在光場技術階段（非數(shù)字全息技術階段）；上面所提的demo各種具體的牛掰技術主要是自家創(chuàng)新的顯示技術的進步？
技術本事很牛是真的，包括CV和顯示技術，CV上的也就是計算機視覺上的 重大創(chuàng)新點沒有看到，（因為）CV的技術進步一向是整個行業(yè)的共同進步。
恩，這里我們看到的“芯片”跟我們所說的芯片不太一樣，它是一種基于MEMS微機電的鏡片或者叫顯示器，里面有許多可以被控制的開關，控制鏡片上每個像素點的光路，整合起來就是一個光路組成的3D Array，類似于下面的這張圖：
每一個點的光路都可以被單獨控制，這也就是這個“芯片”的功能。
（那除了這個， 剩下的還要搭配什么別的芯片一起工作？）
鏡片/芯片上的圖像可以是透過鏡片來自于真實世界，也可以是通過鏡片/芯片邊緣的接口來自ML的projector，這個芯片負責的主要是顯示，AR中的計算機視覺計算工作 并不在這個片上完成。
我并不認為這個是一個騙局，首先我們要說的是AR本身肯定不是一個騙局，如Microsoft Google FB等大公司在這方面都有技術研究。從ML放出的各個Demo來看，這家公司也是有著深厚的技術積累在的，ML在一些早期的Demo中加入了需要酷炫CG效果，ML在一些早期的Demo中加入了需要酷炫CG效果，后續(xù)正式設備所拍攝的效果沒有CG版本的更黑科技，大家心理上有個期望的落差，這個可以理解，AR的相關技術現(xiàn)在處于一個相對早期的階段，肯定還有不盡如人意的地方在，這也正是為什么我們看到ML的最新Demo沒有最早CG版本的炫酷了，不過這更能體現(xiàn)出ML技術的真實，不是一個CG騙局。
（恩，如果有人說因為有了Google Glass的前車之鑒，所以大家對這個有了騙局的擔憂，怎么看這個問題？）
技術的進步和迭代就是這樣，我們不可能要求一個新興領域在早期能夠直接產出完美的產品，比如在膠片照片機盛行的年代，誰也無法通過第一代CCD Sensor的規(guī)格想到 數(shù)碼相機會成為主流。
我認為現(xiàn)在提及Magic Leap的FOV，以及和Microsoft的Hololens對比FOV，還為時尚早； 一款原型機在便攜性上還沒解決，F(xiàn)OV可能沒有用武之地，但是根據(jù)Magic Leap的顯示原理，理論上是可以克服這個問題，實現(xiàn)更大的FOV，甚至光場的顯示，這不是Magic Leap產品化路上的最大障礙，大家如果對Magic Leap的顯示技術原理感興趣，可以是參考一下Magic Leap Inc.最近幾年申請的專利_US20140003762 Patent 有興趣的朋友 可以看看，上面有細致的描述，ML在顯示技術上做了哪些嘗試有哪些突破。
大家都是AR的設備，Hololens已經放出了開發(fā)者套件，接近大規(guī)模量產。而Magic Leap還是處于一個原型機都很神秘的階段，從他們背后使用的計算機視覺技術來看，是相通的，大家使用了類似的技術，深度提取，SLAM, 3D重構，Object Tracking等等。
不同點在 大家的顯示技術不同， Hololens使用的是類似于Google Glasses的顯示技術，而ML，前面已經提到，使用的是一種全新的顯示技術。
Hololens著重的是當下，ML更像是在為未來打造一款設備，當時Hololens里面也是有很多高科技在的，我們知道Hololens的硬件是使用了Intel Atom的CPU，是微軟最熟悉的X86構架，和一個定制 holographic processing unit (HPU)。操作系統(tǒng)的還是使用Windows的Kernel，基于Hololens和Microsoft Research的CV預研技術，也有發(fā)布出“黑科技”Demo，Holoportation。
Meta Glass這款產品 我不是特別了解，只是看了TED上的介紹和Demo演示，它和Hololens是形態(tài)及其相似的設備，Demo上也體現(xiàn)出了SLAM，tracking等CV技術，但是并沒有體現(xiàn)出Meta的方案是否有3D重構技術，這里打一個問號，我把它理解成一個功能和配置都縮減了的Hololens。
（好的，分享已完，謝謝各位！）
雷峰網原創(chuàng)文章，未經授權禁止轉載。詳情見轉載須知。
專題
