每日最新頭條.有趣資訊

AR將如何發展?Magic Leap、FB、谷歌給出如下回答

【獵雲網(微信號:ilieyun)】3月22日報導(編譯:福爾摩望)

現如今,我們大多數人仍然需要通過一個不透明的矩形螢幕連接到互聯網。這塊黑色的玻璃就猶如數字小島,與周圍的現實世界相比,顯得有些相形見絀。但是如果有一個可以覆蓋你整個視野的透明螢幕,就像擋風玻璃一樣,那麽數字世界就可以與真實生活混合在一起。

這或多或少就是混合現實的樣子。混合現實(MR)是一種空間計算體驗,在這種體驗中,你可以使用手勢、聲音或眼睛與虛擬內容進行互動。當今的混合現實體驗仍然處於早期階段,需要通過昂貴的頭顯設備作為媒介,比如Magic Leap One和微軟的HoloLens,這些頭顯設備一般包含多個運動傳感器、深度傳感器和眼球跟蹤攝影頭。

也許大家對“擴增實境”這個術語可能會更熟悉一些。擴增實境(AR)是混合現實的近親,數字圖像可以被疊加在現實世界的視圖上,但是你不能像在MR中那樣實時地與之互動。如今,擴增實境主要運行在智能手機上,使用後置攝影頭和一些高級軟體來捕捉和測量你對現實世界的視角。為了給iOS或Android設備創造AR體驗,蘋果和谷歌都開發了專門的平台——分別是ARKit和ARCore。

事實上,擴增實境世界視角的AR和MR體驗,都隻代表了空間計算連續體的一端。另一端則是虛擬現實(VR),與現實世界完全隔離。連續體中的各種體驗有時被統稱為“拓展現實”(XR)。

雖然虛擬現實頭顯和內容已經很普遍,但AR和MR仍然大部分處於炒作階段,充斥著誇張的MR演示視頻和不斷推陳出新的AR眼鏡原型。事實上,在XR紅為願景與真正產品之間,仍然存在著一些嚴肅的技術、創意和社會文化挑戰。但大型科技公司正在大力投資開發各種XR技術,許多聰明的人也相信,某種形式的XR最終將取代智能手機螢幕,成為我們首選的個人計算空間。

一直以來,我們真正想知道的是還有多久,Magicverse(Magic Leap的產品)的使用才會變得像拿起眼鏡一樣方便?

或者我們可以這樣問:這項技術向更精致體驗的發展速度有多快,還需要客服哪些挑戰。為了找出答案,我詢問了各大公司的專家,這些專家都將在XR生態系統的發展中扮演重要的角色。

混合現實的宏偉願景

Greg Rinaldi——Magic Leap的開發者與創作者關係總監

Magic Leap One被認為是當今兩款性能最佳的XR頭顯之一(另一款是微軟的HoloLens)。消費者現在可以通過Magic Leap網站花費2300美元買到這款設備,它也將很快出現在AT&T商店裡。

關於數字層將如何在我們的現實中存在:

“我們今天生活在一個數字世界裡,雖然我們看不見數字層,但可以通過手機與之互動,就比如社交網絡。先要有物理世界,才會有數字世界,所以我們真正看到的技術發展方向並不是頭顯,頭顯只是一種機械設備。”

“真正重要的是集成所有數字層,從而為你提供信息。這些信息可能是一條公共汽車路線,或者如果你是一名工程師,它們可能是城市的排汙系統。這些功能層在某種程度上幾乎就像是無線電台。你可以根據自己的需求進行選擇。”

利用混合現實進行工作

Greg Sullivan——微軟HoloLens通信總監

微軟於2015年首次推出HoloLens 1頭顯,並於2016年推出了開發者版。在看到能源、建築、製造、醫療保健和零售行業的一些應用後,該公司於2月份推出了HoloLens 2。第二代HoloLens的設計同樣針對工作場所,擴大了視野和手勢控制,實現了全眼跟蹤,設計也更加舒適。它將於今年晚些時候發貨,起售價為3500美元。

下一代HoloLens會實現什麽功能:

“客戶的確告訴我們HoloLens 2有很多可以改進的地方,我們選擇關注的是開箱即用的沉浸感、舒適性和實用性。”

“展望未來,我們將繼續在這三個方面進行投資。在下一個版本中,你會看到更多的沉浸感、更多的舒適性和更多有價值的應用。實現三者中任何一件都相對容易,但要同時實現這三件事卻很難。”

“我們有一個人類因子工程師團隊,他們將開發新的方法來讓用戶感到更舒適。在HoloLens 2,我們發明了一種全新的顯示技術,結合了微電子機械轉移。將來,我們可能不得不開發新型顯示器,通過與設備的自然互動實現更多任務。”

“總的來說,我們希望把數字世界從二維螢幕中解脫出來,混合現實也將有益於新類別的工人,比如需要使用工具或需要四處走動來照看患者的人。順便說一下,這些類型代表了今天的大多數工人。”

Facebook的必殺技——AR/VR殺手級應用

Facebook被認為擁有業內最好的計算機視覺和空間計算人才,他們致力於虛擬現實的社交體驗,以及智能手機應用的擴增實境體驗。Facebook的第一款消費級產品——Portal家庭音箱/相機——提供了一些擴增實境體驗,我們也可以期望該公司會在未來增加更多的體驗。雖然Facebook旗下的Oculus主要開發虛擬現實頭顯,但該公司可能正在探索未來發布更多擴增實境硬體產品的選擇。

Rachel Franklin,Facebook AR/VR體驗主管

為什麽該公司致力於虛擬現實中基於虛擬形象的社交體驗:

“我們目前在VR中所探索的是同步(或實時)社交,而不是異步社交。利用好我們手邊的所有資源是非常重要的,因為當你沉浸在虛擬現實中時,你需要弄清楚如何表達自己,如何在一個完全成形的環境中與他人交流,如何截取出真正相關的、重要的部分,然後再帶入現實世界之中。”

“VR頭顯現在已經存在於大眾市場之上,所以我們肯定會一直待在這個領域裡。但是我認為虛擬現實和擴增實境都是非常重要的,我不認為一方會勝過另一方。”

Ficus Kirkpatrick,Facebook AR/VR工程總監

該公司是如何將AR用於社交體驗的:

“我想區分一下頭顯上的擴增實境,它並不是大眾市場的消費級技術。但是現在有很多人會在智能手機上使用社交方式來研發人工智能。人們想要互相分享,想要用不同的方式自我表達,而AR對於如今市場上的產品來說是非常有用的。就像面部過濾器,它可能算是目前市場上最常用的擴增實境。我認為這將會是一個多模態的混合世界,有些人會使用頭顯,有些人會使用Portal,有些人則會使用手機,我們需要最大化這些參與者的團結感。”

智能手機將在XR的未來中發揮重要作用

谷歌AR/VR產品副總裁Aparna Chennapragada

自發布Google Glass智能眼鏡以來,谷歌已經取得了長足的進步。該公司在許多擴增實境產品中使用了計算機視覺技術,包括Google Lens應用及其基於ARCore手機的擴增實境平台。如今,谷歌正在它的地圖應用中測試一個虛擬世界AR導航功能。

關於谷歌如何看待AR:

“對我們來說,這裡最大的驅動因素是擴增實境及其相機如何成為輔助和實用的另一種方式。AR可以讓我們把答案放在問題所在的地方。比如經典的步行導航,當你走出地鐵時,腦海中會浮現出我該朝哪個方向走的問題。我們應該把答案放在問題所在的地方,也就是說放在你面前的街道上。”

關於計算機視覺將如何在未來的擴增實境中發展:

“人類是視覺動物——大腦皮層30%的神經元都致力於視覺理解。隨著計算機視覺變得更為優化,我們可以將作用範圍從單一的事物轉移到整個場景,並且能夠理解整個場景。第二個維度不僅給你信息,而且能夠覆蓋信息。”

“最後一個維度不僅僅是給你一些信息,而是把事情做好,實際上對事情采取行動。有時候這些事情可能很簡單,比如翻譯,當你在場景中看到外語時,它會自動為你翻譯。坦白地說,這些事情背後有一些非常困難的技術問題,這就是為什麽我告訴我的工程師這就是工作保障。”

關於基於手機的AR:

“人們談論AR已經有一段時間了。為什麽現在對此感到興奮?對我來說,現在有三個原因。一個是深度學習和機器學習技術的巨大飛躍,幫助計算機視覺更好地識別事物。第二個是,我們通過谷歌知識圖表了解了更多的世界。”

“第三件事是,如今有30億用戶在使用手機,相機成為了最常用的工具。因此,手機實際上本身就是一個非常強大的計算平台。”

相機是下一個大計算平台

Allison Wood,Camera IQ的創始人兼首席執行官

Camera IQ幫助品牌在社交媒體上創造和傳播擴增實境體驗。

關於空間計算和相機的首要地位:

“空間計算的發生方式基本上是通過相機、電腦和螢幕。所以你可以把相機看作是其他數據集的交換中心,包括視覺元數據、地理位置數據,以及你能想象的任何其他數據集。將這兩者結合在一起就可以呈現相關內容。相機本質上正在成為多模態分布式計算范例中的主要接口。有些人把它稱為空間計算。所謂多模態,是指輸入可以是視覺的,可以是你的聲音,可以是手勢,可以是觸摸。這些數據集可能來自其他計算機,比如我們戴在手腕上的智能手錶。”

“我們看到的每一個技術平台,無論是Facebook推出的Portal,還是Snapchat的Spectacles,都在試圖擁有下一代硬體。因為如果你擁有相機和硬體,你就擁有了計算平台。”

5G讓《黑鏡》成為現實

高通總裁Cristiano Amon

高通希望其移動處理器能夠為下一代支持擴增實境的智能手機提供支持。這家芯片製造商預計,其中一些體驗將會發生在XR眼鏡上,並通過USB-C連接到智能手機上。它最近宣布將提供參考設計(由驍龍855芯片支持),幫助手機制造商自我研發設備。

快速5G網絡對混合現實設備和服務的短期影響:

“你擁有高速的能力,擁有無限的數據容量、無限的雲存儲空間。因此,混合現實的內容,尤其是虛擬現實,將很容易實時獲得。無論是遊戲還是視頻,5G可以讓你立即訪問內容,立即將內容下載到設備上。”

關於快速5G對混合現實設備和服務的長期影響:

“5G的極致將會讓《黑鏡》成為現實。假設你部署了5G服務,由於速度很快,延遲很低,我們所使用的設備將具有混合現實能力。”

“當你走進一個房間,馬上就使用帶有面部識別人工智能的相機,由於100%的時間都與雲相連,你可以認出他們是誰,然後追溯到他們的LinkedIn、Instagram和Facebook帳戶等等。”

“我認為5G將真正釋放擴增實境的潛力,因為5G的出現讓其變成了一個規模遊戲。你得到的設備越多,速度就會越快,然後就會出現更多的應用。事實上,我很樂意聲明5G就是混合現實中缺失的成分,它不僅可以解決內容問題,還可以通過將大部分計算能力轉移到雲中來解決硬體問題。”

忘記Magic吧,現在更應該注重風格和實用性

Steve Sinclair,Mojo Vision產品與行銷副總裁

Mojo是一家來自加利福尼亞州薩拉托加的早期AR/VR公司。該公司還沒有透露它正在研發的產品,但它已經獲得了一些大公司的資助,包括Khosla Ventures、Fusion Fund和Dolby Family Ventures。Sinclair是蘋果前iPhone產品經理。

關於XR的炒作與現實:

“AR行業正開始好轉。我們陷入了一些早期AR從業者的炒作旋窩,但我們開始看到出現了一些解決實際消費者和商業問題的解決方案。”

關於主流採用的要求:

“吸引大眾市場消費者的擴增實境硬體平台不僅會提供實用性,還會強調真正的移動性和社會可接受性。這項技術必須讓人從視覺和觸覺上都感到正常,本質上它必須是隱形的。如果它需要很明顯的手勢來控制,或者需要你在公共場合大聲說話,它是不會被大規模採用的。”

XR在未來幾年面臨的挑戰

Timoni West,Unity Labs的研究主任

Unity Labs屬於Unity Technologies,負責開發混合現實內容創建工具。

關於多模式用戶控制:

“在接下來的兩三年裡,控制器仍然是主流。當人們用舊的方式與數字對象互動時,仍然感覺很尷尬。計算機實際上不能讀懂我們的思想。輸入方法的可轉換性是非常令人興奮的,非常接近魔法的感覺。但即使那樣,你也要做很多校準,才能確保一切正常。”

“要想創造一種與計算機互動的新方式,必須要感覺自然。當前的一些系統仍然使用數字按鈕按鍵模式進行控制,我們需要看到更多身體層面的東西。他們將不得不做研究層面的工作,只是為了在未來三到五年為其中一些模式奠定基礎。”

Agatha Yu,Valve的設計負責人

Valve設計虛擬現實頭顯和軟體。Yu曾是Oculus的首席產品設計師,在2018年9月離開之前,她曾在Oculus指導Oculus軟體的研發重啟。

關於混合現實技能集:

“整個行業必須改變我們的設計方式,這一點需要技能的轉變。我主要負責為團隊招聘,我發現我們需要更多設計和工程混合人才。因為我們對技術的控制非常有限,所以需要精通技術並了解基本性能問題以及用戶需求的人來進行權衡。”

關於XR開發與移動應用開發:

“在應用設計中,它非常受流程驅動,你可以將應用開發分解成多個階段。在混合現實中,我們不能控制用戶的移動,所以我們必須設計更多的概率。這與人工智能相吻合,因為我們可能有18個不同的參數,我們必須從中找出用戶想要做什麽。設計師必須關注用戶的意圖,而環境又總是不同的。”

Celia Hodent,UX戰略顧問

Hodent在Epic Games擔任UX總監時,曾負責研發熱門的《要塞英雄》遊戲。她是《玩家的大腦:神經科學和用戶體驗如何影響視頻遊戲設計》一書的作者。

關於虛擬現實變得更加社交化:

“我們在虛擬現實中看到了更多的多人遊戲,但這也帶來了一些嚴峻的挑戰。人類是社會性生物,我們需要聯繫,人們希望在虛擬現實中分享社會空間。但是我們需要考慮到除了關係之外的其他需求,比如能力和自主性。這三種需求是我們內在動機的核心。因此,我們需要在虛擬現實中共享一個公共空間,需要在這個空間中相互交流,以表達我們的自主性和能力,當然,也需要成為所有人的安全空間。”

計算的未來是立體的

毫無疑問,一些嚴肅的技術挑戰阻礙了XR眼鏡的開發。是的,XR眼鏡已經足夠時尚,你可以在公共場合長時間的佩戴。但要想將足夠的計算能力放在一個人臉上的小空間裡——並保持它的涼爽——所需要的組件還沒有做好準備。科技公司仍在努力以人眼能夠看到的分辨率提供圖形,將視野擴展到接近自然視野的地方,並創建精確跟隨人類視線的眼球跟蹤。從消費者的角度來看,迄今為止我所看到的混合現實體驗感覺研發工作仍在進行之中。

大量XR內容和體驗,比如遊戲和其他娛樂,也沒有完全準備好。還有一個先有雞還是先有蛋的問題:軟體開發人員不想在創造XR體驗上投入大筆資金,除非他們看到硬體正在被出售,但除非有足夠的遊戲和娛樂,人們也不會想去購買硬體。

這些問題最終會得到解決。眯著眼看著一個小黑框,用手指戳開應用的日子可能屈指可數。會是某種形式的XR眼鏡將我們從這種範式中解放出來嗎?也許吧。或者,正如Camera IQ的Allison Wood所說,XR可能會出現在各種設備中。

這可能歸結為一個問題,即數字內容對於富有成效和愉快地生活有多重要——以及公司會給予消費者多少內容控制權。人們真的希望數字層和全息圖整天出現在他們的世界中嗎?如果他們對XR眼鏡沒什麽意見,那麽他們對像AR隱形眼鏡這樣的東西也會同樣滿意嗎?把數字內容直接插入視神經又怎麽樣呢?

這些問題最終都將由消費者來決定。各大科技公司及相關專家,必須仔細聆聽才能在未來十年成功地駕馭好這一技術轉變。

獲得更多的PTT最新消息
按讚加入粉絲團