2018年03月30日，對于未來有望成為虛擬桌面系統(tǒng)一部分的混合現(xiàn)實頭顯，我們已經(jīng)看到了一系列非常智能和非常炫酷的專利申請。我們同時看到有專利非常詳細(xì)地探討了用于自動駕駛汽車平時顯示系統(tǒng)的先進(jìn)手勢操控系統(tǒng)。

　　今天美國專利及商標(biāo)局公布了一項蘋果專利。它可能永遠(yuǎn)都不會出現(xiàn)在市場上，但這確實很酷。蘋果指出，這一VR系統(tǒng)可以應(yīng)用于“一輛所有人都是乘客的‘自動駕駛’汽車”。

　　VR系統(tǒng)或許可以令自動駕駛汽車變得更安全，更小，和成本更低。車窗本質(zhì)上是不安全的，結(jié)構(gòu)也不健全，同時還增加了車輛的成本。通過提供真實環(huán)境或模擬環(huán)境的虛擬視圖，VR系統(tǒng)可以減少或消除自動駕駛汽車對窗戶的設(shè)計需求。

　　另外，通過VR系統(tǒng)提供的VR體驗可以為乘客提供一種仿佛正在乘坐一輛比實際自動駕駛汽車更多的車輛中，這樣在搭乘小型自動駕駛汽車的時候，乘客將能獲地更愉悅和更安全的體驗。

　　或許更為重要的是，蘋果指出他們的VR Experience System可以為乘客提供有趣和狂野的創(chuàng)意娛樂體驗。

　　當(dāng)然，該設(shè)想未來感十足，但這僅僅只是蘋果剛剛開始的構(gòu)思，并且顯然可以吸引年輕一代的蘋果粉渴望如此一款自動駕駛汽車。

　　1. “The Immersive Virtual & Augmented Display System（沉浸式VR&AR顯示系統(tǒng)）”

　　專利圖1中的虛擬現(xiàn)實系統(tǒng)包括作用域車輛乘客的頭顯;在專利圖2，VR系統(tǒng)將VR內(nèi)容投影至一個窗戶以供乘客觀影;在專利圖3，系統(tǒng)將VR內(nèi)容投影至用戶前方的空間。

　　蘋果第二份專利增加了增強(qiáng)現(xiàn)實：在車輛前方的真實世界場景視圖中顯示虛擬內(nèi)容，以向乘客提供增強(qiáng)現(xiàn)實或混合現(xiàn)實視圖。

　　2. “Immersive VR Experiences（沉浸式VR體驗）”

　　蘋果專利圖8中描述了一種用來向乘客提供同步物理效果的主動系統(tǒng)。

　　蘋果提供了VR系統(tǒng)可以提供了多種沉浸式VR體驗示例，并表明這沒有任何限制。

　　對于VR系統(tǒng)可以為乘客提供的沉浸式VR體驗，例如可以使用乘客喜歡的任何虛擬體驗和環(huán)境來替代真實世界的視圖。

　　車輛運(yùn)動可以集成至虛擬體驗之中，從而幫助防止暈動癥和優(yōu)化虛擬體驗。與坐在房間中并使用靜態(tài)模擬器或佩戴頭顯相比，為VR系統(tǒng)集成車輛運(yùn)動能夠進(jìn)一步提升沉浸感。

　　例如，車輛的加速和運(yùn)動可以匹配虛擬體驗的加速和運(yùn)動。在一些實施例中，主動車載系統(tǒng)(如HVAC系統(tǒng)，音頻系統(tǒng)和活動座椅)和車輛控制系統(tǒng)(如剎車，油門和方向盤)可以與VR系統(tǒng)集成，從而為虛擬體驗提供物理效果。例如，通過HVAC系統(tǒng)提供風(fēng)感或熱感，通過音頻系統(tǒng)提供音效，通過座椅提供加速或運(yùn)動效果。

　　在專利圖9的兩份專利中，在搭乘汽車時沉浸式VR體驗可以用于提高生產(chǎn)力，同時又為用戶提供有趣的VR體驗。例如。兩人或以上的用戶可以作為虛擬化身在虛擬環(huán)境中舉行會議，比方說專利圖9B中的虛擬房間，或者是平板卡車的車板。

　　其他體驗包括飛躍峽谷的滑翔飛機(jī)。這種虛擬體驗同時可以是具備教育性意義，例如允許乘客探索城市地標(biāo)的歷史或其他信息。映維網(wǎng)認(rèn)為這種虛擬體驗也可以是競爭性，例如允許乘客在虛擬賽車體驗中超過其他車輛。

　　如專利圖11所示，我們可以看到真人的虛擬視圖或虛構(gòu)人物可以集成至VR系統(tǒng)提供的虛擬體驗之中。在下面的例子中，一名作家或脫口秀主持人的虛擬形象#1195可以坐在乘客#1190的旁邊。虛擬作家可以向乘客朗讀他們的書籍，或者虛擬脫口秀主持人可以向乘客主持一場脫口秀，而他們的聲音將通過車輛的語音系統(tǒng)或頭顯#1100進(jìn)行傳輸。

　　對于在平板卡車上舉行的會議體驗，你可以將其替換成私人音樂會，讓你最喜歡的樂隊為你和朋友進(jìn)行演唱表演。

　　3. “Monitoring a Passenger（監(jiān)控乘客）”

　　在蘋果專利圖18中，系統(tǒng)正在監(jiān)控使用VR系統(tǒng)的乘客#1890。由VR主機(jī)#1810執(zhí)行，并且經(jīng)由頭顯#1820呈現(xiàn)給乘客的虛擬內(nèi)容#1840和音頻#1842可以根據(jù)乘客的偏好，和/或根據(jù)乘客傳感器數(shù)據(jù)#1830來進(jìn)行調(diào)整。

　　在一些實施例中，VR應(yīng)用可以根據(jù)預(yù)定義或預(yù)先約定的乘客喜好來初始化一個VR環(huán)境。

　　例如，乘客喜好數(shù)據(jù)可以儲存在控制器的偏好文件中，或者從云儲存等外部存儲中獲取。在一些實施例中，VR系統(tǒng)可以向用戶提供一個界面，幫助其選擇喜歡的VR環(huán)境。例如，乘客可能喜歡一個令人放松的或令人感到興奮的體驗。

　　在一些實施例中，當(dāng)用戶佩戴頭顯來體驗由VR應(yīng)用生成的VR世界時，各種傳感器可以用來監(jiān)控乘客是否出現(xiàn)不舒服或暈動癥的跡象(如蒼白程度，流汗程度，坐立不安，吞咽，打嗝，心律，呼吸頻率，眼睛運(yùn)動等等)。乘客傳感器數(shù)據(jù)#1830可以通過有線或無線連接傳輸至VR主機(jī)。

　　在一些實施例中，傳感器群可以包含位于頭顯上火頭顯內(nèi)的傳感器#1832(如用于監(jiān)控乘客眼睛或其他部位的內(nèi)置攝像頭)，用于檢測和追蹤乘客頭部運(yùn)動的慣性測量單元，以及用于監(jiān)控乘客生理反應(yīng)的傳感器(如流汗，吞咽和呼吸率)。

　　在一些實施例中，傳感器群可以包括佩戴在乘客身體其他部位的傳感器，如用于監(jiān)控流汗，脈搏，吞咽或其他生理反應(yīng)的腕帶、臂帶或手表，以及包含用于檢測和追蹤乘客身體運(yùn)動的慣性測量單元。

　　4. “Establishing a Virtual Ground Plane（建立虛擬接地層）”

　　如專利圖15所示，虛擬接地層或虛擬平臺#1504可以出現(xiàn)在乘客下方，比如乘客雙腳正常的放置平面。這可以幫助避免暈動癥的癥狀，防止乘客因沒有接地層的存在而產(chǎn)生一種漂浮在空中的感覺(這會導(dǎo)致部分用戶產(chǎn)生不適)。在一些實施例中，系統(tǒng)同時會渲染乘客的雙手和雙腳。

　　在一些實施例中，系統(tǒng)可以在虛擬環(huán)境中渲染瞄定真實世界方向的對象或元素(如太陽或月亮瞄定在正東方或正西方，或者一棟高樓瞄定在正北方)，這樣乘客就可以輕松判斷自己在真實世界中的方向。隨著車輛在現(xiàn)實世界轉(zhuǎn)彎，虛擬世界可以伴隨車輛進(jìn)行轉(zhuǎn)彎(包括虛擬內(nèi)容#1502)，但瞄定的虛擬內(nèi)容將固定在相對于現(xiàn)實世界的位置。

　　在一些實施例中，系統(tǒng)可以提供關(guān)于下一步駕駛操作和真實世界地形效果的預(yù)覽信息，從而提升乘客的舒適度。在缺乏現(xiàn)實世界視圖和操作線索的VR體驗中，乘客可能會因為無法判斷自己在現(xiàn)實世界中的位置，以及無法預(yù)測下一步操作(影響他們的前庭/平衡感)而產(chǎn)生不適。

　　系統(tǒng)可以通過視覺，音頻和觸覺線索來提供關(guān)于駕駛操作和真實世界地形效果的預(yù)覽信息，比如通過指示性箭頭來說明下一個轉(zhuǎn)彎動作，爬坡或下坡動作。

　　另一個例子則是通過播放音頻線索來說明下一步操作。例如，向左耳播放一個聲音或音調(diào)來說明下一個左轉(zhuǎn)彎，向右耳播放一個聲音或音調(diào)來說明下一個右轉(zhuǎn)彎，向雙耳播放不同的聲音或音調(diào)來說明下一個爬坡或上坡。

　　蘋果專利#20180089900(點擊前往)于2017年Q3季度提交，其中兩名發(fā)明者是蘋果感知硬件總監(jiān)Benjamin Lyon，以及計算機(jī)視覺與機(jī)器學(xué)習(xí)經(jīng)理Daniel Kurz。

　　考慮到這只是專利申請，目前無法確定相關(guān)產(chǎn)品將于何時上市。