網頁

2018年4月21日 星期六

HoloLens的環境辨識功能


HoloLens是一套混合實境(mixed reality)眼鏡,
其特別之處就是能對物理環境進行感知,
辨識後甚至能分辨出牆面、地板與可放置物體的平面等。

使用者能將虛擬生成的全像圖形(hologram)以符合環境條件的方式放置入環境中,
這種讓使用者同時感受到虛擬全像物體以及日常物理實景,
兩者共同塑造出來的環境,稱為混合實境。

以下介紹HoloLens的環境辨識功能,它不僅能分辨出環境中足以遮蔽阻擋的表面出來,
也可以分辨這些表面為牆面、地板或者是大到足以放置物體的平面等。



--------------------------------------------------------------------------------------------------------------

第一個影片是待會兒HoloLens要辨識的物理環境,
這個環境結構頗為複雜,有走道,牆面前有書櫃,以及書桌等物品等。

影片1-物理環境
[* 觀賞Youtube內容時,請點擊字幕圖示]

--------------------------------------------------------------------------------------------------------------

第二個影片顯示HoloLens掃描環境後,會即時性地產生網眼(mesh)。
這些網眼貼合於物體環境,即便有外套阻擋以致面有些突起,
它都能即時性地產生網眼。
這段影片使用到HoloToolkit → SpatialProcessing 場景(scene)。

影片2-網眼
[* 觀賞Youtube內容時,請點擊字幕圖示]
                 

--------------------------------------------------------------------------------------------------------------

第三段影片顯示HoloLens偵測平面的情況,
兩個牆面交界處也許略有落差,
但其辨識表現已經相當驚人了。
這段影片使用到HoloToolkit → PlaneFinding 場景。

影片3-面的偵測
[* 觀賞Youtube內容時,請點擊字幕圖示]

                                                                                            [

--------------------------------------------------------------------------------------------------------------

第四段影片顯示HoloLens做辨識(recognition)的能力。
所謂辨識是指對眼前這項物體或環境,標記(mark)或標籤(label)他是什麼,
這過程通常需要對該物體給個命名(name),此過程稱為辨識。
這段影片使用到HoloToolkit → SpatialUnderstandingExample 場景。

影片4-偵測牆面、地板、可放置物體的地方
[* 觀賞Youtube內容時,請點擊字幕圖示]

                                                                                          [



沒有留言:

張貼留言