通過UE4 的 INTEL REALSENSE 插件以新的方式觀察世界
Intel一直都對引入創(chuàng)新的工具和科技感興趣,這些工具能夠為世界上熱情的內(nèi)容開發(fā)者增加能量。如果你還不甚了解,Intel RealSense camera在普通的RGB 照片和視頻技術(shù)上,采用紅外光線來計算深度。為了幫助開發(fā)這個技術(shù)的應(yīng)用程序,Intel創(chuàng)建了RealSense SDK,一個用來做可視化算法的庫,包括面部識別,圖片碎片化,以及3D掃描。
由于看到了這個技術(shù)在游戲中的潛在應(yīng)用,我們現(xiàn)在來為大家介紹RealSense插件,這是Intel的游戲工程師們合作的產(chǎn)物,將RealSense SDK中的各種特性提供出來以便在虛幻4的藍(lán)圖可視化腳本系統(tǒng)中使用。
插件概述
這個插件是一組Actor組件的形式存在,每個組件封裝 RealSense SDK中的一些特定的功能。通過使用這些相對輕量的組件,可以為游戲中幾乎每種Actor添加 3D的感應(yīng)能力,并且訪問這些數(shù)據(jù)也很簡單,只需要對同一個組件在初始化一個實例即可。
插件組建
目前,插件有三個RealSense組件:
- Camera Streams 組件:提供 RealSense 攝像頭的原始顏色和深度的視頻流。
- 3D 掃描組件:支持真實世界的物體掃描,以及人臉掃描。
- 頭部跟蹤組件:支持對用戶頭部的位置和角度的檢測和跟蹤。
接著很快就會更新,可以期待該插件即將到來的更多組建:
- 頭部跟蹤組件(完整版):用于檢測和跟蹤高達(dá)76面部標(biāo)志點,脈搏速率,和面部表情附加功能。
- 背景碎片組件:將圖片的前景和背景分離開,為實時視頻創(chuàng)建“綠幕”的效果(如上圖)。
- 場景掃描組件:對大場景(約 2m x 2m 的區(qū)域)生成3D模型來協(xié)助創(chuàng)建用戶生成的內(nèi)容并加強(qiáng)現(xiàn)實世界的體驗。
- 手部跟蹤組件:檢測并跟蹤 22 個手部標(biāo)志點,識別14種手勢,或者跟蹤一個點來作為鼠標(biāo)類型的交互響應(yīng)。
- 語音識別組建:將輸入語音轉(zhuǎn)換為文本來翻譯,或者用于檢測關(guān)鍵字來作為語音控制功能輸入。
- 上一篇:使用UE4調(diào)用VR外設(shè)WISEGLOVE數(shù)據(jù)手套的LIB和D 2020/11/10
- 下一篇:虛幻引擎UE4如何鏈接第三方庫(lib和dll) 2020/11/9


