• 您的位置:首頁 > 新聞動態(tài) > UE4

    通過UE4 的 INTEL REALSENSE 插件以新的方式觀察世界

    2019/5/28??????點擊:

    Intel 一直都對引入創(chuàng)新的工具和科技感興趣,這些工具能夠為世界上熱情的內(nèi)容開發(fā)者增加能量。如果你還不甚了解,Intel RealSense camera 在普通的 RGB 照片和視頻技術(shù)上,采用紅外光線來計算深度。為了幫助開發(fā)這個技術(shù)的應(yīng)用程序,Intel 創(chuàng)建了 RealSense SDK,一個用來做可視化算法的庫,包括面部識別,圖片碎片化,以及 3D 掃描。

    由于看到了這個技術(shù)在游戲中的潛在應(yīng)用,我們現(xiàn)在來為大家介紹 RealSense 插件,這是 Intel 的游戲工程師們合作的產(chǎn)物,將 RealSense SDK 中的各種特性提供出來以便在虛幻 4 的藍(lán)圖可視化腳本系統(tǒng)中使用。

    插件概述

    這個插件是一組 Actor 組件的形式存在,每個組件封裝了 RealSense SDK 中的一些特定的功能。通過使用這些相對輕量的組件,可以為游戲中幾乎每種 Actor 添加 3D 的感應(yīng)能力,并且訪問這些數(shù)據(jù)也很簡單,只需要對同一個組件在初始化一個實例即可。

    插件組建

    目前,插件有三個 RealSense 組件:

    1. Camera Streams 組件: 提供 RealSense 攝像頭的原始顏色和深度的視頻流。
    2. 3D 掃描組件: 支持真實世界的物體掃描,以及人臉掃描(如上圖)。
    3. 頭部跟蹤組件(預(yù)覽): 支持對用戶頭部的位置和角度的檢測和跟蹤。

    接著很快就會更新,可以期待該插件即將到來的更多組建:

    1. 頭部跟蹤組件(完整版): 用于檢測和跟蹤高達(dá) 76 面部標(biāo)志點,脈搏速率,和面部表情附加功能。
    2. 背景碎片組件: 將圖片的前景和背景分離開,為實時視頻創(chuàng)建“綠幕”的效果(如上圖)。
    3. 場景掃描組件: 對大場景(約 2m x 2m 的區(qū)域)生成 3D 模型來協(xié)助創(chuàng)建用戶生成的內(nèi)容并加強(qiáng)現(xiàn)實世界的體驗(如下圖)。
    4. 手部跟蹤組件: 檢測并跟蹤 22 個手部標(biāo)志點,識別 14 種手勢,或者跟蹤一個點來作為鼠標(biāo)類型的交互響應(yīng)。
    5. 語音識別組建: 將輸入語音轉(zhuǎn)換為文本來翻譯,或者用于檢測關(guān)鍵字來作為語音控制功能輸入。