通過UE4 的 INTEL REALSENSE 插件以新的方式觀察世界
2019/5/28??????點擊：
Intel 一直都對引入創(chuàng)新的工具和科技感興趣，這些工具能夠為世界上熱情的內(nèi)容開發(fā)者增加能量。如果你還不甚了解，Intel RealSense camera 在普通的 RGB 照片和視頻技術(shù)上，采用紅外光線來計算深度。為了幫助開發(fā)這個技術(shù)的應用程序，Intel 創(chuàng)建了 RealSense SDK，一個用來做可視化算法的庫，包括面部識別，圖片碎片化，以及 3D 掃描。
由于看到了這個技術(shù)在游戲中的潛在應用，我們現(xiàn)在來為大家介紹 RealSense 插件，這是 Intel 的游戲工程師們合作的產(chǎn)物，將 RealSense SDK 中的各種特性提供出來以便在虛幻 4 的藍圖可視化腳本系統(tǒng)中使用。
插件概述
這個插件是一組 Actor 組件的形式存在，每個組件封裝了 RealSense SDK 中的一些特定的功能。通過使用這些相對輕量的組件，可以為游戲中幾乎每種 Actor 添加 3D 的感應能力，并且訪問這些數(shù)據(jù)也很簡單，只需要對同一個組件在初始化一個實例即可。
插件組建
目前，插件有三個 RealSense 組件：
- Camera Streams 組件： 提供 RealSense 攝像頭的原始顏色和深度的視頻流。
- 3D 掃描組件： 支持真實世界的物體掃描，以及人臉掃描（如上圖）。
- 頭部跟蹤組件（預覽）： 支持對用戶頭部的位置和角度的檢測和跟蹤。
接著很快就會更新，可以期待該插件即將到來的更多組建：
- 頭部跟蹤組件（完整版）： 用于檢測和跟蹤高達 76 面部標志點，脈搏速率，和面部表情附加功能。
- 背景碎片組件： 將圖片的前景和背景分離開，為實時視頻創(chuàng)建“綠幕”的效果（如上圖）。
- 場景掃描組件： 對大場景（約 2m x 2m 的區(qū)域）生成 3D 模型來協(xié)助創(chuàng)建用戶生成的內(nèi)容并加強現(xiàn)實世界的體驗（如下圖）。
- 手部跟蹤組件： 檢測并跟蹤 22 個手部標志點，識別 14 種手勢，或者跟蹤一個點來作為鼠標類型的交互響應。
- 語音識別組建： 將輸入語音轉(zhuǎn)換為文本來翻譯，或者用于檢測關鍵字來作為語音控制功能輸入。
- 上一篇：Unity3d網(wǎng)絡通信 - NetWork組件使用 2019/5/28
- 下一篇：HOLOLENS的SOCKET網(wǎng)絡通訊1 2019/5/23
