inter 實感技術

2021-07-11 21:31:21 字數 3555 閱讀 8093

什麼是實感技術?我們和機器的互動方式目前只是

滑鼠、鍵盤再加上現在的

觸控螢幕,如此而已。你我坐著交談的時候你聽到的是我的語音,你看到的是我的表情,你看到的是我的動作,這才是我們認為真正的人機互動方式,這也是英特爾實感技術會給大家所帶來的,把感知加到各個裝置裡面去。

那我們把各種感知加到計算機裡,我們想給終端使用者帶來三樣東西,natural intuitive immersive。英特爾最新的3d感知

攝像頭,它也是世界上最小的3d感知攝像頭,可以提供很精準的深度資訊,並且也兼顧普通紅綠藍攝像頭功能。通過這個攝像頭,我們可以實現手勢控制、增強現實、虛擬實境、臉部掃瞄、三維掃瞄等功能,同時還可以做語音輸入。英特爾的目標是想讓人類在與計算機的互動中,變得更加直觀和直接,給人們帶來一種沉浸式的感覺,讓使用者身臨其境。

英特爾感知計算事業部中國區負責人 湯振宇 [儲存到相簿]

首先什麼是實感技術?如果大家看英特爾的cpu的發展,因為經常有人把英特爾的cpu比作是人的大腦。如果你看英特爾cpu的發展,你會發現它的發展已經變化非常快。從2023年英特爾推出第一代產品4004,當時我們只能放到2300個電晶體在裡面,它的速度只能達到740khz。可是今天呢我們能夠放大概兩個billion也就是20億的電晶體在裡面,然後我們的速度可以達到將近3ghz。那我們做乙個很快的計算,我們發現英特爾的cpu已經發展超過了350萬倍,從它的處理能力來說。

可是從另外乙個方面來看,我們和機器的互動方式來看,有什麼變化嗎?滑鼠、鍵盤再加上現在的觸控螢幕,如此而已。這是我們需要的嗎?是足夠能夠滿足我們的需求嗎?你我坐著交談的時候你聽到的是我的語音你看到的是我的表情你看到的是我的動作,這才是我們認為真正的人機互動方式,這也是英特爾實感技術會給大家所帶來的,把感知加到各個裝置裡面去。

我們如何定義這個呢?我們是把人的視覺、聽覺、表情、語音甚至觸控各種感知都加在裡面,那我們專門有乙個團隊來做這些方面的分析。在分析中我們發現超過人的感知超過80%實際是來自於視覺,這是英特爾實感技術現在關注於英特爾的實感三維攝像頭。那我們把各種感知加到計算機裡,我們想終給帶來什麼呢?我們想給終端使用者帶來三樣東西,natural intuitive immersive。意味著什麼呢?

natural是說我們希望是乙個自然的互動方式,你不需要用任何工具包括你可以用你的手勢你的語音來做互動。 intuitive是說給你乙個自發的互動方式你不需要經過任何訓練,當你我在用手機的時候你會用這個方式來說放大縮小。這實在不是人的自然互動方式,沒有任何乙個人跟你說話這個是大這個是小的。我們說乙個東西很大很小是這麼說的,這才是我們追求的乙個自然的方式。而且我們不需要你去學習,你是自然自發的方式。最後我們希望帶給你乙個immersive就是身臨其境的感覺,那是我們想追求的目標。那也是我們所有產品所追求的目標,所以natural intuitive immersive。

那我們今天呢給大家帶來了兩個攝像頭,第乙個想給大家介紹是面向使用者的英特爾的三維攝像頭。這是全世界最小的三維攝像頭,它的技術是結構光的技術。大家可以看到它其實中間有乙個攝像頭,這是正常的紅綠藍的rgb的攝像頭1080p。而同時呢它有紅外發射儀,通過紅外發射這種結構光的技術它事先定義好的結構光,然後你可以用紅外的攝像頭來捕捉。通過捕捉呢你可以很準確地得到任何物體離這個攝像頭的距離。大家知道兩維攝像頭你所捕捉的任何資訊都是乙個兩維的xy如此而已,你沒有辦法判斷乙個物體的大小和遠近,因為這是小兒辯日的問題。你離乙個物體越近你顯示**就會越大,這是兩維攝像頭永遠無法解決的問題。但在我們三維攝像頭裡面因為我可以探測出任何物體離這個深度攝像頭的距離,所以我得到了第三維我們叫z information就是深度資訊。那在得到深度資訊以後你會發現你拍的任何一樣東西它都有三維座標xyz,那有這個資訊我們可以做什麼事情?

第二種使用模式當然就是說遊戲,遊戲是乙個很大的類,然後你會發現我們玩遊戲和別人玩遊戲的方式不一樣,我們可以用手勢甚至語音操控乙個遊戲,這會讓遊戲變得非常有趣。

第四種互動方式我們叫做寓教於樂,因為我們提供了虛擬實境和增強現實技術,在這種技術裡面我可以把真實的環境和虛擬的環境融合在一起,讓小孩子甚至成年人在學習的過程中他體會到了樂趣,因為他很多東西可以通過虛擬的世界來學習,但同時他也沒有脫開他這個現實的世界。

我今天給大家帶來了一些模型,包括這是我的乙個同事,你可以看到他的模型通過我們攝像頭三維攝像頭把它掃瞄以後直接建立成乙個模型,然後把它三維列印出來。

談完了面向使用者的攝像頭還想給大家介紹一款新的攝像頭,這是英特爾剛剛最新推出的攝像頭我們叫做world—facing或者說面向這個世界的後置攝像頭,它有什麼不一樣呢,大家看一下就可以看出來。這個是我們的後置攝像頭,這個是我們的前置攝像頭,大家可以看到它的大小啊形狀啊都有一些變化,因為它用的是不同的技術,前置攝像頭我已經介紹過,它用的是結構光的技術,那後置攝像頭我們用的叫active-stereo就是立體成像技術,什麼叫立體成像?很簡單的例子,你把任何乙個物體擺在你的面前,用左眼看和右眼看你會發現這個物體在移動,這是人的視差視覺的視差自然造成的,但人在做這個過程中是乙個很自然的人大腦皮層的自然反映自然處理,你會判斷出任何乙個物體離你的距離,這是人的自然的乙個反映,從小從乙個嬰兒開始你就會有這種反應。那麼我們模擬的是同樣的意思。

在後置攝像頭我也想給大家介紹一下我們的使用模式,第乙個最主要的是說三維掃瞄,因為三維掃瞄大家可以看出來這是我們設計的工程樣品,我們已經把這個攝像頭整合在裡面了,那大家可以看到我拿著乙個平板來掃瞄乙個物體掃瞄乙個人,我甚至可以掃瞄整個房間,它沒有任何限制。這有什麼好處?掃瞄整個人你可以看到我可以得出整個人的圖象來,我可以把它三維列印出來,想象一下我掃瞄的時候像我開始介紹的,我已經知道我掃瞄的東西任何乙個xyz的座標,所以當我掃瞄乙個人的時候我已經知道他的胸圍、腰圍、他的肩寬,所有的資訊我都拿到了,把它想象一下用在你的電子商務上,你拿到你使用者的所有的這些資料你可以把什麼資料推送給他。

當然當我掃瞄乙個整個房間的時候我也同時得到整個房間的資訊,而且更酷的是說我掃瞄這個房間的時候我掃瞄的是真實的世界,是真實的房間,可是我可以把虛擬的物體加進來,我可以把虛擬的家具、虛擬的廚櫃甚至虛擬的人加進來讓這個變成乙個很生動的事情,那你可以重新設計你的房子,讓你去選購你的家具,讓你去選購你不同的東西。這是我們希望給大家帶來的。

第三大使用模式,我們叫做場景的增強現實,像我剛才舉的乙個例子比方說我把房間掃下來我可以把虛擬的家具和真實的場景結合起來。這只是其中乙個例子,把它想象在教育行業你甚至在遊戲方面,我舉著乙個平板電腦或者我在玩的過程中我可以把任何乙個地方任何乙個場景變成你實時你想玩的場景,它會把虛擬的世界和現實的世界融合在一起,讓你不僅玩你還可以學到東西。

英特爾策略一直是說我們希望提供整個平台給大家,我們把整個平台開放給大家,所以我們推出了兩款攝像頭,我們推出的這個硬體,但同時我們推出了軟體我們叫sdk軟體開發工具包。有了這個軟體開發工具包,軟體開發者可以做什麼呢?臉部檢測、臉部識別、手指跟蹤、手勢判斷、背景切除、三維掃瞄、語音識別、增強現實、虛擬實境,所有這些功能所有的這些模組我們都整合好了都放到我們的sdk免費提供給大家,免費提供給所有的開發者來開發使用,因為我們希望是建立整個這樣乙個生態系統讓大家一起來把這種最好的使用者體驗帶給最終的使用者。

最後想說的是,我們每個人都從小就會說有科幻**、科幻電影,然後告訴你其實那是科學幻想所以叫科幻。但今天我們想說的是那是科學不是幻想,因為我們已經把它實現了,我們也希望把這種實現了的目標和大家一起合作一起帶給我們最終的使用者,讓他們有這種自然、自發、身臨其境的使用者體驗。

謝謝大家!

非真實感渲染

非真實感渲染的定義 就是使用一些渲染方法使得畫面達到某些特殊的繪畫風格相似的效果,簡稱npr。渲染輪廓線的方式 常見渲染方式如下 1.基於觀察角度和表面法線的輪廓線渲染 這種方法就是使用視角方向和法線方向的點乘結果來得到輪廓資訊。但是很多模型渲染出來的描邊效果卻不盡人意,而且也不能控制輪廓線風格的渲...

Matlab中interp2和interpn的差異

我最近在matlab中用到插值法,看起來有interp1 2 3和interpn這兩個函式可以用。然而,我驚訝地發現,這兩類函式不是等價的 interp1和interpn是等價的,結果都是1584 interp1 1,2 0,14317 1.1107 1584 interpn 1,2 0,14317...

learnopencv非真實感渲染

邊緣保留過濾器 edgepreservingfilter 輸出3通道影象 recurs filter 遞迴過濾 1,normconv filter 歸一化卷積 2。使用recurs filter選項的速度比normconv filter快3.5倍。當不需要銳化並且速度很重要時,應使用recurs f...