[OF]Kinect v2 學習筆記(一) Kinect v2 基本介紹

前一陣子跑去東京渡過了一個星期左右的假期

這中間除了去Tokyo Game Show以及Akiba朝聖外

也順道帶回了台灣還未上市的互動好朋友

Kinect V2 for windwos

在正式介紹Kinect V2之前, 先來簡單介紹一下什麼是Kinect好了

(根據Google圖片搜尋可以證明它們這個角度最上相)

Kinect 是什麼？

Kinect是由微軟開發, 用於XBox 360/XBox One主機上的體感週邊裝置

搭載RGB攝影機與紅外線深度感測器, 讓開發者可以得到使用者肢體資訊與影像

Kinect 能做什麼？

基礎的功能包含人體辨識、追蹤、骨架追蹤、3D Model建立..等

這些都是建立在紅外線深度度感測器所得到的Depth Map(深度圖)

透過Computer Vision與Machine Learning等等技術得到的結果~讓我們心懷感激！

延伸運用上就包含了拍照去背、體感遊戲、手勢操作...等

Kinect的開發？

Kinect v1的部份有分「原生的SDK」跟「OpenNI」兩種

前者想當然爾只能在Windows上使用，而且在C#下寫起來非常方便

後者雖然部份功能有缺，但除了可以在Mac跟Linux下使用外，也支援另一個類似的硬體「Xtion」

詳細可以參考Heresy大神的Blog[1]，它的文章對於Kinect的開發有莫大的幫助！

Kinect v2的話，目前似乎只有今年7月才Release的原生SDK，而且還附帶了一個另人不悅的使用條件...

只支援Windows 8以上

我相信這點應該過沒多久就會被神人們破解吧？

身為普通人的我還是乖乖的裝上Win 8.1了(覺得難用)

目前Kinect v2的SDK代號為Kinect SDK 2.0，感覺上比較像是把Kinect SDK 1.8改版成Kinect v2用的版本

因此沒有出現太多特殊的功能，但具友人表示，已經比一開始的Kinect SDK好太多了。

Kinect v1 vs Kinect v2

先簡單列一些跟筆者的運用上比較有關係的項目：

(關於Kinect v2更完整的規格可以參考的官方網站[2])

接下來就實際看一下兩者在相似環境下，內建Demo程式的執行結果吧！

首先是RGB camera

明顯能看出Kinect v2的鏡頭廣了許多，畫質部份因為有縮小所以不太明顯。

再來是Depth map

邊緣更明顯、整體更穩定、破洞更少、細節更多...我都快懷疑以前為啥能接受Kinect v1了

這裡特別補充一點，因為IR技術改變(wide-angle time-of-flight camera)

Kinect v1之前在戶外會接近失效的缺點，Kinect v2已經有大幅的改進了！所以...

Kinect v2可以在戶外使用了！！

當然機器本身或人體被陽光直射什麼的還是會有影響，但比起Kinect v1已經進步許多！

這對做互動的人來說真是一大進步啊

回來比較結果，Skeletal tracking(骨架追蹤)。

手的部份有明顯增加更多關節點，另外原先關節的位置也有所調整(屁股總算不在腰上面了)

可以看到Kinect v2有多兩個綠色的圈圈，那是用來判斷手的開合，這點待下次一起介紹。 

再來是同樣跑Coordinate Mapping的結果，可以當作是最簡單的去背

RGB的畫質就不說了，身體邊緣破洞的情況少了許多，不過頭髮的部份還是一樣。

最後是3D View的結果，Depth map的差距完全反應出來了。

Kinect v1是有填入color並做成surface的樣子，而Kinect v2只是單純的Point clouds就已經很密了

===============分隔線==============

我想到這裡已經足夠瞭解到Kinect v2確實是有進步的！(特別是戶外這件事)

下一步就來透過一個簡單的Demo來瞭解Kinect v2如何在OF上使用吧！

=好寶寶Reference=

[1] Heresy's Space

[2] Kinect for windows