dev(ice)love デバイス祭り

モーションセンサー最新事情

中村薫

アジェンダ

• 2013年に発表、発売されたセンサー

• さまざまなセンサー

• これからのセンサー利用

Copyright © 2013 Natural Software.jp All rights reserved.

自己紹介

中村薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Visual Studio ALM

[email protected]


mailto:[email protected]

2013年に新しく発売されたセンサー

Copyright © 2013 Natural Software.jp All rights reserved. 5

Leap Motion

• 指先を高精度で検出

• 使いやすいソフトウェア

• ハードウェアの内蔵化が進んでいます


https://www.leapmotion.com/


Kinect v2

• Xbox One に同梱された新しいKinect

• Kinect for Windows v2 Developer Preview の配布が始まっています


http://www.xbox.com/ja-JP/xbox-one/meet-xbox-one


利用できるセンサー


Kinect Xtion/Carmine Creative Camera

Leap MotionKinect v2

センサーを使った事例

• さまざまなセンサーを使った事例が数多く出てきました。

• センサーのコミュニティもできました。


Tokyo MotionControl Network

http://kokucheese.com/event/index/108562/

http://kokucheese.com/event/index/108562/

サイネージ

空中ディスプレイ

Kinect, Leap Motion, Intel PerC

現実世界へのインタラクション階段＋マッピング＋Kinect

http://www.youtube.com/watch?v=h8wZnY_jWF8


Photo by Ben Lorph

Kinect x 8台

舞踊＋マッピング＋Kinect


さまざまなセンサー


利用できるセンサー


Kinect Xtion/Carmine Creative Camera

Leap MotionKinect v2

Kinect

• NUIのさきがけ

• Xbox用のほかにWindows用のセンサーがある


http://www.xbox.com/ja-JP/xbox360

http://www.xbox.com/ja-JP/xbox360

Kinect for Windows SDK

Color Stream Depth Stream

Player Tracking Skeleton Tracking

Audio Stream


Toolkit

Kinect FusionFace Tracking

Kinect Interaction Kinect Background Removal


Kinect v2

• Xbox One に同梱された新しいKinect

• Kinect for Windows v2 Developer Preview の配布が始まっている




Kinect for Windows v2

• Xbox Oneに付属のKinectと同等

• 2014年夏にリリース予定

• Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。


Xtion/Carmine

• Kinect互換センサー

• Mac OSなどWindows以外でも利用可能

• 開発元のPrimeSense社がApple社に買収されたため、今度の動向に注目


OpenNI 2.x and NiTE 2.x

Color Stream Depth Stream Gesture

User Tracking Skeleton Tracking Hand Tracking


Creative Camera

• 手指を認識できるセンサー

• Intel Perceptual Computing SDK を利用する

• コンピューターへの内蔵化を予定


Intel Perceptual Computing SDK

Color Stream Hand and Finger Tracking Gesture and Pose

Facial Analysis Speech Recognition Voice Synthesis

"Nothing to say?"


Leap Motion

• 指先を高精度で検出

• 使いやすいソフトウェア

• ハードウェアの内蔵化が進んでいる




Leap Motion SDK

Hand and Finger Tracking Gesture

http://www.buildinsider.net/small/leapmotionfirstimp/01

Touch


http://www.buildinsider.net/small/leapmotionfirstimp/01

センサーの仕様比較


Kinect Kinect v2 Xtion Creative Leap

センシング Light Coding TOF Light Coding TOF ステレオカメラ

Color画像 ○ ○ ○ ○ ×

Depth画像 ○ ○ ○ ○ ×

全身骨格検出 ○ ○ ○ × ×

手指検出 × △(一部) × ○ ○

ジェスチャー △(入力支援) × ○ ○ ○

音声入力 ○ ○ × ○ ×

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

KINECT V2について


Kinect for Windows v2の要求仕様

対応OS Windows 8, Windows 8.1

開発環境 Visual Studio 2012(C++, C#)

CPU Core i7 2.5GHz以上 64bit CPU

メモリ 4GB以上

USB USB 3.0

グラフィック DirectX 11対応のグラフィックカード



Kinect for Windows v2の仕様

Colorカメラ解像度 1920 x 1080

Depthカメラ解像度 512 x 424

Depthセンシング TOF(Tome of Fright)

Depth範囲 0.5m～4.5m

スケルトン認識 6人まで






Kinect v1 Kinect v2

Kinect2+Unity



Kinect2+Scratch



Kinect2+OpenNI



これからのセンサー利用


キーワード

• 内蔵化

• モバイル

• Web


内蔵化

センサーの内蔵化が進むでしょう。

• Leap Motion

• Intel Perceptual Computing SDK対応センサー




Web

• センサーSDKのブラウザ対応が進んでいます。Webやクラウドとセンサーの連携が進んでいくでしょう。


さらにその先へ


ウェアラブル

http://blogs.independent.co.uk/2013/01/03/tech-battlegrounds-in-2013/

http://blogs.independent.co.uk/2013/01/03/tech-battlegrounds-in-2013/

センサー,モバイル,ウェアラブルの融合

http://www.kickstarter.com/projects/551975293/meta-the-most-advanced-augmented-reality-interface

http://www.kickstarter.com/projects/551975293/meta-the-most-advanced-augmented-reality-interface

出力装置の進化

ディスプレイを越えて

Oculus Rift（オキュラス・リフト）

http://www.oculusvr.com/

http://www.oculusvr.com/

触覚を得る

http://www.youtube.com/watch?v=xaFBjUJj00M

http://www.youtube.com/watch?v=xaFBjUJj00M

http://www.youtube.com/watch?v=CE4WsYncNa4

http://www.youtube.com/watch?v=CE4WsYncNa4

www.naturalsoftware.jp


dev(ice)love デバイス祭り

Technology