augmented reality communication that provides a new experience value
TRANSCRIPT
October 24, 2013 ⻲亀⼭山 悦治 (Etsuji Kameyama)
新しい体験価値を提供する 拡張現実コミュニケーション
成⻑⾧長を続ける拡張現実の現在と未来
Augmented reality communication that provides a new experience value
The present and the future of augmented reality growing
自己紹介 !
AR技術と事例紹介 !体験の共有とコミュニケーション
!ウェアラブルと新コミュニケーション
!
AR技術が生活に溶け込む未来
目次
初めてのAR記事：2009年2月13日【2009-2-26 世界初開催！AR(拡張現実)ビジネスの最前線】個人運営、現在約6千件のAR記事、世界50カ国からアクセス、多くのSNSサイトにより拡散http://development.blog.shinobi.jp/
Blog
Mixi
Paper.li
http://www.peerindex.com/thenextweb/group/augmented_reality_top_25_1
http://thenextweb.com/socialmedia/2011/04/07/the-25-most-influential-people-tweeting-about-augmented-reality/
MySpace
当社概要
ナレッジワークス株式会社
■ 住 所 東京都港区西新橋1丁目15番5 ■ 設 立 2001年4月2日 ■ 資本金 20,200万円（準備金含む） ■ 代 表 代表取締役 所司里佳 ■ 従業員数 22名 ■ 主要事業 ・検索サービス事業 ・ARソリューション事業 ・WEB&アプリ開発事業 ・Human Sensing & ｺﾐｭﾆｹｰｼｮﾝ ■ 主要お取引先（50音順）
アスクル株式会社、ウォルト・ディズニー・ジャパン株式会社、オットージャパン株式会社、株式会社かねまつ、 株式会社角川マガジンズ、四季株式会社、株式会社千趣会、全日本空輸株式会社、株式会社日本航空、 株式会社ネクスト、パイオニア株式会社、パナソニック株式会社、株式会社ビックカメラ、ファイザー株式会社、 株式会社毎日新聞社、ミサワホーム株式会社、株式会社リクルート住まいカンパニー、他
当社HP）http://hp.knowledge-works.co.jp
ナレッジワークスは、 １．検索エンジンやARエンジン、センサー認識等のIT実装技術を基盤に、 ２．お客様／ユーザーにリッチな情報体験を提供する ”拡張コミュニケーション” を提案しています
会社概要
Augmented Communication
����������������
Augmented Communication� ����������������
キーワードは... ・O2O ・インタラクティブ ・Augmented experience
ARの技術と事例
‣ 第１期「PC+ARマーカー」 - 電脳コイル：2007年5月頃からNHKで放映されたアニメ「電脳コイル」。このアニメに影響を受けたエンジニアもいたと言われており、2008年から徐々に実用化に向けた研究が始まった。「電脳メガネ」をかけるとレンズの内側に現実とデジタル映像を合成した別の世界が映しだされる未来的な物語であったが、その技術がまさにARである。
- 現実の技術としては、パソコンや高グラフィックパソコンの使用が必須で、全てがマニアックだった。
‣ 第２期「位置情報系AR」 - セカイカメラ：2009年2月にiPhone+ARの技術をビジネスで活用する事例「空間にタグを貼るソリューション」を発表し、話題となった。アプリケーション自体は無料で使用できる。現在も次々とイベント等で使用されており、世界的にも有名になった。
‣ 第３期「画像認識系AR」 - 2011年 国内外のAR開発企業、プロモーションやキャンペーンなどでの利用が活発に！
‣ 第４期「センサー系AR」「形状認識AR」「ウェアラブルAR」これから！ 引用) 電脳コイルのサイトより
http://www.tokuma.co.jp/coil/story.html
時は202X年、今よりも少し未来のこと。子供達の間で“電脳メガネ”が大流行！。この“電脳メガネ”は、街のどこからでもネットに接続し、様々な情報を表示する機能を備えた、子供たちになくてはならないアイテム。現代の携帯電話のように普及し、ほぼ全ての子供が持っている。
AR利用の黎明期から成長期
拡張現実は「五感」を拡張する技術
視覚聴覚
嗅覚
触覚
味覚
身体の動き
現実環境にバーチャルな情報が付加される技術。 五感に作用する 聴覚・触覚・味覚・嗅覚的な拡張現実感もあるが、拡張現実感と言うと、一般的には視覚的な拡張現実感を示すことが多い。
Meta Cookie：プレーンなクッキーを食べているのに、視覚と嗅覚の情報を重ねることで風味を変え味が変わったように感じさせる
http://www.cyber.t.u-tokyo.ac.jp/~narumi/metacookie.html
Tag Candy：音と振動の拡張現実感によって食材の味を変えてしまおうという慶応義塾大学の学生チーム:キメラによる試み
http://www.xlab.sfc.keio.ac.jp/?page_id=215
アンビエント・ミュージック. Ambient Music. 比較的静かな音響の微細な変化を表現の基調としある特定の場所や空間に雰囲気を添えることを指向した音楽。「環境音楽（ Environmental music）」とも呼ばれる
2004/07/29 – フランステレコムResearch＆Developmentが開発した香り配信システムに、辻ウェルネスが開発した香りと画像コンテンツを組み合わせた。実験では、画像ごとにあらかじめ合成した香りを配信する。
http://www.itmedia.co.jp/news/articles/0407/29/news033.html
身体部位
http://jp.techcrunch.com/2011/08/24/20110824handroid-japanese-company-shows-advanced-robot-hand-video/
進歩したロボットの手 Handroid
ARコンタクトレンズ
http://innovega-inc.com/new-architecture.php
HMD
拡張現実グローブ「T(エーテル)」
http://commonpost.boo.jp/?p=39001
そして次は「脳波」の変化も拡張する?!
脳波
脳波を感知するセンサーを内蔵した猫耳だ。 人の感情に合わせて猫のように耳が反応する。ノーマル、集中など4種類の動きを実現。Amazonなどで発売中。
http://www.youtube.com/watch?v=JblMzmAyLW8
http://www.neurosky.jp
スマートフォンが行動形式を大きく変えた
-身体の一部のようになったスマートフォン
PC接続Webカメラ
Android
Apple iPhone / iPad
Android Tablet
Webカメラ付き PC
NINTENDO DS 3D
ARを実現するモバイル端末群Windows Phone 7.x
SONY PS VITA
Brack Berry
ARの技術を生かした玩具(1)
http://www.youtube.com/watch?v=5fwjHO6VjWw&feature=player_embedded
Wi-Fi 通信／高度6メーター
２機のカメラを搭載し録画可能
http://ardrone2.parrot.com
ARの技術を生かした玩具(2)
http://www.youtube.com/watch?v=UPn3jVGQw68
http://www.gosphero.com
プラットフォーム テクノロジー
ARのテクノロジーとプラットフォーム
SmartAR
•ARマーカー：通常は白黒の四角い形状、QRcode等
•ビジョン=マーカーレス：絵、画像等
•センサー・位置情報：GPS/WiFi/NFC/RFID
•顔認識(＋表情)
•ジェスチャー認識(手や体の動き)
•建築物、商品などの立体的な形状認識---既に実用化
•空間認識：空間の状態から仮想空間を生成
•プロジェクションマッピング：壁投影
•簡易方式：ライブカメラ上にコンテンツを重ねる
ARを実現する手法
組み合わせると、効果が増大する場合も！
活用されている主な用途•絵本、教科書、図鑑
•雑誌、カタログ、チラシ、マニュアル
•商品プロモーション
•グリーティングカード、名刺
•展示会、イベント、デジタルサイネージ
•観光ガイド、工場見学、博物館、美術館等
•シミュレーション(什器設置、家具配置、アパレル等)
•操作支援(医療技術、工事現場、機器操作等)
•リアルな場所や物と関連させたゲーム
デジタルスタンプラリー実現イメージ
２、キャンペーン開始日よりアプリをダウンロード
３、来店し、iPhoneアプリをARマーカーにかざす
１、雑誌、サイト等での告知
１０ポイント獲得
４、スペシャルコンテンツ(動画や静止画像等)が表示されると同時に、ポイントを獲得！
７、キャンペーン終了後 来店し、ポイントを使用して商品を購入！
５、再度来店し、ポイント獲得
マーカーコード:145
６、自宅からWebサイトにアクセスしててコードを入力すると店舗と同様のマーカが印刷出来て、再度楽しめる。
「服」の試着シミュレーションカメラで写真を撮影
AAA-01 XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX
BBB-01 XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX
CCC-01 XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX
BBB-01 !XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX !YYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYY !ZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZ
ARで試す
商品詳細を見る
ARで試す
DDD-01XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX
写真を保存
EEE-01
スマートフォンを左右に降ることで、 商品を変更したり、色を変えるて試着が可能
アプリケーション起動
写真を保存
“SHAKA SHAKA” ARシェーカー(イメージ)
「家具等」の配置シミュレーション
BBB-01 !XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX !YYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYYY !ZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZ
ARでシミュレーション
商品詳細を見る
アプリケーション起動
WebからPDF等でARマーカーをダウンロードし印刷。または予めカタログ等と一緒に配布。
ライブカメラでAR実行
mueレイアウトシュミレーター(イメージ)
AR国内外のAR事例
IKEA 体験型カタログ
AppStore,GooglePlay “IKEA” で検索
AR
2013年のカタログで画像認識技術を使用したスマートフォン向けARアプリを提供。ページ右隅にスマートフォンのアイコンが記載されている約数十ページが対象。ムービー、棚の中が透けて見える画像、3DCG等が表示される体験型のカタログとなっている。
カタ ログ
ジャパネット倶楽部
商品カタログの商品説明、Webサイトへ
AppStore,GooglePlay “mue alive” で検索
ARカタログ
スマホのカメラで商品画像を認識し、商品の説明動画を表示。そしてWebへ遷移。http://www.youtube.com/watch?v=RGRmYU-3JPY
劇団四季
DM(ハガキ)によるプロモーション
AppStore,GooglePlay “mue alive” で検索
ARDM
スマホのカメラでDMの画像を認識し、新感覚が体験。そして、SNSサイト、チケット購入サイト、電話予約まで行える。
http://www.youtube.com/watch?v=gK3ei_qsKuc&feature=player_embedded
『リトルマーメイド』ARフォトラリーAR
http://cp.dsp.disney.co.jp/cpn/2012summer/http://www.shiki.jp/applause/littlemermaid/special/ar/app.html
パネル スタンプラリー
上演を記念して、人魚になりきるARフォト＋スタンプラリーで特典画像をゲット！
OTTO Japan FABIA(ファビア インフォリーダー)
OTTO FABIA カタログからWebサイトへARカタ
ログ
表紙から全ページに対しWebサイトへ誘導する仕組みを提供。実用性を重視した総合アプリケーションに仕上がっている。
AppStore,GooglePlay “FABIA” で検索
新聞紙面に躍動感を与える/毎日新聞
AppStore,GooglePlay “mainichi ar” で検索
毎日新聞社の発行するTwitter連動媒体「MAINICHI RT」で毎週土曜日に連載されているシネマランキングにて紹介されている、映画の写真から予告編が再生される。現在は、毎日新聞の題字や新聞記事から動画が表示される紙面拡張を提供している。
AR新聞
記事写真などが、自然に動画に変化し動き出す
新聞紙面に躍動感を与える/東京新聞
「東京こども新聞」に変身！
AR新聞
AppStore,GooglePlay “東京AR” で検索
http://www.youtube.com/watch?v=2TfhM-QORso
AR絵本:Dinosaurs Alive!
AR図鑑
http://www.bookscomealive.co.uk/ 25万部以上を販売 技術：Total Immersion
Domino’s App feat. 初音ミクAR
http://cp.dsp.disney.co.jp/cpn/2012summer/https://itunes.apple.com/jp/app/dominos-app-feat.-chu-yinmiku/id604014078?mt=8
ドミノピザのクルーが自らクリエイティブを作成したという、Miku&Domino のコラボレーションARアプリが登場、ドミノピザの社長自らが出演するビデオも公開されている
特設サイト http://miku.dominos.jp
ピザ BOX
ECサイト連動 ジュエリーフィッティングAREC
Boucheron (ブシュロン) - http://www.myboucheron.com/ TACORI (タコリ) - http://www.tacori.com/tryiton
店内のPOPとスマートフォンの連動AR
AR店舗 POP
http://www.youtube.com/watch?v=0O9CUpqSNRU&feature=player_embedded
店舗のＰＯＰにスマートフォンのカメラを向けると、その商品の情報を表示する。色違いを選択したり、評価などの情報を得ることができる。店舗での購入を促進するためのAR。
アメリカン・アパレルにて実施。
American Apparel
映画 Ice Ageのキャラクターと写真撮影AR映画
http://www.iceagemovie.com/
映画に登場するキャラクターと一緒に写真が撮れ、SNSでも共有することができる。
ビルボードからビートルが飛び出すAR
街中まで拡張するフォルックスワーゲンのプロモーション
ARビルボード
http://www.youtube.com/watch?v=KRA0SZhKNyo&feature=player_embedded
機能 ―捕って、たのしい！ ・AR（拡張現実)で、街にさまざまな蝶が飛ぶ。 ・モーションセンサーで「虫捕り」をが楽しめる。 !―お得で、たのしい！ ・さまざまな情報や、コンテンツ、クーポンが入手できる。 !―集めて、たのしい！ ・ロケーション毎に異なる蝶をコレクションすることができる。 ・Twitterと連携した新種「ちょうちょ」情報配信や、ランキング機能がある。 !―分けあって、たのしい！ ・Bluetooth連携で、友人と蝶を交換することができる。
「ちょう」がクーポンを運んでくる【iButterfly】 これまでのクーポンに「AR（拡張現実)」や「位置情報ゲーム」などのエンタテインメント性を加えたiPhoneアプリ。クーポンの他にもロケーションに応じた情報やエンタテインメントコンテンツなどの配布もできる。電通が提供。
蝶を捕まえるソーシャルAR「iButterfly」
http://www.youtube.com/watch?v=AVwokcqjWsI&feature=player_embedded
http://www.ibutterfly.jp
台湾の類似したARアプリケーション
恐竜博物館で活用されるAR
展示されている恐竜の化石にARアプリケーション内蔵のデバイスのカメラを向けると、恐竜が動き出すコンテンツなど、効果的な体験を提供している。アメリカのローヤルオンタリオ博物館にて。
AR博物館
http://www.youtube.com/watch?v=OiMp0uiJXh0&feature=player_embedded
AUDI eKurzinfo - ARマニュアルAR自動車
https://itunes.apple.com/de/app/audi-ekurzinfo/id436341817
画像認識・位置情報を使用したARは
2012年より飛躍的に普及しており
既に特別な技術ではないといえる。 !
安価にかつ迅速な導入が可能となった！
AR の現状に関するまとめ
目的：明確？ (集客、売上向上) !必然性：利用者のためになる？ !告知：実施日や実施場所は明確？
!操作：利用者は簡単に操作出来る？ !場所：その場所でスマホを起動する？ !精度：画像やマーカー・位置情報は正しく認識される？ !スケジュール：開発ID、コンテンツ制作、(iOS審査)
ARを成功させる７つのポイント
体験の共有とコミュニケーション
Sharing of Interactive Experience
•人が集まる・集めたい「場所・空間」に
対話的な未来的空間を創出。
•訪問者とブランドの接点を築き、新しい情報体験を提供。
•スマートフォンだけでは得られない「他者との共有体験」が今こそ求められている。
Sense!us(センサス)
Sense!us （センサス）
赤外線投光器 赤外線カメラ プロジェクター
+専用PC +専用PC
リアプロジェクター
����
赤外線投光器とカメラを使用して、映像と人のインタラクティブなコミュニケーションをつくりだす
Interactive Billboard／自然な動き
Interactive Billboard／参加型
身体を認識するKinect / Xtion
ASUS Xtion PRO
MS Kinect
出展：
Body tracking AR – 3Dfeel(イベント)
+専用PC
���� ����
3D����
���������������������
ボディ・トラッキング技術を使用して、人の動きにフィットするバーチャルな3Dドレス試着を可能に
Body tracking AR – 3Dfeel(イベント)
カルティエのイベントで利用されたブレスレットが腕に装着されるARh"ps://vimeo.com/42514433
Smart Screen (スマート・スクリーン)
プロジェクター
��� �������
���� ����������������
赤外線センサーを使用し、ショーウィンドゥや壁面をインタラクティブなコミュニケーション装置に変身させる
Smart Screen (スマート・スクリーン)
Interactive Guide (スマートスクリーンによるFuture communication)
●設置想定場所
サイネージスペースはもとより、壁面やガラス面、ロビー空間などを、手操作のインタラクションによる情報コミュニケーションスクリーンへ
サイネージの上部前面にスマートスクリーンを設置すれば、選んだパネルの関連情報（飲食店なら：おすすめメニューや店内情報）を動画などを使ってより魅力的にアピールできる。 動画表示用にモニターを設置するか、もしくはサイネージ全体をデジタル化する。
指の動きを正確に検出する[LEAP mortion]
https://www.leapmotion.com
https://www.youtube.com/watch?v=_d6KuiuteIA&feature=player_embedded
https://airspace.leapmotion.comLEAP ストアー
Youtube
公式サイト
価格は80ドル
腕の動作状態を認識するMYO(参考製品)
出展：https://www.thalmic.com/en/myo/
MYO筋肉の電気信号と連携し、デバイスをコントロール。参考価格は149ドル
https://www.youtube.com/watch?v=oWu9TFJjHaMYoutube: MYO - Wearable Gesture Control from Thalmic Labs
ウェアラブルと 新コミュニケーション
スマートウォッチ
ウルトラセブンから45年以上が過ぎ...
出展：http://blog.denpa.ac.jp/?attachment_id=712
ビデオシーバー
スマートウォッチ(1)
出展：http://www.samsung.com/global/microsite/galaxynote3-gear/
SAMSUNG GALAXY Gear (2013年10月日本で発売開始)(価格299ドル/約3万円)
スマートウォッチ(1)
出展：http://toq.qualcomm.com/#toq-hello
Qualcomm Toq(トーク) (2013年第４四半期米国発売予定)(価格300ドル前後)
スマートウォッチ(1)
出展：http://www.sonymobile.co.jp/product/accessories/smartwatch2/
Sony SmartWatch 2 (2013年10月25日 日本で発売開始)
NFCで簡単ペアリング
スマートウォッチ(3)
出展：http://www.yankodesign.com/2013/07/26/love-this-iwatch/
Apple / iWatch (開発中と噂されている) デザインアイデア
http://www.knowyourmobile.com/apple/apple-iwatch/19775/apple-iwatch-release-date-specs-and-rumours-watch-space/page/0/1
Martin Hajek氏によるコンセプトデザイン出展：http://design.style4.info/2013/10/iwatch/
スマートウォッチの用途と課題
•スマートフォン等と連動して使用できる情報端末。
•スマートフォンとの二重持ちが受け入れられるか？必要性は？
•現状のデザインは明らかに一昔前のデジタル時計のよう。
!
!
ヘッドマウントディスプレイ(HMD)
ブラザー工業 AiRScouter(20万円)Vuzix WRAP 1200AR
ARを実現する様々なHMDGoogle Glass (開発者向け$1,500)
Vuzix SMART GLASS M100
Telepathy One
JET | Recon Instruments
http://optinvent.com
Optinvent ORA($949)
http://tele-pathy.org
Epson's Moverio BT-100 ($1000)
オリンパスMEG4•5W
CastAR http://technicalillusions.com
http://www.vuzix.com/home/
http://www.4gamer.net/games/195/G019528/20130517052/
仮想現実HMD「Oculus Rift」
2013年4月 Game Developers Conference 2013 実機デモ !6月27日販売開始 価格：50,000円程度
http://youtu.be/9Wv9k_ssLcI
工場での部品ピッキング利用...SAP
SAP & Vuzix Bring you Augmented Reality Solutions for the Enterprise
http://online.wsj.com/news/articles/SB10001424052702303796404579099203059125112
Smart glasses from Vuzix provide voice and visual information to help warehouse employees work more efficiently and safely. Vizux
http://www.youtube.com/watch?v=nrWfLAh2T3k
視覚障害者のためのAR Glass
イスラエルのオアカム社が販売しているメガネ型デバイス OrCamは、視覚障害を持つ人のために役立つグラス。
最初の100台は$2,500で販売された。
HMDの分類
•没入 ／ シースルー(透過)
•両眼 ／ 片眼
•フレーム装着 ／ 独立装着
•コンテンツ内包 ／ ネットワーク接続
•カメラ標準付属 ／ カメラ別途装着
•マイクによる音声検索有 ／ 無
•通信:スマホ連動 Wi-Fi , Bluetooth
HMDの用途
•工場、倉庫、巨大店舗でのピッキング
•博物館や施設内、業務のナビゲーション
•医療・福祉・教育 遠隔による支援
•コミュニケーション(イベントや交流会、リアルタイム翻訳)
•ハンズフリーの状態で、情報検索/参照、情報発信
HMDの課題
•バッテリーの小型化・高性能化
•低価格化
•耐久性
•視力低下などの健康被害の可能性
•プライバシーの問題(利用目的による)
• 情報整理の必要性と的確で高速な検索
•ソフトウェアの充実
AR技術が生活に溶け込む未来
h"p://www.youtube.com/watch?v=3csqCV39nds
A Day Made of Glass