“人工知能パーツ” microsoft cognitive services 概要 · 写真アプリ、skype、...
TRANSCRIPT
本日の資料 ⇒ https://doc.co/xrCf79
本日の資料 ⇒ https://doc.co/xrCf79
Tweet & Share OK ♥
#AzureJP, #CognitiveServices
本日の資料 ⇒ https://doc.co/xrCf79
本日の資料 ⇒ https://doc.co/xrCf79
#早く面白いことやったヤツが優勝
本日の資料 ⇒ https://doc.co/xrCf79
本日の資料 ⇒ https://doc.co/xrCf79
東京大学 特任准教授松尾 豊 氏 による AI 発展の系譜
総務省「AIネットワーク社会推進会議」資料
過去のデータの傾向をモデル(数式やルール)に変換
→過去の傾向から未来を予測
傾向のモデル化と予測
データを多次元空間にマップして、近いデータを集めてグループ化
→人間には判別できない類似傾向をもつグループを発見
多次元空間での集約
大量のデータ項目 (変数)の関連性を高速に計算し、関係を可視化
→業務環境の状況把握や、経年変化などを察知
関連性の高い変数の組み合わせ発見
性別 年齢 配偶者 子供人数
…
製品カテゴリ
男性 19 無 0 1
女性 44 有 2 3
男性 49 有 1 2
男性 12 無 0 3
女性 37 無 0 1
女性 60 有 2 4
男性 44 有 1 2
女性 27 有 0 4
女性 51 有 3 2
女性 81 有 2 1
男性 22 無 0 3
男性 29 無 0 2
性別：男
年齢：45
配偶者：有
子供人数：2
“商品カテゴリ2”
・・・・・
・・・・・
・・・・・
・・・・・
・・・・・
Microsoft AI and Research Group5,000 人以上の AI 専門チーム アプローチ
エージェント
Cortana のような AI を利用したエージェントによって、人とコンピューターのやりとりを根本的に変える。
アプリケーション
写真アプリ、Skype、Office 365 等の全てのアプリケーションに AI を取り入れる。
サービス
認知機能、機械学習を利用した分析などのインテリジェント機能を全てのアプリケーション開発者に提供する。
インフラ
Azureを利用し、世界で最も強力な AI スーパーコンピュータを構築し、誰でも利用できるようにする。
Microsoft の AI 分野での取り組み
Bing maps提供開始
目的地への最短経路
MicrosoftResearch 設立
Hotmail提供開始
迷惑メールの判別
Bing search提供開始
最適な検索結果
1991 20091997 2008
Kinect販売開始
人の動きを認識する
Azure ML提供開始
将来起こることの予測
SkypeTranslator提供開始
人の言葉を認識する
2014 20152010
CNTKOSS公開
深層学習ツールキット
2016
CognitiveServices提供開始
知覚・記憶・判断・推理
2016
クラウドロボティクス分野戦略提携
Pepper による次世代型店舗
2016
Microsoft AIand
Research Group設立
2016
りんな提供開始
会話型AI
2015
LINE ID：@ms_rinna
AI の民主化
AI がより身近な存在に
AI の民主化
パーソナルアシスタント（Cortana）
チャットボット（BOT Framework)
機械学習と開発環境（Azure MachineLearning Studio)
深層学習フレームワーク（Cognitive Toolkit)
認識API（Cognitive Services)
翻訳API(Micsrosoft Translator)
Action
People
Automated Systems
Apps
Web
Mobile
Bots
Intelligence
Dashboards & Visualizations
Cortana
Bot Framework
Cognitive Services
Power BI
Information Management
Event Hubs
Data Catalog
Data Factory
Machine Learning and Analytics
HDInsight
Stream Analytics
Intelligence
Data Lake Analytics
Machine Learning
Big Data Stores
SQL Data Warehouse
Data Lake Store
Data Sources
Apps
Sensors & Devices
Data
Cortana Intelligence Suite
学習済み
モデル利用
学習モデル
作成
機械学習 教師あり学習
教師なし学習
強化学習
決定木
線形回帰
SVM
ロジスティック回帰
ニューラルネットワーク
クラスタリング
次元削減
Q学習
K-mean法
主成分分析
正準相関分析
ディープニューラルネットワーク
畳みこみニューラルネットワーク
再帰的ニューラルネットワーク
回帰結合ニューラルネットワーク
→ MLによるモデルを自作せずに結果だけ利用
Face
ComputerVision
Emotion
Video
Speaker Recognition
CustomSpeech
Bing Speech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
QnA Maker
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
ContentModerator
Recommendations
Face
ComputerVision
Emotion
Video
Speaker Recognition
Bing Speech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
ContentModerator
QnA Maker
Recommendations
CustomSpeech
CustomSpeech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
QnA Maker
Recommendations
Face
ComputerVision
Emotion
Video
Speaker Recognition
Bing Speech
ContentModerator
見る+認知機能
A GOAL WITHOUTA PLAN IS
JUST A WISH
Analyze image
OCR
Smart thumbnail
Category People; 1 face found
Adult False
Black & White? No
Dominant
colors
Accent color
"faceId": "48cdf8c8-841c-4d33-b875-1710a3fc6542","faceRectangle": {“width”: 228,“height”: 228, "left": 460,"top": 125
},"faceAttributes": {"age": 23.5,"gender": "female","headPose": {"roll": -16.5,"yaw": 22.1,"pitch": 0},"smile": 0.998,"facialHair": {"moustache": 0,"beard": 0,"sideburns": 0},"glasses": "ReadingGlasses"
}
Detection Result
Grouping
Identity
"faceRectangle": {
"left": 289, "top": 209,
"width": 117, "height": 117
},
"scores": {
"anger": 0.0003364322,
"contempt": 0.008513732,
"disgust": 0.000237169676,
"fear": 0.001399079,
"happiness": 0.03209325,
"neutral": 0.1274486,
"sadness": 0.000152969456,
"surprise": 0.8298188
}
"faceRectangle": {
"left": 479, “top”: 190,
“width”: 158, "height": 158
},
"scores": {
"anger": 0.00001619889,
"contempt": 0.000121588469,
"disgust": 0.0000216889184,
"fear": 0.00138592813,
"happiness": 0.00001577913,
"neutral": 0.002224847,
"sadness": 0.00000300440252,
"surprise": 0.996211
}
Face
ComputerVision
Emotion
Video
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
ContentModerator
QnA Maker
Recommendations
Speaker Recognition
CustomSpeech
Bing Speech
聞く/話す+認知機能
Speech Intent Recognition
Text to Speech Conversion
Speech Recognition
450 6th St. San
Francisco
"450 sixth St in San Francisco.""For 50 six St San Francisco.""456th St San Francisco."
*ja-jp 含む
*ja-jp 含む
Is this Anna’s voice?
Anna
AnnaMike
Mary
Who’s voice is this?
Speaker Recognition
Speaker Verification
*ja-jp含む
*ja-jp含む
Speech Translation
=Speech Recognition＋Translation＋Text-to-Speech
CustomSpeechFace
ComputerVision
Emotion
Video
Speaker Recognition
Bing Speech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
ContentModerator
QnA Maker
Recommendations
言語+認知機能
Read me the headlines
Intent TextToSpeech
Entity Content: NewsHeadlines
Intent PlayVideo
Entity Content: Daily ShowDateTime.date: T-1 Day
Intent PauseDevice
Entity DateTime.duration: 5 Minutes
Play yesterday’s Daily Show
Pause for 5 minuteshttps://blogs.msdn.microsoft.com/bluesky/2016/04/0
5/build2016-luis-natural-language-understanding/
https://blogs.msdn.microsoft.com/bluesky/2016/09/21/luis-language-understanding-intelligent-service-japanese-available/
*ja-jp 含む
*ja-jp 含む
https://text-analytics-demo.azurewebsites.net/
https://www.microsoft.com/en-us/translator
CustomSpeechFace
ComputerVision
Emotion
Video
Speaker Recognition
Bing Speech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
Translator
ContentModerator
情報+認知機能
QnA Maker
Recommendations
CustomSpeechFace
ComputerVision
Emotion
Video
Speaker Recognition
Bing Speech
LinguisticAnalysis
LanguageUnderstanding
BingSpell Check
Web LanguageModel
Text Analytics
KnowledgeExploration
Entity Linking
AcademicKnowledge
Translator
ContentModerator
QnA Maker
Recommendations
Bing Image Search
Bing Video Search
Bing Web Search
Bing Autosuggest
Bing News Search
検索+認知機能
マーケティング (Buzz)
新規チャネル
定型業務の削減
新たな解決方法
製品の評価分析
お客様対応の向上
SearchSpeechVision Language Knowledge
SearchSpeech
マーケティング (Buzz)
新規チャネル
定型業務の削減
新たな解決方法
製品の評価分析
お客様対応の向上
コカ・コーラ 誕生100周年キャンペーン
コカ・コーラボトルを「100歳」と認識
• 自撮り写真をUp＆結果をSNS拡散
ナビタイムジャパン様
自然言語入力による路線検索BOT
• ユーザーとの新たな接点(LINE)
• 自然言語入力
Vision Language Knowledge
Vision Knowledge SearchSpeech Language
マーケティング (Buzz)
新規チャネル
定型業務の削減
新たな解決方法
製品の評価分析
お客様対応の向上
Microsoft SupportVirtual Agent
自然言語入力による自動応答サポート窓口
• 過去Q&Aデータ解析に基づく回答抽出
• 定型外は“人対応”
UBER
登録ドライバーをスマホ経由で顔認証
• 端末＋ID＋写真の多要素認証
Demo
Microsoft Support Virtual Agenthttps://support.microsoft.com/en-us/contact/virtual-agent/
Search
マーケティング (Buzz)
新規チャネル
定型業務の削減
新たな解決方法
製品の評価分析
お客様対応の向上
アロバ様
監視カメラによる店舗内行動分析
• 顔認識による顧客識別
• 表情分析による評価
HmComm 様
コールセンターソリューション
• 会話をテキスト化、キーワードを解析
• 過去Q&A検索
• 内容をCRM保存
Vision KnowledgeSpeech Language
導入事例：東京サマーランド様
マーケティング (Buzz)
新規チャネル
定型業務の削減
新たな解決方法
製品の評価分析
お客様対応の向上
SearchSpeechVision Language Knowledge
http://www.nri.com/Home/jp/news/2015/151221_1.aspx
http://www.headwaters.co.jp/news/pepper/SynApps.html
“(want to|request)”
HoloLens
・・・・・
・・・・・
・・・・・
・・・・・
・・・・・
・・・・・・・・・・
・・・・・
・・・・・
・・・・・
・・・・・
・・・・・
・・・・・
https://www.microsoft.com/cognitive-services/en-us/pricing
https://portal.azure.com
https://www.microsoft.com/cognitive-services/en-us/SDK-Sample
https://westus.dev.cognitive.microsoft.com/docs/services/
https://dev.cognitive.microsoft.com/docs/services/
https://www.microsoft.com/cognitive-services/en-us/documentation
https://westus.api.cognitive.microsoft.com/emotion/v1.0/recognize
Microsoft.ProjectOxford.Emotion
RecognizeAsync
https://aka.ms/cogbot01_HOL2
https://aka.ms/SmileScoreBot
本日の資料 ⇒ https://doc.co/xrCf79
簡単 フレキシブル 実績
数行のコードを追加するだけ
Web API でアクセス
開発言語やプラットフォームを
問わず利用可能
マイクロソフトのあらゆる分野の
テクノロジー開発から誕生
GET AKEY
https://docs.com/satonaoki/8592/microsoft-azure-azure-machine-learning-microsoft
https://docs.com/mstechsummit16/4700/app015-ai-microsoft-cognitive-services
https://www.microsoft.com/cognitive-services/en-us/SDK-Sample
https://github.com/Microsoft/Cognitive-Samples-IntelligentKiosk
https://docs.com/cogbot/9675/cognitive-services
https://www.microsoft.com/cognitive-services/en-us/blog
https://blogs.technet.microsoft.com/machinelearning/
https://ignite.microsoft.com/#fbid=-beUbSQ0fl5
https://connectevent.microsoft.com/
http://aka.ms/cogbot01_HOL1
http://aka.ms/cogbot01_HOL2
http://qiita.com/annie/items/edc26c0ee9603e84a2e4
http://beachside.hatenablog.com/entry/2016/11/21/010051
http://qiita.com/annie/items/af481a7a8d4aac4e0fd9
本書に記載した情報は、本書各項目に関する発行日現在の Microsoft の見解を表明するものです。Microsoftは絶えず変化する市場に対応しなければならないため、ここに記載した情報に対していかなる責務を負うものではなく、提示された情報の信憑性については保証できません。
本書は情報提供のみを目的としています。 Microsoft は、明示的または暗示的を問わず、本書にいかなる保証も与えるものではありません。
すべての当該著作権法を遵守することはお客様の責務です。Microsoftの書面による明確な許可なく、本書の如何なる部分についても、転載や検索システムへの格納または挿入を行うことは、どのような形式または手段（電子的、機械的、複写、レコーディング、その他）、および目的であっても禁じられています。これらは著作権保護された権利を制限するものではありません。
Microsoftは、本書の内容を保護する特許、特許出願書、商標、著作権、またはその他の知的財産権を保有する場合があります。Microsoftから書面によるライセンス契約が明確に供給される場合を除いて、本書の提供はこれらの特許、商標、著作権、またはその他の知的財産へのライセンスを与えるものではありません。
© 2017 Microsoft Corporation. All rights reserved.
Microsoft, Windows, その他本文中に登場した各製品名は、Microsoft Corporation の米国およびその他の国における登録商標または商標です。
その他、記載されている会社名および製品名は、一般に各社の商標です。