tdc - desenvolvendo com kinect
TRANSCRIPT
![Page 1: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/1.jpg)
Gabriel Schade Cardoso
Desenvolvimento com Kinect
![Page 2: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/2.jpg)
2
Sobre
GUI
Dev - 5 anos Dev – 2 anos
.NET
Graduado em ciência da computação Mestrando em inteligência artificial
aplicada Certificações Microsoft
C# ASP .NET MVC HTML 5 + CSS 3 + JavaScript
Programador desde 2009 Palestrante desde 2012 Autor dos livros sobre Kinect e Windows
Phone da editora Casa do Código
![Page 3: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/3.jpg)
3
Interfaces
GUICommand Line Interface
Natural User Interface
Graphical User Interface
![Page 4: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/4.jpg)
4
Microsoft Kinect
![Page 5: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/5.jpg)
5
Kinect for Windows SDK
![Page 6: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/6.jpg)
6
Reconhecimento de voz; (necessita do SpeechRecognition SDK)
Reconhecer a direção de uma fonte de
áudio;
Reconhecer o volume de uma entrada de áudio;
Kinect Audio Source
Microfones
![Page 7: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/7.jpg)
7
Detecção da Mão
Cursor padrão
Pressionando
Pressionado
Segurando
![Page 8: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/8.jpg)
8
Skeleton Stream Apesar de reconhecer 6 usuários o Kinect rastreia as articulações de no máximo 2 usuários.
![Page 9: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/9.jpg)
9
Skeleton Stream
Pose / Postura Gestos
![Page 10: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/10.jpg)
10
Detecção de Poses Não há nenhuma forma simples nativa para se fazer a detecção de poses ou gestos genéricos.
Qual a grande dificuldade?
![Page 11: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/11.jpg)
11
Produto Escalar• Utiliza-se três articulações e suas posições espaciais (X, Y e
Z) para definir os vetores 3D utilizados para calcular o ângulo.
![Page 12: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/12.jpg)
12
Detecção de Gestos A detecção de gestos é baseada em uma lista encadeada de poses, que possuem tempo limite inferior e superior e uma taxa de percentual de acerto.
Essas informações são baseadas em um motor de reconhecimento que inferi quais foram as poses reconhecidas e as dispara para a aplicação
![Page 13: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/13.jpg)
13
Detecção de Gestos Cada elemento na lista é chamado de quadro chave (keyframe), é uma técnica utilizada em outras áreas que decidi aplicar no Kinect
![Page 14: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/14.jpg)
14
Detecção de Gestos
![Page 15: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/15.jpg)
15
Demo – Final
![Page 17: TDC - Desenvolvendo com Kinect](https://reader033.vdocuments.mx/reader033/viewer/2022051314/55611e13d8b42a70718b45ab/html5/thumbnails/17.jpg)
17
Muito Obrigado!!
/gabrielschade
www.programadorpoliglota.com.br
/twoplayersoficial
/gabrielschade
/gabrielschade
/gabrielschade