vericação do ajuste do modelo - universidade federal de...
TRANSCRIPT
![Page 1: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/1.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Modelos Lineares Generalizados -
Verificação do Ajuste do Modelo
Erica Castilho Rodrigues
3 de Junho de 2016
1
![Page 2: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/2.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
2
![Page 3: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/3.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Estatística de Pearson Generalizada
3
![Page 4: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/4.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Estatística de Pearson Generalizada
◮ Uma outra medida usada para verificar o ajuste do modelo.
◮ Essa estatística é dada por
X 2p =
n∑
i=1
(yi − µi)2
Var(Yi)
onde Var(Yi) é a função de variância estimada sob o
modelo que está sendo ajustado aos dados.
4
![Page 5: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/5.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Para o Poisson e Binomial a estatística fica
X 2p =
n∑
i=1
(oi − ei)2
ei
que é a Estatística Qui-Quadrado usual.
◮ Essa estatistica tem a seguinte distribuição assintótica
X 2p ∼ χ2
n−p
onde◮ n é o tamanho da amostra;◮ p é o número de parâmetros do modelo.
5
![Page 6: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/6.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ A Deviance é mais usada do que a Estatística de Pearson
Generalizada.
◮ Isso acontece porque para a Deviance temos que:◮ seu valor sempre dimui quando acrescentamos variáveis
no modelo;◮ o mesmo não é verdade para a Estatística de Pearson.
6
![Page 7: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/7.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Testes de Hipóteses usando a função Deviance
7
![Page 8: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/8.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Vimos que podemos fazer testes sobre o vetor β utilizando
a distribuição assintótica
b ∼ N(β, I(β−1) .
◮ Uma alternativa:◮ comparar o ajuste de dois modelos;◮ o modelo com a variável e o modelo sem a variável.
◮ Um modelo deve estar contido no outro.
◮ A diferença deve ser apenas a variável incluída/retirada.
◮ A distribuição de probabilidade deve ser a mesma.
◮ A função de ligação deve ser a mesma.
8
![Page 9: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/9.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Vamos chamar o modelo mais simples (menos variáveis)
de M0.
◮ O modelo mais complexo (mais variáveis) será M1.
◮ Para o modelo M0 temos a hipótese nula de que
H0 : β = β0 =
[
β1...βq
]
.
◮ Para o modelo M1 temos a hipótese alternativa
H1 : β = β0 =
[
β1...βp
]
.
◮ Observe que q < p < n.
9
![Page 10: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/10.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Podemos testar
H0 vs H1
usando a diferença das Deviances dos dois modelos
∆D = D0−D1 = 2 [l(bmax ,y)− l(b0,y)]−2 [l(bmax ,y)− l(b1,y)] .
◮ Se os modelos estão bem ajustados temos que
D0 ∼
10
![Page 11: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/11.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Podemos testar
H0 vs H1
usando a diferença das Deviances dos dois modelos
∆D = D0−D1 = 2 [l(bmax ,y)− l(b0,y)]−2 [l(bmax ,y)− l(b1,y)] .
◮ Se os modelos estão bem ajustados temos que
D0 ∼ χ2(n−p) D0 ∼
10
![Page 12: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/12.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Podemos testar
H0 vs H1
usando a diferença das Deviances dos dois modelos
∆D = D0−D1 = 2 [l(bmax ,y)− l(b0,y)]−2 [l(bmax ,y)− l(b1,y)] .
◮ Se os modelos estão bem ajustados temos que
D0 ∼ χ2(n−p) D0 ∼ χ2
(n−q) .
◮ Portanto
∆D = D0 − D1 ∼
10
![Page 13: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/13.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Podemos testar
H0 vs H1
usando a diferença das Deviances dos dois modelos
∆D = D0−D1 = 2 [l(bmax ,y)− l(b0,y)]−2 [l(bmax ,y)− l(b1,y)] .
◮ Se os modelos estão bem ajustados temos que
D0 ∼ χ2(n−p) D0 ∼ χ2
(n−q) .
◮ Portanto
∆D = D0 − D1 ∼ χ2(n−q)−(n−p) ou seja χ2
p−q .
10
![Page 14: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/14.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Hipóteses a serem testadas:◮ H0: a diferença entre M0 e M1 não é significativa;◮ H1: a diferença enrte os modelos é significativa.
◮ Se ∆D não é um valor atípico na distribuição χ2p−q:
◮ podemos aceitar H0 permanecer com o modelo mais
simples;◮ a diferença de ajuste entre os modelos não é significativa.
◮ H0 é rejeitada para valores grandes ou pequenos de ∆D?
11
![Page 15: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/15.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Hipóteses a serem testadas:◮ H0: a diferença entre M0 e M1 não é significativa;◮ H1: a diferença enrte os modelos é significativa.
◮ Se ∆D não é um valor atípico na distribuição χ2p−q:
◮ podemos aceitar H0 permanecer com o modelo mais
simples;◮ a diferença de ajuste entre os modelos não é significativa.
◮ H0 é rejeitada para valores grandes ou pequenos de ∆D?
Grandes.
◮ Como fica a região crítica?◮ se ∆D < χ2
c não rejeitamos H0 permanecemos com o
modelo M0;◮ se ∆D > χ2
c rejeitamos H0 e ficamos com o modelo M1.
11
![Page 16: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/16.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ A aproximação assintótica da distribuição de ∆D é melhor
do que de D.
◮ Se temos um parâmetro de ruído para estimar,◮ nem sempre a Deviance poderá ser obtida diretamente dos
dados;◮ precisa ainda do parâmetro de ruído.
◮ Vimos no caso Normal, por exemplo, que
D =
∑
i(yi − yi)2
σ2
precisamos ainda estimar σ2.
◮ Vejamos como isso é feito no exemplo a seguir.
12
![Page 17: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/17.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ Considere o modelo linear normal
E(Yi) = µi = xTi β .
◮ Já vimos que a Deviance desse modelo é dada por
D =
∑
i(yi − yi)2
σ2
◮ Vamos usar a seguinte notação:◮ yi(0) é o valor ajustado pelo modelo M0;◮ yi(1) é o valor ajustado pelo modelo M1.
13
![Page 18: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/18.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A Deviance do modelo M0 (tem q parâmetros) fica
D0 =
14
![Page 19: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/19.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A Deviance do modelo M0 (tem q parâmetros) fica
D0 =
∑
i(yi − yi(0))2
σ2
e do modelo M1 (que tem p parâmetros)
D1 =
14
![Page 20: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/20.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A Deviance do modelo M0 (tem q parâmetros) fica
D0 =
∑
i(yi − yi(0))2
σ2
e do modelo M1 (que tem p parâmetros)
D1 =
∑
i(yi − yi(1))2
σ2.
◮ Temos ainda que
D0 ∼
14
![Page 21: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/21.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A Deviance do modelo M0 (tem q parâmetros) fica
D0 =
∑
i(yi − yi(0))2
σ2
e do modelo M1 (que tem p parâmetros)
D1 =
∑
i(yi − yi(1))2
σ2.
◮ Temos ainda que
D0 ∼ χ2n−q D1 ∼
14
![Page 22: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/22.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A Deviance do modelo M0 (tem q parâmetros) fica
D0 =
∑
i(yi − yi(0))2
σ2
e do modelo M1 (que tem p parâmetros)
D1 =
∑
i(yi − yi(1))2
σ2.
◮ Temos ainda que
D0 ∼ χ2n−q D1 ∼ χ2
n−p ∆D ∼ χ2p−q .
14
![Page 23: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/23.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Para não termos que encontrar σ2 vamos usar a razão
F =∆D/(p − q)
D1/(n − p)∼
15
![Page 24: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/24.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Para não termos que encontrar σ2 vamos usar a razão
F =∆D/(p − q)
D1/(n − p)∼ Fp−q,n−p .
◮ Dessa maneira, F fica
F =∆(
∑
i(yi − yi(0))2 −
∑
i(yi − yi(1))2)/(p − q)
(∑
i(yi − yi(1))2)/(n − p)∼
15
![Page 25: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/25.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
◮ Para não termos que encontrar σ2 vamos usar a razão
F =∆D/(p − q)
D1/(n − p)∼ Fp−q,n−p .
◮ Dessa maneira, F fica
F =∆(
∑
i(yi − yi(0))2 −
∑
i(yi − yi(1))2)/(p − q)
(∑
i(yi − yi(1))2)/(n − p)∼ Fp−q,n−p.
◮ Como o σ2 é cancelado nessa razão, torna-se
desncessário estimá-lo.
◮ Rejeitamos H0 quando F é grande.
15
![Page 26: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/26.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ A tabela a seguir mostra os dados do peso e a idade de
gestação de bebês em um hospital.
16
![Page 27: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/27.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A figura a seguir mostra o gráfico de dispersão entre as
duas variáveis.
17
![Page 28: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/28.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Os bebês estão divididos em dois grupos:◮ masculino e feminino.
◮ Como podemos escrever o modelo com essas duas
variáveis?
18
![Page 29: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/29.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Os bebês estão divididos em dois grupos:◮ masculino e feminino.
◮ Como podemos escrever o modelo com essas duas
variáveis?
◮ A variável sexo entra como Dummy.
◮ O modelo sem interação fica
Yi = β0 + β1Xi + β2Zi + ǫi ǫi ∼iid N(0, σ2)
onde
18
![Page 30: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/30.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Os bebês estão divididos em dois grupos:◮ masculino e feminino.
◮ Como podemos escrever o modelo com essas duas
variáveis?
◮ A variável sexo entra como Dummy.
◮ O modelo sem interação fica
Yi = β0 + β1Xi + β2Zi + ǫi ǫi ∼iid N(0, σ2)
onde◮ Yi é o peso do bebê;◮ Xi é idade de gestação◮ Zi é uma indicadora que representa sexo (1 - masculino, 0 -
feminino).
18
![Page 31: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/31.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos verificar a necessidade de incluir o termo de
interação.
◮ O modelo com interação é dado por
Yi = β0 + β1Xi + β2Zi + ǫi + β3XiZi ǫi ∼iid N(0, σ2)
◮ Vamos denotar por◮ M0: modelo sem interação;◮ M1: o modelo com interação.
◮ Queremos verificar se o ganho de ajuste de M1 em relação
a M0 é significativo.
19
![Page 32: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/32.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A Soma dos Quadrados dos Resíduos está relacionada
com a Deviance da segunte maneira
SQE =∑
i
(yi − yi)2 =
20
![Page 33: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/33.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A Soma dos Quadrados dos Resíduos está relacionada
com a Deviance da segunte maneira
SQE =∑
i
(yi − yi)2 = σ2D.
◮ Para os modelos temos que
SQE0 = 658770.8 SQE1 = 652424.5
ou seja
D0 =
20
![Page 34: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/34.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A Soma dos Quadrados dos Resíduos está relacionada
com a Deviance da segunte maneira
SQE =∑
i
(yi − yi)2 = σ2D.
◮ Para os modelos temos que
SQE0 = 658770.8 SQE1 = 652424.5
ou seja
D0 =658770.8
σ2D1 =
20
![Page 35: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/35.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A Soma dos Quadrados dos Resíduos está relacionada
com a Deviance da segunte maneira
SQE =∑
i
(yi − yi)2 = σ2D.
◮ Para os modelos temos que
SQE0 = 658770.8 SQE1 = 652424.5
ou seja
D0 =658770.8
σ2D1 =
652424.5
σ2.
20
![Page 36: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/36.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Temos que n = 24 logo
F =∆(
∑
i(yi − yi(0))2 −
∑
i(yi − yi(1))2)/(p − q)
(∑
i(yi − yi(1))2)/(n − p)
=(SQE0 − SQE1)/(p − q))
SQE1/(n − p)=
21
![Page 37: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/37.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Temos que n = 24 logo
F =∆(
∑
i(yi − yi(0))2 −
∑
i(yi − yi(1))2)/(p − q)
(∑
i(yi − yi(1))2)/(n − p)
=(SQE0 − SQE1)/(p − q))
SQE1/(n − p)=
(658770.8 − 652424.5)/(4 − 3)
652424.5/(24 − 4)= 0,19 .
21
![Page 38: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/38.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a
22
![Page 39: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/39.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é
22
![Page 40: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/40.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 pois
22
![Page 41: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/41.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 poisP(F1,20 > 4,35) = 0,05 .
◮ A região crítica é dada por
22
![Page 42: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/42.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 poisP(F1,20 > 4,35) = 0,05 .
◮ A região crítica é dada por◮ se F < Fc , não rejeitamos H0
◮ se F > Fc , rejeitamos H0 .
◮ Conclusão do teste:
22
![Page 43: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/43.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 poisP(F1,20 > 4,35) = 0,05 .
◮ A região crítica é dada por◮ se F < Fc , não rejeitamos H0
◮ se F > Fc , rejeitamos H0 .
◮ Conclusão do teste:◮ Fobs = 0, 19 < 4, 35 não rejeitamos H0;
22
![Page 44: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/44.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 poisP(F1,20 > 4,35) = 0,05 .
◮ A região crítica é dada por◮ se F < Fc , não rejeitamos H0
◮ se F > Fc , rejeitamos H0 .
◮ Conclusão do teste:◮ Fobs = 0, 19 < 4, 35 não rejeitamos H0;◮ não é necessário incluir termo de interação no modelo;
22
![Page 45: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/45.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Devemos comparar esse valor com a F1,20.
◮ Rejeitamos H0, quando F é grande.
◮ Fixando α = 0,05, o valor crítico dessa distribuição é dado
por
Fc = 4.35 poisP(F1,20 > 4,35) = 0,05 .
◮ A região crítica é dada por◮ se F < Fc , não rejeitamos H0
◮ se F > Fc , rejeitamos H0 .
◮ Conclusão do teste:◮ Fobs = 0, 19 < 4, 35 não rejeitamos H0;◮ não é necessário incluir termo de interação no modelo;◮ conclusão: o efeito da idade no peso é o mesmo para
meninos e meninas.
22
![Page 46: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/46.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo
◮ Um pesquisador quer verificar qual a dose ideal de
inseticida para matar insetos.
◮ Diferentes doses são usadas para grupos de uma mesma
espécie.
◮ Vamos usar a seguinte notação:◮ di : dose do inseticida;◮ mi : número de insetos que receberam a dose;◮ yi : número de insetos mortos dentre os mi que receberam
o inseticida;◮ pi : proporção de insetos mortos.
23
![Page 47: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/47.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)◮ A tabela a seguir mostra os dados coletados
24
![Page 48: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/48.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ O pesquisador deseja determinar quais as doses tais que◮ 50% dos insetos são mortos (LD50);◮ 90% dos insetos são mortos (LD90).
◮ Podem usar esse dado para aplicação em campo.
25
![Page 49: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/49.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A figura a seguir mostra o gráfico dispersão entre:◮ doses de inseticida (di ) e proporção de insetos mortos (pi ).
26
![Page 50: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/50.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ O gráfico tem um aspecto sigmoidal.
◮ Esse formato pode nos guiar na escolha da função de
ligação.
◮ Esse tipo de ensaio é chamado de dose-resposta.
◮ Dois aspectos devem ser considerados:◮ a dose da droga (inseticida, fungicida, herbicida,
medicamento);◮ o indivíduo que recebe a droga (inseto, planta, fungo,
paciente).
◮ A reposta do indivíduo é binária:◮ responde (1) ou não responde (0) ao tratamento.
27
![Page 51: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/51.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A resposta dependerá do nível da dosagem aplicada.
◮ Cada indivíduo tem um nível a partir do qual responde ao
tratamento.
◮ Esse valor é chamdo de tolerância do indivíduo.
◮ Essa tolerância varia de um indivíduo para o outro dentro
da população.
◮ Portanto é uma variável aleatória e vamos denotá-la por U.
28
![Page 52: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/52.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A figura seguir mostra exemplos de distribuição da
tolerância.
29
![Page 53: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/53.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos denotar por f (u) a função de densidade da
tolerância.
◮ Seja d a dose ministrada à toda população.
◮ Quais indivíduos responderão à droga?
◮ Aqueles tais que
U < d .
◮ A probabilidade de um indivíduo escolhido ao acaso
responda ao tratamento é
π(d) =
30
![Page 54: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/54.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos denotar por f (u) a função de densidade da
tolerância.
◮ Seja d a dose ministrada à toda população.
◮ Quais indivíduos responderão à droga?
◮ Aqueles tais que
U < d .
◮ A probabilidade de um indivíduo escolhido ao acaso
responda ao tratamento é
π(d) = P(U < d) =
30
![Page 55: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/55.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos denotar por f (u) a função de densidade da
tolerância.
◮ Seja d a dose ministrada à toda população.
◮ Quais indivíduos responderão à droga?
◮ Aqueles tais que
U < d .
◮ A probabilidade de um indivíduo escolhido ao acaso
responda ao tratamento é
π(d) = P(U < d) =
∫ d
−∞
f (u)du .
30
![Page 56: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/56.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Para valores pequenos de d quanto deve valer π(d)?
31
![Page 57: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/57.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Para valores pequenos de d quanto deve valer π(d)?
π(d) ≈ 0 .
◮ Para valores grandes de d quanto deve valer π(d)?
31
![Page 58: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/58.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Para valores pequenos de d quanto deve valer π(d)?
π(d) ≈ 0 .
◮ Para valores grandes de d quanto deve valer π(d)?
π(d) ≈ 1 .
◮ π é uma função crescente ou decrescente de d?
31
![Page 59: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/59.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Para valores pequenos de d quanto deve valer π(d)?
π(d) ≈ 0 .
◮ Para valores grandes de d quanto deve valer π(d)?
π(d) ≈ 1 .
◮ π é uma função crescente ou decrescente de d?
◮ Crescente, quanto maior a dose maior a probabilidade de
resposta.
31
![Page 60: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/60.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ No exemplo dos insetos queremos encontrar um modelo
razoável de como π(d) varia com d .
◮ E a partir disso encontrar os valores de doses tais que◮ 50% dos indivíduos respondem à droga (LD50);◮ 90% dos indivíduos respondem à droga (LD90).
◮ Seja Yi a variável aleatória que denota o número de
insetos mortos.
◮ Seja πi a probailidade de um inseto do i-ésimo grupo
morrer.
◮ Qual a distribuição de Yi?
Yi ∼
32
![Page 61: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/61.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ No exemplo dos insetos queremos encontrar um modelo
razoável de como π(d) varia com d .
◮ E a partir disso encontrar os valores de doses tais que◮ 50% dos indivíduos respondem à droga (LD50);◮ 90% dos indivíduos respondem à droga (LD90).
◮ Seja Yi a variável aleatória que denota o número de
insetos mortos.
◮ Seja πi a probailidade de um inseto do i-ésimo grupo
morrer.
◮ Qual a distribuição de Yi?
Yi ∼ Bin(πi ,mi) .
32
![Page 62: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/62.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos usar a função de ligação canônica.
◮ Qual ligação é essa?
33
![Page 63: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/63.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos usar a função de ligação canônica.
◮ Qual ligação é essa? Logística.
◮ Isso significa que:
π =
33
![Page 64: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/64.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos usar a função de ligação canônica.
◮ Qual ligação é essa? Logística.
◮ Isso significa que:
π =1
1 + eηiou
33
![Page 65: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/65.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos usar a função de ligação canônica.
◮ Qual ligação é essa? Logística.
◮ Isso significa que:
π =1
1 + eηiou log
(
πi
1 − πi
)
= ηi .
◮ Vamos ajustar o seguinte modelo
Yi ∼
33
![Page 66: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/66.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos usar a função de ligação canônica.
◮ Qual ligação é essa? Logística.
◮ Isso significa que:
π =1
1 + eηiou log
(
πi
1 − πi
)
= ηi .
◮ Vamos ajustar o seguinte modelo
Yi ∼ Bin(πi ,mi) log
(
πi
1 − πi
)
= β0 + β1di .
33
![Page 67: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/67.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ O script usado para ajustar o modelo foi o seguinte:
x=c(0,2.6,3.8,5.1,7.7,10.2)
m=c(49,50,48,46,49,50)
y=c(0,6,16,24,42,44)
dados=data.frame(x=x,y=y,m=m)
modelo=glm(cbind(y,m-y)~x, family="binomial",
data=dados)
◮ Precisamos criar dois vetores:◮ um com o número de sucesos e outro com número de
fracassos.
cbind(y,m-y)
34
![Page 68: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/68.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ O resumo do ajuste encontra-se a seguir.
> summary(modelo)
Coefficients:
Estimate Std. Error z value Pr(>|z|)
(Intercept) -3.22566 0.36992 -8.720 <2e-16 ***
x 0.60513 0.06781 8.923 <2e-16 ***
Null deviance: 163.745 on 5 degrees of freedom
Residual deviance: 10.258 on 4 degrees of freedom
AIC: 33.479
35
![Page 69: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/69.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Qual modelo estimado?
36
![Page 70: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/70.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Qual modelo estimado?
log
(
πi
1 − πi
)
= −3.22 + 0.60(di) .
◮ Qual interpretação do β1?
36
![Page 71: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/71.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Qual modelo estimado?
log
(
πi
1 − πi
)
= −3.22 + 0.60(di) .
◮ Qual interpretação do β1?
◮ Vamos tirar a exponencial dos dois lados
(
πi
1 − πi
)
=
36
![Page 72: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/72.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Qual modelo estimado?
log
(
πi
1 − πi
)
= −3.22 + 0.60(di) .
◮ Qual interpretação do β1?
◮ Vamos tirar a exponencial dos dois lados
(
πi
1 − πi
)
= e−3,22+0,60(di) = e−3,22∗ e0,60(di)
◮ O que acontece se aumentarmos di em uma unidade
(
πi
1 − πi
)
=
36
![Page 73: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/73.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Qual modelo estimado?
log
(
πi
1 − πi
)
= −3.22 + 0.60(di) .
◮ Qual interpretação do β1?
◮ Vamos tirar a exponencial dos dois lados
(
πi
1 − πi
)
= e−3,22+0,60(di) = e−3,22∗ e0,60(di)
◮ O que acontece se aumentarmos di em uma unidade
(
πi
1 − πi
)
= e−3,22∗ e0,60(di+1) = e−3,22
∗ e0,60(di)e0,60
a chance fica multiplicada por e0,6 = 1,82.
36
![Page 74: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/74.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Isso equivale a aumentar
37
![Page 75: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/75.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Isso equivale a aumentar 82%.
◮ O termo(
πi
1 − πi
)
é denominado chances (odds) e mede o quanto o
sucesso é mais provável que o fracasso.
◮ Exemplo se a razão é 5, significa que a probabilidade de
sucesso é 5 vezes maior que a probabilidade de fracasso.
◮ Conclusão: para cada aumento em uma unidade da dose,
a chance é multiplicada por eβ1 que nesse caso equivale a
aumentar 82%.
◮ Esse interpretação só é possível na ligação canônica.
37
![Page 76: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/76.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Vamos encontrar agora os valores estimados das doses
letais.
◮ Lembre que:◮ LD50 dose tal que 50% dos insetos são mortos;◮ LD90 dose tal que 90% dos insetos são mortos.
◮ Vimos que o modelo estimado é dado por
log
(
πi
1 − πi
)
= −3,22 + 0,60(di) .
◮ Vamos isolar di
di =
(
log
(
πi
1 − πi
)
+ 3.22
)
/0,60
38
![Page 77: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/77.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ LD50 corresponde ao valor de di tal que p =
39
![Page 78: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/78.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ LD50 corresponde ao valor de di tal que p = 50%;
◮ LD90 corresponde ao valor de di tal que p =
39
![Page 79: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/79.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ LD50 corresponde ao valor de di tal que p = 50%;
◮ LD90 corresponde ao valor de di tal que p = 90%.
◮ Portanto
LD50 =
39
![Page 80: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/80.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ LD50 corresponde ao valor de di tal que p = 50%;
◮ LD90 corresponde ao valor de di tal que p = 90%.
◮ Portanto
LD50 =
(
log
(
0,5
1 − 0,50
)
+ 3.22
)
/0,60 = 5,37
LD90 =
39
![Page 81: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/81.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ LD50 corresponde ao valor de di tal que p = 50%;
◮ LD90 corresponde ao valor de di tal que p = 90%.
◮ Portanto
LD50 =
(
log
(
0,5
1 − 0,50
)
+ 3.22
)
/0,60 = 5,37
LD90 =
(
log
(
0,9
1 − 0,90
)
+ 3.22
)
/0,60 = 9,03
39
![Page 82: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/82.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A figura a seguir mostra o gráfico de dispersão dos dados
com a curva ajustada sobreposta.
0 2 4 6 8 10
0.0
0.2
0.4
0.6
0.8
Dose
Pro
porç
ão
40
![Page 83: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/83.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Como podemos verificar se o modelo está bem ajustado?
41
![Page 84: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/84.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Como podemos verificar se o modelo está bem ajustado?
Deviance.
◮ O seguinte comando retorna a Deviance do modelo
> modelo$deviance
[1] 10.25832
◮ Com qual distribuição de referência devemos com para
esse valor?
41
![Page 85: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/85.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Como podemos verificar se o modelo está bem ajustado?
Deviance.
◮ O seguinte comando retorna a Deviance do modelo
> modelo$deviance
[1] 10.25832
◮ Com qual distribuição de referência devemos com para
esse valor?
◮ Com uma distribuição χ2n−p, no nosso caso χ2
4.
41
![Page 86: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/86.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Rejeitamos H0 para valores
42
![Page 87: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/87.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Rejeitamos H0 para valores altos da deviance.
◮ Portatno o p-valor é dado por
42
![Page 88: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/88.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Rejeitamos H0 para valores altos da deviance.
◮ Portatno o p-valor é dado por
P(χ24 ≥ 10.25832)
1-pchisq(10.25,4)
[1] 0.03642058
◮ Conclusão:
42
![Page 89: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/89.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Rejeitamos H0 para valores altos da deviance.
◮ Portatno o p-valor é dado por
P(χ24 ≥ 10.25832)
1-pchisq(10.25,4)
[1] 0.03642058
◮ Conclusão: rejeitamos H0 e concluímos que o modelo não
está bem ajustado.
42
![Page 90: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/90.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos agora verificar se, de fato, a dose é significativa
para explicar a resposta.
◮ Isso equivale a comparar os modelos:◮ M0:
43
![Page 91: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/91.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos agora verificar se, de fato, a dose é significativa
para explicar a resposta.
◮ Isso equivale a comparar os modelos:◮ M0: ηi = β0 (modelo nulo, só com intercepto);◮ M1:
43
![Page 92: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/92.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos agora verificar se, de fato, a dose é significativa
para explicar a resposta.
◮ Isso equivale a comparar os modelos:◮ M0: ηi = β0 (modelo nulo, só com intercepto);◮ M1: ηi = β0 + β1di .
◮ Como n = 6 os graus de liberdade dos modelos são:◮ M0:
43
![Page 93: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/93.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos agora verificar se, de fato, a dose é significativa
para explicar a resposta.
◮ Isso equivale a comparar os modelos:◮ M0: ηi = β0 (modelo nulo, só com intercepto);◮ M1: ηi = β0 + β1di .
◮ Como n = 6 os graus de liberdade dos modelos são:◮ M0: n − p = 6 − 1 = 5;◮ M1:
43
![Page 94: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/94.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Queremos agora verificar se, de fato, a dose é significativa
para explicar a resposta.
◮ Isso equivale a comparar os modelos:◮ M0: ηi = β0 (modelo nulo, só com intercepto);◮ M1: ηi = β0 + β1di .
◮ Como n = 6 os graus de liberdade dos modelos são:◮ M0: n − p = 6 − 1 = 5;◮ M1: n − p = 6 − 2 = 4.
43
![Page 95: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/95.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A tabela a seguir mostra a Deviance e os graus de
liberdade para cada um dos modelos:
Modelo Graus de Liberada Deviance
ηi = β0 5 163,74
ηi = β0 + β1di 4 10,26
◮ A diferença entre as Deviances é dada por
∆D = 163,74 − 10,26 = 153,48 .
◮ Sabemos que
δD ∼
44
![Page 96: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/96.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A tabela a seguir mostra a Deviance e os graus de
liberdade para cada um dos modelos:
Modelo Graus de Liberada Deviance
ηi = β0 5 163,74
ηi = β0 + β1di 4 10,26
◮ A diferença entre as Deviances é dada por
∆D = 163,74 − 10,26 = 153,48 .
◮ Sabemos que
δD ∼ χ21 .
◮ Rejeitamos H0 para valores grande ou pequenos de ∆D?
44
![Page 97: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/97.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ A tabela a seguir mostra a Deviance e os graus de
liberdade para cada um dos modelos:
Modelo Graus de Liberada Deviance
ηi = β0 5 163,74
ηi = β0 + β1di 4 10,26
◮ A diferença entre as Deviances é dada por
∆D = 163,74 − 10,26 = 153,48 .
◮ Sabemos que
δD ∼ χ21 .
◮ Rejeitamos H0 para valores grande ou pequenos de ∆D?
Grandes.◮ A região crítica é do tipo
◮ ∆D < χ2c ⇒ não rejeitamos H0 e ficamos com o modelo M0;
◮ ∆D > χ2c ⇒ rejeitamos H0 e ficamos com o modelo M1.
44
![Page 98: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/98.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ O valor crítico da χ21 é 3,84, pois
P(χ21 > 3,84) = 0,05 .
0 2 4 6 8 10
0.0
0.2
0.4
0.6
0.8
1.0
1.2
x
dchis
q(x
, 1)
Região de
Rejeitção
45
![Page 99: Vericação do Ajuste do Modelo - Universidade Federal de ...professor.ufop.br/sites/default/files/ericarodrigues/files/aula07_0.pdf · Estatística de Pearson Generalizada Testes](https://reader033.vdocuments.mx/reader033/viewer/2022050420/5f8f8f6679f34b3b81013472/html5/thumbnails/99.jpg)
Estatística de Pearson Generalizada
Testes de Hipóteses usando a função Deviance
Exemplo (continuação)
◮ Conclusão:◮ ∆D = 153, 48 > 3.84 ⇒ rejeitamos H0;◮ isso singifica que a variável explicativa deve entrar no
modelo;◮ o ganho ao acrescentar essa variável é expressivo.
◮ Poderíamos testar a inclusão de mais variáveis no modelo.
46