Cláudio Tadeu Cristino 1. Julho, 2014

Transcrição

1 Inferência Estatística Estimação Cláudio Tadeu Cristino 1 1 Universidade Federal de Pernambuco, Recife, Brasil Mestrado em Nutrição, Atividade Física e Plasticidade Fenotípica Julho, 2014 C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

2 Estimação Inferência Estatística A Inferência Estatística é um conjunto de técnicas que objetiva estudar a população através de evidências fornecidas por uma amostra. É a amostra que contém os elementos que podem ser observados e, a partir daí, quantidades de interesse podem ser medidas. Alguns exemplos: Suponha que a quantidade de empresas que são abertas em um mês seja modelada como sendo uma variável de Poisson, mas desconhecemos a sua média (que é essencial para podermos calcular as probabilidades relacionadas). A variância no consumo de etanol no país é um importante indicador para tal consumo (que pode ser utilizado para programar de maneira ótima a produção e as exportações). C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

3 Parâmetros, Estimadores e Estimativas Parâmetros, Estimadores e Estimativas Para formalizar as ideias que serão apresentados nesta parte do curso, precisamos definir alguns conceitos: Definição As quantidades da população, em geral desconhecidas, sobre as quais temos interesse, são denominadas parâmetros e, usualmente, representadas por letras gregas, tais como θ, µ, σ. Por exemplo: Se a altura de uma população é modelada pela Normal, este modelo dependerá de dois parâmetros: a média, µ, e a variância, σ 2. Se as pontuações de um pessoa em dois tipos diferentes de provas são dadas por variáveis aleatórias com correlação desconhecidas, deve-se estimar esta grandeza. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

4 Parâmetros, Estimadores e Estimativas Parâmetros, Estimadores e Estimativas Definição Toda função de elementos de uma amostra é chamada estatística. Estas funções são utilizadas para produzir aproximações para os parâmetros da população (que são inacessíveis). Esta combinação dos elementos a amostra é denominada estimador do parâmetro de interesse. Como uma notação comum, escreve-se θ para um estimador do parâmetro θ. Aos valores numéricos assumidos pelos estimadores denominamos estimativas pontuais ou, simplesmente, estimativas. Matematicamente, escrevemos: para um parâmetro (ou grandeza de interesse) da população θ: θ = f(x 1,X 2,...,X n ), em que (X 1,X 2,...,X n ) é uma amostra de elementos da população e f é uma função adequada. Nesta caso, θ é um estimador de θ. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

5 Parâmetros, Estimadores e Estimativas Estimação - Exemplo Estimação - Exemplo Estimando a média Suponha que desejemos obter o salário médio, µ de pessoas entre 18 e 25 anos, residentes na Região Metropolitana de Recife. Qual seria o procedimento? A ideia é retirar (adequadamente) uma amostra da população com o perfil desejado e fazer uma estimação. Suponha que tenhamos uma amostra de tamanho 10, (X 1,X 2,...,X 10 ), e vamos observar algumas estatísticas que podem no ajudar: µ 1 = f 1 (X 1,...,X 10 ) = mínimo+máximo ; 2 µ 2 = f 2 (X 1,...,X 10 ) = X 1 ; µ 3 = f 3 (X 1,...,X 10 ) = X 1 +X 2 + +X = X. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

6 Parâmetros, Estimadores e Estimativas Estimação - Exemplo Estimação - Exemplo Estimando a média Se a amostra é dada por: 830,00 714,00 530, ,00 400,00 620,00 530,00 280,00 475,00 320,00 Tabela: Salário (em reais) de trabalhadores entre 18 e 25 anos, RMR (fictício). Temos: µ 1 = (280, ,00)/2 = 740,00. µ 2 = 830,00. µ 3 = (830, ,00)/10 = 589,90. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

7 Parâmetros, Estimadores e Estimativas Estimação - Exemplo Estimadores usuais Temos alguns estimadores naturais para certos parâmetros: X n = X 1 +X 2 + +X n a média amostral. n σ 2 = 1 n i=1 n 1 (X i X n ) 2, a variância amostral; número de ítens com a características na amostra p =. n C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

8 Parâmetros, Estimadores e Estimativas Como escolher um estimador? Como escolher um estimador? Definição Um estimador θ é dito não viciado ou não viesado para um parâmetro θ se E( θ) = θ. Se θ = f(x 1,...,X n ) é um estimador de θ, então o vício ou viés desse estimador é dado pelo valor b θ (n) = E( θ) θ. Definição Um estimador θ é dito consistente se as seguintes propriedades são satisfeitas: 1 lim n E( θ) = θ (ou seja, é assintoticamente não viciado); 2 lim n Var( θ) = 0 (tende a uma constante). C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

9 Parâmetros, Estimadores e Estimativas Como escolher um estimador? Precisão ou Exatidão? C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

10 Parâmetros, Estimadores e Estimativas Como escolher um estimador? Escolha de estimadores Definição Dados dois estimadores θ 1 e θ 2, ambos não viciados para um parâmetro θ, dizemos que θ 1 é mais eficiente do que θ 2 se Var( θ 1 ) < Var( θ 2 ). Tabela: Estimadores para a média (µ), proporção (p) e variância (σ 2 ). Parâmetro Estimador Propriedades µ X = (X 1 + +X n )/n não viciado/consistente p p = (freq.na amostra)/n não viciado/consistente σ 2 σ 2 S 2 = ( n i=1 X2 i nx2 ) /(n 1) não viciado/consistente σ 2 = ( n i=1 X2 i nx2 ) /n viciado e consistente C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

11 Distribuições Amostrais Distribuição de X e S 2 Nosso objetivo é determinar uma possível distribuição para a média amostral. Lembre-se: como X e S 2 são duas estatísticas (funções) de elementos de uma amostra, tal média e tal variância amostrais podem ser vistas como variáveis aleatórias, possuindo, portanto, função de distribuição, esperança e variância, etc... Estas medidas qualificam a média e a variância amostral. Exemplo Suponha que estejamos interessados em estudar o número de contaminações pela dengue em nossa cidade. A ANVISA - Ag. Nac. de Vigilância Sanitária, informa que em Recife as probabilidades de número de infecções de uma pessoa pelo vírus da dengue é: X P(X = x) 0,10 0,25 0,35 0,30 Tabela: Número de infecções de uma mesma pessoa pelo vírus da dengue em Recife (dados fictícios). C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

12 Distribuições Amostrais As distribuições da média e da variância amostral foram obtidas e apresentadas como: Tabela: Distribuição da média amostral X = (X 1 +X 2 +X 3 )/3. X 0 1/3 2/3 1 4/3 P(X = x) 0,001 0,0075 0, , , X 5/3 2 7/3 8/3 3 P(X = x) 0, , , ,0945 0,027 Tabela: Distribuição da variância amostral S 2 = (X 2 1 +X 2 2 +X X 2 )/2. S 2 0 1/3 1 4/3 7/3 3 0,0865 0,3885 0,21 0,171 0,108 0,036 C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

13 Distribuições Amostrais Consideremos primeiramente o caso de uma população Normal, isto é, a variável de interesse X N(µ,σ 2 ). Portanto, temos que (X 1,X 2,...,X n ) representa uma amostra distribuídos com densidade Normal de média µ e variância σ 2, ou seja, X i N(µ,σ 2 ), i = 1,...,n; X i é independente de X j, para todo i j. É fácil ver que qualquer combinação linear n i=1 a ix i de variáveis aleatórias Normais e constantes (nem todas nulas) a i s, também segue o modelo Normal. Assim X N(µ X,σ 2 X ) com µ X = E(X) = E ( 1 n n i=1 σ 2 X = Var(X) = Var ( 1 n ) X i = 1 nµ = µ; n ) n X i i=1 = 1 n 2nσ2 = σ2 n. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

14 Distribuições Amostrais Exemplo Considere uma amostra independente de tamanho n de uma variável aleatória N(10,16). Isto é, X 1,...,X n são independentes e todas com distribuição Normal com média 10 e variância 16. Assim X tem distribuição Normal como média 10 e variância 16/n. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

15 Distribuições Amostrais Teorema do Limite Central Um grande resultado Teorema (Teorema do Limite Central) Suponha que uma amostra aleatória simples de tamanho n seja retirada de um população com média µ e variância σ 2 (nenhum modelo de distribuição está sendo especificado). Então para a média amostral, X temos: em que Z N(0,1). X µ σ/ n n Z, (3.1) C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

16 Distribuições Amostrais Teorema do Limite Central Uma aplicação Uma aplicação do Teorema do Limite Central relaciona-se com a distribuição da proporção amostral. Esta grandeza é dada por p = número de indiv. da amostra com a característica de interesse. n Se construirmos para o i-ésimo indivíduo uma variável aleatória Y i tal que: { 1, se o indivíduo apresenta a característica, Y i = 0, caso contrário. Podemos escrever a proporção como p = Y 1 + +Y n n = 1 n n Y i = Y. i=1 C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

17 Distribuições Amostrais Teorema do Limite Central Uma aplicação Cont. Logo, a proporção amostral nada mais é do que a média das variáveis aleatórias convenientemente definidas. Considerando a proporção de indivíduos com a característica de interesse seja p e que os indivíduos são selecionados aleatoriamente, temos que Y 1,...,Y n formam uma sequência de variáveis aleatórias independentes com distribuição de Bernoulli. Assim E(Y i ) = p e Var(Y i ) = p(1 p). Logo, E( p) = E ( 1 n ) n Y i = p e Var( p) = Var i=1 ( 1 n ) n Y i i=1 = p(1 p), n ou seja p é um estimador não viciado e consistente para p. Tendo em vista o Teorema do Limite Central, temos que para n suficientemente grande: Y E(Y) Var(Y) = p p p(1 p)/n n N(0,1). C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

18 Estimação por Intervalos Estimação por Intervalos Os estimadores até agora discutidos foram estimadores pontuais, pois fornecem como estimativa um único valor numérico para o parâmetro de interesse. Seria mais prudente que pudéssemos estabelecer uma faixa para nossas estimativas, levando em consideração que os estimadores são variáveis aleatórias e, assim, podem ocorrer com uma certa probabilidade para valores longe da estimativa encontrada. Está faixa será denominada intervalo de confiança da estimativa calculada. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

19 Estimação por Intervalos Intervalo de confiança Intervalos de confiança Consideremos, inicialmente, o intervalo de confiança para a média µ de uma certa população Normal com a variância σ 2 conhecida. Supondo uma amostra aleatória de tamanho n dada por (X 1,...,X n ), temos que a média amostral tem distribuição Normal com a mesma média µ e variância σ 2 /n. Assim, Z = X µ σ/ n N(0,1). Fixando um valor γ tal que 0 < γ < 1, podemos encontrar um valor z γ/2 tal que: P ( Z z γ/2 ) = P ( z γ/2 Z z γ/2 ) = γ. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

20 Estimação por Intervalos Intervalo de confiança O índice de z γ/2 apresenta o valor de γ dividido por 2, uma vez que a massa γ deve ser dividida igualmente em torno do 0 (Figura). O valor z γ/2 pode ser obtido da tabela da Normal padrão, localizando o valor γ/2 no miolo da tabela e tomando-se os valores nas margens correspondentes. Assim, z γ/2 < Z < z γ/2 z γ/2 < X µ σ/ n < z γ/2 X z γ/2 σ n < µ < X +z γ/2 σ n E o intervalo de confiança para µ, com coeficiente de confiança γ é: [ σ σ ] IC(µ,γ) = X z γ/2 n,x +z γ/2 n C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

21 Estimação por Intervalos Intervalo de confiança O que representa o intervalo de confiança A interpretação do intervalo de confiança deve ser feita com cuidado:... se obtivermos várias amostras de mesmo tamanho e, para cada uma delas, calcularmos os correspondentes intervalos de confiança com coeficiente de confiança γ, esperamos que a proporção de intervalos que contenham o valor verdadeiro de µ seja igual a γ. Esta interpretação do IC é chamada uma visão clássica para o estimador por intervalos. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

22 Estimação por Intervalos Exemplo - intervalo de confiança Uma Aplicação Exemplo Suponha que desejemos estudar a variação de preços gerais de uma maneira mais rápida e de modo a saber se em média houve deflação ou inflação. Na Tabela 6, são apresentadas as variações percentuais de 30 produtos escolhidos ao acaso. 2,49% 0,85% 2,80% 2,80% 3,07% 3,78% 3,92% 2,69% 8,17% 1,69% -0,58% 0,37% 2,72% -3,37% 7,56% 4,27% 0,21% 5,07% 5,56% 0,90% -0,40% 5,26% -2,67% -0,33% -5,65% 3,20% -3,98% 2,44% 1,12% 1,85% Tabela: Variação de preços (dados fictícios). C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

23 Estimação por Intervalos Exemplo - intervalo de confiança Uma Aplicação - continuação Para os dados apresentados, temos: Média (amostral): X = 1,86%. Mediana (amostral): Med X = 2,47%. Variância (amostral): S 2 = 0, , desvio padrão (amostral): S = 0, Baseado nas medidas de resumo, podemos afirmar que (em média) os preços aumentaram. Será? C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

24 Estimação por Intervalos Exemplo - intervalo de confiança Uma Aplicação - continuação Como X é uma estatística (função de variáveis aleatórias), numa outra amostra com outros produtos, poderíamos chegar uma conclusão divergente: ou que os preços sofreram deflação ou que estiveram estáveis. Qual seria o intervalo de confiança para a média da variação de preços para uma confiança de γ = 80%, sabendo que a variância da população é de 0,0009? [ σ Sabemos que IC(µ,γ) = X z γ/2 n σ,x +z γ/2 n ], em que X = 1,86%, σ = 0,03, n = 30. Resta-nos determinar o valor de z γ/2, tal que: ( ) X µ P σ/ n z γ/2 = γ P ( ) ( ) z γ/2 Z z γ/2 = γ Z N(0,1) C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

25 Estimação por Intervalos Exemplo - intervalo de confiança Uma Aplicação - continuação Figura: Determinando z γ/2 para uma tabela da normal padrão P(Z z) = p. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

26 Estimação por Intervalos Exemplo - intervalo de confiança Uma Aplicação - continuação Logo, da tabela da Normal padrão que apresenta valores de P(Z z) = p, temos que z γ/2 = 1,28 (este é o valor mais próximo para a probabilidade de 0,9, o valor real para P(Z 1,28) é 0,899727). Assim, IC(µ,80%) = [ 1,86 1,28 0,03 ;1,86+1,28 0,03 ] IC(µ,80%) = [1,853;1,867]. Este intervalo nos garante que 80% de outras amostras de variação de preços terão a média contida neste intervalo. A conclusão: houve uma inflação de preços. C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

27 Estimação por Intervalos Amplitude do intervalo de confiança Amplitude do IC e o tamanho a amostra A amplitude do intervalo de confiança é dada pela diferença entre os σ extremos de tal intervalo, isto é, 2 z γ/2 n, o que claramente indica que ela depende da confiança γ, do desvio padrão σ e do tamanho da amostra n. É usual se referir à metade da amplitude como o erro envolvido na estimação. Note que podemos estabelecer a seguinte condição a priori: Qual é o tamanho da amostra para que a amplitude do intervalo de confiança (erro envolvido) seja de ε? σ ( σ ) 2. 2 z γ/2 n = ε n = 2 z γ/2 ε C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

28 Estimação por Intervalos Amplitude do intervalo de confiança Intervalo de confiança para a proporção populacional Um estimador pontual para a proporção populacional p é foi dado com p, a proporção amostral. Pelo Teorema do Limite Central, para uma amostra suficientemente grande: ( p N p, p(1 p) ). n Assim o intervalo de confiança com coeficiente de confiança γ é dado por: [ ] p(1 p) p(1 p) IC(p,γ) = p z γ/2 ; p+z n γ/2. n Note que na expressão acima o IC depende de p, que é desconhecido. O que fazer? C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

29 Estimação por Intervalos Amplitude do intervalo de confiança IC da proporção: otimismo ou conservadorismo? Uma solução para obtermos o IC(p, γ), já que ele originalmente depende de p (desconhecido), é substituir p(1 p) por p(1 p). Desta forma, temos: [ ] p(1 p) p(1 p) IC 1 (p,γ) = p z γ/2 ; p+z n γ/2, n que é uma estimativa (intervalar) otimista, pois acredita que p está suficientemente perto de p. Outra visão seria utilizara o maior valor possível para p(1 p), que seria uma visão conservadora para o caso. Neste caso o máximo da função f(x) = x(1 x) pode ser encontrado fazendo f (x) = 0 (pontos críticos de f), o que implica que x = 1/4 é o máximo para f em [0,1]. Logo, [ ] 1 1 IC 2 (p,γ) = p z γ/2 4n ; p+z γ/2 4n C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30

30 Estimação por Intervalos Resumo A aplicação do Teorema do Limite Central permite a obtenção de intervalos de confiança para µ, mesmo quando a distribuição das variáveis aleatórias que constituem a amostra não seja Normal. Neste caso, o intervalo construído terá um coeficiente de confiança aproximadamente igual a γ, sendo que esta aproximação melhora à medida que aumenta o tamanho da amostra. Tabela: Intervalos de confiança para a média µ e a proporção populacional p. Parâmetro µ p p Intervalo de Confiança ] σ [X z γ/2 n σ,x +z γ/2 n p(1 p) [ p z γ/2 n ; p+z γ/2 [ p z γ/2 1 4n ; p+z γ/2 1 4n ] (otimista) ] (conservador) p(1 p) n C.T.Cristino (PosNAFPF) Inferência Estatística Estimação 07/ / 30