Capítulo 10 Amostragem com Probabilidades Proporcionais ao Tamanho
A Amostragem com Probabilidades Proporcionais ao Tamanho - PPT agrega alguns métodos de seleção de amostra onde as unidades da população têm probabilidades distintas de seleção, proporcionais a uma medida de tamanho associada a cada unidade.
10.1 Motivação
Como já indicado no Capítulo 3, a Amostragem Probabilística contempla o emprego de métodos de amostragem que levam a ter probabilidades de inclusão na amostra desiguais, isto é, \(\pi_i \ne \pi_j\) para algum par de unidades distintas \(i \ne j \in U\). A teoria apresentada no Capítulo 3 cobre o caso geral, mas não indica quando o recurso de usar probabilidades desiguais de inclusão na amostra seria vantajoso. Neste capítulo tratamos justamente dessa questão, indicando estratégias que se pode usar para tirar proveito do emprego de amostragem com probabilidades desiguais para aumentar a eficiência dos estimadores de totais e médias.
A ideia central já mencionada na Seção 3.7.2 é fazer com que as probabilidades de inclusão fiquem proporcionais aos valores da(s) variável(is) de estudo \(y\). É claro que não podemos conseguir isso de forma exata, já que os valores da variável \(y\) são desconhecidos antes da seleção da amostra. Mas em muitas situações práticas é possível contar com cadastros que contenham valores de uma variável auxiliar \(x\) indicativa do tamanho das unidades populacionais. Sempre que a variação dos tamanhos das unidades for grande, a informação auxiliar disponível sobre os tamanhos for precisa e o tamanho for positivamente correlacionado com as variáveis de interesse, podemos empregar métodos de seleção que usam probabilidades proporcionais ao tamanho. Tais métodos permitem aumentar a eficiência na estimação de totais e médias, em comparação com métodos de amostragem com probabilidades iguais, para tamanhos de amostra idênticos.
10.2 Estimação do total populacional
Considere o caso em que os valores de uma variável auxiliar \(x\) são conhecidos para todas as unidades da população \(U\) mediante um cadastro. Se \(x_i>0, \,\, \forall \, i \in U\), então podemos usar esta variável como uma medida de tamanho das unidades populacionais. Por enquanto, vamos supor que é possível selecionar amostras de acordo com um plano amostral tal que: \(\pi_i \propto x_i, \,\,\forall\, i \in U\). Mais adiante, apresentamos diversos métodos para implementar essa ideia.
Conforme já mostrado no Capítulo 3, sabemos que o estimador HT para estimar o total populacional \(Y = \sum_{i \in U} y_i\) é dado por:
\[ \widehat Y_{HT} = \displaystyle \sum_{i \in s} \frac{y_i}{\pi_i} = \displaystyle \sum_{i \in s} d_i y_i \,\, \tag{10.1} \] onde cada unidade da amostra tem um peso amostral igual ao inverso da respectiva probabilidade de inclusão, dado por \(d_i = 1 / \pi_i, \,\, \forall \, i \in U\).
Quando a probabilidade de inclusão na amostra é proporcional ao tamanho, temos: \(\pi_i = n{x_i} / {X}\) onde \(X = \sum_{i \in U} x_i\) é o total populacional da variável \(x\) e \(n\) é o tamanho da amostra.
Sendo assim, o peso amostral da unidade \(i\) é dado por \(d_i = X / (n x_i)\). Substituindo na Expressão (10.1), o estimador HT do total \(Y\) fica dado por:
\[ \widehat Y_{HT/PPT} = \displaystyle X\frac{1}{n} \sum_{i \in s} \frac{y_i}{x_i} \,\, \tag{10.2} \] Verifica-se então que, para amostras extraídas com probabilidades de inclusão exatamente proporcionais ao tamanho, o estimador de total depende de estimar a média das razões entre a variável de interesse \(y\) e a medida de tamanho \(x\) e, depois, multiplicar essa estimativa pelo total conhecido da medida de tamanho na população. Essa forma de apresentar o estimador de total sugere que, sempre que as razões \({y_i}/{x_i}\) forem aproximadamente constantes, a média amostral delas será um estimador preciso da correspondente média populacional, e o estimador de total terá variância pequena.
Uma forma de ver isto mais diretamente requer lembrar da expressão alternativa para a variância do estimador HT, válida para planos amostrais de tamanhos fixos, a chamada forma SYG (Sen-Yates-Grundy) da variância, dada por:
\[ \begin{align} V_{SYG} \left( \widehat Y_{HT/PPT} \right) & = \displaystyle \sum_{i \in U} \sum_{j>i} (\pi_i \pi_j - \pi_{ij}) \left( \frac{y_i}{\pi_i} - \frac{y_j}{\pi_j} \right)^2 \\ & = \displaystyle X^2 \frac{1}{n^2} \sum_{i \in U} \sum_{j>i} (\pi_i \pi_j - \pi_{ij}) \left( \frac{y_i}{x_i} - \frac{y_j}{x_j} \right)^2 \end{align} \,\, \tag{10.3} \]
Da Expressão (10.3) podemos observar que a variância do estimador de total seria nula caso \(y_i/x_i = y_j/x_j\) para todo \(i \neq j \in U\). Portanto, se \(y_i \propto x_i \,\,\forall\, i \in U\), então \(V_{SYG}\left( \widehat Y_{HT} \right) = 0\). Isto sugere que se \(y\) e \(x\) forem aproximadamente proporcionais (logo, alta e positivamente correlacionadas), então a variância do estimador HT do total será pequena.
Também se pode notar que a variância deveria ser pequena quando \(\pi_{ij} \doteq \pi_i \pi_j, \,\, \forall \, i \neq j \in U\). Acontece que \(\pi_{ij} = \pi_i \pi_j, \,\, \forall \, i \neq j \in U\) implica indicadores de inclusão das unidades \(i\) e \(j\) independentes. Um plano amostral satisfazendo essa propriedade é a Amostragem de Poisson, apresentado adiante. Entretanto, Amostragem de Poisson não é eficiente, como veremos, devido à variabilidade do tamanho amostral efetivo, e também não podemos usar a expressão de variância na forma SYG para esse plano amostral, justamente porque não tem tamanho amostral fixo.
Sendo assim, a chave para alcançar eficiência através da amostragem PPT é ter medidas de tamanho \((x)\) alta e positivamente correlacionadas com a(s) resposta(s) de interesse na pesquisa \((y)\). Essa situação é muitas vezes encontrada ao realizar pesquisas de estabelecimentos ou instituições, onde as principais variáveis de estudo da pesquisa são bem correlacionadas com medidas de tamanho frequentemente disponíveis nos cadastros empregados para seleção das respectivas amostras.
A seleção de amostras com PPT pode ser feita com ou sem reposição. O sorteio de amostras com reposição é pouco usado na prática, devido à perda de eficiência em comparação com métodos de sorteio sem reposição e também ao problema prático do que fazer em caso de repetição de unidades selecionadas. Apesar disso, é importante conhecer este método e suas propriedades, pois com frequência é usado como aproximação para obter estimativas simplificadas de variância. Já na amostragem PPT sem reposição há vários métodos de seleção, trazendo mais complexidade e dificuldades na estimação da precisão. Porém a eficiência é maior e se justifica o emprego de métodos mais complexos.
Na sequência apresentamos os principais métodos de sorteio de amostras PPT, com e sem reposição. Para um tratamento mais completo dos métodos disponíveis, consultar Brewer e Hanif (1983).
10.3 Amostragem PPT com reposição
O algoritmo para seleção de amostra com Probabilidades Proporcionais ao Tamanho com Reposição - PPTC é denominado método dos totais cumulativos e consiste nos seguintes passos:
- Acumule as medidas de tamanho na população, isto é, faça \(X_{(0)} = 0\) e calcule \(X_{(i)} = \displaystyle \sum_{k=1}^{i} x_k\) para \(i=1,...,N\).
- Determine intervalos de seleção com base no tamanho de cada unidade. Assim, o intervalo de seleção para a unidade \(i\) será dado por \((X_{(i-1)} ; X_{(i)}]\), sendo o limite superior incluído, para \(i=1,...,N\).
- Selecione um número aleatório \(r\) com distribuição uniforme entre 0 e \(X_{(N)} = X\), a soma dos tamanhos na população.
- Selecione a unidade correspondente ao intervalo no qual cai o número aleatório \(r\), isto é, selecione \(i\) tal que \(r \in (X_{(i-1)} ; X_{(i)}]\).
- Repita os passos 3 e 4 tantas vezes quantas forem necessárias para obter a amostra do tamanho \(n\) desejado.
A Amostra selecionada \(s\) é constituída pelas unidades \(i_1, ..., i_l, ..., i_n\) cujos rótulos foram sorteados nas várias iterações do passo 4.
Amostragem PPT com reposição é um método muito simples de implementar, mas que pode implicar seleção repetida de unidades. O tamanho efetivo da amostra (número de unidades distintas na amostra) é aleatório, podendo ser menor que o tamanho total desejado \((n)\). O Exemplo 10.1 ilustra o emprego do método com uma pequena população para ajudar a compreensão.
Exemplo 10.1 Considere a população de \(N=6\) fazendas com as respectivas áreas, conforme apresentada na Tabela 10.1. Este exemplo mostra como extrair uma amostra de \(n=3\) fazendas usando PPT com reposição, tomando a variável Área como medida de tamanho, usando o método dos totais cumulativos.
Fazenda | Área (ha) | Tamanho Acumulado | Limite inferior do intervalo | Limite superior do intervalo |
---|---|---|---|---|
1 | 50 | 50 | 1 | 50 |
2 | 1.000 | 1.050 | 51 | 1.050 |
3 | 125 | 1.175 | 1.051 | 1.175 |
4 | 300 | 1.475 | 1.176 | 1.475 |
5 | 500 | 1.975 | 1.476 | 1.975 |
6 | 25 | 2.000 | 1.976 | 2.000 |
Caso os 3 números aleatórios sorteados de forma independente e com distribuição Uniforme entre 1 e 2.000 fossem 654, 1.230 e 1.555, então as fazendas selecionadas seriam as de números 2, 4 e 5. Caso os 3 números aleatórios entre 1 e 2.000 fossem 122, 754 e 1.980, então as fazendas 2 e 6 seriam as selecionadas, com a fazenda 2 sendo selecionada duas vezes.
Pode-se programar no R o algoritmo apresentado ou utilizar a função ppswr do pacote pps que disponibiliza várias funções para seleção de amostras PPT de vários tipos.
#Algoritmo de seleção PPT
# Inicializando variáveis
=6
N=3
n=c(1:N)
fazenda=c(50,1000,125,300,500,25)
area=linf=lsup=sel=NULL
acum1]=lsup[1]=area[1]
acum[1]=1
linf[=rep(0,N)
sel# Criando intervalos de seleção
for (i in 2:N){
=acum[i-1]+area[i]
acum[i]=acum[i-1]+1
linf[i]=acum[i]
lsup[i]
}# Selecionando n números aleatórios entre 1 e o tamanho total acumulado
=sample(1:lsup[N],n)
s# Contando número de vezes que cada fazenda foi selecionada
for (i in 1:n){
for (j in 1:N){
if((linf[j] <= s[i]) & (lsup[j]>=s[i])){
=sel[j]+1
sel[j]
}
}
}# Juntando as informações numa tabela
=data.frame(cbind(fazenda,area,acum,linf,lsup,sel))
tabela# Aleatórios selecionados
s
## [1] 1134 389 928
# Tabela com os dados e marcação do número de vezes que cada fazenda foi selecionada
tabela
## fazenda area acum linf lsup sel
## 1 1 50 50 1 50 0
## 2 2 1000 1050 51 1050 2
## 3 3 125 1175 1051 1175 1
## 4 4 300 1475 1176 1475 0
## 5 5 500 1975 1476 1975 0
## 6 6 25 2000 1976 2000 0
# Resolvendo o mesmo problema utilizando função de um pacote do R
# Carregando o pacote pps, para seleção proporcional ao tamanho
require(pps)
## Carregando pacotes exigidos: pps
# Selecionando fazendas com a função de seleção proporcional ao tamanho com reposição
=ppswr(area,n)
fazendas_sel# Identificação das fazendas selecionadas
fazendas_sel
## [1] 1 2 2
Nas duas seleções apresentadas no programa R, os resultados são diferentes pois são selecionados números pseudoaleatórios distintos nas duas soluções.
10.3.1 Estimação do total sob amostragem PPT com reposição
Um estimador não viciado do total sob amostragem PPT com reposição - PPTC é dado por:
\[ \widehat Y_{PPTC} = \frac{1}{n} \sum_{i \in s} \frac{f_i y_i}{p_i} \,\, \tag{10.4} \]
onde \(f_i\) representa o número de vezes que a unidade \(i\) foi incluída na amostra \(s\) e \(p_i = x_i / X\) é o tamanho relativo da unidade \(i\). Note que o número de unidades distintas no conjunto \(s\) pode ser menor que \(n\) e também que \(\sum_{i \in s} f_i = \sum_{i \in U} f_i = n\).
Note que o estimador não viciado para o total da Expressão (10.4) não é o estimador tipo HT. Este estimador foi proposto por Hansen e Hurwitz (1943), por isso é chamado de estimador de Hansen-Hurwitz - HH, e é também não viciado. O estimador HT também pode ser empregado com este plano amostral, mas precisaria do cálculo das probabilidades de inclusão de primeira ordem das unidades populacionais, dadas por:
\[ \pi_i = 1 - (1 -p_i)^n \] A principal vantagem do estimador HH aqui apresentado é a simplicidade referente à estimação de variâncias. Não há resultados genéricos indicando em que situações a variância do estimador HH seria menor que a do estimador HT.
A variância de \(\widehat Y_{PPTC}\) e o seu respectivo estimador não viciado são dados por:
\[ V_{PPTC}\left(\widehat Y_{PPTC}\right) = \frac{1}{n} \displaystyle \sum_{i \in U} \left( \frac{y_i}{p_i} - Y \right)^2 p_i \,\, \tag{10.5} \]
\[ \widehat V_{PPTC} \left(\widehat Y_{PPTC}\right) = \frac{1}{n(n-1)} \displaystyle \sum_{i \in s} f_i \left( \frac{y_i}{p_i} - \widehat Y_{PPTC} \right)^2 \,\,\tag{10.6} \]
Como já discutido anteriormente, métodos de seleção com reposição raramente são empregados na prática, pois sempre é possível aplicar métodos sem reposição de maior eficiência para o mesmo custo. Por esse motivo, passamos agora a discutir alguns dos muitos métodos disponíveis para sorteio de amostras com PPT sem reposição. Nossa seleção de métodos a apresentar se guiou fortemente pela relevância da aplicação destes métodos em pesquisas conduzidas no Brasil, que vamos citar como exemplos ao longo da discussão.
10.4 Amostragem PPT de Poisson
O método de Amostragem PPT de Poisson ou, simplesmente, Amostragem de Poisson - PO para seleção de amostras com PPT sem reposição é implementado mediante a realização de uma prova de Bernoulli independente para cada unidade da população, que determina se a unidade é incluída (ou não) na amostra com uma probabilidade proporcional ao seu tamanho. Caso todas as probabilidades de inclusão na amostra sejam iguais, este método se reduz à Amostragem Binomial e, portanto, este método é uma generalização daquele método.
Um algoritmo baseado em processamento sequencial de lista para implementar o método PPT de Poisson para selecionar uma amostra de tamanho \(n\) da população \(U\) de tamanho \(N\) consiste nos seguintes passos:
- Para cada unidade populacional \(i\), determine o valor da probabilidade de inclusão \(\pi_i = n x_i / X = n p_i\).
- Para cada unidade da população selecione, de forma independente, um número aleatório \(A_i\) com distribuição uniforme no intervalo [0;1].
- Inclua a unidade \(i\) na amostra se \(A_i \le \pi_i\).
O conjunto \(s\) de unidades selecionadas por este algoritmo não terá unidades repetidas e terá um tamanho efetivo aleatório, de valor esperado igual a \(n\).
Alguns cuidados devem ser observados ao implementar a Amostragem PPT de Poisson. Em primeiro lugar, verifique se nenhuma unidade tem tamanho relativo \(x_i / X\) maior que \(1/n\). Se isto ocorrer, a ‘probabilidade de inclusão’ desta unidade seria maior que 1, o que é impossível. Caso alguma unidade seja tão grande que \(x_i / X > 1/n\), inclua esta unidade com certeza (isto é, faça \(\pi_i = 1\)). Em seguida, refaça os cálculos dos \(\pi_i\) com o tamanho desta unidade excluído do total \(X\) e o tamanho de amostra diminuído de uma unidade. Repita a verificação até que nenhuma unidade tenha tamanho relativo maior que 1 sobre o tamanho residual da amostra.
A seguir mostramos uma implementação em R do algoritmo de seleção para Amostragem PPT de Poisson.
Exemplo 10.2 Vamos utilizar os dados do arquivo ‘MunicBR_dat.rds’ para selecionar uma amostra de municípios do Amazonas, de tamanho esperado \(n=20\), utilizando Amostragem PPT de Poisson.
#Algoritmo de seleção PPT de Poisson com seleção certa das unidades
# muito grandes, se for o caso
# Lendo a identificação e população dos municípios do Amazonas
<- readRDS(file="Dados/MunicBR_dat.rds")[75:136,c(1, 4)]
tabela #Ordenação dos tamanhos em ordem decrescente
=tabela[order(tabela$Pop,decreasing=T),]
tabela=length(tabela$Pop)
N=20
n=A=pii=rep(0,N)
sel=sum(tabela$Pop)
X# Verificando as unidades com seleção "certa" pelo tamanho
for (i in 1:N){
=n*tabela$Pop[i]/X
pii[i]if (pii[i]>=1){
# Seleção certa: sel=1
=1
sel[i]=X-tabela$Pop[i]
X=1
pii[i]=n-1
n
}
}# Gerando aletório U(0,1) para cada unidade da população
# e incluindo ou não na amostra por seleção aleatória
for (i in 1:N){
if (sel[i] < 1){
=runif(1,0,1)
A[i]=n*tabela$Pop[i]/X
pii[i]# Seleção aleatória: sel=2
if (A[i]<=pii[i]) {sel[i]=2}
}
}# Juntando as informações numa tabela
$ai=A
tabela$pii=pii
tabela$sel=sel
tabela# Amostra com os dados das unidades selecionadas certas(sel=1) e aleatórias(sel=2)
$sel>0,] tabela[tabela
## CodMunic Pop ai pii sel
## 112 1302603 1982177 0.00000000 1.0000000 1
## 120 1303403 109225 0.00000000 1.0000000 1
## 103 1301902 94278 0.93908010 0.9886311 2
## 110 1302504 91795 0.05752623 0.9625935 2
## 94 1301209 81325 0.63955605 0.8528015 2
## 115 1302900 57663 0.38492937 0.6046738 2
## 113 1302702 51331 0.51986808 0.5382743 2
## 100 1301704 49137 0.15696294 0.5152672 2
## 122 1303536 30978 0.26170498 0.3248458 2
## 125 1303700 24327 0.11641669 0.2551012 2
## 98 1301605 21859 0.03358388 0.2292209 2
## 131 1304104 18383 0.04676258 0.1927704 2
## 114 1302801 18310 0.04517974 0.1920049 2
## 80 1300201 17174 0.13564534 0.1800924 2
## 90 1300904 14754 0.09393214 0.1547154 2
A amostragem PPT de Poisson é o método que foi empregado para a seleção da amostra da Pesquisa Industrial Anual - Produção Física, do IBGE, de 1981.
A Amostragem PPT de Poisson é pouco usada na prática devido à variabilidade do tamanho efetivo da amostra. É um método menos eficiente que outros métodos de seleção PPT sem reposição. Um método moderno que corrige este defeito é Amostragem Sequencial de Poisson - ASP - ver Ohlsson (1998) - descrito na Seção 10.5.
10.4.1 Estimação do total sob amostragem de Poisson
O estimador HT do total sob amostragem de Poisson é dado por:
\[ \widehat Y_{PO} = \sum_{i \in s} \frac{y_i} {\pi_i} = \frac{1}{n} \sum_{i \in s} \frac{y_i}{p_i} \,\,\tag{10.7} \]
A variância de \(\widehat Y_{PO}\) e um estimador não viciado desta variância são dados por:
\[ V_{PO} \left( \widehat Y_{PO} \right) = \displaystyle \sum_{i \in U} \pi_i (1 - \pi_i) \left( \frac{y_i}{\pi_i} \right)^2 = \displaystyle \sum_{i \in U} \frac{(1 - \pi_i)}{\pi_i} y_i^2 \,\, \tag{10.8} \]
\[ \widehat V_{PO} \left( \widehat Y_{PO} \right) = \displaystyle \sum_{i \in s} (1 - \pi_i) \left( \frac{y_i}{\pi_i} \right)^2 = \displaystyle \sum_{i \in s} \frac{(1 - \pi_i)}{\pi_i^2} y_i^2 \,\, \tag{10.9} \]
Como ocorre na Amostragem Binominal, devido ao tamanho efetivo da amostra ser variável, também é possível usar um estimador de total tipo razão sob Amostragem de Poisson. Tal estimador é mais eficiente do que o estimador HT. Este estimador tipo razão é dado por:
\[ \widehat Y_{PO}^R = \frac{N}{\widehat N} \sum_{i \in s} d_i {y_i} = N \frac{\sum_{i \in s} d_i {y_i}}{\sum_{i \in s} d_i } \,\,\tag{10.10} \]
A variância aproximada de \(\widehat Y_{PO}^R\) e um estimador consistente desta variância são dados por:
\[ V_{PO}\left(\widehat Y_{PO}^R \right) \doteq \frac {N}{N-1} \frac{1}{n} \displaystyle \sum_{i \in U} (1 - n p_i) \left( \frac{y_i}{p_i} - Y \right)^2 p_i \,\, \tag{10.11} \] e
\[ \widehat V_{PO}\left(\widehat Y_{PO}^R \right) = \frac{1}{n(m-1)} \displaystyle \sum_{i \in s} (1 - n p_i) \left( \frac{y_i}{p_i} - \widehat Y_{PO}^R \right)^2 \,\, \tag{10.12} \] onde \(m\) é o tamanho efetivo da amostra selecionada. Para mais detalhes sobre a estimação da variância, ver Ohlsson (1998).
10.5 Amostragem sequencial de Poisson
O método de Amostragem Sequencial de Poisson - ASP, proposto por Ohlsson (1998), é uma modificação do método de Amostragem de Poisson que elimina a variabilidade do tamanho efetivo da amostra. O custo dessa modificação é um procedimento de amostragem um pouco mais complexo e que requer uso de resultados aproximados para a estimação tanto do total como de sua variância.
Um algoritmo baseado em processamento sequencial de lista para implementar o método para selecionar uma amostra de tamanho \(n\) da população \(U\) consiste nos seguintes passos.
- Gere um número aleatório uniforme independente \(A_i\) para cada unidade \(i\) da população.
- Calcule a medida de tamanho relativo \(p_i = x_i / X\) para cada unidade \(i\) da população.
- Calcule o número aleatório modificado \(C_i = A_i / p_i\).
- Ordene as unidades crescentemente segundo os valores dos números aleatórios modificados \(C_i\).
- Selecione para a amostra as \(n\) unidades com os menores valores de \(C_i\).
Exemplo 10.3 Seleção de uma amostra de \(n=10\) municípios do Acre, a partir do arquivo ‘MunicBR_dat.rds’, por Amostragem Sequencial de Poisson, utilizando o R.
# Algoritmo para Amostragem sequencial de Poisson
# Lendo a identificação e a população dos municípios do Acre
<- readRDS(file="Dados/MunicBR_dat.rds")[53:74,c(1, 4)]
tabela =length(tabela$Pop)
N=10
n# Gerando números aleatórios ai~U(0,1)
$ai=runif(N,0,1)
tabela=sum(tabela$Pop)
X# Calculando os tamanhos relativos pi
$pi=tabela$Pop/X
tabela# Calculando os aleatórios modificados ci
$ci=tabela$ai/tabela$pi
tabela# Ordenando as linhas da tabela segundo ci
=tabela[order(tabela$ci),]
tabela# Tomando as n primeiras linhas da tabela ordenada
# como a amostra desejada
=tabela[1:n,]
amostra amostra
## CodMunic Pop ai pi ci
## 67 1200401 357194 0.13664306 0.46002707 0.2970326
## 59 1200252 16099 0.03321251 0.02073376 1.6018564
## 58 1200203 80377 0.27247806 0.10351684 2.6322098
## 72 1200609 37571 0.26588672 0.04838737 5.4949616
## 71 1200500 40311 0.33856464 0.05191619 6.5213693
## 73 1200708 17021 0.18041917 0.02192120 8.2303516
## 62 1200336 16410 0.18034857 0.02113430 8.5334546
## 57 1200179 9836 0.20800850 0.01266770 16.4203850
## 60 1200302 32411 0.91424059 0.04174185 21.9022552
## 55 1200104 22899 0.80693183 0.02949142 27.3615752
10.5.1 Estimação com amostragem sequencial de Poisson
O estimador tipo HT do total sob Amostragem Sequencial de Poisson é dado por:
\[ \widehat Y_{ASP} = \frac{1} {n} \sum_{i \in s} \frac{y_i}{p_i} \,\, \tag{10.13} \]
A variância aproximada de \(\widehat Y_{ASP}\) é dada por:
\[\hspace{-1,0cm} V_{ASP}\left(\widehat Y_{ASP}\right) \doteq \frac{N}{N-1} \frac{1}{n} \displaystyle\sum_{i \in U} (1-np_i) \left(\frac{y_i}{p_i} - Y \right)^2 p_i = V_{PO}\left(\widehat Y_{PO}^R \right) \,\,\tag{10.14} \] Vemos assim que a variância do estimador de total sob Amostragem Sequencial de Poisson é, praticamente, a mesma que se obteria usando o estimador de razão sob Amostragem de Poisson. A principal vantagem é que sob ASP o tamanho efetivo da amostra é fixo. Um estimador consistente desta variância é dado por:
\[ \widehat V_{ASP}\left(\widehat Y_{ASP}\right) = \frac{1}{n(n-1)} \displaystyle\sum_{i \in s}\left(\frac{y_i}{p_i} - \widehat Y_{ASP}\right)^2 (1-np_i)p_i\,\,\tag{10.15} \] No Brasil, ASP foi usada para a seleção de escolas para aplicação de testes padronizados no âmbito do Sistema de Avaliação da Educação Básica - SAEB, como descrito em Bussab et al. (1999).
10.6 Amostragem sistemática com PPT
O método de Amostragem Sistemática com PPT - SIS consiste nos seguintes passos:
- Acumule as medidas de tamanho na população, isto é, e faça \(X_{(0)}=0\) e calcule \(X_{(i)}=\displaystyle \sum_{k=1}^{i}x_k\) para \(i=1,...,N\).
- Determine “intervalos de seleção” com base no tamanho de cada unidade. Assim, o intervalo de seleção para a unidade \(i\) será dado por \((X_{(i-1)};X_{(i)}]\), sendo o limite superior incluído.
- Determine o intervalo de amostragem através do salto \(\displaystyle K=\frac{X_{(N)}}{n}=\) Total dos Tamanhos/Tamanho da Amostra.
- Selecione um número aleatório \(r\) (ponto de partida) com distribuição uniforme entre 0 e \(K\).
- Selecione as unidades correspondentes aos intervalos nos quais caem os valores \(r+(j-1) K\), para \(j=1,2,...,n\). Isto é, selecione toda unidade \(i\) tal que \(r+(j-1) K \in (X_{(i-1)};X_{(i)}]\), para \(j=1,2,...,n\).
Seguem alguns cuidados a serem tomados no uso da Amostragem Sistemática com PPT:
- Verifique se alguma unidade tem tamanho \(x_i\) maior que \(K\). Se isto ocorrer, esta unidade seria incluída ‘com repetição’ na amostra, o que é indesejável.
- Caso alguma unidade seja tão grande que \(x_i > K\), inclua esta unidade com certeza na amostra, e refaça os cálculos para \(K\) com o tamanho desta unidade excluído do total e o tamanho de amostra diminuído de uma unidade.
- Repita a verificação até que nenhuma unidade tenha tamanho maior que o intervalo de seleção calculado no passo 3.
10.6.1 Amostragem PPT sistemática com ordenação
A seleção com amostragem PPT sistemática com ordenação segue os seguintes passos:
- Faça uma ordenação das unidades da população segundo uma (ou mais) variável(is) de interesse.
- Selecione uma amostra sistemática com PPT seguindo o algoritmo anterior.
Apresentamos uma implementação do algoritmo para seleção Sistemática com PPT, considerando como certas as unidades em que o valor da variável tamanho é maior que \(K\). Dessa maneira a seleção é sem reposição.
Exemplo 10.4 O arquivo ‘MunicBR_dat.rds’ apresenta alguns dados sobre os municípios brasileiros. Vamos tomar os dados de Rondônia e selecionar uma amostra de tamanho \(n=10\) municípios, com probabilidades proporcionais à população de cada município.
# Seleção Sistemática com PPT e seleção das unidades certas se for o caso
# Inicializando variáveis
# Lendo a identificação e população dos municípios de Rondônia
<- readRDS(file="Dados/MunicBR_dat.rds")[1:52,c(1, 4)]
tabela =length(tabela$Pop)
N=10
n=aleat=sel=selc=r=NULL
certas# Ordenação dos tamanhos em ordem decrescente
=tabela[order(tabela$Pop,decreasing=T),]
tabela=rep(0,N)
sel#Determinando tamanho mínimo das unidades certas
=n
n_aux=tam_certo=sum(tabela$Pop)
tamtot_auxfor (i in 1:N){
=n_aux*tabela$Pop[i]/tamtot_aux
pif (p>=1){
=tabela$Pop[i]
tam_certo=1
p=n_aux-1
n_aux=tamtot_aux-tabela$Pop[i]
tamtot_aux# Seleção certa: sel=1
=1
sel[i]
}
}=tabela
aleatif (sum(sel)>0){
=tabela[tabela$Pop>=tam_certo,]
certas=tabela[tabela$Pop<tam_certo,]
aleat=sel[sel>0]
selc
} # Seleção aleatória sistemática PPT
=linf=lsup=sel=NULL
acum1]=lsup[1]=aleat$Pop[1]
acum[1]=1
linf[=length(aleat$Pop)
N=rep(0,N)
sel# Criando intervalos de seleção PPT
for (i in 2:N){
=acum[i-1]+aleat$Pop[i]
acum[i]=acum[i-1]+1
linf[i]=acum[i]
lsup[i]
}# Salto de seleção
=lsup[N]/n_aux
K# Partida aleatória
1]=runif(1,0,K)
r[if (n_aux>1){for (i in 2:n_aux){r[i]=r[i-1]+K}}
# Marcando fazendas selecionadas aleatoriamente
for (i in 1:n_aux){
for (j in 1:N){
if((linf[j] < r[i]) & (r[i]<=lsup[j])){
#Seleção aleatória: sel=2
=2
sel[j]
}
}
}# Juntando as informações da seleção
$sel=c(selc,sel)
tabela# Amostra com marcação das unidades selecionadas certas(sel=1) e aleatórias(sel=2)
$sel>0,] tabela[tabela
## CodMunic Pop sel
## 17 1100205 484992 1
## 12 1100122 128026 2
## 22 1100304 87727 2
## 4 1100049 85863 2
## 10 1100106 45761 2
## 28 1100452 36555 2
## 23 1100320 23668 2
## 6 1100064 19190 2
## 47 1101500 12505 2
## 30 1100601 6268 2
Esta forma de implementar a Amostragem Sistemática PPT confere um efeito de ‘estratificação implícita’ pela variável (ou variáveis) usada(s) na ordenação.
Exemplo 10.5 Nas pesquisas domiciliares por amostragem do IBGE, anteriores à adoção da amostra mestra para o Sistema Integrado de Pesquisas Domiciliares - SIPD, tais como na PNAD, POF e PME, era usual adotar a seleção sistemática com PPT. No caso da PNAD, o plano amostral incluía a seleção de municípios, que eram estratificados por tamanho em termos de população e selecionados sistematicamente com probabilidade proporcional à população residente obtida no último Censo Demográfico. Antes da seleção dos setores, arrolava-se em cada município selecionado, primeiramente, os setores urbanos em ordem crescente de numeração e, posteriormente, os setores rurais. Os setores eram selecionados, em cada município da amostra, também sistematicamente com probabilidade proporcional utilizando como medida de tamanho o número de unidades domiciliares existentes por ocasião do último Censo Demográfico. Nas demais pesquisas domiciliares, onde a unidade primária de seleção era o setor, era feita a seleção dos setores em cada estrato sistematicamente com PPT (medido em número de domicílios ou domicílios particulares ocupados). Detalhes sobre os principais aspectos de amostragem das pesquisas domiciliares do IBGE podem ser vistos em Albieri e Bianchini (2015). Cabe registrar que, para a estimação da precisão das estimativas, eram adotados estimadores das variâncias como se o plano amostral fosse de seleção PPT com reposição.
A Amostragem Sistemática com PPT (com ou sem ordenação) era muito usada na prática por sua simplicidade na seleção de amostras. Porém, com o advento de modernas ferramentas computacionais que permitem selecionar com facilidade amostras PPT sem reposição usando outros métodos, tornou-se menos popular.
Quando Amostragem Sistemática com PPT for usada para selecionar a amostra, pode-se usar o estimador HT para o total conforme descrito na Expressão (10.2). Para esse plano amostral, a variância tem uma expressão complexa e não há estimador consistente de variância disponível na literatura. O problema da estimação de variância sob amostragem sistemática com PPT é ainda mais difícil quando o sorteio é feito com ordenação. Berger (2003) oferece uma estratégia que pode ser considerada nesse caso.
10.7 Amostragem PPT de Pareto
A seleção com Amostragem PPT de Pareto - AP, de acordo com Rosén (2000), segue os seguintes passos:
- Gere número aleatório uniforme independente \(A_i\) para cada unidade \(i\) da população.
- Calcule a probabilidade de inclusão desejável da unidade \(i: \lambda_i = n x_i/X\).
- Calcule o número aleatório modificado \(\displaystyle C_i=\frac{A_i(1-\lambda_i)}{(1-A_i)\lambda_i}\).
- Ordene as unidades crescentemente segundo valores dos números aleatórios modificados \(C_i\).
- Selecione para a amostra as \(n\) unidades com os menores valores de \(C_i\).
Exemplo 10.6 Vamos repetir o Exemplo 10.3, agora utilizando seleção por Amostragem PPT de Pareto.
# Algoritmo para Amostragem PPT de Pareto
# Lendo a identificação e a população dos municípios do Acre
<- readRDS(file="Dados/MunicBR_dat.rds")[53:74,c(1, 4)]
tabela =length(tabela$Pop)
N=10
n# Gerando números aleatórios ai~U(0,1)
$ai=runif(N,0,1)
tabela=sum(tabela$Pop)
X# Probabilidade de inclusão desejável da unidade
$lambdai=n*tabela$Pop/X
tabela# Calculando os aleatórios modificados ci
$ci=tabela$ai*(1-tabela$lambdai)/((1-tabela$ai)*tabela$lambdai)
tabela# Ordenando as linhas da tabela segundo ci
=tabela[order(tabela$ci),]
tabela# Tomando as n primeiras linhas da tabela ordenada
# como a amostra desejada
=tabela[1:n,]
amostra amostra
## CodMunic Pop ai lambdai ci
## 67 1200401 357194 0.290341932 4.6002707 -0.32019341
## 58 1200203 80377 0.889386493 1.0351684 -0.27316469
## 74 1200807 16029 0.009815109 0.2064361 0.03810439
## 62 1200336 16410 0.151959165 0.2113430 0.66866793
## 73 1200708 17021 0.238611177 0.2192120 1.11622852
## 71 1200500 40311 0.568674370 0.5191619 1.22110909
## 60 1200302 32411 0.468788411 0.4174185 1.23167002
## 59 1200252 16099 0.258868322 0.2073376 1.33534547
## 65 1200385 17795 0.428517755 0.2291803 2.52198021
## 63 1200344 8386 0.319961369 0.1080026 3.88591657
A Amostragem PPT de Pareto é o método empregado para sorteio de unidades primárias de amostragem da PNAD Contínua - ver Freitas e Antonaci (2014).
Para tamanhos de amostra iguais, AP é mais eficiente que ASP. A implementação deste método requer os mesmos cuidados com relação a unidades muito grandes que com outros métodos PPT sem reposição. As probabilidades exatas de inclusão não são estritamente proporcionais ao tamanho e são difíceis de calcular. Porém, resultados sugerem que as aproximações consideradas no passo 2 são suficientemente boas para a maioria das situações de interesse prático, como pode ser visto em Aires e Rosén (2005).
10.7.1 Estimação do total sob amostragem PPT de Pareto
O estimador do total sob Amostragem PPT de Pareto - AP é dado por:
\[ \widehat Y_{AP} = \displaystyle\sum_{i \in s}\frac{y_i}{\lambda_i} = \frac{1}{n}\sum_{i \in s}\frac{y_i}{p_i}\,\,\tag{10.16} \]
Note que \(E_{AP} \left(\widehat Y_{AP}\right)\doteq Y\). A variância de \(\widehat Y_{AP}\) e o seu respectivo estimador são dados, segundo Rosén (2000), por:
\[\hspace{-0,5cm} V_{AP} \left(\widehat Y_{AP}\right) \doteq \frac{N}{N-1} \displaystyle \sum_{i \in U} \left(\frac{y_i}{\lambda_i} - \frac{\sum_{k \in U} y_k(1 - \lambda_k)} {\sum_{k \in U} \lambda_k(1 - \lambda_k)}\right)^2 \lambda_i(1 - \lambda_i) \,\, \tag{10.17} \]
\[ \widehat V_{AP} \left(\widehat Y_{AP}\right) = \frac{n}{n-1} \displaystyle\sum_{i \in s} \left(\frac{y_i}{\lambda_i} - \frac{\sum_{k \in s} y_k(1-\lambda_k)/\lambda_k} {\sum_{k \in s} (1-\lambda_k)}\right)^2 (1-\lambda_i) \,\,\, \tag{10.18} \]
A Tabela 10.2 apresenta um resumo de estimadores do total e respectivas variâncias sob os diversos métodos de seleção com PPT apresentados neste capítulo.
Estimador |
---|
\(\widehat Y_{PPTC} = \displaystyle\frac{1}{n} \sum_{i \in s} \frac{f_i y_i}{p_i}\) |
\(\displaystyle\widehat Y_{PO} = \sum_{i \in s} \frac{y_i} {\pi_i} = \frac{1}{n} \sum_{i \in s} \frac{y_i}{p_i}\) |
\(\widehat Y_{PO}^R =\displaystyle \frac{N}{\widehat N} \sum_{i \in s} d_i {y_i} = N \displaystyle\frac{\sum_{i \in s} d_i {y_i}}{\sum_{i \in s} d_i }\) |
\(\widehat Y_{ASP} = \displaystyle\frac{1} {n} \sum_{i \in s} \frac{y_i}{p_i}\) |
\(\widehat Y_{AP} = \displaystyle\sum_{i \in s}\frac{y_i}{\lambda_i} = \frac{1}{n}\sum_{i \in s}\frac{y_i}{p_i}\) |
\(\widehat V_{PPTC} \left(\widehat Y_{PPTC}\right)=\displaystyle\frac{1}{n(n-1)}\displaystyle \sum_{i \in s} f_i \left( \frac{y_i}{p_i}-\widehat Y_{PPTC}\right)^2\) |
\(\widehat V_{PO} \left( \widehat Y_{PO} \right) = \displaystyle \sum_{i \in s} \frac{(1 - \pi_i)}{\pi_i^2} y_i^2\) |
\(\widehat V_{PO}\left(\widehat Y_{PO}^R \right) = \displaystyle\frac{1}{n(m-1)} \displaystyle \sum_{i \in s} (1 - n p_i) \left( \frac{y_i}{p_i} - \widehat Y_{PO}^R \right)^2\) |
\(\widehat V_{ASP}\left(\widehat Y_{ASP}\right) = \displaystyle\frac{1}{n(n-1)} \displaystyle\sum_{i \in s}\left(\frac{y_i}{p_i} - \widehat Y_{ASP}\right)^2 (1-np_i)p_i\) |
\(\widehat V_{AP} \left(\widehat Y_{AP}\right) =\displaystyle \frac{n}{n-1} \displaystyle\sum_{i \in s} \left(\frac{y_i}{\lambda_i} - \frac{\sum_{k \in s} y_k(1-\lambda_k)/\lambda_k} {\sum_{k \in s} (1-\lambda_k)}\right)^2 (1-\lambda_i)\) |
10.8 Exercícios
Exercício 10.1 Verifique que o estimador de HT da média não é invariante sob transformações de locação. Isto é, se tomarmos \(z_i=y_i+A\), então \(\overline z_{HT}\ne\overline y_{HT}+A\).
Exercício 10.2 Uma amostra foi selecionada usando o método PPT com reposição. As informações dessa amostra aparecem na Tabela 10.3.
Unidade | \(p_i\) | \(y_i\) | \(\pi _i\) |
---|---|---|---|
6 | 0,02 | 45 | |
8 | 0,01 | 20 | 0,0297 |
14 | 0,03 | 60 | 0,0873 |
- Calcule o valor de \(\pi_i\) que está faltando.
- Estime o total populacional da variável de interesse, \(y\), usando o estimador de Horvitz-Thompson.
- Estime a variância da estimativa calculada em b usando o estimador HT e o estimador alternativo apresentado.
- Compare e comente os resultados obtidos.
Exercício 10.3 No arquivo ‘fazendas_dat.rds’ são listadas 338 fazendas, com informações sobre a receita e a despesa de cada uma. Suponha que não são conhecidas as informações sobre as despesas e que se deseja selecionar uma amostra de 20 fazendas para estimar a despesa média da população de fazendas.
- Selecione uma AAS de 20 fazendas e construa um IC95% para a despesa média das fazendas.
- Selecione uma amostra PPT com reposição de 20 fazendas, considerando a variável receita como tamanho, e construa um IC95% para a despesa média das fazendas.
- Compare os resultados com a despesa média verdadeira das 338 fazendas e teça seus comentários.
Exercício 10.4 (Thompson (2012)) Uma determinada região tem 320 lagos que somados cobrem uma área de 80 km2. Num estudo sobre poluição das águas, foi selecionada uma amostra de lagos, seguindo o procedimento abaixo:
- Um retângulo de comprimento C e largura L foi desenhado sobre um mapa da região.
- Pares de números aleatórios uniformes entre 0 e 1 foram gerados. O primeiro número de cada par foi multiplicado por C e o segundo por L, dando coordenadas dentro da região em estudo.
- Se a coordenada “caísse” sobre um lago no mapa, este era selecionado para a amostra.
- O procedimento foi repetido até que 4 pontos “caíssem” sobre algum lago.
- O primeiro lago da amostra foi selecionado 2 vezes.
Nos lagos selecionados foi medido o nível de poluição. Os resultados estão na Tabela 10.4:
Lago | Poluição (partes/milhão) | Tamanho do lago (km2) |
---|---|---|
1 | 2 | 1,2 |
1 | 2 | 1,2 |
2 | 5 | 0,2 |
3 | 10 | 0,5 |
- Qual o tipo de amostragem utilizada?
- Calcule uma estimativa não viciada para a média de poluição dos lagos da região.
- Estime a variância do estimador utilizado.
Exercício 10.5 Sejam \(U=\{1,\;2,\;...,\;i,\;...,\;N\}\) o conjunto de \(N\) rótulos distintos de uma população e \(Y_U = \{y_1,\;y_2,\;...,\;y_i,\;..., \;y_N\}\) um vetor populacional de interesse. Uma amostra com probabilidades desiguais com reposição de tamanho \(n\) foi selecionada de \(U\) para estimar o total \(Y = \sum_{i \in U} y_i\), sendo o vetor amostral representado por \(y_s = \{y_1, y_2, \dots, y_n\}\) e \(\{p_1, p_2, \dots, p_N\}\) o conjunto das probabilidades de seleção das unidades populacionais num dado sorteio, tais que \(\sum_{i \in U} p_i=1\). Antes de efetivar a observação da amostra, \(y_1, y_2, \dots, y_n\) são variáveis aleatórias independentes e identicamente distribuídas - IID.
- Descreva a distribuição de probabilidades comum dos \(y_i\) e calcule a esperança e a variância dessa distribuição.
- Obtenha um estimador não viciado para o total \(Y\) com base na amostra e prove que esse estimador é mesmo não viciado, usando a distribuição obtida no item a.
Exercício 10.6 Considere a população de empresas descrita na Tabela 10.5. Utilizando o R, resolva as questões.
- Selecione uma amostra aleatória simples sem reposição de 3 empresas.
- Use a amostra selecionada em a. para estimar a Receita média das empresas na população e o correspondente CV.
- Selecione uma amostra com probabilidades proporcionais ao Pessoal Ocupado, com reposição, de 3 empresas.
- Use a amostra selecionada no item c para estimar a Receita média das empresas na população e o correspondente CV.
- Compare os resultados das duas amostras com os valores verdadeiros e comente esses resultados.
Empresa | Pessoal Ocupado | Receita (1.000 Reais) |
---|---|---|
1 | 250 | 8.000 |
2 | 350 | 12.000 |
3 | 175 | 6.000 |
4 | 310 | 10.000 |
5 | 160 | 5.000 |
6 | 350 | 18.000 |
7 | 375 | 18.000 |
8 | 150 | 4.000 |
9 | 275 | 9.000 |
10 | 240 | 8.000 |
Exercício 10.7 Seja o arquivo de dados ‘MunicBR_dat.rds’. Selecione uma amostra de 10 municípios com PPT, utilizando como medida de tamanho a variável população (Pop).
- Estime o total da população para o Brasil.
- Compare com o valor verdadeiro e comente esse resultado surpreendente. Por que isso ocorre?