Não é uma percentagem do teu público
Um equívoco frequente é pensar que precisas de uma fatia fixa do teu público, como 10%. A estatística não funciona assim. Duas coisas decidem o tamanho da amostra: o nível de confiança, ou seja, o quanto queres ter a certeza de que o resultado reflete a realidade, e a margem de erro, ou seja, quanta oscilação em torno de cada resultado estás disposto a aceitar.
A confiança costuma exprimir-se em percentagem, quase sempre 95%, o que significa que, se repetisses o inquérito muitas vezes, o valor real cairia dentro da tua margem em 95 de cada 100. A margem de erro, escrita por exemplo como ±5%, é a faixa que rodeia cada resultado.
A regra prática das 385 respostas
Para uma população grande, ou seja, a partir de alguns milhares de pessoas, onde o tamanho da população deixa de importar, a combinação habitual de 95% de confiança e uma margem de ±5% aponta para cerca de 385 respostas completas. É este número que explica porque tantos inquéritos apontam a cerca de 400 respostas.
Assim obténs estimativas fiáveis sobre o conjunto. Para fixar o número exato com outro nível de confiança ou outra margem, passa os teus números por uma calculadora de tamanho da amostra.
Um aviso fundamental: estes números partem do princípio de que as respostas vêm de uma amostra sem enviesamento. O tamanho controla a margem de erro, não o enviesamento de seleção: uma amostra grande mas enviesada não representa o conjunto, por muitas respostas que tenha. Quem convidas e quem acaba por responder importa tanto como o número de pessoas.
Essa cifra não é arbitrária: resulta da fórmula clássica de tamanho de amostra que Cochran apresenta em Sampling Techniques, que com um intervalo de confiança de 95%, uma proporção de 50% e uma margem de ±5% dá 384,16 e se arredonda para cima para 385.
Uma metanálise de Groves e Peytcheva publicada em 2008 na Public Opinion Quarterly, que reuniu 59 estudos com medidas reais de enviesamento, concluiu que a taxa de resposta serve mal para prever quanto enviesamento de não resposta arrasta um inquérito.
As populações pequenas e conhecidas precisam de menos
Se inquires um grupo que consegues contar, por exemplo 200 colaboradores ou 80 fornecedores, precisas de muito menos do que 385. Um ajuste estatístico chamado correção para população finita reduz o objetivo à medida que a população diminui.
Para atingir o mesmo padrão de 95% e ±5%, uma população de 200 precisa de cerca de 130 respostas em vez de 385. Quanto mais pequeno e bem definido for o teu público, mais a amostra necessária se aproxima de simplesmente perguntar a quase todos.
A tabela de referência de Krejcie e Morgan (1970), ainda hoje de uso corrente, fixa essa exigência com precisão: para uma população de 200 pessoas, 132 respostas.
Mais respostas, uma margem mais estreita
Respostas e precisão estão ligadas, mas não uma a uma. Acrescentar respostas estreita a margem de erro com rendimentos decrescentes: grosso modo, reduzir a margem para metade multiplica por quatro as respostas de que precisas. Passar de ±5% para ±2,5% é um salto grande de esforço para um ganho modesto.
Decide que precisão a decisão realmente exige antes de correres atrás de mais respostas. Para perceberes em traços gerais se uma ideia agrada, uma margem ampla costuma chegar. Para uma escolha renhida entre duas opções, talvez queiras uma mais estreita.
Vigia a contagem de cada pergunta e segmento
A tua amostra total só protege as estimativas do conjunto. No momento em que filtras, por exemplo, mulheres com menos de 30 anos ou uma única região, a contagem por trás dessa fatia cai e a sua margem de erro alarga-se.
Quando um segmento ou uma única pergunta assenta num punhado de respostas, trata o resultado como indicativo: uma pista que vale a pena explorar, não um número firme para reportar. Se um desdobramento te importa, planeia respostas suficientes para que cada célula que te interessa mantenha uma contagem utilizável.
À medida que as respostas chegam, o Camaleonic Survey mostra os resultados em direto, o que facilita perceber quando cada segmento atingiu uma contagem em que podes confiar.