Tabelas de contingência e o teste qui-quadrado: analisando duas variáveis qualitativas

Um teste qui-quadrado pode apontar uma associação estatisticamente significante que é fraca demais para sustentar uma conclusão. Isso acontece porque o p-valor mede a chance de o acaso produzir a diferença observada, e em amostras grandes quase qualquer diferença passa no teste. Com dados da PNAD Contínua sobre acesso a curso profissional, montamos uma tabela de contingência, aplicamos o teste, medimos a força da associação com o V de Cramér e usamos os resíduos padronizados para encontrar as categorias em que a diferença se concentra.

Boa parte do que se mede em economia vem em categorias: setor de atividade, ocupação, escolaridade, cor ou raça. Essas variáveis classificam cada pessoa ou empresa num grupo, e por isso a média de um setor ou o desvio-padrão de uma ocupação não têm significado. A análise delas usa um conjunto próprio de ferramentas. Neste exercício, vamos mostrar como analisar a relação entre duas variáveis qualitativas, usando dados da PNAD Contínua.

A pergunta do exercício: existe relação entre cor ou raça e o tipo de curso profissional que um estudante do ensino médio frequenta?
Para responder, percorremos três etapas:

  • montar a tabela que cruza as duas variáveis;
  • testar se a diferença observada é grande demais para ser acaso;
  • medir o tamanho dessa diferença.

As duas primeiras etapas são rotina em qualquer análise. A terceira costuma ficar de fora, e neste exercício ela inverte a leitura: o teste aponta uma associação entre as variáveis, mas a medida de tamanho mostra que essa associação é fraca demais para sustentar qualquer afirmação forte.

Receba as próximas análises no seu e-mail

Associação entre variáveis, testes estatísticos e leitura de microdados aparecem toda semana nas análises do Boletim AM. A assinatura é gratuita e chega direto no seu e-mail.

Assinar o Boletim AM →

A tabela de contingência

A distinção entre o que se conta e o que se mede é o ponto de partida, e está detalhada em variáveis quantitativas e qualitativas: o que são e como analisar.
Uma tabela de contingência cruza duas variáveis categóricas e conta quantos casos caem em cada combinação. Cada célula é uma contagem: quantas pessoas têm, ao mesmo tempo, determinada cor ou raça e determinado tipo de curso.

Curso técnico Qualificação profissional Nenhum dos dois
Branca 1.730 682 24.294
Preta ou parda 2.225 1.106 35.569

Olhando os números brutos, o grupo preto ou pardo tem mais pessoas em curso técnico, e seria tentador concluir que há maior acesso nesse grupo.
A conclusão está errada porque os dois grupos têm tamanhos muito diferentes na população. Tomemos dois grupos, um com mil pessoas e outro com cem. Se cem pessoas do primeiro fazem curso técnico e vinte do segundo, a contagem favorece o primeiro grupo, mas a proporção é de 10% contra 20%, e o acesso é maior no segundo. Ou seja, as contagens absolutas refletem o tamanho de cada grupo, e o acesso só aparece quando dividimos pelo total do grupo.

A comparação correta: percentual dentro de cada grupo

A pergunta sobre acesso exige comparar proporções dentro de cada linha: que fração de cada grupo faz cada tipo de curso?

Barras com o percentual de estudantes em curso técnico e qualificação profissional dentro de cada grupo de cor ou raça
Percentual dentro de cada grupo de cor ou raça. Fonte: IBGE, PNAD Contínua (SIDRA 7228).

No gráfico acima, cada barra mostra o percentual de estudantes de um grupo de cor ou raça em cada tipo de curso, e a leitura muda de direção. Em curso técnico, a proporção é maior entre pessoas brancas, o oposto do que os números brutos sugeriam. Em qualificação profissional a diferença é menor e aponta para o outro lado.
Por isso, a análise de uma tabela de contingência começa pela conversão para percentual na direção que responde à pergunta feita. Se a pergunta é sobre acesso de cada grupo, o percentual é calculado por linha.

A hipótese nula: e se não houvesse relação nenhuma?

O teste qui-quadrado compara a tabela observada com a que existiria sob independência entre as duas variáveis.
Independência, aqui, significa que a distribuição de cursos seria idêntica em todos os grupos. Se determinada fração do total faz curso técnico, essa mesma fração apareceria dentro de cada grupo de cor ou raça.
A partir dessa hipótese, calculamos a frequência esperada de cada célula: o total da linha multiplicado pelo total da coluna, dividido pelo total geral.

Eij = (total da linha i) × (total da coluna j)total geral
Comparação entre as frequências observadas e as esperadas sob independência, por grupo de cor ou raça
Frequências observadas contra as esperadas sob independência. Fonte: IBGE, PNAD Contínua.

As barras cinzas mostram a frequência esperada sob independência; as azuis, a frequência observada. A barra cinza e a barra azul de cada combinação têm alturas próximas: existe diferença, mas ela é pequena diante do tamanho das barras. O teste formal, como veremos, devolve um resultado que parece contradizer essa leitura visual.

A estatística do teste

O qui-quadrado resume todas essas diferenças num único número. Para cada célula da tabela:

  • calcula-se o quanto o observado se afasta do esperado;
  • eleva-se essa diferença ao quadrado, para que desvios para cima e para baixo não se cancelem ao serem somados;
  • divide-se pelo valor esperado da célula;
  • somam-se todos os resultados.
χ2 = Σi,j (Oij − Eij)2Eij

O termo Oij é a contagem observada na célula e Eij a esperada sob independência. A divisão pelo esperado torna a medida comparável entre células de tamanhos diferentes. Um desvio de cem pessoas numa célula que esperava duzentas é grave; numa que esperava vinte mil, é irrelevante.
A soma desses termos segue uma distribuição própria, a qui-quadrado, que aparece no catálogo de distribuições de probabilidade em dados ao lado das demais famílias contínuas.
A estatística resultante depende da escala da tabela e do tamanho da amostra, e por isso precisa ser convertida em probabilidade. O p-valor faz essa conversão.

O que o p-valor responde

Essa conversão se apoia na distribuição que a estatística assume sob a hipótese nula, o mesmo raciocínio que sustenta a margem de erro de uma pesquisa e que o Teorema Central do Limite fundamenta.
O p-valor responde a uma pergunta bem delimitada: se as duas variáveis fossem independentes, qual a chance de o acaso da amostragem produzir uma diferença deste tamanho ou maior?
Quando essa chance é muito pequena, a explicação "foi coincidência" fica difícil de sustentar. É o caso aqui: o p-valor fica tão próximo de zero que, se as duas variáveis fossem independentes, seria preciso repetir a pesquisa um número imenso de vezes para o acaso produzir uma diferença como a observada.
Pelos critérios usuais, a associação é estatisticamente significante, e a maior parte das análises se encerra nesse ponto.

Significância estatística e tamanho da associação

O p-valor mede a chance de o acaso produzir aquela diferença. O tamanho da diferença é outra pergunta, e costuma ser a que orienta a decisão.
Reportar o tamanho do efeito ao lado do teste cumpre o mesmo papel que atribuir probabilidade a um cenário em simulação de cenários com distribuição de probabilidades: informa a magnitude, além da existência.
Confundir significância com tamanho leva a um erro frequente, porque quanto maior a amostra, mais fácil fica detectar diferenças cada vez menores. Com dezenas de milhões de observações, quase qualquer diferença passa a ser significante, inclusive as irrelevantes na prática.
Por isso o teste precisa vir acompanhado de uma medida de tamanho de efeito, que responde à outra pergunta: além de existir, a associação é forte?

O V de Cramér

Para tabelas de contingência, a medida usual é o V de Cramér. Ele parte do próprio qui-quadrado e o divide pelo tamanho da amostra e pelas dimensões da tabela. Essa divisão resolve o problema do n: como o qui-quadrado cresce proporcionalmente ao número de observações, dividir por ele devolve uma medida que depende apenas das proporções da tabela. Dobrar a amostra mantendo as mesmas proporções dobra o qui-quadrado, mas não altera o V de Cramér.

V = √χ2n × (k − 1)

Aqui n é o total de observações e k é o menor entre o número de linhas e o de colunas da tabela.
O V de Cramér fica numa escala fixa, entre 0 e 1:

  • 0 indica independência perfeita entre as variáveis;
  • 1 indica associação total.

Neste exercício, o V de Cramér fica muito próximo de zero. A conclusão completa reúne as duas informações: existe uma associação estatisticamente detectável entre cor ou raça e tipo de curso profissional, e ela é muito fraca. Quem reportasse apenas o p-valor concluiria que a relação entre as duas variáveis é relevante, quando os próprios dados mostram o contrário.

O efeito do tamanho da amostra sobre o p-valor

Podemos isolar o efeito do tamanho da amostra num experimento simples: mantemos exatamente as mesmas proporções da tabela e variamos apenas o total de observações.

O p-valor da mesma tabela despencando conforme o tamanho da amostra cresce, enquanto o V de Cramér permanece constante
O p-valor da mesma tabela, recalculada para diferentes tamanhos de amostra. Fonte: IBGE, PNAD Contínua.

Repetir um cálculo variando só um parâmetro, para ver o que ele governa, é o procedimento da simulação de Monte Carlo.
No gráfico acima, o eixo horizontal mostra o tamanho da amostra. O V de Cramér permanece constante, porque as proporções são idênticas em todos os casos, enquanto o p-valor despenca conforme a amostra cresce.
Com poucas centenas de pessoas, a mesma tabela seria classificada como "não significante". Com dezenas de milhões, vira "altamente significante". Entre os dois casos, só o tamanho da amostra mudou.

Onde a associação se concentra

O qui-quadrado resume a tabela inteira num número único, e precisamos de outra medida para saber quais células produzem esse valor. Para localizar as células que mais contribuem, usa-se o resíduo padronizado: a diferença entre observado e esperado, dividida pela raiz do valor esperado. A divisão coloca todas as células na mesma escala, de modo que um desvio numa célula pequena e outro numa célula grande possam ser comparados diretamente.

rij = Oij − Eij√Eij

A regra de leitura usual trata resíduos acima de 2 em módulo como células que se afastam do esperado. O valor 2 vem da distribuição normal: sob independência, os resíduos se comportam aproximadamente como uma normal padrão, e valores acima de 2 são raros nessa distribuição. A regra funciona em amostras de tamanho comum, mas exige cuidado quando a amostra é muito grande, porque o resíduo cresce com a raiz do número de observações.

Mapa de calor dos resíduos padronizados, com destaque para a célula de curso técnico em cada grupo de cor ou raça
Resíduo padronizado de cada célula: quanto ela se afasta do que se esperaria sem associação. Fonte: IBGE, PNAD Contínua (SIDRA 7228).

No mapa de calor acima, cada célula mostra o resíduo padronizado de uma combinação de cor ou raça e tipo de curso. Com uma amostra de dezenas de milhões, todas as células ultrapassam 2, e a regra deixa de discriminar. Nessa situação, a informação está na ordem de grandeza entre as células.
As células de curso técnico têm resíduo várias vezes maior que as de "nenhum dos dois", com sinais opostos entre os dois grupos de cor ou raça. A associação da tabela se concentra nas células de curso técnico, enquanto a ausência de curso quase não contribui para o resultado.

As condições para aplicar o teste

🔢

Células pequenas
A regra usual pede ao menos 5 em cada célula esperada. Abaixo disso, usamos o teste exato de Fisher.
👥

Observações independentes
A mesma pessoa não pode aparecer em duas células, nem haver medidas repetidas do mesmo indivíduo.
📏

Contagem absoluta
Aplicar o teste sobre percentuais, ou sobre valores em milhares, altera o resultado.

Variáveis categóricas dispensam média e desvio-padrão, mas a escolha entre medidas resistentes e medidas sensíveis reaparece sempre que a variável volta a ser numérica, assunto das estatísticas robustas: mediana, IQR e MAD.
A primeira condição é sobre frequências esperadas pequenas. A regra usual pede pelo menos cinco casos em cada célula esperada; abaixo disso, a aproximação que sustenta o teste perde validade, e o caminho é o teste exato de Fisher.
A segunda é sobre independência das observações. Se a mesma pessoa aparece em mais de uma célula, ou se há medidas repetidas do mesmo indivíduo, o teste não se aplica, porque a mesma informação entra mais de uma vez na soma.
A terceira é sobre a unidade da tabela. O qui-quadrado exige contagens absolutas de pessoas ou de casos. A PNAD Contínua, como boa parte das tabulações do IBGE, publica os resultados em milhares de pessoas: aplicar o teste sobre esses valores equivale a dividir a amostra por mil, e o qui-quadrado sai mil vezes menor do que deveria. A conversão para a contagem absoluta precisa ser feita antes do teste.

O roteiro completo

Passo O que fazer
1 Montar a tabela de contingência com as contagens absolutas.
2 Converter para percentual na direção que responde à pergunta feita.
3 Rodar o teste e obter o p-valor.
4 Calcular o tamanho do efeito com o V de Cramér. Sozinho, o p-valor faz uma associação irrelevante parecer forte.
5 Olhar os resíduos para descobrir quais células explicam a associação.

Os dois últimos passos costumam ser pulados. Sem o tamanho de efeito, uma associação irrelevante pode ser reportada como achado importante; sem os resíduos, sabemos que a tabela como um todo se afasta da independência, sem saber em quais categorias o afastamento acontece.

Você fez o teste; aprenda a análise completa

Da estatística descritiva à modelagem de microdados, com Python aplicado a dados reais desde a primeira aula. Quem quer acesso a todas as formações tem o AM Black, a assinatura anual.

Conheça a formação →Ver o AM Black →

Referências

AGRESTI, A. Categorical data analysis. 3. ed. Hoboken: John Wiley & Sons, 2013.

FIENBERG, S. E. The analysis of cross-classified categorical data. 2. ed. New York: Springer, 2007.

HABERMAN, S. J. The analysis of residuals in cross-classified tables. Biometrics, v. 29, n. 1, p. 205-220, 1973.

PEARSON, K. On the criterion that a given system of deviations from the probable in the case of a correlated system of variables is such that it can be reasonably supposed to have arisen from random sampling. Philosophical Magazine, série 5, v. 50, n. 302, p. 157-175, 1900.

Leia também: Como gerar sumários de estatísticas descritivas  ·  O alicerce da ciência de dados: entendendo o processo gerador dos dados

Compartilhe esse artigo

Facebook
Twitter
LinkedIn
WhatsApp
Telegram
Email
Print

Encontre o seu conteúdo

Pesquisar
Boletim AM · gratuito

Estatística, econometria e IA aplicada, todo dia no seu e-mail

Um insight rápido por dia. Aos domingos, os papers, livros e modelos da semana em métodos quantitativos, aplicados à economia e ao mercado financeiro.

Quero receber o Boletim AM

Temas do blog

Livros digitais

Python, R e IA aplicados a dados econômicos

Livro Análise de Dados com PythonLivro Análise de Dados com RLivro Como Criar Agentes de IALivro Linguagem Econômica

Quatro livros com dados reais do Banco Central, do IBGE e do FED, e código pronto para rodar. Leia as primeiras páginas antes de comprar.

R$ 197R$ 47cada
Ver os livros

Artigos mais acessados

Análise Macro © 2011 / 2026

comercial@analisemacro.com.br – Rua Visconde de Pirajá, 414, Sala 718
Ipanema, Rio de Janeiro – RJ – CEP: 22410-002