O kappa de Cohen (κ) mede a concordância entre dois avaliadores descontando a parcela
que ocorreria por puro acaso. Na condução de revisões sistemáticas e de escopo, ele é o índice
mais usado para documentar o piloto da triagem em dupla — a etapa em que os dois revisores
avaliam a mesma amostra de registros de forma independente para testar se os critérios de
elegibilidade estão claros. O PRISMA 2020 (item 8) pede que o
processo de seleção seja descrito, e o Manual da Cochrane recomenda a triagem independente em dupla.
Esta calculadora é gratuita, não pede cadastro e não armazena o que você preenche: as contagens
ficam no seu próprio navegador. Além do kappa com IC 95%, ela mostra as concordâncias específicas
e o PABAK — porque o kappa, sozinho, pode enganar quando a prevalência de inclusões é muito baixa
ou muito alta.
Perguntas frequentes
Como usar esta ferramenta
Preencha as quatro células da tabela com o resultado da triagem independente dos dois revisores: quantos registros os dois incluíram (a), quantos só o revisor A incluiu (b), quantos só o revisor B incluiu (c) e quantos os dois excluíram (d). O kappa, o intervalo de confiança e as medidas complementares aparecem ao lado, com uma frase pronta para o texto do artigo. Nada precisa ser enviado: o cálculo acontece no seu navegador.
O que é o kappa de Cohen e por que calcular na triagem em dupla?
O kappa (Cohen, 1960) mede a concordância entre dois avaliadores descontando a parcela que ocorreria por puro acaso. Em revisões sistemáticas e de escopo, o item 8 do PRISMA 2020 pede que o processo de seleção seja descrito — inclusive quantos revisores triaram cada registro e se trabalharam de forma independente —, e o Manual da Cochrane recomenda a triagem independente em dupla. Relatar o kappa do piloto documenta que os critérios de elegibilidade estavam claros antes da triagem completa.
Quando devo calcular o kappa?
O momento mais útil é o piloto da triagem de títulos e resumos: os dois revisores avaliam a mesma amostra de registros de forma independente, calcula-se o kappa e, se a concordância for baixa, os critérios de elegibilidade são discutidos e refinados antes de triar o restante. O exercício pode ser repetido na fase de leitura do texto completo.
O que fazer com as discordâncias?
O kappa apenas mede a concordância — não resolve as divergências. Cada registro em que os revisores discordaram deve ser decidido por consenso ou por um terceiro revisor, e o método de resolução deve ser relatado no artigo, como pede o PRISMA 2020.
Quais são as limitações do kappa?
O kappa é sensível à prevalência: quando quase tudo é excluído (ou incluído), ele pode sair baixo mesmo com concordância observada alta — o chamado paradoxo do kappa. Por isso a calculadora mostra também o PABAK e as concordâncias específicas positiva e negativa. Além disso, o kappa de Cohen vale para dois revisores e categorias nominais; para três ou mais revisores, use o kappa de Fleiss.
Serve para outras concordâncias 2×2?
Sim. A matemática é a mesma para qualquer julgamento binário feito por dois avaliadores: extração de dados, avaliação de risco de viés, classificação de laudos, presença ou ausência de um achado. Basta traduzir “incluiu/excluiu” para as duas categorias do seu caso.
Os dados saem do meu navegador?
Não. Não há banco de dados nem serviço nosso recebendo o que você digita: as contagens ficam na memória local do navegador — e são lembradas na próxima visita, no mesmo aparelho. A página usa medição de audiência e anúncios do Google, como o restante do site.