<div dir="ltr">Leonardo,<div><br></div><div>Grato pela resposta, espero que a discussão seja útil para outros que só nós dois!</div><div><br></div><div>Uma primeira consideração, que é a razão porque eu insisto na questão da tautologia, é a seguinte: seu ponto «  . . . <span style="font-size:12.8px">a importância da precisão da estimativa (ou do intervalo de confiança, que dá mais ou menos no mesmo) também vem da variabilidade amostral, . . .</span>» é a demonstração de que a tentativa de transformar "macarrão em pão" só é possível porque ambos são feitos de farinha!</div><div><br></div><div>Veja que tanto o IC como o valor-p para um determinado conjunto teste estatístico - estimador de IC são ligados funcionalmente por uma fórmula matemática, portanto um é apenas outra forma de escrever o outro. Ou para eu deixar bem clara minha posição: não se obtém nenhuma informação nova a respeito dos dados calculando um IC no lugar do valor-p, que no caso dos dados do OP ainda ensejam uma outra questão, que vou abordar mais abaixo.</div><div><br></div><div>Sua consideração a respeito dos índices de concordância, como já postei acima, somente eu concordo em parte (s/trocadilho com a concordância!), pois o ponto basilar sobre esses índices Kappa e seus sucessores "melhorados" como o do Gwet, é que os julgadores (<i>raters</i>) poderiam estar acertando ao acaso, e por isso, essa parte da informação é descartada (muito mais severo no caso do Kappa do Cohen, onde a informação é descartada completamente); e minha discordância é exatamente essa: no caso dos dados do OP não há julgadores para "concordar" ou "discordar" que pode ser ao acaso, mas sim a co-ocorrência de atributos (<i>traits</i>), como é o caso nos dados de Snee, etc.</div><div><br></div><div>Ou seja de novo, tanto para estimação como para um "teste estatístico" o modelo do problema, tem que anteceder os testes.</div><div><br></div><div>No caso do Kappa do Cohen, o modelo (pode parecer uma caricatura, mas leiam o texto original dele se discordarem) dele é o mesmo de dois indivíduos que jogam cara e coroa e se faz uma tabela cruzada dos "acertos" e "desacertos", aí os "acertos" são atribuídos ao acaso e uma medida dos casos discordantes gera a medida do Kappa.</div><div><br></div><div>No caso de uma tabela de contingência analisada pelos resíduos de Pearson, o modelo é que as distribuições marginais (linhas e colunas) representam a hipótese nula, e desvios numa coluna ou linha dessas distribuições geram resíduos que somados são testados usando-se uma distribuição qui². MAS, essa não a única hipótese nula possível de testar na tabela de contingência! Uma outra distribuição "teórica" de dados pode ser usada e os resíduos contra essa "tabela modelo" seria usada para calcular o qui², etc.</div><div><br></div><div>Portanto, a questão ainda não respondida para poder dizer o que o valor-p obtido pelo OP inicialmente "significa" depende de o quê a tabela modela. Sem essa informação nada pode ser dito de concreto que não seja correto tecnicamente mas que não acrescenta informação (que é uma definição "macarrônica" de <i>tautologia</i>!).</div><div><br></div><div>HTH</div><div>--</div><div>Cesar Rabak</div><div><br></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">2015-11-06 22:51 GMT-02:00 Leonardo Ferreira Fontenelle <span dir="ltr"><<a href="mailto:leonardof@leonardof.med.br" target="_blank">leonardof@leonardof.med.br</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><u></u>




<div><div>Sim, a importância do teste estatístico vem da variabilidade amostral. Mas a importância da precisão da estimativa (ou do intervalo de confiança, que dá mais ou menos no mesmo) também vem da variabilidade amostral, então eu não a desconsiderei.<br></div>
<div> </div>
<div>De qualquer forma, acho que concordamos com uma coisa. Se alguém tem uma concordância de 0,1 (kappa ou AC1), com intervalo de confiança de 95% entre 0,05 e 0,15, a pessoa pode até dizer que a concordância é estatisticamente significativa, mas mesmo assim os dois métodos concordam muito pouco.<br></div>
<div> </div>
<div>Com relação ao "diabo nos detalhes", eu não quis entrar nesse "detalhe", porque já foi muito bem discutido anteriormente. Com certeza não adianta ficar discutindo teste de hipótese versus estimação se aquilo que se está testando/estimando não for interpretável (ou bem interpretado).<br></div>
<div> </div>
<div>Att,<span class="HOEnZb"><font color="#888888"><br></font></span></div><span class="HOEnZb"><font color="#888888">
<div> </div>
<div><div><a href="http://lattes.cnpq.br/9234772336296638" title="Currículo Lattes" target="_blank">Leonardo Ferreira Fontenelle</a><br></div>
</div></font></span><div><div class="h5">
<div> </div>
<div> </div>
<div>Em Sex 6 nov. 2015, às 19:08, Cesar Rabak escreveu:<br></div>
<blockquote type="cite"><div dir="ltr"><div>Leonardo,<br></div>
<div> </div>
<div>É possível <i>quase</i> concordar como você!<br></div>
<div> </div>
<div>Mas para a concordância total, temos que colocar na mesa o seguinte: <br></div>
<div> </div>
<div>A hipótese nula é verdadeira ou falsa?<br></div>
<div> </div>
<div>No caso de uma tabela de contingência 2x2 (a do OP) a nula é que não há "associação" entre as duas variáveis categóricas, ou seja as proporções das colunas (ou linhas) espelham as proporções das margens.<br></div>
<div> </div>
<div>Como a tabela é uma amostragem do mundo ("a população sob estudo") espera-se variações nos valores das células que difiram das proporções "reais" e por isso faz-se o teste estatístico.<br></div>
<div> </div>
<div>No caso de o efeito ser forte e a hipótese nula ser falsa a afirmação acima não seria totalmente verdadeira...<br></div>
<div> </div>
<div>Quanto à proposição "<span style="font-size:12.8px"> Acho mais produtivo </span><i style="font-size:12.8px">estimar</i><span style="font-size:12.8px"> a dis/concordância, sem perder de vista a precisão da estimativa." o problema, é que </span><span style="color:rgb(37,37,37)"><span style="font-family:sans-serif"><span style="font-size:14px"> "</span></span></span><b style="color:rgb(37,37,37);font-family:sans-serif;line-height:22.4px">the devil is in the detail</b><span style="color:rgb(37,37,37)"><span style="font-family:sans-serif"><span style="font-size:14px">" </span></span></span><span style="color:rgb(37,37,37)"><span style="font-family:sans-serif"><span style="font-size:12.8px">como atestam as 'n' tentativas dos nossos antepassados (desde Yule na déc. dos dez do século passado, até o Gwet [de quem comprei o <i>librito</i> há um tempo atrás]), de definir a [medida da] "</span></span></span><span style="font-size:12.8px">dis/concordância"!</span><br></div>
<div> </div>
<div><span style="font-size:12.8px">Só para ficar nas medidas citadas nesta "trédi": o Kappa de Cohen sofre do paradoxo citado pelo Pedro, o valor-p <i>per se</i> não é medida dessa natureza, o OR ou RR não está claro se se aplica ao caso do OP ou não (ele precisa nos dizer como os dados foram colhidos e qual a interpretação para a tabela), as medidas de associação, precisam ser interpretadas com cuidado, por isso passei os links...</span><br></div>
<div> </div>
<div><span style="font-size:12.8px">Ademais, uma questão de ordem aqui (que de novo <u>somente</u> o OP poderia elucidar): o modelo para se usar o índice de concordância (dos quais o Kappa é um dos exemplos) só se aplicaria se uma das variáveis categóricas estivesse classificando o resultado da outra, o que me parece impossível para os micro-organismos (a menos que a tabela indique se eles preferem a companhia do outro, por exemplo), eu entendi a tabela como uma outra instância do famoso exemplo de Snee para associação entre cor de cabelo e cor dos olhos (os dados desse exemplo existem no R no <i>dataset</i> "</span><span style="color:rgb(0,0,0)">HairEyeColor"). </span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,0)"> HTH</span><br></div>
<div><span style="color:rgb(0,0,0)">--</span><br></div>
<div><span style="color:rgb(0,0,0)">Cesar Rabak</span><br></div>
<div> </div>
</div>
<div><div> </div>
<div><div>2015-11-06 17:36 GMT-02:00 Leonardo Ferreira Fontenelle <span dir="ltr"><<a href="mailto:leonardof@leonardof.med.br" target="_blank">leonardof@leonardof.med.br</a>></span>:<br></div>
<blockquote style="margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0.8ex;border-left-width:1px;border-left-style:solid;border-left-color:rgb(204,204,204);padding-left:1ex"><div><u></u><br></div>
<div><div>Dada uma amostra suficientemente pequena não haverá diferença estatisticamente significativa, e dada uma amostra suficientemente grande haverá diferença estatisticamente significativa, não importa o quanto os métodos concordem ou discordem. Acho mais produtivo <i>estimar</i> a dis/concordância, sem perder de vista a precisão da estimativa.<br></div>
<div> </div>
<div> </div>
<div><div><span><span style="color:rgb(136,136,136)"><a title="Currículo Lattes" href="http://lattes.cnpq.br/9234772336296638" target="_blank">Leonardo Ferreira Fontenelle</a></span></span><br></div>
</div>
<div> </div>
<div><div><div> </div>
<div> </div>
<div>Em Sex 6 nov. 2015, às 16:01, Cesar Rabak escreveu:<br></div>
<blockquote type="cite"><div dir="ltr"><div>Embora tardiamente, gostaria de fazer um comentário sobre seu problema.<br></div>
<div> </div>
<div>Se a questão é a comparação da eficiência das técnicas, por que não simplesmente compará-las e ver se há significância estatística na diferença?<br></div>
<div> </div>
<div> </div>
</div>
<div><div> </div>
<div><div>2015-10-28 11:17 GMT-02:00 André Lucas de Oliveira Moreira <span dir="ltr"><<a href="mailto:andremoreirazoo@gmail.com" target="_blank">andremoreirazoo@gmail.com</a>></span>:<br></div>
<blockquote style="margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div dir="ltr"><div>Obrigado Pedro, vou pesquisar mais sobre o <span style="color:rgb(0,0,102)"><span style="font-family:"courier new",monospace"><span style="font-size:12.8px"> Gewtt AC1.</span></span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new",monospace"><span style="font-size:12.8px">Abraços,</span></span></span><br></div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new",monospace"><span style="font-size:12.8px">André</span></span></span><br></div>
</div>
<div><div><div><div> </div>
<div><div>Em 27 de outubro de 2015 14:13, Pedro Emmanuel Alvarenga Americano do Brasil <span dir="ltr"><<a href="mailto:emmanuel.brasil@gmail.com" target="_blank">emmanuel.brasil@gmail.com</a>></span> escreveu:<br></div>
<blockquote style="margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div dir="ltr"><div style="font-family:"courier new",monospace;color:rgb(0,0,102)">Andre,<br></div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)"> </div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)">O Kappa para dois "raters" é muito simples.É a concordância das observações alem do acaso. Pessoalmente não gosto do Kappa por conta do paradoxo do Kappa. <br></div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)"> </div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)">O cara que fez esse sitio fez o melhor livro que ja lia respeito de concordâncias. Ele sugere uma estatistica que não por acaso tem o nome dele. Gewtt AC1.<br></div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)"> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace""><a href="http://www.agreestat.com/" target="_blank">http://www.agreestat.com/</a></span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">Mas se voce quiser conduzir um kappa o seguinta função é a melhor que já usei, inclusive consegue analisar dados de multirater multireader. </span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">epicalc::kap</span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">outras funções tambem legais. </span></span><br></div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">epiR::epi.kappa</span></span><br></div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">epibasix::epiKappa</span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">NO pacote irr também ha varias funções de kappa e outras estatisticas de concordância. Esse pacote é dedicado somente a estatísticas de concordância e confiabilidade. </span></span><br></div>
<div> </div>
<div><span style="color:rgb(0,0,102)"><span style="font-family:"courier new"," monospace"">Abraço, </span></span><br></div>
<div> </div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)"> </div>
<div style="font-family:"courier new",monospace;color:rgb(0,0,102)"> </div>
<div> </div>
</div>
<div><div> </div>
<div><div><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><span><span style="color:rgb(136,136,136)"><span style="background-color:rgb(255,255,255)">Pedro Brasil</span></span></span><br></div>
</div>
</div>
</div>
</div>
</div>
<div> </div>
<div><div><div>Em 26 de outubro de 2015 13:02, André Lucas de Oliveira Moreira <span dir="ltr"><<a href="mailto:andremoreirazoo@gmail.com" target="_blank">andremoreirazoo@gmail.com</a>></span> escreveu:<br></div>
</div>
<blockquote style="margin-top:0px;margin-right:0px;margin-bottom:0px;margin-left:0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div><div><div dir="ltr"><div>Olá pessoal, tudo bem?<br></div>
<div>Aqui no trabalho, pela primeira vez me deparei com uma situação em que é necessário comparar a eficiência de técnicas que detectam que uma mesma espécie de parasita. A principio não sabia qual seria o melhor teste para verificar isso, mas me falaram pela primeira vez do kappa. Então tenho buscado sobre o assunto. Porém, nos livros que eu tive acesso fala disso muito rapidamente e não me deram segurança suficiente para executar no R e interpretar os resultados.<br></div>
<div> </div>
<div>Pensando que tenho resultados categóricos (presença e ausência dos parasitos para ambas técnicas), qual seria a melhor forma de analisar isso, melhor pacote e função? Também preciso do valor de p. Seria muito útil se alguém indicasse um tutorial e também algum material teórico que me dê mais segurança no uso desta técnica.<br></div>
<div> </div>
<div> </div>
<div>Agradecido,<br></div>
<div>André<br></div>
<div> </div>
<div><div> </div>
<div> </div>
<div><span><span style="color:rgb(136,136,136)">-- </span></span><br></div>
<div><div dir="ltr"><div> </div>
<div><span><span style="color:rgb(136,136,136)"><b>MSc. André Lucas de O. Moreira</b><br><a href="http://lattes.cnpq.br/7258065668864153" target="_blank">http://lattes.cnpq.br/7258065668864153</a><br><a href="http://www.wikiaves.com.br/perfil_andrelukinhas" target="_blank"></a><a href="http://www.wikiaves.com.br/perfil_andrelukinhas" target="_blank">http://www.wikiaves.com.br/perfil_andrelukinhas</a><br><a href="tel:79%208837-3562" target="_blank">79 8837-3562</a><br><a href="tel:79%209132-9093" target="_blank">79 9132-9093</a></span></span></div>
</div>
</div>
</div>
<div> </div>
</div>
<div> </div>
</div>
</div>
<div><span>_______________________________________________<br>
R-br mailing list<br> <a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br> <a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br>
Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.</span></div>
</blockquote></div>
<div> </div>
</div>
<div> </div>
<div>_______________________________________________<br></div>
<div>R-br mailing list<br></div>
<div><a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br></div>
<div><a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br></div>
<div>Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></div>
</blockquote></div>
<div> </div>
<div> </div>
<div> </div>
<div>-- <br></div>
<div><div dir="ltr"><div> </div>
<div><b>MSc. André Lucas de O. Moreira</b><br></div>
<div><a href="http://lattes.cnpq.br/7258065668864153" target="_blank">http://lattes.cnpq.br/7258065668864153</a><br></div>
<div><a href="http://www.wikiaves.com.br/perfil_andrelukinhas" target="_blank"></a><a href="http://www.wikiaves.com.br/perfil_andrelukinhas" target="_blank">http://www.wikiaves.com.br/perfil_andrelukinhas</a><br></div>
<div>79 8837-3562<br></div>
<div>79 9132-9093<br></div>
<div> </div>
</div>
</div>
</div>
</div>
</div>
<div> </div>
<div>_______________________________________________<br></div>
<div>R-br mailing list<br></div>
<div><a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br></div>
<div><a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br></div>
<div>Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></div>
</blockquote></div>
</div>
<div><u>_______________________________________________</u><br></div>
<div>R-br mailing list<br></div>
<div><a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br></div>
<div><a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br></div>
<div>Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></div>
</blockquote><div> </div>
</div>
</div>
</div>
<div> </div>
<div>_______________________________________________<br></div>
<div>
R-br mailing list<br></div>
<div> <a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br></div>
<div> <a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br></div>
<div>
Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></div>
</blockquote></div>
</div>
<div><u>_______________________________________________</u><br></div>
<div>R-br mailing list<br></div>
<div><a href="mailto:R-br@listas.c3sl.ufpr.br" target="_blank">R-br@listas.c3sl.ufpr.br</a><br></div>
<div><a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br></div>
<div>Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></div>
</blockquote><div> </div>
</div></div></div>

<br>_______________________________________________<br>
R-br mailing list<br>
<a href="mailto:R-br@listas.c3sl.ufpr.br">R-br@listas.c3sl.ufpr.br</a><br>
<a href="https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br" rel="noreferrer" target="_blank">https://listas.inf.ufpr.br/cgi-bin/mailman/listinfo/r-br</a><br>
Leia o guia de postagem (<a href="http://www.leg.ufpr.br/r-br-guia" rel="noreferrer" target="_blank">http://www.leg.ufpr.br/r-br-guia</a>) e forneça código mínimo reproduzível.<br></blockquote></div><br></div>