Thread by @josenalencar

O valor de p é uma convenção mais vezes perigosa do que útil em pesquisas médicas porque significa a chance de que os resultados daquela amostra tenham sido encontrados ao acaso. Se p < 0,05 (5%), então alguns médicos aceitam esse resultado e compartilham o estudo pelo zipzop. +

O que não se diz sobre o valor de p?
- Que quanto mais manipulada, fora do usual ou enviesada for a pesquisa, maior a chance de obter valor de p significativo.
- Que deve ser visto como um intermediário da resposta final, não como “encerrador de questão”.

Para exemplificar, imagine que eu quero introduzir um novo fármaco no tratamento do COVID. É uma ótima oportunidade porque isso é uma mina de ouro: basta fazer um post com alguma aparência técnica no Instagram inventando um mecanismo e dizendo que encontrei a cura - sucesso.

Começo fazendo uma pesquisa no google pelos termos “metamizole” e “antiviral activity”. Passo por duas páginas de pesquisa em que não se fala nada disso, mas na terceira página encontro a pesquisa que queria.
PS: isso é ironia. Não é assim que deve ser feita pesquisa.

Com aquele print, eu “comprovo” aos médicos mecanicistas que o metamizol é um bom medicamento para COVID.

Imagem real do corpo humano não se importando com uma modificação causada por um remédio em uma via metabólica específica:

Outros médicos dirão que é preciso dar a essa hipótese a coroa do “valor de p”.
Para fazer isso, eu posso conduzir um estudo tipo trial randomizado duplo-cego multicêntirco - algo extremamente burocrático e caro;
Ou… Posso inventar uma pesquisa.

Entraves para isso: clinicaltrials e revisão por pares (peer review).
- Clinicaltrials.gov é um registro de ensaios clínicos em que o pesquisador registra seu trial. Para registrar: acessar o site e escrever os dados. Nível: fácil.

- Revisão por pares: outros pesquisadores lerão meu trabalho quando minha pesquisa estiver pronta. Se aceitarem minha metodologia, o estudo será publicado. Nível: médio.
Observe que o peer review aceita a metodologia escrita, não a veracidade nem relevância dela e do resultado.

Pesquisa inventada!
- Grupo que recebeu metamizol teve 0 mortes e 478 sobreviventes
- Grupo que recebeu nada teve 39 mortes e 75 sobreviventes.
Certos médicos leriam esse valor de p como uma chance em 100 mil de o resultado ser falso.
Mas é falso, eu inventei - juro.

E exatamente por eu ter inventado e inflado os resultados com intuito de obter p, é que eu obtive p significativo.
- p é a chance de que o resultado tenha sido obtido ao acaso.
- Não foi mesmo ao acaso que eu inventei esses números. Tinha um objetivo: quero inventar fake science.

A revisão por pares, o entrave ainda a ser vencido, pode ser mais difícil.
- Algum pesquisador pode achar estranho um resultado tão positivo (quando a esmola é grande…)
- Outro pode pensar que o grupo “nada” teve mais mortes que a letalidade habitual do COVID (34%??)

Para não ter que passar por esse crivo chato, eu vou publicar minha pesquisa no medrXiv ou em qualquer revista predatória - que não tenha peer review, cobre apenas dinheiro para publicar ou seja de algum amigo do Didier Raoult.
Muito mais fácil assim.

Sendo um terreno fértil para ganhar dinheiro, fama e prestígio (pelo menos entre a classe que não entende de “lógica”), e havendo um caminho tão fácil para se percorrer, temos que nos precaver:
- Seja conservador e cético nessa questão.
- Números não mentem, pessoas sim.

Só para deixar claro: não estou falando que todas as pesquisas foram inventadas. Mas muitas delas:
- Não passaram pelo clinicaltrials (passar não é sinônimo de qualidade)
- Não passaram por peer review (passar também não é garantia de questão encerrada)

Mesmo as pesquisas que passaram por esses crivos MÍNIMOS publicadas em jornais sérios devem ser interpretadas.
- Observacionais geram hipóteses. Trials podem confirmar.
- Qualquer estudo pode ter vieses. Entenda de MBE para reconhecê-los
- Qualquer um pode manipular o valor de p.

PS: Metamizol é o outro nome da nossa querida Dipirona.
Imagina que legal: “Procure seu tratamento precoce com dipirona”.