Graças a uma dica dada por um dos donos do c19study e uma noite com insônia, resolvi o #Desafiodopvalor
Eles não multiplicam p-valores.
É muito pior.
A dica foi: "eles usam o teste exato de Fisher".
Fiquei me perguntando como estimavam os parâmetros. (1/5)
Não conseguia chegar de forma alguma a 10^⁻18. Em alguns dias, com mas estudos, aumentou para 10^⁻16. Não estavam multiplicando p-valor.
Então me propus um exercício. Se eu não entendesse absolutamente nada de estatística, quizesse obter um p-valor para meus 229 estudos.(2/5)
Minha ideia ingênua: a chance de um estudo ser favorável ou contrário é 50% (deve estar claro que para os responsáveis por aquela coisa fazer um RCT ou jogar uma moeda é +- o mesmo). Contei os estudos "positivos" e "negativos". Joguei na fórmula da distribuição binomial. (3/5)
Deu certo!!!!
Joguei no Excel BINOMDIST(54, 229, 0.5, 1) e encontrei 2.2x10⁻16. EXATAMENTE o valor que está no site hoje. (4/5)
Isso indica que quem fez o site:
1. Não tem noção do que é p-valor
2. Não tem noção de ocmo se calcula p-valor em uma meta-análise
3. Não tem noção do significado de p-valor
4. Age de má fé ao apresentar isso para público leigo

É pior que eu pensava. (5/5)

• • •

Missing some Tweet in this thread? You can try to force a refresh
 

Keep Current with Leandro R. Tessler 🇧🇷🇮🇱🇫🇷🐊

Leandro R. Tessler 🇧🇷🇮🇱🇫🇷🐊 Profile picture

Stay in touch and get notified when new unrolls are available from this author!

Read all threads

This Thread may be Removed Anytime!

PDF

Twitter may remove this content at anytime! Save it as PDF for later use!

Try unrolling a thread yourself!

how to unroll video
  1. Follow @ThreadReaderApp to mention us!

  2. From a Twitter thread mention us with a keyword "unroll"
@threadreaderapp unroll

Practice here first or read more on our help page!

More from @leandrotessler

15 Jun 20
Muito curiosa a conclusão da polícia civil de MG que os donos da Backer não tinham conhecimento técnico para saber que a intoxicação era por dietilenoglicol. Eu que sou um cervejeiro mega inexperiente sabia. (1/5)
Cantei a barbada do vazamento do anticongelante assim que as primeiras notícias foram divulgadas. Aí teve aquela confusão entre monoetilenoglicol e dietilenoglicol. Qualquer pessoa que já fez cerveja sabe como ocorre o resfriamento rápido do líquido. (2/5)
Nas cervejarias artesanais grandes eles adicionam anticongelante (dietilenoglicol é usado como antivcongelante em radiadores de carro) para poder trabalhar com água de resfriamento a temperaturas abaixo de zero. (3/5)
Read 5 tweets
5 Jun 20
Muita gente vai tomar a retirada do artigo da @TheLancet como um sinal de que não dá para confiar na ciência. Quem conhece ciência certamente terá uma leitura oposta. A ciência sai do episódio fortalecida. Segue o 🧵. 1/12
O artigo foi preparado rapidamente no meio da pandemia, num momento em que a imprensa internacional vem tratando preprints de baixa qualidade no @medrxivpreprint como evidência científica. 2/12
O rito científico exige que antes de serem publicados os preprints passem pelo processo de revisão por partes. Isso consiste em submeter os artigos ao escrutínio cuidadoso por parte de outros cientistas. Esse processo é cego (os autores não sabem quem são os revisores). 3/12
Read 12 tweets
8 May 20
O @_fcampelo fez um longo 🧵falando de um novo ataque ao modelo do Imperial College, agora tendo como alvo o código usado por eles. Isso parece parte da nova narrativa negacionista de que o isolamento social não é necessário. Segue o 🧵. (1/12)
Em resumo, foram colocadas suspeitas sobre o código usado pelo grupo do IC para fazer suas previsões. A lógica (rasa) é que como o código supostamente contém bugs o modelo não é válido e não há razões para o isolamento social. (2/12)
O código disponibilizado é uma versão editada e simplificada das mais de 15 mil linhas de código na linguagem C que foi trabalhado ao longo de uma década para as diferentes implementações de modelos epidemiológicos pelo grupo. (3/12)
Read 12 tweets
28 Apr 20
@CNNBrasil caiu no conto do vigário do Osmar Terra Plana. Um professor da irrelevante Singapore University of Technology and Design se diverte ajustando dados da pandemia para um modelo epidemiológico muito simplificado,provavelmelmente para chamar atenção para a instituição. 1/5
Ele mesmo avisa no site que não é para valer: "Disclaimer: Content from this website is STRICTLY ONLY for educational and research purposes and may contain errors. The model and data are inaccurate to the complex, evolving, and heterogeneous realities of different countries. 2/5
Predictions are uncertain by nature. Readers must take any predictions with caution. Overly optimism based on some predicted end dates is dangerous because it may loosen our disciplines and controls and cause the turnaround of the virus and infection, and must be avoided." 3/5
Read 5 tweets
28 Apr 20
Excelente artigo que precisa ser lido por todos que se dedicam a combater a onda de desinformação que acompanha a pandemia de covid-19, especialmente no Brasil. Saiu na prestigiosíssima Nature. Segue o fio. (1/12) nature.com/articles/d4158…
Acima de tudo precisamos parar de tolerar e legitimar pseudociência na área da saúde, especialmente em universidades, instituições médicas de referência (Einstein, Sírio) e órgãos reguladores como o Conselho Federal de Medicina. (2/12)
Se uma instituição respeitada como a USP (ou a Unicamp) oferece uma disciplina de homeopatia na graduação, é difícil argumentar contra o prefeito de Itajaí-SC que oferece tratamento homeopático contra covid-19. (3/12)
Read 12 tweets

Did Thread Reader help you today?

Support us! We are indie developers!


This site is made by just two indie developers on a laptop doing marketing, support and development! Read more about the story.

Become a Premium Member ($3/month or $30/year) and get exclusive features!

Become Premium

Too expensive? Make a small donation by buying us coffee ($5) or help with server cost ($10)

Donate via Paypal Become our Patreon

Thank you for your support!

Follow Us on Twitter!