Os profissionais de saúde devem chamar nossa atenção. Uma manchete recente destaca os efeitos do chocolate amargo na perda de peso. Isso parece ótimo, mas há falhas fundamentais nesta investigação que provavelmente a tornarão inútil.
Mas essas falhas também podem ser uma vantagem, dando-nos a oportunidade de fazer uma análise e aprender muito sobre pesquisa. Mas não se preocupe: este artigo não será muito doloroso de ler, e pode realmente haver chocolate para perder peso. se você fizer isso até o fim.
“Cientistas dizem” nem sempre é uma garantia da verdade
Johannes Bohannon publicou um estudo no Arquivo Interno de Medicina comparando três grupos de pessoas à dieta:
Esses participantes seguiram sua dieta por 21 semanas. Pesquisadores relataram que grupos de baixo carboidrato e baixo carboidrato e chocolate perderam mais peso do que o grupo controle.
Mas antes de começarmos a comer chocolate, precisamos nos aprofundar no estudo e pedir um pequeno lado das estatísticas.
Muitas pessoas tendem a ignorar os resultados de artigos de pesquisa porque estão cheios de terminologia estatística, como?T (67) – 2. 1, p
O valor p é simplesmente a probabilidade de que não haja efeito. Se esse valor é pequeno (digamos, menos de 5%), dizemos que encontramos algo. Especificamente, mas não gramaticalmente correto, dizemos: “Provavelmente não temos nada. “
Os cientistas muitas vezes estão muito orgulhosos de seus pequenos valores p e você verá declarações como?P. 00001. ? Pode parecer um pouco tarde para dizer que provavelmente não temos nada, mas é assim que esse tipo de teste funciona. Equivale a dizer: “Inocente até que se prove o contrário”, mas podemos provar nossa culpa se tivermos 5% de chance ou menos de inocência.
Mas quanto mais testamos, mais temos um baixo valor p ou um efeito significativo. É como ter um bilhete de loteria. Se eu só tiver um, tenho poucas chances de ganhar. Se você tem sessenta bilhetes de loteria, suas chances de ganhar são muito melhores do que as minhas. Quando tentamos muitos resultados diferentes, é como ter muitos bilhetes de loteria. Existe a possibilidade de encontrarmos um resultado significativo que não seja real (um falso positivo). Esta é uma das limitações deste tipo de teste em que fazemos uma estimativa baseada em probabilidades.
O pesquisador do artigo de chocolate testou um grande número de efeitos (em muitas ocasiões). Em outras palavras, ele tinha centenas de bilhetes de loteria e precisava encontrar algo importante. Para expressar em termos de valor-p, se eu tivesse cem testes. Em média, cinco seriam significativos (é daí que vêm 5%), então os três ou quatro efeitos mencionados no artigo podem ser falsos positivos.
Neste caso, o investigador tinha centenas de bilhetes de loteria, então ele tinha certeza de encontrar algo importante.
Uma das primeiras coisas que os jovens pesquisadores descobrem é quando um estudo tem uma pequena amostra, o que não é inerentemente ruim. No entanto, eles não são tão precisos quanto amostras grandes.
Em uma pequena amostra, poderíamos encontrar a pessoa estranha que é bem diferente de todos os outros. Essa pessoa pode rejeitar os resultados (pense na pessoa em sua academia que se destaca imediatamente). Em uma grande amostra, é mais provável que você equilibre pessoas extremas. Dessa forma, suas estimativas seriam mais precisas.
O estudo do chocolate tem muitos problemas com métodos estatísticos que são muito densos para este artigo, mas um deles é que eles não mencionam o tamanho de sua amostra em qualquer lugar do documento. valores e o tipo de teste utilizado. Segundo minhas estimativas, não havia mais de vinte pessoas neste estudo (dependendo de como as distribuíram nos três grupos).
Portanto, uma pessoa pode ter liderado os resultados quando o grupo de chocolate melhorou (novamente, imagine a pessoa na academia salientes, não importa o exercício que faça). Se, por outro lado, esses resultados forem verdadeiros, então o efeito do chocolate será visível quando outro pesquisador fizer outro estudo.
Podemos ver uma ciência semelhante no Relatório Lancet de 1998 que as vacinas de RMM estavam relacionadas à incidência de autismo. Este estudo teve apenas doze participantes e essa correlação entre os dois não pôde ser replicada em estudos maiores (além disso, o artigo original foi escrito porque a pesquisa principal falsificou os dados), porém, esse falso positivo leva muitos pais a evitar vacinar seus filhos.
Infelizmente, o estudo recente não justifica o consumo diário de chocolate.
A publicação da pesquisa é a moeda que paga contas nas universidades. Ter mais publicações leva um pesquisador a estar mais acima da cadeia alimentar de um departamento universitário. Os jornais funcionam como um negócio onde as pessoas pagam para publicar.
Esses periódicos são frequentemente usados por universidades online marginais que tentam ganhar credibilidade. Compare isso com as principais revistas, onde muitas vezes há uma taxa de rejeição de 99%, e pode levar meses (ou anos) para receber uma resposta sobre um manuscrito submetido à medida que passa por múltiplas revisões. . Após a revisão, podemos ver que o estudo do chocolate foi publicado em uma revista de acesso aberto que cobra por manuscrito (tentei enviar um manuscrito e foi oferecido o método pré-pago por 600?).
Não culpo as revistas por terem um modelo de negócio, porém, com esse tipo de modelo de negócio, muitas vezes esquecem os rigores das revistas científicas mais seletivas, todos os meus manuscritos passaram por um difícil processo de revisão por críticos e editores. fez cada artigo muito mais valioso cientificamente.
Editores e críticos estão lá para serem os guardiões da ciência. Se não tivermos essas salvaguardas, muitos outros artigos científicos marginais podem ser publicados. O estudo do chocolate carece de muitas descrições importantes, que eu não teria deixado ir se eu fosse um crítico. Duvido que o artigo tenha sido revisto antes mesmo de ser publicado.
O estudo sobre chocolate e perda de peso já foi retirado
O estudo sobre chocolate e perda de peso já foi retirado. Os resultados deste estudo são suspeitos pelas razões mencionadas acima, mas, claro, a retração levanta mais suspeitas (J. Bohannon é um jornalista que escreveu muito sobre viés da mídia. )relatórios científicos e poderia ter sido retirado por essa razão).
As imagens deste artigo, tiradas de grandes revistas de fitness, são exemplos de como esta pesquisa é publicada; artigos podem ser tomados e disseminados sem um olhar crítico; o artigo sobre chocolate é apenas um exemplo, mas sem olhar muito de perto, poderíamos encontrar muitos outros fazendo afirmações ultrajantes que acabam não sendo tão espetaculares quando se olha para a pesquisa original. Minha sugestão é pegar cada título com ceticismo e, em seguida, rever a pesquisa original.
Às vezes é fácil jogar as mãos no ar e se render a todas as manchetes em conflito. Eu levo todos os títulos com um pouco de ceticismo. Acho que são uma peça do quebra-cabeça. Preciso cobrar muito mais antes de tomar uma decisão informada. Se eu coleciono várias peças do quebra-cabeça (estudos de pesquisa) que convergem para um único elemento, me sinto mais confiante nos resultados. .
Não quero descartar todos os resultados deste estudo de chocolate, porém, gostaria de ver estudos semelhantes mostrando resultados semelhantes, além disso, precisamos ver como essas peças se encaixam com outras partes. combinação com uma dieta low-carb ou outras combinações?Precisamos ver muito mais peças de quebra-cabeça antes de tomar uma decisão.
Mais ou menos assim
Referências
1. J. Bohannon e repolho. “Chocolate com alto teor de cacau como acelerador de perda de peso”. Instituto de Alimentação e Saúde, vol. 8, nº 55, 2015.
2. Wakefield Andrew, Murch S, Anthony A et al. ” Hiperplasia ileal-linfóide-nodular, colite não específica e transtorno de desenvolvimento invasivo em crianças. “Lancet 351 (9103): 637?41. 1998.
Fotos 4 cortesia de Shutterstock.