Investigando 'spin' em revistas científicas
Um estudo recente investigou o “spin” em artigos de pesquisa em psiquiatria e psicologia. Os autores do estudo encontraram spin em mais da metade dos resumos que analisaram.Que impacto isso pode ter nas decisões dos médicos?
Como as notícias e os meios de comunicação competem por visualizações, às vezes podem exagerar nas manchetes e no conteúdo para atrair o leitor.
Embora muitos acreditem que os periódicos científicos sejam algumas das fontes de informação mais confiáveis, eles não estão imunes ao desejo de serem lidos e compartilhados.
Um estudo recente teve como objetivo avaliar o quanto os autores “spin” usaram nos resumos de artigos de pesquisa publicados em periódicos de psicologia e psiquiatria.
Eles optaram por olhar os resumos porque eles resumem o artigo inteiro, e os médicos costumam usá-los para ajudar a informar as decisões médicas.
O que é spin?
Neste estudo, os autores descrevem sua definição de spin da seguinte forma:
“[O] uso de estratégias de relatórios específicas, por qualquer motivo, para destacar que o tratamento experimental é benéfico, apesar de uma diferença estatisticamente não significativa para o resultado primário, ou para distrair o leitor de resultados estatisticamente não significativos.”
Os autores publicaram suas descobertas na revista BMJ Evidence Based Medicine. Eles analisaram os artigos das seis principais revistas de psiquiatria e psicologia de 2012–2017.
As revistas incluíram JAMA Psychiatry, a American Journal of Psychiatry, e as British Journal of Psychiatry.
Especificamente, os pesquisadores se concentraram em ensaios clínicos randomizados com “desfechos primários não significativos”. O endpoint primário de um estudo é o resultado principal do estudo, e “não significativo” neste contexto significa que, estatisticamente, a equipe não encontrou evidências suficientes para apoiar sua teoria.
Spin vem em muitas formas, incluindo:
- relatórios seletivos de resultados, em que os autores mencionam apenas alguns resultados
- P-hacking, em que os pesquisadores executam uma série de testes estatísticos, mas publicam apenas os números dos testes que produzem resultados significativos
- uso impróprio ou enganoso de medidas estatísticas
Quão comum é o spin?
No total, eles analisaram os resumos de 116 artigos. Destes, 56% apresentaram evidências de spin. Isso incluiu spin em 2% dos títulos, 21% das seções de resultados do resumo e 49% nas seções de conclusão do resumo. Em 15% dos artigos, o spin esteve presente tanto na seção de resultados quanto na de conclusão dos resumos.
Os pesquisadores também investigaram se o financiamento da indústria estava associado ao spin. Talvez surpreendentemente, eles não encontraram nenhuma evidência de que o apoio financeiro da indústria aumentasse a probabilidade de spin.
As descobertas são preocupantes. Embora a repercussão na mídia em geral seja preocupante em si, os médicos usam trabalhos de pesquisa para ajudar a orientar as decisões clínicas. Conforme os autores escrevem:
“Os pesquisadores têm a obrigação ética de relatar honesta e claramente os resultados de suas pesquisas.” No entanto, na seção de resumos, os autores podem selecionar e escolher os detalhes que incluem. Os autores do presente estudo têm preocupações sobre o que isso pode significar para os médicos:
“Adicionar spin ao resumo de um artigo pode enganar os médicos que estão tentando tirar conclusões sobre um tratamento para pacientes. A maioria dos médicos lê apenas o resumo do artigo na maioria das vezes. ”
As implicações
Embora os pesquisadores não tenham investigado os efeitos do giro em grande profundidade, os autores apontam para um estudo que acerta em cheio.
Nele, os cientistas coletaram resumos do campo da pesquisa do câncer. Todos eram ensaios clínicos randomizados com um desfecho primário estatisticamente não significativo. Todos os resumos incluem spin.
Os pesquisadores criaram uma segunda versão desses resumos em que removeram o spin. Eles recrutaram 300 oncologistas como participantes. Os pesquisadores deram a metade deles um resumo original com spin e deram à outra metade o resumo sem spin.
De forma preocupante, os médicos que leram os resumos com spin avaliaram a intervenção abordada no artigo como mais benéfica.
Como os autores do recente artigo de estudo escrevem: “Aqueles que escrevem manuscritos de ensaios clínicos sabem que têm uma quantidade limitada de tempo e espaço para captar a atenção do leitor. É mais provável que resultados positivos sejam publicados, e muitos autores de manuscritos recorreram a práticas questionáveis de reportagem para embelezar seus resultados ”.
Outro estudo, publicado em 2016, amplia o escopo desta edição. Eles investigaram como revisores pares - cientistas experientes que examinam artigos antes da publicação - influenciaram o spin. Eles descobriram que em 15% dos casos, o revisor pediu aos autores para adicionar spin.
O estudo atual tem algumas limitações. Por exemplo, essas descobertas podem não se aplicar a outras revistas ou campos de pesquisa. Eles também observam que identificar o spin é um esforço subjetivo e, embora eles tenham empregado dois extratores de dados independentes, há espaço para erros.
O tamanho exato do problema de spin na pesquisa médica ainda está para ser visto, mas os autores concluem que “[a] utores, editores de periódicos e revisores devem continuar vigilantes para reduzir o risco de relatórios tendenciosos dos resultados do ensaio. ”
