Todos no refrigerador de água do Twitter estão falando sobre o pré-registro – a idéia de que os cientistas devem enviar seu plano de pesquisa e obtê-lo aprovado antes de coletar dados.
Há dois (ou mais?) Lados para o debate; um lado diz que temos que parar os pesquisadores que relatam dados seletivamente que contam uma boa história e convenientemente não denunciam medidas, nem estudos inteiros, que não. O outro diz que a pré-inscrição simplesmente não funciona para algumas formas de pesquisa e liga as mãos de pesquisadores que querem a liberdade de modificar o estudo 2 depois de analisar os resultados do estudo 1, etc. Você pode ler os dois lados aqui e aqui, e verifique aqui esta versão Storify do debate.
Peregrinação é um caso de regulamento de texto. É um conjunto de regras destinadas a impedir que pessoas e / ou instituições se envolvam em práticas que os ajudem, mas prejudicam a sociedade. Nós não queremos que as pessoas "trapaceiam" com seus dados, então nós estabelecemos regulamentos projetados para evitar trapaças.
Não tenho problema com a regulamentação. Eu regularia a merda de Wall Street e companhias de petróleo se eu estivesse no comando. Mas eu tenho algumas preocupações sobre pré-inscrição.
1. Confiança. Os psicólogos reguladores gostam de ir para a APS e colocar um grande sinal de gordura que diz "vocês não devem confiar".
Talvez seja verdade. Obviamente, alguns de nós realmente não devem ser confiáveis, como bem conhecido, os recentes escândalos têm mostrado. Mas acho que a maioria de nós é confiável. Ao pensar sobre como lidar com as pessoas em quem confiamos, talvez possamos conseguir se educarmos nossos alunos e nós mesmos sobre as melhores práticas de ciência. Na minha opinião, este é um dos pontos onde a pré-inscrição vale a pena. Gostaria de ser confiável, mas eu estaria bem desistir de uma pequena confiança para forçar-me, e outros, para não mexer com dados.
E quanto aos trapaceiros que realmente não podemos confiar, a ajuda de pré-inscrição? Claro que não. Há algumas maneiras excelentes em torno disso. Primeiro, colete seus dados e, quando você conseguir algo de bom, registre os métodos, gagueje seus dedos por um tempo, então parece que você está coletando dados e depois publica seus encantadores dados. Se um estudo produz resultados de bumb, basta não pré-gravar. Ou se isso é muito esforço, siga a abordagem tradicional: falsifique os dados.
2. Relações adversas produzem adversários. Quando você diz às pessoas que não são confiáveis e que existe um novo sistema projetado para mantê-los retos, o sistema se torna o inimigo.
Eu argumentaria que agora temos uma sociedade de cientistas, principalmente honoráveis e idealistas, que querem encontrar a verdade e fazer o que é certo. Mais uma vez, é uma questão de confiança, mas eu odiaria ver os sentimentos de responsabilidade moral dos cientistas porque eles vêem o regulamento como responsável em vez de se.
Eu me preocupo que os estudantes de graduação que chegam verão a pré-inscrição como um adversário e uma dor no pescoço. Existem maneiras de jogar apenas sobre qualquer sistema, e seria ingênuo pensar que não haverá maneiras de pré-inscrição no jogo.
3. A seletividade é boa. Eu faço muitos estudos. Alguns não são ótimos. Talvez fossem idéias estúpidas para começar ou talvez tenham resultados chatos e indeterminados. Se eu vou para a psiconomia e falo às pessoas sobre esses estudos, por algum motivo, não consigo imaginar, eles sempre parecem adormecer imediatamente.
Isso é ruim para mim e meus amigos, isto é, para autores e leitores. Primeiro, se eu pré-gravar algo que acaba sendo chato, eu tenho que gastar meu tempo escrevendo, e não tenho tempo suficiente para escrever as coisas boas como é agora, muito menos as coisas chatas. Não estou tentando ocultar resultados ruins, eu apenas prefiro gastar meu tempo em resultados que possam contribuir com a literatura.
Em segundo lugar, já existe um caminho para muitos artigos para ler; A última coisa que quero são artigos pré-gravados para começar a sair mesmo que os resultados sejam aborrecidos. Além disso, tenho medo de que as pessoas comecem a formar uma associação entre "artigo pré-gravado" e "artigo com um tipo de resultados aborrecidos". Não são bons artigos que não serão pré-gravados, mas também serão muito aborrecidos.
Tudo o que é dizer, novamente, é sobre a confiança. Se você acredita em mim, deixe-me concentrar-me em falar sobre os meus melhores estudos. Confie em não esconder os que desconfirmam minhas teorias, vou esconder os chatos.
O contra-argumento para este último ponto é bom: e se eu fizer 50 estudos não relacionados e um mostra um resultado de inicialização social louco, então eu apenas o publico? Do ponto de vista da ciência, basicamente sou Freddy Kruger. Então, talvez a pré-inscrição vença essa seção do debate.
4. Muitos estudos bons foram feitos sem pré-inscrição. Se você proibir as armas, apenas os fora da lei terão armas, e se você proibir os estudos não prerregados, apenas os fora da lei farão estudos não prerregados. Em outras palavras, não vamos todos decidir que os estudos que não estão pré-gravados são ruins. Neurocritic tem uma proposta para alguns novos insígnios de pesquisa.
5. Burocracia. A fim de pré-inscrição, você deve escrever estudos que podem acabar sendo chatos, e você deve enviá-los e, dependendo da situação, eles precisam ser revisados e aprovados antes de realizar o estudo.
Em outras palavras, se eu quiser fazer um estudo, posso enfrentar a seguinte escolha:
Arghh. O pré-registro tiraria toda a diversão da ciência!
Isso pode parecer infantil, mas vamos ser honestos: você provavelmente odeia muitas regras administrativas e / ou burocráticas que você acha que são apenas burocráticas. Você deve denunciar isso para a administração ou o departimento; você precisa limpar isso com o IRS. Mas muitas dessas regras e procedimentos provavelmente pareciam valer a pena quando foram propostos. A pré-inscrição vai acabar aparecendo como mais burocracia em um processo de publicação já lento? Mais uma vez, depende de como funciona. Mas o perigo está definitivamente lá.
Em suma , eu diria que não vamos começar a derrogar estudos que ainda não foram pré-registrados. E vamos reconhecer que a pré-inscrição pode ter consequências não intencionais, incluindo uma redução progressiva da confiança e responsabilidade entre os cientistas e um aumento progressivo da burocracia.
Mas eu não sei do que estou falando. Minha recomendação? Vamos tentar o pré-registro e ver como ele funciona.
Siga me no twitter.
