O que prevê sucesso em programas de pós-graduação em psicologia?

Este é o Ano 13 de folhear várias dezenas de aplicações para determinar o número reduzido de pessoas a serem entrevistadas para um slot no Ph.D. de Psicologia Clínica. programa na Universidade George Mason. Neste momento, a faculdade em todo os Estados Unidos está fazendo o mesmo para programas de desenvolvimento social, desenvolvimento, industrial / organizacional, psicologia de aconselhamento e fatores humanos (entre outros).

Algumas tendências notáveis ​​nos últimos anos.

Primeiro, os candidatos estão passando vários anos em vários laboratórios de pesquisa para obter experiência em pesquisa. Fantástico. Eu tenho defendido isso há anos.

Em segundo lugar, houve uma explosão de publicações e apresentações em conferências científicas. Este ano, eu tinha um aluno com 9 publicações (insanas) e três estudantes com mais de 15 apresentações de conferência (holy bejeezus!).

Em terceiro lugar, houve um aumento no número de candidatos que desenvolveram seu próprio projeto de pesquisa, desde o desenvolvimento de questões até a disseminação por meio de papel ou manuscrito. Houve um aumento no número de candidatos que atuou como coordenador do projeto para um projeto financiado por doações por um mentor da faculdade. Isso é enorme. Os candidatos conhecem as nuances de como realizar pesquisas e lidar com as verrugas anais de não-shows, deficiências de gravação de vídeo, respostas descuidadas de dados de pesquisa e participantes relatando ideias suicidas. Um aprendizado garante que um candidato sabe o que eles estão entrando como cientista.

Howard Kalin, used with permission
Fonte: Howard Kalin, usado com permissão

Apesar dessas tendências, descobri que a faculdade – a quem me recuso a nomear – confiava em estratégias de décadas para peneirar os candidatos. Ou seja, alguém tem uma pontuação GPA e GRE suficiente? Os meus alunos são regularmente rejeitados por programas de pós-graduação, apesar de servir como coordenador do projeto em estudos sofisticados financiados por subsídios, apresentando conversas e cartazes de primeiro autor em conferências científicas (que ganharam) e sendo co-autor de manuscritos submetidos a top- periódicos de nível – estudos que envolveram experiências de amostragem e modelagem linear hierárquica (habilidades que eles aprenderam ao longo de meses de treinamento).

Eu escrevo esta publicação no blog para apontar pesquisas esquecidas de 20 anos.

Você sabe o que as pontuações do GRE prevêem? Graus de primeiro ano nos cursos exigidos em um Ph.D. programa. Você sabe o que ninguém treinou, pesquisadores, professores e clínicos independentes? Notas do primeiro ano; que são inflado com quase nenhuma variabilidade. E se você quiser explorar os achados meta-analíticos, saiba que as pontuações GRE prevêem uma média de 6,3% da variância nas notas de graduação em cursos. Os escores GRE não prevêem nada que seja útil para a pós-graduação.

As regras mudam de graduação para pós-graduação. Os alunos passam do pensamento convergente e da tomada de teste para o pensamento divergente, onde devem elaborar seus próprios interesses e questões de pesquisa, e adquirem metodologia, pesquisa, avaliação de programas e habilidades estatísticas para testar essas questões e interpretar os dados. Os resultados do GRE não prevêem nenhuma dessas habilidades.

Agora, se você se preocupa com o GPA de estudantes de pós-graduação em cursos específicos necessários para um doutorado e está menos interessado em suas habilidades de pesquisa, perspicácia clínica e capacidade de liderança, por todos os meios, continue a julgar os alunos pelas pontuações quantitativas em sua transcrição. Mas eu estou falando com você – a faculdade que segura o destino dos estudantes vive em suas mãos. Se você não se importa com as notas da pós-graduação, então não seja hipócrita e use os dados para orientá-lo.

Seja corajoso.

Leia o seu CV. Se eles tiverem um GPA acima de 3.0, siga em frente. Qual é a qualidade de sua experiência de pesquisa? Eles sabem como chegar ao chão correndo para contribuir com o seu laboratório de pesquisa? Eles serão um bom colega com você e seus outros estudantes de pós-graduação? Existe pelo menos uma carta persuasiva que ateste os pontos fortes do personagem que os separam do pacote?

Seja um inconformista.

Não descarte grandes psicólogos potenciais porque não conhecem o antônimo de bailiwick ou o coseno de 30 °. Simplesmente não importa. Não exclua os alunos porque o seu GPA sugou no primeiro ano da faculdade, antes de se interessar pela psicologia.

É improvável que seja uma marcha nacional contra o processo de admissão para o Ph.D. programas. Então é isso. Resista à tentação de permitir que as pontuações arbitrárias influenciem excessivamente. Eu suspeito que você será recompensado com alunos mais pensativos, imaginativos e impactantes.

Morrison, T., & Morrison, M. (1995). Uma avaliação meta-analítica da validade preditiva dos componentes quantitativos e verbais do Exame de Pós-Graduação com média de pontuação de pós-graduação que representa o critério de sucesso graduado. Medição educacional e psicológica, 55 (2), 309-316.

Novas adições a partir de 2/9/16: alguns leitores queixaram-se de que os dados de 20 anos de idade sejam irrelevantes na era moderna. Eu permaneço cético sobre essa crítica, mas aqui está a mais recente pesquisa sobre o tema que continua a mostrar que o GRE é um preditor pobre de tudo o que importa, exceto para os graus.

open source, used with permission
Fonte: código aberto, usado com permissão

Moneta-Koehler, L., Brown, AM, Petrie, KA, Evans, BJ, & Chalkley, R. (2017). As limitações do GRE em prever o sucesso na pós-graduação biomédica. PloS one, 12 (1), e0166742.

Outros leitores têm defendido o primado dos escores GRE em relação a qualquer outro indicador no processo de admissão. Um professor sugeriu que eu citei seu trabalho sobre o assunto.

Em um de seus estudos (Kuncel & Hezlett, 2007), ele encontra uma correlação de .20 entre os resultados de testes padronizados e a produtividade da pesquisa durante a pós-graduação. Eu vejo isso como evidência do problema com o primado dos escores do GRE. Claramente, outra coisa é necessária além dos escores do GRE. Isso retorna à minha sugestão de um ponto de partida necessário, como uma pontuação do GPA 3.0 ou do percentil 60 nos subtestes do GRE antes de avançar para as habilidades adquiridas para atingir o solo em um laboratório de pesquisa. Curiosamente, o preditor mais forte da produtividade da pesquisa foi o escore de assunto de psicologia do GRE. Um teste que raramente é necessário e raramente considerado nas admissões. Eu serei honesto. Ler sobre esses dados mudou minha visão sobre o teste e eu vou visualizá-lo com mais cuidado no futuro. É um instantâneo de se alguém adquiriu e manteve conhecimento sobre o campo. É mais difícil fazer perguntas de pesquisa úteis se você ignorar o que foi explorado no passado. Uma base básica oferece um início.

Talvez seja hora de os departamentos de psicologia e os professores individuais serem transparentes quanto ao processo de filtragem. Quais são os limites exatos utilizados para reduzir o número de aplicativos a um nível razoável? GPA pontuação em 3,5? Pontuação GRE acima do percentil 80? Se você tem menos de duas apresentações de pesquisa, você está fora da mistura? Se você tem uma publicação de primeiro autor pode compensar um GPA de 3.1? Como são tomadas em consideração as características demográficas da raça, sexo, orientação sexual, idade e status econômico social? No registro, os membros da faculdade afirmam uma adesão à verdadeira natureza da ação afirmativa – tudo o mais sendo igual, então estudantes não-brancos e não heterossexuais recebem a vantagem. Sem registro, muitas vezes é um impulso para obter estudantes não-brancos e não heterossexuais a cada ano, independentemente e muitas vezes à custa da experiência de pesquisa, pesquisa de produtividade, experiência clínica, GPA, GRE, etc. Diversidade que não é visível, como como status econômico social, é visto como muito menos importante. A transparência garante um processo justo. Isso expõe o sexismo, o racismo e o classismo tanto para os grupos minoritários quanto para a maioria (e nenhum candidato deve ser mantido como um representante ambulante de qualquer grupo).

No final, perguntei a dezenas de pessoas sobre como eles escolhem estudantes de pós-graduação estelares. A resposta mais comum é: não tenho nenhuma pista louca. É por isso que escrevi essa postagem no blog. Ninguém sabe o que faz grandes pesquisadores e profissionais e, no entanto, todos os programas excluem prematuramente as pessoas com um algoritmo que se baseia fortemente em pontuações e graus de testes padronizados.

Vale a pena pausar, coletar dados internos, fazer perguntas e ser transparente para os candidatos. Se os candidatos sabem que suas 5 apresentações de conferência nunca ultrapassarão o índice GRE de 3,1 GPA e o percentil 70, apenas diga-lhes. Não há necessidade de desviá-los. Seja centrado no aluno.

Kuncel, NR, & Hezlett, SA (2007). Avaliação. Testes padronizados prevêem o sucesso dos estudantes de pós-graduação. Ciência, 315 (5815), 1080.

Kuncel, NR, Hezlett, SA, & Ones, DS (2001). Uma meta-análise abrangente da validade preditiva dos exames de registro de pós-graduação: implicações para seleção e desempenho de estudantes de pós-graduação. Boletim psicológico, 127 (1), 162-181.

O Dr. Todd B. Kashdan é um orador público, psicólogo, professor de psicologia e cientista sénior do Centro para o Avanço do Bem-Estar na Universidade George Mason. Seu último livro é o lado oposto do seu lado sombrio: por que ser seu auto total – não apenas o seu "bom" auto-impulsos sucesso e satisfação. Se você está interessado em organizar um engajamento ou workshop, visite toddkashdan.com