Um ouvido melhor no chão

Sentiment Analysis e Twitter

Mais e mais, a internet está sendo minada e arranhada por dados – e, é claro, no momento em que nosso foco atual é sobre a previsão das eleições. Na noite de terça-feira, por exemplo, a CNN usará a "análise do sentimento" para acompanhar os temas que preocupam os eleitores.

Informações espontâneas e não solicitadas sobre os sentimentos que os eleitores têm para candidatos e problemas podem ser encontradas no Twitter e em outros sites de conversas sociais. David Bohrman, chefe do departamento de Washington da CNN, diz que a parte mais atraente sobre o sistema de mineração de dados que eles desenvolveram para usar essa informação é "sua capacidade de monitorar as conversas que ocorrem independentemente, ao invés de ter que enquadrar as questões perguntando diretamente questões. "Estamos esperando para ver o que eles vão dizer." (Veja "Impacto político da Nação, Tomado usando o Net Chatter", no New York Times de hoje).

Isso promete ser livre dos problemas habituais de viés de amostragem ou preconceitos inconscientes – um sonho perene de quem busca informações mais precisas sobre o comportamento de eleitores ou consumidores ou de qualquer outro setor do público em geral.

Mas não é livre de seus próprios problemas. Será que o público se expressará de maneira que corresponda ao que os pesquisadores precisam ouvir ou podem até entender? O sarcasmo e a ironia podem ser filtrados da mensagem? Ou o sistema irá voltar e exagerar tendências perigosas ou disfuncionais?

Essas tendências foram exploradas recentemente em um novo site no Reino Unido, Mindful Money, focado no comportamento financeiro. O seu colaborador de pesquisa, Xiao-Jun Zeng na Universidade de Manchester, tentando ultrapassar as formas usuais de informações sobre as tendências do mercado, percebeu "que faltava algo dos parâmetros, nomeadamente humor, psicologia. Enquanto as notícias, a mineração de dados é bastante fácil, capturar informações de humor é mais difícil. "E, então, eles se voltaram para o Twitter e" descobriram uma precisão de 87,6% na previsão das mudanças diárias de cima para baixo nos valores de fechamento do Dow. "(Veja" Tweeting Moods Key to Stock Forecast Forecasting ".)

Embora esta pesquisa ainda esteja em sua fase de início, a correlação é surpreendente. Promete oferecer uma alternativa perfeitamente legal à confiabilidade que, anteriormente, os comerciantes só podiam obter informações privilegiadas ou manipulação de estoque.

Mas isso, também, não é sem seus perigos. Como Stephen Fitzpatrick, no Mindful Money, diz: "O que atualmente temos no espaço financeiro online é um sistema social nervoso e existe o perigo de que o twitter possa aumentar a medida em que os mercados estão correlacionados, que é precisamente o que aconteceu durante o acidente".

Então, mesmo que possamos aprender a ler o inconsciente social com precisão, mesmo que as novas tecnologias possam minar o Twitter para nos dar um olhar sem precedentes sobre o comportamento das multidões enquanto está acontecendo, ainda temos que pensar sobre o que estamos fazendo com a informação que recebemos.

Um melhor "sistema nervoso" ainda requer um cérebro, e exige que estejamos conscientes.