“Estas descobertas fornecem evidências claras de que os dados coletados no MTurk simplesmente não podem ser confiáveis.” Os pesquisadores há muito discutem se os dados de pesquisa do Amazon Mechanical Turk (MTurk) podem ser confiáveis. Este artigo adota uma abordagem simples para avaliar a qualidade dos dados atualmente produzidos pelo MTurk. O autor apresenta aos respondentes pares de perguntas que são obviamente contraditórias. Por exemplo: "Eu falo muito" e "Eu raramente falo." Ou: "Eu gosto de ordem" e "Eu anseio por caos." Se as pessoas estão prestando atenção, concordar com uma deve significar discordar da outra. No mínimo, as duas respostas não deveriam se mover juntas. A mesma pesquisa exata é realizada em três plataformas: Prolific, CloudResearch Connect e MTurk. No Prolific e no Connect, as coisas se comportam normalmente: a maioria dos itens contraditórios está negativamente correlacionada, assim como o bom senso prevê. No MTurk, no entanto, os resultados são opostos. Mais de 96% desses pares de itens claramente opostos estão positivamente correlacionados. Em outras palavras, muitos respondentes dão respostas semelhantes a declarações que se contradizem literalmente. Os autores então tentam o que a maioria dos pesquisadores faria a seguir: -restringir a amostra a trabalhadores do MTurk de "alta reputação" -aplicar verificações de atenção padrão -descartar respondentes rápidos e aqueles que respondem de forma linear...