Estudo encontra concentração suspeita de recomendações de marcas no Reddit

A pergunta e o método

Peter Vijeh, criador do site New Knife Day, investigou se os subreddits de facas mostram sinais de astroturfing - recomendações pagas disfarçadas de opiniões espontâneas. O contexto é o chamado "Reddit hack": muitas pessoas adicionam "reddit" às buscas no Google para encontrar opiniões humanas em vez de páginas de afiliados. Se Reddit é onde compradores buscam opiniões não pagas, é também onde marcas teriam incentivo para plantar opiniões pagas.

O autor usou um modelo de reconhecimento de entidades chamado GLiNER para extrair marcas, modelos e aços de 51.129 comentários coletados de seis subreddits (r/knives, r/knifeclub, r/chefknives, r/japaneseknives, r/FixedBladeEdc e r/KnifeSteels). Um passo de atualização que voltou a 3.607 posts com mais de 48 horas elevou o corpus de 21.673 para 51.129 comentários - antes disso, o teste não encontrava nada por falta de dados.

O teste estatístico

Ele definiu previamente o que uma campanha paga deixaria nos dados: concentração de menções em poucas contas, lealdade a uma marca, contas fracas, contas jovens ou com histórico oculto. O teste principal mantém 1.471 menções de marcas em tópicos de compra e redistribui os autores aleatoriamente 1.000 vezes para estimar o acaso.

O resultado: as 49 contas "fiéis a marcas" (o 5% mais intenso entre 987 autores com 10 ou mais comentários) escrevem 11,3% das menções, contra 7,9% esperados pelo acaso - apenas 2 das 1.000 simulações alcançaram o valor real. Isso representa cerca de 50 recomendações extras. A concentração não é uniforme: r/chefknives (14,9% contra 7,7%) e r/knifeclub (12,4% contra 7,3%) ficam acima do acaso, enquanto r/knives, o maior, está dentro da margem. Marca por marca, três marcas (codificadas como B001, B003 e B004) mostram sinais fortes - B003 tem 31,2% de suas menções de compra vindas dessas contas, quatro vezes o esperado.

Históricos que parecem comuns

Vijeh então comparou os históricos completos no Reddit de 23 contas fiéis atrás das três marcas sinalizadas com 23 contas de controle. Nenhuma característica separa os grupos de forma estatisticamente significativa: idade mediana igual (4,5 anos), as contas fiéis são menos focadas em facas (3,2% dos comentários nos seis subreddits, contra 10,3% do controle), espalham-se por 66 subreddits e citam sete marcas no histórico total. Isso não é o perfil de uma conta recém-preparada - mas é exatamente o perfil que fornecedores de contas "envelhecidas e aquecidas" vendem. Oito históricos fiéis estavam ocultos, suspensos ou apagados, e poderiam conter a resposta.

Limitações reconhecidas

O autor lista o que o método não detecta: contas envelhecidas compradas em massa são indistinguíveis de pessoas reais; a moderação removida não deixa rastro no corpus; upvotes comprados não são testados; o método nunca foi calibrado contra contas sabidamente pagas. O detector de marcas é o modelo GLiNER padrão (a versão ajustada para facas não teve pesos publicados), e "tópico de compra" é uma expressão regular não validada manualmente - todos os percentuais são de rótulos de máquina. Os resultados por marca e por subreddit envolvem múltiplos testes, e um ou dois podem ser coincidência; o resultado geral de 11,3% é um teste único.

Conclusão

A leitura do autor: para duas ou três marcas, um quarto a um terço das recomendações de compra vem de contas que quase sempre recomendam a mesma marca. Se são fãs entusiasmados ou contas pagas, ele não sabe - e depois de ler os históricos, inclina-se para fãs, com reservas. A verificação prática que os dados endossam: ao ver uma recomendação de conta desconhecida, checar se ela já nomeou outra marca. Essa checagem falha diante de históricos ocultos e não pega contas envelhecidas compradas - e ele dúvida que qualquer leitor consiga.