11 pontos por xguru 2022-12-08 | 2 comentários | Compartilhar no WhatsApp
  • Aviso temporário antes de uma discussão detalhada pela equipe
  • No geral, a taxa média de obtenção de respostas corretas com o ChatGPT é muito baixa, o que está prejudicando o site (para os usuários que procuram respostas corretas)
  • O problema importante é que as respostas geradas pelo ChatGPT têm uma alta taxa de erro, mas em geral parecem boas e são muito fáceis de gerar
  • Se, após este aviso, for confirmado que uma resposta publicada foi gerada pelo ChatGPT, haverá sanções para impedir a continuidade da publicação desse conteúdo, mesmo que a postagem em si seja válida

2 comentários

 
hhcrux 2022-12-10

Há problemas, como responder que existem recursos que não existem ou fornecer código que não funciona. Mas, quando você olha apenas para a resposta gerada em si, ela realmente parece muito boa, e esse é o problema....

 
kbumsik 2022-12-08

Depois de ouvir essa notícia, fui ao Stack Overflow e, depois de muito tempo, dei uma olhada nas reviews de Low-quality answers...
Vi algumas respostas longas, mas estranhas, que ficavam divagando sobre partes diferentes da pergunta.

Antes de mais nada, as respostas são realmente longas, mas o formato típico de resposta no Stack Overflow costuma ser

resposta correta (ou TL;DR) -> explicação, bem direto ao ponto,
mas as respostas suspeitas de terem sido feitas pelo ChatGPT estavam escritas de um jeito excessivamente conversacional.

Também dava para ver que, talvez por a pergunta ser longa, alguns pontos centrais da pergunta foram ignorados.

A pergunta era algo como: “Eu rodei o mesmo código Python no Windows e no Linux em um sistema nativo com dual boot, e o Linux é muito mais lento. Nos dois usei Python 3.10.2”.
Mas havia resposta do tipo: “No seu ambiente de VM o desempenho pode ser diferente, e como as versões são diferentes, tipo Python 2.7.8+, o desempenho também pode variar...”