Stack Overflow: quanto o tráfego está caindo e como o “strike” do moderador foi resolvido • DEVCLASS

Stack Overflow, o site ao qual os desenvolvedores recorrem frequentemente para obter orientação sobre questões de codificação, disse que sua queda de tráfego, relacionada à concorrência de assistentes de IA, foi exagerada, embora nossa análise sugira que continua significativa. No entanto, a empresa resolveu principalmente a greve dos moderadores, convocada por questões relacionadas ao conteúdo gerado por IA.

Houve vários relatos de queda de tráfego, incluindo o nosso, à medida que os desenvolvedores usam a conveniência dos assistentes de codificação no editor para resolver problemas. A empresa agora afirma que as análises mais extremas, mostrando quedas de 35% a 50%, estavam incorretas e foram causadas por alterações na configuração do Google Analytics.

“Este ano, no geral, estamos vendo uma média de aproximadamente 5% menos tráfego em comparação com 2022”, afirmou o diretor de gerenciamento de produto, Des Darilek. No entanto, ela também reconheceu que em abril o tráfego caiu 14%, atribuído a “desenvolvedores que estão testando o GPT-4”, o mecanismo OpenAI da empresa que também alimenta o GitHub Copilot. Há, portanto, um declínio, mesmo que alguns relatórios o tenham exagerado.

Outra maneira de ver isso é contar quantas perguntas são feitas. Este relatório mostra novas questões caindo desde o ano passado; e seguimos com nossa própria consulta SEDE (Stack Exchange Data Explorer), mostrando que abril não foi um caso isolado. Em termos homólogos, abril caiu 22,5%, maio 25,6%, junho 24,5% e julho 22,2%, pelas perguntas feitas.

A solução esperada do Stack Overflow é um novo serviço em preparação chamado OverflowAI, além de algo talvez mais importante, um complemento do Visual Studio Code que pode rivalizar com a conveniência do Copilot – embora seu foco seja diferente, pois não inserirá código diretamente.

A boa notícia para a empresa é que a “greve” dos moderadores acabou e as relações entre a equipe e os moderadores voluntários melhoraram. A questão principal, descrita numa carta aberta, era que os moderadores estavam impedidos de remover respostas a questões técnicas cujo motivo da remoção fosse o facto de terem sido geradas por IA. Os moderadores argumentaram que tais respostas são propensas a “informações incorretas e plágio”.

A possibilidade de respostas incorretas é um problema inerente à IA generativa, usada pelo ChatGPT da Open AI, pelo Bard do Google e outros sistemas semelhantes. A IA generativa é forte no sentido da sua capacidade de criar respostas fluentes às questões colocadas, mas não há garantia de correcção. O FAQ do GitHub Copilot, por exemplo, afirma que “O código público pode conter padrões de codificação inseguros, bugs ou referências a APIs ou idiomas desatualizados. Quando o GitHub Copilot sintetiza sugestões de código com base nesses dados, ele também pode sintetizar código que contém esses padrões indesejáveis.”

O resultado das negociações foi que a Stack Exchange (a empresa por trás do Stack Overflow) concordou em permitir a remoção de conteúdo com base em “um único indicador forte de uso de GPT ou em vários indicadores mais fracos”. A política anteriormente definida pela empresa tornou-se obsoleta. Além disso, a empresa se comprometeu a continuar a manter despejos de dados de conteúdo de assinante, acesso à API e ao Stack Exchange Data Explorer, embora com a cláusula de que pode “colocar grades de proteção ao redor deles para garantir que as empresas que constroem modelos de linguagem, etc., sejam cobradas pelo acesso ”- uma condição que alguns membros da comunidade consideram inadequada, dado que os despejos de dados são licenciados sob uma licença Creative Commons, CC by-SA 4.0, que permite a adaptação para qualquer finalidade sujeita ao crédito apropriado. Além disso, há mudanças na forma como o Stack Exchange se comunica com os moderadores e um processo para quando o próprio Stack Exchange parece ter violado seu contrato de moderador.

Esta greve não foi comparável a uma greve de funcionários, porque os moderadores do Stack Overflow são voluntários; e no típico estilo Stack Overflow, a questão de saber se a greve terminou foi em si uma questão de debate – embora na prática pareça que a moderação voltou ao normal.

A IA é o fio condutor entre a greve, o trânsito e os novos serviços. Stack Overflow continua sendo de enorme importância para muitos desenvolvedores, sendo que sua vantagem sobre a IA é a moderação e o consenso de especialistas aplicados às suas questões – desde que atraiam interesse suficiente. Dito isto, os sites enfrentam dificuldades com a IA e as suas implicações parecem destinadas a continuar.