Stack Overflow: насколько падает трафик и как разрешился «страйк» модератора • DEVCLASS

Stack Overflow, веб-сайт, к которому разработчики часто обращаются за советами по вопросам кодирования, заявил, что падение трафика, связанное с конкуренцией со стороны ИИ-помощников, было преувеличено, хотя наш анализ показывает, что оно остается значительным. Однако компания в основном урегулировала забастовку модераторов, вызванную проблемами, связанными с контентом, созданным искусственным интеллектом.

Были различные сообщения о падении трафика, в том числе и наши собственные, поскольку разработчики использовали для решения проблем удобство помощников по кодированию в редакторе. Теперь компания заявляет, что более экстремальные анализы, показавшие падение от 35 до 50 процентов, были неверными и вызваны изменениями в конфигурации Google Analytics.

«В целом в этом году мы наблюдаем снижение трафика в среднем на ~5% по сравнению с 2022 годом», — заявил директор по управлению продуктами Дес Дарилек. Тем не менее, она также признала, что в апреле трафик упал на 14%, что связано с тем, что «разработчики пробуют GPT-4», движок OpenAI от компании, которая также поддерживает GitHub Copilot. Таким образом, наблюдается спад, даже если в некоторых отчетах он преувеличен.

Другой способ взглянуть на это — подсчитать, сколько вопросов задается. Этот отчет показывает, что с прошлого года уменьшилось количество новых вопросов; и мы продолжили наш собственный запрос SEDE (Stack Exchange Data Explorer), показывающий, что апрель не был разовым. В годовом исчислении апрель снизился на 22,5%, май - 25,6%, июнь - 24,5% и июль - 22,2%, согласно заданным вопросам.

Долгожданное решение Stack Overflow — это новый готовящийся сервис под названием OverflowAI, а также кое-что, возможно, более важное — надстройка Visual Studio Code, которая могла бы конкурировать по удобству с Copilot — хотя ее направленность иная, поскольку она не будет вставлять код напрямую.

Однако хорошей новостью для компании является то, что «забастовка» модераторов в основном закончилась, а отношения между сотрудниками и модераторами-добровольцами улучшились. Ключевая проблема, описанная в открытом письме, заключалась в том, что модераторам было запрещено удалять ответы на технические вопросы, если причиной удаления было то, что они были сгенерированы искусственным интеллектом. Модераторы утверждали, что такие ответы склонны к «неверной информации и плагиату».

Возможность неправильных ответов — это проблема, присущая генеративному ИИ, используемому ChatGPT Open AI, Bard Google и другими подобными системами. Генеративный ИИ силен в смысле своей способности давать беглые ответы на поставленный вопрос, но нет никакой гарантии правильности. Например, в FAQ для GitHub Copilot говорится: «Публичный код может содержать небезопасные шаблоны кодирования, ошибки или ссылки на устаревшие API или идиомы. Когда GitHub Copilot синтезирует предложения кода на основе этих данных, он также может синтезировать код, содержащий эти нежелательные шаблоны».

Результатом переговоров стало то, что Stack Exchange (компания, стоящая за Stack Overflow) согласилась разрешить удаление контента на основании «одного сильного индикатора использования GPT или нескольких более слабых индикаторов». Политика компании в этом отношении, установленная ранее, устарела. Кроме того, компания обязалась продолжать поддерживать дампы данных о подписчикском контенте, доступе к API и обозревателе данных Stack Exchange, хотя и с условием, что она может «установить вокруг них ограждения, чтобы гарантировать, что компании, создающие языковые модели и т. д., будут взимать плату за доступ». — условие, которое некоторые члены сообщества считают неуместным, учитывая, что дампы данных лицензируются по лицензии Creative Commons CC by-SA 4.0, которая позволяет адаптировать их для любых целей при наличии соответствующего указания. Кроме того, внесены изменения в способ взаимодействия Stack Exchange с модераторами и порядок действий в случае, если сам Stack Exchange нарушил свое модераторское соглашение.

Эту забастовку нельзя было сравнить с забастовкой сотрудников, поскольку модераторы Stack Overflow — волонтеры; и в типичном стиле Stack Overflow вопрос о том, закончилась ли забастовка, сам по себе был предметом дискуссий – хотя на практике кажется, что модерация вернулась в норму.

ИИ — это общая нить между забастовкой, трафиком и новыми услугами. Stack Overflow по-прежнему имеет огромное значение для многих разработчиков, поскольку его преимуществом перед ИИ является модерация и консенсус экспертов, применяемых к его вопросам – при условии, что они вызывают достаточный интерес. Тем не менее, сайты борются с искусственным интеллектом, и похоже, что их последствия будут продолжаться.