banner

ブログ

Aug 20, 2023

スタック オーバーフロー: トラフィックのドロップ量と、モデレータの「ストライク」がどのように解決されたか • DEVCLASS

開発者がコーディングの問題に関するガイダンスを求めて頻繁に参照する Web サイトである Stack Overflow は、AI アシスタントとの競争に関連したトラフィックの減少が誇張されていると述べていますが、私たちの分析では依然として大幅であることが示唆されています。 しかし同社は、AI生成コンテンツに関連した問題を理由に呼び掛けられたモデレーターのストライキをほぼ解決した。

開発者が問題を解決するためにエディター内のコーディング アシスタントの利便性を利用しているため、トラフィックが低下したというさまざまな報告があり、私たちの報告も含まれています。 同社は現在、35%から50%の低下を示したより極端な分析は誤りであり、Google Analyticsの設定変更が原因であると主張している。

「今年は全体的に、2022 年と比較してトラフィックが平均して最大 5% 減少しています」と製品管理ディレクターの Des Darilek 氏は述べています。 しかし、彼女はまた、GitHub Copilot にも搭載されている同社の OpenAI エンジンである「開発者が GPT-4 を試している」ことが原因で、4 月のトラフィックが 14% 減少したことも認めました。 したがって、一部の報道が誇張しているとしても、減少は存在します。

これを調べるもう 1 つの方法は、質問の数を数えることです。 このレポートでは、昨年以降、新たな質問が減少していることがわかります。 そして独自の SEDE (Stack Exchange Data Explorer) クエリを追跡調査して、4 月が 1 回限りではないことを示しました。 質問によると、前年同月比では、4月が22.5%、5月が25.6%、6月が24.5%、7月が22.2%減少した。

Stack Overflow が期待するソリューションは、OverflowAI と呼ばれる準備中の新しいサービスと、おそらくもっと重要なもの、Copilot の利便性に匹敵する可能性のある Visual Studio Code アドインです。ただし、コードを直接挿入しないため、その焦点は異なります。

しかし、同社にとって良いニュースは、司会者の「ストライキ」がほぼ終わり、スタッフとボランティア司会者の関係が改善されたことだ。 公開書簡で説明されている重要な問題は、削除の理由が AI によって生成されたものである技術的な質問に対する回答をモデレーターが削除することが制限されていることだった。 司会者らは、そのような回答は「不正確な情報や盗用」につながりやすいと主張した。

不正解の可能性は、Open AI の ChatGPT、Google の Bard などのシステムで使用される生成 AI に固有の問題です。 生成 AI は、提示された質問に対して流暢な回答を作成する能力という意味では強力ですが、正しさの保証はありません。 たとえば、GitHub Copilot の FAQ には、「公開コードには、安全でないコーディング パターン、バグ、または古い API やイディオムへの参照が含まれている可能性があります。 GitHub Copilot がこのデータに基づいてコード提案を合成するとき、これらの望ましくないパターンを含むコードも合成される可能性があります。」

交渉の結果、Stack Exchange (Stack Overflow の背後にある会社) は、「GPT 使用量の 1 つの強力な指標、またはいくつかの弱い指標」に基づいてコンテンツの削除を許可することに同意しました。 これについて会社が以前に定めたポリシーは廃止されました。 さらに同社は、加入者のコンテンツ、API アクセス、Stack Exchange Data Explorer のデータ ダンプを維持し続けることを約束しましたが、「言語モデルなどを構築している企業に確実にアクセス料金が請求されるように、それらの周囲にガードレールを設置する可能性がある」とも述べています。 」 – データ ダンプがクリエイティブ コモンズ ライセンスである CC by-SA 4.0 に基づいてライセンスされており、適切なクレジットを条件としてあらゆる目的に適応できることを考慮すると、一部のコミュニティ メンバーが不適切であると考える条件です。 さらに、Stack Exchange がモデレーターと通信する方法と、Stack Exchange 自体がモデレーター契約に違反したと思われる場合のプロセスにも変更があります。

Stack Overflow のモデレーターはボランティアであるため、このストライキは従業員のストライキとは比較にならないものでした。 そして典型的な Stack Overflow のスタイルでは、ストライキが終わったかどうかという問題自体が議論の対象となったが、実際には節制が正常に戻ったようだ。

AI はストライキ、交通、新しいサービスの間の共通の要素です。 Stack Overflow は多くの開発者にとって依然として非常に重要であり、十分な関心を集めている場合に限り、質問に対して専門家の調整と合意が適用されるという AI に対する利点があります。 とはいえ、各サイトは AI に苦戦しており、その影響は今後も続くと思われます。

共有