新しい人類学的研究: クロードとの会話から AI の生産性向上を推定します。 人類経済指数は、クロードがどこで、どのようなタスクに使用されているかを示します。しかし、クロードがどれほど有用であるかは分かりません。どれほどの時間を節約できるのでしょうか？
プライバシー保護を考慮した分析手法を用いて、10万件の実際の会話をサンプリングしました。そして、クロードは各会話におけるAIによる時間の節約を推定しました。 詳細はこちら：https://t.co/dXx1jpNRwn
まず、クロードがタスクにかかる時間を正確に推定できるかどうかをテストしました。その推定結果は期待できるものでしたが、まだ人間の推定値ほど正確ではありません。
クロード氏の推定によると、サンプル内のタスクは AI の支援なしでは完了までに平均約 90 分かかりますが、クロード氏は個々のタスクを約 80% 高速化します。 結果は職業によって大きく異なりました。
次に、これらの結果を経済全体に外挿しました。 こうしたタスクレベルの節約は、現世代の AI モデルが広く採用されると仮定すると、今後 10 年間で米国の労働生産性の年間成長率が 1.8% 増加する可能性があることを示唆しています。
この結果は、ベースラインの労働生産性成長トレンドが倍増することを示唆しており、これは近年の研究における推定値の上限に近い値となります。さらに、モデルが改良されれば、その影響はさらに大きくなる可能性があります。
私たちの研究には限界があります。何よりも、Claude はチャット ウィンドウの外で何が起こっているかに基づいてタスク レベルの節約の推定値を改善することができません。 しかし、モデルが改良されるにつれて、タスクレベルの節約額の推定値も改善されると考えています。この研究については、近いうちに改めて取り上げます。