ChainCatcherがThe Vergeを引用して伝えたところによると、AI安全性研究団体のMETRは、Anthropicを対象に11週間の調査を行った結果、同社のモデルは1年前と比べて約2倍の速さで性能が向上していると述べました。METRによると、過去1年間の進歩は、それ以前のおよそ2年分の進歩に相当します。10月時点では、研究開発の加速の大部分をAIが担っており、その貢献は拡大していました。

この加速は主に、AIが自律的に作業するのではなく、人間の研究者を支援することで生じています。非公式の調査では、Anthropicの従業員が同社の最も高性能な社内モデルを使用した場合、AIの支援がない場合と比べて、生産性が平均約12倍高いと自己申告しました。

Anthropicは公開報告書の大部分を黒塗りにしました。共同創業者のサム・マカンドリッシュ氏は、この情報には商業上機密性の高い内容が含まれており、他社の研究開発を加速させる助けになる可能性があると述べました。