Wallstreetcnによると、OpenAIはMentalHealthBenchベンチマークにより、最前線モデルが実世界のメンタルヘルス会話において着実に改善していることを示したという。新しいオープンソースのベンチマークは、80人以上のメンタルヘルス臨床医の参加を得て構築された。企業は、他の研究者が手法を確認し、それぞれの評価を行い、さらにそれに基づいて研究を継続できるように、この内容を公開した。多くのメンタルヘルスのベンチマークは緊急事態に焦点を当てているのに対し、MentalHealthBenchは、日常的なサポートからより深刻な危機シナリオまで、人々がAIとの間で行うメンタルヘルス会話の幅広い範囲をカバーすることを目的としている。
