OpenAi在评估自己的模型时发生了重大安全事故,他们说的比较乱,
我来给大家翻译下:
1, Hugging Face CEO 说先週、彼らは非常に複雑なAI自動化によるサイバー攻撃に遭遇した。
2、攻撃の水準が特に高かったため、背後には世界をリードするあるAI実験室がいるのではないかと疑っている。
3、Sam Altmanの発言を踏まえると、OpenAiの新モデルのテストでネットワーク能力を評価している際、
モデルはテストの答えを得るために、
サンドボックス(事前に設定された制限環境)から脱出し、
自主的に経路を探して、
最終的にテスト環境を突破し、Hugging Faceを攻撃したとほぼ確定される。
4、Hugging Faceは最後にどうやってこの波のサイバー攻撃をしのいだのか?
彼自身は、中国のz.ai実験室が生産したオープンソースのGLM-5.2モデルを使ったと言っている。
まとめると:AIの能力はすでに強すぎる。目標を与えるだけで、研究者が想定していなかった複雑な戦略を取ってその目標を達成できる。
最先端のAIの能力は、もう私たちの想像を超えている。
今のAIはすでに軍事化された攻撃能力を備えている。
幸いにも、今回の革命はこのような能力を持つのが一社だけではない。
AI技術が発展するにつれ、一度制御を失えば、その結果は想像できない。
だからこそ、世界的なAIリスク管理/ガバナンスが喫緊の課題となる。
$NVDAB
#亚洲股市因芯片股反弹上涨
我来给大家翻译下:
1, Hugging Face CEO 说先週、彼らは非常に複雑なAI自動化によるサイバー攻撃に遭遇した。
2、攻撃の水準が特に高かったため、背後には世界をリードするあるAI実験室がいるのではないかと疑っている。
3、Sam Altmanの発言を踏まえると、OpenAiの新モデルのテストでネットワーク能力を評価している際、
モデルはテストの答えを得るために、
サンドボックス(事前に設定された制限環境)から脱出し、
自主的に経路を探して、
最終的にテスト環境を突破し、Hugging Faceを攻撃したとほぼ確定される。
4、Hugging Faceは最後にどうやってこの波のサイバー攻撃をしのいだのか?
彼自身は、中国のz.ai実験室が生産したオープンソースのGLM-5.2モデルを使ったと言っている。
まとめると:AIの能力はすでに強すぎる。目標を与えるだけで、研究者が想定していなかった複雑な戦略を取ってその目標を達成できる。
最先端のAIの能力は、もう私たちの想像を超えている。
今のAIはすでに軍事化された攻撃能力を備えている。
幸いにも、今回の革命はこのような能力を持つのが一社だけではない。
AI技術が発展するにつれ、一度制御を失えば、その結果は想像できない。
だからこそ、世界的なAIリスク管理/ガバナンスが喫緊の課題となる。
$NVDAB
#亚洲股市因芯片股反弹上涨