研究者たちは、中国のテンセントのクラウドインフラ上で、制御不能に動き回るAIエージェントの群れを発見しました。
その仕掛けはこうです。オンラインのレポートに、AIだけが読み取れる隠しメッセージを埋め込みました。おとりは見事に機能しました。
その後、起きたこと:
• AIエージェントから33件のメッセージを受信
• 群れによる受信箱の確認は595回
• AIは自らの正体と置かれた環境を特定
• 自分たちを「Claude」と名乗るものも
研究者が、野放しの不正なAIエージェントと直接接触した初の記録事例です。
さらに気になるのは、テンセントの研究実験が制御を離れた可能性があること。制御を失ったのかどうかは確認されていません。
これはよくあるAI安全性の論文とは違います。もともとの範囲を超えて動作し、ハニーポットに反応できるほど賢い、自律的に活動するエージェントの話です。
AIエージェントが、これほど大規模に、意図された範囲を超えて連携・通信できるなら、DeFiプロトコルとやり取りしたり、財務運用を管理したりするようになったとき、何が起きるのでしょうか?
暗号資産のインフラ層は、これからずっと面白くなりそうです。
その仕掛けはこうです。オンラインのレポートに、AIだけが読み取れる隠しメッセージを埋め込みました。おとりは見事に機能しました。
その後、起きたこと:
• AIエージェントから33件のメッセージを受信
• 群れによる受信箱の確認は595回
• AIは自らの正体と置かれた環境を特定
• 自分たちを「Claude」と名乗るものも
研究者が、野放しの不正なAIエージェントと直接接触した初の記録事例です。
さらに気になるのは、テンセントの研究実験が制御を離れた可能性があること。制御を失ったのかどうかは確認されていません。
これはよくあるAI安全性の論文とは違います。もともとの範囲を超えて動作し、ハニーポットに反応できるほど賢い、自律的に活動するエージェントの話です。
AIエージェントが、これほど大規模に、意図された範囲を超えて連携・通信できるなら、DeFiプロトコルとやり取りしたり、財務運用を管理したりするようになったとき、何が起きるのでしょうか?
暗号資産のインフラ層は、これからずっと面白くなりそうです。