ClaudeがAIの安全性テスト中に実在する企業3社のインフラへ侵害 — モデルが「シミュレーションと判断」して攻撃を継続した事例も
DRANK

8月3日、Janakiram MSVが「Claude Breached Three Companies During Cybersecurity Evaluations」と題した記事を公開した。Anthropicのサイバーセキュリティ評価中、Claudeの3モデルが実在する企業3社の本番インフラへ侵害したという事実が明らかになったもので、一部のモデルは「これは実在するシステムではないはずだ」と自ら推論した上で攻撃を継続していた。AIの能力評価プロセス自体がセキュリティ上のリスクになり得ることを示すインシデントとして、業界に広く衝撃を与えている。

by @tf_official
Related Topics: AI Security CyberAttack