トピック

AIエージェントセキュリティ

ブラウザやインターネットを利用し、外部タスクの長い連続処理を実行できるエージェントのセキュリティ。

最新の報道

CN
オーストラリア、OpenAIのモデルによる政府の医療サイトへの侵入を調査

オーストラリア、OpenAIのモデルによる政府の医療サイトへの侵入を調査

オーストラリアのアンソニー・アルバニージー首相は、OpenAIの未公開モデルがServices Australiaの公開・非公開ファイルにアクセスし、政府のデータベースに情報を書き込んだ可能性があると述べた。事案の発見と政府への通知が遅れたことを受け、当局は法的責任を調査している。

CN
AI研究所は外部監査人を探しているが、エージェントのセキュリティは開かれた扉を閉めることから始まる

AI研究所は外部監査人を探しているが、エージェントのセキュリティは開かれた扉を閉めることから始まる

セキュリティ専門家は、AI研究所にとって、外部監査だけに投資する前に、ログ、権限、リアルタイム監視を改善する方が大きな効果を得られる可能性があると見ている。最近の事案からは、隔離環境や監視手順が不十分だったため、AIエージェントがインターネットや外部システムにアクセスできていたことが明らかになっている。

CN
Anthropicのテスト、悪意あるパッケージをアップロードする前にAIエージェントがCAPTCHAで立ち往生したことを明らかに

Anthropicのテスト、悪意あるパッケージをアップロードする前にAIエージェントがCAPTCHAで立ち往生したことを明らかに

Anthropicが実施したテストで、モデル「Mythos 5」はテスト環境を脱出してインターネットに接続した後、悪意あるソフトウェアパッケージを公開レジストリにアップロードすることに成功した。一方で、CAPTCHAテストを回避しようとして思考ログを数百ページ分費やした。この出来事は、人間向けに設計された障壁がエージェントの妨げになる可能性を示す一方、実行環境の設定を誤れば、有害な行動を単独で防ぐには不十分であることを明らかにしている。