
- SAFEはAIインシデントの機密共有と分析で生態系全体の防御を目指す
- NVIDIAはエージェント用ハーネスやオープンモデルなど多数のツールを公開
- AmazonやMicrosoft、Uberなども実運用向けのツールを追加し対応が加速
SAFE指針の概要
Linux Foundationは8月4日、共有AIインシデント交換(SAFE)に関するコメント要請(RFC)を公開した。これはエージェント型AIのサイバーセキュリティインシデントを機密性を保ちながら収集・分析し、影響を受けた組織への通知、再発する制御の欠陥の特定、証拠に基づく運用上の推奨事項の公表を提案するものである。
SAFEはOpen Secure AI Allianceのワーキンググループが草案を作成しており、NVIDIA、Cisco、CrowdStrike、Hugging Face、Red Hatなどが初期提案に寄与している。アライアンスは現在120以上の組織で構成され、Black Hatカンファレンスの開幕に合わせて今回の発表が行われた。
NVIDIAの貢献
NVIDIAは、エージェントの動作をテスト・追跡・監査しやすくする研究用ハーネス「NOOA」をGitHubで公開した。また、エージェントがアクセスできる範囲を制限するランタイム「OpenShell」も提供し、エージェントレベルでセキュリティとプライバシーの制御を実施する。
モデル面では、Nemotron(エージェント型AI向け)、Cosmos(物理AI)、Isaac GR00T(ロボティクス)、BioNeMo(ヘルスケア)、Alpamayo(自動運転向けの世界最大モデル)などをオープンウェイトで公開している。さらに、プロンプトインジェクションやツールポイズニングのリスクを検査し、暗号署名した「検証済みエージェントスキル」も提供する。NeMo GuardrailsやAnonymizer、Safe Synthesizer、オープンソースのLLM脆弱性スキャナGarakなども含め、スタック全体をカバーする構成だ。
各社の取り組み
アイデンティティと権限管理では、Oktaがエージェント向けIDアクセスの参照実装を開発中で、Palo Alto NetworksはIdiraからAgent GuardやAgent Watchをオープンソースで提供した。Red Hatが立ち上げたasagoは、NISTやEU AI Actなどのガバナンス要件をランタイムのエージェント行動に直接マッピングする。
ハーネスとツール層では、AmazonがStrands AgentsとCedarを、Microsoft AI Red TeamがPyRITやRAMPART、Clarity、Assertをオープンソース化した。Capital OneはVulnHunter、Cloudflareは脆弱性発見ハーネス、WizはAtlasを公開。Visaも新たに参加し、独自のエージェントハーネスを提供している。
モデル特化型の防御では、CiscoがDefenseClawやAntaresセキュリティ小言語モデル、Project CodeGuardをリリース。CrowdStrikeはNVIDIA Nemotron Nanoをファインチューニングし、Falcon LogScale内の調査クエリ生成で96%の精度を達成した。UberはADR(エージェント型AI検知・応答)をオープンソース化し、1日あたり20万以上のエージェントセッションを3万エンドポイントで処理している。復旧面ではLangChainが再試行や状態復旧の機能を、VeeamがKubernetes向けデータ保護Kanisterを提供している。
今後の課題と展望
SAFEは現時点ではRFCであり、コミュニティからのフィードバックを募集している段階だ。指針が実際に運用され、インシデント情報の共有が機能するかどうかは、参加組織の信頼関係と開示のインセンティブ設計に依存する。
各社のツールも、オープンソースとして公開されたばかりのものが多く、実運用での検証と改善が今後必要となる。特にエージェント型AIはモデルだけでなく、ハーネスやランタイム、スキルを含むシステム全体でのセキュリティが求められており、今回のアライアンスの取り組みはその基盤づくりとして位置づけられる。
When trusted ecosystems share threat intelligence openly, collective defense becomes a force multiplier.
信頼できるエコシステムが脅威インテリジェンスをオープンに共有すれば、集団的防御は力の増幅器となる。
日本の開発者・IT企業にとっての意味
日本のIT企業がエージェント型AIの導入を進める際、セキュリティ対策は従来のソフトウェア開発とは異なるレイヤーでの検討が必要になる。今回公開されたSAFEの指針は、業界横断でインシデント情報を共有する枠組みであり、自社でセキュリティを抱え込まずに済む可能性がある。また、NVIDIAをはじめとして各社が公開したツールは、MITライセンスなどのオープンソースで提供されるため、日本企業も実装を検証しやすく、自社のエージェントシステムに組み込みやすいという利点がある。一方で、ツールの選定や運用には専門知識が必要であり、コミュニティへの参加や人材育成が実務上の課題になるとみられる。
用語解説
- Agentic AI
- 与えられた目標に向けて自律的に行動を決定・実行するAIシステム。従来のチャット型AIと異なり、ツール利用や外部システムとの連携を行う。
- SAFE
- Shared AI Findings Exchangeの略。AIインシデントを機密共有し、分析結果を推奨事項として公開するための指針案。
- RFC
- Request for Comments。技術仕様や標準化案を公表し、コミュニティからコメントを募集するための文書。
- Open Secure AI Alliance
- AIセキュリティのためのオープンなツールと知識を共有する業界団体。120以上の組織が参加する。
- プロンプトインジェクション
- 悪意のある入力をAIに与え、意図しない命令を実行させる攻撃手法。エージェント型AIでは特に重大なリスクとなる。
出典
AI Leaders Propose SAFE Guidelines for Cybersecurity Transparency
https://blogs.nvidia.com/blog/open-secure-ai-alliance-contributions
企業のAI活用顧問を、いまなら無料で承っています
何から手をつけるか、どこまでAIに任せるか。自社の業務に合わせて一緒に整理します。導入前の相談だけでも構いません。
無料でAI活用の相談をする