AI総合研究所

SHARE

X(twiiter)にポストFacebookに投稿はてなブックマークに登録URLをコピー

AIガードレールとは?プロンプト攻撃や情報漏えいを防ぐ仕組みと主要製品の比較

この記事のポイント

  • 生成AIの業務利用がPoC段階を超えたなら、入出力ガードレールは「あった方がよい」から「調達要件・社内コンプライアンス対応で検討対象になる実装候補」に位置づけが変わりつつある
  • 入力・出力・ツール呼び出しの3層で防御を分散させる設計が主流で、AIエージェントではツール呼び出し層のガードレールが要
  • クラウドマネージド・OSSフレームワーク・国内SaaSは得意領域が異なり、単独採用では穴が残りやすい
  • Llama Guard 3とIBM Granite Guardianは公式モデルカード上の得意領域が異なり、組み合わせて使う構成も検討価値がある
  • EU AI Act 8月発効分とOWASP LLM Top 10 2026版は、ガードレールの実装粒度を具体的に求める水準に進んだ
坂本 将磨

監修者プロフィール

坂本 将磨

XでフォローフォローするMicrosoftMVP

Microsoft MVP・AIパートナー。LinkX Japan株式会社 代表取締役。東京工業大学大学院にて自然言語処理・金融工学を研究。NHK放送技術研究所でAI・ブロックチェーンの研究開発に従事し、国際学会・ジャーナルでの発表多数。経営情報学会 優秀賞受賞。シンガポールでWeb3企業を創業後、現在は企業向けAI導入・DX推進を支援。

AIガードレールとは、生成AIやAIエージェントの入出力を機械的に検査し、情報漏えい・ハルシネーション・プロンプト攻撃といった事故を未然に止める制御の仕組みです。
EU AI ActのGPAI義務が2025年8月に発効し、OWASP LLM Top 10 2026版が公表されたことで、ガードレールは「あったほうがよい」から「調達要件・社内コンプライアンス対応で検討対象になる実装候補」へ位置づけが変わりつつあります。

本記事では、生成AI利用で起きている3種類のリスク、入力・出力・ツール呼び出しの技術スタック、AIエージェント特有のガードレール設計、Bedrock Guardrails・Azure Prompt Shields・NeMo Guardrails・Lakera・chakoshiなどの主要製品比較、ケース別の選び方、導入で見落としがちな論点、EU AI Act・OWASP・総務省ガイドラインとの関係を、2026年10月時点の最新情報で体系的に解説します。

目次

AIガードレールとは?生成AIの入出力を機械的に制御する仕組み

AIガバナンスとの位置づけ

AIガードレールが止める3種類のリスク

機密情報・個人情報の漏えい

ハルシネーション・事実誤認による業務事故

プロンプトインジェクションとジェイルブレイク

どこで何を止めるか——AIガードレールの技術スタック

入力ガードレール(Input Guardrails)

出力ガードレール(Output Guardrails)

対話・取得・実行の中間レール

ツール呼び出しガードレール(Tool Guardrails)

AIエージェント特有のガードレール

OpenAI Agents SDKの3層ガードレール

Amazon Bedrock AgentCoreとInvokeGuardrailChecks API

Azure Task Adherence APIによるエージェント逸脱検出

主要ガードレール製品・OSSの比較

クラウドマネージド型(Bedrock / Prompt Shields / Model Armor)

OSSフレームワーク型(NeMo Guardrails / Guardrails AI Hub)

専用SaaS型(Lakera / Prisma AIRS / Cisco AI Defense / HiddenLayer)

モデルベース型(Llama Guard / Granite Guardian / WildGuard)

国内製品(chakoshi)

料金・ライセンス一覧

【ケース別】どのガードレールを選ぶべきか

AWS中心でBedrockを使っているケース

Azure・Microsoft 365中心のケース

マルチクラウド・OSS志向のケース

日本語特化・個人情報保護重視のケース

導入時に見落としがちな3つの論点

誤検知と業務影響のトレードオフ

レイテンシ・コストの実測

ガードレール自体への攻撃(guardrail jailbreak)

規制とガードレールの関係

EU AI Act——GPAI義務と高リスクAIの適用スケジュール

OWASP LLM Top 10 2026版

総務省ガイドラインとNIST AI RMF

業務エージェントとガードレールを一体で設計するなら

まとめ

AIガードレールとは?生成AIの入出力を機械的に制御する仕組み

AIガードレールとは

AIガードレール(AI guardrails)とは、生成AIやAIエージェントが有害な出力・情報漏えい・意図しない行動を起こさないよう、入出力をリアルタイムに検査して制御する仕組みの総称です。

名称は道路脇のガードレールに由来し、AIが企業のセキュリティポリシーや業務ルールから「逸脱」しないよう境界線を設ける役割を担います。


2026年に入ってOpenAI・Anthropic・AWS・Microsoft・Googleが相次いでエージェント向けのガードレール機能を強化し、OWASPがLLM Top 10 2026版でガードレール関連のリスクを再整理したことで、生成AIを業務に組み込む際の前提条件として位置づけが固まってきました。

AIガバナンスとの位置づけ

AIガバナンスとの位置づけ

AIガードレールは、よく混同されるAIガバナンスとは層が異なる概念です。

AIガバナンスが「どのAIを・どの業務で・誰の責任で使うか」を定めるポリシー・組織・プロセス層であるのに対し、AIガードレールはそのポリシーを実装レイヤーで強制する機械的な制御層を指します。


例えば「個人情報は外部APIに送信しない」というポリシーをAIガバナンスで定めた場合、実際に送信前のプロンプトからPIIを検出・マスキングする仕組みがAIガードレールです。

ガバナンスだけでは人的ミスを完全には防げず、ガードレールだけでは「そもそも何を守るべきか」の優先順位が曖昧になるため、両者はセット運用が前提になります。

AI Agent Hub1


AIガードレールが止める3種類のリスク

AIガードレールが止める3種類のリスク

AIガードレールが具体的に何を防いでいるかは、2026年時点で3種類に整理できます。

このセクションでは、企業の生成AI利用で実際に発生している事故パターンを3つに分けて整理し、それぞれにガードレールがどう効くかを示します。

機密情報・個人情報の漏えい

機密情報・個人情報の漏えい

代表的な事故パターンに、社員が業務プロンプトに機密情報・顧客個人情報・ソースコードを貼り付けて外部AIに送信してしまうケースがあります。

2023年のSamsung社員によるソースコード流出事例以降、各国の企業で類似インシデントが続発しており、IPA 10大脅威2026でも組織編の上位に生成AI経由の情報漏えいが位置づけられました。


入力ガードレールの代表的な役割は、プロンプト本文に含まれるPII(氏名・住所・マイナンバー・クレジットカード番号等)・社内コードネーム・APIキーといった要素を正規表現または分類モデルで検出し、送信前にブロックまたはマスキングすることです。

Amazon Bedrock Guardrailsの「Sensitive information filters」や、Azure AI LanguageのText PII検出(プロンプト送信前のPII検出・マスキング)、Microsoft FoundryのPIIフィルター(モデル応答に対するPII検出)がこの役割を担います。

ハルシネーション・事実誤認による業務事故

ハルシネーション・事実誤認による業務事故

生成AIが根拠のない情報を自信を持って返す「ハルシネーション」は、カスタマーサポートや契約文書生成の現場で業務事故を引き起こします。

実在しない料金プランを案内するケースや、契約書に存在しない条項を自動生成するケースは、カスタマーサポート・契約業務の文脈で業務事故につながるリスクとして指摘されています。


出力側のガードレールでは、生成された回答がRAGで取得した参照ソースと整合しているかを検証する「contextual grounding checks」が有効です。

Amazon Bedrock Guardrailsのcontextual grounding checksや、Azure AI Content Safetyの「Groundedness detection(preview)」が代表的な実装で、ソースと矛盾する応答・ソースに無い情報の付加を検出してブロックまたはフラグ付けします。

プロンプトインジェクションとジェイルブレイク

プロンプトインジェクションとジェイルブレイク

攻撃者が外部文書・Webページ・画像のEXIFなどに悪意ある指示を埋め込み、AIに本来の役割を逸脱させるプロンプトインジェクションは、OWASP LLM Top 10 2026版でもLLM01として最上位に位置づけられています。

直接攻撃(ユーザーが明示的に悪意ある指示を入れる)だけでなく、RAGの参照先ドキュメント経由の間接攻撃も実運用で確認されています。


ガードレールでは、Azure Prompt Shieldsのjailbreak検出、Bedrock Guardrailsの「Prompt Attack」フィルタ、NeMo Guardrailsのjailbreak detection railが代表的な対抗手段です。

Azure Prompt Shieldsは2025年に追加した「Spotlighting」機能で、埋め込まれた間接指示を元文書と区別して検出する能力を強化しています。


どこで何を止めるか——AIガードレールの技術スタック

AIガードレールの技術スタック

AIガードレールは単一のフィルタではなく、生成AIの処理フロー上の複数ポイントに配置された防御層の集合体です。

NVIDIA NeMo Guardrailsのガードレール概念図
NVIDIA NeMo Guardrailsが示すガードレール概念——Toxicity・Out of Domain・Third-Party Applications・Biasの4軸でLLMを囲む(出典:NVIDIA Developer Blog)

この図のように、ガードレールはLLM本体の挙動を変えるのではなく、周囲に「柵」を立てて逸脱を検出・停止するアプローチを取ります。本セクションでは、各レール層の役割と、どのリスクをどの層で止めるのが設計上妥当かを整理します。

入力ガードレール(Input Guardrails)

入力ガードレール

ユーザーからのプロンプトがLLMに渡る直前に実行される検査層です。

主な検査項目はPII検出・プロンプトインジェクション検出・社内ポリシー違反の禁止トピック・特定キーワードのブロックリストで、問題を検知した場合はリクエストを拒否するか、該当部分をマスキングして通す選択をします。


性能面では、生成AI呼び出しの前段に追加のモデル推論が入るため低レイテンシ化が最優先設計になります。Fiddler GuardrailsがNVIDIA NeMo Guardrailsにネイティブ統合した際、応答時間100ミリ秒未満を打ち出したのはこの要件に応えるためです。

出力ガードレール(Output Guardrails)

出力ガードレール

LLMが生成した応答がユーザーに返される直前の検査層です。

有害コンテンツ(Hate / Insults / Sexual / Violence / Self-harm等)の分類、ハルシネーション検出、著作権保護されたコンテンツの検出、構造化出力の形式整合性チェック(JSON Schema準拠等)を担います。


入力ガードレールと組み合わせることで「怪しいリクエストは入り口で、怪しい出力は出口で」止める二段構えの防御になります。

出力側はストリーミング生成との両立が設計課題で、チャンク単位で逐次検査するか、全文生成後にまとめて検査するかで実装が分かれます。

対話・取得・実行の中間レール

対話・取得・実行の中間レール

NVIDIA NeMo Guardrailsが整理している5レール分類(input / dialog / retrieval / execution / output)が示すように、入出力以外にも中間層のレールが設計されています。

  • Dialog rail
    対話の流れをColang DSLで記述し、特定トピックへの話題遷移を制御する層

  • Retrieval rail
    RAGで取得したドキュメントの前処理層。社外秘ドキュメント・古い情報・改ざんされた情報を除外する

  • Execution rail
    LLMが呼び出す外部関数・ツールの実行可否を判断する層。AIエージェントの文脈で特に重要

これらの中間レールは、単純な入出力フィルタでは対応できない「対話の文脈」「取得データの信頼性」「ツール実行の正当性」を扱います。

ツール呼び出しガードレール(Tool Guardrails)

ツール呼び出しガードレール

AIエージェントが外部APIやデータベースを呼び出す「ツール使用(function calling)」に対する検査層です。

OpenAI Agents SDKは2025年にInput / Output / Tool の3層ガードレールを整備し、Function Tool単位で実行前後の検査をラップできる設計を打ち出しました。


ツール呼び出しガードレールが止めるのは、プロンプトインジェクションで乗っ取られたエージェントが本来許可されていない操作(決済API呼び出し・社外送信・ファイル削除等)を実行することです。

従来の入出力レールだけでは「生成されたテキスト」しか見ないため、ツール呼び出しの引数レベルでの検査は別層として独立させる必要があります。


AIエージェント特有のガードレール

AIエージェント特有のガードレール

AIエージェントの本番運用が広がった2026年、各ベンダーはエージェント特化のガードレール機能を立て続けに投入しました。

OpenAIの実装ガイドが示すのは、1つのガードレールで全脅威を防ごうとせず、分類器・ルール・モデレーションAPIを多層に重ねて「単一突破では致命的被害を出さない」構成です。
OpenAI Agents SDKの多層ガードレール構成
OpenAIが示すエージェント向けガードレールの多層構成例——関連性分類器・安全性分類器・モデレーションAPI・ルールベース保護(文字数制限/ブラックリスト/正規表現)を組み合わせ、ユーザー入力とLLMの間に多層の検査を配置する(出典:A Practical Guide to Building Agents (OpenAI))

本セクションでは、従来の入出力フィルタでは防げない「エージェント特有のリスク」に対応する3つの代表的機能を整理します。

OpenAI Agents SDKの3層ガードレール

OpenAI Agents SDKの3層ガードレール

OpenAI Agents SDKは、Input Guardrails・Output Guardrails・Tool Guardrailsの3層を標準機能として提供します。

Input Guardrailsは最初のエージェントに対してのみ実行され、並列モード(デフォルト)とブロッキングモードを選択できます。並列モードは生成と同時にチェックを走らせて低レイテンシを実現し、ブロッキングモードはチェック完了後に生成を開始してコストを抑えます。


Tool Guardrailsは Function Tool をラップする形で実装され、「実行前の入力検査」と「実行後の出力検査」の両方を定義可能です。例えば決済APIを呼び出すツールに「金額が10万円を超えたら人間承認を要求する」といったロジックを埋め込めます。

Tripwireが発動すると、ガードレール種別に応じて InputGuardrailTripwireTriggered/OutputGuardrailTripwireTriggered/ToolInputGuardrailTripwireTriggered/ToolOutputGuardrailTripwireTriggered のいずれかの例外が投げられ、エージェントの処理が即座に停止します。

Amazon Bedrock AgentCoreとInvokeGuardrailChecks API

Amazon Bedrock AgentCoreとInvokeGuardrailChecks API

AWSは2026年6月、Amazon Bedrock Guardrailsにエージェント向けの新API「InvokeGuardrailChecks」を追加しました。

従来のBedrock Guardrailsは「ガードレールリソースを事前作成してモデル呼び出しに紐付ける」設計でしたが、新APIはリソースレスで単体のsafeguardを呼び出せます。エージェントループの各ステップで「このステップではPII検出だけ」「次のステップではprompt attack検出だけ」という粒度制御が可能です。


Bedrock AgentCoreがポリシーレベルでGuardrailsをGAサポートしたことで、エージェントの行動ポリシーとガードレールを同じ設計書で管理できるようになりました。

Azure Task Adherence APIによるエージェント逸脱検出

Azure Task Adherence APIによるエージェント逸脱検出

Microsoftは2025年11月、Azure AI Content Safetyに「Task Adherence API」をパブリックプレビューで追加しました。

これはエージェントのツール使用が「ユーザーの指示とズレていないか」「意図せず早すぎるタイミングで実行していないか」を検出する機能で、従来のPII検出やprompt attack検出とは別軸の判定を担います。


Prompt Shields・Spotlighting・Task Adherenceに加えてAzure AI LanguageのText PII検出を組み合わせることで、「入力の有害性」「指示の整合性」「行動の正当性」「出力の安全性」を多層で検査するagentic era向けの積層安全アーキテクチャが実現できます。


主要ガードレール製品・OSSの比較

主要ガードレール製品・OSSの比較

ここからは、2026年時点で選択肢になる主要ガードレール製品・OSSを5カテゴリに分けて整理します。

このセクションでは、クラウドマネージド型・OSSフレームワーク型・専用SaaS型・モデルベース型・国内製品の順に特徴と使いどころを示し、最後に料金・ライセンスを一覧表で比較します。

クラウドマネージド型(Bedrock / Prompt Shields / Model Armor)

クラウドマネージド型

既存のクラウド基盤に組み込まれているガードレール機能で、追加インフラ無しで導入できる点が最大の強みです。

Azureのように「ガードレール単体」ではなく、周辺のアクセス制御・アーキテクチャ設計・モニタリングと組み合わせて提示するのが、2026年のクラウドマネージド型の典型的な売り方です。

  • Amazon Bedrock Guardrails
    Content filters(Hate/Insults/Sexual/Violence/Misconduct/Prompt Attack)・Denied topics・Word filters・Sensitive information filters・Contextual grounding checks・Automated Reasoning checksの6種を搭載。BedrockモデルだけでなくApplyGuardrail APIで任意のLLM応答にも適用可能

  • Azure Prompt Shields / Content Safety
    Prompt Shields(jailbreak検出・Spotlighting)、Analyze text/image(Hate/Violence/Sexual/Self-harm)、Groundedness detection(preview)、Protected material detection、Task adherence APIを統合。Azure OpenAI/Foundry deploymentでは標準でContent Safetyが有効化される

  • Google Model Armor
    Vertex AI・GKE・Gemini Enterpriseと統合し、prompt injection・sensitive data leakage・tool poisoningに対応。Floor Settingsを組織・フォルダ・プロジェクト単位で設定可能

マネージド型はベンダーロックインの反面、SLA・リージョン対応・既存IAMとの統合で運用負荷を大幅に下げられます。

OSSフレームワーク型(NeMo Guardrails / Guardrails AI Hub)

OSSフレームワーク型

自社でホスティングし、任意のLLMと組み合わせられるOSSフレームワークです。

  • NVIDIA NeMo Guardrails
    Apache 2.0ライセンス、GitHub stars 約7.3k(2026年10月時点)。5レール分類(input/dialog/retrieval/execution/output)とColang DSLで対話フローを宣言的に制御。

    v0.24.1でIORails(並列実行エンジン)、OpenAI互換サーバー、GuardrailsMiddleware(LangChain Agent向け)、Fiddler Guardrailsネイティブ統合に対応

  • Guardrails AI Hub
    70+の検証器(PII・jailbreak・factuality・formatting・code exploits・brand risk)を提供。GitHub stars 約7.6k(2026年10月時点)。

    v0.11.0以降は検証器がPyPI配布へ移行し、旧Hub CLI・独自レジストリは非推奨となった。カスタム検証器はPythonで実装し、RAIL仕様は出力構造や適用する検証ルールを宣言的に定義する役割を担う

NeMo Guardrailsは「対話フロー制御」まで含めた総合フレームワーク、Guardrails AI Hubは「検証器ライブラリ」の性格が強く、プロジェクトの重心で使い分けます。

専用SaaS型(Lakera / Prisma AIRS / Cisco AI Defense / HiddenLayer)

専用SaaS型

AIセキュリティ特化のSaaS/製品群で、企業買収を経てセキュリティ大手の製品ラインに統合された経緯があります。

  • Lakera Guard(Check Point傘下)
    プロンプトインジェクション対策に特化。2025年10月にCheck Pointによる買収が完了し、既存のネットワークセキュリティ基盤との統合が進む

  • Prisma AIRS(Palo Alto Networks)
    旧Protect AI の機能を統合したAIセキュリティ基盤。モデル検査・レッドチーミング・実行時保護を1プラットフォームで提供

  • Cisco AI Defense
    AIアプリ・エージェントの検査、MCP(Model Context Protocol)サーバーの検査まで対応。旧Robust Intelligenceの技術をベースにシスコのネットワーク製品群と統合

  • HiddenLayer
    AIモデルを攻撃から守る専業セキュリティ基盤。モデルスキャン・MLOps統合に強み

専用SaaS型は既存のセキュリティ運用(SIEM・SOC・EDR)とフィード連携できる点が、クラウドネイティブ型との差別化軸です。

モデルベース型(Llama Guard / Granite Guardian / WildGuard)

モデルベース型

安全性判定を専門に学習したLLMで、自社でホスティングできる点が特徴です。

  • Llama Guard 3(Meta)
    8B(Llama 3.1ベース)と1B(Llama 3.2ベース)の2サイズ。8言語対応、128kコンテキスト、14リスクカテゴリに対応。Llama Community License。コンテンツモデレーションに強く、プロンプトインジェクション検出は相対的に弱いとされる。画像入力に対応するLlama Guard 4や、攻撃プロンプト検出に特化したPrompt Guard 2も合わせて提供されている

  • IBM Granite Guardian 4.1
    8Bサイズで公式公開(2026年4月リリース)、Apache 2.0ライセンス。IBM AI Risk Atlasに整列し、プロンプトインジェクション・ハルシネーション検出に強みがあるとされる

  • WildGuard・Qwen3-Guard
    WildGuardは良性クエリへの過剰ブロックが少なく、Qwen3-Guardはヒンディー語・ベトナム語など多言語で他モデルを上回る

強みが補完的なモデルを組み合わせる構成も検討価値があります。公式モデルカードや第三者ベンチマークの傾向を踏まえると、コンテンツモデレーションに強いモデルとプロンプトインジェクション検出に強いモデルを組み合わせることで、

単一モデルの弱点を補える可能性があります。採用時は自社のトラフィック・リスクカテゴリで実測評価を行うことが前提になります。

国内製品(chakoshi)

国内製品chakoshi

日本語の間接表現・文化的ニュアンスに特化したLLMガードレールです。

chakoshiは、NTTドコモビジネス(旧NTTコミュニケーションズ)が開発・提供するガードレールサービスで、2025年2月にパブリックβを公開、2026年度グッドデザイン賞を受賞しました。経済産業省・NEDO主催のGENIAC-PRIZE安全性カテゴリで2位を獲得しています。


特徴は、キーワードフィルタだけでは捉えきれない日本語の暗黙的表現・文化依存の有害表現を検出する点、独自チューニングモデルを使うためIT環境に応じてオンプレミス構成を検討できる点、使用LLMを問わないラッパー構成である点です。

料金・ライセンス一覧

以下の表で、主要ガードレールの料金体系とライセンス形態を整理しました。この表の価格情報は2026年10月時点の公式情報に基づきますが、SaaS・サブスク製品は条件変更が多いため導入時は各社公式ページで最新確認が必須です。

製品 提供形態 ライセンス/料金 対応環境
Amazon Bedrock Guardrails AWSマネージド 従量課金(テキスト分析単価) Bedrockモデル全般+ApplyGuardrail API
Azure Prompt Shields / Content Safety Azureマネージド Freeは月5,000テキストレコード+5,000画像、Standardは1,000レコード・1,000画像単位の従量課金 Azure OpenAI/Foundry deployments
Google Model Armor Google Cloudマネージド 従量課金 Vertex AI・GKE・Gemini Enterprise
NVIDIA NeMo Guardrails OSS Apache 2.0(自社インフラ必要) 任意のLLM・LangChain等
Guardrails AI Hub OSS 商用利用可(検証器ごとに個別ライセンス) 任意のLLM
Lakera Guard SaaS 要問い合わせ(Check Point製品群) API統合
Llama Guard 3 OSSモデル Llama Community License(商用条件あり) 自社GPU・推論基盤
IBM Granite Guardian 4.1 OSSモデル Apache 2.0(商用自由) 自社GPU・推論基盤
chakoshi SaaS(オンプレ構成相談可) パブリックβは無償・商用提供は要問い合わせ 任意のLLM

マネージド型は従量課金で初期費用ゼロが基本、OSS型は自社GPUの運用コストが実質的な費用になります。

AI研修


【ケース別】どのガードレールを選ぶべきか

ここまでの製品群を踏まえ、企業がどの状況でどの製品を第一候補にすべきかをケース別に整理します。

実務での判断軸は「既存クラウド基盤」「扱うデータの機密度」「エージェント化の進度」「日本語比率」の4つで、以下の4パターンに整理すると判断が速くなります。

ケース別:どのガードレールを選ぶべきか

AWS中心でBedrockを使っているケース

Amazon Bedrock Guardrailsを第一候補にします。

既存のBedrockモデル呼び出しにガードレールIDを紐付けるだけで有効化でき、追加のインフラ運用が発生しません。ApplyGuardrail APIを使えば、Bedrock以外のLLM応答にもフィルタをかけられるため、マルチモデル環境でも使い回しが効きます。


さらにエージェント化が進んでいる場合は、2026年6月にGAしたBedrock AgentCoreのポリシーレベルGuardrails統合と、InvokeGuardrailChecks APIで粒度を細かく制御する運用に進めます。

Azure・Microsoft 365中心のケース

Azure Prompt Shields + Content Safetyの組み合わせが第一候補です。

Azure OpenAIやMicrosoft FoundryのdeploymentではContent Safetyが標準有効なので、追加設定はPrompt Shields・Groundedness detection・Task adherenceの個別チューニングに集中できます。


Microsoft 365 Copilot・Copilot Studio中心のエージェント運用なら、Task Adherence APIによる「エージェントのツール使用の意図ズレ検出」が特に効果を発揮します。

既存のEntra ID権限管理・Microsoft Purviewのデータ分類とも連携しやすく、Copilotの対話イベントはPurview Auditの CopilotInteraction レコードで追跡できる点も実務的なメリットです。

マルチクラウド・OSS志向のケース

NVIDIA NeMo Guardrails + モデルベース2モデルアンサンブルを推奨します。

NeMo GuardrailsはOpenAI・Azure・Anthropic・HuggingFace・NVIDIA NIMと組み合わせられ、特定クラウドにロックインしません。v0.24系のGuardrailsMiddlewareでLangChain/LangGraphエージェントとも標準統合します。


検出モデルはLlama Guard 3(コンテンツモデレーション)とIBM Granite Guardian 4.1(プロンプトインジェクション・ハルシネーション)を組み合わせる構成が、公式モデルカードの得意領域を踏まえると検討価値があります。両

モデルともHugging Faceで配布されており、自社GPUインフラ上で動かせます。

日本語特化・個人情報保護重視のケース

chakoshiをコアに置き、クラウドマネージドで補完する構成が有効です。

chakoshiは日本語の暗黙的表現・敬語の裏にある意図検出に強みがあり、IT環境に応じたオンプレミス構成の相談も可能です。金融機関・医療機関・公的機関のように個人情報が国外に出ること自体が規制上の問題になる組織に向きます。


補完として英語コンテンツや国際的なプロンプトインジェクション手法への対応にAzure Prompt ShieldsまたはLlama Guard 3を併用すると、日本語特化と汎用性のバランスが取れます。


導入時に見落としがちな3つの論点

導入時に見落としがちな3つの論点

ガードレール製品を選び終えても、本番運用で詰まる論点は別にあります。

このセクションでは、PoCから本番展開に進む段階で実際に問題になりやすい3つの観点を整理します。

誤検知と業務影響のトレードオフ

誤検知と業務影響のトレードオフ

ガードレールの検出閾値を厳しくすればするほど、正当な業務プロンプトを誤ってブロックする頻度が上がります。

PII検出で「田中」「山田」のような姓を人名として過剰検出した結果、お客様対応メールの草稿作成がブロックされ続ける、といった運用上の課題はよく指摘されます。閾値のチューニング・業務カテゴリ別の例外設定・社内フィードバックループは、本番運用で必ず必要になります。


Azure Content SafetyはSeverity levelを4段階(0/2/4/6)で設定でき、Bedrock GuardrailsもNone/Low/Medium/Highで強度を変えられます。初期は中強度で設定し、業務フィードバックに応じて段階的に調整するのが現実的な進め方です。

レイテンシ・コストの実測

レイテンシ・コストの実測

ガードレールは生成AI呼び出しの前段・後段に追加の推論を挟むため、レスポンス時間とコストの両方に影響します。

入力レール+出力レールの2段構成だと、素のLLM呼び出しに対して追加の推論が2回入ります。Fiddler Guardrailsが「100ms未満」を打ち出しているのは、この追加レイテンシを体感できないレベルに抑える必要があったためです。


コスト面では、Azure Content Safetyは「1,000テキストレコードあたり」「1,000画像あたり」の従量課金(1レコードは最大1,000文字)で、Freeティアは月5,000レコード・5,000画像まで無料です。Bedrock Guardrailsもテキスト分析単位の従量課金で、両者とも事前の試算が必要です。トラフィック量の試算と、ガードレールあり・なしでのEnd-to-Endレイテンシ測定は、PoC段階で必ず実施すべき工程です。

ガードレール自体への攻撃(guardrail jailbreak)

ガードレール自体への攻撃

ガードレールは万能ではなく、ガードレール自体を突破する攻撃手法も進化しています。

分類モデルを混乱させる敵対的サンプルの応用、長文プロンプトでコンテキスト枠を埋めてガードレール判定を押し出す手法、多言語への切り替えで言語別の検出精度差を突く手法が報告されています。敵対的サンプルの技術は、ガードレールモデルにも適用されます。


対策は、単一モデルに依存しない複数層防御(defense in depth)です。入力・出力・ツール呼び出しの3層+モデルベース2モデルアンサンブルの構成なら、1層が突破されても他層で検出できる確率が高まります。

ガードレールの検知ログをAIレッドチーミングの継続的な評価サイクルに組み込み、新しい攻撃手法への更新を回す運用が長期的には必要です。


規制とガードレールの関係

規制とガードレールの関係

2026年、ガードレールの位置づけは「あったほうがよい」から「調達要件や社内コンプライアンス対応で検討対象になる実装候補」へと変わりつつあります。

このセクションでは、ガードレール実装に直接影響する3つの規制・標準と、企業の実装粒度に対する具体的な要求事項を整理します。

EU AI Act——GPAI義務と高リスクAIの適用スケジュール

EU AI Act GPAI義務と高リスクAIの適用スケジュール

EU AI Actは段階的に適用されており、2025年〜2028年にかけて主要な義務が順次発効します。

  • 2025年2月2日: Article 5の禁止慣行規定が適用開始(一部例外あり)
  • 2025年8月2日: GPAI(General-Purpose AI)モデルプロバイダー向けの義務(Chapter V)とガバナンス規定が適用開始
  • 2027年12月2日: Annex IIIに該当する高リスクAIシステムの義務が適用開始(当初2026年8月予定から延期)
  • 2028年8月2日: Annex Iに該当する高リスクAIシステムの義務が適用開始

ガードレール実装に関係するのは主にGPAIプロバイダー向け義務(モデル開発者側)で、技術文書・学習データサマリ・著作権方針などが要件に含まれます。

企業がLLMを業務組み込みする立場では直接の義務対象ではないものの、調達要件としてベンダーのGPAI義務適合を求める動きが出ています。ガードレール自体の実装がEU AI Actで義務化されているわけではない点には注意が必要です。

OWASP LLM Top 10 2026版

OWASP Top 10 for LLM Applications 2026表紙
OWASP Top 10 for LLM Applications 2026版の公式表紙(2026年8月4日公表)(出典:OWASP GenAI Security Project)

OWASP LLM Top 10 2026版

OWASP GenAI Security Projectは2026年8月4日、LLM Top 10の2026版を公表しました。

今回の改訂では、実インシデントデータとの照合を初めて採用し、コミュニティ投票75%+カタログ化されたAI関連インシデント7,714件(うち分類可能6,639件)のデータ重み付け25%で順位を決定しています。


主な変更点は以下です。

  • Prompt Injection(LLM01)は過去全ての版と同じく最上位を維持
  • Excessive Agency(過剰権限)が6位から3位に上昇、AIエージェント文脈の重要性を反映
  • Unbounded Consumption(無制限消費)が10位から6位に上昇
  • Improper Output Handling(不適切な出力処理)が5位から10位に後退
  • 旧「System Prompt Leakage」が「Hidden Context Exposure」に名称変更

OWASPはLLM Top 10に加えて、エージェント向けの脅威分類「Top 10 for Agentic Applications」(ASI01〜ASI10)と、エージェント制御の設計標準「Agent Control Standard」も公表しており、ツール実行・権限範囲・自律性の制御についてはこれら別標準を参照先として押さえておきます。


ガードレール設計への示唆は、入出力フィルタだけでなく、エージェントの権限範囲(Excessive Agency)とリソース消費(Unbounded Consumption)の制御も実装スコープに含めるべき、という方向です。

総務省ガイドラインとNIST AI RMF

総務省ガイドラインとNIST AI RMF

国内では、総務省が2026年3月27日に公表したAIセキュリティガイドラインが、AI開発者・提供者向けの技術対策を具体化しました。

プロンプトインジェクション・DoS対策・情報漏えい防止の各項目で、ガードレール実装が推奨対策として明記されています。


国際的な整合では、NIST AI Risk Management Framework(AI RMF)の4コア機能(Govern / Map / Measure / Manage)が参照軸になります。

GovernレイヤーでAIガバナンスを定め、MapレイヤーでAIリスクを特定し、MeasureレイヤーでガードレールのKPI(検知率・誤検知率・レイテンシ)を測定し、Manageレイヤーで継続改善する——という循環が、2026年のエンタープライズAI運用の実装モデルになっています。

メルマガ登録


業務エージェントとガードレールを一体で設計するなら

ガードレール単体の導入は、生成AIを安全に動かすための必要条件ですが十分条件ではありません。多くの企業は、入出力フィルタの導入だけでなく、エージェントの実行層・権限管理・不変の監査ログを合わせて設計する段階に進んでいます。特にOWASP LLM Top 10 2026版が重視する「権限範囲制御(Excessive Agency)」「リソース消費制御(Unbounded Consumption)」や、GPAI規制の文脈で求められる技術文書・ログ記録の方針は、ガードレール製品の設定だけでは十分に満たせず、業務エージェント基盤側の設計が必要になります。

このレイヤーを担うのが、自社テナント内で動くエンタープライズAIエージェント基盤です。AI総合研究所のAI Agent Hubは、Teamsから呼び出せる業務特化Agent群を1つのダッシュボードで統合管理し、ガードレール・権限管理・監査ログを一体で設計できる運用基盤として機能します。

  • Azure Content Safety + Prompt Shieldsを標準統合
    Agent Hub上のすべてのエージェント呼び出しに対して、Prompt Shields・PII detection・Task adherenceを標準で有効化。個別実装の手間なしでガードレール層が立ち上がります。

  • Agent単位の権限範囲設計
    エージェントごとに利用可能なツール・データソース・社内システムへのアクセス範囲を明示的に設計。OWASP LLM Top 10のExcessive Agency対策を実装レベルで満たします。

  • 不変の監査ログを標準保管
    誰が・どのAgentで・何を照会したかをAzure Monitorに不変ログとして保存。NIST AI RMFのManage機能や、調達要件・コンプライアンス対応で参照されるトレーサビリティをそのまま提出できる形で保管します。

  • データは100%自社Azureテナント内に保持
    業務コード・顧客情報・社内文書はAIの学習対象から完全除外。Azure Managed Applicationsとして自社テナント内で処理が完結する設計です。

AI総合研究所の専任チームが、ガードレール製品選定から業務エージェント基盤の統合設計までを一貫して支援します。AI Agent Hubのサービスページで、ガードレール・権限・監査ログを統合した実装例を確認してみてください。

ガードレールを業務エージェントの設計に組み込む

AI Agent Hub

入出力制御を運用まで含めて設計する

生成AIを社内業務で動かすには、入出力ガードレールを単体製品として追加するだけでは足りません。業務エージェントの実行層・権限・監査ログと合わせて設計する必要があります。AI Agent Hubのサービスページで、ガードレール・権限管理・不変ログを統合した自社テナント内のAIエージェント基盤の設計例を体系的に確認できます。


まとめ

本記事では、AIガードレールについて、定義・3種類のリスク・技術スタック・エージェント特有の機能・主要製品比較・ケース別の選び方・導入時の論点・規制との関係を、2026年10月時点の最新情報で解説しました。

2026年時点で押さえておくべきポイントは次の3つです。

  • AIガードレールは入力・出力・ツール呼び出しの3層で防御を分散させる設計が主流で、特にAIエージェントではツール呼び出し層のガードレールが要となる
  • クラウドマネージド(Bedrock・Azure・Google)・OSSフレームワーク(NeMo・Guardrails AI Hub)・モデルベース(Llama Guard・Granite Guardian)・国内特化(chakoshi)は得意領域が異なり、既存クラウド基盤と日本語比率で第一候補が決まる
  • EU AI Act GPAI義務(2025年8月発効)とOWASP LLM Top 10 2026版は、ガードレール単体ではなく「権限範囲制御・ログ記録・継続改善」までを含む統合設計を検討する契機となっている

生成AI利用がPoC段階を超えて本番運用に入った組織にとって、ガードレールは単なる「追加機能」ではなく、調達要件・社内コンプライアンス対応の文脈で検討対象になる実装候補として扱われるようになっています。まずは自社の既存クラウド基盤に合うマネージド型ガードレールの導入から始め、エージェント化・権限管理・監査ログまでを統合的に設計する次のフェーズに進むのが、2026年時点で現実的な進め方です。

監修者
坂本 将磨

坂本 将磨

Microsoft MVP・AIパートナー。LinkX Japan株式会社 代表取締役。東京工業大学大学院にて自然言語処理・金融工学を研究。NHK放送技術研究所でAI・ブロックチェーンの研究開発に従事し、国際学会・ジャーナルでの発表多数。経営情報学会 優秀賞受賞。シンガポールでWeb3企業を創業後、現在は企業向けAI導入・DX推進を支援。

関連記事

AI導入の最初の窓口

お悩み・課題に合わせて活用方法をご案内いたします
お気軽にお問合せください

AI総合研究所 Bottom banner

ご相談
お問い合わせは
こちら!