← なぜセキュリティが必要か セキュリティ設計 →

AIの8つの安全装置

IT知識ゼロでも読める、AIエージェントのセキュリティ解説

全体まとめ

これら8つの仕組みはまとめると、**「AIという超優秀だけど、時々大ボケをかましたり暴走したりする危なっかしい助手」から、私たちの大切な個人情報や会社のシステムを守るための「多重の安全装置」**です。

どんなに賢いAIにも人間が100%安心して任せられるわけではないため、このように何重にも「見えないパトロール隊」が私たちを守ってくれているのです。


1. PII自動マスキング — 「自動で黒塗りしてくれる郵便局」

お客さんが「田中太郎(電話番号:090-…)の見積もりを」とAIに送る時、郵便局(プロキシ)が勝手に「〇〇様(電話番号:)」と黒塗りにしてから*AIに渡す仕組みです。

項目 説明
何をする? AIに仕事を頼む前に、名前・住所などプライベートな情報を自動で隠す
これがないと? お客さんの個人情報がAIにそのまま渡り、どこかから漏れる大事故につながる

2. 最小権限+RBAC+非rootユーザー — 「鍵の数を制限されたアルバイト」

外壁を塗るだけのアルバイトに、金庫や社長室のマスターキーは渡しませんよね。「道具箱」と「トイレ」の鍵だけ渡すようなものです。

項目 説明
何をする? AIや担当者に「その仕事に絶対必要な権限だけ」を与える
これがないと? AIが乗っ取られた時、会社のシステム全体を自由に破壊・盗まれてしまう

3. Dockerサンドボックス — 「ガラス張りの密室作業部屋」

激しい料理をさせたいなら、汚れてもいい密室の部屋で作業させる。その部屋の外には汚れが広がらない仕組みです。

項目 説明
何をする? AIの作業場所を完全に切り離し、暴走しても外のシステムに影響が出ないようにする
これがないと? AIが暴走した瞬間にパソコン全体がフリーズ・壊れて業務が完全停止する

4. 外部モデレーションAPI常時監視 — 「優秀なボディーガード兼監視員」

AIがお客さんと話している横に常に監視員が立ち、「爆弾の作り方を教えて」などの危ない会話をしようとしたら即座に口をふさぐようなものです。

項目 説明
何をする? AIの入出力を常時監視し、ルール違反や危険な内容を自動で遮断する
これがないと? AIが悪意ある質問に答えてしまい、会社の極秘情報が外に出る大スキャンダルが起きる

5. CoTログ全件保存 — 「AIの作業カメラ+日記」

AIが「なぜこの答えを選んだのか」「どんな手順で考えたのか」を、常にカメラで録画しながら日記にも書き残しているようなものです。

項目 説明
何をする? AIがどう考えて行動したか、思考プロセスをすべて記録・保存しておく
これがないと? AIが致命的なミスをしても「なぜそうなったのか」が分からず、同じ事故を防げない

6. HITL承認フロー — 「高い買い物は社長のサインが必要」

アルバイト(AI)が100万円の値引きを提案したい時、勝手に決めずに必ず社長(人間)に「これでいいですか?」と確認してサインをもらうようなものです。

項目 説明
何をする? リスクが高い行動は、人間がOKを出すまでAIが実行しない
これがないと? AIの判断ミスで、会社に億単位の損害を与える操作を勝手に実行してしまう

7. Pydantic構造化出力+リトライ — 「うるさい確認マシン」

AIが提出したレポートが決まったフォーマットから外れていたり文字化けしていたりした時、「やり直し!」と自動で突き返すようなものです。

項目 説明
何をする? AIの答えがルール通りでない場合、正しい形になるまで自動でやり直させる
これがないと? AIがめちゃくちゃなデータを出力して、後のシステムがエラーを起こして止まる

8. Redisによる外部ステート管理 — 「安全な外部ロッカー」

作業中のAIが「今どこまで作業したか」「次は何をする予定か」を、自分の頭の中ではなく安全な外部のロッカーにメモとして保存しておくようなものです。

項目 説明
何をする? AIの「作業中の状態や記憶」を外部の安全な保存場所に預けておく
これがないと? AIが途中でフリーズした瞬間に記憶がリセットされ、最初から全部やり直しになる

実装優先度

優先度 項目 理由
最高 PIIマスキング + RBAC データ漏洩リスク直結
最高 HITL承認ゲート 不可逆アクション防止
Sentinelパーサー 非決定的出力への堅牢化
Dockerサンドボックス ホスト環境保護
Redisステート管理 障害耐性・再開可能性
CoTログ全件保存 事後検証・説明責任
通常 モデレーション監視 継続的品質改善