B2Shift · 公開されました 2026年8月3日 · 更新されました 2026年8月14日

ビジネスにおける AI の安全性インシデントのほとんどは、モデルの失敗ではありません。それらはアクセス障害です。システムは、チェックポイントなしで動作し、何を行ったかの記録を残さず、タスクに必要な量を超えるデータにアクセスできる可能性があります。それを防ぐ制御は通常のエンジニアリング手法であり、意図的に適用されます。

データの最小化と目的の文書化から始める

GDPR に対応した自動化は、コードを作成する前に開始されます。ワークフローの目的、本当に必要な個人データ、およびそのデータを保持する必要がある期間を書き留めます。次に、システムを一致させます。ワークフローが実際に必要とするフィールドとシステムのみにアクセスできるようにする必要があります。付与が簡単であるため、CRM 全体ではなく、アクセス可能にする必要があります。

これは、実装するのに最も安価な制御でもあり、改造するのに最も高価な制御でもあります。後でアクセスを拡大するには、構成を変更します。システムが 1 年間稼働した後にその範囲を狭めるということは、そのシステムに密かに依存するようになったものを発見することを意味します。

元に戻せないアクションにゲートを設定する

すべてのステップに承認が必要なわけではありません。すべてのステップを同じように扱うことで、ユーザーはクリックスルーすることができます。可逆性によってアクションを分割します。読み取り、分類、ドラフト、ルーティングは通常、無人で実行できます。送金、価格の公表、苦情への返信、記録の削除など、あなたの名前で顧客に届くあらゆる行為には、人間のゲートが必要か、少なくとも人間が介入できる遅延期間が必要です。

ロールベースのアクセスは同じ会話に属します。自動化は、管理者の資格情報を借用するのではなく、独自の ID と独自の権限で動作する必要があります。これは、セキュリティ上の問題であると同時に監査上の問題でもあります。これは、その後、ログ内で人間とマシンを区別できなくなるためです。

すべての意思決定を再構築可能にする

すべてのアクションは、監査記録を残す必要があります。つまり、何がトリガーされたか、どのようなコンテキストが使用されたか、システムが何を決定したか、どのような信頼度があったのか、人間が承認したかどうか、その結果何が変化したかなどです。これは、顧客が初めて何かに異議を唱えるまでは、コンプライアンスのオーバーヘッドのように聞こえますが、その時点では、それが推測との間に立ちはだかる唯一のものです。

信頼性の取り扱いもここに属します。ワークフローには、信頼性の低いケースに対する明示的なパスが必要です。つまり、黙って最良の推測に導くのではなく、指名された人物またはキューに至るまでです。あなたが望む失敗モードは、「これは人間に起こった」であり、「これは問題が発生し、3週間誰も気付かなかった」ではありません。

モデルがどこで実行され、何が保持されるかを把握する

プロバイダーに対して 3 つの質問をしてください: データはどこで処理されるのか、保持されるのか、トレーニングに使用されるのか。答えは、同じベンダーのコンシューマ製品とビジネス層の間、およびホスト型展開とプライベート展開の間で大きく異なります。規制されたデータの場合、展開の選択 (EU 地域、プライベート ホスティング、またはセルフホスト型オープン モデル) は優先事項ではなく、コンプライアンスに基づいて決定されます。

AI モデルに関する欧州データ保護委員会の意見は、アーキテクチャに取り組む前に読む価値のある参考資料です。モデルの出力とトレーニング データがデータ保護義務に関わる場合をカバーします。

技術的な制御ではできないこと

上記のすべてによりリスクが軽減されます。そのいずれも、処理の法的根拠を確立したり、プライバシー通知の草案を作成したり、データ保護の影響評価が必要かどうかを決定したり、管理者または処理者としての責任を解決したりするものではありません。これらは特定のユースケースと関係者によって異なり、エンジニアリング的なレビューではなく法的なレビューが必要です。優れたコントロールにより、レビューが簡単になります。彼らはそれを置き換えません。

ソース

European Data Protection Board — Opinion 28/2024 on AI models

European Commission — AI Act

ワークフローについて話し合う