コンテンツにスキップ
LinkedInX

Human-in-the-LoopとHuman-over-the-Loopの違い

約10分

対象読者: AIエージェントや業務AIの承認フロー・監督設計を検討している方、Human-in-the-Loopという言葉を実務設計に落とし込みたい方

Human-in-the-Loop(HITL)は、AIの判断や行動が確定する前に人間が確認・承認する設計です。Human-over-the-Loop(HOTL)は、人間が個別判断を毎回承認するのではなく、AIが動く目的・制約・ポリシー・停止条件を上位から定義する設計です。人間とAIの関係を in/on/over のように整理する文献では、関与の位置と責任の置き方が監督設計の論点になります。[1][2]

簡単に言うと、HITLは「この1件を実行してよいか」を人間が見る仕組み、HOTLは「AIにどこまで任せてよいか」を人間が決める仕組みです。

「Human-over-the-Loop」は、「Human-on-the-Loop」と同じ意味で使われることがあります。ただし、近年の人間とAIの関係を整理する文献では、次のように分けて説明されることがあります。[1][2]

用語人間の位置づけ典型的な意味
Human-in-the-Loop個別判断の中に入るAIの出力・行動を実行前に確認・承認する
Human-on-the-Loop運用中の監視者になるAIは自律実行し、人間は監視して必要時に介入する
Human-over-the-Loop上位の統制者になる人間が目的・制約・ポリシーを定義し、AIはその範囲で実行する

このページでは、Human-over-the-Loopを「個別承認ではなく、戦略的な統制を担う設計」として扱います。

Human-in-the-Loopとは、AIの処理フローの中に人間の判断点を組み込む設計です。AIは候補を作成したり、リスクを分類したり、次のアクションを提案したりしますが、最終的な実行には人間の確認が必要です。

graph LR
    A["入力"] --> B["AIが提案・判定"]
    B --> C["人間が確認"]
    C -->|承認| D["実行"]
    C -->|修正| E["修正して実行"]
    C -->|却下| F["停止"]

HITLが向いているのは、1件ごとの判断ミスが大きな損害につながる場面です。NIST AI RMFはAIリスク管理で人間の監督、説明責任、影響評価を重視しており、高影響の判断では人間が責任を持てる設計が必要です。[3]

  • 契約書・法務文書の最終確認
  • 高額な支払い、返金、発注
  • アカウント停止、採用判断、融資判断
  • ファイル削除、メール送信、外部システム更新
  • 医療・教育・公共サービスなど、人の生活に直接影響する判断

HITLの強みは、AIの速度と人間の責任ある判断を組み合わせられることです。一方で、すべての処理に人間承認を入れると、処理速度が落ち、レビュー担当者が疲弊し、形だけの承認になりやすい点に注意が必要です。

Human-over-the-Loopとは、人間がAIの上位に立ち、AIが動く目的・制約・権限・評価基準を設計する監督モデルです。人間は毎回の出力を確認するのではなく、「どの条件なら自動実行してよいか」「どの条件なら停止・エスカレーションするか」を事前に決めます。

graph TD
    P["人間が目的・ポリシー・制約を定義"] --> A["AIが範囲内で自動実行"]
    A --> M["監視・ログ・評価"]
    M --> R{"逸脱・高リスク?"}
    R -->|No| A
    R -->|Yes| H["人間が介入・ポリシー更新"]
    H --> P

HOTLが向いているのは、処理量が多く、個別承認を毎回入れると運用が成立しないが、人間が責任を持てる統制は必要な場面です。NIST AI RMFのGOVERN/MAP/MEASURE/MANAGEのように、事前の目的設定、監視、評価、改善を継続する発想と相性があります。[3]

  • カスタマーサポートの自動返信で、低リスク問い合わせだけ自動化する
  • セキュリティ監視で、低信頼度・高影響のアラートだけ人間に送る
  • AIエージェントに調査・下書き・分類を任せ、外部影響のある操作だけ制限する
  • 社内ナレッジ検索で、公開範囲・引用ルール・禁止データをポリシー化する
  • ガバナンス委員会がAI利用基準、評価基準、停止条件を定期的に更新する

HOTLの強みは、AIのスケールを活かしながら、人間が目的と境界を握れることです。一方で、ポリシーが曖昧だと、実質的には「AI任せ」になります。ログ、監査、停止権限、責任者の定義が必要です。

観点Human-in-the-LoopHuman-over-the-Loop
人間の関与点個別判断の途中設計・監督・例外対応
AIの自律性低〜中中〜高
人間の主な役割承認、修正、却下目的設定、制約設定、監査、改善
処理速度遅くなりやすい高速化しやすい
スケール人間レビュー数に制約されるポリシーと監視で拡張しやすい
向くリスク高リスク、不可逆、法的影響あり中〜高リスクを継続運用するシステム
失敗しやすい形形式的な承認、レビュー疲れ曖昧なポリシー、監査不能、責任不明

HITLとHOTLはどちらか一方を選ぶものではありません。実務では、HOTLで全体の統制を設計し、重要なチェックポイントだけHITLにする構成が現実的です。

次の4つを見て、どの監督モデルを使うかを決めます。

失敗が金銭・権利・安全・信用に直接影響する場合は、HITLを入れます。たとえば「AIが下書きする」はHOTLで十分なことが多いですが、「AIが顧客に送信する」「AIが契約条件を確定する」はHITLが必要です。

あとから簡単に戻せる操作はHOTLで自動化しやすくなります。取り消しにくい操作、外部へ通知される操作、証跡として残る操作はHITLに寄せます。

判断基準を明確なルール・スコア・しきい値にできるなら、HOTLで運用しやすくなります。判断が文脈依存で、専門家の裁量が大きい場合はHITLが必要です。

4. 人間が処理量に耐えられるか

Section titled “4. 人間が処理量に耐えられるか”

少量の処理であればHITLでも成立しますが、大量処理では全件HITLは現実的ではありません。その場合はHOTLを基本にし、低信頼度・高リスク・未知パターンだけ人間レビューに送ります。

最も実用的なのは、HOTLを土台にして、重要なポイントだけHITLを挟む設計です。

レイヤー設計例
Human-over-the-LoopAI利用ポリシー、禁止操作、承認基準、ログ要件、停止条件を定義する
Human-on-the-Loopダッシュボード、アラート、異常検知で運用状況を監視する
Human-in-the-Loop高リスク操作、低信頼度出力、例外ケースだけ人間承認に回す

たとえばカスタマーサポートAIでは、次のように設計できます。

  1. HOTL: 「返金、契約変更、個人情報を含む回答は自動送信しない」とポリシー化する
  2. HOTL: 回答品質、禁止表現、引用ルール、エスカレーション条件を定義する
  3. AI: 低リスクのFAQ回答を自動生成する
  4. Human-on-the-Loop: 異常なクレーム増加や低評価回答を監視する
  5. HITL: 返金、契約、苦情、低信頼度回答だけ担当者が承認する。[1][2][3]

この構成なら、すべてを人間が見る必要はありません。同時に、重要な判断をAIに丸投げしない設計にできます。

承認ボタンはあるが、レビュー担当者が根拠を確認できない状態です。判断に必要な入力、AIの出力、参照資料、リスク理由、差分が見えなければ、人間は実質的に責任ある判断をできません。

AIが大量の判断を人間に投げ続けると、レビューは流れ作業になります。HITLを使う場合は、優先度付け、サンプリング、しきい値、二次レビューの条件を設計する必要があります。

ポリシーはあるが、AIを止める権限や手順がない状態です。HOTLでは、誰が停止できるか、どの条件で停止するか、停止後に何を記録するかを決めておく必要があります。

「人間が監督している」と言っても、誰が責任者か不明なままではガバナンスになりません。システム所有者、業務責任者、リスク責任者、運用担当者の役割を分けて定義します。

  • AIが自動実行してよい操作と、必ず人間承認が必要な操作を分けているか
  • 高リスク・低信頼度・未知パターンを人間レビューに送る条件が明確か
  • 人間が判断するために必要な根拠、ログ、差分、リスク理由が見えるか
  • 承認者、監視者、停止権限者、最終責任者が定義されているか
  • レビュー負荷が継続運用できる量に収まっているか
  • ポリシー違反や事故が起きたときの停止・記録・再発防止フローがあるか
  • Human-in-the-Loopは、個別の高リスク判断に人間の確認・承認を入れる設計
  • Human-over-the-Loopは、AIが動く目的・制約・ポリシーを人間が上位から統制する設計
  • HITLは安全性に強いが、スケールしにくい
  • HOTLはスケールしやすいが、ポリシー・監査・停止権限が曖昧だと危険
  • 実務では、HOTLで全体を統制し、重要な例外だけHITLにする構成が使いやすい
  1. AAAI, Preposition Salad: Placing Humans & AI in/on/over/along/under ‘the-loop’
  2. Entropy, Human-in-the-Loop Artificial Intelligence: A Systematic Review of Concepts, Methods, and Applications
  3. NIST, AI Risk Management Framework
クイズ