AI Navigator ロゴAI Navigator
· コラムブログ重要度 (64)

Human in the loopとは?AIに承認を残す設計を解説

Human in the loopとは、AIに全部を任せず要所に人の承認を残す設計思想です。in・on・outの3段階、中小企業に必要な理由、どの業務のどこに承認を挟むかを実務目線で解説します。

Human in the loopとは?AIに承認を残す設計を解説

「AIエージェントに業務を任せたいが、勝手に判断されて取り返しのつかないことになったら怖い」。生成AIやAIエージェントの導入を検討する経営者から、よく聞く不安です。この不安に対する現実的な答えがHuman in the loop(ヒューマン・イン・ザ・ループ)という考え方です。結論から言えば、Human in the loopとはAIだけで処理を完結させず、要所に人間の確認や承認を残しておく設計思想のことです。この記事では、言葉の意味と「in・on・out」の3段階の違いを整理したうえで、中小企業がどの業務の、どこに承認を挟めばよいのかを実務目線で解説します。読み終えるころには、「AIに任せる範囲」と「人が握る範囲」を自社で線引きできるようになります。

Human in the loopとは?「AIに全部任せない」という設計思想

AIが作成した書類を人が確認している様子

Human in the loopとは、ひとことで言えばAIの処理の途中や結果に人間が関与し、AIだけで判断を完結させない仕組みのことです。頭文字をとってHITLとも呼ばれます。AIの文脈では、ワークフローのどこかで人間が確認・修正・承認を行うことで、精度・安全性・説明責任を確保することを意味します(IBM)。

なぜ今、この考え方が注目されているのでしょうか。背景には、AIが「もっともらしい誤り」を出す可能性が残っていることがあります。生成AIは事実と異なる内容を自信ありげに出力すること(ハルシネーション)があり、その出力をそのまま業務に使うと、誤った請求書や不正確な顧客対応につながりかねません。

もう一つの背景が、AIエージェントの普及です。従来のチャットAIは「聞かれたことに答える」だけでしたが、AIエージェントはメール送信や予約、データ更新といった実際の行動まで自動で実行します。行動する力を持つからこそ、「どこで人が止められるか」を設計しておくことが欠かせません。Human in the loopは、この全自動化の手前で人の判断を組み込むための考え方なのです。

in / on / out of the loop|人の関わり方の3段階

承認フローの段階をホワイトボードで整理する会議

Human in the loopを理解するうえで欠かせないのが、人の関わり方の3段階です。同じ「AIと人の協働」でも、人がどこまで関与するかで大きく3つに分かれます(AI総合研究所)。

  • in the loop(イン・ザ・ループ):AIが処理した結果を、人が確認・承認してから実行する段階。AIは提案までで、実行のスイッチは人が押します。もっとも慎重な形です。
  • on the loop(オン・ザ・ループ):AIが自動で処理を進め、人はそれを監視し、必要なときだけ介入する段階。基本は任せつつ、例外だけ人が対応します。
  • out of the loop(アウト・オブ・ザ・ループ):人が関与せず、AIが最初から最後まで完結させる段階。いわゆる完全自動化です。

大切なのは、どれか一つを選ぶのではなく、業務やアクションごとに使い分けるという発想です。たとえば同じ経理業務でも、「データの読み取り」は自動(out)でよくても、「振込の実行」は人の承認を必須(in)にする、といった具合です。

判断の目安になるのが、その処理の「影響度」と「取り消しやすさ」です。影響が大きく、あとから取り消しにくい行動ほど、人の承認(in the loop)を厚くする。逆に、影響が小さくやり直しがきく作業は自動に寄せる。このリスクに応じた設計が、Human in the loopを実務に落とし込む要になります。

なぜ中小企業こそHuman in the loopが必要なのか

業務のリスクを検討する中小企業の経営者

「そうした設計は大企業の話で、少人数の会社には大げさでは」と感じるかもしれません。しかし、リソースが限られる中小企業こそ、Human in the loopの考え方が効いてきます。理由は3つあります。

1つ目は、ミスが与える打撃が相対的に大きいことです。大企業なら吸収できる誤請求や顧客対応の失敗も、中小企業では信用の低下や取引停止に直結しかねません。AIの出力を人が最終確認する仕組みがあれば、こうした致命的なミスを未然に防げます。

2つ目は、説明責任と信頼の確保です。AIの判断に人の確認を組み込むことで、「なぜその結論に至ったか」を人が説明できる状態を保てます(ソフトバンク)。顧客や取引先に対して「AIが勝手に決めました」では通用しません。要所に人を残すことは、対外的な信頼を守る土台になります。

3つ目は、AIを継続的に育てられることです。人が修正した内容はAIへのフィードバックになり、使うほど自社業務に合った精度に近づいていきます。人の確認は単なるコストではなく、AIを自社仕様に育てる工程でもあるのです。

つまりHuman in the loopは、AI導入にブレーキをかけるものではなく、安心してアクセルを踏むための仕組みです。人が止められる設計があるからこそ、経営者は自動化の範囲を思い切って広げられます。

承認フローの入れ方|どの業務のどこに人を挟むか

業務の承認フローを運用する担当者

では、実際にどう承認フローを組めばよいのでしょうか。理想のHuman in the loopは、すべての行動を止める仕組みではなく、リスクの高い行動だけを止める設計です(catorce)。すべてに承認を挟めば、結局は手作業と変わらず効率化になりません。次の手順で考えると、実務に落とし込みやすくなります。

  1. 業務を工程に分解する:たとえば「問い合わせ対応」なら、内容の読み取り→返信文の作成→送信、という工程に分けます。
  2. 各工程の影響度と取り消しやすさを評価する:返信文の作成は下書き段階なのでやり直せますが、送信は相手に届いてしまい取り消せません。
  3. 影響が大きく取り消せない工程に承認を挟む:この例なら、「送信」の直前に人の承認を必須にします。読み取りと下書き作成はAIに任せて構いません。

この考え方で整理すると、承認を挟むべき典型的なポイントが見えてきます。

  • お金が動く場面:振込、支払い、見積もりの確定など。
  • 社外に出る場面:顧客へのメール送信、SNS投稿、契約書の提出など。
  • データを変更・削除する場面:顧客情報の更新、ファイルの削除など。

逆に、社内での情報整理・要約・下書き作成といった「やり直しがきく作業」は、思い切って自動に寄せてよい領域です。

運用面では、「誰が承認するか」を1人に決めておくことも重要です。承認者が曖昧だと、結局チェックが素通りになりがちです。最初は承認を厚めに設定し、AIの精度に慣れてきたら少しずつ自動の範囲を広げる。この段階的な進め方が、中小企業にとって最も現実的です。

Human in the loopのデメリットと運用の注意点

運用上の課題を話し合うチーム

便利なHuman in the loopにも、注意すべき点があります。導入前に知っておきたいのが次の3つです。

1つ目は、コストとスピードの低下です。人の確認を挟む以上、処理に時間と手間が発生します(Databricks)。だからこそ前の章のように、承認を挟む場所を絞ることが欠かせません。すべてに人を挟めば、自動化のメリットは失われます。

2つ目は、承認の形骸化です。AIの出力を毎回「問題ないだろう」と流し見でOKし続けると、確認が名ばかりになります。これでは人を挟む意味がありません。チェックすべき観点を具体的に決めておく(金額は合っているか、宛先は正しいか、など)ことで、確認の質を保ちましょう。

3つ目は、確認する人がAIの内容を理解できるかという問題です。承認者がAIの出力を正しく判断できなければ、監視は機能しません。承認を担う人には、AIの得意・不得意や誤りやすいパターンを共有しておくことが、実効性のある運用の前提になります。

これらは「Human in the loopをやめる理由」ではなく、うまく運用するための注意点です。ポイントは、人を挟む場所を絞り、確認の観点を明確にし、承認者に必要な知識を渡すこと。この3つを押さえれば、負担を抑えながら安全性を確保できます。

まとめ

Human in the loopとは、AIだけで処理を完結させず、要所に人の確認や承認を残しておく設計思想です。人の関わり方には、承認してから実行する「in the loop」、監視して例外だけ介入する「on the loop」、完全自動の「out of the loop」の3段階があり、業務やアクションごとに使い分けるのが基本です。使い分けの軸は、その行動の影響度と取り消しやすさ。お金が動く・社外に出る・データを変更する場面には承認を挟み、やり直しがきく社内作業は自動に寄せる。この線引きができれば、中小企業でも安心してAIの自動化を進められます。大切なのは全か無かではなく、リスクの高いところにだけ人を残すという発想です。

AI Navigator では、中小企業が「どの業務を、どこまでAIに任せ、どこに人の承認を残すか」を見極め、安全に運用へ定着させるまでの伴走支援を行っています。「自社の業務のどこに承認を挟むべきか整理したい」という段階でも構いません。まずはサービス紹介をご覧いただき、お気軽にお問い合わせください。

参考ソース