Solutions

誤回答の対策:社内ナレッジ検索の誤りを見つけて直す

AIは、文書にない内容をもっともらしく答えることがあります。誤りをゼロにすることは約束できませんが、見つける仕組みと、直す手順を先に決めておくことはできます。その運用の考え方をまとめたページです。

点線の下線がある用語は、押すと意味がその場に出ます。

結論を先に

社内ナレッジ検索が誤った答えを出したら、どうしますか?

根拠の文書を見て原因を切り分け、文書の修正か設定の見直しを行います。誤りを報告する窓口と、答えの利用を止める基準を、先に決めておきます。

誤りの主な原因と直し方

主な原因は、次の4つに分けられます。

原因見分け方直し方
文書が古い・矛盾している根拠の文書が旧版文書を更新し、旧版を対象から外す
関係する部分が探し出せていない根拠の文書が質問と無関係文書の書き方や分け方を見直す
文書にない内容を答えている根拠の文書に該当の記載がない文書にない場合は『分からない』と返す設定を検討する
質問のあいまいさ質問を言い換えると答えが変わる質問の書き方の例を周知する

誤りが見つかったときの流れ

次の順に対応します。

STEP 01

使った人が報告する

決めた窓口へ、質問と答えを送ります。

STEP 02

担当者が根拠を確認する

根拠の文書が正しいか、答えが根拠に沿っているかを見ます。

STEP 03

原因を分類して直す

文書の更新か、設定の見直しか、質問例の追加かを決めて直します。

STEP 04

記録して答え合わせの質問に加える

同じ誤りが再発しないか、次回の点検で確かめます。

あらかじめ決めておくこと

導入前に決める項目です。

  • 答えに根拠の文書を添えて表示する設計にするか
  • 重要な判断(契約・人事・法令対応)には、答えをそのまま使わないという社内の決まり
  • 誤りの報告窓口と、返答の期限
  • 利用を一時止める基準(誤りの報告が続いた場合など)
  • 月ごとのの担当

ご注意

ご注意

AIの答えには誤りが含まれることがあります。当社は、誤りがないことをお約束するものではありません。答えを業務に使うかどうかの判断は、御社が行います。

よくある質問

誤りは完全になくせますか?

なくすことは約束できません。見つける仕組みと、直す手順を設計することで、影響を小さくすることを目指します。

答え合わせの質問は誰が作りますか?

現場で多い質問を、御社の担当者から集めます。当社が書式と点検の手順を整えます。

誤りが出た際の責任は誰にありますか?

答えを業務に使う判断は御社が行います。役割分担は、依頼の前に書面で確認します。

対象の業務が合うかの確認から始めます

相談したからといって、契約の義務は一切ありません。いま困っていることと、対象にしたい業務をお知らせください。