ブログ/YCB
AIが挙げた出典、開いてみると話が違う。どこを確認する?
AIの答えに、参考リンクが付いていた。
出典があるなら、安心して使えそうだと思う。
でも、ページを開いてみると、同じ言葉はあっても、知りたかった条件の説明が見当たらない。
そんなときは、リンクが存在することと、答えの根拠になっていることを分けて考えたいと思います。
ページがあるだけでは、主張の確認は終わらない
例えば、架空のAIサービスについて、「この機能は、どの契約でも使える」とAIが答えたとします。
リンク先には機能の紹介があっても、対象の契約までは書いていないかもしれません。
この場合、機能が紹介されていることは確認できても、「どの契約でも」という部分までは確かめられていません。
答えの一部が合っていると、全体まで確認できたように感じやすいんですよね。
そこで、まず一つの主張だけを取り出して見てみます。
誰の、いつの、どの条件の説明か
元のページを読んで、次の順で確認します。
- その情報を出しているのは誰か。提供元の説明か、別の人の紹介か。
- いつの情報か。対象となる時点や更新日は分かるか。
- どの製品、契約、地域、使い方について書かれているか。
- AIの答えを支える記述が、本文のどこにあるか。
更新日が新しくても、自分の使う機能の説明とは限りません。
反対に、古い日付だからという理由だけで、内容が無効になったとも決められません。対象と現在の公式案内を合わせて見ます。
判断に使いたい条件が確認できなければ、その部分は未確認のまま残します。
見つからないときは、見つかったことにしない
AIに、根拠になった箇所を示してもらうことはできます。
ただし、示された文章が本当にそのページにあるか、前後を含めて同じ意味かは、元の資料で確かめます。
ページを開けないときも、AIの説明だけで読めたことにはしません。公式の別の案内を探すか、確認できる人へ聞く必要があります。
練習なら、個人情報を含まない、公開された一つの機能説明で十分です。
「使える」という大きな答えを、対象の契約など一つの条件へ絞り、本文の根拠と並べてメモしてみてください。
リンクが付いているかだけでなく、自分の判断をどこまで支えているかを見る。
その習慣が、AIを調べものの道具として使うときの助けになると思います。
YCBでは、AIを使った仕事の進め方を、相談しながら試していきます。答えの扱い方や、何を確かめるかも、実践のテーマです。