GoogleはAIの回答を検索結果の最上部に置いており、調査では約10件に1件が誤りで、リンク先が裏付けていない例も多いとされます。3つの習慣と5分のルーティン、Tekno Notebookに残す「主張ログ」を紹介します。
90%正しい要約は、確認する習慣を手放させます。
今週、Fortuneは、学生アカウントでGoogle検索を使い続けるならAI概要を受け入れるよう、Googleが学校に伝えたと報じました。米国の大規模学区4つのうち3つが反発しているそうです。結果がどうなっても、学生は出典より先に、ページの一番上でAIの回答に出会い続けます。
どこまで信じてよいのでしょうか。AI企業Oumiがニューヨーク・タイムズの依頼で4,326件の検索を調べたところ、AI概要の正答率はGoogleの旧モデルで85%、新モデルで91%でした。Googleはこの手法に異議を唱えています。学生にとってより気がかりなのは、正しい回答の半数以上が「根拠不足」だったことです。リンク先が内容を十分に裏付けておらず、引用元の上位にはFacebookとRedditも入っていました。ただし、調べたのは一般的な知識問題です。数字は目安であり、すべての検索への判決ではありません。
今月ある教育者は、初心者にとって「確認」はいつの間にか「追認」になると指摘し、AIの出力は答えではなく、検証すべき仮説として扱うことを提案しました。まず回答を、名前、日付、数字、引用といった個別の主張に分けましょう。大学図書館のガイドも、中心的な答えは合っていても、周りの細部が間違っていることがあると注意しています。
リンクは手がかりであって、証拠ではありません。ページを開き、その主張を裏付ける一文を探します。見つからなければ、どれほど自信ありげでも未確認です。同じ内容を繰り返しているだけのページより、元の文書やデータ、論文を優先しましょう。
同じ質問でも、数秒の間にAIの答えが変わることがあります。言い方を変えて聞き直すか、別のツールでも試して比べましょう。答えが食い違うなら警告のサインです。出典に戻ってください。
毎回できる短さで、間違った細部をレポートに入れない強さがあります。
自信ありげな言い回しは、証拠ではありません。
勉強の材料にするのは、チャットボットの返答ではなく、自分で確かめた内容にしましょう。Tekno Notebookでは、確認した主張を自分の言葉で、出典と判定つきで書き、ファイルを自分のデバイスに置いておけます。最初の仕分けには内蔵AIアシスタントも使えますが、AIも間違えるので、確認は自分の役目です。確かめたい回答といっしょに、次のプロンプトを貼り付けてください。
確認したい回答があります:[回答を貼り付け]。
これを、事実に関する個別の主張に分けてください。
各主張について、それを裏付けられる情報源の種類(公的文書、データセット、論文、教科書など)を示してください。
参考文献やリンクを作り上げないでください。
確信が持てない主張には印をつけてください。
私が確認し終えたら、その主張について1問ずつクイズを出してください。さっそく試してみませんか?Tekno Notebookのプロジェクトページ(/ja/project/TeknoNotebook)をご覧ください。あわせて読みたい:AIで勉強しても成績を落とさない方法:答えを出させず、テストさせよう(/ja/blog/study-with-ai-without-hurting-your-grades)、ノートをAIチャットに貼り付けて大丈夫?学生のためのプライバシーチェックリスト(/ja/blog/should-students-paste-notes-into-ai-chatbots-privacy-checklist)。