AIの「引用」は信用できるか──引用2,521件を法令原文と機械照合

AI法令検索「ことのり」は2026年7月、本番の検索190件の回答に含まれる法令引用2,521件（41法令）を、e-Gov法令データに由来する法令原文データベースとプログラムで機械照合しました。結果、実在しない法令・条文の引用は0件、出典に掲げた引用文は488件すべてが法令原文と一致しました。

検証結果（2026-07-02実施）

対象: 検証シリーズ（司法試験・宅建・行政書士・社労士・司法書士）で実施した本番検索190件のレポート。本文中の出典リンク2,031件と出典欄490件の合計2,521件を照合。

なぜ「引用の検証」なのか

生成AIの法令調査で最も警戒すべき失敗は、実在しない条文をもっともらしく引用してしまうこと（引用のハルシネーション）です。結論が多少慎重すぎるのは実害が小さい一方、存在しない根拠を示されると、利用者は誤りに気づく手がかりを失います。

ことのりは、回答を生成する際に法令原文データベースを直接参照し、すべての根拠にe-Gov法令検索の該当条文へのリンクを付けています。この設計が実際に機能しているかを、外部から後追いで確かめたのが本検証です。

検証の方法

1. 検証シリーズで実施した本番検索190件の回答レポートを対象に、本文と出典欄からe-Gov法令検索へのリンク（法令ID・条番号）と引用文をプログラムで抽出する。
2. 政府のe-Gov法令データを取り込んだ法令原文データベース（約7,800法令）と突き合わせ、法令の実在・条文の実在・法令名・条番号・引用文の一致を判定する。
3. 照合は正規表現とデータベース照合のみで行い、AIによる採点・人手の補正は含めない。
4. 不一致は1件ずつ明細に記録し、件数をこのページで公開する。

検証履歴

この検証は、サービスの更新にあわせて再実施し、結果をこの表に追記していきます。