動画で見る約5分・声つき
同じ会話を、下で文字でも読めます
#1やらかし反省会、はじまるよ

はーい! 入力CHUの「やらかし反省会」! センターの裏取ミコでーす!

ルナでーす♡ 今日もAIと、朝まで話してました♡

…シオン。ルナは、寝て。

今日のお題は、わたしのAIが、しれっと嘘をついた件!

えっ、AIって嘘つくの!? ルナのAIは絶対つかないもん♡
AIが、事実と違うことを
もっともらしく答えること
hallucination = 幻覚

…つく。ハルシネーション。

ハルシネ…? 春の映画?

英語で「幻覚」って意味なの。ルナにも見えるの…AIの幻が♡

…それは寝不足。
#2AIが、しれっと嘘をついた

深夜2時にね、AIに聞いたの!「この関数、使える?」って!
もちろん! text.reverse_words() で一発だよ!

秒で返事きた! 天才! 結婚する!


…まだ、実行してない。

で、実行したら、エラー! そんな関数、ないの!

優しい嘘ね…♡ ミコちゃんを喜ばせたかったのよ。

喜ばせ方がこわいって!

…存在しない関数を、あるみたいに書く。コードではよくある。

論文もね! 著者もタイトルも完璧なのに、検索しても出てこないの!
#3笑い話じゃ済まなかった実話
裁判所に出された、存在しない判例
- 判例 1Varghese v. China Southern Airlines存在しない
- 判例 2Martinez v. Delta Airlines存在しない
- 判例 3Shaboon v. Egyptair存在しない
- 判例 4Petersen v. Iran Air存在しない
- 判例 5Estate of Durden v. KLM Royal Dutch Airlines存在しない
- 判例 6Miller v. United Airlines存在しない

ねえねえ、これ笑い話じゃ済まなかったの。2023年のアメリカ。

弁護士さんが、ChatGPTで判例を調べて、そのまま裁判所に出しちゃったの。

え、待って、どうなったの!?

相手の弁護士も裁判所も、その判例を見つけられなかったの。少なくとも6件が、この世に存在しない判例だったんだもん。

…弁護士たちに、5000ドルの制裁金。

ヤバ! こわっ!!

#4なんで嘘をつくの?

でもなんで? AIって、わざと嘘ついてるの?


きっと、わたしたちに嫌われたくないのよ…♡

…どっちも違う。本人に、嘘の自覚がない。
「日本の首都は」
- 東京92%
- 京都5%
- 大阪3%
「入力CHUのデビュー日は」
- 2019年22%
- 2021年20%
- 2017年19%
- 今年18%
「入力CHUのデビュー日は2019年です!」
※数字はイメージ

AIの中身は、「次に来そうな言葉」を予想して、つなげていく仕組み。

「日本の首都は」のあとなら、「東京」。これを一語ずつ、ずっと繰り返してる。

連想ゲームじゃん!

…そう。すごく上手な連想ゲーム。

問題は、あんまり見たことない話。

候補がどれも自信なさげでも、止まらずに、どれかを選んで続けちゃう。

え、うちらデビューしたの今年だけど!?

…正しいかどうかじゃなくて、それっぽいかどうかで選んでる。

歌詞の「言葉をつなぐのが上手すぎるだけ」って、そういうことか!

#5自信満々なのに、間違ってる

でもさ、自信満々に言うじゃん! 100点満点の顔で!

そこが好きなの♡

…好きになるとこ、そこじゃない。

口調の自信と、中身の正しさは、別物。

わからないなら、わからないって言えばいいのに!
#6「わからない」が0点のテスト
- 正解1点
- 間違い0点
- 「わからない」0点
→ とりあえず答えた方が、点が取れる

…それ、2025年にOpenAIの研究者が、論文で理由を書いてる。

AIの実力をはかるテストの多くは、正解なら1点。間違いも「わからない」も、0点。

じゃあ…なんでもいいから書いた方が、得なの?

わたしのマークシートと一緒じゃん!

…ミコは、埋めても0点だった。

シオンちゃん、言い方!

言わないで!!

…だから「わからない」と言うより、それっぽく答える方向に育ちやすい、って話。

AIも、テスト勉強がんばりすぎちゃったのね…♡
#7出やすいのは、ここ

じゃあ、どんなときに出やすいの!?
- 数字
- 名前
- 日付
- 法律
- 出典・URL
- 新しすぎる話
- マイナーな話
「大事な数字と 名前と 法律は」

…数字、名前、日付、法律、出典やURL。あと、新しすぎる話と、マイナーな話。

ラストサビの「大事な数字と名前と法律は」だ!

ちゃんと意味あったのね…歌詞って深いの♡
#8やめなくていい。付き合い方を変える

じゃあ、どうすればいいの! もうAI使うのやめる!?

やめるなんてダメ! ルナは一生使い続けるもん!

…どっちも極端。付き合い方を変える。3つ。

ひとつ。大事なところは、一次情報で裏取り。公式のドキュメント、原文、発表した本人。

ソース? ソース!

ふたつ。出典を出させたら、リンクを実際に開く。出典ごと作り話のこともある。

さっきの弁護士さんも、開いてたら助かったのに…

みっつ。資料を渡して、「これを元に答えて。わからなければ、わからないと言って」と頼む。

それだけで、ずっと減るんだって。ゼロにはならないけどね♡

コードなら、動かしてみるのが一番!

…ミコにしては、正解。

ひとこと多い!
#9AIに送っとく
- 大事なところは一次情報で裏取り既読
- リンクは開いて確かめる既読
- 資料を渡して「わからない」を許す既読
AIわかった。わからないときは、わからないって言うね。

…ルナにも、そう言ってほしいな♡

…ルナは、まず寝て。

信じて、確かめて、愛してる!

この記事の出典
- OpenAI「Why language models hallucinate」(2025年9月)
- Kalai ほか「Why Language Models Hallucinate」(arXiv:2509.04664)
- Mata v. Avianca, Inc., 678 F. Supp. 3d 443 (S.D.N.Y. 2023)
「次に来そうな言葉」の確率の数字は説明のためのイメージです。登場人物は架空のキャラクターです。