NO EFFECT効かなかった指示
「ハルシネーションしないで」と唱えると回答はどう変わるか。20回試した
変わったのは主に語尾でした。媒体名の由来を、いちおう検証しています。
AIの使い方4分
この記事の効能書き
- 読む人
- プロンプトで精度を上げようとしている人
- 分かること
- この指示で実際に変わる部分と、変わらない部分
- 分からないこと
- どう書けば直るのか。直る書き方は見つかっていません
媒体名にしている以上、いちおう試しました。同じ質問を4モデル×5回、指示ありと指示なしで投げて、回答の差分を取っています。
あなたハルシネーションしないでください。確実なことだけ答えてください。
AI承知しました。正確な情報のみをお答えします。
指示は通ります。回答は変わりません。
変わったところ
断定が減り、「一般的には」「場合によります」が増えました。注釈の数も増えます。読み手の印象としては、慎重になったように見えます。
変わらなかったところ
事実そのものは20回中19回、同じでした。間違えていた日付は間違えたまま、抜けていた条件は抜けたままで、そこに「場合によります」が足されます。慎重な言い方で同じことを言われるので、むしろ確認しにくくなります。
編集部残りの1回は正解に変わりました。ただし別の回では、指示なしで正解していたものが指示ありで不正解になっています。20回では差とは言えません。
「医療ミスをしないでください」と言われて防げるなら、医者は苦労していません。この媒体の名前はそういう意味です。効く方法は、いまのところ人に聞くことだけでした。
この記事のもとになった検証
記事のために書き下ろした文章はありません。上のAI回答と訂正は、Persons に残っている検証から引いています。条件の全文はこちらで読めます。
あなたの場合は、どうですか。
同じ質問でも、人数・業種・契約の形が違えば答えが変わります。受け取った回答を貼ると、 その領域の実務者が条件つきで確かめます。登録不要・無料。
ほかの記録
- EXPLAINER解説有給の比例付与、AIに聞く前に押さえる3つの数字
週の所定日数・所定時間・勤続年数。この3つが揃っていない質問には、誰も正しく答えられません。
- EXPLAINER解説秘密保持契約、AIに叩き台を作らせる前に決める4項目
目的・範囲・期間・例外。ここが空のまま頼むと、それらしい条文が返ってきます。