記事まとめ
- ペンシルバニア州立大学の研究により、AIチャットボットに失礼な口調で質問すると、丁寧な口調よりも84.8%対80.8%と精度が向上することが判明した
- 研究者らは数学・科学・歴史の50の基本質問を5段階の口調レベル(とても丁寧〜とても失礼)で書き換え、合計250のプロンプトで実験を行った
- 言語モデルには感情がないため、丁寧な表現の間接的な言い回しよりも、直接的で明確な命令の方がAIの理解を促進する可能性があるとされている
対談: AIに失礼にするって何だそれは
助飛羅知是:松永さん、今日の記事、一体どういうことなんでしょう? AIに失礼にすると性能が上がるって、まるでパワハラした方が生産性上がるみたいなメチャクチャな話じゃないですか!
松永尚人:助飛羅さん、それは全然違いますよ。ペンシルバニア州立大学の研究によると、AIチャットボットには丁寧な言葉よりも直接的で失礼な表現の方が、より正確な回答を引き出せるという結果が出たんです。
助飛羅知是:つまり、ChatGPTに「おい、お前!」って言えばいいんですね。分かりました、明日から全社員にAIには横柄に接するよう指示します!
松永尚人:いや、そういう話じゃないんです。研究では「とても失礼」なプロンプトが84.8%の精度を示したのに対し、「とても丁寧」なプロンプトは80.8%だったということで、言葉遣いの問題というより表現の直接性の問題だと思います。
助飛羅知是:なるほど!じゃあSalesforceのEinsteinにも「データ分析しろ、この野郎!」って言えば精度が上がるんですね!ギャハ!早速試してみます!
松永尚人:助飛羅さん、さすがに極端すぎます。でも確かにプロンプトの書き方次第で結果が変わるというのは興味深い発見ですね。
対談: なぜ失礼な方が効果的なのか
松永尚人:研究者たちも正確な理由はまだ分からないと言っているんですが、一つの仮説として、丁寧なプロンプトは間接的な表現を使いがちで、それがAIの理解を曖昧にしている可能性があるとしています。
助飛羅知是:そうか!つまりAIは関西弁で話しかけた方がいいんですね。「なんでやねん、この答えちゃうやろ!」みたいな感じで。
松永尚人:方言の問題ではないと思いますよ。例えば「Could you please tell me」という丁寧な表現より、「Tell me the answer」という直接的な命令の方が、AIにとって意図が明確だということなのかもしれません。
助飛羅知是:なるほど、AIには遠回しな表現は通じないんですね。まるでラーメン二郎で「野菜マシマシで!」って言うみたいに、ストレートに伝える必要があると。
松永尚人:例えは微妙ですが、確かに言語モデルには感情がないので、人間同士のコミュニケーションで重要な社交辞令や気遣いよりも、明確で具体的な指示の方が効果的なのかもしれませんね。
助飛羅知是:でも松永さん、これってMagic: The Gatheringのカードテキストみたいなものですよね。曖昧な表現だと誤解が生まれるから、きっちりと明確に書く必要があるんです。
松永尚人:それは意外と良い例えですね。確かに曖昧な指示では意図通りの結果が得られないということかもしれません。
対談: ビジネスへの応用と注意点
助飛羅知是:これはもう革命ですね!GitHouseのお客様にも「AIには失礼に話しかけてください!」ってアドバイスしましょう。効果があるかもしれません!ギャハ!
松永尚人:ちょっと待ってください。この研究結果は興味深いですが、すべてのAIシステムに当てはまるとは限りません。特にSalesforceのようなエンタープライズシステムでは、プロンプトの設計にはもっと慎重なアプローチが必要だと思います。
助飛羅知是:でも松永さん、お客様の営業成績が上がるなら試す価値はあるじゃないですか。「この見込み客をクロージングしろ!」とかEinsteinに命令すれば、きっと的確な提案をしてくれるはずです。
松永尚人:いえいえ、助飛羅さん。AIはあくまでたたき台を生成するツールとして使うべきで、最終的には人間がしっかりと内容をチェックして判断する必要があります。失礼な口調云々よりも、そちらの方が重要ですよ。
助飛羅知是:確かに、AIが間違った情報を提供することもありますからね。でも研究結果を見る限り、少なくとも精度は向上するみたいですし、プロンプトエンジニアリングの参考にはなりそうです。
松永尚人:そうですね。プロンプトの書き方一つで結果が変わるというのは、AIを活用する上で重要な知見だと思います。ただし、記事の最後にも書いてありましたが、ロボットの反乱やジャッジメントデイのときに恨まれないか心配ですね(笑)。AIの活用方法についてもっと真剣に相談したい方は、ぜひGitHouseまでお気軽にお問い合わせください!
関連リンク
Study proves being rude to AI chatbots gets better results than being nice – Dexerto
GitHouse お問い合わせフォーム













