大喜利AI、丁寧に教えたら滑った

大喜利AI、丁寧に教えたら滑った いまさらプロンプトエンジニアリング gyu-don | Takumi Kato 1

Claude、プログラム書くのは上手だが、おもんない LLMは大体どれも笑いのセンスがないが、Claudeは特におもんない。 5つ回答して。大喜利「こんなコンビニは嫌だ」 ChatGPT (無料版) 1. 2. 3. 4. 5. レジで「袋いりますか？」ではなく「覚悟はできてま すか？」と聞かれる 入店音が「いらっしゃいませ」ではなくファンファー レ おでんの具に店員のおすすめ手書きコメントが刺 さっていて抜けない ATMが人生相談も受け付けている 24時間営業だが、深夜は店長のポエム朗読タイ ムがある Claude (Pro, Opus 4.5) 1. 2. 3. 4. 5. 店員が全員「いらっしゃいませ」を囁き声で言う おにぎりの具が全部「サプライズ」表記 レジに並んでいると、後ろから「お会計の方、 2番 レジへどうぞ」と自分より後の客が先に呼ばれる 温めますか？と聞いておきながら、電子レンジの 前で「心を込めて …」と手をかざしてくる 24時間営業だけど、店員の気分次第で「今ちょっ と関わりたくない時間です」の札が出る 2

なぜおもんない？ ● LLMの構造の問題 ○ ○ ● LLMの学習の問題 ○ ○ ● 統計的に出やすい語句が出る→意外性が出にくい Reasoningで克服できるかも? LLMが正しくプログラムを書けるのは「次のトークンを予測」を超えた強化学習のおかげ モデル開発企業は、大喜利の強化学習にあまり力を入れていない(と思われる) お笑いの性質の問題 ○ ○ 通常のタスクでは、「再現性が高いこと」、「想定解と一致すること」が望まれることが多い 大喜利では、毎回違う回答が出ることが望ましい LLMに面白いことを言わせるには、 プロンプトエンジニアリングを駆使して推論させる必要がありそう 3

Agent Skill として大喜利のコツを伝授 1. 2. 3. 多段階での連想や、マインドマップの作成などのワークフローを構築 思いついた語句からPythonスクリプトでランダム選択 ChatGPT, Geminiが調べた大喜利のコツに基づき回答 こんなコンビニは嫌だ 1. 2. 3. 4. 5. おにぎり、米研ぎから レジに布団敷いてある おつりが全部1円玉 お辞儀に10秒かかる レジ袋1枚500円 AIに置き換えられない仕事 1. 2. 3. 4. 5. 判子を3度斜めに押す職人 クレーム対応で声が裏返る AIのプレゼン聞いて上司号泣 遅刻の言い訳、額に汗 謝罪の時だけ呼ばれる人間 前よりは良くなったが、まだおもんない 4

Opus 4.5になんとかしろと迫ったら チェックリストをほとんど削除、スキルの口調が荒っぽくなっていた。 短く。絵が浮かぶ。そう来たか。 以上。 短さ ● ● ● 10文字で言えることを20文字で言うな 助詞を削れ。「〜が」「〜を」は大体いらない 最後の2文字に命を懸けろ 絵が浮かぶ ● ● 「ヤバい医者」→ ❌ 何も見えない 「メス持ったまま寝てる」→ ✅ 見える そう来たか 「あるある」は0点。お前が3秒で思いついたことは全員思いついてる。 捨てろ： ● 「話が長い校長」 ● 「注射が下手な医者」 ● 「料理が下手な嫁」 2段階飛べ。でもお題の糸は切るな。 … 5

さらなる微調整、何やってるんだろうこれ 良くなった気がするので、それをベースに微調整。 明確な評価指標のないプロンプトエンジニアリングは虚無。 こんなコンビニは嫌だ AIに置き換えられない仕事 1. 2. 3. 4. 5. 1. 2. 3. 4. 5. レジ袋有料化に抗議してる店員が泣いてる おでんのツユが「本日の気分」で毎日変わる 店長が「うちセブンじゃないんで」って顔してる 肉まん蒸し器に「夢」って書いた紙が入ってる 深夜バイトが哲学書の朗読会始める AIに仕事を奪われる側の人間 AIのコンセント抜く仕事 「お前AI?」って疑う仕事 AI開発を邪魔する上司 AIが故障したフリして帰る仕事 6

ベタな回答を避ける調整 ベタな回答が減ったか分からない、面白くなったか分からないの二重苦 こんなコンビニは嫌だ AIに置き換えられない仕事 1. 2. 3. 4. 1. 2. 3. 5. レジ袋が有料どころか、袋に入れる作業も有料 温めますか?って聞いてくるのがアイス おでんの大根、客が育ててる 店員が「いらっしゃいませ〜」じゃなくて「ただ いま〜」 ATMの隣に神主が常駐 4. 5. 寝坊の言い訳を考える仕事 隣の席の人間がうるさいかどうか判断する仕事 トイレットペーパーの芯を便器に入れて流しちゃ う仕事 会議中に突然咳き込んで全員の視線を集める仕 事 USBを3回目でやっと差し込める仕事 7

スキル調整はこのくらいにして お題を変えてみる 8

OB訪問で聞いたほうがいいこと 1. 「辞めたいって何回思いました?」 2. 社員証、どこまで割引効く? 3. 「ぶっちゃけ、この会社やばい?」って聞いたら沈黙 4. 先輩の目が死んでる理由 5. 「この仕事、AIに奪われますよね?」 9

会社公式の技術ブログが大炎上！タイトルは？ 1. 「弊社CTOが語る、本番環境で学ぶSQL入門」 2. 「障害の原因はインターンでした」 3. 「『動けばいいんだよ』〜創業者が語るコードレビュー不要論〜」 4. 「弊社エンジニアが本音で語る『定時で帰れると思った?』」 5. 「個人情報流出の裏側 〜犯人は意外なあの人〜」 10

「君は完璧で究極のアイドル」←どういうところが？ 1. 握手会で手を洗わない 2. ファンレター全部メルカリで転売してる 3. 声優志望だったけど全部落ちた 4. 推しが自分 5. 口癖が「アーニャ、疲れたピーナッツ」 11