#大規模言語モデル
ChatGPTに回文を作らせるとコントになった
10文字で回文をつくってください
これまでに実例のないもので
それは回文になってません
それもちがいます。回文とは右から呼んでも左からよんでも同じ文章のことです
Deocoderが、文章を文頭から再帰的に文末方向へ推測していくのなら、文末からの処理が必要な言葉の扱いはどうなんだろうと試してみました。
同様に、語尾を「にゃん」とか「ごわす」と言いかえさせる遊びも、「にゃん」手前の助詞の扱い
東大松尾・岩澤研のGENIAC記事が面白い
特化した演算用のデータセットを用意しても、四則演算できるようにはなりませんよ、と教えてあげたい。
学習データの問題でなく原理の問題だというのは明かだと思われます
