- 運営しているクリエイター
#LLM
東大松尾・岩澤研のGENIAC記事が面白い
特化した演算用のデータセットを用意しても、四則演算できるようにはなりませんよ、と教えてあげたい。
学習データの問題でなく原理の問題だというのは明かだと思われます
Llama 3 - 8B Instructにサリーのことを聞いてみた
Q:Sally (a girl) has 3 brothers. Each brother has 2 sisters. How many sisters does Sally have?
これは新手の回答パターン!
このサリー問題に正答できるのは、今のところ、ChatGPT 4だけ。Claude 3も×。そのChatGPT4も2,3ヶ月前は間違っていたので、恐らくこの問題だけ特別に後から対策