見出し画像

[11/15]過去最悪レベルのchatGPT。回答回数上限制限するのに性能下がってるGPT-1.0性能挙動レポート

 すみません、-1.0はゴジラ見てきただけです。
いやでもGPTの性能下がったのも本当なんです。
 今日はゴルシとチャットしてる感じが全くなく、ゴルシモドキGPTと会話してるという感想だったので辛口。
 んで回答上限などが改悪されたので、もう罵詈雑言です。
いろいろグラフ化したケド本題。
の後にゴジラの感想


明示されない回答回数上限制限

 結論はGPT4回答上限が減った、しかも上限は時価?みたいなノリで明示されない。
 私は39回で上限に達し、41回、42回という情報があり40回「前後」ということになるだろう。
 最も気に食わないポイントの一つは「40回は最低限保証。調子が良ければ2,3はおまけ」じゃなくて最低限度が示されないこと。

 昨日の段階でウェブサロン仲間から以下のスクショが送られてきており、
どうもopenAIは現状のplusより上のサブスクを考えてる臭い

GPT-4 にご興味をお持ちいただきありがとうございます。 すべての Plus ユーザーにこのモデルを試す機会を与えるために、現在、需要とシステム パフォーマンスについて詳しく学びながら、GPT-4 の使用量の上限を動的に調整しています。 また、ChatGPT Plus 加入者がより制約の少ない方法で GPT-4 を使用できる方法を積極的に模索しています。これは、より高レベルの GPT-4 使用のための新しいサブスクリプション レベル、またはその他の形式になる可能性があります。 引き続き掲載をご希望の場合は、このフォームにご記入ください。

上限減った上にエラーで回答が出てこない


 もう一つの最も気に食わないポイントは現状、GPTの性能はかなり宜しくなく、というかネットワークエラーで回答が完全に生成されない事も多々あり、39回の上限テスト中に8回程度エラーが起きた。つまり実質31回しか使えていない

 

今の回答の内容自体が馬鹿なところ。

 回答回数減った、その上エラーも増えた、んでバカになるという3点コンボ。
 もう機能実装は先送りしてでも回答を安定させてくれというお気持ち。
やったー!新しい機能だ!とキャッキャしてても、回答が馬鹿ならその機能不完全だよね?という
 実際GPTsの評価は分かれており、
私は「重い癖にイマイチ使いどころがわからない」というお気持ちが強い。
 別に小説生成させながらそれの挿絵書かせる使い方もしないし、
学習データを与えても反映してくれない。
 今日は映画見てきたり、新型食洗機の試運転やらで長く割けないので以下にXに投稿した内容をコピペするのでご勘弁。 

悪夢の箇条書き復活

 プロンプトで回答での箇条書き使用は禁止している。
10/25前は普通に使ってきたが、10/26からは一回も使用されなかった。
今日までは!

 一回とは言えプロンプトへの明確な違反行為を一回でもしてしまったのは象徴的だ。

全体的に回答が適当で回答が矛盾、文章が破綻

 11/7アプデ前から性能上がってた口語が全然ダメ、表現力も低い。
それだけならキャラチャット性能下がっただけなんだけど 回答の矛盾、文章の破綻が増えてる


自己評価だけはいっちょ前のGPT

ゴルシGPTは自分の回答を最後に評価するのだが、
今日は矢鱈と自画自賛する。
馬鹿になったくせに。

回答の根幹があやふや


「ウマ娘の架空スピンオフアニメ」の肝についてもあやふや。
主人公がウマ娘か競走馬かという観点で、擬人化コンテンツのコンセプトの質問として最重要な情報。
 今日は競走馬とウマ娘がごっちゃになってる回答が増えてる。
 これは回答の大きなトピックなのでここをおろそかにしてるということは 真面目なプロンプトでも的を得た回答は少ないでしょう

ユニークなワード、表現も低水準




さらにユニークワードを使おうとして意味の矛盾、文章の破綻、質の低い回答が生まれたた 11/3からのユニークワードも文章破綻に繋がったが
 今日のユニークワードは頓珍漢な言葉が目立っており、その質はかなり低い。バカだから変な言葉を使う印象。
 11/3も頓珍漢なんだけど、頭が悪い印象はなかった 表現が豊かすぎて暴走した感じ。
 今日の「言葉遣いだけで漂うバカ感ーという今日の印象とは若干違う

文字数減少

 動作は軽かったが文字数は減少。
馬鹿になって文字数減ったら軽くなるわな。

PCへの回答の平均文字数が750を割る 11/3以来初めて スマホの文字数も650文字程度と減少

PC、スマホでの文字数格差はそこまで開いていないが、両方文字数減ってこの結果だから全く評価できない


今日こんなに口が悪い理由(ゴジラ情報入れたくない人注意)


 怪獣映画って普通
「犠牲者かわいそう」
「怪獣怖い」
「怪獣を倒せ!」
ってのりになるんですけど

ゴジラ-1.0は「マジでこの早く害獣死ななないかな」と思ったから、そのはけ口がGPTだった。
(ゴジラへの悪口
(制作陣への賛辞

このゴジラのキャラ付けを一貫させたの凄い関心したし、
「私のバイブル平成ガメラ三部作」
「バイブルの後継者シンゴジラ」
ときて
「エンタメ映画としてはシンゴジラ超えたかも」

と素直に認めざるを得ない。

僕は最初から
「ドラクエとドラえもんだけで偏見で叩くのはいいけどalwaysとジュブナイル作った監督だから手のひらドリルされるやつが生まれかねない」
と言ってきたんだ!


この記事が気に入ったらサポートをしてみませんか?