![見出し画像](https://assets.st-note.com/production/uploads/images/140541216/rectangle_large_type_2_14c15e13ee4bac0a87d3b5e11184de9b.jpeg?width=1200)
【📍完全版】世界が震撼したOpenAI最新アップデートまとめ《GPT-4o、デスクトップアプリ、音声会話》
日本時間2024年5月14日 2:00AMにOpenAIが再び革命的なアップデートを発表しました。
We’ll be streaming live on https://t.co/OcO6MLUYGH at 10AM PT Monday, May 13 to demo some ChatGPT and GPT-4 updates.
— OpenAI (@OpenAI) May 10, 2024
大きな革新的な発表としてはGPT-4oが公開されたことになります。
![](https://assets.st-note.com/img/1715737850942-cGrIoN2MtV.png?width=1200)
この発表で株価が暴落した企業も出てきた、、、
【悲報:ChatGPT新機能「リアルタイム翻訳」により語学学習事業を運営する会社の株価が急落】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) May 14, 2024
これが残酷な現実。
語学学習事業を展開するDualingoの株価がChatGPTの新機能発表を受けて急落。… pic.twitter.com/bf7yWNt66W
そして、今回のアップデートでは、誰もがAIの恩恵を受けられるようになります。以下の3つのポイントを抑えれば、OpenAIの最新動向がわかります。
ChatGPTデスクトップアプリ公開
音声会話のレベルが向上:ほぼ人間並み
GPT-4o APIが公開("o "は "omni "の意味)
1と2は一般ユーザーに大きな影響を与え、3は主に開発者向けの変更点です。それでは詳しく見ていきましょう。
こちらがライブデモのフル動画になります。
0.そもそもGPT-4oとは?
要はGPT-4の上位互換のモデルです。
無料で全ユーザーに解放されております。
![](https://assets.st-note.com/img/1715740066437-GFkwMD8Y63.png?width=1200)
一番の特徴はやはりその速度です。
【⚡️速報:最新モデルGPT-4oが既に誰でも利用可能に】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) May 13, 2024
Playgroundを使えば、誰でもGPT-4oを試せます。
GPT-4 Turboと比べるとその速さは歴然。
Claude 3やGemini Pro 1.5超えのクオリティでこの速度はは最強ですね。
しかも料金も半額。これは開発者歓喜。
左:GPT-4o
右:GPT-4 Turbo… pic.twitter.com/It2FgHiB7h
主な特徴
マルチモーダル対応:テキスト、音声、画像の組み合わせを入力として受け取り、同様に多様な形式の出力を生成可能。
高速応答:音声入力に対して232ミリ秒、平均320ミリ秒で応答し、人間の会話とほぼ同等のスピード。
多言語対応:GPT-4 Turboと同等の英語およびコード処理能力を持ち、非英語テキストでも大幅に改善。
コスト効率:APIではGPT-4 Turboよりも2倍高速で、価格は半分、レート制限は5倍に。
1.ChatGPTデスクトップアプリ公開
![](https://assets.st-note.com/production/uploads/images/140540702/picture_pc_2f08e6ef7a0357d10109d38ce5833ada.gif)
Plus users will get up to 5x higher limits, and earliest access to features like our new macOS desktop app and next-generation voice and video capabilities. pic.twitter.com/9smAHkgvhn
— OpenAI (@OpenAI) May 13, 2024
無料・有料ユーザーを問わず、コンピュータ上で行っているあらゆることにシームレスに統合できるように設計された、macOS用の新しいChatGPTデスクトップアプリリリースされます。
簡単なキーボードショートカット(Option + Space)で、即座にChatGPTに質問することができます。また、アプリ内で直接スクリーンショットを撮り、議論することもできます。
具体的には
・Zoom会議中や開発環境に横に表示させておくことで、リアルタイムでアドバイスをもらえます
・ローカルで動く別のアプリの画面解析もでき、コードの修正やグラフの解析なども可能です。
・また、音声入出力にも対応しています。
これにより、やはり音声でPC上のアプリを操作できるのは最強です。
例えば、誰でも手軽にプログラミング講師やZoom面接中にアドバイスしてくれる先生を雇えているようなものです。
Open Interpeterのようなことが実現しました。
詳細はこちらの公式ページを参照してください。
https://openai.com/index/gpt-4o-and-more-tools-to-chatgpt-free/
2.音声会話のレベルが向上:ほぼ人間並み
2.1 音声の質の大幅向上
ChatGPTの音声会話の質が飛躍的に向上し、ほぼ人間並みになりました。会話速度は人間と同程度で、感情表現もできます。声の抑揚を変えたり、途中でトーンを変えることも可能です。歌を歌わせることもできます。
2.2 視覚機能(Vision)
動画の情景をリアルタイムで理解できるようになりました。登場人物の理解も可能です。数学の問題を解くこともできます。
2.3 リアルタイム翻訳
ほぼ遅延なしでリアルタイム翻訳ができるようになりました。これからは海外旅行に行く際はChatGPTさえあれば言語の心配は不要そうです。
今後の予定としては、数週間以内にChatGPT PlusのアルファテスターにGPT-4oを搭載した新しいボイスモードが提供開始される見込みです。
3.GPT-4o API が公開
※("o "は "omni "の意味)
3.1 概要と性能の比較
GPT-4oという超高性能で超高速のモデルがリリース&利用できるようになりました。
![](https://assets.st-note.com/img/1715627267261-NcColEef2l.png?width=1200)
GPT-4oはかつて最強の謎のモデルと呼ばれいていたGPT2にあたります。
これが意外と衝撃でしたw
![](https://assets.st-note.com/img/1715627169388-GHhgdwuP3F.png)
また、GPT-4oはGPT-4 Turboと比べると以下のような特徴があります。
・速度:2倍高速
・料金:半額
・RateLimit:5倍まで緩和
・Claude 3 OpusやGemini Pro 1.5を超えるクオリティ
・既に誰でも利用可能
![](https://assets.st-note.com/img/1715627299502-6VyNdC17Xx.png?width=1200)
3.2 圧倒的速度
【⚡️速報:最新モデルGPT-4oが既に誰でも利用可能に】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) May 13, 2024
Playgroundを使えば、誰でもGPT-4oを試せます。
GPT-4 Turboと比べるとその速さは歴然。
Claude 3やGemini Pro 1.5超えのクオリティでこの速度はは最強ですね。
しかも料金も半額。これは開発者歓喜。
左:GPT-4o
右:GPT-4 Turbo… pic.twitter.com/It2FgHiB7h
実際に使ってみると、そのスピードの速さに驚かされます。開発者にとって嬉しい変更点が多数あります。GPT-4 Turbo時点でGemini 1.5 ProやClaude 3 Opusより安価なので、これからさらに利用者が増えることが予想されます。
3.3 トークンの圧縮
また、トークンも圧縮されました。これでより長い文章の入力と出力が可能になります。
![](https://assets.st-note.com/img/1715627414232-IX44LHQ7LT.png?width=1200)
細かい機能要件を見たい方はこちらの公式ブログを参照してください。
https://openai.com/index/hello-gpt-4o/
GPT-4oの主な特徴:
テキスト・音声・画像を単一のニューラルネットワークで処理
会話でのAI応答時間は平均320ミリ秒。人間並みの速さを実現
英語とコードでGPT-4 Turboと同等の性能、英語以外の言語は大幅改善
ビジョンと音声の理解力が既存モデルを大きく上回る
OpenAIによる安全性への取り組み:
サイバーセキュリティや悪用リスクを徹底評価
70人超の外部専門家によるレッドチームテストを実施
倫理的で安全性の高いAI開発を追求
GPT-4oの提供開始:
本日よりChatGPTとAPIで利用可能
音声・動画機能は近日中に信頼できるパートナー向けに提供開始
4.GPT-4o活用事例7選
4.1 手書きをパワーポイント化
スライド作成は人間の仕事ではなくなりそう…
— あやみ|LayerX (@ayami_marketing) May 14, 2024
GPT-4oで、画像→図表作成→PowerPoint出力ができた!
(手書きが汚すぎるけど、ちゃんと書いたらそれなりにいけそう!) pic.twitter.com/nvnJWefsYh
4.2 3Dモデルの作成
I used GPT-4o to create STL file for 3D model in ~ 20 seconds on my phone.
— Min Choi (@minchoi) May 14, 2024
Pretty remarkable what you can generate with AI and simple prompt now. pic.twitter.com/2fbObrpPol
4.3 2chスレッドの作成
【朗報】GPT-4o、人類滅亡の日のなんJスレが書けてしまう pic.twitter.com/2vGaeydwAw
— saip🐣 / さいぴ (@_saip_) May 13, 2024
4.4 漫画の高度な理解
GPT-4o マジだ、相当複雑にも関わらず相当高いレベルで漫画を読解できててすごい
— Torishima / INTP (@izutorishima) May 13, 2024
雑なプロンプトだから一部セリフが抜けちゃってるけど、それよりも漫画から人物の状況をほぼ完璧に理解できていることの方に驚いた エッグいな…… pic.twitter.com/J59zf55GI8
4.5 手書きからコード化
GPT-4oの画像認識力と理解力をもってすればいけるやろと思ってやってみたら実際いけた。
— kmizu (@kmizu) May 14, 2024
ペーパープロトタイピングから最初のHTML書き起こすのにかなり使えるのでは。
つーか指示そのものを画像の中に書いたの読み取ってくれるの何か世界の壁を超えて対話してる感があって凄い#GPT4o pic.twitter.com/3XHMFg3yye
4.6 東大入試の解答
先ほどリリースされたgpt-4oで試しに今年の東大数学2024の問題を画像で送ったら(プロンプト一切無しでも)正解できた。 pic.twitter.com/t6WJtxalcY
— Kyutaro@Web x AI x DX (@kyutaro15) May 13, 2024
4.7 公式からの活用事例
発表で隠されたGPT-4oの裏機能、10選
— すぐる | ChatGPTガチ勢 𝕏 (@SuguruKun_ai) May 14, 2024
ㅤ
このAIの真価は、広まっていない部分にありました
ㅤ
本当に役立つ機能をスレッドに10個まとめます🧵👇 pic.twitter.com/dJBgCiSVbV
5.おまけ
5.1 無料で公開される機能
また、以下の機能が無料で公開される予定です。
![](https://assets.st-note.com/img/1715627473015-2Ln4VFtXWV.png?width=1200)
・GPT Store
・Vision(画像、動画解析)
・インターネット検索
・メモリー機能
・Advanced Data Analysis
無料でこれだけの機能が使えるようになるのは、競合他社にとって大きな脅威となりそうです。
5.2 動画解析ならGemini 1.5 Proが強い
【悲報:GPT-4oにも限界があった。】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) May 14, 2024
今回の26分ほどのGPT-4oの初回動画を読み込ませて要約を依頼したところ、GPT-4oでは上手く要約ができなかった。
Gemini 1.5 Proだとほぼ完璧に動画解析ができた。
やはりマルチモーダルはまだGeminiが強い。
全知全能ではないので、GPT-4oの崇め過ぎには注意。… pic.twitter.com/TvBkqHAiVN
5.3 ライブデモのスマホが何故かオフライン?w
今回のOpenAIのLive Demoで一番気になったのはもしかして、このデモインターネットに繋がっていない?笑
見た感じ、機内モードでWifiにも接続されていない模様。
これはテスト版でローカルで動いているのか??
真相は如何に、、、 個人的に今回のLive Demoは録画感が凄かったw
GPT-4oのテキストのみは既に利用可能ですが、音声チャットはまだ使えません。個人的には明後日くらいにGoogleの大きな発表があるので、まだ未完成ですが、一旦公開したかったという意図があるように思えます。
![](https://assets.st-note.com/img/1715627536604-9JtsSsXniT.png)
![](https://assets.st-note.com/img/1715627530998-wLE9hHTUtY.png?width=1200)
5 .まとめ
OpenAIは今回のアップデートにより、さらに業界をリードする存在になったと言えるでしょう。
特に
デスクトップアプリによる他アプリの操作
⇨より広範囲のことが自動化できる
⇨例えば、ブログ書いてアップしておいて〜
⇨AIによる完全仕事の自動化にまた一歩近づくAPIの性能アップ+低価格化
⇨これは開発者歓喜でさらにAIサービスのコストを下げて性能を上げることができます機能の無料化
⇨これは完全に他者を潰しに来ております
⇨ある程度マネタイズができている証拠でしょうか??
GPT-5、音声電話、ChatGPTの検索強化などまだまだ噂ベースですが公開されていない機能は沢山あります。
引き続きOpenAIがAI業界を席巻するのか。今後の動向に期待です。
ここから先は
![](https://assets.st-note.com/production/uploads/images/73267746/profile_f3fc507742b4787c7b7337e47d093f46.jpeg?fit=bounds&format=jpeg&quality=85&width=330)
AIニュースマガジン
毎月10記事以上のマガジンが届いて、たったランチ1回分の料金です👀 (1日換算ですと、約50円程度の破格の料金です🔥) 最新のAI情報…
この記事が気に入ったらサポートをしてみませんか?