Microsoftは、Windowsに組み込まれた新機能「Recall」を発表しました。この機能は、ユーザーがWindowsで行ったすべての操作を監視し、AI技術を用いて検索・再現できるようにするものです。PCでは情報がデータベース構造で管理されているのに対し、人間の記憶は人や時間、場所との関連性で情報を記憶します。Recallは、この人間の記憶方式に合わせて、ユーザーが過去に見たほとんどすべての情報にアクセスできるようにします。RecallはNPU(Neural Processing Unit)を活用し、コンテンツをデバイス上に保存することで、高速かつプライバシーを維持した処理を実現しています。ユーザーの検索クエリに対して、関連するスクリーンショットや情報を抽出し、適切なアプリケーションやウェブページにリンクします。Recallはプライバシーとセキュリティを重視しており、すべてのデータはローカルに安全に保存され、AIモデルのトレーニングには使用されません。また、ユーザーは捕捉されたデータを編集・削除する完全な制御権を持ちます。
公開日:2024年5月25日
※動画を再生してから読むのがオススメです。
Microsoftは、Recallと呼ばれる新機能を発表したばかりです。
それはWindowsに組み込まれ、AIを使って思い出せるようにあなたのすることすべてを見ています。
Windows環境で行うことは何でも、AIを使って思い出し、問い合わせることができるようになりました。
もちろん、プライバシーとセキュリティの懸念はありますが、安全で、ローカルで動作するならば、私はオープンになれるかもしれません。
デモを見て、それから私の考えを話します。
40以上の新しいオンデバイスAIモデルにより、PCはこれまでにない方法で情報を処理し、理解することができるようになりました。
それは実際にあなたの文脈とあなたの意図を理解します。
言い換えれば、サティア氏が言ったように、あなたがPCに適応するのではなく、PCがあなたにより適応するのです。
新機能のRecallを通して、私たちが何を意味しているのかをお見せしましょう。
セットアップさせてください。
Recallの機会は、私たちが日々遭遇する最もイライラする問題の一つを解決しようとすることから始まります。
ファイルや写真、メール、あるいは数日前のウェブページを検索することは簡単なはずですが、しばしばそうではありません。
ファイルフォルダをどこに置いたかを覚えておかなければなりません。
または、開いていた多くのブラウザタブのどこにあったのでしょうか?
正直なところ、これは私が毎日直面している問題です。
たくさんのタブを開いて、たくさんのウィンドウを開いて、書いたメールがどのメールアドレスからで、誰宛てだったのかを思い出せなくて、ただ忙しくて忘れてしまうのです。
これは素晴らしい機能になるでしょうし、私はとてもワクワクしていますが、プライバシーの懸念を考えると、少し不安でもあります。
Rewind AIという企業をご存知であれば、彼らには本質的にこれと同じ製品があり、現実の生活で同じようなことができるハードウェアペンダントを発表したばかりです。
Windowsがこれをネイティブに組み込むことを知っていたので、より消費者向けでユーザー向けのハードウェアデバイスであるこのペンダントに切り替えているのではないかと思います。
見続けましょう。
あるいは、もっと悪いことに、何をしているのかを見つけるために何千通ものメールを調べなければなりません。
そして、さらに悪いことに、私たちはこの非常に人間的な問題に対して、扱いにくい回避策を作ってしまったのです。
自分に知らせるためにメールを送ったり、多くのブラウザタブを開いたままにしておいたりすると、操作性が乱れ、PCの動作が遅くなってしまいます。
さらに悪いことに、自分に知らせるためにコンピュータにメモを書く人もいますが、インターネット上の何百万もの文書を検索して、文字通り何でもサブセカンドで見つけることができるのに、皮肉だと思います。
なぜでしょうか?
私たちは立ち止まって自問しました。
基本的なレベルでは、PCがコンテンツを保存する方法が、人間が情報を記憶し、つなげる方法と一致していないからです。
PCはファイルエクスプローラーのようなデータベース構造で情報を整理するのが好きですが、私たちの心は人、時間、場所との関係でより多くのことを考えます。
私たちは情報を人、時間、場所との関係で記憶します。
私たちは本質的によりビジュアルで、私たちの人生経験に固有の関連性とつながりを作ります。
Recallでは、AIの力と新しいシステムパフォーマンスを活用して、PCで見たことのあるほぼすべてのものにアクセスできるようにします。
正直なところ、あなたが写真のような記憶力を持っているかのようになるでしょう。
この記憶にアクセスする能力は、単にあなたにとって自然な形であなたの言葉でした。
Recallはこれらの高度なPCでのみ可能になります。
Recallをお見せするために、この信じられない新機能を構築したWindowsのプロダクトリーダー、カロライナ・ヘルナンデスを歓迎したいと思います。
さて、いくつか質問があり、いくつか考えがあります。
Recallはクールに聞こえます。
すべてをローカルに保存しているのかどうか知りたいですし、彼らがそれに触れるのは間違いないでしょう。
また、推論をどのように実行しているのかも知りたいですね。
GPT-4oを使っているのでしょうか?
もしそうなら、すべてを送信してAPIを叩かなければならないということでしょうか?
また、Copilot Plusを動かすオンデバイスチップであるNPUについても話しています。
しかし、オンデバイスチップがあるのに、何のためにAPIを使うのでしょうか?
少し混乱していて、もう少し調べる必要がありますが、PCにチップを搭載すればするほど、モデルをよりローカルで動かしていると思うので、私はそれに全面的に賛成です。
それは待ち時間を減らし、プライバシーとセキュリティを高めるでしょう。
オンデバイスの大規模言語モデルへの投資を続けてくれることを本当に願っています。
見続けましょう。
ようこそ、カロライナ。
ありがとう、カロライナ。
ありがとうございます。
Recallの概要を教えてください。
喜んで。
私のチームは、あなたがPCで見たり行ったりしたことを何でも見つけるのに役立つRecallを開発しました。
NPUの力を活用して、コンテンツがデバイス上に留まるようにしました。
そこですでに、彼女は部屋の大きな象に対処しました。
コンテンツはデバイス上に留まります。
NPUが大規模言語モデルを動かしています。
それは素晴らしいことです。
どのモデルを使っているのでしょうか?
Fiだったら最高ですね。
そのすべての情報がOpenAIのサーバーに送られるのは本当に嫌です。
体験を素早くし、プライバシーを維持します。
Recallが私を助けてくれるいくつかの方法をお見せしましょう。
皆さんと同じように、私は一日中様々なタスクを行ったり来たりしています。
情熱を持っているキャリアと、世界中の家族や友人とのつながりを保ち、愛する趣味の間で時間を管理しています。
Recallは、これらすべてのタスクをより迅速にこなすのに役立ちます。
私の家族と私は、コロンビアに住む祖母がいとこの結婚式で着るのにぴったりのドレスを探していました。
私はPinterestとショッピングウェブサイトで、彼女と共有できるオプションを見てきました。
数週間オプションを探した後、私は戻って行きたかったのです...
なぜいつもショッピングのユースケースなのでしょうか?
なぜ?
なぜそれがすべてのデモのための定番のユースケースなのでしょうか?
それはとてもつまらないです。
やめてください。
技術企業の皆さん、やめてください。
もっと良いユースケースを私に与えてください。
もっと楽しく、興味深く、ワクワクするようなものを、ショッピングはもういいです。
さて、愚痴は終わりにしましょう。
続けましょう。
私が見つけたお気に入りの青いドレスのいくつかを見てください。
でも、ブラウザのタブを全部開いたままにはしていませんでした。
Recallを使えば、青いドレスを検索するだけで、見たドレスがすべて集まります。
おばあちゃんは、Discordのチャットで共有した素晴らしいパンツスーツを手に入れることにしました...
正直言って、これは素晴らしいように思えます。
私はこれをめちゃくちゃ使うでしょう。
私は主にMacユーザーですが、Microsoftが発表しているこれらすべての発表は、PCをもっと頻繁に使いたくなります。
隣にはとてもパワフルなPCがありますが、Macはとても速いし、特に開発ではMac環境にとても慣れているので、ほとんどの時間オフになっています。
でも、これらの機能やMicrosoftが発表し、今後数ヶ月で発売予定の素晴らしい製品を見れば見るほど、そのPCを使いたくなります。
これは少なくとも私の視点からはMicrosoftにとって本当に良いサインだと思います。
また、Appleは何をしているのだろうと考えます。
彼らがこの機能をSiri、macOS、iOSにネイティブに組み込み始めるのが待ち遠しいですが、まだ彼らからは何の情報もありません。
私には、彼らは単に遅れをとっているように感じられ、OpenAIとのパートナーシップ、Googleとのパートナーシップについて聞きますが、なぜ彼ら自身のモデルを作らないのでしょうか?
Microsoftは現時点でAppleを周回遅れにしているような気がしますが、Appleは何か革新的なものを発表するのかもしれません。
それを見てみましょう。
複数週間分のチャットメッセージをスクロールして、その特定のトレースを見つけるのは永遠にかかっていたでしょう。
その代わりに、Recallを使えば簡単でした。
わかりやすい言葉で検索を絞り込みました。おばあちゃんのスパンコールレースの青いパンツスーツ。
ご覧の通り、Recallは私の家族とオプションを話し合うのに使っていたDiscordチャットをすぐに見つけました。
ここにあります、おばあちゃんが気に入ったドレスです。
Recallの仕組みはこうだと思います。実際には各アプリからデータを取得しているわけではありません。
私が間違っているかもしれませんが、これは私の推測です。
写真を撮るだけで、常に画面を録画しているのかもしれません。
テキストを抽出することはできますが、実際には生の構造化データを保存しているわけではありません。
Recallはスナップショットを分析し、次に何ができるかのオプションを提示してくれます。
彼女はそれを言いました。
Recallはスナップショットを分析します。
常に写真を撮っているのです。
ここにはタイムラインのようなものがあり、そのタイムラインがどれくらい続くのか気になります。
データ保持ポリシーがどうなるのか、どのくらいカスタマイズできるのか、どのくらい本当にプライベートなのか。
これらはすべて私が持っている疑問であり、より多くの情報を得るにつれて答えが出ることを願っています。
この場合、リンクをクリックしたいのですが、購入できる適切なウェブページに戻ります。
おばあちゃんは結婚式のために素敵な服を持っています。
これは人々にRecallがどれほど役立つかを示す素晴らしい例だと思います、カロライナ。
でも、気づかなかった人もいると思いますが、あなたはpeacockという言葉を使いましたが、それは検索した言葉には全くありませんでした。
Recallはそれをどのように認識したのか、そしてカバーの裏で何が起こっているのか?
そうですね。
Recallは、クジャクが青系の色のファミリーに属することを理解できます。
そのような意味的な関連付けを行い、ドレスを見つけるのに役立てているのです。
彼女は基本的に、大規模言語モデルが得意とすることを説明しているだけです。
これはおそらく主に開発者向けのオーディエンスなので、なぜ彼女がそれを説明しなければならないのかわかりませんが。
Recallは仕事でも不可欠です。
多くの人と同じように、私のチームと私はプレゼンテーションや文書での共同作業に多くの時間を費やしています。
例えば、過去数週間、製品ピッチのプレゼンテーションで共同作業を行ってきました。
そのデッキはマーケティングチームのパートナーによって作成されました。
私がようやく自分のコンテンツを追加しようとしたとき、そのデッキをどこで探せばいいのかわかりませんでした。
思い出そうとしました。電話で共有されたデッキでしたか?
メールで見たのかもしれませんし、もしかしたら...
これはまさに私が使うユースケースです。
いつも抱えている問題です。
私の文書はあちこちに散らばっています。
ファイルもあちこちにあります。
見た動画、すべてがただあちこちにあり、いつも見つけるのが大変です。
この機能にますます興奮してきました。
指摘したいのは、みんなスマホを使っていて、全員iPhoneを使っていることです。
Apple、本当に、負けるゲームなのです。
クリックして時間を費やす余裕はあまりありません。
しかし、Recallを使えば、もう探索に行く必要はありません。
アウトラインでは、紫色の文字が書かれた紫色のチャートを追加したことを覚えていました。
紫色、紫色の文字が書かれたチャート。
PowerPointを見つけるために、私が覚えているヒントを単に声で検索するだけでよかったのです。
数秒で、Recallは私のためにそのデッキを見つけてくれました。
覚えていた正確なスライドに連れて行ってくれたことに注目してください。さらに時間を節約してくれました。
仕上げのタッチを加えるために、最後のマーケティングラインを追加したかったのですが、正確な言葉を覚えていませんでした。
先週の火曜日にTeamsで行われた計画ミーティングでNikiが共有してくれたことは覚えていました。
TimelineとRecallを使って、時間を遡ってそのミーティングのスナップショットを見つけることができました。
そして、その引用をすばやくコピーしてデッキに追加することができました。
Recallは、私が覚えているヒントを使って情報を見つけやすくしてくれました。
これらは私が日常的にRecallを使う例のほんの一部です。
カロライナ、どうもありがとうございました。
さて、非常に印象的ですね、間違いなく。
私は使うつもりです。
私は通常プライバシーとセキュリティを重視していますが、詳細や仕様をすべて読んで、すべてがローカルに保存されていることがわかれば、すべての推論がローカルで実行されていることがわかれば、私はオープンになれると思います。
彼らはそれを信頼できるようになることについて話すつもりです。
見てみましょう。
あなたのデータと情報を信頼できるようにしなければなりません。
私たちは責任あるAIの原則に基づいてRecallを構築し、私たちの基準に合わせました。
私たちは非常に慎重なアプローチをとっています。
Recallのインデックスはプライベートでローカルに、デバイス上だけで安全に保ちます。
その情報を一切AIモデルのトレーニングには使用しません。
キャプチャされたものを編集および削除する機能を備え、ユーザーに完全な制御権を与えます。
これは素晴らしいことです。
保存したくないこと、非常に機密性の高い情報など、いろいろあると思います。
編集や削除ができ、すべてローカルに保存されています。
これがMicrosoftの新機能Recallです。
早く試してみたいですね。
これは私の生産性を大幅に向上させてくれると思います。
つまり、私のPCがメインのドライバーコンピュータになるかもしれないということでしょうか?
そうかもしれません。やってみましょう。
このビデオを楽しんでいただけたなら、ぜひいいねとチャンネル登録をお願いします。次の動画でお会いしましょう。