Google Pixel 4 のAI機能のまとめ

「Google Pixel 4」のAI機能をまとめました。

1. Googleアシスタント

音声だけで、「Pixel 4」を操作できます。Googleアシスタントの動作状況は、画面下部に表示されます。

・オンデバイスAIで高速回答
・継続会話
・マルチタスクでアプリを操作
・ドライビングモード
・複数作業の同時リクエスト（英語のみ）
・Duplex（電話代行）（米国のみ）

◎ 参考
・次世代Googleアシスタントの新機能まとめ【Google I/O 2019】

2. 顔認識

顔認識によりユーザー認証を行う機能です。

◎ 参考
・One Biometric API Over all Android

3. Soli - Motion Sense

「Soli」は、レーダーベースのモーション認識センサーです。レーダーはミリ単位の小さな動きも検出。半径0.6mの距離にいるユーザーを認識。室内に人がいるかどうかといったこともわかります。画面に触らなくとも操作できる機能「Motion Sense」などで活用されます。

・アラームや着信を、手をかざすことでボリュームダウン。
・手を振り続けると沈黙。
・近くにいることを検知した時に画面表示をオン、人が離れるとオフ（顔認識の高速化）。

◎ 参照
・Soli Radar-Based Perception and Interaction in Pixel 4

4. カメラ

カメラでは、ポートレートの深度推定や夜間モードにAIが活用されています。

・ ポートレートモードの深度推定
・ 夜景モード

◎ 参考
・Learning to Predict Depth on the Pixel 3 Phones
・Night Sight: Seeing in the Dark on Pixel Phones

5. Live Caption (英語のみ)

カメラロールやYouTubeの動画やオーディオメッセージを文字起こしして、リアルタイムに表示する機能です。音なしにオーディオコンテンツを利用できます。

◎参考
・On-Device Captioning with Live Caption

6. Recorder (英語のみ)

音声録音を文字起こしして、単語を検索やエクスポートを行うアプリです。

◎参考
・The On-Device Machine Learning Behind Recorder

7. Now Playing

現在、聞こえている（周囲で流れている）楽曲の情報をロック画面または通知で表示します。

◎ 参考
・Google’s Next Generation Music Recognition

8. ARCore

カメラから現実世界を認識し、拡張現実を実現する機能です。フェイストラッキングやモーショントラッキングにAIが使われています。

9. Google翻訳

Googleの翻訳アプリです。「カメラ映像のリアルタイム翻訳」に続き、「音声のリアルタイム翻訳」も可能になりました。

10. Google Lens

カメラ画像やリアルタイム映像から検索するアプリです。

11. Messages

「Android Q」のメッセージングアプリです。「Smart Reply」が可能です。

◎参考
・Google bringing Smart Reply to all messaging apps in Android Q