9月14日、バイトダンスのAIアシスタント「豆包」の消費者版が発表され、初の搭載端末Nubia NaviX Ultraは9月16日に発売される。同時に公表されたSAEPプロトコルは、サードパーティアプリに「AIに操作させるか」の拒否権を初めて正式に与えるものだ。AIによるアプリ操作のルール策定権を、バイトダンスが先に握った。
Nubiaの相乗りで、ようやく量産機が一本できた
最初に本当に稼働する入口は、Nubiaの新端末だ。豆包スマホアシスタントはもはやデモ動画の中だけで動く存在ではない。
プレビュー版から消費者版へ移行し、豆包はもはや概念を語らず、安定性と日常的な実用性を語る。最初の搭載端末はNubia NaviX Ultraで、予約受付も始まっている。
ハードウェアの見どころは盛りだくさんだ。2億画素のメインカメラ、7.62mmのボディに7100mAhのバッテリーを詰め込み、「世界初のAIエージェントスマホ」の称号もすでにつけられた。豆包アシスタントはシステムレイヤーで携帯メーカーと協業しており、AI起動は音声と専用AIキーの2種類。AIキーには指紋認証(押した瞬間に正規ユーザー本人かを検証する仕組み)が組み込まれており、本人確認が完了すれば再ロック解除なしでアシスタントを呼び出せる。
新バージョンにはもう一つの機能が加わった。スクリーンQ&A(画面質問応答)だ。スクリーンショットも不要、アプリ切り替えも不要。アシスタントが直接画面を読み取り、タスクを続行する。手動での記憶保存は3通り。音声入力、3本指で上方向スワイプ、AIキーと音量ボタンの同時長押し。
最も話題を呼んだ「スマホを操作する」機能は削除されず、ベータ版として開放された。これに伴い、豆包は画面の自動化操作に関する宣言プロトコル「SAEP」を発表し、30日間のルール公示を開始した。サードパーティアプリは操作範囲を自主的に宣言でき、AIアシスタントによる画面内自動化操作の許可・拒否を明確に示せる。豆包は明確に拒否したアプリへの強行操作を行わないと約束している。
カメラを部屋に向けて棚を探す。録音は昨日の会議まで掘り返せる
豆包スマホアシスタントには2つの起動手段が用意されている。声をかけるか、AIキーを押すか。キーには指紋モジュールが内蔵され、本人確認後そのままアシスタントが起動。ロック解除のひと手間を省略できる。音声起動は別ルート。遠距離集音と環境ノイズ抑制で、遠隔・騒がしい環境に対応する。
スクリーンQ&Aは日常に最も近い変化だ。カメラを起動して部屋に向ける。そのまま「この内装スタイルで、幅1.2m以内、予算1千元以下の棚を選んで」と頼めば、アシスタントが現在の画面と連動してECサイトの結果を返す。スクリーンショットもアプリ切り替えも不要。カメラとECサイトの間にある継ぎ目を、アシスタント自らが埋める。
ローカル検索もこの流れに組み込まれた。「港澳通行証の有効期限はいつまで?」と聞けば、アシスタントが自分で写真、ショートメッセージ、メモアプリを探す。録音機能もアップグレードされ、公式にFeishu Minutes(飛書妙記)(バイトダンス系ビジネスアプリ「飛書」内蔵の会議文字起こし・要約ツール)が統合された。録音内容はローカルで引き続き検索でき、例えば「昨日ユーザーインタビューで出た改善提案は?」といった深掘り質問にも対応する。保存の入口は3つ。声で頼む、3本指で上方向スワイプ、AIキーと音量ボタンの同時押し。押せば現在の画面がそのままローカル記憶庫に固定される。
公式は消費者版を「プレビュー版の安定化・日常対応版」と位置づけている。同時に発表されたのが画面の自動化操作に関する宣言プロトコル(SAEP)であり、「AIに操作させるかどうか」のスイッチをアプリ自身に渡すものだ。仕組みの落としどころは次節で見る。