Yahooの元最高経営責任者（CEO）であるマリッサ・メイヤーは、携帯電話に保存された写真の履歴が、メールやカレンダーよりもユーザーの生活を多く明らかにする可能性に賭けている。これはDazzleが構築の基盤とする考え方だ。Dazzleは個人向けAIアシスタントで、開発するスタートアップは昨年12月のシードラウンドで800万ドルを調達した。
複数のテキストアプリから文脈を集める代わりに、Dazzleは一つの情報源、つまり写真ライブラリに焦点を当てる。メイヤーによると、このシステムは写真を分析し、趣味、関心、食べ物、個人的な好みに関する手がかりに加え、時間の過ごし方や、ユーザーの生活に繰り返し登場する人物についての情報を抽出できる。
Dazzleはどのように機能するのか？
このアシスタントはアプリまたはテキストメッセージで利用でき、その機能は主に二つの経路に分かれる。直接的なタスクでは、最近の写真を調べて実行可能な情報を抽出する。例えば、イベントのチラシを読み取って詳細をカレンダーに追加したり、損傷したガレージドアの写真に気づいて修理業者を探すことを提案したりする。
もう一つの経路では、写真履歴全体を使って、休暇、贈り物、家族向けの活動など、個人に合わせた提案を作成する。旅行に関する依頼を試した際、Dazzleは地中海の旅行先を提案し、過去のスペインとギリシャへの旅行を参考にしたようだった。また、陶芸教室や、トマレス湾での生物発光するボートによるパドリングツアーなど、地元の活動も提案した。
何が特徴で、どのような限界があるのか？
Dazzleが提供しようとしている利点は、単に写真の内容を認識したり、写っている商品を検索したりすることではなく、蓄積された写真を生活様式や関心と結び付けることにある。メイヤーは、システムが家族の写真から、家族が脱出ゲームを好むと推測し、彼女が知らなかったサンフランシスコ・ベイエリアの複数の場所を提案したと語った。
しかし、試用では明確な限界も明らかになった。アシスタントは、ユーザーの娘がすでにスキーを知っているにもかかわらず、娘のためにスキー靴を購入するよう提案した。また、4年前の出来事であるにもかかわらず、シチリア旅行を記憶していた。このことは、アーカイブからの推論が常に一貫しているわけでも、ユーザーにとって理解しやすいわけでもないことを示している。
なぜこの方向性が重要なのか？
Dazzleは個人向けアシスタントの設計における異なる方向性を示している。メールやカレンダーに基づいて命令を実行することから、ユーザーのアイデンティティーや好みについてのモデルを構築しようとすることへの移行だ。これにより提案の適合性は高まる可能性があるが、その一方で、システムが分析しなければならないデータの機微性は高まる。写真ライブラリには、子ども、住宅、場所、私的な出来事の写真が含まれている可能性があるためだ。
メイヤーは、Dazzleはプライバシーを優先し、AIが機微情報だと特定した個人情報を削除すると述べている。また、特にMuseやInstinctのような競合アシスタントに関連するセキュリティー上の懸念を踏まえると、メールやメッセージへのアクセスを許可するよりも、写真をアシスタントに渡すことを好むユーザーもいると考えている。しかし、この主張は基本的な疑問をなくすものではない。機微データを削除する仕組みで十分なのか、またユーザーは、システムが推測した内容の正確さや、追加情報を保持していないことをどのように確認できるのか。
メイヤーは、写真ツールに関する過去の経験を、自身の会社Sunshineを通じて持っている。同社は2024年にAIを利用したツール「Shine」を公開したが、設計や普及の弱さを批判された後、後に提供を停止した。メイヤーは、この経験が有用な知的財産を残したと述べている。Dazzleは、より個人に寄り添うアシスタントについて有望な構想を示しているが、競合アシスタントほど包括的ではなく、より広範なデータソースに依存するアシスタントに代わる持続可能な選択肢となるには、記憶と推論の誤りを克服する必要がある。