AppleのSiriは2011年以来iOSの定番となっているが、この技術はまだOS Xには採用されていない。しかし、新たに提出された詳細な特許出願には、音声入力や高度なシステムコマンドを実行できるだけでなく、Macユーザーにとって「第3の手」として機能する、非常によく似たデスクトップ版の仮想アシスタントの詳細が記載されている。
米国特許商標庁が木曜日に公開した、Apple の「デスクトップ環境におけるインテリジェントデジタルアシスタント」に関する 92 ページに及ぶ膨大な特許出願には、Mac の現在の音声ディクテーション機能をはるかに超える技術が記載されており、簡単に「Mac 版 Siri」とみなすこともできる。
iOS限定の現行Siriと同様に、Appleのデスクトップ版Siriは自然な音声とテキスト入力を処理し、タスクの完了、データの入力と取得、検索の実行などのアクションを実行できます。さらに、出願書類では、ユーザーの意図を推測し、その文脈に基づいてコマンドが解釈されることが指摘されています。つまり、デスクトップ版Siriは音声認識を用いて文脈上の手がかりを解読し、記憶することになります。
出典: USPTO
オフサイトサーバーとの連携により動作するMac版Siriは、iOS版Siriと同一のバックエンドを備えています。ユーザー向けのSiriアセットは、マウスやキーボードの特別なジェスチャーで起動するスタンドアロンアプリに統合することも、バックグラウンドで実行するように設定して、Appleの次期iOS 8に実装された「Hey, Siri」のような特別な起動フレーズを待機させることもできます。
いくつかの実施形態では、仮想アシスタントのアイコンがドックに表示され、アクティブでサービスが利用可能であることをユーザーに通知します。このモードやその他のモードにより、ユーザーはオペレーティングシステム内のどこからでもコマンドを発声したり、ディクテーションを開始したりできます。
音声入力は、特許開示において特に重要です。この技術はキーボードとマウスによる入力を補完し、場合によっては物理的なツールを完全に置き換えることを目指しているからです。iOS版Siriで見られるような通常の応答方法はデスクトップ版にも適用されていますが、適切なコンピュータによって得られる追加の計算能力を活用すれば、より高度な操作も実行できます。
Appleのデスクトップ版Siriは、「フォーカスセレクター」、つまりマウスカーソルを使って、ユーザーがコマンドにコンテキストを適用できるようにしています。例えば、アシスタントはマウスカーソルをホバーさせているアセットのコピー操作を実行したり、ハイライト表示されたファイルをまとめて「保留」にして後で取り出せるようにしたりできます。本質的には、フォーカスセレクターはiOSデバイスのユーザーの指と同じ役割を果たしますが、MacのGUIのおかげで、操作オプションが大幅に増えています。
マウス操作により、ユーザーはファイル、フォルダ、その他のアセットをSiri Dockアイコンにドラッグ＆ドロップして処理できます。例えば、写真がいっぱい詰まったフォルダは、「日付で並べ替えて」や「場所で並べ替えて」とアシスタントに話しかけることで並べ替えることができます。操作が完了すると、追加のコマンドが発行されるか、アイコンにテキストまたは音声で追加オプションのリストが表示される場合があります。
複数のアセットをアシスタントにドラッグ＆ドロップすることで、高度な照合、マージ、比較操作を行うことができます。その他の操作についても、特許全文で説明されています。
特に興味深い機能は、「デジタルアシスタントを第三の手として使う」というものです。Appleは、現在のグラフィカルユーザーインターフェースはマルチタスクなどの分野ではある程度の制約があると指摘しています。例えば、デスクトップ環境で複数のアプリケーションが動作している場合でも、ユーザーが一度に操作できるのは1つのウィンドウまたはアセットに限られます。
場合によっては、ユーザーが1つのタスクを実行している最中に、主操作への集中を維持するために2つ目または3つ目のアクションが必要になることがあります。例えば、テキストエディタで入力中に、画像やWeb上の情報にアクセスしたい場合があります。音声でデジタルアシスタントを呼び出してこの副次的なタスクを実行すれば、マウスクリックの手間が省け、手元のテキスト編集タスクに集中し続けることができます。
他の例としては、デスクトップ上で複数のファイルを選択した状態でフォルダを作成したり、アシスタントに画像のサイズ変更を依頼したり、メールを送信したり、音声をテキストに変換したりといった機能があります。理論的には、Mac版Siriはユーザーが通常利用できるあらゆる操作を実行できるはずです。
Appleが近い将来に「Siri for Mac」のバージョンをリリースする予定があるかどうかは不明だが、最新のOS X 10.10 Yosemiteベータ版にはそのような機能は組み込まれていない。Appleがデスクトップ仮想アシスタントをリリースする計画があるという噂は以前からあり、iPhoneにSiriが導入されたころまで遡るが、OS Xソリューションが機能するという確たる証拠はまだない。
AppleのMac用Siriの特許申請は2013年に初めて提出され、発明者としてJulian K. Missig、Jeffrey Traer Bernstein、Avi E. Cieplinski、May-Li Khoe、David J. Hart、Bianca C. Costanzo、Nicholas Zambetti、Matthew I. Brownが名を連ねている。
