Apple、Macの操作にKinectのような3D入力を検討中

Apple、Macの操作にKinectのような3D入力を検討中

Appleは、ユーザーがMacを操作したり操作したりするためのまったく新しい方法に興味を示しており、新しいシステムではユーザーが3次元空間で手を使ってジェスチャーを行うことができる。

このコンセプトは、 AppleInsiderが今週発見した「3次元画像表示システム」と題された米国特許出願で公開されました。この特許出願では、コントローラーを使わずにデバイスを操作できる、MicrosoftのXbox Kinectプラットフォームに似たシステムが説明されています。

Appleのソリューションは、ユーザーの手と指先を光学的に検出し、その動きを測定するものです。これにより、ユーザーはマウスやキーボードを使わずに、手を使ってMacを操作できるようになります。

Appleはアプリケーションの中で、マウスなどの現在のコンピュータ入力デバイスは、X軸とY軸に沿った2次元的なシステム制御を可能にすると述べている。しかし、3次元のオブジェクトを操作する場合、ジョイスティックやマウスなどの入力方法は扱いにくい場合がある。

「したがって、コンピュータ用のシンプルで経済的でありながら、非常に効果的な3D入力デバイスの必要性は依然として残っている」と出願書類には記されている。「このようなデバイスは、3D空間内に配置された物体を検出、分析、測定し、その動きを観察・追跡できる必要がある。」

アップルの申請書類には、あらゆるシステムが成功するには「経済的で、小型で、持ち運びやすく、多用途である」必要があると記されている。また、ユーザーに「統合的で即時のフィードバック」を提供し、本格的なMacからiPhoneのようなポータブル電子機器に至るまで、様々なデバイスでの使用に適した適応性を備えている必要がある。

Appleが申請書で説明しているハードウェアは、ユーザーの手だけでなく頭部も追跡できる可能性がある。想定されるコンポーネントとしては、赤外線センサーまたは可視レーザー、高速光検出器、デジタル信号プロセッサ、2軸スキャンデバイス、アナログおよびビデオ用のサブシステムなどが挙げられる。

Appleは、より自然に手や指先を使ってデバイスを操作できるユーザーインターフェースを構想しています。付属のディスプレイには、ノブ、スライダー、ボタンなどが表示され、ユーザーは3次元空間で仮想的に操作できるようになります。

アプリケーションに添付されている画像の一つでは、ユーザーが両手を使ってiMacの入力を選択している様子が描かれています。左手で仮想ノブを回し、右手の人差し指でボタンを押しています。

このシステムは、画面上の視覚的な手がかりによってユーザーを支援し、画面上のオブジェクトをより簡単に操作できるようにします。例えば、Appleのシステムには、iMacの画面上にユーザーの手の仮想表現が表示されます。

Appleは、このアプリケーションで、説明されているシステムの潜在的な用途をいくつか示しています。例えば、ヘッドトラッキングは、ユーザーの頭の位置に基づいて画像を傾けたり、画面を拡大したりするために使用できます。これにより、電動カメラシステムで移動中の人物を追跡することが可能になります。

手のジェスチャーでは、システムは指、親指、手のひらなどの個々の要素を追跡できます。ジェスチャーを使用することで、ユーザーは3D回転、ズーム、スクロール、音量調節といった複雑なタスクを実行できます。

Appleが説明したシステムのもう一つの機能は、ユーザーの存在検知です。これにより、システムはユーザーがディスプレイの前に座っているかどうかを検知し、さらには特定のユーザーを識別することができます。また、ユーザーが離れると自動的にシャットダウンし、電力を節約することもできます。

特許2 2

Appleが挙げているその他の潜在的な用途としては、監視、バーコード読み取り、物体測定、画像の置換・置き換え、仮想キーボードなどが挙げられます。キーボードの例では、個々の指の動きを追跡して入力したり、キーボードの画像をデスクトップに投影して入力中の視覚的な補助を提供したりできるとAppleは述べています。

今週、米国特許商標庁によって公開されたこの提案発明は、今年8月にAppleによって初めて出願されたもので、Christoph H. Krah氏によるものとされています。