iOS 26のビジュアルインテリジェンスにより、スクリーンショットは保存するだけでなく、便利になります

iOS 26のビジュアルインテリジェンスにより、スクリーンショットは保存するだけでなく、便利になります

iOS 26では、Apple Intelligenceがスクリーンショットをショッピング、計画、質問のための強力なツールに変えます。その仕組みをご紹介します。

Appleは、iPhoneユーザーが画面に映る情報とよりスマートにやり取りできる方法を提供しています。iOS 26では、Visual Intelligence機能が写真やカメラアプリ以外にも拡張されます。

スクリーンショットボタンを押すだけで、画面に表示されているものを分析する新しいツールにアクセスできるようになりました。このアップデートにより、ビジュアルインテリジェンスが日常的に活用できるようになります。

スクリーンショットを撮った後、ユーザーは ChatGPT に自分が見ているものについて質問したり、Google や Etsy などのサイトで類似のアイテムを検索したり、イベントの詳細をカレンダーに直接取り込んだりすることができます。

たとえば、誰かがコンサートのポスターやフライトの確認書のスクリーンショットを撮ると、Apple Intelligence は日付、時間、場所を自動的に抽出し、カレンダーイベントの作成を提案します。

アプリを切り替えずに使えるAIツール

目標は、iPhoneをその時々の場面でより便利にすることです。テキストをコピーしたりアプリ間を移動したりする代わりに、ユーザーは画面上で直接コンテンツを操作できます。Appleによると、このプロセスはスピードとプライバシーのためにデバイス上で実行されます。

ビジュアルインテリジェンスはオンラインショッピングにも役立ちます。ユーザーがソーシャルメディアで気に入ったジャケットを見つけた場合、スクリーンショットを撮ることで、小売サイトからビジュアルマッチングを行うことができます。

画像の一部だけをハイライト表示して、検索範囲を絞り込むことも可能です。ハイライト表示により、ユーザーは再入力や手動での検索を行う必要がなくなり、より詳細な制御と文脈を得ることができます。

2台のスマートフォンに、架空のゲーム「マリオカート ワールド」の詳細、検索結果、ゲーム機の画像が表示されています。背景は鮮やかな青色です。

目標は、完璧ではないものの、iPhone をその瞬間にもっと役立つものにすることです。

ChatGPTとの連携がエクスペリエンスに組み込まれているため、ユーザーは画面に表示されている内容について自然言語で質問できます。この連携には、定義、背景情報、さらにはフォームや文書の理解を助ける情報も含まれます。

iOSの大きな変化の一部

このソフトウェアは、対応デバイス向けの無料アップデートとして2025年秋に一般公開される予定です。Visual IntelligenceをはじめとするApple Intelligenceの機能には、少なくともA17チップが必要です。つまり、これらの機能はiPhone 15 Pro、iPhone 15 Pro Max以降のモデルでのみ利用可能です。

パブリックベータ版は、Appleのベータソフトウェアプログラムを通じて7月に公開される予定です。画面レベルのAIツールを統合するというAppleの動きは、既に同様の画面ヘルプ機能を提供しているAndroidスマートフォン「Pixel」や「Galaxy」に対抗するための、より広範な取り組みの一環です。

Appleのこの動きは遅すぎた感はあるものの、賢明な判断と言える。スクリーンショットは、特に簡単にコピーできない場合、人々が情報を保存する最も一般的な方法の一つとして静かに定着している。

これまでiOSは、これらの画像を他の写真と同じように扱っていました。スクリーンショットに脳と目的を与えることは、Apple Intelligenceが派手さではなく、実用性を感じさせる、生活の質を向上させるアップグレードです。

アプリを切り替えたり、使いにくい共有シートに頼ったりする代わりに、スクリーンショットを撮って好奇心に従ってください。特に最初のうちは、完璧ではないかもしれません。

しかし、これは、画面自体がインターフェースであり、使用しているアプリではないという考え方に Apple が傾いていることを示しています。この変化は、画面にまつわる AI 関連の流行語よりも重要になるかもしれません。