数か月にわたる噂の後、Apple Intelligence がついに登場し、ユーザーに単なる画像生成以上のものを提供することを約束しています。
AppleはWWDC 2024の基調講演の終盤、主要OSの発表に続き、メインイベントへと移りました。そこでは、たびたび噂されてきた機械学習への取り組みについて説明が行われました。
「Apple Intelligence」と名付けられたこの新機能は、大規模言語モデル (LLM) を使用して、テキスト、画像、アプリ内アクションなどのタスクを処理することに重点が置かれています。
まず、システムは重要な通知を要約し、状況に応じて最も重要な項目を要約でユーザーに表示します。また、各通知の重要な詳細もユーザーに提示され、新機能「中断を減らす」フォーカスでは最も重要な項目のみが表示されます。
iPadOS 18のメールにおけるApple Intelligenceのテキストオプション
システム全体で利用可能なライティングツールは、ユーザーに代わってテキストの作成、校正、要約を行うことができます。メッセージや短いテキストのみに対応しているように思われがちですが、ブログ投稿などの長文にも使用できます。
ライティングツールのリライト機能は、ユーザーが既に書いたテキストを複数のバージョンから選択して調整できる機能です。対象読者に応じて、トーンを調整できます。
これは、組み込みアプリとサードパーティ アプリ間で自動的に利用できるようになります。
画像
Apple Intelligenceは、多くの内蔵アプリ向けに画像を作成することもできます。例えば、メッセージアプリで特定の連絡先との会話をカスタマイズすることも可能です。
これらの画像は、スケッチ、アニメーション、リアリズムの 3 つのスタイルで作成されます。
メッセージなどのアプリでは、Image Playground を使うことで、テーマ、衣装、場所といったコンセプトを選択したり、説明を入力したりすることで、簡単に画像を作成できます。また、ユーザーの写真ライブラリから画像を追加して、作品に使うこともできます。
これは、メッセージ自体内で実行することも、専用の Image Playground アプリを通じて実行することもできます。
iPadOSの画像プレイグラウンド
ノートでは、新しい「イメージワンド」ツールを使ってイメージプレイグラウンドにアクセスできます。このツールでは、現在のノートページの要素に基づいて、追加するのに最適な画像を自動的に検出し、画像を作成することもできます。
画像生成機能は絵文字にも拡張され、Genmojiではユーザーが独自のカスタムアイコンを作成できます。説明を入力することで、Genmojiを作成し、メッセージにインラインで挿入できます。
より一般的な機能として、写真アプリにAIが自然言語を使って特定の写真や動画クリップを検索できるようになりました。新しいクリーンアップツールは、写真の背景から不要なオブジェクトを除去します。
アクションとコンテキスト
また、ユーザーに代わってアプリ内でアクションを実行することもできます。例えば、フォトアプリを開き、リクエストに応じて特定のグループの写真を表示できます。
Apple Intelligenceは幅広いアプリをサポートする
Appleはまた、Apple Intelligenceはユーザーデータ内のリクエストのコンテキストに基づいて動作すると述べている。例えば、ユーザーの家族構成や、会議の重複や衝突の可能性などを判断できる。
アプリ内でアクションをトリガーできる複雑なクエリの一例として、「ジェイミーが勧めたポッドキャストを再生して」が挙げられます。Apple Intelligenceは、ユーザーの会話全体から参照を検索してエピソードを特定し、Podcastsアプリを開いてそのエピソードを表示します。
メールアプリでは、Apple Intelligenceによって選択された最も緊急性の高いメールを、優先メッセージとしてリストの一番上に表示できます。各メールの概要も表示されるため、ユーザーはメールの内容や選択された理由をより深く理解できます。
メモのApple Intelligence
Apple Intelligenceのおかげで、Notesユーザーは音声を録音、書き起こし、要約することができます。通話が録音された場合、通話終了時に要約書き起こしが作成され、録音開始時に通話参加者全員に自動的に通知されます。
当然のことながら、Siri は Apple Intelligence によって大幅にアップグレードされ、特定の状況でユーザーを理解できるようになりました。
この一環として、Siri はクエリを ChatGPT に参照することもできます。
プライベートクラウドコンピューティング
これらの多くは、セキュリティとプライバシーのためのデバイス内処理に基づいています。iPhone 15 ProシリーズのA17 Proチップは、このレベルの処理に対応できるほど強力だと言われています。
多くのモデルはデバイス上で動作しますが、処理にはクラウド内での処理が必要になる場合があります。これはセキュリティ上の問題となる可能性がありますが、Appleの方法は異なります。
プライベートクラウドコンピューティングにより、Apple Intelligenceはセキュリティとプライバシーを維持しながらクラウドで動作できます。モデルは、Swiftのセキュリティ機能を利用して、Apple Siliconを搭載したサーバー上で実行されます。
リクエストがクラウド サーバーに送信されるか、ローカルで処理できるかによって、デバイス上のプロセスが決定されます。
Appleは、サーバーは安全であり、ユーザーデータを保存せず、セキュリティ維持のために暗号化要素を使用していると主張しています。これには、独立した専門家による検査のためにサーバーが公開ログに記録されていない限り、デバイスがサーバーと通信しないことも含まれます。
すべてのユーザー向けではない
Apple Intelligence は多くのユーザーにとって有益ですが、その要件により、多くのユーザーがそれを享受できなくなるでしょう。
iPhoneではA17 Proチップの要件により、ベータ版を試すことができるのはiPhone 15 ProとPro Maxのユーザーのみです。同様に、Mシリーズチップを搭載したiPadやApple Siliconを搭載したMacでも利用可能です。
ベータ版は「今秋」に米国英語のみで利用可能になる予定。
