Appleは画像をアニメーション化するための新しい生成AIツールを構築した

Appleは画像をアニメーション化するための新しい生成AIツールを構築した

Apple の研究者は、ユーザーが画像とそのアニメーション化方法を説明できるテスト生成 AI アプリ「Keyframer」を作成した。

AppleがAI導入において他のテクノロジー企業に遅れをとっていると批判されてから、それほど時間は経っていません。Appleの機械学習は長年iOSの鍵となってきたため、これは全くのナンセンスでした。しかしその後、同社の研究者がAIアバターに関する論文を含む学術論文を発表しました。

今回、新たな研究論文が発表されました。今回はAppleの研究者3人が、「大規模言語モデルを用いたアニメーションデザインの強化」を目的としたアプリの調査とテストを行っていました。Keyframerと呼ばれるこのAIアプリは、ユーザーがアニメーションを記述すると、ウェブサイト用のCSSアニメーションコードを生成します。

Keyframerは一般公開されておらず、テストもかなり限定的だったようです。ティファニー・ツェン、ルイジア・チェン、ジェフリー・ニコルズの3人の研究者は、この研究は主に13人の参加者に基づいて行われたと述べています。

参加者はまず、どのような画像が欲しいかを平易な英語で説明文に書きました。Adobe Firefly AIも今のところ同じように動作しています。

しかし、Fireflyや類似の既存アプリでは、画像が生成されると、ユーザーはアプリの手動コントロールを使って調整や加工を行うことしかできません。AppleのKeyframerは、ユーザーが必要なものや削除したいものを継続的に記述することで、デザインを何度も変更できるように設計されました。

具体的には、この論文では、これまでの生成AI画像処理の試みを「ワンショットプロンプトインターフェース」と表現しています。これに対し、Keyframerはユーザーが同じ画像に対して複数回プロンプトを出し続けられるように構築されています。

ユーザーの説明に基づいて自動的に生成されたコードを示す研究論文の詳細

ユーザーの説明に基づいて自動的に生成されたコードを示す研究論文の詳細

「Keyframerは本当に魔法のようです。こんなアニメーションを手動で作るのは到底無理ですから…」と、ある初心者参加者はKeyframerを使った後に言いました。「このツールがなければ、どこから始めればいいのかさえ分からなかったでしょう。」

「これらのツールが仕事を奪ってしまうのではないかと少し心配しています。その可能性は非常に大きいからです」と、あるプロのアニメーターは研究者たちに語った。「しかし、アニメーターとしてこれらのツールについて学び、活用することは、私たちの道具箱の中のもう一つのツールに過ぎないと思っています。」

「私たちのスキルは向上するばかりです」と、彼もしくは彼女は続けた。「本当にエキサイティングなことです。」

研究論文(31 ページ、16,000 語の文書)は公開されていますが、Keyframer 自体はリリースされておらず、社内テスト用のアプリのみです。

しかし、その存在は、Appleが生成AIを広範囲にテストしてきたという主張を裏付けるものです。AppleはWWDC 2024で、iOSやSiriなどのAI関連の重要な改良を発表すると噂されています。