Appleは、フィンランドのアールト大学と共同で、画期的なAIモデル「ILuvUI」を開発したことを発表しました。

この「ILuvUI」は、モバイルアプリのインターフェースを理解するために特化されたビジョン・ランゲージ・モデルです。最大の特徴は、アプリのスクリーンショットだけでなく、自然言語での会話を通じてインターフェースの内容を認識し、その機能を把握できる点にあります。

この新しい技術は、今後のアプリ開発やユーザーインターフェースの改善に大きな影響を与えるものと期待されています。