Appleは、ストリートビューのような風景画像を正確に描写するAIエージェントを開発中であることが明らかになりました。この技術は、将来的に視覚障害者が訪問先の環境を事前にバーチャルで確認できる画期的なツールとなる可能性を秘めています。

Apple Machine Learning Researchが発表した論文で詳細が明かされた「SceneScout」と名付けられたこのAIエージェントは、マルチモーダル大規模言語モデル（LLM）を基盤としています。ストリートビューのような画像を解析し、その内容を詳細に描写することが可能です。

この研究が実用化されれば、iPhoneの「Look Around」機能がさらに強化され、視覚障害のあるユーザーが実際に訪れる前に、その場所の物理的な特徴やレイアウトをバーチャルに理解できるようになることが期待されます。これにより、事前の情報収集を支援し、より安全な移動に貢献すると見られています。