9月28日未明、クアルコムは「第1世代のsnapdragon AR1」と「第2世代のsnapdragon XR2」の発売を発表しました。前者は次世代スマートグラスに特化したもので、後者は次世代VR(仮想現実)やMR(複合現実)機器に対応したものです。
これは、VRとMR業界の現在の勢いに着目したものです。qualcomm technologiesの副総裁兼XR事業総経理の司宏国(Hugo Swart)氏は、この分野では、ゲーム、フィットネス、エンターテイメントなどのCエンドのアプリケーションが発展しており、トレーニング、教育、医療などのエンタープライズシーンにも有望だと考えています。
第2世代snapdragon XR2プラットフォームは、VRとMRの本格的な普及を目指していることをインターフェイス・ニュースなどに強調しました。
「(Vision Proに搭載されたR1チッププランの)アップルの戦略とは異なり、価格が高く、複数のチップと外付けのバッテリーが必要です」司宏国氏は,このようなアーキテクチャではユーザーが端末価格を手に入れることは難しいとしています。一方、第2世代のsnapdragon XR2プラットフォームは、外付けチップセットを必要としないワンチップソリューションで、OEMメーカーが高性能で低価格なハードウェア製品を作るのに適しています。
新プラットフォームは3K × 3Kディスプレイにも対応しており、司宏国氏は「これは現在のVRとMR機器にとって最も理想的なディスプレイ方式だ。市場に存在する4Kディスプレイは表示効果がより良いが、価格が高すぎて、規模を拡大する供給能力がない」と述べています。
さらにクアルコムはこのためにGPUを大幅にアップグレードし、空間歪みやビジュアルフォーカルレンダリングなどの最新技術に対応しています。新プラットフォームは、初代と比較してGPUの性能を2.5倍に向上させ、同じビジュアルで消費電力を半分に抑えています。
AI技術の応用では、新しいプラットフォームはINT8に対応し、異なるAIモジュールの接続を最適化し、コンピュータービジョンモジュールをアップグレードしました。
VRやMRヘッドセットで常時オンになっている6自由度(6DoF)のヘッドトラッキングに必要な膨大な計算力消費を、初代XR2プラットフォームではソフトウェアでサポートしましたが、第2世代プラットフォームでは、この機能をチップハードウェアの視覚分析エンジンに搭載することで性能を向上させました。電力消費と遅延を低減できます
第2世代のsnapdragon XR2は、ユーザーが置かれている環境(床や壁の位置、部屋の中に何があるかなど)を正確に理解し、ヘッドトラッキング、アイトラッキング、ジェスチャートラッキング、全身の動きトラッキングなどを実行するセンシング技術にも対応しています。
司宏国氏によると、これらの新技術は実行中に膨大な計算力を消費するため、新プラットフォームの端末側のAI計算力は前の世代の8倍に向上しているとのことです。クアルコムがXR分野に参入してから10年以上が経ち、これまでXR専用プラットフォームを数多く発表してきました。初代のsnapdragon AR2、snapdragon XR2+、snapdragon XR、snapdragon XR1をはじめ、Meta、lenovo、PICOなどの大手企業と提携し、80以上のハードウェアデバイスを発表してきました。
VR/MR機器は通常10-15 wの放熱に対応しているため、スマートフォンよりも高い放熱能力を備えています。また、ゲーミングPCと接続することで、より高い放熱能力と専用グラフィックスカードでゲームにアクセスすることができます。
XRデバイスと他のスマートデバイスの相互接続は非常に重要で、wi-fi 7などの次世代の接続技術も必要です。第2世代のsnapdragon XR2プラットフォームは、wi-fi 7とwi-fi 6Eの接続をサポートし、消費電力を25%削減し、待ち時間を80%削減しました。新しいプラットフォームは、複合現実(mixed reality)のMR体験におけるビデオの透過遅延を12msに低減しました。
Meta(旧Facebook)のQuest 3は、第2世代snapdragon XR2プラットフォームを搭載した世界初のハードウェア製品として9月28日に発表されました。
第1世代のsnapdragon AR1は、クアルコムが次世代スマートグラス製品のために構築した初の専用プラットフォームであり、撮影能力を重点的に強化しました。
このプラットフォームは14ビットのデュアルISPを採用し、最高級のリアルタイム撮影をサポートしており、自動露出、自動顔検出、HDR計算、ポートレートモードなどのスマートフォンの最先端技術の一部を組み合わせています。
クアルコムは、未来のスマートグラスは、従来のサングラスのような形状で、写真や動画のリアルタイム撮影に対応し、ユーザーがポケットからスマートフォンを取り出して操作する必要がなく、終日着用できるようになると予測しています。
第1世代のsnapdragon AR1には、モーションヘルスセンサーとビジョンサーチが搭載されており、ユーザーは音声コマンドを使ってスマートグラスと対話することで、完全に手を解放することができます。
司宏国氏によると、同プラットフォームがサポートする機能は比較的シンプルで、すべての処理をメガネ側で行うことができ、携帯電話による処理を必要としません。スマートグラスの中の仮想アシスタントは、ユーザーの指示に応じて、ショッピングスポットでのビジュアル検索、リアルタイムの翻訳、商品のピックアップ、ナビゲーションなど、目の前の状況情報を提供します。
「snapdragon AR1」は、さまざまな仕様に対応する拡張プラットフォームでもあり、カメラのみのモデルや単眼、両眼表示に対応したモデルなど、OEMのカスタマイズに適しています。
また、ライブ動画や音楽のストリーミングにも対応しています。ray-ban(レイバン眼鏡)Metaシリーズがこのプラットフォームで初公開されます。
より高い没入感と大画面を備えたAR(拡張現実)メガネは、スマートフォン側で処理しなければならず、開発はさらに複雑になります。司宏国は、クアルコムが継続的に投入し、将来のプラットフォームでこの問題を解決していくと述べています。