MRゴーグルと連携できる、リアルタイム拡張仮想システム

近年注目が集まるXR(クロスリアリティ)とは、リアルとバーチャルを融合した空間を創り出し，現実にはないものを知覚できるようにする技術の総称です。XRには、現実世界と仮想世界を融合し相互にリアルタイムで影響し合う空間を構築するMR（Mixed reality：複合現実）や、仮想世界の中に実在する映像などのリアルな情報を加える「拡張仮想」などの技術が含まれます。

今回NICTが開発したのは、ゴーグルの装着者がMRを使用する場面において、ゴーグルをつけていない人もパソコンでリアルタイムにMR空間を認識・制御できる拡張仮想の技術です。固定カメラで撮影した現実の映像の上に、CADなどで作成した３Dの仮想物体を重ねた画像を、パソコン側でリアルタイムに描画する仕組みです（図１）。

もちろんゴーグル・パソコンどちらの側からも、3D画像をつかむ、回す、拡大縮小するなど、リアルタイムで自由自在な操作が可能です。既存のオンライン会議アプリと容易に連携でき、映像酔いも発生しにくいため、プレゼンテーション、見学会、MR活用のアプリケーション、展示会など、様々な場面で気軽に活用できます（図２）。