特許ウォッチ

公開番号2025155783
公報種別公開特許公報(A)
公開日2025-10-14
出願番号2024223121
出願日2024-12-18
発明の名称情報処理装置、情報処理方法およびプログラム
出願人キヤノン株式会社
代理人個人,個人,個人,個人,個人
主分類G06T 19/00 20110101AFI20251002BHJP(計算;計数)
要約【課題】マスキングCGの描画方法を制御することで、より好適なMR体験乃至VR体験をユーザーに提供する。
【解決手段】あるユーザが装着する表示装置の表示を制御する情報処理装置であって、
前記表示装置に表示させる仮想物体の情報である仮想物体情報を取得する取得手段と、
前記取得手段により取得された前記仮想物体情報に基づき、前記仮想物体の画像の表示を制御する制御手段と、を備え、前記制御手段は、他のユーザが装着する他の表示装置の表示画面において実物体上に透明マスク画像を重畳させることを示すマスキングフラグが前記仮想物体情報に含まれていた場合、前記透明マスク画像とは異なる画像を前記表示装置に表示させるように制御する、情報処理装置。
【選択図】図11
特許請求の範囲【請求項１】
あるユーザが装着する表示装置の表示を制御する情報処理装置であって、
前記表示装置に表示させる仮想物体の情報である仮想物体情報を取得する取得手段と、
前記取得手段により取得された前記仮想物体情報に基づき、前記仮想物体の画像の表示を制御する制御手段と、
を備え、
前記制御手段は、
他のユーザが装着する他の表示装置の表示画面において実物体上に透明マスク画像を重畳させることを示すマスキングフラグが前記仮想物体情報に含まれていた場合、前記透明マスク画像とは異なる画像を前記表示装置に表示させるように制御する、
情報処理装置。
続きを表示（約 870 文字）【請求項２】
前記透明マスク画像は、前記仮想物体情報に含まれるモデル情報に基づく透明な画像である、
請求項１に記載の情報処理装置。
【請求項３】
前記制御手段は、
前記取得手段により取得された前記仮想物体情報に前記マスキングフラグが含まれていない場合、前記仮想物体情報に含まれるモデル情報に基づく可視画像を前記表示装置に表示させるように制御する、
請求項２に記載の情報処理装置。
【請求項４】
前記透明マスク画像と異なる画像は、前記透明マスク画像に色が付与された画像である、
請求項１に記載の情報処理装置。
【請求項５】
前記透明マスク画像に付与される色は、予め指定された色である、
請求項４に記載の情報処理装置。
【請求項６】
前記透明マスク画像に付与される色は、前記他の表示装置により取得された前記実物体の色情報に基づく色である、
請求項４に記載の情報処理装置。
【請求項７】
前記透明マスク画像と異なる画像は、前記透明マスク画像に基づくモデル画像である、
請求項１に記載の情報処理装置。
【請求項８】
前記制御手段は、
前記表示装置および前記他の表示装置が同一の空間に存在する場合、前記仮想物体情報に前記マスキングフラグが含まれているか否かに関わらず、前記実物体上に前記透明マスク画像を重畳させる制御を行う、
請求項１に記載の情報処理装置。
【請求項９】
前記表示装置および前記他の表示装置が同一の空間に存在するか否かは、同一のセンサコントローラから位置姿勢情報が取得されているか否かに基づき判定される、
請求項８に記載の情報処理装置。
【請求項１０】
前記情報処理装置は、前記表示装置に搭載される、
請求項１から請求項９までのうちいずれか一項に記載の情報処理装置。
（【請求項１１】以降は省略されています）
発明の詳細な説明【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法およびプログラムに関する。
続きを表示（約 1,400 文字）【背景技術】
【０００２】
現実世界と仮想世界とをリアルタイムに融合させる技術として、複合現実感（ＭＲ：ＭｉｘｅｄＲｅａｌｉｔｙ）技術が知られている。この技術は、現実空間とコンピュータによって作られるＭＲ空間を繋ぎ目なく融合する技術である。ＭＲにおいては頭部装着型装置（ＨＭＤ：ＨｅａｄＭｏｕｎｔＤｉｓｐｌａｙ）を用いて、ＭＲ空間をより現実に近い視点で体験ができる。
【０００３】
従来の一般的な複合現実感提示方法は、現実映像の画像の上にＣＧ（ＣｏｍｐｕｔｅｒＧｒａｐｈｉｃｓ）画像を重畳するだけであり、現実に存在する物体とＣＧ物体の奥行き関係は考慮されていない。そこで、現実物体とＣＧ物体の重なる領域を検出し、検出した領域におけるＣＧをマスキングして現実物体が見えるように表示することが従来から行われている（特許文献１）。
【０００４】
ＣＧマスキング手段として、現実物体撮影されているとされた画像領域をＣＧのステンシルバッファにセットするか、デプスバッファ（Ｚバッファ）のセットすることなどによって、透明ＣＧの奥行を取得し該当部分にＣＧが描画されないようにする。このようにすることで、仮想物体との前後関係を取得することができる。
【０００５】
また、人物やオブジェクトの３次元モデルをリアルタイムに共有する技術と、ＸＲデバイスと組み合わせることで、遠隔にいるユーザーと、異なる現実空間で同じ仮想物体を共有したＭＲ空間でコミュニケーションができる技術が知られている。
【０００６】
この技術を用いて、例えば試作中の工場の組み立て設備ＣＧと、設備完成後に実際に用いる現実物体を手に持って、ＭＲ空間で作業を確認する使われ方が考えられる。
【０００７】
この場合においても、現実物体を持ったユーザーは現実物体と、仮想物体の前後奥行関係を疑似的に再現した透明ＣＧマスク画像を得ることができる。一方で、現実物体を持たない遠隔ユーザーには、マスキングＣＧが共有されるため、現実物体が描画されるはずのマスキングＣＧ位置には、遠隔ユーザー側の現実空間が透過して見えてしまう。このため、手に持った現実物体を主題としたコミュニケーションを取る際に、意図している内容が伝わらない状況が発生する。
【０００８】
また、ＸＲデバイスは、動作モードがＶＲとして動作する場合と、ＭＲとして動作する場合がある。マスキングＣＧを設定しているデータの場合、ＶＲとして動作する場合にはマスキングＣＧ位置には、仮想空間の背景映像が透過して見えてしまう状況が発生する。
【０００９】
加えて、マスキングＣＧを設定しているデータの場合、ユーザーが利用する場所や時間が異なることにより、マスキングＣＧに対応している現実物体が存在する場合と存在しない場合がある。現実物体が存在しない場合にマスキングＣＧをそのまま利用すると、現実物体が描画されるはずのマスキングＣＧ位置には現実空間が透過して見えてしまう状況が発生する。
【先行技術文献】
【特許文献】
【００１０】
特開２００３－２９６７５９号公開
【発明の概要】
【発明が解決しようとする課題】
（【００１１】以降は省略されています）

関連特許