特許ウォッチ

公開番号2025134062
公報種別公開特許公報(A)
公開日2025-09-11
出願番号2025120683,2024091591
出願日2025-07-17,2020-02-07
発明の名称仮想空間制御システム、仮想空間制御方法、およびプログラム
出願人株式会社ドワンゴ,株式会社バーチャルキャスト
代理人個人
主分類G06T 19/00 20110101AFI20250904BHJP(計算;計数)
要約【課題】HMDを装着したまま、現実空間の実体物を利用可能にする。
【解決手段】没入感のある仮想空間内で行われる授業を視聴するための生徒用端末30は、仮想空間情報に基づいて仮想空間を表示するVR機能部301と、授業を視聴する生徒の手の届く範囲の現実空間を撮影した映像を入力する入力部302を備える。VR機能部301は、映像から仮想空間内の机オブジェクトに対応する机の天板が写っている領域を抽出し、机オブジェクトの天板部分に領域内の映像をはめ込み合成する。
【選択図】図4
特許請求の範囲【請求項１】
カメラと、
ヘッドマウントディスプレイと、
前記カメラで撮影した現実空間映像から現実オブジェクトを検出し、前記現実オブジェクトが仮想オブジェクトにはめ込み合成された仮想空間を前記ヘッドマウントディスプレイに表示させる制御部と、を備える、
仮想空間制御システム。
続きを表示（約 1,000 文字）【請求項２】
請求項１に記載の仮想空間制御システムであって、
前記制御部は、マーカーレスＡＲの技術に基づいて現実空間の３次元空間情報を測定し、前記３次元空間情報に基づいて前記現実オブジェクトを検出する、
仮想空間制御システム。
【請求項３】
請求項１または２に記載の仮想空間制御システムであって、
前記現実オブジェクトは平面を有するオブジェクトである、
仮想空間制御システム。
【請求項４】
請求項１ないし３のいずれかに記載の仮想空間制御システムであって、
前記制御部は、前記現実オブジェクトがはめ込み合成された仮想オブジェクト以外は、現実空間映像を含まない仮想空間を表示させる、
仮想空間制御システム。
【請求項５】
請求項１ないし４のいずれかに記載の仮想空間制御システムであって、
前記制御部は、前記現実オブジェクトの位置を検出し、前記現実オブジェクトの位置に基づいて前記仮想オブジェクトの位置を調整する、
仮想空間制御システム。
【請求項６】
請求項１ないし５のいずれかに記載の仮想空間制御システムであって、
前記制御部は、前記現実オブジェクトの大きさを検出し、前記現実オブジェクトの大きさに基づいて前記仮想オブジェクトの大きさを調整する、
仮想空間制御システム。
【請求項７】
請求項１ないし６のいずれかに記載の仮想空間制御システムであって、
前記制御部は、前記仮想空間に前記ヘッドマウントディスプレイを装着した利用者のアバターを配置し、前記利用者の頭の動きに基づいて仮想カメラを制御し、前記アバターの視点から見える前記仮想空間を表示させる、
仮想空間制御システム。
【請求項８】
カメラで撮影した現実空間映像から現実オブジェクトを検出し、
前記現実オブジェクトが仮想オブジェクトにはめ込み合成された仮想空間をヘッドマウントディスプレイに表示させる、
仮想空間制御方法。
【請求項９】
コンピュータに、
カメラで撮影した現実空間映像から現実オブジェクトを検出する処理と、
前記現実オブジェクトが仮想オブジェクトにはめ込み合成された仮想空間をヘッドマウントディスプレイに表示させる処理と、
を実行させるプログラム。

発明の詳細な説明【技術分野】
【０００１】
本発明は、仮想空間内で行われる授業を視聴する技術に関する。
続きを表示（約 1,400 文字）【背景技術】
【０００２】
近年、テレビ・ラジオを用いた通信教育だけでなく、情報通信技術（ＩＣＴ）を利用した通信教育システムが広まっている。
【０００３】
ＩＣＴを利用した通信教育システムの一つとして、没入感のある仮想現実（ＶＲ）技術を用い、例えば生徒がヘッドマウントディスプレイ（ＨＭＤ）を装着し、仮想空間内で授業を行うことが考えられる。没入感のある仮想空間内での授業に参加することにより、外界の情報をシャットダウンでき、テレビやパーソナルコンピュータなどを用いたときに比べて授業に集中できる。
【先行技術文献】
【特許文献】
【０００４】
特開２０１２－２０３７８６号公報
特開２０１９－１０１９４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、ＨＭＤなどにより視界を覆った没入感のある仮想空間では、現実空間の机上にある教科書、ノート、およびパソコンなどの実体物はＨＭＤを外さなければ利用することができない。仮想空間内で行われる授業中に、ＨＭＤを着けたり外したりする動作は面倒である。
【０００６】
ＨＭＤを装着したユーザが下方向を向いたことを検知した場合、ＨＭＤの備えるカメラで撮影した映像を仮想空間内に表示する技術が知られている。この技術を用いると、ＨＭＤを外すことなく現実空間の教科書やノートを使うことができる。しかしながら、従来の方法は、仮想空間内に配置されたオブジェクトを考慮せず、仮想空間の下部に現実空間の映像を表示するものであり、せっかくの没入感が阻害されてしまうという問題がある。
【０００７】
特許文献１には、キャラクタを描画した仮想の画像と現実の画像とを合成し、キャラクタに現実の画像に含まれるフィギュアに合わせたリアリティのある動作をさせる技術が開示されている。特許文献１の技術は、現実空間に仮想のキャラクタを合成するものであって、仮想空間内に現実空間の実体物の映像を合成するものではない。
【０００８】
特許文献２には、仮想空間において手書きの文字を入力する技術が開示されている。特許文献２の技術は、現実空間にある操作板（アクリル板）に対応するオブジェクトを仮想空間内に表示する。ユーザが現実空間において指で操作板に文字を書くと、書いた文字が認識されて仮想空間内のオブジェクトに表示される。ユーザは、現実空間の操作板を用いて手書き文字を仮想空間内に入力できるが、現実空間の操作板に書いた文字が残されるものではなく、現実空間でのノートの作成には利用できない。
【０００９】
本発明は、上記に鑑みてなされたものであり、ＨＭＤを装着したまま、現実空間の実体物を利用可能にすることを目的とする。
【課題を解決するための手段】
【００１０】
本発明の一態様の仮想空間制御システムは、カメラと、ヘッドマウントディスプレイと、前記カメラで撮影した現実空間映像から現実オブジェクトを検出し、前記現実オブジェクトが仮想オブジェクトにはめ込み合成された仮想空間を前記ヘッドマウントディスプレイに表示させる制御部と、を備える。
【発明の効果】
（【００１１】以降は省略されています）

関連特許