特許ウォッチ

公開番号2025149035
公報種別公開特許公報(A)
公開日2025-10-08
出願番号2024049463
出願日2024-03-26
発明の名称生成装置、生成方法、及びプログラム
出願人株式会社JVCケンウッド
代理人弁理士法人酒井国際特許事務所
主分類G06T 19/00 20110101AFI20251001BHJP(計算;計数)
要約【課題】自然な形のモデルを生成することができる生成装置、生成方法、及びプログラムを提供すること。
【解決手段】本開示に係る生成装置は、所定の画像に基づいて、画像に含まれるオブジェクトを検出するオブジェクト検出部と、所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するレイアウト推定部と、所定の画像と、所定の画像に含まれるオブジェクトの種類とに基づき、部屋に足りていないオブジェクトである不足オブジェクトの種類を判定する判定部と、レイアウト推定部が推定した部屋のレイアウトのうち、境界部の欠損部分を補間して、部屋の全体の三次元モデルである全体三次元モデルを生成するモデル補間部と、を備え、モデル補間部は、不足オブジェクトの種類に基づいて、欠損部分の長さに対応する補間距離を算出し、境界部の所定位置から補間距離だけ離れた位置に壁を生成する。
【選択図】図4
特許請求の範囲【請求項１】
所定の画像に基づいて、画像に含まれるオブジェクトを検出するオブジェクト検出部と、
前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するレイアウト推定部と、
前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定する判定部と、
前記レイアウト推定部が推定した部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するモデル補間部と、
を備え、
前記モデル補間部は、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する、
生成装置。
続きを表示（約 1,100 文字）【請求項２】
前記判定部は、前記所定の画像に基づいて前記部屋の種類を特定し、特定した種類の部屋に含まれるべき種類のオブジェクトのうちで、前記画像に含まれていない種類のオブジェクトを、前記不足オブジェクトの種類として特定する、
請求項１に記載の生成装置。
【請求項３】
前記所定の画像に基づいて、前記境界部における窓の有無を判定し、窓が無いと判定された場合に、補間して生成された前記壁のうち、窓の配置が可能な壁に対して、窓を配置する窓配置部と、をさらに備え、
前記窓配置部は、前記不足オブジェクトの種類に基づいて、配置する窓の大きさ及び数の少なくとも一方を設定する、
請求項２に記載の生成装置。
【請求項４】
所定の画像に基づいて、画像に含まれるオブジェクトを検出するステップと、
前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するステップと、
前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定するステップと、
前記レイアウトを推定するステップにおいて推定された部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するステップと、
を含み、
前記補間して生成するステップにおいては、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する、
生成方法。
【請求項５】
所定の画像に基づいて、画像に含まれるオブジェクトを検出するステップと、
前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するステップと、
前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定するステップと、
前記レイアウトを推定するステップにおいて推定された部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するステップと、
をコンピュータに実行させ、
前記補間して生成するステップにおいては、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する
プログラム。

発明の詳細な説明【技術分野】
【０００１】
本開示は、生成装置、生成方法、及びプログラムに関する。
続きを表示（約 2,200 文字）【背景技術】
【０００２】
近年、部屋の内部などの空間を撮影した写真の画像からＡＩ（ＡｒｔｉｆｉｃｉａｌＩｎｔｅｌｌｉｇｅｎｃｅ）技術を駆使して、部屋の内部の空間の三次元モデルを生成する手法の研究が活発化している。これらの中には、普通のカメラ写真一枚を用いて写っている範囲の部屋の内部の空間の三次元モデルを生成するものや、カメラ写真を複数枚用いるもの、３６０度パノラマ写真一枚から部屋の内部の空間全体の三次元モデルを生成するものなどの様々な手法が存在する。
【０００３】
例えば、下記の特許文献１には、室内空間の内部に設置された全天球カメラにより全方位で撮像されたパノラマ画像を物件情報サーバで取得し、物件情報サーバは、取得したパノラマ画像から、室内空間を構成する天井、床及び壁それぞれ同士の境界線を抽出し、抽出された境界線に基づいて天井画像、床画像及び壁画像をパノラマ画像から抽出し、抽出された天井画像等における歪みを補正し、補正後の天井画像等を組み合わせて、室内空間に相当する三次元モデルを表す室内空間画像を生成する情報処理装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
特許第６５７７５５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記の特許文献１に記載の情報処理装置は、複数の画像により構成されるパノラマ画像を用いて、室内空間の三次元モデルを生成するものであり、カメラ写真一枚を用いて部屋の空間の三次元モデルを生成するものではない。また、現状では、カメラ写真に写っていない範囲の壁などを不自然さのない形で生成しているものは存在していなかった。
【０００６】
本開示は上記課題を鑑み、自然な形のモデルを生成することができる生成装置、生成方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本開示に係る生成装置は、所定の画像に基づいて、画像に含まれるオブジェクトを検出するオブジェクト検出部と、前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するレイアウト推定部と、前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定する判定部と、前記レイアウト推定部が推定した部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するモデル補間部と、を備え、前記モデル補間部は、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する。
【０００８】
上述した課題を解決し、目的を達成するために、本開示に係る生成方法は、所定の画像に基づいて、画像に含まれるオブジェクトを検出するステップと、前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するステップと、前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定するステップと、前記レイアウトを推定するステップにおいて推定された部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するステップと、を含み、前記補間して生成するステップにおいては、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する。
【０００９】
上述した課題を解決し、目的を達成するために、本開示に係るプログラムは、所定の画像に基づいて、画像に含まれるオブジェクトを検出するステップと、前記所定の画像に基づいて、部屋の空間の境界となる壁、床、天井のうち少なくとも一つを含む境界部のレイアウトを推定するステップと、前記所定の画像と、前記所定の画像に含まれるオブジェクトの種類とに基づき、前記部屋に足りていないオブジェクトである不足オブジェクトの種類を判定するステップと、前記レイアウトを推定するステップにおいて推定された部屋のレイアウトのうち、前記境界部の欠損部分を補間して、前記部屋の全体の三次元モデルである全体三次元モデルを生成するステップと、をコンピュータに実行させ、前記補間して生成するステップにおいては、前記不足オブジェクトの種類に基づいて、前記欠損部分の長さに対応する補間距離を算出し、前記境界部の所定位置から前記補間距離だけ離れた位置に壁を生成する。
【発明の効果】
【００１０】
本開示によれば、自然な形のモデルを生成することができる生成装置、生成方法、及びプログラムを提供することができる。
【図面の簡単な説明】
（【００１１】以降は省略されています）

関連特許