特許ウォッチ

公開番号2025127401
公報種別公開特許公報(A)
公開日2025-09-01
出願番号2024024143
出願日2024-02-20
発明の名称文章生成システム、文章生成プログラム、および、報告書データベースの生産方法
出願人株式会社日立製作所
代理人弁理士法人磯野国際特許商標事務所
主分類G06F 16/383 20190101AFI20250825BHJP(計算;計数)
要約【課題】画像に基づく報告書の作成作業を効率化する。
【解決手段】作業支援システム1000は、カメラで撮影された画像から、生成AI(Artificial Intelligence)を使用して状況説明文を生成し、データベースへ格納する車両画像分析装置1と、説明の対象である説明対象シーンを指定するシーン指定部1001と、シーン指定部1001によって指定された説明対象シーンに関連した状況説明文をデータベースに格納された状況説明文から検索するシーン検索部1002と、シーン指定部1001によって指定された説明対象シーンに応じた時間および説明対象物を保存する要約条件設定部1003と、シーン検索部1002によって検索された状況説明文の中の、保存した時間および説明対象物に対応した状況説明文を使用して、生成AIにより、説明対象物に関する報告書を生成する報告書作成装置1004とを有する。
【選択図】図1
特許請求の範囲【請求項１】
カメラで撮影された画像から、生成ＡＩ（Artificial Intelligence）を使用して状況説明文を生成し、データベースへ格納する画像分析部と、
説明の対象である説明対象シーンを指定するシーン指定部と、
前記シーン指定部によって指定された説明対象シーンに関連した状況説明文を前記データベースに格納された状況説明文から検索するシーン検索部と、
前記シーン指定部によって指定された説明対象シーンに応じた期間および説明対象物を保存する要約条件設定部と、
前記シーン検索部によって検索された状況説明文の中の、前記要約条件設定部が保存した時間および説明対象物に対応した状況説明文を使用して、生成ＡＩにより、前記説明対象物に関する報告書を生成する報告書作成部と、
を有することを特徴とする文章生成システム。
続きを表示（約 1,000 文字）【請求項２】
前記シーン指定部は、生成ＡＩにより、説明の対象である説明対象シーンを指定する、
ことを特徴とする請求項１に記載の文章生成システム。
【請求項３】
前記カメラは、車載カメラである、
ことを特徴とする請求項１に記載の文章生成システム。
【請求項４】
前記報告書は、車載ＥＣＵに関する情報を含む、
ことを特徴とする請求項３に記載の文章生成システム。
【請求項５】
前記車載ＥＣＵに関する情報は、当該車載ＥＣＵに接続されたセンサーに関する情報、及び車両の挙動に関する情報を含む、
ことを特徴とする請求項４に記載の文章生成システム。
【請求項６】
カメラで撮影された画像から生成ＡＩを使用して状況説明文を生成する手順、
前記状況説明文をデータベースへ格納する手順、
説明の対象となる説明対象シーンを指定する手順、
前記指定された説明対象シーンに関連した状況説明文を、前記データベースに格納された状況説明文から検索する手順、
前記指定された説明対象シーンに応じた時間および説明対象物を保存する手順、
前記検索された状況説明文の中の、前記説明対象シーンに応じた時間および説明対象物に対応した状況説明文により、生成ＡＩを使用して、前記説明対象物に関する報告書を生成する手順、
をコンピュータに実行させるための文章生成プログラム。
【請求項７】
カメラで撮影された画像から生成ＡＩを使用して状況説明文を生成するステップと、
前記状況説明文をデータベースへ格納するステップと、
シーン指定部が、説明の対象となる説明対象シーンを指定するステップと、
前記シーン指定部によって指定された説明対象シーンに関連した状況説明文を、シーン検索部が前記データベースに格納された状況説明文から検索するステップと、
要約条件設定部が、前記指定された説明対象シーンに応じた期間および説明対象物を保存するステップと、
前記シーン検索部によって検索された状況説明文の中の、前記要約条件設定部が保存した期間および説明対象物に対応した状況説明文により、生成ＡＩを使用して、前記説明対象物に関する報告書を生成するステップと、
前記報告書を含んだデータベースを生成するステップと、
を有することを特徴とする報告書データベースの生産方法。

発明の詳細な説明【技術分野】
【０００１】
本発明は、文章生成システム、文章生成プログラム、および、報告書データベースの生産方法に関する。
続きを表示（約 3,000 文字）【背景技術】
【０００２】
動画から所望の場面を切り取る技術としては以下の特許文献１が挙げられる。特許文献１は、特にスポーツ映像コンテンツに関する説明文の生成手法を開示する。特に、特許文献１では、ユーザの興味のある映像区間に対して説明を付加した要約映像を作成する手法を開示する。
【先行技術文献】
【特許文献】
【０００３】
特開２００５－１０９５６６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１は、自動運転車両の開発については配慮していない。
例えば、自動運転車両の開発においては、開発者は試験走行した結果を説明する報告書を作成する場合がある。例えば、自動運転車両の開発者は、自動運転車両に搭載されたカメラ等のセンサーで撮影された動画を分析し、報告するべき場面を特定し、後の開発へ試験走行の結果を活用できるよう報告書を作成する場合がある。
試験走行の最中に事故等のインシデントが発生すれば事故のタイミングよりも前の状況と、事故のタイミングよりも後の状況を説明した報告書が必要となる場合もある。また、終日にわたる試験走行では数時間分の報告書が必要となる場合もある。
【０００５】
本発明はこのような事情を考慮してなされたものであり、画像に基づく報告書の作成作業を効率化することを主な課題とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の文章生成システムは、以下の特徴を有する。
本発明は、カメラで撮影された画像から、生成ＡＩ（Artificial Intelligence）を使用して状況説明文を生成し、データベースへ格納する画像分析部と、説明の対象である説明対象シーンを指定するシーン指定部と、前記シーン指定部によって指定された説明対象シーンに関連した状況説明文を前記データベースに格納された状況説明文から検索するシーン検索部と、前記シーン指定部によって指定された説明対象シーンに応じた期間および説明対象物を保存する要約条件設定部と、前記シーン検索部によって検索された状況説明文の中の、前記要約条件設定部が保存した時間および説明対象物に対応した状況説明文を使用して、生成ＡＩにより、前記説明対象物に関する報告書を生成する報告書作成部と、を有することを特徴とする。
【０００７】
本発明の文章生成プログラムは、カメラで撮影された画像から生成ＡＩを使用して状況説明文を生成する手順、前記状況説明文をデータベースへ格納する手順、説明の対象となる説明対象シーンを指定する手順、前記指定された説明対象シーンに関連した状況説明文を、前記データベースに格納された状況説明文から検索する手順、前記指定された説明対象シーンに応じた期間および説明対象物を保存する手順、前記検索された状況説明文の中の、前記説明対象シーンに応じた時間および説明対象物に対応した状況説明文により、生成ＡＩを使用して、前記説明対象物に関する報告書を生成する手順、をコンピュータに実行させるためのものである。
【０００８】
本発明の報告書データベースの生産方法は、カメラで撮影された画像から生成ＡＩを使用して状況説明文を生成するステップと、前記状況説明文をデータベースへ格納するステップと、シーン指定部が、説明の対象となる説明対象シーンを指定するステップと、前記シーン指定部によって指定された説明対象シーンに関連した状況説明文を、シーン検索部が前記データベースに格納された状況説明文から検索するステップと、要約条件設定部が、前記指定された説明対象シーンに応じた期間および説明対象物を保存するステップと、前記シーン検索部によって検索された状況説明文の中の、前記要約条件設定部が保存した時間および説明対象物に対応した状況説明文により、生成ＡＩを使用して、前記説明対象物に関する報告書を生成するステップと、前記報告書を含んだデータベースを生成するステップと、を有することを特徴とする。
その他の特徴は、後記する。
【発明の効果】
【０００９】
本発明によれば、画像に基づく報告書の作成作業を効率化することができる。
【図面の簡単な説明】
【００１０】
本実施形態に関する作業支援システムの構成図である。
本実施形態に関する報告書作成処理のフローチャートである。
本実施形態に関する走行ログデータベースの詳細を示す図である。
本実施形態に関する車両走行動画データの一部である静止画データの一例を示す図である。
本実施形態に関する車両画像分析装置の構成図である。
本実施形態に関する要否テーブルの構成図である。
本実施形態に関する認識テーブルの構成図である。
本実施形態に関する説明文生成部のフローチャートである。
本実施形態に関する作業支援システムのハードウェア構成図である。
本実施形態に関する画像説明文の生成処理の詳細なフローチャートである。
本実施形態に関する図１０で説明した画像説明文の生成処理の具体的な動作の一例を示すフローチャートである。
本実施形態に関する一般道用の画像説明文の生成処理の詳細なフローチャートである。
本実施形態に関する図４の静止画データに対して画像説明文の生成処理を実行した結果の中間データを示すテーブルである。
本実施形態に関する図１３の中間データに対して説明文生成部が不要なデータを削除した結果の出力データを示すテーブルである。
本実施形態に関するＧＰＳ説明文の生成処理の詳細を示す図である。
本実施形態に関する制御説明文の生成処理の詳細を示す図である。
本実施形態に関する図１５および図１６で生成された説明文の一例を示すテーブルである。
本実施形態に関する交通状況説明文の生成処理で使用される大規模言語モデル部への指示文を示すテーブルである。
本実施形態に関する図１４の画像説明文とは別の画像から生成された一例を示すテーブルである。
本実施形態に関する検索部の処理を示すフローチャートである。
本実施形態に関する入出力部の画像検索インタフェースを示す図である。
本実施形態に関する図２１の検索結果（シーンその１）がクリックされたときの再生画面である。
本実施形態に関する図２１の検索結果（シーンその２）がクリックされたときの再生画面である。
検索処理を示すフローチャートである。
シーンを含む期間を説明する図である。
シーンを含む期間を記録したテーブルを説明する図である。
説明対象物を設定したテーブルを説明する図である。
プログラム起動状況説明文を説明する図である。
オブジェクト検出状況説明文を説明する図である。
【発明を実施するための形態】
（【００１１】以降は省略されています）

関連特許