特開 2022-190928 ドライバ監視モニタの設計支援装置、設計支援プログラム及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022190928

(43)【公開日】2022-12-27

(54)【発明の名称】ドライバ監視モニタの設計支援装置、設計支援プログラム及び記憶媒体

(51)【国際特許分類】

   H04N 17/00 20060101AFI20221220BHJP

   G06T 1/00 20060101ALI20221220BHJP

【ＦＩ】

H04N17/00 L

G06T1/00 B

【審査請求】未請求

【請求項の数】22

【出願形態】ＯＬ

(21)【出願番号】P 2021099466

(22)【出願日】2021-06-15

(71)【出願人】

【識別番号】000004260

【氏名又は名称】株式会社デンソー

(74)【代理人】

【識別番号】110000567

【氏名又は名称】弁理士法人サトー

(72)【発明者】

【氏名】山下 智也

【テーマコード（参考）】

5B050

5C061

【Ｆターム（参考）】

5B050AA10

5B050BA09

5B050EA09

5B050EA27

5B050FA02

5B050FA05

5C061BB07

5C061BB09

5C061BB13

(57)【要約】

【課題】カメラにより撮像したカメラ画像の見え方や性能を適切に事前評価する。
【解決手段】ドライバ監視モニタの設計支援装置１は、車両モデルデータのパラメータ設定値が入力されたことで車両のコックピットを疑似的に再現して車両画像を生成する車両画像生成部１０と、カメラモデルデータ、照明部モデルデータ及び搭乗者モデルデータのパラメータ設定値が入力されたことでカメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成するカメラ画像生成部１１と、車両画像及びカメラ画像を画像表示装置に表示させる画像表示制御部１４と、を備える。
【選択図】図１

【特許請求の範囲】

【請求項1】

車両をモデル化した車両モデルデータを記憶する車両モデルデータ記憶部（４）と、
搭乗者を撮像するためのカメラの仕様や配置位置をモデル化したカメラモデルデータを記憶するカメラモデルデータ記憶部（５）と、
搭乗者に光を照射するための照明部の仕様や配置位置をモデル化した照明部モデルデータを記憶する照明部モデルデータ記憶部（６）と、
搭乗者の体格や姿勢をモデル化した搭乗者モデルデータを記憶する搭乗者モデルデータ記憶部（７）と、
前記各モデルデータのパラメータ設定値を入力するパラメータ設定値入力部（９）と、
前記車両モデルデータのパラメータ設定値が入力されたことで車両のコックピットを疑似的に再現して車両画像を生成する車両画像生成部（１０）と、
前記カメラモデルデータ、前記照明部モデルデータ及び前記搭乗者モデルデータのパラメータ設定値が入力されたことで前記カメラの撮像動作及び前記照明部の照明動作を疑似的に再現してカメラ画像を生成するカメラ画像生成部（１１）と、
前記車両画像及び前記カメラ画像を画像表示装置に表示させる画像表示制御部（１４）と、を備えるドライバ監視モニタの設計支援装置。

【請求項2】

前記車両モデルデータは、コンピュータ支援設計やシミュレーションモデルを組み込み可能なデータであり、
前記車両画像は、任意の角度から立体視可能な画像である請求項１に記載したドライバ監視モニタの設計支援装置。

【請求項3】

前記カメラモデルデータは、前記車両モデルデータ内における配置位置、画角、アスペクト比及び撮像サイズのうち少なくとも何れかを任意に設定可能なデータである請求項１又は２に記載したドライバ監視モニタの設計支援装置。

【請求項4】

焦点距離と対角角度により光学ディストーションを計算する光学ディストーション計算部（１２）を備え、
前記画像表示制御部は、前記車両画像及び前記カメラ画像に加え、前記光学ディストーションを前記画像表示装置に表示させる請求項１から３の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項5】

前記照明部モデルデータは、前記車両モデルデータ内における配置位置、照度及び指向のうち少なくとも何れかを任意に設定可能なデータである請求項１から４の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項6】

環境光を設定可能である請求項１から５の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項7】

前記搭乗者モデルデータは、所定のコンピュータグラフィックスモデルを含み、所定の異常姿勢を含む姿勢を任意に設定可能であり、顔向きのヨー、ピッチ、ロールの角度を任意に設定可能なデータである請求項１から６の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項8】

前記搭乗者モデルデータは、搭乗者が装着可能な装飾品を任意に設定可能なデータである請求項１から７の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項9】

前記搭乗者モデルデータは、前記車両モデルデータ内における配置位置を任意に設定可能なデータである請求項１から８の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項10】

前記車両モデルデータは、ハンドルのチルト、テレスコピック、舵角を任意に設定可能なデータである請求項１から９の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項11】

前記カメラモデルデータ、前記照明部モデルデータ、前記搭乗者モデルデータのうち少なくとも何れかの前記パラメータ設定値を複数パターンで記憶し、スクリプト処理を実行するスクリプト処理実行部（１３）を備える請求項１から１０の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項12】

前記カメラ画像生成部は、前記スクリプト処理が実行された場合に、前記カメラ画像の動画を生成する請求項１１に記載したドライバ監視モニタの設計支援装置。

【請求項13】

前記カメラ画像生成部は、前記カメラ画像の動画を生成した場合に、その生成したカメラ画像の動画を動画ファイルとして動画ファイル保存部（８）に保存する請求項１２に記載したドライバ監視モニタの設計支援装置。

【請求項14】

前記カメラモデルデータは、複数のカメラをモデル化したデータであり、
前記カメラ画像生成部は、複数のカメラの前記カメラ画像を同期して生成する請求項１３に記載したドライバ監視モニタの設計支援装置。

【請求項15】

前記カメラモデルデータは、同じ仕様のカメラをモデル化したデータである請求項１４に記載したドライバ監視モニタの設計支援装置。

【請求項16】

前記カメラモデルデータは、異なる仕様のカメラをモデル化したデータである請求項１４に記載したドライバ監視モニタの設計支援装置。

【請求項17】

前記カメラモデルデータは、姿勢や位置が変更可能な部位に配置位置が設定された場合に、その部位の姿勢や位置の変更に連動し、姿勢や位置が変更可能なデータである請求項１から１６の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項18】

前記カメラモデルデータは、ズーム機能を有するカメラをモデル化したデータである請求項１から１７の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項19】

前記カメラモデルデータは、前記搭乗者の顔を追跡する機能を有するカメラをモデル化したデータである請求項１から１８の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項20】

前記カメラモデルデータは、搭乗者を撮像することに加え、車外を撮像するカメラをモデル化したデータである請求項１から１９の何れか一項に記載したドライバ監視モニタの設計支援装置。

【請求項21】

車両をモデル化した車両モデルデータを記憶する車両モデルデータ記憶部（４）と、
搭乗者を撮像するためのカメラの仕様や配置位置をモデル化したカメラモデルデータを記憶するカメラモデルデータ記憶部（５）と、
搭乗者に光を照射するための照明部の仕様や配置位置をモデル化した照明部モデルデータを記憶する照明部モデルデータ記憶部（６）と、
搭乗者の体格や姿勢をモデル化した搭乗者モデルデータを記憶する搭乗者モデルデータ記憶部（７）と、を備えるドライバ監視モニタの設計支援装置（１）に、
前記各モデルデータのパラメータ設定値を入力するパラメータ設定値入力手順と、
前記車両モデルデータのパラメータ設定値が入力されたことで車両のコックピットを疑似的に再現して車両画像を生成する車両画像生成手順と、
前記カメラモデルデータ、前記照明部モデルデータ及び前記搭乗者モデルデータのパラメータ設定値が入力されたことで前記カメラの撮像動作及び前記照明部の照明動作を疑似的に再現してカメラ画像を生成するカメラ画像生成手順と、
前記車両画像及び前記カメラ画像を画像表示装置に表示させる画像表示制御手順と、を実行させるドライバ監視モニタの設計支援プログラム。

【請求項22】

請求項２１に記載したドライバ監視モニタの設計支援プログラムを記憶可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ドライバ監視モニタの設計支援装置、設計支援プログラム及び記憶媒体に関する。

【背景技術】

【0002】

ドライバの状態を監視するシステムとしてドライバ監視モニタが供されている。ドライバ監視モニタは、例えばカメラの撮像方向が運転席側に向けられた姿勢でインスツルメントパネルの上面に配置される。ドライバ監視モニタは、照明部から光が照射されたドライバの顔をカメラにより撮像し、その撮像した顔画像を解析してドライバの状態を監視する。ドライバ監視モニタは、顔画像から例えば脇見、閉眼、眠気、体位等を判定し、その判定結果を例えば自動運転を制御する電子制御装置（以下、ＥＣＵ（Electronic Control Unit）と称する）等に逐次出力する（例えば特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１９－３８４７１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ドライバ監視モニタにおいて、カメラ及び照明部の仕様や配置位置は車両毎に異なる。又、ドライバ監視モニタが設置される車両、搭乗者の体格や姿勢も異なる。カメラ及び照明部の仕様や配置位置、ドライバ監視モニタが設置される車両、搭乗者の体格や姿勢等が不確定な段階において、カメラにより撮像したカメラ画像の見え方や性能を机上で評価することは困難である。そのため、カメラ及び照明部の仕様や配置位置、ドライバ監視モニタが設置される車両、搭乗者の体格や姿勢等を任意に変更させ、カメラにより撮像したカメラ画像の見え方や性能を事前評価するための設計支援装置が望まれる。

【0005】

本発明は、上記した事情に鑑みてなされたものであり、その目的は、カメラにより撮像したカメラ画像の見え方や性能を適切に事前評価することができるドライバ監視モニタの設計支援装置、設計支援プログラム及び記憶媒体を提供することにある。

【課題を解決するための手段】

【0006】

請求項１に記載した発明によれば、車両モデルデータ記憶部（４）は、車両をモデル化した車両モデルデータを記憶する。カメラモデルデータ記憶部（５）は、搭乗者を撮像するためのカメラの仕様や配置位置をモデル化したカメラモデルデータを記憶する。照明部モデルデータ記憶部（６）は、搭乗者に光を照射するための照明部の仕様や配置位置をモデル化した照明部モデルデータを記憶する。搭乗者モデルデータ記憶部（７）は、搭乗者の体格や姿勢をモデル化した搭乗者モデルデータを記憶する。パラメータ設定値入力部（９）は、各モデルデータのパラメータ設定値を入力する。

【0007】

車両画像生成部（１０）は、車両モデルデータのパラメータ設定値が入力されたことで車両のコックピットを疑似的に再現して車両画像を生成する。カメラ画像生成部（１１）は、カメラモデルデータ、照明部モデルデータ及び搭乗者モデルデータのパラメータ設定値が入力されたことでカメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成する。画像表示制御部（１４）は、車両画像及びカメラ画像を画像表示装置に表示させる。

【0008】

車両モデルデータ、カメラモデルデータ、照明部モデルデータ、搭乗者モデルデータのパラメータ設定値を入力すると、車両のコックピットを疑似的に再現して車両画像を生成し、カメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成し、その生成した車両画像及びカメラ画像を表示するようにした。各モデルデータのパラメータ設定値を入力することで、車両画像及びカメラ画像を認識することができ、カメラにより撮像したカメラ画像の見え方や性能を適切に事前評価することができる。

【図面の簡単な説明】

【0009】

【図1】ドライバ監視モニタの設計支援装置の機能ブロック図

【図2】画面全体を示す図（その１）

【図3】ユーザが選択可能又は設定可能な項目を示す図（その１）

【図4】ユーザが選択可能又は設定可能な項目を示す図（その２）

【図5】ユーザが選択可能又は設定可能な項目を示す図（その３）

【図6】画面全体を示す図（その２）

【図7】画面全体を示す図（その３）

【図8】カメラ画像を示す図（その１）

【図9】カメラ画像を示す図（その２）

【図10】カメラ画像を示す図（その３）

【図11】カメラ画像を示す図（その４）

【図12】カメラ画像の一部を示す図（その１）

【図13】カメラ画像の一部を示す図（その２）

【図14】カメラ画像の一部を示す図（その３）

【図15】カメラ画像を示す図（その５）

【図16】カメラ画像を示す図（その６）

【図17】カメラ画像を示す図（その７）

【図18】カメラ画像を示す図（その８）

【図19】ジョブリストを示す図（その１）

【図20】ジョブリストを示す図（その２）

【図21】シナリオリストを示す図

【図22】フローチャート

【発明を実施するための形態】

【0010】

以下、一実施形態について図面を参照して説明する。ドライバ監視モニタとしてのドライバステータスモニタ（登録商標）（以下、ＤＳＭ（Driver Status Monitor）と称する）の設計支援装置１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）及びＩ／Ｏ（Input／Output）を有するマイクロコンピュータを備える。マイクロコンピュータは、非遷移的実体的記憶媒体に格納されている設計支援プログラムを実行することで設計支援処理を実行する。

【0011】

設計支援装置１は、ＨＭＩ（Human Machine Interface）としての操作装置２及び画像表示装置３を接続している。操作装置２は、例えばマウスやキーボード等であり、ユーザがマウスやキーボード等を操作すると、その操作内容を特定可能な操作検知信号を設計支援装置１に出力する。操作装置２は、位置を設定可能な機器であれば良く、マウスやキーボードに限らず、タッチパネル、ペンタブレット、タッチパッド、トラックパッド、トラックボール等のポインティングデバイスでも良い。画像表示装置３は、例えば液晶ディスプレイであり、設計支援装置１から描画指示信号を入力すると、その描画指示信号に応じて描画して画像を表示する。

【0012】

設計支援装置１は、マイクロコンピュータが実行する機能として、車両モデルデータ記憶部４と、カメラモデルデータ記憶部５と、照明部モデルデータ記憶部６と、搭乗者モデルデータ記憶部７と、動画ファイル保存部８と、パラメータ設定値入力部９と、車両画像生成部１０と、カメラ画像生成部１１と、光学ディストーション計算部１２と、スクリプト処理実行部１３と、画像表示制御部１４とを備える。これら各部４～１４は設計支援プログラムを構成する。

【0013】

車両モデルデータ記憶部４は、車両をモデル化した車両モデルデータを記憶する。車両モデルデータは、コンピュータ支援設計（ＣＡＤ（Computer-Aided Design））やシミュレーションモデルを組み込み可能なデータである。又、車両モデルデータは、ハンドルのチルト、テレスコピック、舵角を任意に設定可能なデータである。

【0014】

カメラモデルデータ記憶部５は、搭乗者を撮像するためのカメラの仕様や配置位置等をモデル化したカメラモデルデータを記憶する。カメラは例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等のイメージセンサを有するカメラを想定している。カメラモデルデータは、車両モデルデータ内における配置位置、画角、アスペクト比及び撮像サイズを任意に設定可能なデータである。

【0015】

又、カメラモデルデータは、複数のカメラをモデル化したデータであっても良く、同じ仕様のカメラをモデル化したデータ、異なる仕様のカメラをモデル化したデータの何れであっても良い。又、カメラモデルデータは、姿勢や位置が変更可能な部位に配置位置が設定された場合に、その部位の姿勢や位置の変更に連動し、姿勢や位置が変更可能なデータであっても良い。例えばステアリングコラムやバックミラー等に配置位置が設定された場合に、ステアリングコラムやバックミラー等の姿勢や位置の変更に連動し、カメラの姿勢や位置が変更可能であっても良い。又、カメラモデルデータは、ズーム機能を有するカメラをモデル化したデータであっても良い。又、カメラモデルデータは、搭乗者の顔を追跡する機能を有するカメラをモデル化したデータであっても良い。更に、カメラモデルデータは、搭乗者を撮像することに加え、車外を撮像するカメラをモデル化したデータであっても良い。車外を撮像することで、例えば駐車時の監視カメラとして利用することができ、警報装置と連携することで、盗難防止や悪戯防止の効果を期待することができ、セキュリティを高めることができる。

【0016】

照明部モデルデータ記憶部６は、搭乗者に光を照射するための照明部の仕様や配置位置をモデル化した照明部モデルデータを記憶する。照明部は例えばＬＥＤを想定している。照明部モデルデータは、車両モデルデータ内における配置位置、照度及び指向を任意に設定可能なデータである。

【0017】

搭乗者モデルデータ記憶部７は、搭乗者の体格や姿勢をモデル化した搭乗者モデルデータを記憶する。搭乗者モデルデータは、所定のコンピュータグラフィックスモデルを含み、所定の異常姿勢を含む姿勢を任意に設定可能であり、顔向きのヨー、ピッチ、ロールの角度を任意に設定可能なデータである。又、搭乗者モデルデータは、搭乗者が装着可能な装飾品、車両モデルデータ内における配置位置を任意に設定可能なデータである。

【0018】

動画ファイル保存部８は、動画ファイルを保存する。パラメータ設定値入力部９は、ユーザがマウスやキーボード等を操作装置２により操作して各モデルデータのパラメータ設定値を設定し、操作装置２から操作検知信号を入力すると、その操作検知信号により特定されるパラメータ設定値を入力する。即ち、パラメータ設定値入力部９は、ユーザが車両モデルデータのパラメータ設定値を設定すると、その車両モデルデータのパラメータ設定値を入力する。パラメータ設定値入力部９は、ユーザがカメラモデルデータのパラメータ設定値を設定すると、そのカメラモデルデータのパラメータ設定値を入力する。パラメータ設定値入力部９は、ユーザが照明部モデルデータのパラメータ設定値を設定すると、その照明部モデルデータのパラメータ設定値を入力する。パラメータ設定値入力部９は、ユーザが搭乗者モデルデータのパラメータ設定値を設定すると、その搭乗者モデルデータのパラメータ設定値を入力する。

【0019】

車両画像生成部１０は、車両モデルデータのパラメータ設定値がパラメータ設定値入力部９に入力されると、車両のコックピットを疑似的に再現して車両画像を生成する。

【0020】

カメラ画像生成部１１は、カメラモデルデータ、照明部モデルデータ及び搭乗者モデルデータのパラメータ設定値が入力されると、カメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成する。上記したようにカメラモデルデータが複数のカメラをモデル化したデータである場合には、カメラ画像生成部１１は、複数のカメラのカメラ画像を同期して生成する。

【0021】

光学ディストーション計算部１２は、焦点距離と対角角度により光学ディストーションを計算する。スクリプト処理実行部１３は、カメラモデルデータ、照明部モデルデータ、搭乗者モデルデータのパラメータ設定値を複数パターンで記憶し、スクリプト処理を実行する。この場合、カメラ画像生成部１１は、スクリプト処理がスクリプト処理実行部１３により実行されると、カメラ画像の動画を生成し、そのカメラ画像の動画を動画ファイルとして動画ファイル保存部８に保存する。

【0022】

画像表示制御部１４は、車両画像が車両画像生成部１０により生成され、カメラ画像がカメラ画像生成部１１により生成されると、その生成された車両画像及びカメラ画像を特定可能な描画指示信号を画像表示装置３に出力し、車両画像及びカメラ画像を画像表示装置３に表示させる。この場合、画像表示制御部１４は、図２に示すように、車両画像を画面全体のメインモニタの領域に表示させ、カメラ画像を画面右上のＤＳＭカメラモニタの領域に表示させる。上記したようにカメラモデルデータが複数のカメラをモデル化したデータであれば、ＤＳＭカメラモニタの領域は個々のカメラに対応する複数であり、画像表示制御部１４は、個々のカメラ画像を個々のＤＳＭカメラモニタの領域に表示させる。又、画像表示制御部１４は、ユーザが各種パラメータ設定値を設定するための操作パネルを画面下の領域に表示させ、処理ログを画面右下の領域に表示させる。又、画像表示制御部１４は、光学ディストーションが光学ディストーション計算部１２により計算されると、その計算された光学ディストーションを画像表示装置３に表示させる。

【0023】

次に、操作パネルについて説明する。ユーザが操作パネルを操作して選択可能又は設定可能な項目は、図３から図５に示すように、操作対象選択、ＤＳＭカメラ、ＬＥＤ１、２、移動、向き変更（数値入力）、移動、向き変更（上下ボタン） 、運転手、助手席、後部座席、車種、モード・アンチエイリアス、レンズ歪み、バッチ処理である。以下、各項目について順次説明する。

【0024】

車両画像は、ユーザが視点を任意に設定することで、任意の角度から立体視可能である。即ち、ユーザが例えばマウスをクリックして任意の方向に動かすことで、視点を任意に設定することができ、任意の角度から車両画像を立体視することができる。図６は、車内の左側後部座席から車両前方を立体視した車両画像を例示しており、図７は、車外の車両右側後方から車内前方を立体視した車両画像を例示している。

【0025】

（１）操作対象選択
ユーザが例えばマウスを操作して移動や回転等の操作対象を選択する。選択する操作対象は、メインカメラ、ＬＥＤ１、ＬＥＤ２、ハンドル、運転手、座席である。

【0026】

（２）ＤＳＭカメラ
ＬＥＤ連動：ＤＳＭカメラとＬＥＤをグルーピングし、相対位置関係を保ったまま配置位置を変更可能である。グルーピングするＬＥＤは後述する［連動ＬＥＤ］により選択する。即ち、カメラモデルデータ及び照明部モデルデータの配置位置を任意に設定可能である。
光軸表示／非表示：カメラの向き（光軸）を線で表示する。
垂直角度：画角の垂直角度を設定する。垂直角度とアスペクト比から水平角度を自動で計算して表示する。即ち、カメラモデルデータの画角を任意に設定可能である。
アスペクト比：カメラのアスペクト比と撮像サイズを選択する。即ち、カメラモデルデータのアスペクト比、撮像サイズを任意に設定可能である。
連動ＬＥＤ：［ＬＥＤ連動］がオンになっているときに、グルーピングさせるＬＥＤを選択する。
表示サイズ：カメラモニタの表示サイズを選択する。図８は、画角をＶ：８０，Ｈ１００とし、アスペクト比を１６：１３としたときのカメラ画像を例示している。図９は、画角をＶ：１００，Ｈ１２３とし、アスペクト比を１６：１３としたときのカメラ画像を例示している。

【0027】

（３）ＬＥＤ１、２
位置表示／非表示：ＤＳＭカメラモニタに位置を表示するか否かを選択する。
光軸表示／非表示：ＬＥＤの向き（光軸）を線で表示する。
照度：ＬＥＤの明るさを０～１００％で設定する。即ち、照明部モデルデータの照度を任意に設定可能である。
指向：光の指向角度を０～１８０°で設定する。即ち、照明部モデルデータの指向を任意に設定可能である。図１０は、照射範囲を狭めたときのカメラ画像を例示している。図１１は、照射範囲を広めたときのカメラ画像を例示している。

【0028】

（４）移動、向き変更（数値入力）
数値入力操作により操作対象の配置位置及び向き（回転）を設定可能である。操作対象がＤＳＭカメラであれば、数値入力操作によりカメラモデルデータの車両モデルデータ内における配置位置及び向きを任意に設定可能である。操作対象がＬＥＤであれば、数値入力操作によりＬＥＤモデルデータの車両モデルデータ内における配置位置及び向きを任意に設定可能である。

【0029】

（５）移動、向き変更（上下ボタン）
マウス操作により操作対象の配置位置を１０［ｍｍ］ずつ、向きを５［°］ずつ変更し、操作対象の配置位置及び向きを設定可能である。変更する軸を選択し、上ボタン（＋方向）、下ボタン（－方向）で変更する。操作対象がＤＳＭカメラであれば、マウス操作によりカメラモデルデータの車両モデルデータ内における配置位置及び向きを任意に設定可能である。操作対象がＬＥＤであれば、マウス操作によりＬＥＤモデルデータの車両モデルデータ内における配置位置及び向きを任意に設定可能である。

【0030】

（６）運転手、助手席
運転手：運転席に乗車させる人物モデルを選択する。
助手席：助手席に乗車させる人物モデルを選択する。
顔向き：各座席に着座した人物モデルの顔向きを設定する。
動作選択：運転手の動作を選択する。動作選択を「正面を見る」以外に設定している場合には、顔向きは変更不可である。人物モデルは、ＡＦ０５、ＡＭ５０、ＡＭ９５の３種のＣＧモデルを含み、全てのＣＧモデルはＡＳＶ６の異常姿勢を含む姿勢を指定可能である。ＡＦ０５は小柄な米国成人女性相当のモデルであり、ＡＭ５０は平均的な米国成人男性相当のモデルであり、ＡＭ９５は大柄な米国成人男性相当のモデルである。顔向きに関しては、ヨー、ピッチ、ロールをそれぞれ任意の角度に変更可能である。即ち、顔向きのヨー、ピッチ、ロールの角度を任意に設定可能である。
又、搭乗者が装着可能な装飾品を任意に設定可能である。図１２は、搭乗者が装飾品を装着していないときを例示している。図１３は、搭乗者が帽子を装着しているときを例示している。図１４は、搭乗者が帽子及びマスクを装着しているときを例示している。尚、搭乗者が装着可能な装飾品は、帽子及びマスクの他に、眼鏡、スカーフ、イヤリング等である。

【0031】

（７）後部座席
後部座席（左）：左後部座席に乗車させる人物モデルを選択する。
後部座席（右）：右後部座席に乗車させる人物モデルを選択する。

【0032】

（８）車種
車種：シミュレートする車種を選択する。
ハンドル：ハンドル位置（テレスコピック）、角度（チルト、舵角）位置を表示する。
運転手：運転手横移動時（Ｘ方向）の位置を表示する。
座席：運転席前後移動時（Ｚ方向）の位置を表示する。

【0033】

（９）モード・アンチエイリアス
モード：シミュレート時の環境光を設定する。環境光を設定可能である。
アンチエイリアス：カメラ画像に対してのアンチエイリアスＯＮ／ＯＦＦを行う。アンチエイリアスをＯＮにすることで、画像内の境界を滑らかに表現可能である。目のサイズ計測を行う場合はＯＦＦとする。
図１５は、環境光を昼間モードに設定したときのカメラ画像を例示している。図１６は、環境光を夜間モードに設定したときのカメラ画像を例示している。

【0034】

（１０）レンズ歪み
カメラレンズの歪みを再現する。
光学ディストーション：光学ディストーションの現在値を表示する。
ＰＤ（Predicted Distance）：ＰＤの現在値を表示する。
ＡＤ（Actual Distance）：ＡＤの現在値を表示する。
拡大：レンズ歪み適応後の画面範囲に合わせて拡大した画像を表示する。
焦点距離［ｍｍ］：ディストーション計算用パラメータ設定値である。
対角角度［ｄｅｇ］：ディストーション計算用パラメータ設定値である。
図１７は、光学ディストーション無しのときのカメラ画像を例示している。図１８は、光学ディストーション有りのときのカメラ画像を例示している。
広角カメラにおいては光学ディストーションが必然的に発生するので、光学ディストーション無しによるシミュレーションでは実際のカメラ画像との差異が生じるが、光学ディストーションを計算することで、実際のカメラ画像との差異を極力抑える。
光学ディストーションを求める計算式は以下である。
光学ディストーション（％）＝｛（ＡＤ－ＰＤ）／ＰＤ｝×１００（％）
ＰＤは本来像を結ぶべき距離であり、ＡＤは実際に像を結んだ距離である。

【0035】

（１１）バッチ処理
設定されたパラメータ設定値により撮像を行うバッチ処理を操作する。
バッチ処理では、ジョブファイルを事前に作成することで、パラメータ設定値毎のカメラ画像を自動保存する。又、シナリオファイルを事前に作成することで、ドライバに特定の動作をさせながら動画を撮像する。以下、ジョブファイルを事前に作成する場合、シナリオファイルを事前に作成する場合について説明する。

【0036】

（１１－１）ジョブファイルを事前に作成する場合、
ジョブファイルを作成する手順は以下である。
（１）ＣＳＶファイルをサンプルよりコピーする。ＣＳＶファイルは本ソフトウェアに含まれており、本サンプルを使用することでジョブファイルを短時間で作成することが可能となる。
（２）カメラの開始条件と終了条件に、カメラの位置、向きのプリセットを記入する。
（３）ＬＥＤの開始条件と終了条件に、ＬＥＤの位置、向きのプリセットを記入する。
（４）ジョブの開始条件と終了条件に、実際に使用するパラメータリストを記入する。
（５）ジョブファイルを所定のパスに配置する。この場合、複数のジョブファイルを配置可能である。
（６）シミュレータを起動することで読み込まれる。

【0037】

パラメータ設定値を確認する手順は以下である。
（１）図１９に示すように、ジョブリストからジョブファイル選択する。
（２）図２０に示すように、パラメータリストからパラメータ番号を選択する。
（３）所定操作を行うと、選択中のパラメータ番号が再現される。

【0038】

ジョブファイルの実行は、ジョブリストで実行するファイルを選択することでファイル毎に実行する場合と、全て実行する場合とがある。撮像データは所定領域に保存される。保存内容は、撮像データ（ｊｐｇファイル)、スクリーンショット（ｊｐｇファイル) 、実行したジョブファイル（ｃｓｖファイル）である。

【0039】

（１１－２）シナリオファイルを事前に作成する場合、
シナリオファイルを作成する手順は以下である。
（１）ＣＳＶファイルをサンプルよりコピーする。ＣＳＶファイルは本ソフトウェアに含まれており、本サンプルを使用することでシナリオファイルを短時間で作成することが可能となる。
（２）パラメータの開始条件と終了条件に、指定動作の番号、動作時間、待機時間を記入する。
（３）シナリオファイルを所定のパスに配置する。この場合、複数のシナリオファイルを配置可能である。
（４）シミュレータを起動することで読み込まれる。

【0040】

シナリオファイルの実行は、図２１に示すように、シナリオリストから再生するファイルを選択する。撮像データは所定領域に保存される。保存内容は、運転手の頭位置（ｃｓｖファイル）、カメラの位置（ｃｓｖファイル）、ＬＥＤの位置（ｃｓｖファイル）、撮像動画（ａｖｉファイル）である。

【0041】

次に、上記した構成の作用について図２２を参照して説明する。
設計支援装置１は、設計支援処理の開始条件の成立を待機しており、設計支援処理の開始条件の成立を判定すると、設計支援処理を開始する。設計支援装置１は、設計支援処理を開始すると、モデルデータのパラメータ設定値の入力を待機し（Ｓ１）、モデルデータのパラメータ設定値を入力したと判定すると（Ｓ１：ＹＥＳ、パラメータ設定値入力手順に相当する）、車両画像又はカメラ画像を生成する（Ｓ２、車両画像生成手順、カメラ画像生成手順に相当する）。

【0042】

即ち、設計支援装置１は、車両モデルデータのパラメータ設定値を入力したと判定すると、車両のコックピットを疑似的に再現して車両画像を生成する。又、設計支援装置１は、カメラモデルデータ、照明部モデルデータ及び搭乗者モデルデータのパラメータ設定値を入力したと判定すると、カメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成する。

【0043】

設計支援装置１は、車両画像又はカメラ画像を生成すると、描画指示信号を画像表示装置３に出力し、その生成した画像を画像表示装置３に表示させる（Ｓ３：画像表示制御手順に相当する）。設計支援装置１は、設計支援処理の終了条件の成立を判定し（Ｓ４）、設計支援処理の終了条件の未成立を判定すると（Ｓ４：ＮＯ）、上記したステップＳ１に戻り、ステップＳ１以降を行う。設計支援装置１は、設計支援処理の終了条件の成立を判定すると（Ｓ４：ＹＥＳ）、設計支援処理を終了する。

【0044】

以上に説明したように本実施形態によれば、次に示す作用効果を得ることができる。
ドライバ監視モニタの設計支援装置１において、車両モデルデータ、カメラモデルデータ、照明部モデルデータ、搭乗者モデルデータのパラメータ設定値を入力すると、車両のコックピットを疑似的に再現して車両画像を生成し、カメラの撮像動作及び照明部の照明動作を疑似的に再現してカメラ画像を生成し、その生成した車両画像及びカメラ画像を表示するようにした。各モデルデータのパラメータ設定値を入力することで、車両画像及びカメラ画像を認識することができ、カメラにより撮像したカメラ画像の見え方や性能を適切に事前評価することができる。

【0045】

カメラモデルデータを、車両モデルデータ内における配置位置、画角、アスペクト比及び撮像サイズを任意に設定可能なデータとしたことで、配置位置、画角、アスペクト比及び撮像サイズを任意に設定したカメラ画像の見え方や性能を適切に事前評価することができる。

【0046】

照明部モデルデータを、車両モデルデータ内における配置位置、照度及び指向を任意に設定可能なデータとしたことで、配置位置、照度及び指向を任意に設定したカメラ画像の見え方や性能を適切に事前評価することができる。

【0047】

環境光を設定可能としたことで、夜間モードに設定すると、照明部モデルデータ以外の明かりを削減し、照明部の照射範囲や配置位置による影の影響を確認することができる。

【0048】

本開示は、実施例に準拠して記述されたが、当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、更には、それらに一要素のみ、それ以上、或いはそれ以下を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。

【0049】

本開示に記載の制御部及びその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリを構成することにより提供された専用コンピュータにより実現されても良い。或いは、本開示に記載の制御部及びその手法は、一つ以上の専用ハードウェア論理回路によりプロセッサを構成することにより提供された専用コンピュータにより実現されても良い。若しくは、本開示に記載の制御部及びその手法は、一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリと一つ以上のハードウェア論理回路により構成されたプロセッサとの組み合わせにより構成された一つ以上の専用コンピュータにより実現されても良い。又、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていても良い。

【符号の説明】

【0050】

図面中、１はドライバ監視モニタの設計支援装置、４は車両モデルデータ記憶部、５はカメラモデルデータ記憶部、６は照明部モデルデータ記憶部、７は搭乗者モデルデータ記憶部、８は動画ファイル保存部、９はパラメータ設定値入力部、１０は車両画像生成部、１１はカメラ画像生成部、１２は光学ディストーション計算部、１３はスクリプト処理実行部、１４は画像表示制御部である。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】