特許 7625138 乗員監視装置及び乗員監視方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-01-23

(45)【発行日】2025-01-31

(54)【発明の名称】乗員監視装置及び乗員監視方法

(51)【国際特許分類】

   B60R 11/04 20060101AFI20250124BHJP

   B60R 1/26 20220101ALI20250124BHJP

【ＦＩ】

B60R11/04

B60R1/26 200

【請求項の数】 7

(21)【出願番号】P 2024515991

(86)(22)【出願日】2022-04-21

(86)【国際出願番号】 JP2022018347

(87)【国際公開番号】W WO2023203706

(87)【国際公開日】2023-10-26

【審査請求日】2024-02-26

(73)【特許権者】

【識別番号】324003048

【氏名又は名称】三菱電機モビリティ株式会社

(74)【代理人】

【識別番号】110003166

【氏名又は名称】弁理士法人山王内外特許事務所

(72)【発明者】

【氏名】煤孫 雄城

【審査官】池田 晃一

(56)【参考文献】

【文献】米国特許出願公開第２０２１／０１７４１０３（ＵＳ，Ａ１）

【文献】特開２０１０－２５３９８７（ＪＰ，Ａ）

【文献】特開２００７－３１６０３６（ＪＰ，Ａ）

【文献】国際公開第２００８／０４１４９７（ＷＯ，Ａ１）

【文献】特開２０１９－０１４３６０（ＪＰ，Ａ）

【文献】特開２００７－２１８６５５（ＪＰ，Ａ）

【文献】国際公開第２０１５／１０７７３２（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｂ６０Ｒ １１／００ － １１／０６

Ｂ６０Ｒ １／２６

Ｇ０８Ｇ １／００ － １／１６

(57)【特許請求の範囲】

【請求項1】

車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、
前記車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部と、
前記車内撮像部及び前記照明部が設けられる取付板とを備え、
前記取付板は、前記車内撮像部及び前記照明部を一体化させた状態で、前記車室内に配置されるＡピラーに設けられる表示部における額縁部の１つの縁辺に取り付けられ、
前記取付板の長さと前記縁辺の長さとは、同じ長さである
ことを特徴とする乗員監視装置。

【請求項2】

車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、
前記車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部とを備え、
前記車内撮像部及び前記照明部は、前記車室内に配置されるＡピラーに設けられる表示部に取り付けられ、
前記車内撮像部によって撮像された撮像画像を取得する取得部と、
前記取得部によって取得された撮像画像から、乗員の視線の向きを検出する視線検出部と、
前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定する視線判定部と、
前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御する警告制御部とを更に備え、
前記視線判定部は、
乗員が前記表示部を視認する頻度が所定回数以上となる場合、当該乗員の視線の向きが前記表示部に向いていると判定する
ことを特徴とする乗員監視装置。

【請求項3】

前記車内撮像部によって撮像された撮像画像を取得する取得部と、
前記取得部によって取得された撮像画像から、乗員の視線の向きを検出する視線検出部と、
前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定する視線判定部と、
前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御する警告制御部とを備え、
前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記照明部を点滅させる
ことを特徴とする請求項１記載の乗員監視装置。

【請求項4】

前記車内撮像部によって撮像された撮像画像を取得する取得部と、
前記取得部によって取得された撮像画像から、乗員の視線の向きを検出する視線検出部と、
前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定する視線判定部と、
前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御する警告制御部とを備え、
前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記音声出力部から音声を発生させる
ことを特徴とする請求項１記載の乗員監視装置。

【請求項5】

前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記照明部を点滅させる
ことを特徴とする請求項２記載の乗員監視装置。

【請求項6】

前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記音声出力部から音声を発生させる
ことを特徴とする請求項２記載の乗員監視装置。

【請求項7】

車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、
前記車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部とを備え、
前記車内撮像部及び前記照明部は、前記車室内に配置されるＡピラーに設けられる表示部に取り付けられる乗員監視装置において、
取得部が、前記車内撮像部によって撮像された撮像画像を取得し、
視線検出部が、前記取得部によって取得された撮像画像から、乗員の視線の向きを検出し、
視線判定部が、前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定し、
警告制御部が、前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御し、
前記視線判定部は、
乗員が前記表示部を視認する頻度が所定回数以上となる場合、当該乗員の視線の向きが前記表示部に向いていると判定する
ことを特徴とする乗員監視方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、乗員監視装置及び乗員監視方法に関する。

【背景技術】

【0002】

車両には、電子ミラー装置が搭載されるものがある。この電子ミラー装置は、車両の周囲を車外撮像部によって撮像し、この撮像した撮像画像（映像を含む）を、車室内に設けられた表示部に表示させるものである。このため、車両の乗員は、車両の周囲の様子を、表示部に表示された撮像画像を通して確認することができる。

【0003】

従来の電子ミラー装置としては、例えば、特許文献１に開示されている。この特許文献１に開示された電子ミラー装置の表示部は、車室内におけるＡピラーに設けられている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１９－８４９８８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

情報
近年、車両における乗員の状態を監視する乗員監視装置が普及している。この乗員監視装置は、乗員を監視するための車内撮像部を車室内に備えている。その乗員監視装置の車内撮像部は、乗員を精度良く撮像可能な位置に配置されることが好ましいため、車室前部を構成するインストルメントパネルに設置されることが多くある。

【0006】

ここで、上記乗員監視装置を、トラック及びバス等の商用車に設ける場合、インストルメントパネルは、乗用車に設置される場合と比べて、着座する乗員よりも低い位置に配置される。このため、車内撮像部は、乗員をその下方から撮像することになるため、精度良く、撮像することができないおそれがある。そこで、乗員監視装置を商用車に設ける場合には、車内撮像部を、インストルメントパネルよりも高い位置に配置される、Ａピラーに設置することが考えられる。

【0007】

しかしながら、乗員監視装置を設けようとする商用車に、上記電子ミラー装置が適用される場合、１つのＡピラーに、電子ミラー装置の表示部と、乗員監視装置の車内撮像部とを設ける必要がある。このため、表示部を設置するための設置スペースと、車内撮像部を設置するための設置スペースとを、それぞれ確保する必要がある。

【0008】

本開示は、上記のような課題を解決するためになされたもので、Ａピラーにおいて、表示部の設置スペースを確保しつつ、車内撮像部を、精度良く撮像可能な位置に設けることができる乗員監視装置を提供することを目的とする。

【課題を解決するための手段】

【0009】

本開示に係る乗員監視装置は、車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部と、車内撮像部及び照明部が設けられる取付板とを備え、取付板は、車内撮像部及び照明部を一体化させた状態で、車室内に配置されるＡピラーに設けられる表示部における額縁部の１つの縁辺に取り付けられ、取付板の長さと縁辺の長さとは、同じ長さである。

【発明の効果】

【0010】

本開示によれば、Ａピラーにおいて、表示部の設置スペースを確保しつつ、車内撮像部を、精度良く撮像可能な位置に設けることができる。

【図面の簡単な説明】

【0011】

【図1】実施の形態１に係る乗員監視装置が適用される車両の車室内の様子を示す概略斜視図である。

【図2】実施の形態１に係る乗員監視装置の構成を示すブロック図である。

【図3】車内撮像部及び照明部の表示部に対する取り付け例を示す図である。図３Ａは、車内撮像部及び照明部を額縁部の上縁辺に取り付けたときの図である。図３Ｂは、車内撮像部及び照明部を額縁部の下縁辺に取り付けたときの図である。図３Ｃは、車内撮像部及び照明部を額縁部の上縁辺及び下縁辺のそれぞれに取り付けたときの図である。図３Ｄは、車内撮像部及び照明部を一体化された取付板を額縁部に取り付けたときの図である。

【図4】実施の形態１に係る乗員監視方法を示すフローチャートである。

【図5】図５Ａ及び図５Ｂは、実施の形態１に係る監視制御装置のハードウェア構成の一例を示す図である。

【発明を実施するための形態】

【0012】

以下、本開示をより詳細に説明するために、本開示を実施するための形態について、添付の図面に従って説明する。

【0013】

実施の形態１．
実施の形態１に係る乗員監視装置２０について、図１から図５を用いて説明する。

【0014】

先ず、乗員監視装置２０の構成について、図１及び図２を用いて説明する。図１は、実施の形態１に係る乗員監視装置２０が適用される車両１００の車室内の様子を示す概略斜視図である。図２は、実施の形態１に係る乗員監視装置２０の構成を示すブロック図である。

【0015】

図１に示すように、車両１００における車室内の前方側には、例えば、運転席１０１、フロントガラス１０２、サイドドア１０３、Ａピラー１０４、及び、インストルメントパネル１０５が設けられている。

【0016】

車両１００は、例えば、トラック及びバス等の商用車を想定している。サイドドア１０３は、運転席１０１に対応する右サイドドアである。このサイドドア１０３は、ドアガラス１０３ａを有している。Ａピラー１０４は、フロントガラス１０２とサイドドア１０３との間に配置されている。このＡピラー１０４は、車両１００の上下方向に延びるように形成されている。インストルメントパネル１０５は、運転席１０１の前方で、且つ、フロントガラス１０２の下方に配置されている。このインストルメントパネル１０５は、車幅方向に延びる構造体である。

【0017】

また、車両１００には、電子ミラー装置１０及び乗員監視装置２０が搭載されている。

【0018】

図２に示すように、電子ミラー装置１０は、車外撮像部１１及び表示部１２を有している。

【0019】

車外撮像部１１は、車両１００の外部に設けられている。この車外撮像部１１は、少なくとも、車両１００の後方を含む範囲を撮像する。例えば、車外撮像部１１が車両１００の左側部に設けられる場合、当該車外撮像部１１は、車両１００の左側方から後方に至る範囲を撮像する。また、車外撮像部１１が車両１００の右側部に設けられる場合、当該車外撮像部１１は、車両１００の右側方から後方に至る範囲を撮像する。また、車外撮像部１１は、撮像した撮像画像（映像を含む）を、表示部１２に出力する。なお、車外撮像部１１は、例えば、カメラである。

【0020】

表示部１２は、車外撮像部１１から出力された撮像画像を取得する。また、表示部１２は、その取得した撮像画像を表示する。この表示部１２は、Ａピラー１０４に設けられている。このため、表示部１２は、運転席１０１に着座する乗員（ドライバ）が視認し易い位置に設置されている。この結果、表示部１２は、従来のサイドミラー又はバックミラーの代わりに使用され、車両１００の幅寄せ及びバック駐車の際に有効となる。

【0021】

また、表示部１２は、表示面１２ａ及び額縁部１２ｂを有している。表示面１２ａは、撮像画像を表示するものである。額縁部１２ｂは、矩形枠状に形成されており、表示面１２ａの外周端を全て囲むように配置されている。なお、表示面１２ａに表示される表示内容は、車外撮像部１１によって撮像された撮像画像だけでなく、車両１００に関する車両情報であれば良い。

【0022】

図２に示すように、乗員監視装置２０は、車内撮像部２１、照明部２２、及び、監視制御装置２０Ａを備えている。

【0023】

ここで、図１に示すように、１つの車内撮像部２１及び２つの照明部２２は、Ａピラー１０４に設けられた表示部１２に対して、一体的に取り付けられている。なお、照明部２２の数量は、１つ又は複数であっても良い。

【0024】

車内撮像部２１は、表示部１２から運転席１０１を向くように配置されている。この車内撮像部２１は、少なくとも、運転席１０１に着座する乗員の顔が存在する範囲を撮像する。また、車内撮像部２１は、撮像した撮像画像（映像を含む）を、視線検出部２４に出力する。

【0025】

照明部２２は、表示部１２から運転席１０１を向くように配置されている。この照明部２２は、少なくとも、運転席１０１に着座する乗員の顔が存在する範囲に対して、光を照射する。

【0026】

即ち、乗員監視装置２０は、照明部２２によって、運転席１０１に着座する乗員に対して、光を照射し、車内撮像部２１を通して撮像を行う。なお、車内撮像部２１は、例えばカメラである。照明部２２は、例えば、ＬＥＤ（Light Emitting Diode）である。

【0027】

また、図２に示すように、車内撮像部２１及び照明部２２は、表示部１２と電気的に接続されている。この車内撮像部２１及び照明部２２は、表示部１２の表示面１２ａに画像が表示されているときには、その動作が既に開始されている。

【0028】

監視制御装置２０Ａは、取得部２３、視線検出部２４、視線判定部２５、及び、警告制御部２６を有している。

【0029】

取得部２３は、車内撮像部２１から出力された撮像画像を取得する。また、取得部２３は、取得した撮像画像を視線検出部２４に出力する。

【0030】

視線検出部２４は、取得部２３から出力された撮像画像を取得する。また、視線検出部２４は、その取得した撮像画像から、運転席１０１に着座する乗員の視線の向きを検出する。更に、視線検出部２４は、その検出した乗員の視線の向きを、視線判定部２５に出力する。

【0031】

視線判定部２５は、視線検出部２４から出力された、乗員の視線の向きを取得する。また、視線判定部２５は、その取得した、乗員の視線の向きが、表示部１２の表示面１２ａに向いているか否かを判定する。このとき、視線判定部２５は、乗員の視線が、予め設定された条件を満たしたときに、当該乗員の視線の向きが表示面１２ａに向いていると判定する。予め設定された条件とは、例えば、乗員が表示面１２ａを視認している時間が所定時間以上となる場合、及び、乗員が表示面１２ａを視認する頻度が所定回数以上となる場合等である。

【0032】

なお、乗員が表示面１２ａを視認している時間、及び、乗員が表示面１２ａを視認する頻度は、上述した視線検出部２４が、取得した撮像画像に基づいて検出したものである。視線検出部２４は、検出したそれらを視線判定部２５に出力する。

【0033】

更に、例えば、視線判定部２５は、乗員の視線の向きが表示面１２ａに向いていないと判定した場合、警告制御部２６を動作させるための動作信号を、当該警告制御部２６に出力する。一方、視線判定部２５は、乗員の視線の向きが表示面１２ａに向いていると判定した場合、警告制御部２６を停止させるための停止信号を、当該警告制御部２６に出力する。

【0034】

警告制御部２６は、視線判定部２５から出力された動作信号又は停止信号を受信する。また、警告制御部２６は、その動作信号を受信した場合、乗員に対して、表示面１２ａに表示される撮像画像を注視していないことを示す警告を、発する。具体的には、警告制御部２６は、照明部２２及び音声出力部３１のうち、少なくとも一方を動作させる。警告制御部２６は、照明部２２を、予め設定された所定間隔で点滅させる。また、警告制御部２６は、音声出力部３１から音声を、乗員に向けて発生させる。このため、乗員は、表示面１２ａに表示された撮像情報を見るようになる。

【0035】

これに対して、警告制御部２６は、その停止信号を受信した場合、乗員に対して、警告を発しない。即ち、警告制御部２６は、照明部２２及び音声出力部３１の動作を、停止又は中止させる。なお、音声出力部３１は、例えば、車室内に設けられたスピーカである。

【0036】

次に、車内撮像部２１及び照明部２２の表示部１２に対する取り付け例について、図３を用いて説明する。図３は、車内撮像部２１及び照明部２２の表示部１２に対する取り付け例を示す図である。

【0037】

図３Ａに示すように、車内撮像部２１及び照明部２２は、表示部１２の額縁部１２ｂにおける上縁辺に設けられている。車内撮像部２１は、２つの照明部２２の間に配置されている。

【0038】

図３Ｂに示すように、車内撮像部２１及び照明部２２は、表示部１２の額縁部１２ｂにおける下縁辺に設けられている。車内撮像部２１は、２つの照明部２２の間に配置されている。

【0039】

図３Ｃに示すように、車内撮像部２１は、表示部１２の額縁部１２ｂにおける上縁辺に設けられている。照明部２２は、その額縁部１２ｂにおける下縁辺に設けられている。

【0040】

なお、図３Ａから図３Ｂに示すように、車内撮像部２１及び照明部２２を表示部１２の額縁部１２ｂに設ける場合、当該車内撮像部２１及び照明部２２は、額縁部１２ｂの上縁辺、下縁辺、左縁辺、及び、右縁辺のうち、いずれかの縁辺に設ければ良い。

【0041】

図３Ｄに示すように、車内撮像部２１及び照明部２２は、取付板２７に取り付けられている。この取付板２７の長さは、表示部１２の額縁部１２ｂにおける上縁辺の長さと、略同じ長さとなっている。車内撮像部２１は、取付板２７の長さ方向において、２つの照明部２２の間に配置されている。このように、車内撮像部２１及び照明部２２を一体化した取付板２７は、表示部１２に対して、額縁部１２ｂの上縁辺に沿うように取り付けられる。なお、車内撮像部２１及び照明部２２を一体化した取付板２７は、表示部１２に対して、額縁部１２ｂの下縁辺又は左縁辺或いは右縁辺に沿うように設けられても良い。

【0042】

次に、実施の形態１に係る乗員監視方法について、図４を用いて説明する。図４は、実施の形態１に係る乗員監視方法を示すフローチャートである。

【0043】

ステップＳＴ１１において、照明部２２が、運転席１０１に着座した乗員の少なくとも顔が存在する範囲に光を照射する。

【0044】

ステップＳＴ１２において、車内撮像部２１が、運転席１０１に着座した乗員の少なくとも顔が存在する範囲を撮像する。

【0045】

ステップＳＴ１３において、取得部２３が、車内撮像部２１によって撮像された撮像画像を取得する。

【0046】

ステップＳＴ１４において、視線検出部２４が、車内撮像部２１によって撮像された撮像画像から、乗員の視線の向きを検出する。

【0047】

ステップＳＴ１５において、視線判定部２５が、視線検出部２４によって検出された乗員の視線の向きが、表示部１２に向いているか否かを判定する。ここで、視線判定部２５が、乗員の視線の向きが表示部１２に向いていると判定した場合、乗員監視方法は、ステップＳＴ１４に戻る。また、視線判定部２５が、乗員の視線の向きが表示部１２に向いていないと判定した場合、乗員監視方法は、ステップＳＴ１６に進む。

【0048】

ステップＳＴ１６において、警告制御部２６が、視線判定部２５の判定結果に基づいて、照明部２２及び音声出力部３１のうちの少なくとも一方を制御する。そして、乗員監視方法は、終了する。

【0049】

次に、監視制御装置２０Ａのハードウェア構成例について、図５を用いて説明する。図５は、実施の形態１に係る監視制御装置２０Ａのハードウェア構成の一例を示す図である。

【0050】

図５Ａに示す如く、監視制御装置２０Ａは、コンピュータにより構成されており、当該コンピュータは、プロセッサ５１及びメモリ５２を有している。メモリ５２には、そのコンピュータを、取得部２３、視線検出部２４、視線判定部２５、及び、警告制御部２６として機能させるためのプログラムが記憶されている。メモリ５２に記憶されているプログラムをプロセッサ５１が読み出して実行することにより、取得部２３、視線検出部２４、視線判定部２５、及び、警告制御部２６の機能が実現される。

【0051】

又は、図５Ｂに示す如く、監視制御装置２０Ａは、処理回路５３を有するものであっても良い。この場合、取得部２３、視線検出部２４、視線判定部２５、及び、警告制御部２６により実現されるものであっても良い。

【0052】

又は、監視制御装置２０Ａは、プロセッサ５１、メモリ５２、及び、処理回路５３を有するものであっても良い（不図示）。この場合、取得部２３、視線検出部２４、視線判定部２５、警告制御部２６の機能のうちの一部がプロセッサ５１及びメモリ５２により実現されて、残余の機能が処理回路５３により実現されるものであっても良い。

【0053】

プロセッサ５１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、マイクロプロセッサ、マイクロコントローラ又はＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）のうちの少なくとも一つを用いたものである。

【0054】

メモリ５２は、例えば、半導体メモリ又は磁気ディスクのうちの少なくとも一方を用いたものである。より具体的には、メモリ５２は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）又はＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）のうちの少なくとも一つを用いたものである。

【0055】

処理回路５３は、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、ＳｏＣ（Ｓｙｓｔｅｍ－ｏｎ－ａ－Ｃｈｉｐ）又はシステムＬＳＩ（Ｌａｒｇｅ－Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）のうちの少なくとも一つを用いたものである。

【0056】

以上、実施の形態１に係る乗員監視装置２０は、車両１００の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部２１と、車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部２２とを備え、車内撮像部２１及び照明部２２は、車室内に配置されるＡピラー１０４に設けられる表示部１２に取り付けられる。このため、乗員監視装置２０は、Ａピラー１０４において、表示部１２の設置スペースを確保しつつ、車内撮像部２１を、精度良く撮像可能な位置に設けることができる。

【0057】

乗員監視装置２０においては、車内撮像部２１及び照明部２２は、表示部１２の額縁部１２ｂに取り付けられる。このため、乗員監視装置２０は、車内撮像部２１及び照明部２２の省スペース化を図ることができる。

【0058】

乗員監視装置２０は、車内撮像部２１及び照明部２２が設けられる取付板２７を備え、当該取付板２７は、車内撮像部２１及び照明部２２を一体化させた状態で、額縁部１２ｂに取り付けられる。乗員監視装置２０は、車内撮像部２１及び照明部２２の取り付け作業性を向上させることができる。

【0059】

乗員監視装置２０は、車内撮像部２１によって撮像された撮像画像を取得する取得部２３と、取得部２３によって取得された撮像画像から、乗員の視線の向きを検出する視線検出部２４と、視線検出部２４によって検出された乗員の視線の向きが、表示部１２に向いているか否かを判定する視線判定部２５と、視線判定部２５の判定結果に基づいて、照明部２２及び音声出力部３１のうちの少なくとも一方を制御する警告制御部２６とを備える。このため、乗員監視装置２０は、乗員に対して、表示面１２ａに表示される撮像画像を注視していないことを示す警告を、行うことができる。

【0060】

乗員監視装置２０においては、視線判定部２５は、視線検出部２４によって検出された乗員の視線が、予め設定された条件を満たしたときに、当該乗員の視線の向きが表示部１２に向いていると判定する。このため、乗員監視装置２０は、視線判定部２５の判定を適切に行うことができる。

【0061】

乗員監視装置２０においては、視線判定部２５が、乗員の視線の向きが表示部１２に向いていないと判定した場合、警告制御部２６は、照明部２２を点滅させる。このため、乗員監視装置２０は、乗員に対して、確実に警告を行うことができる。

【0062】

乗員監視装置２０においては、視線判定部２５が、乗員の視線の向きが表示部１２に向いていないと判定した場合、警告制御部２６は、音声出力部３１から音声を発生させる。このため、乗員監視装置２０は、乗員に対して、確実に警告を行うことができる。

【0063】

なお、本開示はその開示の範囲内において、実施の形態の任意の構成要素の変形、もしくは実施の形態の任意の構成要素の省略が可能である。

【0064】

以下、本開示の諸態様を付記としてまとめて記載する。

【0065】

（付記１）
車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、
前記車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部とを備え、
前記車内撮像部及び前記照明部は、前記車室内に配置されるＡピラーに設けられる表示部に取り付けられる
ことを特徴とする乗員監視装置。
（付記２）
前記車内撮像部及び前記照明部は、前記表示部の額縁部に取り付けられる
ことを特徴とする付記１記載の乗員監視装置。
（付記３）
前記車内撮像部及び前記照明部が設けられる取付板を備え、
前記取付板は、前記車内撮像部及び前記照明部を一体化させた状態で、前記表示部の額縁部に取り付けられる
ことを特徴とする付記１記載の乗員監視装置。
（付記４）
前記車内撮像部によって撮像された撮像画像を取得する取得部と、
前記取得部によって取得された撮像画像から、乗員の視線の向きを検出する視線検出部と、
前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定する視線判定部と、
前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御する警告制御部とを備える
ことを特徴とする付記１から付記３のうちのいずれか１付記記載の乗員監視装置。
（付記５）
前記視線判定部は、
前記視線検出部によって検出された乗員の視線が、予め設定された条件を満たしたときに、当該乗員の視線の向きが前記表示部に向いていると判定する
ことを特徴とする付記４記載の乗員監視装置。
（付記６）
前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記照明部を点滅させる
ことを特徴とする付記４及び付記５記載の乗員監視装置。
（付記７）
前記視線判定部が、乗員の視線の向きが前記表示部に向いていないと判定した場合、前記警告制御部は、前記音声出力部から音声を発生させる
ことを特徴とする付記４から付記６のうちのいずれか１付記記載の乗員監視装置。
（付記８）
車両の車室内における乗員の少なくとも顔が存在する範囲を撮像する車内撮像部と、
前記車室内における乗員の少なくとも顔が存在する範囲に光を照射する照明部とを備え、
前記車内撮像部及び前記照明部は、前記車室内に配置されるＡピラーに設けられる表示部に取り付けられる乗員監視装置において、
取得部が、前記車内撮像部によって撮像された撮像画像を取得し、
視線検出部が、前記取得部によって取得された撮像画像から、乗員の視線の向きを検出し、
視線判定部が、前記視線検出部によって検出された乗員の視線の向きが、前記表示部に向いているか否かを判定し、
警告制御部が、前記視線判定部の判定結果に基づいて、前記照明部及び音声出力部のうちの少なくとも一方を制御する
ことを特徴とする乗員監視方法。

【産業上の利用可能性】

【0066】

本開示に係る乗員監視装置は、車内撮像部及び照明部をＡピラーに設けられる表示部に取り付けることで、Ａピラーにおいて、表示部の設置スペースを確保しつつ、車内撮像部を、精度良く撮像可能な位置に設けることができ、乗員監視装置等に用いるのに適している。

【符号の説明】

【0067】

１０ 電子ミラー装置、１１ 車外撮像部、１２ 表示部、１２ａ 表示面、１２ｂ 額縁部、２０ 乗員監視装置、２０Ａ 監視制御装置、２１ 車内撮像部、２２ 照明部、２３ 取得部、２４ 視線検出部、２５ 視線判定部、２６ 警告制御部、２７ 取付板、３１ 音声出力部、５１ プロセッサ、５２ メモリ、５３ 処理回路、１００ 車両、１０１ 運転席、１０２ フロントガラス、１０３ フロントドア、１０３ａ ドアガラス、１０４ Ａピラー、１０５ インストルメントパネル。

【図1】

【図2】

【図3】

【図4】

【図5】