知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-08-05
(45)【発行日】2022-08-16
(54)【発明の名称】車内監視モジュール、及び、監視システム
(51)【国際特許分類】
B60R 11/04 20060101AFI20220808BHJP
G08B 21/00 20060101ALI20220808BHJP
G08B 25/04 20060101ALI20220808BHJP
G08B 25/08 20060101ALI20220808BHJP
H04Q 9/00 20060101ALI20220808BHJP
B60R 16/02 20060101ALI20220808BHJP
B60R 11/02 20060101ALI20220808BHJP
【ＦＩ】
B60R11/04
G08B21/00 U
G08B25/04 E
G08B25/08 A
H04Q9/00 301B
B60R16/02 655A
B60R16/02 655V
B60R11/02 M
B60R11/02 S
B60R11/02 W
B60R11/02 C
【請求項の数】
7
(21)【出願番号】P 2018065263
(22)【出願日】2018-03-29
(65)【公開番号】P2019172191
(43)【公開日】2019-10-10
【審査請求日】2021-02-18
(73)【特許権者】
【識別番号】000006895
【氏名又は名称】矢崎総業株式会社
(74)【代理人】
【識別番号】110001771
【氏名又は名称】特許業務法人虎ノ門知的財産事務所
(72)【発明者】
【氏名】斉藤 正樹
(72)【発明者】
【氏名】岡本 進一
(72)【発明者】
【氏名】石井 宏二
(72)【発明者】
【氏名】古屋 嘉之
(72)【発明者】
【氏名】ガフ アントニー
【審査官】西田 侑以
(56)【参考文献】
【文献】国際公開第２０１６／１３２２５１（ＷＯ，Ａ１）
【文献】米国特許第０９３１５１５２（ＵＳ，Ｂ１）
【文献】特開２００８－１９９５１５（ＪＰ，Ａ）
【文献】特開２００５－１２５９７７（ＪＰ，Ａ）
【文献】特開２０１６－０５７６７３（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｂ６０Ｒ ９－００ － １１／０６
１／００ － １／３１
２１／００ － ２１／３８
Ｇ０８Ｂ １９／００ － ２１／２４
Ｇ０８Ｂ ２３／００ － ３１／００
Ｈ０４Ｑ ９／００ － ９／１６
(57)【特許請求の範囲】
【請求項1】
車両の室内の状況を検出する検出部と、前記車両に設けられるサービス動作部と、
前記検出部によって検出された前記車両の室内の状況に基づいて当該車両の室内で発生した事象の種別を判定し、判定された前記事象の種別に基づいて前記サービス動作部を制御し、当該サービス動作部に当該事象の種別に応じた動作をさせる処理を実行可能である制御装置と、
前記検出部、前記サービス動作部、及び、前記制御装置が組み付けられてユニット化し、前記車両の室内の上方に設けられる筐体と、
前記車両の外部の外部機器と通信可能である車外通信部とを備え、
前記サービス動作部は、前記車両の室内に向けて情報を出力可能である情報出力装置を含み、
前記制御装置は、前記車外通信部を制御し、判定された前記事象の種別に関する情報を当該車外通信部を介して前記外部機器に送信させる処理、及び、前記情報出力装置を制御し、前記外部機器から前記車外通信部を介して受信した情報を出力させる処理を実行可能であることを特徴とする、
車内監視モジュール。
【請求項2】
前記検出部は、前記車両の室内の画像を撮像することで前記車両の室内の状況を検出する撮像装置を含み、前記制御装置は、前記撮像装置によって撮像された前記車両の室内の画像に基づいて当該車両の室内で発生した前記事象の種別を判定する、
請求項１に記載の車内監視モジュール。
【請求項3】
前記検出部は、前記車両の室内の音を検出することで前記車両の室内の状況を検出する音検出装置を含み、前記制御装置は、前記音検出装置によって検出された前記車両の室内の音に基づいて当該車両の室内で発生した前記事象の種別を判定する、
請求項１又は請求項２に記載の車内監視モジュール。
【請求項4】
前記制御装置は、前記外部機器から前記車外通信部を介して受信した情報に基づいて前記検出部を制御し、当該検出部を遠隔操作させる処理、及び、前記車外通信部を制御し、前記検出部によって検出された前記車両の室内の状況に関する情報を前記車外通信部を介して前記外部機器に送信させる処理を実行可能である、請求項１に記載の車内監視モジュール。
【請求項5】
前記車両の前記筐体外に搭載される車載機器と通信可能である車内通信部を備え、前記制御装置は、判定された前記事象の種別に基づいて前記車内通信部を介して前記車載機器を制御し、当該車載機器に当該事象の種別に応じた動作をさせる処理を実行可能である、
請求項１乃至請求項４のいずれか１項に記載の車内監視モジュール。
【請求項6】
前記制御装置は、前記事象の種別として、前記室内への残留物の発生、前記室内の人物のシートベルトの未着用、前記室内の人物の体調悪化、前記室内の人物の不審行動、又は、前記室内の異常事態を判定する、請求項１乃至請求項５のいずれか１項に記載の車内監視モジュール。
【請求項7】
車両に搭載される車内監視モジュールと、前記車両の外部に設けられ前記車内監視モジュールと相互に情報を送受信可能である外部機器とを備え、
前記車内監視モジュールは、
前記車両の室内の状況を検出する検出部と、
前記車両に設けられるサービス動作部と、
前記検出部によって検出された前記車両の室内の状況に基づいて当該車両の室内で発生した事象の種別を判定し、判定された前記事象の種別に基づいて前記サービス動作部を制御し、当該サービス動作部に当該事象の種別に応じた動作をさせる処理を実行可能である制御装置と、
前記検出部、前記サービス動作部、及び、前記制御装置が組み付けられてユニット化し、前記車両の室内内の上方に設けられる筐体と、
前記車両の外部の外部機器と通信可能である車外通信部とを備え、
前記サービス動作部は、前記車両の室内に向けて情報を出力可能である情報出力装置を含み、
前記制御装置は、前記外部機器と連携して前記サービス動作部に前記事象の種別に応じた動作をさせる処理を実行させるものであり、前記車外通信部を制御し、判定された前記事象の種別に関する情報を当該車外通信部を介して前記外部機器に送信させる処理、及び、前記情報出力装置を制御し、前記外部機器から前記車外通信部を介して受信した情報を出力させる処理を実行可能であることを特徴とする、
監視システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、車内監視モジュール、及び、監視システムに関する。
【背景技術】
【0002】
車両に搭載される従来の車内監視モジュールとして、例えば、特許文献１には、車両用乗員感情対応制御装置が開示されている。この装置は、車両の乗員の生体情報に基づいて当該乗員の感情を推定し、必要に応じて当該乗員の感情を改善させる。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１６－１３７２０４号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ところで、上述の特許文献１に記載の装置は、例えば、車両の室内の監視の点で更なる改善の余地がある。
【0005】
本発明は、上記の事情に鑑みてなされたものであって、車両の室内を適正に監視することができる車内監視モジュール、及び、監視システムを提供することを目的とする。
【課題を解決するための手段】
【0006】
上記目的を達成するために、本発明に係る車内監視モジュールは、車両の室内の状況を検出する検出部と、前記車両に設けられるサービス動作部と、前記検出部によって検出された前記車両の室内の状況に基づいて当該車両の室内で発生した事象の種別を判定し、判定された前記事象の種別に基づいて前記サービス動作部を制御し、当該サービス動作部に当該事象の種別に応じた動作をさせる処理を実行可能である制御装置と、前記検出部、前記サービス動作部、及び、前記制御装置が組み付けられてユニット化し、前記車両の室内の上方に設けられる筐体とを備えることを特徴とする。
【0007】
また、上記車内監視モジュールでは、前記検出部は、前記車両の室内の画像を撮像することで前記車両の室内の状況を検出する撮像装置を含み、前記制御装置は、前記撮像装置によって撮像された前記車両の室内の画像に基づいて当該車両の室内で発生した前記事象の種別を判定するものとすることができる。
【0008】
また、上記車内監視モジュールでは、前記検出部は、前記車両の室内の音を検出することで前記車両の室内の状況を検出する音検出装置を含み、前記制御装置は、前記音検出装置によって検出された前記車両の室内の音に基づいて当該車両の室内で発生した前記事象の種別を判定するものとすることができる。
【0009】
また、上記車内監視モジュールでは、前記車両の外部の外部機器と通信可能である車外通信部を備え、前記制御装置は、前記車外通信部を制御し、判定された前記事象の種別に関する情報を当該車外通信部を介して前記外部機器に送信させる処理を実行可能であるものとすることができる。
【0010】
また、上記車内監視モジュールでは、前記サービス動作部は、前記車両の室内に向けて情報を出力可能である情報出力装置を含み、前記制御装置は、前記情報出力装置を制御し、前記外部機器から前記車外通信部を介して受信した情報を出力させる処理を実行可能であるものとすることができる。
【0011】
また、上記車内監視モジュールでは、前記制御装置は、前記外部機器から前記車外通信部を介して受信した情報に基づいて前記検出部を制御し、当該検出部を遠隔操作させる処理、及び、前記車外通信部を制御し、前記検出部によって検出された前記車両の室内の状況に関する情報を前記車外通信部を介して前記外部機器に送信させる処理を実行可能であるものとすることができる。
【0012】
また、上記車内監視モジュールでは、前記車両の前記筐体外に搭載される車載機器と通信可能である車内通信部を備え、前記制御装置は、判定された前記事象の種別に基づいて前記車内通信部を介して前記車載機器を制御し、当該車載機器に当該事象の種別に応じた動作をさせる処理を実行可能であるものとすることができる。
【0013】
また、上記車内監視モジュールでは、前記制御装置は、前記事象の種別として、前記室内への残留物の発生、前記室内の人物のシートベルトの未着用、前記室内の人物の体調悪化、前記室内の人物の不審行動、又は、前記室内の異常事態を判定するものとすることができる。
【0014】
上記目的を達成するために、本発明に係る監視システムは、車両に搭載される車内監視モジュールと、前記車両の外部に設けられ前記車内監視モジュールと相互に情報を送受信可能である外部機器とを備え、前記車内監視モジュールは、前記車両の室内の状況を検出する検出部と、前記車両に設けられるサービス動作部と、前記検出部によって検出された前記車両の室内の状況に基づいて当該車両の室内で発生した事象の種別を判定し、判定された前記事象の種別に基づいて前記サービス動作部を制御し、当該サービス動作部に当該事象の種別に応じた動作をさせる処理を実行可能である制御装置と、前記検出部、前記サービス動作部、及び、前記制御装置が組み付けられてユニット化し、前記車両の室内内の上方に設けられる筐体とを備え、前記制御装置は、前記外部機器と連携して前記サービス動作部に前記事象の種別に応じた動作をさせる処理を実行させることを特徴とする。
【発明の効果】
【0015】
本発明に係る車内監視モジュール、及び、監視システムは、制御装置が検出部によって検出された車両の室内の状況に基づいて当該車両の室内で発生した事象の種別を判定する。そして、車内監視モジュールは、制御装置が判定された事象の種別に基づいてサービス動作部を制御し、当該サービス動作部に当該事象の種別に応じた動作をさせる処理を実行する。このような構成にあって、車内監視モジュールは、検出部、サービス動作部、及び、制御装置が筐体に組み付けられてユニット化され車両の室内の上方に設けられる。この結果、車内監視モジュールは、車両の室内を適正に監視することができる、という効果を奏する。
【図面の簡単な説明】
【0016】
【発明を実施するための形態】
【0017】
以下に、本発明に係る実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。
【0018】
［実施形態］
図１、図２、図３に示す本実施形態の車内監視モジュール１は、車両Ｖに搭載される車載システムである。本実施形態の車内監視モジュール１は、車両Ｖの室内ＩＮの状況を監視し、状況に応じて様々な対応処理を行うための構造的なモジュールである。そして、本実施形態の車内監視モジュール１は、主要な部分がユニット化された上で車両Ｖの室内ＩＮの上方、ここでは、屋根部材（ルーフ）ＲＦに配置されることでルーフ集中配置型の監視ユニットを構成する。ここで、屋根部材ＲＦは、車両Ｖにおいて鉛直方向上側に位置して当該車両Ｖの外装を構成する構造体である。屋根部材ＲＦは、中空柱状に形成された複数のピラーＰＬを介して車両ボデー本体ＢＯに連結され当該車両ボデー本体ＢＯの鉛直方向上側に支持される。車両Ｖは、当該屋根部材ＲＦを鉛直方向上側の境界として、室外ＯＵ側と室内ＩＮ側とに領域分けされる。車内監視モジュール１は、例えば、中空柱状のピラーＰＬの内部空間等に配索される電力線（電線）等を介して電源と電気的に接続され電力が供給される。車内監視モジュール１は、車両Ｖの外部に設けられる外部機器ＣＬと共に監視システム５００を構成する。本実施形態の監視システム５００は、車両Ｖに搭載される車内監視モジュール１と、車両Ｖの外部に設けられ車内監視モジュール１と相互に情報を送受信可能である外部機器ＣＬとを備える。そして、本実施形態の車内監視モジュール１は、外部機器ＣＬと連携して種々の処理を実行する。車内監視モジュール１は、図１に示す構成要素を車両Ｖに搭載することで実現される。以下、図１、図２、図３を参照して車内監視モジュール１の各構成について詳細に説明する。
図１、図２、図３に示す本実施形態の車内監視モジュール１は、車両Ｖに搭載される車載システムである。本実施形態の車内監視モジュール１は、車両Ｖの室内ＩＮの状況を監視し、状況に応じて様々な対応処理を行うための構造的なモジュールである。そして、本実施形態の車内監視モジュール１は、主要な部分がユニット化された上で車両Ｖの室内ＩＮの上方、ここでは、屋根部材（ルーフ）ＲＦに配置されることでルーフ集中配置型の監視ユニットを構成する。ここで、屋根部材ＲＦは、車両Ｖにおいて鉛直方向上側に位置して当該車両Ｖの外装を構成する構造体である。屋根部材ＲＦは、中空柱状に形成された複数のピラーＰＬを介して車両ボデー本体ＢＯに連結され当該車両ボデー本体ＢＯの鉛直方向上側に支持される。車両Ｖは、当該屋根部材ＲＦを鉛直方向上側の境界として、室外ＯＵ側と室内ＩＮ側とに領域分けされる。車内監視モジュール１は、例えば、中空柱状のピラーＰＬの内部空間等に配索される電力線（電線）等を介して電源と電気的に接続され電力が供給される。車内監視モジュール１は、車両Ｖの外部に設けられる外部機器ＣＬと共に監視システム５００を構成する。本実施形態の監視システム５００は、車両Ｖに搭載される車内監視モジュール１と、車両Ｖの外部に設けられ車内監視モジュール１と相互に情報を送受信可能である外部機器ＣＬとを備える。そして、本実施形態の車内監視モジュール１は、外部機器ＣＬと連携して種々の処理を実行する。車内監視モジュール１は、図１に示す構成要素を車両Ｖに搭載することで実現される。以下、図１、図２、図３を参照して車内監視モジュール１の各構成について詳細に説明する。
【0019】
なお、図１に図示する車内監視モジュール１において、電力供給、制御信号、各種情報等の授受のための各構成要素間の接続方式は、特に断りのない限り、電線や光ファイバ等の配索材を介した有線による接続（例えば、光ファイバを介した光通信等も含む）、無線通信、非接触給電等の無線による接続のいずれであってもよい。また、車内監視モジュール１が適用される車両Ｖは、電気車両（ＥＶ（Ｅｌｅｃｔｒｉｃ Ｖｅｈｉｃｌｅ））、ハイブリッド車両（ＨＥＶ（Ｈｙｂｒｉｄ Ｅｌｅｃｔｒｉｃ Ｖｅｈｉｃｌｅ））、プラグインハイブリッド車両（ＰＨＥＶ（Ｐｌｕｇ－ｉｎ Ｈｙｂｒｉｄ Ｅｌｅｃｔｒｉｃ Ｖｅｈｉｃｌｅ））、ガソリン車両、ディーゼル車両など、駆動源としてモータ又はエンジンを用いるいずれの車両であってもよい。また、当該車両Ｖの運転は、運転者による手動運転、半自動運転、完全自動運転等、いずれであってもよい。また、当該車両Ｖは、いわゆる個人が所有する自家用車、レンタカー、シェアリングカー、バス、タクシー、ライドシェアカーのいずれであってもよい。以下の説明では、一例として、車両Ｖは、バス、タクシー、ライドシェリングカー等、特定の事業者等によって管理され不特定多数の利用者によって利用され、利用者によって予約された乗降位置に自動で移動する完全自動運転可能な車両であるものとして説明する。完全自動運転の場合、車両Ｖに運転者自体が不在となる場合もありうる。
【0020】
具体的には、車内監視モジュール１は、筐体２と、車外通信部３と、車内通信部４と、検出部５と、サービス動作部６と、制御装置７とを備える。車内監視モジュール１は、これら筐体２、車外通信部３、車内通信部４、検出部５、サービス動作部６、及び、制御装置７がユニット化されることで構成される。車内監視モジュール１は、この他、さらに、ルームランプ、各種操作部等を含んで構成されてもよい。
【0021】
筐体２は、車内監視モジュール１を構成する車外通信部３、車内通信部４、検出部５、サービス動作部６、及び、制御装置７が組み付けられるものである。筐体２は、例えば、絶縁性を有する合成樹脂によって形成される。筐体２は、例えば、複数の部材が組み合わさって全体として中空箱状に形成されてもよい。筐体２は、中空箱状の内部に車外通信部３、車内通信部４、検出部５、サービス動作部６、及び、制御装置７が組み付けられこれらを収容し、車内監視モジュール１としてユニット化する。ここでは、筐体２は、内部に収容した車外通信部３、車内通信部４、検出部５、サービス動作部６等の一部が外面に露出している。そして、筐体２は、車両Ｖの室内ＩＮの上方、ここでは、屋根部材ＲＦに設けられる。筐体２は、典型的には、車両Ｖの室内ＩＮの上方であって、室内ＩＮの全乗員を見渡せる位置（後述する撮像装置５１で室内ＩＮの全乗員を撮像可能な位置）に設けられることが好ましい。より詳細には、筐体２は、屋根部材ＲＦの室内ＩＮ側の面に据え付けられる。ここでは、筐体２は、例えば、屋根部材ＲＦとウインドシールドＷＳとの交差部分でかつ車両Ｖの車幅方向の略中央位置に設けられる。ウインドシールドＷＳは、車両Ｖの前部に設けられ室内ＩＮと室外ＯＵとの境界となるものである。ウインドシールドＷＳは、光を透過する光透過性の部材によって構成され、フロントガラスとも呼ばれる。本実施形態の車内監視モジュール１は、全体が車両Ｖの屋根部材ＲＦの室内ＩＮ側の面に設けられ、種々の機能を統合したオーバーヘッドモジュール（ＯＨＭ：Ｏｖｅｒ－Ｈｅａｄ Ｍｏｄｕｌｅ）、あるいは、ルーフモジュール（ＲＭ：Ｒｏｏｆ Ｍｏｄｕｌｅ）を構成する。
【0022】
車外通信部３は、車両Ｖに搭載される無線通信機能部品である。車外通信部３は、車両Ｖと当該車両Ｖの外部のネットワークＮとを無線により接続する通信モジュールである。ここで、ネットワークＮは、車内監視モジュール１と車両Ｖの外部の機器とを通信可能に接続するものである。ネットワークＮは、有線または無線を問わず、任意の通信網を用いることができる。車外通信部３は、ネットワークＮに接続された機器と車内監視モジュール１との間で情報の送受信を行う。車外通信部３は、例えば、広域無線、狭域無線等、種々の方式の無線通信によりネットワークＮを介して車両Ｖの外部の機器と通信可能である。ここで、広域無線の方式は、例えば、ラジオ（ＡＭ、ＦＭ）、ＴＶ（ＵＨＦ、４Ｋ、８Ｋ）、ＴＥＬ、ＧＰＳ、ＷｉＭＡＸ（登録商標）等である。また、狭域無線の方式は、例えば、ＥＴＣ／ＤＳＲＣ、ＶＩＣＳ（登録商標）、無線ＬＡＮ、ミリ波通信等である。本実施形態の車外通信部３は、少なくともネットワークＮを介して、当該ネットワークＮに接続された外部機器ＣＬとの間で情報の送受信を行う。つまり、本実施形態の車外通信部３は、車両Ｖの外部の機器として、少なくとも外部機器ＣＬと通信可能に構成される。ここで、外部機器ＣＬは、車両Ｖの外部のネットワークＮ上に実装されるクラウドサービス機器を構成するものであり、いわゆるクラウドサービスにおけるセンタを構成する。外部機器ＣＬは、車内監視モジュール１（車両Ｖ）との間でネットワークＮを介して相互に情報を送受信することができる。外部機器ＣＬは、既知のＰＣやワークステーションなどのコンピュータシステムに種々の処理を実現させるアプリケーションをインストールすることで構成することもできる。車内監視モジュール１は、当該車外通信部３を介して外部機器ＣＬと相互に通信し連携することで当該外部機器ＣＬから様々なクラウドサービスを受けることができる。なお、この車外通信部３は、後述するサービス動作部６の一部を構成してもよい。
【0023】
車内通信部４は、車両Ｖに搭載される通信中継機能部品である。車内通信部４は、車載ネットワーク等を介して車両Ｖに搭載されたＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）１００や車載機器１０１と通信可能に構成される。つまり、車内通信部４は、車両Ｖに搭載されるＥＣＵ１００や車載機器１０１と種々の情報を送受信可能に構成される。ここで、ＥＣＵ１００は、車載機器１０１等を含む車両Ｖの全体を統括的に制御する電子制御ユニットである。このＥＣＵ１００は、車内監視モジュール１の一部として構成されていてもよい。言い換えれば、車内監視モジュール１は、ＥＣＵ１００を備える構成であってもよい。車載機器１０１は、車両Ｖの筐体２外に搭載され、種々の機能を実現させる機器である。車載機器１０１は、複数設けられる。車内通信部４は、ＥＣＵ１００を介して、当該ＥＣＵ１００に接続された複数の車載機器１０１との間で情報の送受信を行う。車内通信部４は、例えば、ルーティング処理を行うルータ機能やプロトコル変換処理を行うゲートウェイ機能等を有して構成されてもよい。本実施形態の複数の車載機器１０１は、一例として、走行系アクチュエータ１１１、シートベルト装置１１２、ドア装置１１３を含んで構成される。走行系アクチュエータ１１１は、車両Ｖを走行させるための種々の機器である。走行系アクチュエータ１１１は、典型的には、走行用パワートレーン、操舵装置、制動装置等を含んで構成される。走行用パワートレーンは、車両Ｖを走行させる駆動装置である。操舵装置は、車両Ｖの操舵を行う装置である。制動装置は、車両Ｖの制動を行う装置である。シートベルト装置１１２は、車両Ｖのシートベルトを電動でロックする装置である。ドア装置１１３は、車両Ｖの乗降用のドア、及び、当該ドアのロック機構を電動で開閉する装置である。なお、この車内通信部４は、後述するサービス動作部６の一部を構成してもよい。
【0024】
検出部５は、車両Ｖの室内ＩＮの状況を検出するものである。検出部５は、車両Ｖの室内ＩＮの状況を表す室内状況情報を検出する。室内状況情報は、例えば、車両Ｖの内部環境を表す情報、車両Ｖの内部の人物、物体等の有無、位置、状態を表す情報、車両Ｖの座席への着座の有無やシートベルトの着用の有無を表す情報等を含んでいてもよい。図１に示す検出部５は、一例として、撮像装置５１、レーダ／ソナー５２、及び、音検出装置としての音圧センサ５３を含んで構成されるものとして図示している。撮像装置５１は、車両Ｖの室内ＩＮの画像を撮像することで車両Ｖの室内ＩＮの状況を表す室内状況情報を検出するものである。撮像装置５１は、筐体２に組み付けられ、例えば、撮像範囲が車両Ｖの室内ＩＮの全域をカバーするように画角が調整されている。撮像装置５１は、１つで車両Ｖの室内ＩＮの全域をカバーできない場合には複数が設けられ当該複数によって車両Ｖの室内ＩＮの全域をカバーするように構成されてもよい。撮像装置５１は、例えば、２次元画像を撮像可能な単眼カメラであってもよいし、３次元画像を撮像可能なステレオカメラであってもよい。また、撮像装置５１は、いわゆるＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）カメラ等であってもよい。レーダ／ソナー５２は、赤外線、ミリ波、超音波等を用いて車両Ｖの室内ＩＮの状況を表す室内状況情報を検出するものである。レーダ／ソナー５２は、筐体２に組み付けられ、例えば、検知範囲が車両Ｖの室内ＩＮの全域をカバーするように調整されている。レーダ／ソナー５２は、１つで車両Ｖの室内ＩＮの全域をカバーできない場合には複数が設けられ当該複数によって車両Ｖの室内ＩＮの全域をカバーするように構成されてもよい。音圧センサ５３は、車両Ｖの室内ＩＮの音を検出することで車両Ｖの室内ＩＮの状況を表す室内状況情報を検出するものである。ここでは、音圧センサ５３は、車両Ｖの室内ＩＮの音の音圧を検出するものとして説明するがいわゆる集音マイク等であってもよい。音圧センサ５３は、１つで車両Ｖの室内ＩＮの全域をカバーできない場合には複数が設けられ当該複数によって車両Ｖの室内ＩＮの全域をカバーするように構成されてもよい。また、検出部５は、車内通信部４や車載ネットワークを介してＥＣＵ１００等の処理部から室内状況情報を取得する取得部を含んで構成されてもよい。検出部５（撮像装置５１、レーダ／ソナー５２、音圧センサ５３）によって検出された情報は、例えば、制御装置７によって室内ＩＮで発生した事象の種別判定に用いられる。
【0025】
サービス動作部６は、車両Ｖに設けられ当該車両Ｖの室内ＩＮにおいて、車両Ｖの室内ＩＮで発生した事象の種別に対応したサービス動作を行うものである。本実施形態のサービス動作部６は、車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３、マイク６４、回転灯６５等を含んで構成される。車外用ディスプレイ６１は、車両Ｖの室外ＯＵに向けて情報を出力可能である車外用の情報出力装置を構成する。車外用ディスプレイ６１は、車両Ｖの室外ＯＵに向けて画像情報（視覚情報）を表示（出力）するものである。車外用ディスプレイ６１は、例えば、薄型の液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイ等によって構成される。車外用ディスプレイ６１は、筐体２に組み付けられ、車両Ｖの室外ＯＵからウインドシールドＷＳを透過して目視可能な位置に画像情報を表示する。車内用ディスプレイ６２、及び、スピーカ６３は、車両Ｖの室内ＩＮに向けて情報を出力可能である車内用の情報出力装置を構成する。車内用ディスプレイ６２は、車両Ｖの室内ＩＮに向けて図柄や文字等の画像情報（視覚情報）を表示（出力）するものである。車内用ディスプレイ６２は、例えば、薄型の液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイ等によって構成される。車内用ディスプレイ６２は、筐体２に組み付けられ、車両Ｖの室内ＩＮの全ての座席から目視可能な位置に画像情報を表示する。スピーカ６３は、車両Ｖの室内ＩＮに向けて音情報（聴覚情報）を出力するものである。スピーカ６３は、例えば、車両Ｖの室内ＩＮにおいて、情報を提示したい特定の乗員にのみ音情報を聴き取り可能とする指向性の高いものを用いてもよい。同様に、車内用ディスプレイ６２は、例えば、車両Ｖの室内ＩＮにおいて、情報を提示したい特定の乗員にのみ画像情報を視認可能とする技術が適用されていてもよく、例えば、各乗員に対応するように個別に設けられていてもよい。マイク６４は、車両Ｖの室内ＩＮで発生した音を電気信号に変換する集音装置である。回転灯６５は、車両Ｖの室外ＯＵに向けて車両Ｖが緊急走行中であることを報知するものである。回転灯６５は、例えば、光源からの光を、当該光源の周りを回転する反射鏡によって反射させて水平方向に回転放光させることで、車両Ｖが緊急走行中であることを報知する。回転灯６５は、筐体２に組み付けられた状態で、屋根部材ＲＦの一部を貫通し車両Ｖの室外ＯＵに露出するように設けられる。
【0026】
制御装置７は、車内監視モジュール１の各部を統括的に制御するものである。制御装置７は、車両Ｖの室内ＩＮの状況を監視し、状況に応じて様々な対応処理を行うための種々の演算処理を実行する。制御装置７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の中央演算処理装置、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）及びインターフェースを含む周知のマイクロコンピュータを主体とする電子回路を含んで構成される。制御装置７は、車外通信部３、車内通信部４、検出部５、及び、サービス動作部６が電気的に接続される。制御装置７は、各種の検出信号や各部を駆動させるための駆動信号等の各種の電気信号を各部との間で相互に授受することができる。
【0027】
具体的には、制御装置７は、機能概念的に、インターフェース部７Ａ、記憶部７Ｂ、及び、処理部７Ｃを含んで構成される。インターフェース部７Ａ、記憶部７Ｂ、及び、処理部７Ｃは、電気的に接続されている各種機器との間で種々の情報を相互に授受することができる。インターフェース部７Ａは、車外通信部３、車内通信部４、検出部５、サービス動作部６等の車内監視モジュール１の各部と種々の情報を送受信するためのインターフェースである。インターフェース部７Ａは、各部との間で電線等を介して情報を有線通信する機能、各部との間で無線通信ユニット等を介して情報を無線通信する機能等を有している。記憶部７Ｂは、種々の情報を記憶する記憶装置である。記憶部７Ｂは、例えば、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、光ディスクなどの比較的に大容量の記憶装置、あるいは、ＲＡＭ、フラッシュメモリ、ＮＶＳＲＡＭ（Ｎｏｎ Ｖｏｌａｔｉｌｅ Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのデータを書き換え可能な半導体メモリであってもよい。記憶部７Ｂは、制御装置７での各種処理に必要な条件や情報、制御装置７で実行する各種プログラムやアプリケーション、制御データ等が格納されている。記憶部７Ｂは、例えば、車両Ｖの室内ＩＮで発生した事象の種別判定に用いられる事象種別判定情報等をデータベース化して記憶する。また、記憶部７Ｂは、例えば、車外通信部３、車内通信部４によって受信された各種情報や検出部５で検出された室内状況情報を一時的に記憶することもできる。記憶部７Ｂは、処理部７Ｃ等によってこれらの情報が必要に応じて読み出される。処理部７Ｃは、各種入力信号等に基づいて、記憶部７Ｂに記憶されている各種プログラムを実行し、当該プログラムが動作することにより各部に出力信号を出力し各種機能を実現するための種々の処理を実行する部分である。
【0028】
より詳細には、処理部７Ｃは、検出部５によって検出された車両Ｖの室内ＩＮの状況に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する処理を実行可能である。そして、処理部７Ｃは、判定された事象の種別に基づいてサービス動作部６を制御し当該サービス動作部６に当該事象の種別に応じた動作をさせる処理を実行可能である。ここでは、処理部７Ｃは、判定された事象の種別に基づいてサービス動作部６を制御すると共に、外部機器ＣＬと連携して当該サービス動作部６に当該事象の種別に応じた動作をさせる処理を実行可能である。処理部７Ｃは、車外通信部３を制御し、判定された事象の種別に関する発生事象種別情報を当該車外通信部３を介して外部機器ＣＬに送信させる処理を実行可能である。さらに、処理部７Ｃは、車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３等を制御し、外部機器ＣＬから車外通信部３を介して受信した出力情報を出力させる処理を実行可能である。また、処理部７Ｃは、外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を遠隔操作させる処理を実行可能である。さらに、処理部７Ｃは、車外通信部３を制御し、検出部５によって検出された車両Ｖの室内ＩＮの状況に関する室内状況情報を車外通信部３を介して外部機器ＣＬに送信させる処理を実行可能である。また、処理部７Ｃは、判定された事象の種別に基づいて車内通信部４を介して車載機器１０１を制御し当該車載機器１０１に当該事象の種別に応じた動作をさせる処理を実行可能である。本実施形態の処理部７Ｃは、上記処理を実行するために、機能概念的に、情報処理部７ａ、画像認識部７ｂ、音声対話処理部７ｃ、及び、サービス実行部７ｄを含んで構成される。
【0029】
情報処理部７ａは、車内監視モジュール１で用いる種々の情報に関する処理を実行可能な機能を有する部分である。本実施形態の情報処理部７ａは、検出部５を制御し、室内状況情報を検出させる処理を実行可能な機能を有する。例えば、情報処理部７ａは、撮像装置５１を制御し、車両Ｖの室内ＩＮの画像を撮像させることで室内状況情報を検出させる処理を実行する。また、情報処理部７ａは、レーダ／ソナー５２を制御し、赤外線、ミリ波、超音波等を用いて室内状況情報を検出させる処理を実行する。また、情報処理部７ａは、音圧センサ５３を制御し、車両Ｖの室内ＩＮの音を検出させることで室内状況情報を検出させる処理を実行する。そして、情報処理部７ａは、検出部５によって検出された室内状況情報を記憶部７Ｂに記憶させる処理を実行する。また、本実施形態の情報処理部７ａは、車外通信部３を制御し、外部機器ＣＬとの間で種々の情報を送受信させる処理を実行可能である。情報処理部７ａは、車外通信部３によって送信される情報を記憶部７Ｂから読み出す処理や車外通信部３によって受信された情報を記憶部７Ｂに記憶させる処理を実行する。例えば、情報処理部７ａは、後述する画像認識部７ｂや音声対話処理部７ｃによって判定された事象の種別に関する発生事象種別情報を、車外通信部３を介して外部機器ＣＬに送信させる処理を実行する。発生事象種別情報は、車両Ｖの室内ＩＮで発生した事象の種別に関する情報であって検出部５によって検出された室内状況情報に基づいて画像認識部７ｂや音声対話処理部７ｃによって判定された当該事象の種別に関する情報である。また、情報処理部７ａは、車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３で出力させる出力情報を、車外通信部３を介して外部機器ＣＬから受信させる処理を実行する。出力情報は、車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３から出力される情報であり、例えば、図４に例示するように、車外用ディスプレイ６１、車内用ディスプレイ６２で表示する画像情報やスピーカ６３から出力する音情報等を含む。さらに、情報処理部７ａは、検出部５を遠隔操作させる遠隔操作情報を、車外通信部３を介して外部機器ＣＬから受信させる処理をする。遠隔操作情報は、検出部５を外部機器ＣＬからの指示によって遠隔操作するための情報である。また、情報処理部７ａは、検出部５によって検出された室内状況情報を、車外通信部３を介して外部機器ＣＬに送信させる処理を実行可能である。また、本実施形態の情報処理部７ａは、車内通信部４を制御し、車載機器１０１との間で種々の情報を送受信させる処理を実行可能な機能を有する。情報処理部７ａは、車内通信部４によって送信される情報を記憶部７Ｂから読み出す処理や車内通信部４によって受信された情報を記憶部７Ｂに記憶させる処理を実行する。情報処理部７ａは、ＥＣＵ１００を介して車載機器１０１との間で種々の情報を送受信させる処理を実行する。例えば、情報処理部７ａは、後述するサービス実行部７ｄによって走行系アクチュエータ１１１、シートベルト装置１１２、ドア装置１１３等を動作させるための情報を、車内通信部４を介して走行系アクチュエータ１１１、シートベルト装置１１２、ドア装置１１３に送信させる処理を実行する。
【0030】
画像認識部７ｂは、検出部５によって検出された車両Ｖの室内ＩＮの状況を表す室内状況情報に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する処理を実行可能な機能を有する部分である。画像認識部７ｂは、後述の音声対話処理部７ｃと共に、当該車両Ｖの室内ＩＮで発生した事象の種別を判定する事象判定部として機能する。本実施形態の画像認識部７ｂは、例えば、種々の公知の人工知能（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ）技術や深層学習（Ｄｅｅｐ Ｌｅａｒｎｉｎｇ）技術を用いて車両Ｖの室内ＩＮで発生した事象の種別を判定する。例えば、画像認識部７ｂは、検出部５によって検出された室内状況情報、記憶部７Ｂに記憶されている事象種別判定情報等に基づいて車両Ｖの室内ＩＮで発生した事象の種別を判定する。当該事象種別判定情報は、人工知能技術や深層学習技術を用いた様々な手法によって、室内状況情報等に応じて当該車両Ｖの室内ＩＮで発生した事象の種別を学習した結果が反映される情報である。言い換えれば、事象種別判定情報は、室内状況情報等に基づいて車両Ｖの室内ＩＮで発生した事象の種別を推定するために、人工知能技術や深層学習技術を用いた様々な手法を用いてデータベース化された情報である。ここでは、画像認識部７ｂは、事象の種別として、室内ＩＮへの残留物の発生、室内ＩＮの人物のシートベルトの未着用、室内ＩＮの人物の体調悪化、又は、室内ＩＮの人物の不審行動（例えば、器物損壊行動、窃盗行動、傷害行動等）を判定する。つまりここでは、制御装置７によって判定される事象の種別は、一例として、室内ＩＮへの残留物の発生、室内ＩＮの人物のシートベルトの未着用、室内ＩＮの人物の体調悪化、及び、室内ＩＮの人物の不審行動を含む。本実施形態の画像認識部７ｂは、検出部５を構成する撮像装置５１によって撮像された車両Ｖの室内ＩＮの画像を表す画像情報に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する。つまり、画像認識部７ｂは、室内状況情報を構成する画像情報、及び、記憶部７Ｂに記憶されている事象種別判定情報に基づいて上記事象の種別を判定する。例えば、画像認識部７ｂは、車両Ｖへの乗員の乗車前の画像情報と、車両Ｖからの乗員の降車後の画像情報との差分画像に基づいて、室内ＩＮへの残留物の発生を判定することができる。さらに、画像認識部７ｂは、例えば、画像情報に含まれるシートベルトの画像に基づいて、室内ＩＮの人物のシートベルトの未着用を判定することができる。また、画像認識部７ｂは、例えば、画像情報に含まれる車両Ｖの室内ＩＮの乗員の挙動や表情と記憶部７Ｂに記憶されている事象種別判定情報とを照合することで、室内ＩＮの人物の体調悪化や室内ＩＮの人物の不審行動を判定することができる。
【0031】
音声対話処理部７ｃは、検出部５によって検出された車両Ｖの室内ＩＮの状況を表す室内状況情報に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する処理を実行可能な機能を有する部分である。音声対話処理部７ｃは、上述の画像認識部７ｂと共に、当該車両Ｖの室内ＩＮで発生した事象の種別を判定する事象判定部として機能する。ここでは、音声対話処理部７ｃは、例えば、事象の種別として、室内ＩＮの異常事態（音情報から判別可能な事態）の発生を判定する。つまりここでは、制御装置７によって判定される事象の種別は、一例として、さらに、室内ＩＮの異常事態を含む。本実施形態の音声対話処理部７ｃは、検出部５を構成する音圧センサ５３によって検出された車両Ｖの室内ＩＮの音を表す音情報に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する。例えば、音声対話処理部７ｃは、音圧センサ５３によって検出された車両Ｖの室内ＩＮの音の音圧が予め設定された閾値以上である場合に室内ＩＮの異常事態を判定することができる。
【0032】
サービス実行部７ｄは、画像認識部７ｂ、及び、音声対話処理部７ｃによって判定された事象の種別に基づいてサービス動作部６を制御し当該サービス動作部６に当該事象の種別に応じた動作をさせる処理を実行可能な機能を有する部分である。本実施形態のサービス実行部７ｄは、画像認識部７ｂによって室内ＩＮへの残留物の発生が判定された場合、残留物対応処理の少なくとも一部を実行することでサービス動作部６に残留物対応動作をさせる（例えば、後述の図６参照）。また、サービス実行部７ｄは、画像認識部７ｂによって室内ＩＮの人物のシートベルトの未着用が判定された場合、シートベルト未着用対応処理の少なくとも一部を実行することでサービス動作部６にシートベルト未着用対応動作をさせる（例えば、後述の図７参照）。また、サービス実行部７ｄは、画像認識部７ｂによって室内ＩＮの人物の体調悪化が判定された場合、体調悪化対応処理の少なくとも一部を実行することでサービス動作部６に体調悪化対応動作をさせる（例えば、後述の図８参照）。また、サービス実行部７ｄは、画像認識部７ｂによって室内ＩＮの人物の不審行動が判定された場合、不審行動対応処理の少なくとも一部を実行することでサービス動作部６に不審行動対応動作をさせる（例えば、後述の図９参照）。また、サービス実行部７ｄは、音声対話処理部７ｃによって室内ＩＮの異常事態が判定された場合、異常事態対応処理の少なくとも一部を実行することでサービス動作部６に異常事態対応動作をさせる（例えば、後述の図１１参照）。また、サービス実行部７ｄは、画像認識部７ｂによって判定された事象の種別に基づいて車内通信部４を介して走行系アクチュエータ１１１、シートベルト装置１１２、ドア装置１１３を含む車載機器１０１を制御し当該車載機器１０１に当該事象の種別に応じた動作をさせる処理を実行することもできる。
【0033】
次に、図５のフローチャート図を参照して車内監視モジュール１おける制御の一例の概略を説明し、その後、図６、図７、図８、図９を参照して、残留物対応処理、シートベルト未着用対応処理、体調悪化対応処理、不審行動対応処理の具体例について説明する。
【0034】
まず、制御装置７は、例えば、車両ＶのイグニッションがＯＮとされると、車内監視モジュール１が構成するシステムをＯＮとする（ステップＳＴ１）。
【0035】
次に、制御装置７の情報処理部７ａは、撮像装置５１を制御し、車両Ｖの室内ＩＮの画像を撮像させることで室内状況情報を検出させる。そして、情報処理部７ａは、当該室内ＩＮの画像情報を含む室内状況情報を取得する（ステップＳＴ２）。
【0036】
次に、制御装置７の画像認識部７ｂは、ステップＳＴ２で取得された室内状況情報に含まれる車両Ｖの室内ＩＮの画像を表す画像情報を分析する。そして、画像認識部７ｂは、上述したように、車両Ｖの室内ＩＮの画像を表す画像情報に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する（ステップＳＴ３）。
【0037】
次に、画像認識部７ｂは、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮへの残留物の発生が判定されたか否かを判定する（ステップＳＴ４）。
【0038】
制御装置７のサービス実行部７ｄは、ステップＳＴ４の処理で、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮへの残留物の発生が判定された場合（ステップＳＴ４：Ｙｅｓ）、残留物対応処理を実行し（ステップＳＴ５）、ステップＳＴ６の処理に移行する。
【0039】
画像認識部７ｂは、ステップＳＴ４の処理で、室内ＩＮへの残留物の発生を判定しなかった場合（ステップＳＴ４：Ｎｏ）、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物のシートベルトの未着用が判定されたか否かを判定する（ステップＳＴ７）。
【0040】
サービス実行部７ｄは、ステップＳＴ７の処理で、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物のシートベルトの未着用が判定された場合（ステップＳＴ７：Ｙｅｓ）、シートベルト未着用対応処理を実行し（ステップＳＴ８）、ステップＳＴ６の処理に移行する。
【0041】
画像認識部７ｂは、ステップＳＴ７の処理で、室内ＩＮの人物のシートベルトの未着用を判定しなかった場合（ステップＳＴ７：Ｎｏ）、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物の体調悪化が判定されたか否かを判定する（ステップＳＴ９）。
【0042】
サービス実行部７ｄは、ステップＳＴ９の処理で、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物の体調悪化が判定された場合（ステップＳＴ９：Ｙｅｓ）、体調悪化対応処理を実行し（ステップＳＴ１０）、ステップＳＴ６の処理に移行する。
【0043】
画像認識部７ｂは、ステップＳＴ９の処理で、室内ＩＮの人物の体調悪化を判定しなかった場合（ステップＳＴ９：Ｎｏ）、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物の不審行動が判定されたか否かを判定する（ステップＳＴ１１）。
【0044】
サービス実行部７ｄは、ステップＳＴ１１の処理で、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの人物の不審行動が判定された場合（ステップＳＴ１１：Ｙｅｓ）、不審行動対応処理を実行し（ステップＳＴ１２）、ステップＳＴ６の処理に移行する。
【0045】
画像認識部７ｂは、ステップＳＴ１１の処理で、室内ＩＮの人物の不審行動を判定しなかった場合（ステップＳＴ１１：Ｎｏ）、ステップＳＴ６の処理に移行する。
【0046】
制御装置７は、ステップＳＴ６の処理では、例えば、車両ＶのイグニッションのＯＦＦ等に伴って車内監視モジュール１が構成するシステムがＯＦＦされたか否かを判定する（ステップＳＴ６）。制御装置７は、システムがＯＦＦされていないと判定した場合（ステップＳＴ６：Ｎｏ）、ステップＳＴ２の処理に戻って以降の処理を繰り返し実行する。制御装置７は、システムがＯＦＦされたと判定した場合（ステップＳＴ６：Ｙｅｓ）、この制御を終了する。
【0047】
次に、図６のフローチャート図を参照して残留物対応処理の一例の概略を説明する。
【0048】
情報処理部７ａは、残留物対応処理では、まず、車外通信部３を制御し、画像認識部７ｂによって判定された事象の種別に関する発生事象種別情報を、車外通信部３を介して外部機器ＣＬに送信させる。ここでは、情報処理部７ａは、室内ＩＮへの残留物の発生を表す発生事象種別情報を外部機器ＣＬに送信する。これにより、情報処理部７ａは、センタを構成する外部機器ＣＬに対して車両Ｖの室内ＩＮへの残留物の発生を通知する（ステップＳＴ５０１）。
【0049】
次に、情報処理部７ａは、車外通信部３を制御し、遠隔操作情報を、車外通信部３を介して外部機器ＣＬから受信させる。これにより、情報処理部７ａは、外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を外部機器ＣＬからの指示によって遠隔操作させる。例えば、外部機器ＣＬを管理する事業者のオペレータ（以下、単に「オペレータ」という場合がある。）は、撮像装置５１の画角を遠隔操作して車両Ｖの室内ＩＮの全域を撮像させる。そして、情報処理部７ａは、車外通信部３を制御し、検出部５によって検出された室内状況情報を、車外通信部３を介して外部機器ＣＬに送信させる。ここでは、情報処理部７ａは、遠隔操作された撮像装置５１によって撮像された画像情報や音圧センサ５３によって検出された音の音情報を、車外通信部３を介して室内状況情報を外部機器ＣＬに送信させる。これにより、オペレータは、例えば、車両Ｖの室内ＩＮで発生した事象の詳細を確認することができる（ステップＳＴ５０２）。
【0050】
次に、画像認識部７ｂは、室内ＩＮへの残留物が汚物（例えば、ゴミ、吐瀉物、汚れ等）であるか否かを判定する（ステップＳＴ５０３）。画像認識部７ｂは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮへの残留物が汚物であるか否かを判定することができる。また、画像認識部７ｂは、ステップＳＴ５０２で事象の詳細を確認したオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて室内ＩＮへの残留物が汚物であるか否かを判定してもよい。画像認識部７ｂは、室内ＩＮへの残留物が汚物であると判定した場合（ステップＳＴ５０３：Ｙｅｓ）、ステップＳＴ５０４の処理に移行する。画像認識部７ｂは、室内ＩＮへの残留物が汚物でないと判定した場合（ステップＳＴ５０３：Ｎｏ）、ステップＳＴ５１１の処理に移行する。
【0051】
画像認識部７ｂは、ステップＳＴ５０４の処理では、車両Ｖの室内ＩＮに乗員がいるか否か（乗員ありか否か）を判定する（ステップＳＴ５０４）。画像認識部７ｂは、例えば、撮像装置５１によって撮像された画像情報に基づいて車両Ｖの室内ＩＮに乗員がいるか否かを判定することができる。また、画像認識部７ｂは、ステップＳＴ５０２で事象の詳細を確認したオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて車両Ｖの室内ＩＮに乗員がいるか否かを判定してもよい。画像認識部７ｂは、車両Ｖの室内ＩＮに乗員がいると判定した場合（ステップＳＴ５０４：Ｙｅｓ）、ステップＳＴ５０５の処理に移行する。画像認識部７ｂは、車両Ｖの室内ＩＮに乗員がいないと判定した場合（ステップＳＴ５０４：Ｎｏ）、ステップＳＴ５１０の処理に移行する。
【0052】
情報処理部７ａは、ステップＳＴ５０５の処理では、車外通信部３を制御し、車外通信部３を介して外部機器ＣＬとの間で相互通信を行わせる（ステップＳＴ５０５）。この場合、サービス実行部７ｄは、サービス動作部６を構成する車内用ディスプレイ６２、スピーカ６３、マイク６４等の動作をＯＮとし、情報処理部７ａによる相互通信を実行可能な状態とする。情報処理部７ａは、例えば、オペレータから外部機器ＣＬに入力された出力情報を、車外通信部３を介して外部機器ＣＬから受信させる。そして、サービス実行部７ｄは、受信した出力情報に含まれる画像情報を車内用ディスプレイ６２から室内ＩＮの乗員に向けて表示させる。また、サービス実行部７ｄは、受信した出力情報に含まれる音情報をスピーカ６３から室内ＩＮの乗員に向けて出力させる。これにより、サービス実行部７ｄは、例えば、図４に示すように、車内用ディスプレイ６２にオペレータの画像を表示させると共にスピーカ６３から「何か問題がありましたか？」等の音声案内を出力させることができる。なおこの場合、サービス実行部７ｄは、例えば、外部機器ＣＬから送信される出力情報ではなく、オペレータから外部機器ＣＬに入力された指令情報に基づいて記憶部７Ｂに予め記憶されている画像情報や音情報を読み出すようにしてもよい。そして、サービス実行部７ｄは、記憶部７Ｂから読み出した画像情報や音情報を車内用ディスプレイ６２、スピーカ６３から出力させるようにしてもよい。また、情報処理部７ａは、例えば、車外通信部３を制御し、マイク６４によって集音された乗員の音声情報を、車外通信部３を介して外部機器ＣＬに送信させる。この結果、サービス実行部７ｄは、例えば、室内ＩＮの乗員と外部機器ＣＬ側のオペレータとの相互通信を行わせることができ、意思の疎通を図らせることができる。
【0053】
次に、サービス実行部７ｄは、汚物処理のため車両Ｖの乗り換えが必要か否かを判定する（ステップＳＴ５０６）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて車両Ｖの乗り換えが必要か否かを判定することができる。また、サービス実行部７ｄは、ステップＳＴ５０２で事象の詳細を確認したオペレータやステップＳＴ５０５で相互通信を行ったオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて車両Ｖの乗り換えが必要か否かを判定してもよい。サービス実行部７ｄは、車両Ｖの乗り換えが必要と判定した場合（ステップＳＴ５０６：Ｙｅｓ）、ステップＳＴ５０７の処理に移行する。サービス実行部７ｄは、車両Ｖの乗り換えが必要ないと判定した場合（ステップＳＴ５０６：Ｎｏ）、残留物対応処理を終了する。
【0054】
サービス実行部７ｄは、ステップＳＴ５０７の処理では、代替車両の配車を要請する（ステップＳＴ５０７）。この場合、情報処理部７ａは、例えば、車外通信部３を制御し、サービス実行部７ｄによって要請された代替車両の配車に関する情報を、車外通信部３を介してセンタを構成する外部機器ＣＬに送信させる。外部機器ＣＬは、代替車両の配車に関する情報を受信すると、例えば、当該車両Ｖの現在位置近傍にいる空車両を、代替車両として当該車両Ｖの現在位置に配車する。
【0055】
次に、サービス実行部７ｄは、車内用ディスプレイ６２、スピーカ６３等を制御し、室内ＩＮにいる乗員の降車を案内させる（ステップＳＴ５０８）。
【0056】
次に、サービス実行部７ｄは、室内ＩＮにいる乗員の降車が完了したか否かを判定する（ステップＳＴ５０９）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮにいる乗員の降車が完了したか否かを判定することができる。サービス実行部７ｄは、室内ＩＮにいる乗員の降車が完了したと判定した場合（ステップＳＴ５０９：Ｙｅｓ）、ステップＳＴ５１０の処理に移行する。サービス実行部７ｄは、室内ＩＮにいる乗員の降車が完了していないと判定した場合（ステップＳＴ５０９：Ｎｏ）、ステップＳＴ５０８の処理に戻って以降の処理を繰り返し実行する。
【0057】
サービス実行部７ｄは、ステップＳＴ５１０の処理では、車両Ｖを事業者が管理する整備基地等に帰還させ（ステップＳＴ５１０）、残留物対応処理を終了する。この場合、サービス実行部７ｄは、ＥＣＵ１００によって走行系アクチュエータ１１１を制御させ、車両Ｖを自動で整備基地等に帰還させる。そして、事業者は、整備基地等に帰還させた車両Ｖに対して清掃等の必要な処置を実施する。
【0058】
画像認識部７ｂは、ステップＳＴ５１１の処理では、室内ＩＮへの残留物が乗員の忘れ物であるか否かを判定する（ステップＳＴ５１１）。画像認識部７ｂは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮへの残留物が乗員の忘れ物であるか否かを判定することができる。また、画像認識部７ｂは、ステップＳＴ５０２で事象の詳細を確認したオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて室内ＩＮへの残留物が乗員の忘れ物であるか否かを判定してもよい。画像認識部７ｂは、室内ＩＮへの残留物が乗員の忘れ物であると判定した場合（ステップＳＴ５１１：Ｙｅｓ）、ステップＳＴ５１２の処理に移行する。画像認識部７ｂは、室内ＩＮへの残留物が乗員の忘れ物でないと判定した場合（ステップＳＴ５１１：Ｎｏ）、例えば、残留物が汚物、乗員の忘れ物等ではないものとして残留物対応処理を終了する。この場合、情報処理部７ａは、例えば、車外通信部３を制御し、残留物が汚物、乗員の忘れ物等ではない旨を表す情報を、車外通信部３を介して外部機器ＣＬに送信させてもよい。
【0059】
サービス実行部７ｄは、ステップＳＴ５１２の処理では、忘れ物の持ち主を特定可能か否かを判定する（ステップＳＴ５１２）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報、車両Ｖの予約時等に登録された利用者情報等に基づいて忘れ物の持ち主を特定可能か否かを判定することができる。サービス実行部７ｄは、忘れ物の持ち主を特定可能であると判定した場合（ステップＳＴ５１２：Ｙｅｓ）、ステップＳＴ５１３の処理に移行する。サービス実行部７ｄは、忘れ物の持ち主を特定不能であると判定した場合（ステップＳＴ５１２：Ｎｏ）、ステップＳＴ５１４の処理に移行する。
【0060】
サービス実行部７ｄは、ステップＳＴ５１３の処理では、ステップＳＴ５１２で特定された忘れ物の持ち主に忘れ物がある旨を通知し（ステップＳＴ５１３）、ステップＳＴ５１４の処理に移行する。この場合、情報処理部７ａは、例えば、車外通信部３を制御し、忘れ物がある旨を表す通知情報を、車外通信部３を介して、上記で特定された忘れ物の持ち主が所持する携帯端末等に送信させる。車両Ｖの利用者（持ち主）が所持する携帯端末のアドレス等は、例えば、車両Ｖの予約時等に外部機器ＣＬに予め登録される。なお、忘れ物がある旨を表す通知情報は、外部機器ＣＬから上記で特定された忘れ物の持ち主が所持する携帯端末等に送信されてもよい。忘れ物がある旨を表す通知情報を携帯端末等で受信した持ち主は、携帯端末等を介して忘れ物の渡し場所等を外部機器ＣＬに登録することもできる。
【0061】
サービス実行部７ｄは、ステップＳＴ５１４の処理では、室内ＩＮの全乗員が降車したか否かを判定する（ステップＳＴ５１４）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮの全乗員が降車したか否かを判定することができる。サービス実行部７ｄは、室内ＩＮの全乗員が降車したと判定した場合（ステップＳＴ５１４：Ｙｅｓ）、ステップＳＴ５１５の処理に移行する。サービス実行部７ｄは、室内ＩＮの全乗員が降車していないと判定した場合（ステップＳＴ５１４：Ｎｏ）、ステップＳＴ５１４の処理を繰り返し実行する。
【0062】
サービス実行部７ｄは、ステップＳＴ５１５の処理では、忘れ物の渡し場所が確定しているか否かを判定する（ステップＳＴ５１５）。この場合、情報処理部７ａは、例えば、車外通信部３を制御し、忘れ物の渡し場所に関する情報を、車外通信部３を介して外部機器ＣＬから受信させる。サービス実行部７ｄは、忘れ物の渡し場所に関する情報を受信した際には忘れ物の渡し場所が確定していると判定し（ステップＳＴ５１５：Ｙｅｓ）、ステップＳＴ５１６の処理に移行する。サービス実行部７ｄは、忘れ物の渡し場所に関する情報を受信しなかった際には忘れ物の渡し場所が確定していないと判定し（ステップＳＴ５１５：Ｎｏ）、ステップＳＴ５１０の処理に移行する。
【0063】
サービス実行部７ｄは、ステップＳＴ５１６の処理では、車両Ｖを忘れ物の渡し場所に関する情報に基づいた渡し場所に移動させ（ステップＳＴ５１６）、残留物対応処理を終了する。この場合、サービス実行部７ｄは、ＥＣＵ１００によって走行系アクチュエータ１１１を制御させ、車両Ｖを自動で忘れ物の渡し場所に移動させ、当該忘れ物を持ち主に受け渡す。
【0064】
次に、図７のフローチャート図を参照してシートベルト未着用対応処理の一例の概略を説明する。
【0065】
サービス実行部７ｄは、シートベルト未着用対応処理では、まず、車内用ディスプレイ６２、スピーカ６３等を制御し、室内ＩＮにいる乗員に対してシートベルトを着用するように注意喚起を行わせる（ステップＳＴ８０１）。
【0066】
次に、サービス実行部７ｄは、室内ＩＮにいる乗員のシートベルトの着用が完了したか否かを判定する（ステップＳＴ８０２）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮにいる乗員のシートベルトの着用が完了したか否かを判定することができる。サービス実行部７ｄは、室内ＩＮにいる乗員のシートベルトの着用が完了したと判定した場合（ステップＳＴ８０２：Ｙｅｓ）、ステップＳＴ８０３の処理に移行する。サービス実行部７ｄは、室内ＩＮにいる乗員のシートベルトの着用が完了していないと判定した場合（ステップＳＴ８０２：Ｎｏ）、ステップＳＴ８０４の処理に移行する。
【0067】
サービス実行部７ｄは、ステップＳＴ８０３の処理では、車両Ｖの発進を許可して（ステップＳＴ８０３）、シートベルト未着用対応処理を終了する。
【0068】
サービス実行部７ｄは、ステップＳＴ８０４の処理では、車両Ｖの発進を許可せず待機させ（ステップＳＴ８０４）、ステップＳＴ８０１の処理に戻って以降の処理を繰り返し実行する。
【0069】
次に、図８のフローチャート図を参照して体調悪化対応処理の一例の概略を説明する。
【0070】
情報処理部７ａは、体調悪化対応処理では、まず、車外通信部３を制御し、画像認識部７ｂによって判定された事象の種別に関する発生事象種別情報を、車外通信部３を介して外部機器ＣＬに送信させる。ここでは、情報処理部７ａは、室内ＩＮの人物の体調悪化を表す発生事象種別情報を外部機器ＣＬに送信する。これにより、情報処理部７ａは、センタを構成する外部機器ＣＬに対して車両Ｖの室内ＩＮの人物の体調悪化を通知する（ステップＳＴ１００１）。
【0071】
次に、情報処理部７ａは、上述したステップＳＴ５０２の処理と同様に、車外通信部３を制御し、遠隔操作情報を、車外通信部３を介して外部機器ＣＬから受信させる。これにより、情報処理部７ａは、外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を外部機器ＣＬからの指示によって遠隔操作させる。そして、情報処理部７ａは、車外通信部３を制御し、検出部５によって検出された室内状況情報を、車外通信部３を介して外部機器ＣＬに送信させる。これにより、オペレータは、例えば、車両Ｖの室内ＩＮで発生した事象の詳細を確認することができる（ステップＳＴ１００２）。
【0072】
次に、情報処理部７ａは、上述したステップＳＴ５０５の処理と同様に、車外通信部３を制御し、車外通信部３を介して外部機器ＣＬとの間で相互通信を行わせる（ステップＳＴ１００３）。この場合、サービス実行部７ｄは、サービス動作部６を構成する車内用ディスプレイ６２、スピーカ６３、マイク６４等の動作をＯＮとし、情報処理部７ａによる相互通信を実行可能な状態とする。この結果、サービス実行部７ｄは、例えば、室内ＩＮの乗員と外部機器ＣＬ側のオペレータとの相互通信を行わせることができ、意思の疎通を図らせることができる。
【0073】
次に、サービス実行部７ｄは、緊急性があるか否かを判定する（ステップＳＴ１００４）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮの人物の体調悪化が緊急性を有するものであるか否かを判定することができる。また、サービス実行部７ｄは、ステップＳＴ１００２で事象の詳細を確認したオペレータやステップＳＴ１００３で相互通信を行ったオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて室内ＩＮの人物の体調悪化が緊急性を有するものであるか否かを判定してもよい。サービス実行部７ｄは、緊急性があると判定した場合（ステップＳＴ１００４：Ｙｅｓ）、ステップＳＴ１００５の処理に移行する。サービス実行部７ｄは、緊急性がないと判定した場合（ステップＳＴ１００４：Ｎｏ）、体調悪化対応処理を終了する。
【0074】
サービス実行部７ｄは、ステップＳＴ１００５の処理では、上述したステップＳＴ５０７の処理と同様に、代替車両の配車を要請する（ステップＳＴ１００５）。
【0075】
次に、サービス実行部７ｄは、上述したステップＳＴ５０８の処理と同様に、車内用ディスプレイ６２、スピーカ６３等を制御し、室内ＩＮにいる体調が悪化した人物以外の乗員の降車を案内させる（ステップＳＴ１００６）。
【0076】
次に、サービス実行部７ｄは、上述したステップＳＴ５０９の処理と同様に、室内ＩＮにいる体調が悪化した人物以外の乗員の降車が完了したか否かを判定する（ステップＳＴ１００７）。サービス実行部７ｄは、室内ＩＮにいる体調が悪化した人物以外の乗員の降車が完了したと判定した場合（ステップＳＴ１００７：Ｙｅｓ）、ステップＳＴ１００８の処理に移行する。サービス実行部７ｄは、室内ＩＮにいる体調が悪化した人物以外の乗員の降車が完了していないと判定した場合（ステップＳＴ１００７：Ｎｏ）、ステップＳＴ１００６の処理に戻って以降の処理を繰り返し実行する。
【0077】
サービス実行部７ｄは、ステップＳＴ１００８の処理では、回転灯６５を制御し、車両Ｖの室外ＯＵに向けて車両Ｖが緊急走行中であることを報知させる（ステップＳＴ１００８）。この場合、サービス実行部７ｄは、車外用ディスプレイ６１等を制御し、車両Ｖの室外ＯＵに向けて車両Ｖが緊急走行中であることを表示させてもよい。
【0078】
次に、サービス実行部７ｄは、車両Ｖを救急車両として病院等に搬送させ（ステップＳＴ１００９）、体調悪化対応処理を終了する。この場合、サービス実行部７ｄは、ＥＣＵ１００によって走行系アクチュエータ１１１を制御させ、体調が悪化した人物を乗せたまま、車両Ｖを自動で病院等に搬送させる。
【0079】
なお、以上の説明では、制御装置７は、体調悪化対応処理として、車両Ｖを救急車両として病院等に搬送させる処理を行うものとして説明したがこれ限らず、例えば、救急に通報し当該車両Ｖの近傍に救急車両を要請する処理を行うようにしてもよい。
【0080】
次に、図９のフローチャート図を参照して不審行動対応処理の一例の概略を説明する。
【0081】
情報処理部７ａは、不審行動対応処理では、まず、車外通信部３を制御し、画像認識部７ｂによって判定された事象の種別に関する発生事象種別情報を、車外通信部３を介して外部機器ＣＬに送信させる。ここでは、情報処理部７ａは、室内ＩＮの人物の不審行動を表す発生事象種別情報を外部機器ＣＬに送信する。これにより、情報処理部７ａは、センタを構成する外部機器ＣＬに対して車両Ｖの室内ＩＮの人物の不審行動を通知する（ステップＳＴ１２０１）。
【0082】
次に、情報処理部７ａは、上述したステップＳＴ５０２の処理と同様に、車外通信部３を制御し、遠隔操作情報を、車外通信部３を介して外部機器ＣＬから受信させる。これにより、情報処理部７ａは、外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を外部機器ＣＬからの指示によって遠隔操作させる。そして、情報処理部７ａは、車外通信部３を制御し、検出部５によって検出された室内状況情報を、車外通信部３を介して外部機器ＣＬに送信させる。これにより、オペレータは、例えば、車両Ｖの室内ＩＮで発生した事象の詳細を確認することができる（ステップＳＴ１２０２）。
【0083】
次に、サービス実行部７ｄは、緊急性があるか否かを判定する（ステップＳＴ１２０３）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮの人物の不審行動が緊急性を有するものであるか否かを判定することができる。また、サービス実行部７ｄは、ステップＳＴ１２０２で事象の詳細を確認したオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて室内ＩＮの人物の不審行動が緊急性を有するものであるか否かを判定してもよい。サービス実行部７ｄは、緊急性があると判定した場合（ステップＳＴ１２０３：Ｙｅｓ）、ステップＳＴ１２０４の処理に移行する。サービス実行部７ｄは、緊急性がないと判定した場合（ステップＳＴ１２０３：Ｎｏ）、不審行動対応処理を終了する。
【0084】
サービス実行部７ｄは、ステップＳＴ１２０４の処理では、不審行動の対象者のシートベルトをロックする（ステップＳＴ１２０４）。この場合、サービス実行部７ｄは、ＥＣＵ１００によってシートベルト装置１１２を制御させ、不審行動の対象者のシートベルトをロックさせる。
【0085】
次に、サービス実行部７ｄは、上述したステップＳＴ５０７の処理と同様に、代替車両の配車を要請する（ステップＳＴ１２０５）。
【0086】
次に、サービス実行部７ｄは、上述したステップＳＴ５０８の処理と同様に、車内用ディスプレイ６２、スピーカ６３等を制御し、室内ＩＮにいる不審行動の対象者以外の乗員の降車を案内させる（ステップＳＴ１２０６）。
【0087】
次に、サービス実行部７ｄは、上述したステップＳＴ５０９の処理と同様に、室内ＩＮにいる不審行動の対象者以外の乗員の降車が完了したか否かを判定する（ステップＳＴ１２０７）。サービス実行部７ｄは、室内ＩＮにいる不審行動の対象者以外の乗員の降車が完了したと判定した場合（ステップＳＴ１２０７：Ｙｅｓ）、ステップＳＴ１２０８の処理に移行する。サービス実行部７ｄは、室内ＩＮにいる不審行動の対象者以外の乗員の降車が完了していないと判定した場合（ステップＳＴ１２０７：Ｎｏ）、ステップＳＴ１２０６の処理に戻って以降の処理を繰り返し実行する。
【0088】
サービス実行部７ｄは、ステップＳＴ１２０８の処理では、車両Ｖの乗降用のドアをロックする（ステップＳＴ１２０８）。この場合、サービス実行部７ｄは、ＥＣＵ１００によってドア装置１１３を制御させ、車両Ｖの乗降用のドアをロックさせる。
【0089】
次に、サービス実行部７ｄは、回転灯６５を制御し、車両Ｖの室外ＯＵに向けて車両Ｖが緊急走行中であることを報知させる（ステップＳＴ１２０９）。この場合、サービス実行部７ｄは、車外用ディスプレイ６１等を制御し、車両Ｖの室外ＯＵに向けて車両Ｖが緊急走行中であることを表示させてもよい。
【0090】
次に、サービス実行部７ｄは、車両Ｖを警察車両として警察署等に搬送させ（ステップＳＴ１２１０）、不審行動対応処理を終了する。この場合、サービス実行部７ｄは、ＥＣＵ１００によって走行系アクチュエータ１１１を制御させ、不審行動の対象者を乗せたまま、車両Ｖを自動で警察署等に搬送させる。
【0091】
なお、以上の説明では、制御装置７は、不審行動対応処理として、車両Ｖを警察車両として警察署等に搬送させる処理を行うものとして説明したがこれ限らず、例えば、警察に通報し当該車両Ｖの近傍に警察車両を要請する処理を行うようにしてもよい。
【0092】
次に、図１０のフローチャート図を参照して車内監視モジュール１おける制御の別の一例の概略を説明し、その後、図１１を参照して、異常事態対応処理の具体例について説明する。この図１０で説明する制御は、典型的には、図５で説明した制御と並行して実行される。
【0093】
まず、制御装置７は、例えば、車両ＶのイグニッションがＯＮとされると、車内監視モジュール１が構成するシステムをＯＮとする（ステップＳＴ２１）。
【0094】
次に、制御装置７の情報処理部７ａは、音圧センサ５３を制御し、車両Ｖの室内ＩＮの音・音声を検出させることで室内状況情報を検出させる。そして、情報処理部７ａは、当該室内ＩＮの音情報を含む室内状況情報を取得する（ステップＳＴ２２）。
【0095】
次に、制御装置７の音声対話処理部７ｃは、ステップＳＴ２２で取得された室内状況情報に含まれる車両Ｖの室内ＩＮの音・音声を表す音情報の音圧を計測する（ステップＳＴ２３）。
【0096】
次に、音声対話処理部７ｃは、ステップＳＴ２３で計測した音圧に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する。ここでは、画像認識部７ｂは、ステップＳＴ２３で計測した音圧が予め設定された閾値以上であるか否かを判定する（ステップＳＴ２４）。
【0097】
音声対話処理部７ｃは、音圧が閾値以上であると判定した場合（ステップＳＴ２４：Ｙｅｓ）、車両Ｖの室内ＩＮで発生した事象の種別として、室内ＩＮの異常事態を判定し、ステップＳＴ２５の処理に移行する。制御装置７のサービス実行部７ｄは、ステップＳＴ２５の処理では、異常事態対応処理を実行し（ステップＳＴ２５）、ステップＳＴ２６の処理に移行する。音声対話処理部７ｃは、音圧が閾値未満であると判定した場合（ステップＳＴ２４：Ｎｏ）、ステップＳＴ２５の異常事態対応処理をとばしてステップＳＴ２６の処理に移行する。
【0098】
制御装置７は、ステップＳＴ２６の処理では、例えば、車両ＶのイグニッションのＯＦＦ等に伴って車内監視モジュール１が構成するシステムがＯＦＦされたか否かを判定する（ステップＳＴ２６）。制御装置７は、システムがＯＦＦされていないと判定した場合（ステップＳＴ２６：Ｎｏ）、ステップＳＴ２２の処理に戻って以降の処理を繰り返し実行する。制御装置７は、システムがＯＦＦされたと判定した場合（ステップＳＴ２６：Ｙｅｓ）、この制御を終了する。
【0099】
次に、図１１のフローチャート図を参照して異常事態対応処理の一例の概略を説明する。
【0100】
情報処理部７ａは、異常事態対応処理では、まず、車外通信部３を制御し、音声対話処理部７ｃによって判定された事象の種別に関する発生事象種別情報を、車外通信部３を介して外部機器ＣＬに送信させる。ここでは、情報処理部７ａは、室内ＩＮの異常事態を表す発生事象種別情報を外部機器ＣＬに送信する。これにより、情報処理部７ａは、センタを構成する外部機器ＣＬに対して車両Ｖの室内ＩＮの異常事態を通知する（ステップＳＴ２５０１）。
【0101】
次に、情報処理部７ａは、上述したステップＳＴ５０２の処理と同様に、車外通信部３を制御し、遠隔操作情報を、車外通信部３を介して外部機器ＣＬから受信させる。これにより、情報処理部７ａは、外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を外部機器ＣＬからの指示によって遠隔操作させる。そして、情報処理部７ａは、車外通信部３を制御し、検出部５によって検出された室内状況情報を、車外通信部３を介して外部機器ＣＬに送信させる。これにより、オペレータは、例えば、車両Ｖの室内ＩＮで発生した事象の詳細を確認することができる（ステップＳＴ２５０２）。
【0102】
次に、画像認識部７ｂは、上述したステップＳＴ５０４の処理と同様に、車両Ｖの室内ＩＮに乗員がいるか否か（乗員ありか否か）を判定する（ステップＳＴ２５０３）。画像認識部７ｂは、車両Ｖの室内ＩＮに乗員がいると判定した場合（ステップＳＴ２５０３：Ｙｅｓ）、ステップＳＴ２５０４の処理に移行する。画像認識部７ｂは、車両Ｖの室内ＩＮに乗員がいないと判定した場合（ステップＳＴ２５０３：Ｎｏ）、ステップＳＴ２５０４の処理をとばしてステップＳＴ２５０５の処理に移行する。
【0103】
情報処理部７ａは、ステップＳＴ２５０４の処理では、上述したステップＳＴ５０５の処理と同様に、車外通信部３を制御し、車外通信部３を介して外部機器ＣＬとの間で相互通信を行わせ（ステップＳＴ２５０４）、ステップＳＴ２５０５の処理に移行する。この場合、サービス実行部７ｄは、サービス動作部６を構成する車内用ディスプレイ６２、スピーカ６３、マイク６４等の動作をＯＮとし、情報処理部７ａによる相互通信を実行可能な状態とする。この結果、サービス実行部７ｄは、例えば、室内ＩＮの乗員と外部機器ＣＬ側のオペレータとの相互通信を行わせることができ、意思の疎通を図らせることができる。
【0104】
サービス実行部７ｄは、ステップＳＴ２５０５の処理では、上述したステップＳＴ１００４の処理と同様に、緊急性があるか否かを判定する（ステップＳＴ２５０５）。サービス実行部７ｄは、例えば、撮像装置５１によって撮像された画像情報に基づいて室内ＩＮの異常事態が緊急性を有するものであるか否かを判定することができる。また、サービス実行部７ｄは、ステップＳＴ２５０２で事象の詳細を確認したオペレータやステップＳＴ２５０４で相互通信を行ったオペレータから外部機器ＣＬ、車外通信部３等を介して入力される情報に基づいて室内ＩＮの異常事態が緊急性を有するものであるか否かを判定してもよい。サービス実行部７ｄは、緊急性があると判定した場合（ステップＳＴ２５０５：Ｙｅｓ）、ステップＳＴ２５０６の処理に移行する。サービス実行部７ｄは、緊急性がないと判定した場合（ステップＳＴ２５０５：Ｎｏ）、ステップＳＴ２５０６の処理をとばして異常事態対応処理を終了する。
【0105】
サービス実行部７ｄは、ステップＳＴ２５０５の処理では、車両Ｖの近辺に警察車両、救急車両等を派遣、又は、車両Ｖを事業者が管理する整備基地等に帰還させ（ステップＳＴ５１０）、異常事態対応処理を終了する。この場合、サービス実行部７ｄは、ＥＣＵ１００によって走行系アクチュエータ１１１を制御させ、車両Ｖを自動で整備基地等に帰還させてもよい。そして、事業者は、整備基地等に帰還させた車両Ｖに対して必要な処置を実施してもよい。
【0106】
以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が検出部５によって検出された車両Ｖの室内ＩＮの状況に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定する。そして、車内監視モジュール１は、制御装置７が判定された事象の種別に基づいてサービス動作部６を制御し当該サービス動作部６に当該事象の種別に応じた動作をさせる処理を実行する。このような構成にあって、車内監視モジュール１は、検出部５、サービス動作部６、及び、制御装置７等が筐体２に組み付けられてユニット化され車両Ｖの室内ＩＮの上方、ここでは、屋根部材ＲＦに設けられる。この構成により、車内監視モジュール１は、主要な部分がユニット化された上で車両Ｖの屋根部材ＲＦに配置されることで室内ＩＮの上方の当該屋根部材ＲＦ側から車両Ｖの室内ＩＮを集中監視することができる。この結果、車内監視モジュール１は、車両Ｖの室内ＩＮを適正に監視することができる。この場合、車内監視モジュール１は、例えば、運転者自体が不在となる完全自動運転を実行可能な車両Ｖに適用された場合であっても、運転者等にかわって車両Ｖの室内ＩＮを監視し状況に応じて様々な対応処理を行うことができる。この結果、車内監視モジュール１は、例えば、あたかも運転者が乗車しているかの如く、安全、安心、快適に車両Ｖを運用させることができる。
【0107】
ここでは、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が検出部５を構成する撮像装置５１によって撮像された車両Ｖの室内ＩＮの画像に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定することができる。この結果、車内監視モジュール１は、車両Ｖの室内ＩＮの画像に基づいて適正に車両Ｖの室内ＩＮを監視することができる。
【0108】
また、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が検出部５を構成する音圧センサ５３によって検出された車両Ｖの室内ＩＮの音に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定することができる。この結果、車内監視モジュール１は、車両Ｖの室内ＩＮの音に基づいて適正に車両Ｖの室内ＩＮを監視することができる。
【0109】
また、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が車外通信部３を制御し、判定された事象の種別に関する情報を当該車外通信部３を介して外部機器ＣＬに送信させる。この構成により、車内監視モジュール１は、外部機器ＣＬから様々なクラウドサービスを受けつつ、サービス動作部６に室内ＩＮで発生した事象の種別に応じた動作をさせることができる。また、この構成により、車内監視モジュール１は、外部機器ＣＬを管理する事業者のオペレータ等が、常時、車両Ｖの室内ＩＮを監視することなく、室内ＩＮで発生した事象の種別に応じて必要な時に対応すればよいように運用することができる。この結果、車内監視モジュール１は、例えば、外部機器ＣＬを管理する事業者の業務効率を向上することができる。
【0110】
より詳細には、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が車内用ディスプレイ６２、スピーカ６３を制御し、外部機器ＣＬから車外通信部３を介して受信した出力情報を出力させることができる。この構成により、車内監視モジュール１は、外部機器ＣＬを管理する事業者のオペレータ等から車内用ディスプレイ６２、スピーカ６３を介して車両Ｖの室内ＩＮに向けて様々な情報を出力することができる。この結果、車内監視モジュール１は、室内ＩＮで発生した事象の種別に応じてよりきめ細かな対応をとることができる。
【0111】
また、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が外部機器ＣＬから車外通信部３を介して受信した遠隔操作情報に基づいて検出部５を制御し当該検出部５を遠隔操作させることができる。さらに、車内監視モジュール１は、制御装置７が検出部５によって検出された車両Ｖの室内ＩＮの状況に関する室内状況情報を車外通信部３を介して外部機器ＣＬに送信させることができる。この点でも、車内監視モジュール１は、室内ＩＮで発生した事象の種別に応じてよりきめ細かな対応をとることができる。
【0112】
さらに、以上で説明した車内監視モジュール１、監視システム５００は、制御装置７が車内通信部４を介して筐体２外の車載機器１０１を制御し当該車載機器１０１に室内ＩＮで発生した事象の種別に応じた動作をさせることもできる。この結果、車内監視モジュール１は、例えば、車両Ｖの車載機器１０１を構成する走行系アクチュエータ１１１、シートベルト装置１１２、ドア装置１１３等も交えて、室内ＩＮで発生した事象の種別に応じてよりきめ細かな対応をとることができる。
【0113】
ここでは、以上で説明した車内監視モジュール１、監視システム５００は、一例として、室内ＩＮへの残留物の発生、室内ＩＮの人物のシートベルトの未着用、室内ＩＮの人物の体調悪化、室内ＩＮの人物の不審行動、及び、室内ＩＮの異常事態を区別して判定することができる。そして、車内監視モジュール１は、サービス動作部６に、室内ＩＮへの残留物の発生、室内ＩＮの人物のシートベルトの未着用、室内ＩＮの人物の体調悪化、室内ＩＮの人物の不審行動、及び、室内ＩＮの異常事態のそれぞれに応じた動作をさせることができる。
【0114】
なお、上述した本発明の実施形態に係る車内監視モジュールは、上述した実施形態に限定されず、特許請求の範囲に記載された範囲で種々の変更が可能である。
【0115】
以下の説明では、一例として、車両Ｖは、バス、タクシー、ライドシェリングカー等、特定の事業者等によって管理され、完全自動運転可能な車両であるものとして説明したがこれに限らない。車両Ｖは、例えば、車両Ｖの運転者による運転操作に応じて車両Ｖの挙動が制御される手動運転可能な車両であってもよい。
【0116】
以上の説明では、車内監視モジュール１は、筐体２に、車外通信部３、車内通信部４、検出部５、サービス動作部６、及び、制御装置７が組み付けられユニット化されるものとして説明したがこれに限らない。車内監視モジュール１は、例えば、車外通信部３、車内通信部４が筐体２とは別体に設けられ、制御装置７と通信可能に接続される構成であってもよい。また、車内監視モジュール１は、車外通信部３、車内通信部４自体を備えない構成であってもよい。また、車内監視モジュール１は、少なくとも検出部５を構成する撮像装置５１、レーダ／ソナー５２、音圧センサ５３のいずれかが筐体２に組み付けられていればよく、検出部５の一部が筐体２とは別体に設けられ、制御装置７と通信可能に接続される構成であってもよい。同様に、車内監視モジュール１は、少なくともサービス動作部６を構成する車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３、マイク６４、回転灯６５のいずれかが筐体２に組み付けられていればよく、サービス動作部６の一部が筐体２とは別体に設けられ、制御装置７と通信可能に接続される構成であってもよい。例えば、スピーカ６３やマイク６４は、ヘッドレストに設けられていてもよい。
【0117】
また、以上の説明では、筐体２は、車両Ｖの屋根部材ＲＦに設けられるものとして説明したがこれに限らず、室内ＩＮの上方であれば、室内ＩＮの側壁部材の屋根部材ＲＦの近傍に設けられてもよい。
【0118】
以上の説明では、図１に示す検出部５は、一例として、撮像装置５１、レーダ／ソナー５２、及び、音圧センサ５３を含んで構成されるものとして説明したがこれに限らない。検出部５は、撮像装置５１、レーダ／ソナー５２、音圧センサ５３以外の他の検出器を含んで構成されてもよい。例えば、以上で説明したマイク６４は、検出部５の音検出装置として兼用されてもよい。この場合、検出部５は、音検出装置としてマイク６４と音圧センサ５３との双方を備えてもよいし、マイク６４のみを備えてもよい。また、以上の説明では、サービス動作部６は、例えば、車外用ディスプレイ６１、車内用ディスプレイ６２、スピーカ６３、マイク６４、回転灯６５に限らず、例えば、情報出力装置として、座席振動等を出力する触覚情報出力装置等を含んで構成されてもよい。また、サービス動作部６は、情報出力装置以外に、さらに別の動作部を含んで構成されてもよい。
【0119】
以上の説明では、制御装置７は、画像認識部７ｂが撮像装置５１によって撮像された車両Ｖの室内ＩＮの画像に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定するものとして説明したがこれに限らない。また、制御装置７は、音声対話処理部７ｃが音圧センサ５３によって検出された車両Ｖの室内ＩＮの音に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定するものとして説明したがこれに限らない。制御装置７は、例えば、レーダ／ソナー５２や他の検出器によって検出された室内状況情報に基づいて車両Ｖの室内ＩＮで発生した事象の種別を判定してもよい。例えば、制御装置７は、室内ＩＮの画像や室内ＩＮの音の他、室内状況情報として、室内ＩＮの振動、室内ＩＮの臭い、室内ＩＮの気体（有毒ガス、たばこの煙等）、室内ＩＮの熱等に基づいて当該車両Ｖの室内ＩＮで発生した事象の種別を判定してもよい。また、以上の説明では、制御装置７は、事象の種別として、室内ＩＮへの残留物の発生、室内ＩＮの人物のシートベルトの未着用、室内ＩＮの人物の体調悪化、室内ＩＮの人物の不審行動、又は、室内ＩＮの異常事態を判定するものとして説明したがこれに限らない。また、残留物対応処理、シートベルト未着用対応処理、体調悪化対応処理、不審行動対応処理、異常事態対応処理等の内容は、上記に限られない。
【0120】
以上の説明では、音声対話処理部７ｃは、音圧センサ５３によって検出された車両Ｖの室内ＩＮの音の音圧が予め設定された閾値以上である場合に室内ＩＮの異常事態を判定するものとして説明したがこれに限らない。音声対話処理部７ｃは、画像認識部７ｂと同様に、種々の公知の人工知能技術を用いて車両Ｖの室内ＩＮで発生した事象の種別を判定するようにしてもよい。例えば、音声対話処理部７ｃは、検出部５によって検出された室内状況情報、記憶部７Ｂに記憶されている事象種別判定情報等に基づいて車両Ｖの室内ＩＮで発生した事象の種別を判定してもよい。この場合、音声対話処理部７ｃは、例えば、音検出装置を構成する集音マイク（例えば、マイク６４等）によって集音された音情報に基づいて「殺す」、「やめてー」等の特定ワードを認識した場合に室内ＩＮの異常事態を判定するようにすることもできる。
【0121】
以上で説明した検出部５（撮像装置５１、レーダ／ソナー５２、音圧センサ５３）によって検出された室内状況情報は、例えば、記憶部７Ｂやドライブレコーダ等の記録装置に記録、保存されてもよい。この場合、車内監視モジュール１は、室内状況情報が記録、保存されている旨を乗員に通知するようにしてもよい。
【0122】
以上で説明した制御装置７は、外部機器ＣＬと連携してサービス動作部６に事象の種別に応じた動作をさせる処理を実行させるものとして説明したがこれに限らない。制御装置７は、外部機器ＣＬとは連携せずに、車内監視モジュール１で完結するようにサービス動作部６に事象の種別に応じた動作をさせる処理を実行させてもよい。
【0123】
【0124】
以上で説明した制御装置７は、各部が別体に構成され、当該各部が各種の電気信号を相互に授受可能に接続されることで構成されてもよく、一部の機能が他の制御装置によって実現されてもよい。例えば、音声対話処理部７ｃは、外部機器ＣＬ側に設けられていてもよい。また、音声対話処理部７ｃは、例えば、種々の公知の人工知能技術を活用して、外部機器ＣＬを管理する事業者のオペレータの役割を疑似的に担ってもよい。また、以上で説明したプログラム、アプリケーション、各種データ等は、適宜、更新されてもよいし、車内監視モジュール１に対して任意のネットワークを介して接続されたサーバ（例えば、外部機器ＣＬ等）に記憶されていてもよい。以上で説明したプログラム、アプリケーション、各種データ等は、例えば、必要に応じてその全部又は一部をダウンロードすることも可能である。また、例えば、制御装置７が備える処理機能については、その全部又は任意の一部を、例えば、ＣＰＵ等及び当該ＣＰＵ等にて解釈実行されるプログラムにて実現してもよく、また、ワイヤードロジック等によるハードウェアとして実現してもよい。
【符号の説明】
【0125】
１ 車内監視モジュール
２ 筐体
３ 車外通信部
４ 車内通信部
５ 検出部
６ サービス動作部
７ 制御装置
５１ 撮像装置
５３ 音圧センサ（音検出装置）
６２ 車内用ディスプレイ（情報出力装置）
６３ スピーカ（情報出力装置）
１０１ 車載機器
５００ 監視システム
ＣＬ 外部機器
ＩＮ 室内
ＲＦ 屋根部材
Ｖ 車両
２ 筐体
３ 車外通信部
４ 車内通信部
５ 検出部
６ サービス動作部
７ 制御装置
５１ 撮像装置
５３ 音圧センサ（音検出装置）
６２ 車内用ディスプレイ（情報出力装置）
６３ スピーカ（情報出力装置）
１０１ 車載機器
５００ 監視システム
ＣＬ 外部機器
ＩＮ 室内
ＲＦ 屋根部材
Ｖ 車両
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】