特開 2022-156097 情報提供方法、プログラム及び情報提供装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022156097

(43)【公開日】2022-10-14

(54)【発明の名称】情報提供方法、プログラム及び情報提供装置

(51)【国際特許分類】

   G06Q 30/02 20120101AFI20221006BHJP

【ＦＩ】

G06Q30/02 470

【審査請求】未請求

【請求項の数】14

【出願形態】ＯＬ

(21)【出願番号】P 2021059622

(22)【出願日】2021-03-31

(71)【出願人】

【識別番号】000005326

【氏名又は名称】本田技研工業株式会社

(74)【代理人】

【識別番号】100077665

【弁理士】

【氏名又は名称】千葉 剛宏

(74)【代理人】

【識別番号】100116676

【弁理士】

【氏名又は名称】宮寺 利幸

(74)【代理人】

【識別番号】100191134

【弁理士】

【氏名又は名称】千馬 隆之

(74)【代理人】

【識別番号】100136548

【弁理士】

【氏名又は名称】仲宗根 康晴

(74)【代理人】

【識別番号】100136641

【弁理士】

【氏名又は名称】坂井 志郎

(74)【代理人】

【識別番号】100180448

【弁理士】

【氏名又は名称】関口 亨祐

(72)【発明者】

【氏名】根建 圭淳

(72)【発明者】

【氏名】松原 一雄

(72)【発明者】

【氏名】山岡 大祐

(72)【発明者】

【氏名】小林 正英

【テーマコード（参考）】

5L049

【Ｆターム（参考）】

5L049BB08

(57)【要約】      （修正有）

【課題】情報を良好に提供し得る情報提供方法、プログラム及び情報提供装置を提供する。
【解決手段】端末装置（ユーザ端末、携帯端末、情報提供装置）と、サーバ装置とによって構成される情報提供システムにおいて、情報提供方法は、撮像画像を取得する画像取得ステップＳ１と、車両に備えられた複数の部品のうちの、端末装置の撮像部の撮像範囲外に位置する部品である撮像範囲外部品の存在を判定する判定ステップＳ３と、端末装置に備えられた表示画面に撮像画像を表示するとともに、複数の部品のうちの少なくとも１つが撮像画像に含まれている場合に、部品に関する情報も併せて表示する表示ステップＳ７、Ｓ８と、を含む。表示ステップでは、撮像範囲外部品の存在が判定ステップにおいて判定された場合に、撮像範囲外部品の存在を示すインジケーションも併せて表示する。
【選択図】図１２

【特許請求の範囲】

【請求項1】

端末装置に備えられた撮像部によって車両の少なくとも一部を撮像することにより得られた撮像画像を取得する画像取得ステップと、
前記車両に備えられた複数の部品のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品の存在を判定する判定ステップと、
前記端末装置に備えられた表示画面に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示ステップと、
を有し、
前記表示ステップでは、前記撮像範囲外部品の存在が前記判定ステップにおいて判定された場合に、前記撮像範囲外部品の存在を示すインジケーションも併せて表示する、情報提供方法。

【請求項2】

請求項１に記載の情報提供方法において、
前記インジケーションは、前記撮像範囲外部品の種類に応じた色で表示される、情報提供方法。

【請求項3】

請求項１又は２に記載の情報提供方法において、
前記インジケーションは、前記撮像範囲外部品の方向を示す、情報提供方法。

【請求項4】

請求項１～３のいずれか１項に記載の情報提供方法において、
前記インジケーションは、前記撮像範囲外部品までの距離に応じた長さで表示される、情報提供方法。

【請求項5】

請求項１～４のいずれか１項に記載の情報提供方法において、
前記インジケーションは、前記撮像範囲外部品の数に応じたサイズで表示される、情報提供方法。

【請求項6】

請求項１～５のいずれか１項に記載の情報提供方法において、
前記インジケーションに、前記撮像範囲外部品の数を示す情報が付される、情報提供方法。

【請求項7】

請求項１～６のいずれか１項に記載の情報提供方法において、
前記インジケーションは、前記表示画面の縁部に表示される、情報提供方法。

【請求項8】

請求項１～７のいずれか１項に記載の情報提供方法において、
前記インジケーションの形状は、矩形又は三角形である、情報提供方法。

【請求項9】

請求項１～８のいずれか１項に記載の情報提供方法において、
前記インジケーションは、半透明に表示される、情報提供方法。

【請求項10】

請求項１～８のいずれか１項に記載の情報提供方法において、
前記インジケーションの輪郭のみが表示される、情報提供方法。

【請求項11】

請求項１～１０のいずれか１項に記載の情報提供方法において、
一の前記部品が前記撮像部の撮像範囲内に位置しており、且つ、前記一の部品を操作するための部品である他の前記部品が前記撮像部の撮像範囲外に位置する場合、前記表示ステップでは、前記他の部品の位置を示す前記インジケーションを前記表示画面に表示する、情報提供方法。

【請求項12】

請求項１～１１のいずれか１項に記載の情報提供方法において、
前記インジケーションは、動画像から成る、情報提供方法。

【請求項13】

請求項１～１２のいずれか１項に記載の情報提供方法をコンピュータに実行させるためのプログラム。

【請求項14】

撮像部と、
表示画面を有する表示部と、
前記撮像部によって車両の少なくとも一部を撮像することによって得られる撮像画像を取得する画像取得部と、
前記車両に備えられた複数の部品のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品の存在を判定する判定部と、
前記表示画面に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示制御部と、
を備え、
前記表示制御部は、前記撮像範囲外部品の存在が前記判定部によって判定された場合に、前記表示画面に前記撮像画像を表示するとともに、前記撮像範囲外部品の存在を示すインジケーションも併せて表示する、情報提供装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報提供方法、プログラム及び情報提供装置に関する。

【背景技術】

【0002】

特許文献１には、車両の情報を提供する車両の情報提供システムが開示されている。特許文献１では、車両の機器及び装備の問合せ対象箇所の写真が携帯端末によって撮影され、撮影された写真が携帯端末から処理サーバに送信される。処理サーバには、携帯端末から送信された写真が示す問合せ対象箇所を認識する認識サーバと、機器及び装備に関する説明を行う複数の説明情報を有するＦＡＱデータベースとが備えられている。処理サーバは、認識サーバによって認識された問合せ対象箇所に対応する説明情報をＦＡＱデータベースから選択して送信する。処理サーバから送信される説明情報は、車両に設けられた表示装置によって表示される。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１８－３６８１１号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１は、写真が示す問合せ対象箇所に対応する説明情報を表示装置によって表示することを単に開示しているに過ぎない。

【0005】

本発明の目的は、情報を良好に提供し得る情報提供方法、プログラム及び情報提供装置を提供することにある。

【課題を解決するための手段】

【0006】

本発明の一態様による情報提供方法は、端末装置に備えられた撮像部によって車両の少なくとも一部を撮像することにより得られた撮像画像を取得する画像取得ステップと、前記車両に備えられた複数の部品のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品の存在を判定する判定ステップと、前記端末装置に備えられた表示画面に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示ステップと、を有し、前記表示ステップでは、前記撮像範囲外部品の存在が前記判定ステップにおいて判定された場合に、前記撮像範囲外部品の存在を示すインジケーションも併せて表示する。

【0007】

本発明の他の態様によるプログラムは、上記のような情報提供方法をコンピュータに実行させる。

【0008】

本発明の更に他の態様による情報提供装置は、撮像部と、表示画面を有する表示部と、前記撮像部によって車両の少なくとも一部を撮像することによって得られる撮像画像を取得する画像取得部と、前記車両に備えられた複数の部品のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品の存在を判定する判定部と、前記表示画面に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示制御部と、を備え、前記表示制御部は、前記撮像範囲外部品の存在が前記判定部によって判定された場合に、前記表示画面に前記撮像画像を表示するとともに、前記撮像範囲外部品の存在を示すインジケーションも併せて表示する。

【発明の効果】

【0009】

本発明によれば、情報を良好に提供し得る情報提供方法、プログラム及び情報提供装置を提供することができる。

【図面の簡単な説明】

【0010】

【図1】一実施形態による情報提供システムを示すブロック図である。

【図2】表示部の表示画面に表示される画像の例を示す図である。

【図3】表示部の表示画面に表示される画像の例を示す図である。

【図4】表示部の表示画面に表示される画像の例を示す図である。

【図5】図５Ａ～図５Ｃは、表示部の表示画面に表示される画像の例を示す図である。

【図6】図６Ａ及び図６Ｂは、表示部の表示画面に表示される画像の例を示す図である。

【図7】図７Ａ及び図７Ｂは、表示部の表示画面に表示される画像の例を示す図である。

【図8】図８Ａ及び図８Ｂは、表示部の表示画面に表示される画像の例を示す図である。

【図9】表示部の表示画面に表示される画像の例を示す図である。

【図10】表示部の表示画面に表示される画像の例を示す図である。

【図11】表示部の表示画面に表示される画像の例を示す図である。

【図12】一実施形態による情報提供方法の例を示すフローチャートである。

【図13】表示部の表示画面に表示される画像の例を示す図である。

【発明を実施するための形態】

【0011】

本発明による情報提供方法、プログラム及び情報提供装置について、好適な実施形態を挙げ、添付の図面を参照して以下に詳細に説明する。

【0012】

［一実施形態］
一実施形態による情報提供方法、プログラム及び情報提供装置について図１～図１２を用いて説明する。図１は、本実施形態による情報提供システムを示すブロック図である。

【0013】

本実施形態による情報提供システム１０は、端末装置（ユーザ端末、携帯端末、情報提供装置）１２と、サーバ装置（サーバ）１４とによって構成され得るが、これに限定されるものではない。

【0014】

端末装置１２には、撮像部１６と、センサ群１８と、演算部２０と、記憶部２２と、通信部２４と、操作部２６と、表示部２８とが備えられている。なお、端末装置１２には、これらの構成要素以外の構成要素も備えられ得るが、ここでは説明を省略する。サーバ装置１４には、演算部４８と、記憶部５０と、通信部５２とが備えられている。なお、サーバ装置１４には、これらの構成要素以外の構成要素も備えられ得るが、ここでは説明を省略する。

【0015】

端末装置１２には、本実施形態による情報提供方法をコンピュータに実行させるためのアプリケーションプログラムが予めインストールされる。アプリケーションプログラムの起動は、例えばユーザによる操作に基づいて行われ得る。

【0016】

撮像部１６、即ち、カメラは、端末装置１２の少なくとも背面側に備えられ得る。撮像部１６によって撮像することによって得られる画像である撮像画像１１０（図２参照）は、端末装置１２の正面側、即ち、前面側に備えられた表示部２８の表示画面２８Ａ（図２参照）に表示され得る。撮像部１６は、車両１１（図２参照）の少なくとも一部を撮像することによって撮像画像１１０を取得し得る。

【0017】

センサ群１８には、例えば、加速度センサ３０と、ジャイロセンサ３２とが含まれ得る。加速度センサ３０は、例えば、３方向の加速度を同時に計測し得る。ジャイロセンサ３２、即ち、角速度センサは、例えば、３方向の角速度を同時に計測し得る。加速度センサ３０及びジャイロセンサ３２によって取得される情報に基づいて、端末装置１２の３次元の挙動が把握され得る。

【0018】

演算部２０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等のプロセッサ（ｐｒｏｃｅｓｓｏｒ）、即ち、処理回路（ｐｒｏｃｅｓｓｉｎｇ ｃｉｒｃｕｒｉｔｙ）によって構成され得る。演算部２０には、制御部３４と、画像取得部３６と、較正部３８と、位置姿勢判定部４０と、判定部４２と、表示制御部４４と、情報取得部４６とが備えられ得る。制御部３４と、画像取得部３６と、較正部３８と、位置姿勢判定部４０と、判定部４２と、表示制御部４４と、情報取得部４６とは、記憶部２２に記憶されているプログラムが演算部２０によって実行されることによって実現され得る。

【0019】

なお、制御部３４、画像取得部３６、較正部３８、位置姿勢判定部４０、判定部４２、表示制御部４４、情報取得部４６の少なくとも一部が、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の集積回路によって実現されるようにしてもよい。また、制御部３４、画像取得部３６、較正部３８、位置姿勢判定部４０、判定部４２、表示制御部４４、情報取得部４６の少なくとも一部が、ディスクリートデバイスを含む電子回路によって構成されるようにしてもよい。

【0020】

記憶部２２には、不図示の揮発性メモリと、不図示の不揮発性メモリとが備えられ得る。揮発性メモリとしては、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等が挙げられ得る。不揮発性メモリとしては、例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ等が挙げられ得る。データ等が、例えば揮発性メモリに記憶され得る。プログラム、テーブル、マップ等が、例えば不揮発性メモリに記憶され得る。記憶部２２の少なくとも一部が、上述したようなプロセッサ、集積回路等に備えられていてもよい。

【0021】

通信部２４には、例えば、携帯電話網に対応し得る不図示の通信モジュールが備えられている。通信部２４は、携帯電話網を介して通信を行い得る。通信部２４は、サーバ装置１４に備えられた通信部５２との間で中継局５４とネットワーク５６とを介して通信を行い得る。

【0022】

操作部２６は、ユーザが端末装置１２を操作する際に用いられ得る。表示部２８には、不図示の表示素子が備えられている。表示素子としては、例えば、液晶表示素子、有機エレクトロルミネッセンス表示素子等が用いられ得る。このような表示素子が備えられた不図示のタッチパネルによって、操作部２６と表示部２８とが構成され得る。

【0023】

制御部３４は、端末装置１２の全体の制御を司る。

【0024】

画像取得部３６は、撮像部１６によって撮像することによって得られる撮像画像１１０を取得し得る。

【0025】

較正部３８は、較正処理を実行し得る。ユーザに対する情報提供を開始するに先立って、較正、即ち、キャリブレーションが行われ得る。かかる較正は、本実施形態によるアプリケーションプログラムが起動された状態で、例えば、車内１００（図２参照）に備えられた不図示のホームボタンを、端末装置１２の撮像部１６を用いて撮像することによって行われ得る。より具体的には、表示部２８の表示画面２８Ａの中心部にホームボタンが所定のサイズで表示されるように、ユーザが端末装置１２の撮像部１６を当該ホームボタンに正対させる。較正部３８は、ホームボタンを含む撮像画像１１０と、センサ群１８から供給される信号とに基づいて、端末装置１２の位置及び姿勢を判定し得る。端末装置１２の位置及び姿勢が予め決められた範囲内であると判定した場合、較正部３８は、較正が成功したと判定し、較正を完了させる。較正が完了すると、表示制御部４４は、較正が完了したことを示す情報を表示部２８の表示画面２８Ａに表示する。較正が完了したことを示す情報としては、例えば、不図示のチェックマーク等が挙げられ得る。

【0026】

位置姿勢判定部４０は、端末装置１２の位置及び姿勢を判定し得る。位置姿勢判定部４０は、端末装置１２の位置及び姿勢に関する情報、即ち、位置姿勢情報を記憶部２２に格納する。位置姿勢判定部４０は、較正の際に得られた位置姿勢情報を基準にしつつ、画像取得部３６によって取得される撮像画像１１０と、センサ群１８から供給される信号とに基づいて、位置姿勢情報を随時更新する。

【0027】

図２は、表示部の表示画面の表示の例を示す図である。表示制御部４４は、撮像部１６によって撮像することによって得られる撮像画像１１０、即ち、画像取得部３６によって取得される撮像画像１１０を、表示部２８の表示画面２８Ａに表示し得る。車両１１の室内、即ち、車内（車室内）１００が撮像部１６によって撮像された場合の撮像画像１１０の例が、図２には示されているが、これに限定されるものではない。車室の外側が撮像部１６によって撮像されるようにしてもよい。

【0028】

図２に示すように、車両１１には、複数の機器１０２Ａ～１０２Ｏが備えられ得る。機器一般について説明する際には、符号１０２を用い、個々の機器について説明する際には、符号１０２Ａ～１０２Ｏを用いる。機器１０２Ａは、例えばインフォテイメントマルチ表示装置である。機器１０２Ｂは、例えば走行系モニタである。機器１０２Ｃ、１０２Ｄは、例えば走行系リアモニタである。機器１０２Ｅは、例えば、ステアリングホイールである。機器１０２Ｆは、例えばコンテンツマルチスイッチである。機器１０２Ｇは、例えば走行系スイッチである。機器１０２Ｈは、例えばインフォテイメントスイッチである。機器１０２Ｉは、例えば簡単駐車スイッチである。機器１０２Ｊは、例えばハザードスイッチである。機器１０２Ｋは、例えばエアコンディショナー、即ち、空調装置である。機器１０２Ｌは、例えばコンソール走行系スイッチである。機器１０２Ｍは、例えばＥＴＣ車載器である。機器１０２Ｎは、例えばサイドカメラミラーシステム調整スイッチである。機器１０２Ｏは、例えばドアノブである。

【0029】

表示制御部４４は、表示部２８の表示の制御を司る。表示制御部４４は、画像取得部３６によって取得される撮像画像１１０を表示部２８の表示画面２８Ａに表示し、複数の機器１０２のうちの少なくとも１つが当該撮像画像１１０に含まれている場合に、機器１０２Ａ～１０２Ｏに応じた図形３１Ａ～３１Ｏをこれらの機器１０２Ａ～１０２Ｏに重畳表示し得る。即ち、本実施形態では、拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）表示が行われ得る。なお、図形一般について説明する際には、符号３１を用い、個々の図形について説明する際には、符号３１Ａ～３１Ｏを用いる。機器１０２に応じた図形３１は、例えば半透明の図形であるが、これに限定されるものではない。図形３１には、機器１０２が属する種類を示す色が付され得る。種類に応じた色の図形３１が機器１０２に重畳表示されるため、機器１０２の機能等が色に基づいて把握され得る。

【0030】

図３は、表示部の表示画面に表示される画像の例を示す図である。端末装置１２を機器１０２に近づけた場合に表示される画像の例が、図３には示されている。図３に示すように、車両１１に備えられた機器１０２には、当該機器１０２の一部を構成する構成部材（構成要素）１０２ａ～１０２ｃが備えられ得る。かかる構成部材１０２ａ～１０２ｃとしては、例えば、操作スイッチ、操作ボタン、操作レバー等の操作部材が挙げられ得る。図３に示す例においては、構成部材１０２ａは、セレクタホイールである。図３に示す例においては、構成部材１０２ｂは、ホームスイッチである。図３に示す例においては、構成部材１０２ｃは、発話スイッチである。なお、構成部材１０２ａ～１０２ｃは、これらに限定されるものではない。

【0031】

車両１１に備えられた機器１０２Ａ～１０２Ｏも、当該機器１０２Ａ～１０２Ｏを構成する構成部材１０２ａ～１０２ｃも、車両１１に備えられた部品であることには変わりがない。従って、車両１１に備えられた機器１０２Ａ～１０２Ｏも、当該機器１０２を構成する構成部材１０２ａ～１０２ｃも、部品１０２と称され得る。

【0032】

判定部４２は、拡張現実表示の対象が、画像取得部３６によって取得された撮像画像１１０に含まれているか否かを判定し得る。拡張現実表示の対象としては、例えば、車両１１に備えられた部品１０２が挙げられ得る。車両１１に備えられた部品１０２は、車内１００に備えられた部品１０２であってもよいし、車室の外側に備えられた部品１０２であってもよい。拡張現実表示の対象が撮像画像１１０に含まれているか否かの判定は、位置姿勢判定部４０によって得られた位置姿勢情報と、画像取得部３６によって取得された撮像画像１１０とに基づいて行われ得る。拡張現実表示の対象が撮像画像１１０に含まれているか否かを、画像取得部３６によって取得された撮像画像１１０のみならず、位置姿勢情報にも基づいて判定するのは、より正確な判定を行うためである。車両１１に備えられた部品１０２を示す情報は、記憶部２２に予め記憶されている。より具体的には、車両１１に備えられた複数の部品１０２の各々の位置情報、これらの部品１０２の各々の画像情報等が記憶部２２に予め記憶されている。判定部４２は、記憶部２２に記憶されたこれらの情報と、画像取得部３６によって取得された撮像画像１１０から得られる情報とを対比する。これにより、判定部４２は、車両１１に備えられた部品１０２が当該撮像画像１１０に含まれているか否かを判定し得る。また、判定部４２は、当該撮像画像１１０に含まれている部品１０２が、車両１１に備えられた複数の部品１０２のうちのいずれの部品１０２であるかについても判定し得る。こうして、判定部４２は、拡張現実表示の対象が、画像取得部３６によって取得された撮像画像１１０に含まれているか否かを判定し得る。

【0033】

表示制御部４４は、表示部２８の表示画面２８Ａに撮像画像１１０を表示し、車両１１に備えられた複数の部品１０２のうちの少なくとも１つが撮像画像１１０に含まれている場合、以下のような処理を行い得る。即ち、表示制御部４４は、表示部２８の表示画面２８Ａに撮像画像１１０を表示し、拡張現実表示の対象となる部品１０２が撮像画像１１０に含まれている場合、以下のような処理を行い得る。即ち、かかる場合、表示制御部４４は、図３に示すように、当該部品１０２に関する情報６４ａ～６４ｃも併せて表示し得る。即ち、本実施形態では、かかる情報６４ａ～６４ｃが拡張現実表示され得る。なお、情報一般について説明する際には、符号６４を用い、個々の情報について説明する際には、符号６４ａ～６４ｃを用いる。

【0034】

拡張現実表示の対象となる部品１０２が、撮像部１６の撮像範囲外に位置することとなる場合もある。撮像部１６の撮像範囲外に位置する部品１０２は、撮像範囲外部品と称され得る。表示制御部４４は、後述するように、撮像範囲外部品１０１（図４参照）の存在を示すインジケーション１０３Ａ～１０３Ｃ（図４参照）も併せて表示し得る。インジケーション一般について説明する際には、符号１０３を用い、個々のインジケーションについて説明する際には、符号１０３Ａ～１０３Ｃを用いる。インジケーション１０３は、例えば半透明に表示され得るが、これに限定されるものではない。

【0035】

判定部４２は、撮像部１６の撮像範囲外に位置する部品１０２である撮像範囲外部品１０１の存在を判定し得る。上述したように、車両１１に備えられた複数の部品１０２の各々の位置情報、これらの部品１０２の各々の画像情報等が記憶部２２に予め記憶されている。また、上述したように、判定部４２は、当該撮像画像１１０に含まれている部品１０２が、車両１１に備えられた複数の部品１０２のうちのいずれの部品１０２であるかについても判定し得る。判定部４２は、車両１１に備えられた複数の部品１０２の各々の位置情報等と、当該撮像画像１１０に含まれている部品１０２を示す情報と、端末装置１２の位置及び姿勢を示す位置姿勢情報とに基づいて、撮像範囲外部品１０１の存在を判定し得る。

【0036】

ところで、撮像部１６の撮像範囲の外側に位置する全ての部品１０２に対してインジケーション１０３を表示した場合には、インジケーション１０３の表示が非常に煩雑となる。そこで、撮像部１６の撮像範囲から著しく外れている部品１０２に対しては、インジケーション１０３を表示しないことが好ましい場合もある。そこで、判定部４２は、撮像部１６の撮像範囲外に位置する部品１０２のうちの、撮像部１６の撮像範囲から著しく外れていない部品１０２を、撮像範囲外部品１０１と判定し得る。即ち、判定部４２は、予め決められた範囲内、即ち、所定範囲内に位置する部品１０２のうちの撮像範囲外の部品１０２を、撮像範囲外部品１０１として判定し得る。かかる所定範囲は、撮像部１６の撮像範囲に対して所定程度だけ広い範囲である。

【0037】

拡張現実表示の対象となる機器１０２Ａ～１０２Ｏが撮像画像１１０に含まれていることが判定部４２によって判定された場合、情報取得部４６は、当該機器１０２に関する情報を取得し得る。情報取得部４６は、車両１１に備えられた機器１０２Ａ～１０２Ｏに関する情報のみならず、当該機器１０２Ａ～１０２Ｏを構成する構成部材１０２ａ～１０２ｃに関する情報も取得し得る。このように、情報取得部４６は、拡張現実表示の対象となる部品１０２が撮像画像１１０に含まれていることが判定部４２によって判定された場合、当該部品１０２に関する情報を取得し得る。当該部品１０２に関する情報としては、例えば当該部品１０２の名称等が挙げられ得るが、これに限定されるものではない。当該部品１０２に関する情報が、当該部品１０２の操作方法等に関する情報等であってもよい。部品１０２に関する情報は、例えばサーバ装置１４から供給され得る。情報取得部４６は、当該部品１０２に関する情報の提供を要求するリクエスト信号を、通信部２４を介してサーバ装置１４に送信する。サーバ装置１４は、当該サーバ装置１４に備えられた記憶部５０から当該部品１０２に関する情報を読み出し、当該サーバ装置１４に備えられた通信部５２を介して端末装置１２に当該部品１０２に関する情報を送信する。情報取得部４６は、当該部品１０２に関する情報をサーバ装置１４から受信する。なお、当該部品１０２に関する情報が、端末装置１２に備えられた記憶部２２に既に格納されている場合には、当該部品１０２に関する情報をサーバ装置１４から取得することを要しない。このような場合には、情報取得部４６は、端末装置１２に備えられた記憶部２２から、当該部品１０２に関する情報を取得し得る。

【0038】

図４は、表示部の表示画面に表示される画像の例を示す図である。撮像部１６の撮像範囲を変化させた場合の表示の例が図４には示されている。図４における撮像部１６の撮像範囲は、図３における撮像部１６の撮像範囲よりも右側に位置している。図４に示す例においては、構成部材１０２ａ～１０２ｃ、即ち、部品１０２ａ～１０２ｃが撮像部１６の撮像範囲外に位置している。即ち、図４に示す例においては、撮像範囲外部品１０１が存在している。このような場合、表示制御部４４は、図４に示すように、撮像範囲外部品１０１の存在を示すインジケーション１０３Ａ～１０３Ｃを表示部２８の表示画面２８Ａに表示し得る。インジケーション１０３Ａは、撮像範囲外部品１０１である部品１０２ａの存在を示している。インジケーション１０３Ｂは、撮像範囲外部品１０１である部品１０２ｂの存在を示している。インジケーション１０３Ｃは、撮像範囲外部品１０１である部品１０２ｃの存在を示している。インジケーション１０３は、表示部２８の表示画面２８Ａの例えば縁部等に表示され得る。インジケーション１０３は、撮像範囲外部品１０１の方向を示し得る。図４に示す例においては、インジケーション１０３を構成する三角形の最小角の方向が撮像範囲外部品１０１の方向に対応している。このようなインジケーション１０３が表示部２８の表示画面２８Ａに表示されるため、ユーザは、撮像範囲外部品１０１の存在を当該インジケーション１０３に基づいて把握し得る。

【0039】

表示制御部４４は、表示画面２８Ａの一部に、複数の操作ボタン６０Ａ～６０Ｃを更に表示し得る。操作ボタン６０Ａは、例えば、お役立ち情報ボタンである。操作ボタン６０Ｂは、例えば、警告灯一覧ボタンである。操作ボタン６０Ｃは、例えば、設定ボタンである。なお、操作ボタン６０Ａ～６０Ｃは、これらに限定されるものではない。操作ボタン６０Ａ、即ち、お役立ち情報ボタンは、ユーザにとって役に立つことが想定される情報が表示される画面に遷移するためのボタンである。操作ボタン６０Ｂ、即ち、警告灯一覧ボタンは、警告灯の一覧を表示する画面に遷移するためのボタンである。操作ボタン６０Ｃ、即ち、設定ボタンは、アプリケーションプログラムに関する様々な設定を行うための画面に遷移するためのボタンである。表示画面２８Ａには、再較正ボタン６０Ｄ、音声検索ボタン６０Ｅ等が更に表示され得るが、これに限定されるものではない。再較正ボタン６０Ｄは、再較正の実行を指示するためのボタンである。音声検索ボタン６０Ｅは、音声検索の実行を指示するためのボタンである。

【0040】

図５Ａ～図５Ｃは、表示部の表示画面に表示される画像の例を示す図である。車両１１に備えられた部品１０２Ｐ～１０２Ｒが撮像画像１１０に写っている場合の例が図５Ａには示されている。図面の簡略化のため、図５Ａにおいては、部品１０２Ｐ～１０２Ｒが抽象的に図示されている。図５Ａに示すように、表示制御部４４は、部品１０２Ｐ～１０２Ｒに関する情報６４Ｐ～６４Ｒを撮像画像１１０に重畳表示し得る。部品１０２Ｐは、第１の種類に属する。このため、当該部品１０２Ｐに関する情報６４Ｐは、例えば、第１の色で表示され得る。第１の色は、例えば赤色とされ得るが、これに限定されるものではない。部品１０２Ｑ、１０２Ｒは、例えば、第１の種類とは異なる第２の種類に属する。このため、当該部品１０２Ｑ、１０２Ｒに関する情報６４Ｑ、６４Ｒは、例えば、第１の色とは異なる第２の色で表示され得る。第２の色は、例えば緑色とされ得るが、これに限定されるものではない。

【0041】

撮像部１６の撮像範囲を変化させた状態が、図５Ｂには示されている。具体的には、撮像範囲を右側にずらした状態が図５Ｂには示されている。撮像部１６の撮像範囲を更に変化させた状態が図５Ｃには示されている。図５Ｃに示す例においては、撮像範囲外部品１０１の存在を示すインジケーション１０３Ｐ～１０３Ｒが表示部２８の表示画面２８Ａに表示されている。インジケーション１０３Ｐに対応する撮像範囲外部品１０１は、部品１０２Ｐである。当該部品１０２Ｐは例えば、第１の種類に属する。部品１０２Ｐが第１の種類に属するため、インジケーション１０３Ｐは、例えば、第１の色で表示され得る。インジケーション１０３Ｑに対応する撮像範囲外部品１０１は、部品１０２Ｑである。当該部品１０２Ｑは、例えば、第１の種類とは異なる第２の種類に属する。部品１０２Ｑが第２の種類に属するため、インジケーション１０３Ｑは、例えば、第１の色とは異なる第２の色で表示され得る。インジケーション１０３Ｒに対応する撮像範囲外部品１０１は、部品１０２Ｒである。当該部品１０２Ｒは、例えば、第２の種類に属する。部品１０２Ｒが第２の種類に属するため、インジケーション１０３Ｒは、例えば第２の色で表示され得る。このように、部品１０２の種類に応じた色でインジケーション１０３が表示されるようにしてもよい。

【0042】

図６Ａ及び図６Ｂは、表示部の表示画面に表示される画像の例を示す図である。撮像範囲外部品１０１の数が比較的少ない場合の例が図６Ａには示されている。撮像範囲外部品１０１の数が比較的多い場合の例が図６Ｂには示されている。インジケーション１０３は、撮像範囲外部品１０１の数に応じたサイズで表示され得る。図６Ａに示す例においては、撮像範囲外部品１０１の数が比較的少ないため、インジケーション１０３のサイズが比較的小さく設定され得る。一方、図６Ｂに示す例においては、撮像範囲外部品１０１の数が比較的多いため、インジケーション１０３のサイズが比較的大きく設定され得る。このように、インジケーション１０３が、撮像範囲外部品１０１の数に応じたサイズで表示されるようにしてもよい。

【0043】

図７Ａ及び図７Ｂは、表示部の表示画面に表示される画像の例を示す図である。撮像範囲外部品１０１までの距離が比較的小さい場合の例が図７Ａには示されている。撮像範囲外部品１０１までの距離が比較的大きい場合の例が図７Ｂには示されている。インジケーション１０３は、撮像範囲外部品１０１までの距離に応じた長さで表示され得る。図７Ａに示す例においては、撮像範囲外部品１０１までの距離が比較的小さいため、インジケーション１０３の長さが比較的短く設定され得る。一方、図７Ｂに示す例においては、撮像範囲外部品１０１までの距離が比較的大きいため、インジケーション１０３の長さが比較的長く設定され得る。このように、撮像範囲外部品１０１までの距離に応じた長さでインジケーション１０３が表示されるようにしてもよい。

【0044】

図８Ａ及び図８Ｂは、表示部の表示画面に表示される画像の例を示す図である。インジケーション１０３の形状が矩形である場合の例が図８Ａ及び図８Ｂには示されている。撮像範囲外部品１０１の数が比較的少ない場合の例が図８Ａには示されている。撮像範囲外部品１０１の数が比較的多い場合の例が図８Ｂには示されている。インジケーション１０３は、撮像範囲外部品１０１の数に応じたサイズで表示され得る。図８Ａに示す例においては、撮像範囲外部品１０１の数が比較的少ないため、インジケーション１０３のサイズが比較的小さく設定され得る。一方、図８Ｂに示す例においては、撮像範囲外部品１０１の数が比較的多いため、インジケーション１０３のサイズが比較的大きく設定され得る。このように、インジケーション１０３の形状が矩形であってもよい。また、撮像範囲外部品１０１の数に応じたサイズでインジケーション１０３が表示されるようにしてもよい。

【0045】

図９は、表示部の表示画面に表示される画像の例を示す図である。インジケーション１０３の形状が矩形である場合の例が図９には示されている。第１の種類に属する部品１０２Ｓ１～１０２Ｓ３と、第１の種類とは異なる第２の種類に属する部品１０２Ｔ１、１０２Ｔ２とが撮像部１６の撮像範囲外に位置している。第１の種類に属する撮像範囲外部品１０１の数が比較的多い場合の例が図９には示されている。第２の種類に属する撮像範囲外部品１０１の数が比較的少ない場合の例が図９には示されている。インジケーション１０３Ａは、第１の種類に属する撮像範囲外部品１０１、即ち、部品１０２Ｓ１～１０２Ｓ３に対応している。インジケーション１０３Ｂは、第２の種類に属する撮像範囲外部品１０１、即ち、部品１０２Ｔ１、１０２Ｔ２に対応している。インジケーション１０３Ａ、１０３Ｂは、撮像範囲外部品１０１の数に応じたサイズで表示され得る。第１の種類に属する撮像範囲外部品１０１の数は比較的多いため、インジケーション１０３Ａのサイズは比較的大きく設定され得る。一方、第２の種類に属する撮像範囲外部品１０１の数は比較的少ないため、インジケーション１０３Ｂのサイズは比較的小さく設定され得る。インジケーション１０３Ａは、第１の種類に属する撮像範囲外部品１０１に対応するものであるため、例えば、第１の色で表示され得る。インジケーション１０３Ｂは、第２の種類に属する撮像範囲外部品１０１に対応するものであるため、例えば、第１の色とは異なる第２の色で表示され得る。このように、インジケーション１０３の形状が矩形であってもよい。また、インジケーション１０３が、撮像範囲外部品１０１の数に応じたサイズで表示されるようにしてもよい。また、インジケーション１０３が、撮像範囲外部品１０１の種類に応じた色で表示されるようにしてもよい。

【0046】

図１０は、表示部の表示画面に表示される画像の例を示す図である。インジケーション１０３の形状が矩形である場合の例が図１０には示されている。当該インジケーション１０３に対応する撮像範囲外部品１０１の数を示す情報が図１０には示されている。例えば、図１０に示す例においては、撮像部１６の撮像範囲の左側に位置する撮像範囲外部品１０１の数は２つである。このため、図１０に示す例においては、表示部２８の表示画面２８Ａの左側に表示されているインジケーション１０３には、撮像範囲の左側に位置している撮像範囲外部品１０１の数である「２」が付されている。図１０に示す例においては、撮像部１６の撮像範囲の右側に位置する撮像範囲外部品１０１の数は５つである。このため、図１０に示す例においては、表示部２８の表示画面２８Ａの右側に表示されているインジケーション１０３には、撮像範囲の右側に位置している撮像範囲外部品１０１の数である「５」が付されている。インジケーション１０３は、撮像範囲外部品１０１の数に応じたサイズで表示され得る。撮像部１６の撮像範囲の左側に位置する撮像範囲外部品１０１の数は比較的少ないため、表示部２８の表示画面２８Ａの左側に表示されているインジケーション１０３のサイズは比較的小さく設定され得る。撮像部１６の撮像範囲の右側に位置する撮像範囲外部品１０１の数は比較的多いため、表示部２８の表示画面２８Ａの右側に表示されているインジケーション１０３のサイズは比較的大きく設定され得る。このように、撮像範囲外部品１０１の数を示す情報がインジケーション１０３に付されるようにしてもよい。

【0047】

図１１は、表示部の表示画面に表示される画像の例を示す図である。矩形のインジケーション１０３Ａ１、１０３Ａ２と三角形のインジケーション１０３Ｂとが表示部２８の表示画面２８Ａに表示される場合の例が図１１には示されている。インジケーション１０３Ａ１、１０３Ａ２に対応する撮像範囲外部品１０１、即ち、部品１０２Ｕ１～１０２Ｕ７は、例えば第１の種類に属する。インジケーション１０３Ａ１、１０３Ａ２に対応する撮像範囲外部品１０１が第１の種類に属するため、当該インジケーション１０３Ａ１、１０３Ａ２の色は例えば第１の色に設定され得る。また、インジケーション１０３Ａ１、１０３Ａ２に対応する撮像範囲外部品１０１が第１の種類に属するため、当該インジケーション１０３Ａ１、１０３Ａ２の形状は例えば矩形に設定され得る。インジケーション１０３Ｂに対応する撮像範囲外部品１０１、即ち、部品１０２Ｖは、例えば、第１の種類とは異なる第２の種類に属する。インジケーション１０３Ｂに対応する撮像範囲外部品１０１が第２の種類に属するため、当該インジケーション１０３Ｂの色は、例えば、第１の色とは異なる第２の色に設定され得るとともに、当該インジケーション１０３Ｂの形状は例えば三角形に設定され得る。インジケーション１０３Ａ１、１０３Ａ２は、撮像範囲外部品１０１の数に応じたサイズで表示され得る。表示部２８の表示画面２８Ａの左側に表示されているインジケーション１０３Ａ１に対応する撮像範囲外部品１０１の数は比較的少ないため、当該インジケーション１０３Ａ１のサイズは比較的小さく設定され得る。表示部２８の表示画面２８Ａの右側に表示されているインジケーション１０３Ａ２に対応する撮像範囲外部品１０１の数は比較的多いため、当該インジケーション１０３Ａ２のサイズは比較的大きく設定され得る。このように、撮像範囲外部品１０１の種類に応じてインジケーション１０３の形状、色等を異ならせるようにしてもよい。

【0048】

次に、本実施形態による情報提供方法の例について図１２を用いて説明する。図１２は、本実施形態による情報提供方法の例を示すフローチャートである。

【0049】

まず、ステップＳ１において、車両１１の少なくとも一部が撮像部１６によって撮像される。これにより、画像取得部３６が、撮像部１６によって撮像された撮像画像１１０を取得する。この後、ステップＳ２に遷移する。

【0050】

ステップＳ２において、判定部４２は、拡張現実表示の対象となる部品１０２が撮像画像１１０に含まれているか否かを判定する。拡張現実表示の対象となる部品１０２が撮像画像１１０に含まれていない場合（ステップＳ２においてＮＯ）、ステップＳ３に遷移する。拡張現実表示の対象となる部品１０２が撮像画像１１０に含まれている場合（ステップＳ２においてＹＥＳ）、ステップＳ４に遷移する。

【0051】

ステップＳ３において、判定部４２は、撮像範囲外部品１０１が存在するか否かを判定する。撮像範囲外部品１０１が存在しない場合（ステップＳ３においてＮＯ）、ステップＳ５に遷移する。撮像範囲外部品１０１が存在する場合（ステップＳ３においてＹＥＳ）、ステップＳ６に遷移する。

【0052】

ステップＳ４において、判定部４２は、撮像範囲外部品１０１が存在するか否かを判定する。撮像範囲外部品１０１が存在しない場合（ステップＳ４においてＮＯ）、ステップＳ７に遷移する。撮像範囲外部品１０１が存在する場合（ステップＳ４においてＹＥＳ）、ステップＳ８に遷移する。

【0053】

ステップＳ５において、表示制御部４４は、撮像画像１１０を表示部２８の表示画面２８Ａに表示する。

【0054】

ステップＳ６において、表示制御部４４は、撮像画像１１０を表示部２８の表示画面２８Ａに表示するとともに、インジケーション１０３を当該表示画面２８Ａに表示する。

【0055】

ステップＳ７において、表示制御部４４は、撮像画像１１０を表示部２８の表示画面２８Ａに表示するとともに、部品１０２に関する情報を当該撮像画像１１０に重畳表示する。

【0056】

ステップＳ８において、表示制御部４４は、撮像画像１１０を表示部２８の表示画面２８Ａに表示し、部品１０２に関する情報を当該撮像画像１１０に重畳表示するとともに、インジケーション１０３を当該表示画面２８Ａに表示する。こうして、図１２に示す処理が完了する。

【0057】

このように、本実施形態によれば、撮像範囲外部品１０１の存在を示すインジケーション１０３が表示部２８の表示画面２８Ａに表示されるため、撮像範囲外部品１０１の存在をユーザが良好に把握し得る。

【0058】

（変形例）
本実施形態の変形例による情報提供方法について図１３を用いて説明する。図１３は、表示部の表示画面に表示される画像の例を示す図である。

【0059】

本変形例では、一の部品１０２が撮像部１６の撮像範囲内に位置しており、且つ、当該一の部品１０２を操作するための部品１０２である他の部品１０２が撮像部１６の撮像範囲外に位置する場合、以下のような処理が表示制御部４４によって行われ得る。即ち、かかる場合、表示制御部４４は、他の部品１０２の位置を示すインジケーション１０３を表示部２８の表示画面２８Ａに表示し得る。

【0060】

かかる一の部品１０２Ｗとしては、例えば室内灯等が挙げられ得るが、これに限定されるものではない。また、かかる他の部品１０２としては、例えば、室内灯を操作するためのスイッチ等が挙げられ得るが、これに限定されるものではない。一の部品１０２Ｗが撮像部１６の撮像範囲内に位置している一方、当該一の部品１０２Ｗを操作するための不図示の他の部品１０２が撮像部１６の撮像範囲外に位置する場合の例が図１３には示されている。図１３に示すように、当該他の部品１０２の位置を示すインジケーション１０３が表示部２８の表示画面２８Ａに表示され得る。インジケーション１０３は、例えば動画像によって構成され得るが、これに限定されるものではない。

【0061】

本発明についての好適な実施形態を上述したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、種々の改変が可能である。

【0062】

例えば、上記実施形態では、インジケーション１０３が半透明に表示される場合を例に説明したが、これに限定されるものではない。インジケーション１０３の輪郭のみが表示されるようにしてもよい。即ち、インジケーション１０３のうちの輪郭のみが不透明又は半透明に表示され、インジケーション１０３のうちの輪郭以外の部分が透明であってもよい。即ち、インジケーション１０３のうちの透明の部分においては、撮像画像１１０の一部が表示され得る。

【0063】

上記実施形態をまとめると以下のようになる。

【0064】

情報提供方法は、端末装置（１２）に備えられた撮像部（１６）によって車両（１１）の少なくとも一部を撮像することにより得られた撮像画像（１１０）を取得する画像取得ステップ（Ｓ１）と、前記車両に備えられた複数の部品（１０２）のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品（１０１）の存在を判定する判定ステップ（Ｓ３、Ｓ４）と、前記端末装置に備えられた表示画面（２８Ａ）に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示ステップ（Ｓ７、Ｓ８）と、を有し、前記表示ステップ（Ｓ８）では、前記撮像範囲外部品の存在が前記判定ステップにおいて判定された場合に、前記撮像範囲外部品の存在を示すインジケーション（１０３）も併せて表示する。このような構成によれば、撮像範囲外部品の存在を示すインジケーションが表示画面に表示され得るため、撮像範囲外部品の存在をユーザが良好に把握し得る。

【0065】

前記インジケーションは、前記撮像範囲外部品の種類に応じた色で表示されるようにしてもよい。このような構成によれば、撮像範囲外部品の種類をインジケーションに基づいて良好に把握し得る。

【0066】

前記インジケーションは、前記撮像範囲外部品の方向を示すようにしてもよい。このような構成によれば、撮像範囲外部品の位置する方向をインジケーションに基づいて把握し得る。

【0067】

前記インジケーションは、前記撮像範囲外部品までの距離に応じた長さで表示されるようにしてもよい。このような構成によれば、撮像範囲外部品までの距離をインジケーションに基づいて把握し得る。

【0068】

前記インジケーションは、前記撮像範囲外部品の数に応じたサイズで表示されるようにしてもよい。このような構成によれば、撮像範囲外部品の数をインジケーションに基づいて把握し得る。

【0069】

前記インジケーションに、前記撮像範囲外部品の数を示す情報が付されるようにしてもよい。このような構成によれば、撮像範囲外部品の数をインジケーションに基づいてより良好に把握し得る。

【0070】

前記インジケーションは、前記表示画面の縁部に表示されるようにしてもよい。

【0071】

前記インジケーションの形状は、矩形又は三角形であるようにしてもよい。

【0072】

前記インジケーションは、半透明に表示されるようにしてもよい。

【0073】

前記インジケーションの輪郭のみが表示されるようにしてもよい。

【0074】

一の前記部品（１０２Ｗ）が前記撮像部の撮像範囲内に位置しており、且つ、前記一の部品を操作するための部品である他の前記部品が前記撮像部の撮像範囲外に位置する場合、前記表示ステップでは、前記他の部品の位置を示す前記インジケーションを前記表示画面に表示するようにしてもよい。

【0075】

前記インジケーションは、動画像から成るようにしてもよい。

【0076】

プログラムは、上記のような情報提供方法をコンピュータに実行させる。

【0077】

情報提供装置（１２）は、撮像部と、表示画面を有する表示部（２８）と、前記撮像部によって車両の少なくとも一部を撮像することによって得られる撮像画像を取得する画像取得部（３６）と、前記車両に備えられた複数の部品のうちの前記撮像部の撮像範囲外に位置する前記部品である撮像範囲外部品の存在を判定する判定部（４２）と、前記表示画面に前記撮像画像を表示するとともに、複数の前記部品のうちの少なくとも１つが前記撮像画像に含まれている場合に、前記部品に関する情報も併せて表示する表示制御部（４４）と、を備え、前記表示制御部は、前記撮像範囲外部品の存在が前記判定部によって判定された場合に、前記表示画面に前記撮像画像を表示するとともに、前記撮像範囲外部品の存在を示すインジケーションも併せて表示する。

【符号の説明】

【0078】

１０：情報提供システム １１：車両
１２：端末装置 １４：サーバ装置
１６：撮像部 １８：センサ群
２０、４８：演算部 ２２、５０：記憶部
２４、５２：通信部 ２６：操作部
２８：表示部 ２８Ａ：表示画面
３０：加速度センサ ３２：ジャイロセンサ
３４：制御部 ３６：画像取得部
３８：較正部 ４０：位置姿勢判定部
４２：判定部 ４４：表示制御部
４６：情報取得部 ５４：中継局
５６：ネットワーク ６０Ａ～６０Ｃ：操作ボタン
６０Ｄ：再較正ボタン ６０Ｅ：音声検索ボタン
６４ａ～６４ｃ、６４Ｐ～６４Ｒ：情報
１００：車内 １０１：撮像範囲外部品
１０２：機器、部品 １０２Ａ～１０２Ｏ：機器
１０２Ｐ～１０２Ｒ、１０２Ｓ１、１０２Ｔ１、１０２Ｔ２、１０２Ｕ１、１０２Ｖ、１０２Ｗ：部品
１０２ａ～１０２ｃ：部品、構成部材
１０３、１０３Ａ、１０３Ａ１、１０３Ａ２、１０３Ｂ、１０３Ｃ、１０３Ｐ、１０３Ｑ、１０３Ｒ：インジケーション
１１０：撮像画像

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】