(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-08-23
(45)【発行日】2024-09-02
(54)【発明の名称】情報提示装置、情報提示方法及び情報提示プログラム
(51)【国際特許分類】
B60R 11/02 20060101AFI20240826BHJP
A61B 5/16 20060101ALI20240826BHJP
A61B 5/18 20060101ALI20240826BHJP
G10L 15/10 20060101ALN20240826BHJP
【ＦＩ】
B60R11/02 C
A61B5/16 120
A61B5/18
G10L15/10 500N
【請求項の数】
13
(21)【出願番号】P 2020177320
(22)【出願日】2020-10-22
(65)【公開番号】P2022068567
(43)【公開日】2022-05-10
【審査請求日】2023-09-20
(73)【特許権者】
【識別番号】000005016
【氏名又は名称】パイオニア株式会社
(74)【代理人】
【識別番号】110001025
【氏名又は名称】弁理士法人レクスト国際特許事務所
(72)【発明者】
【氏名】中田 浩章
(72)【発明者】
【氏名】中根 昌夫
【審査官】神田 泰貴
(56)【参考文献】
【文献】特開２０２０－１６９９５６（ＪＰ，Ａ）
【文献】特開２０１９－１８５１１７（ＪＰ，Ａ）
【文献】特開２０２０－１１９１２０（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０１Ｃ ２１／３４
Ａ６１Ｂ ５／１６ － ５／１８
Ｇ０６Ｆ １６／００ － １６／９５８
Ｇ０１Ｌ １５／１０
Ｂ６０Ｒ １６／０３７
Ｂ６０Ｒ １１／０２ － １１／０４
(57)【特許請求の範囲】
【請求項1】
車両の乗員に推奨情報を提示する情報提示部と、前記乗員の感情を推定する感情推定部と、
前記感情推定部により前記情報提示部の前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報の提示に関する評価をする評価部と、
を備え、
前記情報提示部は、前記感情推定部により前記情報提示部の前記推奨情報の提示前に推定された前記乗員の感情が特定の状態である期間中は、前記推奨情報を提示しないことを特徴とする情報提示装置。
【請求項2】
車両の乗員に推奨情報を提示する情報提示部と、
前記乗員の感情を推定する感情推定部と、
前記感情推定部により前記情報提示部の前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報の提示に関する評価をする評価部と、
前記乗員に向けて感情を抑制させる刺激を発する刺激発生部と、
を備え、
前記情報提示部は、前記感情推定部により前記情報提示部の前記推奨情報の提示前に推定された前記乗員の感情が特定の状態である場合は、前記刺激発生部が前記乗員に向けて感情を抑制させる刺激を発した後に前記推奨情報を提示することを特徴とする情報提示装置。
【請求項3】
前記情報提示部は、前記情報提示部が前記推奨情報を提示しようとする際の前記乗員の感情の状態の前記感情推定部による推定結果に基づいて、前記刺激発生部の前記乗員に向けて感情を抑制させる刺激を発する時間の長さを変更することを特徴とする請求項２に記載の情報提示装置。
【請求項4】
前記情報提示部は、前記感情推定部により前記情報提示部の前記推奨情報の提示前に推定された前記乗員の感情が特定の状態である場合において、前記推奨情報の提示が緊急を要さない場合には前記推奨情報を提示せず、前記推奨情報の提示が緊急を要する場合には前記乗員の感情を抑制するための刺激を出力した後に前記推奨情報を提示することを特徴とする請求項２または３に記載の情報提示装置。
【請求項5】
前記評価部は、前記推奨情報の提供に関する評価に用いる前記乗員の感情として前記情報提示部によって前記推奨情報が提示されてから第１の時間が経過した時点における前記乗員の感情の状態の推定結果に基づいて前記推奨情報の提示に関する評価を行い、前記評価部は、前記推奨情報の提示後の前記乗員の感情の推定結果に基づいて、前記第１の時間を変更することを特徴とする請求項１～４のいずれか１項に記載の情報提示装置。
【請求項6】
車両の乗員に推奨情報を提示する情報提示部と、
前記乗員の感情を推定する感情推定部と、
前記感情推定部により前記情報提示部の前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報の提示に関する評価をする評価部と、
前記車両の車室又は前記車両の外部において、前記乗員の感情に影響を与えると推定される影響事象の有無を判定する状況判定部と、
を備え、
前記情報提示部は、前記影響事象が発生していると判定される期間中には、前記推奨情報を提示しないことを特徴とする情報提示装置。
【請求項7】
車両の乗員に推奨情報を提示する情報提示部と、
前記乗員の感情を推定する感情推定部と、
前記感情推定部により前記情報提示部の前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報の提示に関する評価をする評価部と、
前記乗員に向けて感情を抑制させる刺激を発する刺激発生部と、
前記車両の内部又は外部において、前記乗員の感情に影響を与えると推定される影響事象の有無を判定する状況判定部と、
を備え、
前記情報提示部は、前記推奨情報を提示しようとする際に前記影響事象が発生していると判定される場合は、前記刺激発生部が前記乗員に向けて感情を抑制させる刺激を発した後に前記推奨情報を提示することを特徴とする情報提示装置。
【請求項8】
前記情報提示部は、前記状況判定部により前記影響事象が発生していると判定される場合において、前記推奨情報の提示が緊急を要さない場合には前記推奨情報を提示せず、前記推奨情報の提示が緊急を要する場合には前記乗員の感情を抑制するための刺激を出力した後に前記推奨情報を提示することを特徴とする請求項７に記載の情報提示装置。
【請求項9】
車両の乗員に推奨情報を提示する情報提示装置に搭載されたコンピュータに、
前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、
前記乗員の感情を推定する感情推定ステップと、
前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報に関する評価をする評価ステップと、
を実行させるためのプログラムであって、
前記情報提示ステップは、前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示前に推定された前記乗員の感情が特定の状態である期間中は、前記推奨情報を提示しないことを特徴とする情報提示プログラム。
【請求項10】
車両の乗員に推奨情報を提示する情報提示装置に搭載されたコンピュータに、
前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、
前記乗員の感情を推定する感情推定ステップと、
前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報に関する評価をする評価ステップと、
前記乗員に向けて感情を抑制させる刺激を発する刺激発生ステップと、
を実行させるためのプログラムであって、
前記情報提示ステップは、前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示前に推定された前記乗員の感情が特定の状態である場合は、前記刺激発生ステップにより前記乗員に向けて感情を抑制させる刺激が発せられた後に前記推奨情報を提示することを特徴とする情報提示プログラム。
【請求項11】
車両の乗員に推奨情報を提示する情報提示装置に搭載されたコンピュータに、
前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、
前記乗員の感情を推定する感情推定ステップと、
前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報に関する評価をする評価ステップと、
前記車両の車室又は前記車両の外部において、前記乗員の感情に影響を与えると推定される影響事象の有無を判定する状況判定ステップと、
を実行させるためのプログラムであって、
前記情報提示ステップは、前記影響事象が発生していると判定される期間中には、前記推奨情報を提示しないことを特徴とする情報提示プログラム。
【請求項12】
車両の乗員に推奨情報を提示する情報提示装置に搭載されたコンピュータに、
前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、
前記乗員の感情を推定する感情推定ステップと、
前記感情推定ステップにより前記情報提示ステップの前記推奨情報の提示後に推定された前記乗員の感情に基づいて、前記推奨情報に関する評価をする評価ステップと、
前記乗員に向けて感情を抑制させる刺激を発する刺激発生ステップと、
前記車両の内部又は外部において、前記乗員の感情に影響を与えると推定される影響事象の有無を判定する状況判定ステップと、
を実行させるためのプログラムであって、
前記情報提示ステップは、前記推奨情報を提示しようとする際に前記影響事象が発生していると判定される場合は、前記刺激発生ステップにより前記乗員に向けて感情を抑制させる刺激を発せられた後に前記推奨情報を提示することを特徴とする情報提示プログラム。
【請求項13】
請求項９～１２のいずれか１項に記載の情報提示プログラムを格納することを特徴とする、コンピュータが読取可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報提示装置、情報提示方法、及び、情報提示プログラムに関する。
【背景技術】
【0002】
近年、例えば、人から発せられる音声や表情等の挙動に基づいて、コンピュータ等の感情推定機器が当該人の感情を推定する技術が開発されている。
【0003】
例えば、特許文献１には、車両にてイベント又はショッピングなどの特定地域の施設に訪れた際に、当該車両が訪れた施設から立ち去ってから指定時間内に感情推定部が搭乗者の感情を推定することにより当該施設の満足度を算出する施設満足度算出装置が開示されている。
【先行技術文献】
【特許文献】
【0004】
【文献】特開２０１８－０５５５５０号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献１の施設満足度算出装置においては、例えば、搭乗者の感情を推定する際に、搭乗者に対して当該搭乗者の感情に影響を及ぼす事象が発生していた場合、施設に対する正しい満足度が算出できない可能性がある。
【0006】
本発明は、上記の点に鑑みてなされたものであり、提示した情報の評価結果をユーザの感情に基づいて得るにあたり、提示した情報とは関連しない感情による影響を抑制した評価結果を得ることが可能な情報提示装置、情報提示方法及びその情報提示プログラムを提供することを目的とする。
【課題を解決するための手段】
【0007】
請求項１に記載の発明は、車両の乗員に推奨情報を提示する情報提示部と、前記乗員の感情を推定する感情推定部と、前記情報提示部の前記推奨情報の提示後における前記乗員の感情の推定結果に基づいて、前記推奨情報の提示に関する評価をする評価部と、を備えることを特徴とする情報提示装置である。
【0008】
請求項１０に記載の発明は、車両の乗員に推奨情報を提示する情報提示装置の情報提示方法であって、情報提示部が前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、感情推定部が前記乗員の感情を推定する感情推定ステップと、評価部が前記情報提示部の前記推奨情報の提示後における前記乗員の感情の推定結果に基づいて、前記推奨情報を評価する評価ステップと、を含むことを特徴とする。
【0009】
請求項１１に記載の発明は、情報提示プログラムであって、車両の乗員に推奨情報を提示する情報提示装置に搭載されたコンピュータに、情報提示部が前記車両の前記乗員に前記推奨情報を提示する情報提示ステップと、感情推定部が前記乗員の感情を推定する感情推定ステップと、評価部が前記情報提示部の前記推奨情報の提示後における前記乗員の感情の推定結果に基づいて、前記推奨情報を評価する評価ステップと、を実行させることを特徴とする。
【図面の簡単な説明】
【0010】
【図1】本発明の実施例１に係る情報提示装置を搭載した自動車の前席部分の斜視図である。
【図2】本願の実施例１に係る情報提示装置１０の機能ブロック図である。
【図3】本願の実施例１に係る情報提示装置１０の動作ルーチンのフロー図である。
【図4】本願の実施例１に係る情報提示装置１０の動作ルーチンのフロー図である。
【図5】本発明の実施例１に係る情報提示装置を搭載した自動車の上面図である。
【図6】本願の実施例２に係る情報提示装置１０の機能ブロック図である。
【図7】本願の実施例２に係る情報提示装置１０の動作ルーチンのフロー図である。
【図8】本願の実施例３に係る情報提示装置１０の機能ブロック図である。
【図9】本願の実施例３に係る情報提示装置１０の動作ルーチンのフロー図である。
【図10】本願の実施例４に係る情報提示装置１０の機能ブロック図である。
【図11】本願の実施例４に係る情報提示装置１０の動作ルーチンのフロー図である。
【0011】
以下においては、本発明の好適な実施例について説明する。しかし、これらを適宜改変し、組み合わせてもよい。また、以下の説明及び添付図面において、実質的に同一又は等価な部分には同一の参照符を付して説明する。また、以下の説明において、映像とは動画及び静止画を含むものとして説明する。
【実施例1】
【0012】
以下に、本発明の実施例１である情報提示装置１０を含む情報提示システム１００について、添付の図面を参照して説明する。実施例１においては、情報提示装置１０を自動車Ｍに搭載する際を例に説明する。
【0013】
図１は、本願の実施例１に係る情報提示装置１０を搭載した車両としての自動車Ｍの前席部分の一例を示す図である。図１では、取り付け例として、自動車Ｍの前席のセンターコンソールＣＣ部分に情報提示装置１０が取り付けられている場合を示す。
【0014】
車内カメラ２１は、自動車Ｍの乗員を撮影可能なカメラである。車内カメラ２１は、例えば、ダッシュボードＤＢ上に設けられており、自動車Ｍの車室内にいる乗員、特に当該乗員の表情又は上半身を撮影可能に配向されている。なお、車内カメラ２１は、乗員の表情又は身体の動作等の状況が撮影できる位置に配されていればよい。例えば、車内カメラ２１は、ルームミラーＲＭに設けられているか又はフロントガラスＦＧの上端又は当該上端付近の天井部に設けられていてもよい。また、車内カメラ２１は、情報提示装置１０と通信可能に接続されており、撮影した映像の信号を情報提示装置１０に送信することが可能である。
【0015】
なお、車内カメラ２１は、自動車Ｍの車室内に複数設置されていてもよい。例えば、運転席及び助手席の各々の乗員を撮影可能な車内カメラ２１をダッシュボードＤＢ上に各々設け、後部座席の各々の乗員を撮影可能な車内カメラ２１を運転席及び助手席のシート裏面又はヘッドレスト裏面の各々に設けてもよい。また、車内カメラ２１は、乗員の上半身のみならず全身を撮影可能に構成されていてもよい。
【0016】
車内マイク２２は、車内の音を受音するマイク装置であり、例えば、ダッシュボードＤＢ上に配されている。車内マイク２２は、車内の音を受音可能であれば、ルームミラーＲＭ又はハンドル等、どこに設けられていてもよい。車内マイク２２は、情報提示装置１０と通信可能に接続されており、当該収集した音の信号を情報提示装置１０に送信することが可能である。
【0017】
なお、車内カメラ２１及び車内マイク２２は、情報提示装置１０が自動車Ｍの車室内の車内状況情報を取得するための車内状況取得デバイス２０である。情報提示装置１０は車内カメラ２１及び車内マイク２２の少なくともいずれかを備える。
【0018】
スピーカ３１は、例えば、ピラーＰ又はドアＤＲの車室内側に設けられている。スピーカ３１は、情報提示装置１０と通信可能に接続されており、情報提示装置１０の制御に基づいて音楽や音声等の音を発することが可能である。
【0019】
ディスプレイ３２は、例えば、映像を表示可能な液晶ディスプレイ等のディスプレイである。ディスプレイ３２は、例えば、ダッシュボードＤＢ上に配されている。ディスプレイ３２は、車室内の乗員から視認できる場所に配されていればよい。例えば、ディスプレイ３２は、ダッシュボードＤＢ内のセンターコンソールＣＣに取り付けられていてもよい。ディスプレイ３２は、情報提示装置１０と通信可能に接続されており、情報提示装置１０の制御に基づいて画面表示を行うことが可能である。なお、ディスプレイ３２は、映像を表示可能な液晶ディスプレイ等のディスプレイとタッチパネルとが組み合わされたタッチパネルモニターであってもよい。その場合、ディスプレイ３２は、乗員から受け付けたタッチパネルへの入力操作を表す信号を情報提示装置１０に送信することが可能である。
【0020】
なお、スピーカ３１及びディスプレイ３２は、情報提示装置１０が自動車Ｍの車室内の乗員に対して情報を提示するための情報提示デバイス３０である。
【0021】
ＧＰＳ受信機４１は、ＧＰＳ（Global Positioning System）衛星からの信号（ＧＰＳ信号）を受信する装置である。ＧＰＳ受信機４１は、例えば、ダッシュボードＤＢ上に配されている。なお、ＧＰＳ受信機４１は、ＧＰＳ信号が受信できればどこに配されていてもよい。ＧＰＳ受信機４１は、情報提示装置１０と通信可能に接続されており、受信したＧＰＳ信号を情報提示装置１０に送信することが可能である。
【0022】
図２に情報提示装置１０の構成を示す。情報提示装置１０は、例えば、システムバス５１を介して、記憶部５３と、制御部５５と、入力部５７と、出力部５９とが協働する装置である。
【0023】
記憶部５３は、例えば、ハードディスク装置、ＳＳＤ（solid state drive）、フラッシュメモリ等により構成されており、オペレーティングシステムや、端末用のソフトウェア等の各種プログラムを記憶する。
【0024】
なお、各種プログラムは、例えば、他のサーバ装置等からネットワークを介して取得されてもよいし、記録媒体に記録されて各種ドライブ装置を介して読み込まれるようにしてもよい。すなわち、記憶部５３に記憶される各種プログラム（後述する情報提示装置１０における処理を実行するためのプログラムを含む）は、ネットワークを介して伝送可能であるし、また、コンピュータ読み取り可能な記録媒体に記録して譲渡することが可能である。
【0025】
また、記憶部５３は、例えば、地図情報及び当該地図情報に対応した施設の情報等を記憶する。記憶部５３に記録されている施設の情報には、例えば、レストラン、ショッピング施設、景勝地等の観光地、アミューズメント施設等のカテゴリ情報が記録されている。また、それぞれのカテゴリに含まれている施設または観光地は、複数のサブカテゴリに分類されている。例えばレストランのカテゴリに含まれている施設は、和食、中華、パスタ店等のサブカテゴリに分類されている。なお、情報提示装置１０が無線通信によってインターネットに接続されており、当該インターネットを介した情報取得により、記憶部５３に記憶されている施設の情報が追加されたりや施設の口コミ情報等が随時更新されるようにしてもよい。
【0026】
制御部５５は、ＣＰＵ（Central Processing Unit）５５Ａ、ＲＯＭ（Read Only Memory）５５Ｂ、ＲＡＭ（Random Access Memory）５５Ｃ等により構成され、コンピュータとして機能する。そして、ＣＰＵ５５Ａが、ＲＯＭ５５Ｂや記憶部５３に記憶された各種プログラムを読み出し実行することにより各種機能を実現する。
【0027】
入力部５７は、情報提示装置１０と車内状況取得デバイス２０とを通信可能に接続するインタフェース部である。情報提示装置１０は、入力部５７を介して、車内カメラ２１から映像信号を受信し、車内マイク２２から音声信号を受信することが可能である。また、情報提示装置１０は、入力部５７を介して、ＧＰＳ受信機４１から自動車Ｍの現在の位置情報の信号を受信することが可能である。
【0028】
出力部５９は、スピーカ３１及びディスプレイ３２と通信可能に接続されており、スピーカ３１に音声信号を送信して音を出力させたり、ディスプレイ３２に映像又は画像信号を送信して表示をさせたりすることが可能である。
【0029】
情報提示装置１０は、上記の通り、入力部５７を介してＧＰＳ受信機４１から自動車Ｍの現在の位置情報の信号を受信する。制御部５５は、入力部５７を介して受信した自動車Ｍの位置情報及び記憶部５３に記録された地図情報から、自動車Ｍの乗員に対して自動車Ｍの周辺又は進行方向上に推奨するべき施設等の推奨情報を提示可能である。なお、この時、制御部５５は情報提示部として機能する。言い換えれば、情報提示装置１０は、自動車Ｍの乗員に推奨情報を提示する情報提示部としての制御部５５を備える。
【0030】
また、情報提示装置１０は、上記の通り、入力部５７を介して車内カメラ２１から自動車Ｍの乗員を含む車室内の映像を受信する。また、情報提示装置１０は、入力部５７を介して車内マイク２２から自動車Ｍの車室内の乗員の声を含む音声を受信する。情報提示装置１０は、受信した映像から乗員の表情または動作等の挙動の情報を取得する。または情報提示装置１０は、受信した車室内の音声から乗員の声もしくは乗員の動作によって発生した音の情報を取得する。以下、乗員の挙動及び声を含めて単に乗員の挙動ともいう。制御部５５は、入力部５７を介して受信した映像及び音声から乗員の挙動及び声を抽出し、当該抽出した挙動及び声から当該乗員の感情を推測可能である。
【0031】
例えば、制御部５５は、車内カメラ２１によって撮影された乗員の表情、身振り手振り等の動作又は車内マイク２２によって入力された乗員の声の大小もしくは声色等に基づいて当該乗員の感情を推測する。なお、この時、制御部５５は感情推定部として機能する。言い換えれば、情報提示装置１０は、乗員の感情を推定する感情推定部としての制御部５５を備える。
【0032】
制御部５５による乗員の感情の推定においては、例えば、制御部５５は、予め記憶部５３に記録された乗員の平静時の表情または声と上記抽出して取得された表情または声を比較して感情を推定する。具体的には、例えば、当該乗員の表情の目元又は口元の形状を比較することで感情を推定する。また、例えば、制御部５５は、予め記憶部５３に記録された平静時の乗員の身体、特に上半身の各部の移動量と比較して、当該乗員の身体の各部の移動量から感情を推定する。また、例えば、制御部５５は、予め記憶部５３に記録された乗員の平静時の声の大きさや声色などの声の状態と、抽出された声の状態とを比較して、当該乗員の感情を推定する。また、上記の表情、身体の各部の移動量及び声の状態について、予め記録されている平静時からの差異を各々の特徴量として計測し、各々の特徴量の分布傾向から乗員の感情を推定するようにしてもよい。
【0033】
なお、制御部５５による乗員の感情の推定においては、上記のように、制御部５５が予め記憶部５３に記録された乗員のデータと比較を行うことによって感情を推定することに限らない。例えば、記憶部５３に格納された人工知能（ＡＩ：Artificial Intelligence）プログラムによるディープラーニングによって、上記車室内の映像及び音声から乗員の感情を推測するようにしてもよい。
【0034】
また、制御部５５による感情を推定する対象は、運転席に登場する乗員のみであってもよいし、予め設定された特定の乗員であってもよい。また、制御部５５による感情を推定する対象は、自動車Ｍの車室内に搭乗する乗員全員であってもよい。その場合、例えば、自動車Ｍの車室内に搭乗する乗員のうち、最も感情が昂っていると推測される乗員の感情を代表値として用いてもよいし、自動車Ｍの車室内に搭乗する乗員全員の感情を推定して数値化した後に当該数値の平均値を代表値として用いてもよい。
【0035】
情報提示装置１０は、自動車Ｍの車室内の乗員に対して推奨情報の提示を行った後、上述のように乗員の感情を推定して推奨情報の評価を行う。具体的には、制御部５５は、推奨情報の情報提示後に得られた推定感情に応じて提示した推奨情報の評価を行い、以後に提示する推奨情報のカテゴリの内容や提示する頻度を変更する。なお、この時、制御部５５は評価部として機能する。言い換えれば、情報提示装置１０は、情報提示部としての制御部５５の推奨情報の提示後における乗員の感情の推定結果に基づいて、推奨情報の提示に関する評価をする評価部としての制御部５５を備える。
【0036】
具体的には、例えば、情報提示装置１０が自動車Ｍの進行方向上にある評判の良いパスタ店の情報を推奨情報として提示した後に、自動車Ｍの車室内の乗員から推定される感情が、平静な状態から喜びや楽しみ等の肯定的な感情に推移したと推測されたとする。この時、情報提示装置１０は、現在車室内に搭乗している乗員がレストランのカテゴリ、特にパスタ店のサブカテゴリに属する情報を好むと判定する。この場合、情報提示装置１０は、以後の推奨情報の提示において、当該パスタ店及び同一のカテゴリ又はサブカテゴリに属する施設の提示頻度を多くする等の変更を行う。
【0037】
また、一方、例えば、情報提示装置１０が推奨情報として提示した後に、乗員から推定される感情が、平静な状態から怒りや嫌悪等の否定的な感情に推移したと推測された場合、制御部５５は、以後の推奨情報の提示において、同一のカテゴリ又はサブカテゴリに属する施設の提示頻度を少なくする等の変更を行う。
【0038】
すなわち、情報提示装置１０は、推奨情報の提示とその評価を繰り返し行うことによって、乗員の好みに応じた推奨情報をより多く提示することが可能となる。
【0039】
なお、上記のように推奨情報を提示した後に乗員の感情を推定する場合には、推奨情報の提示時において乗員の感情が平静な状態であることが好ましい。例えば、推奨情報の提示時において、車室内で乗員同士の口論の発生や、車外において渋滞や自車の前方への他車の急な割り込みの発生等、乗員の感情に影響を及ぼす影響事象（以下、単に事象とも称する）が発生した場合において、乗員の感情が平静でない場合がある。このような場合に推奨情報を提示し、当該推奨情報の提示後の乗員の感情の推定を行っても、上記の事象によって及ぼされた乗員の感情によって推奨情報の評価が適正に行われない場合がある。言い換えれば、推奨情報の評価は、推奨情報の提示時に乗員の感情が平静である場合に行われるのが好ましい。
【0040】
よって、情報提示装置１０は、推奨情報の提示前において、上述のような乗員の感情の推定を行ってもよい。具体的には、制御部５５は、推奨情報の提示時またはその直前において車室内の乗員の感情が平静である場合のみに推奨情報を提示することとしてもよい。また、制御部５５は、推奨情報の提示時またはその直前において、車室内の乗員の感情が平静であると推定されるまで推奨情報の提示を中断してもよい。これにより、情報提示装置１０は、推奨情報の評価をより適正に行うことが可能となる。
【0041】
すなわち、情報提示部としての制御部５５は、感情推定部としての制御部５５により推定された乗員の感情が特定の状態である期間中は、推奨情報を提示しない。
【0042】
以下に、情報提示装置として機能する際の情報提示装置１０の動作ルーチンの一例について説明する。
【0043】
図３及び図４は、動作ルーチンの一例としての情報提示ルーチンＲ１及びＲ２を示す図である。図３に示す情報提示ルーチンＲ１は、情報提示装置１０の動作ルーチンのうち、推奨情報を提示するまでのルーチンを示している。また、図４に示す情報提示ルーチンＲ２は、情報提示装置１０の動作ルーチンのうち、推奨情報の提示以降のルーチンを示している。情報提示ルーチンＲ１及びＲ２は、例えば、連続して実行される。また、情報提示ルーチンＲ１及びＲ２は、例えば、情報提示装置１０の電源が入ると繰り返し実行される。
【0044】
情報提示ルーチンＲ１が開始されると、制御部５５は、まず自動車Ｍに搭乗している乗員に推奨するべき推奨情報があるかを検索する（ステップＳ１０１）。具体的には、制御部５５は、入力部５７を介して受信されるＧＰＳ受信機４１の位置情報と記憶部５３に記録されている地図情報及び施設情報とを照らし合わせ、自動車Ｍの周囲、進行方向上又は設定経路上にある施設に関して乗員に提供可能な推奨情報があるかを検索する。
【0045】
次に、制御部５５は、検索の結果、自動車Ｍに搭乗している乗員に推奨するべき推奨情報を発見したかを判定する（ステップＳ１０２）。制御部５５は、この判定において、例えば、ステップＳ１０１における検索において推奨情報が発見された場合に、当該発見された推奨情報を乗員の好み等の乗員の情報に照らし合わせて、当該推奨情報が乗員に推奨するべき推奨情報である場合に、乗員に推奨すべき推奨情報を発見したと判定する。
【0046】
ステップＳ１０２において、制御部５５が自動車Ｍに搭乗している乗員に推奨するべき推奨情報を発見していないと判定した場合（ステップＳ１０２：Ｎｏ）、制御部５５は、ステップＳ１０１の処理を繰り返して実行し、推奨情報の検索を行う。
【0047】
ステップＳ１０２において、制御部５５が自動車Ｍに搭乗している乗員に推奨するべき推奨情報を発見したと判定した場合（ステップＳ１０２：Ｙｅｓ）、制御部５５は、自動車Ｍの車室内に搭乗している乗員の感情を推定する（ステップＳ１０３）。乗員の感情の推定は、上述の通り、制御部５５が入力部５７を介して車内状況取得デバイス２０から受信される乗員の映像及び音声データに基づいて乗員の感情を推定する。
【0048】
次に、制御部５５は、乗員の感情の推定した結果、当該乗員の感情が平静であるかを判定する（ステップＳ１０４）。
【0049】
ステップＳ１０４において、制御部５５が乗員の感情が平静でないと判定した場合（ステップＳ１０４：Ｎｏ）、制御部５５は、ステップＳ１０３の処理を繰り返して実行し、乗員の感情が平静であると判定されるまで待機する。
【0050】
ステップＳ１０４において、制御部５５が乗員の感情が平静であると判定した場合（ステップＳ１０４：Ｙｅｓ）、図４に示す情報提示装置１０の動作ルーチンは情報提示ルーチンＲ２に移行して、情報提示ステップとして制御部５５は乗員に対して推奨情報の提示を行う（ステップＳ１０５）。推奨情報の提示は、出力部５９を介して情報提示デバイス３０から出力される。具体的には、制御部５５は、出力部５９を介して、スピーカ３１から音声情報を出力し、ディスプレイ３２から画像情報を出力することによって推奨情報を乗員に対して提示する。
【0051】
次に、感情推定ステップとして、制御部５５は、再度乗員の感情の推定を行う（ステップＳ１０６）。本ステップにおける乗員の感情の推定は、ステップＳ１０３の処理と同様に、制御部５５が入力部５７を介して車内状況取得デバイス２０から受信される乗員の映像及び音声データに基づいて乗員の感情を推定する。
【0052】
次に、評価ステップとして、制御部５５は、推定された感情に基づいて、推奨情報の評価を行う（ステップＳ１０７）。制御部５５は、推奨情報の評価結果を記憶部５３に記録し、以後のステップＳ１０１における推奨情報の検索において、今回評価された推奨情報と同一のカテゴリ又はサブカテゴリに属する施設等の検索条件又は抽出頻度等に変更を加える。
【0053】
上記のように、情報提示装置１０の情報提示方法は、情報提示部としての制御部５５が自動車Ｍの乗員に推奨情報を提示する情報提示ステップと、感情推定部としての制御部５５が乗員の感情を推定する感情推定ステップと、評価部としての制御部５５が情報提示部としての制御部５５の推奨情報の提示後における乗員の感情の推定結果に基づいて、推奨情報を評価する評価ステップと、を含む。
【0054】
これにより、情報提示装置１０の動作ルーチンを繰り返し行うことによって、乗員の好みに応じた推奨情報をより多く提示することが可能となる。
【0055】
なお、上記したステップＳ１０６の感情推定及びステップＳ１０７の評価の反映の処理は、必ずしもこのフローの中で行われなくともよい。例えば、推奨情報を提示した際の乗員の映像及び音声データを記憶しておき、それに基づいてステップＳ１０６の感情推定及びステップＳ１０７の推奨情報の評価の判定の反映処理を後から行ってもよい。
【実施例2】
【0056】
以下に実施例２の情報提示システム２００について説明する。実施例２の情報提示システムは、上記実施例１の情報提示システム１００と同様に、情報提示装置に情報通信可能に接続された車内カメラ２１及び車内マイク２２からなる車内状況取得デバイス２０及びスピーカ３１及びディスプレイ３２からなる情報提示デバイス３０を含んでいる。
【0057】
実施例１においては、情報提示装置１０が提示した推奨情報を適正に評価するために、推奨情報の提示前において車室内の乗員の感情が平静であると推定されるまで推奨情報の提示を中断する場合について説明した。しかし、情報提示装置は、例えば、車室内又は車外において乗員の感情に影響を及ぼす事象が発生しているかを判定し、推奨情報を提示するかを判断するようにしてもよい。
【0058】
図５は、本願の実施例２に係る情報提示装置１０Ａを含む情報提示システム２００搭載した車両としての自動車Ｍの上面図である。実施例２における情報提示装置１０Ａを含む情報提示システム２００の構成は、上述した実施例１と基本的に同じ構成であるが、自動車Ｍの車外の状況を示す情報を取得する車外カメラ４２、車外マイク４３及び車外センサ４４を含む車外状況取得デバイス４０を有する点で異なる。
【0059】
車外カメラ４２は、自動車Ｍの周囲を撮影可能なカメラである。車外カメラ４２は、例えば、フロントグリルＧＲに設けられており、自動車Ｍの進行方向前方を撮影可能に配向されている前方カメラ４２Ａ、両サイドミラーＳＭの各々に設けられて側方を撮影可能な側方カメラ４２Ｂ、４２Ｃ、自動車Ｍの後方を撮影可能に配向されている後方カメラ４２Ｄを含む。なお、車外カメラ４２は、少なくとも自動車Ｍの前方を撮影できる位置に配されていればよい。例えば、車外カメラ４２は、ルームミラーＲＭ（図１参照）に設けられているか又はフロントガラスＦＧ（図１参照）の上端又は当該上端付近の天井部に設けられていてもよい。また、車外カメラ４２は、情報提示装置１０Ａと通信可能に接続されており、撮影した映像の信号を情報提示装置１０Ａに送信することが可能である。
【0060】
車外マイク４３は、自動車Ｍの周囲の音を受音するマイク装置であり、例えば、自動車Ｍのバンパーに配されている。車外マイク４３は、自動車Ｍの周囲の音を受音可能であれば、サイドミラーＳＭ又はフロントグリルＧＲ等、どこに設けられていてもよい。車外マイク４３は、情報提示装置１０Ａと通信可能に接続されており、当該収集した音の信号を情報提示装置１０Ａに送信することが可能である。
【0061】
車外センサ４４は、例えば、自動車Ｍの周囲の物体を検出可能なセンサであり、例えば、自動車ＭのフロントグリルＧＲに配されている。車外センサ４４は、例えば、パルス状のレーザ光を走査して反射物からの反射光を受光するまでの時間から当該反射物までの距離を画像化した測距画像を生成するＬＩＤＡＲ（Laser Imaging Detection and Ranging）等の物体検知センサである。また、車外センサ４４は、情報提示装置１０Ａと通信可能に接続されており、測距データの信号を情報提示装置１０Ａに送信することが可能である。
【0062】
なお、車外センサ４４は、自動車Ｍの車外の全周囲を検知可能なように複数設置されていてもよい。例えば、自動車Ｍの前方を検知可能な車外センサ４４をフロントグリルＧＲに設け、自動車Ｍの後方を検知可能な車外センサ４４を自動車ＭのリアバンパーＲＢ又はバックドアＢＤに設け、自動車Ｍの側方の各々を検知可能な車外センサ４４をサイドミラーＳＭ又はドアＤＲの各々に設けてもよい。
【0063】
なお、車外カメラ４２、車外マイク４３、車外センサ４４及び前述のＧＰＳ受信機４１は、情報提示装置１０Ａが自動車Ｍの車外状況情報を取得するための車外状況取得デバイス４０である。
【0064】
図６に情報提示装置１０Ａの構成を示す。なお、上述の通り、情報提示装置１０Ａの構成は、実施例１の情報提示装置１０と基本的に同じ構成である。また、情報提示装置１０と重複する箇所については説明を割愛する。
【0065】
入力部５７は、車内状況取得デバイス２０に加え、情報提示装置１０Ａと車外状況取得デバイス４０とを通信可能に接続するインタフェース部である。情報提示装置１０Ａは、入力部５７を介して、車外カメラ４２から映像信号を受信し、車外マイク４３から音声信号を受信し、車外センサ４４から測距データ信号を受信することが可能である。また、情報提示装置１０Ａは、入力部５７を介して、ＧＰＳ受信機４１から自動車Ｍの現在の位置情報の信号に加えて、道路の渋滞情報や天候情報等を受信することが可能である。
【0066】
情報提示装置１０Ａは、推奨情報の提示時において、車室内又は車外において乗員の感情に影響を及ぼす事象が発生していると判定した場合、当該事象が落着したと判定されるまで推奨情報の提示を中断する。
【0067】
具体的には、制御部５５は、入力部５７を介して車内状況取得デバイス２０及び車外状況取得デバイス４０から受信する車内状況情報及び車外状況情報に基づいて乗員の感情に影響を及ぼす事象が発生しているかを判定する。なお、この時、制御部５５は状況判定部として機能する。言い換えれば、情報提示装置１０Ａは、自動車Ｍの車室又は自動車Ｍの外部において、乗員の感情に影響を与えると推定される影響事象の有無を判定する状況判定部としての制御部５５を備える。また、情報提示部としての制御部５５は、影響事象が発生していると判定される期間中には、推奨情報を提示しない。
【0068】
例えば、車室内において乗員同士の口論等が発生している場合、制御部５５は、車内カメラ２１によって撮影された乗員の映像又は車内マイク２２によって入力された乗員の音声に基づいて、車室内において乗員同士の口論が発生していると判定する。具体的には、例えば、制御部５５は、車内カメラ２１から入力される映像信号において、乗員の表情、口の動き又は身振り手振り等の動作から車室内において乗員の感情に影響を及ぼす事象として、乗員同士の口論が発生していると判定する。また、例えば、制御部５５は、車内マイク２２から入力される音声信号において、乗員の大声等の急なトーンの変化や特定の単語音声を検知した際に車室内において乗員の感情に影響を及ぼす事象が発生していると判定する。
【0069】
また、制御部５５は、例えば、車外状況取得デバイス４０から入力される車外状況情報から乗員の感情に影響を及ぼす事象が発生する可能性があるかを予測するようにしてもよい。具体的には、自動車Ｍが交差点を直進する際、ＧＰＳ受信機４１によって自動車Ｍが交差点に差し掛かることを検知し、車外カメラ４２及び車外センサ４４によって対向車や歩行者を検知することにより、対向車の急な右折や歩行者の飛び出し等を予測する。
【0070】
また、例えば、車外において自車である自動車Ｍの前方への他車の急な割り込みの発生した場合、制御部５５は、車外カメラ４２によって撮影された自動車Ｍの前方の映像又は車外センサ４４によって測距された自動車Ｍの前方の物体検出に基づいて、自動車Ｍの前方への他車の急な割り込みが発生したと判定する。また、車外における乗員の感情に影響を及ぼす事象においては、例えば、車外カメラ４２の映像から前方の信号の遷移を検知した、車外マイク４３の音声から自動車Ｍの周囲に緊急車両のサイレン音を検知した、又はＧＰＳ受信機４１の受信データから自動車Ｍの進行上に渋滞情報を検知した等が挙げられる。
【0071】
これにより、情報提示装置１０Ａが車内状況取得デバイス２０及び車外状況取得デバイス４０から受信する車内状況情報及び車外状況情報に基づいて乗員の感情に影響を及ぼす事象が発生しているかを自身で判定又は予測することにより、より安全に配慮した適切なタイミングで推奨情報の提示を行うことが可能となる。
【0072】
以下に、情報提示装置として機能する際の情報提示装置１０Ａの動作ルーチンの一例について説明する。
【0073】
図７は、動作ルーチンの一例としての情報提示ルーチンＲ３を示す図である。図７に示す情報提示ルーチンＲ３は、情報提示装置１０Ａの動作ルーチンのうち、推奨情報を提示するまでのルーチンを示している。なお、情報提示ルーチンＲ３のうちステップＳ２０１及びＳ２０２の処理は、それぞれ図３に示した情報提示ルーチンＲ１のステップＳ１０１及びＳ１０２と対応し、その処理内容も同様であるため説明は割愛する。また、推奨情報の提示以降のルーチンにおいては、図４に示した情報提示ルーチンＲ２と同様である。本実施例２の説明においては、実施例１と重複する図４に示した情報提示ルーチンＲ２の説明は割愛する。
【0074】
ステップＳ２０２において、制御部５５が推奨情報を発見したと判定された後、制御部５５は、車内状況取得デバイス２０から車内状況情報を取得する（ステップＳ２０３）。
【0075】
次に、制御部５５は、車内状況情報に基づいて車室内において乗員の感情に影響を及ぼす事象が発生しているかを判定する（ステップＳ２０４）。
【0076】
ステップＳ２０４において、制御部５５が車室内において乗員の感情に影響を及ぼす事象が発生していると判定した場合（ステップＳ２０４：Ｙｅｓ）、制御部５５は、ステップＳ２０３の処理を繰り返して実行し、車室内の事象が落着したと判定されるまで待機する。
【0077】
ステップＳ２０４において、制御部５５が車室内において乗員の感情に影響を及ぼす事象が発生していないと判定した場合（ステップＳ２０４：Ｎｏ）、制御部５５は、車外状況取得デバイス４０から車外状況情報を取得する（ステップＳ２０５）。
【0078】
次に、制御部５５は、車外状況情報に基づいて車外において乗員の感情に影響を及ぼす事象が発生しているかを判定する（ステップＳ２０６）。
【0079】
ステップＳ２０６において、制御部５５が車外において乗員の感情に影響を及ぼす事象が発生していると判定した場合（ステップＳ２０６：Ｙｅｓ）、制御部５５は、ステップＳ２０３の処理を繰り返して実行し、車室内及び車外の事象が落着したと判定されるまで待機する。
【0080】
ステップＳ２０６において、制御部５５が車外において乗員の感情に影響を及ぼす事象が発生していないと判定した場合（ステップＳ２０６：Ｎｏ）、制御部５５は、図４に示した推奨情報の提示以降のルーチンである情報提示ルーチンＲ２の処理に移行し、提示した推奨情報に対する評価を行う。
【0081】
これにより、情報提示装置１０Ａは、より安全に配慮した適切なタイミングで推奨情報の提示を行うことが可能となる。
【0082】
なお、本実施例２においては、車室内に乗員の感情に影響を及ぼす事象が発生しているかを判定した後、車外に乗員の感情に影響を及ぼす事象が発生しているかを判定する場合について説明した。しかしながら、車内又は車外において乗員の感情に影響を及ぼす事象が発生しているかを判定する順はこれに限定されない。例えば、車外に乗員の感情に影響を及ぼす事象が発生しているかを先に判定するようにしてもよいし、同時に判定処理を行うようにしてもよい。
【実施例3】
【0083】
実施例１及び実施例２においては、情報提示装置１０又は情報提示装置１０Ａが推奨情報を提示できるようになるまで推奨情報の提示を中断する場合について説明した。しかし、推奨情報を提示するタイミングはこれに限定されない。例えば、推奨情報の提示に急を要する場合、情報提示装置は、乗員への呼びかけを行って乗員の感情を抑制させた後に推奨情報の提示を行ってもよい。
【0084】
急を要する推奨情報は、例えば、推奨情報として検索された施設への分岐路が迫っている場合等である。この場合、情報提示装置は、自動車Ｍが当該分岐路を通過してしまう前に推奨情報を提示する必要がある。よって、情報提示装置は、推奨情報の提示時において乗員の感情を抑制させた上で推奨情報を提示することが好ましい。
【0085】
図８に、本発明の実施例３である情報提示装置１０Ｂを含む情報提示システム３００の構成を示す。情報提示装置１０Ｂの構成は、実施例１の情報提示装置１０と基本的に同じ構成であるが、乗員の感情を抑制させるための刺激を発生させる刺激発生部６０を有する点で異なる。なお、情報提示装置１０と重複する構成については説明を割愛する。
【0086】
感情鎮静部としての刺激発生部６０は、情報提示装置１０Ｂが車室内の乗員の感情が平静でないと推定した場合に、情報提示装置１０Ｂが出力部５９を介して乗員の感情を平静な状態に抑制させるための刺激を発生させる。乗員の感情を抑制させるための刺激とは、乗員の五感を刺激してリラックス効果を与える刺激である。具体的には、例えば、乗員の注意をひくサウンドロゴや予め設定された乗員の名前の呼びかけ、リラックス効果のある音声もしくは音響コンテンツ又は映像コンテンツが挙げられる。この場合、刺激発生部６０は、スピーカ３１又はディスプレイ３２から出力される。また、車室内の座席シートに内蔵されたバイブレータによるマッサージや車室内に設けられたアロマポットからリラックス効果のあるにおいを発生させる等でもよい。上記の乗員の感情を抑制させる刺激は、いずれかの刺激の発生でもよいし、複数の刺激が同時に発生するようにしてもよい。言い換えれば、情報提示装置１０Ｂは、乗員に向けて感情を抑制させる刺激を発する刺激発生部６０を備える。
【0087】
情報提示装置１０Ｂは、急を要する推奨情報を提示する際、車室内の乗員の感情が平静であると推測される場合には、当該推奨情報を速やかに提示する。また、情報提示装置１０Ｂは、急を要する推奨情報を提示する際、車室内の乗員の感情が平静ではないと推測される場合には、刺激発生部６０から乗員の感情を抑制する刺激を発生させた後に当該推奨情報を提示する。言い換えれば、情報提示部としての制御部５５は、感情推定部としての制御部５５により推定された乗員の感情が特定の状態である場合は、刺激発生部６０が乗員に向けて感情を抑制させる刺激を発した後に推奨情報を提示する。また、言い換えれば、情報提示部としての制御部５５は、感情推定部としての制御部５５により推定された乗員の感情が特定の状態である場合において、推奨情報の提示が緊急を要さない場合には推奨情報を提示せず、推奨情報の提示が緊急を要する場合には乗員の感情を抑制するための刺激を出力した後に推奨情報を提示する。
【0088】
これにより、情報提示装置１０Ｂは、急を要する推奨情報を提示する際に車室内の乗員の感情が平静でないと推定される場合においても、提示した推奨情報の評価を適正に行うことが可能となる。
【0089】
以下に、情報提示装置として機能する際の情報提示装置１０Ｂの動作ルーチンの一例について説明する。
【0090】
図９は、動作ルーチンの一例としての情報提示ルーチンＲ４を示す図である。図９に示す情報提示ルーチンＲ４は、情報提示装置１０Ｂの動作ルーチンのうち、推奨情報を提示するまでのルーチンを示している。なお、情報提示ルーチンＲ４のうちステップＳ３０１～Ｓ３０３の処理は、それぞれ図３に示した情報提示ルーチンＲ１のステップＳ１０１～Ｓ１０３と対応し、その処理内容も同様であるため説明は割愛する。また、推奨情報の提示以降のルーチンにおいては、図４に示した情報提示ルーチンＲ２と同様である。本実施例３の説明においては、実施例１と重複する図４に示した情報提示ルーチンＲ２の説明は割愛する。
【0091】
ステップＳ３０１～Ｓ３０３までの処理においては、制御部５５が推奨情報を発見し、車室内の乗員の感情を推定する。
【0092】
次に、制御部５５は、乗員の感情の推定した結果、当該乗員の感情が平静であるかを判定する（ステップＳ３０４）。
【0093】
ステップＳ３０４において、制御部５５が乗員の感情が平静であると判定した場合（ステップＳ３０４：Ｙｅｓ）、制御部５５は、図４に示した推奨情報の提示以降のルーチンである情報提示ルーチンＲ２の処理に移行し、提示した推奨情報に対する評価を行う。
【0094】
ステップＳ３０４において、制御部５５が乗員の感情が平静でないと判定した場合（ステップＳ３０４：Ｎｏ）、制御部５５は、ステップＳ３０１で発見した推奨情報が急を要する情報であるかを判定する（ステップＳ３０５）。この判定は、例えば、制御部５５が、ＧＰＳ受信機４１が受信する自動車Ｍの現在位置と記憶部５３に記録されている地図情報とを照らし合わせ、当該推奨情報へ至る経路への分岐点が所定の距離の範囲内であるか等によって判定する。
【0095】
ステップＳ３０５において、制御部５５が推奨情報が急を要さない情報であると判定した場合（ステップＳ３０５：Ｎｏ）、制御部５５は、ステップＳ３０３の処理に戻り、乗員の感情が平静であると推測されるまで又は推奨情報が急を要する情報となるまで待機する。
【0096】
ステップＳ３０５において、制御部５５が推奨情報が急を要する情報であると判定した場合（ステップＳ３０５：Ｙｅｓ）、制御部５５は、出力部３９を介して刺激発生部６０から乗員の感情を抑制させる刺激を出力させる（ステップＳ３０６）。乗員の感情を抑制させる刺激は、上述の通り、乗員の五感を刺激してリラックス効果を与える刺激である。
【0097】
なお、本ステップの処理の実行後、制御部５５は、例えば、乗員の感情が抑制されたと考えられるまで所定の時間の間待機するようにしてもよい。また、乗員の感情が抑制されたと考えられるまで所定の時間は、推定された乗員の感情の種類に応じて可変に変更するようにしてもよい。例えば、制御部５５は、推定された乗員の感情が喜びや楽しみ等であれば、平静状態に遷移するまでの時間は短いと推測して待機時間を短くしてもよい。一方、制御部５５は、推定された乗員の感情が怒りや悲しみ等であれば、平静状態に遷移するまでに時間を要すると推測して待機時間を短くしてもよい。すなわち、評価部としての制御部５５は、推奨情報の提供に関する評価に用いる乗員の感情として情報提示部としての制御部５５によって推奨情報が提示されてから第１の時間が経過した時点における乗員の感情の状態の推定結果に基づいて推奨情報の提示に関する評価を行い、評価部としての制御部５５は、推奨情報の提示時の前記乗員の感情の推定結果に基づいて、第１の時間を変更する。
【0098】
また、制御部５５は、本ステップの後に再度乗員の感情を推定し、乗員の感情が抑制されるまで繰り返し乗員の感情を抑制させる刺激を出力するようにしてもよい。
【0099】
また、制御部５５は、推定された乗員の感情の種類に応じて乗員の感情を抑制させる刺激を発生させる時間を可変に変更するようにしてもよい。すなわち、情報提示部としての制御部５５は、情報提示部としての制御部５５が推奨情報を提示しようとする際の乗員の感情の状態の感情推定部としての制御部５５による推定結果に基づいて、刺激発生部６０の乗員に向けて感情を抑制させる刺激を発する時間の長さを変更する。
【0100】
その後、制御部５５は、図４に示した推奨情報の提示以降のルーチンである情報提示ルーチンＲ２の処理に移行し、提示した推奨情報に対する評価を行う。
【0101】
これにより、情報提示装置１０Ｂは、急を要する推奨情報を提示する際に車室内の乗員の感情が平静でないと推定される場合においても、提示した推奨情報の評価を適正に行うことが可能となる。
【実施例4】
【0102】
実施例３においては、推奨情報の提示が急を要する場合であっても、情報提示装置１０が提示した推奨情報を適正に評価するために、推奨情報の提示時に乗員の感情が平静でない際に乗員の感情を抑制させる刺激を発生させてから推奨情報の提示を行う場合について説明した。しかし、情報提示装置は、例えば、車室内又は車外において乗員の感情に影響を及ぼす事象が発生しているかを判定し、乗員の感情に影響を及ぼす事象が発生している場合には乗員の感情を抑制させる刺激を発生させてから推奨情報の提示を行うようにしてもよい。
【0103】
言い換えれば、情報提示部としての制御部５５は、推奨情報を提示しようとする際に事象が発生していると判定される場合は、刺激発生部６０が乗員に向けて感情を抑制させる刺激を発した後に前記推奨情報を提示する。また、言い換えれば、情報提示部としての制御部５５は、状況判定部としての制御部５５により事象が発生していると判定される場合において、推奨情報の提示が緊急を要さない場合には推奨情報を提示せず、推奨情報の提示が緊急を要する場合には乗員の感情を抑制するための刺激を出力した後に推奨情報を提示する。
【0104】
図１０に本願の実施例４に係る情報提示装置１０Ｃを含む情報提示システム４００の構成を示す。実施例４における情報提示装置１０Ｃの構成は、上述した実施例３の情報提示装置１０Ｂと基本的に同じ構成であるが、自動車Ｍの車外の状況を示す情報を取得する車外カメラ４２、車外マイク４３及び車外センサ４４を含む車外状況取得デバイス４０を有する点で異なる。また、車外状況取得デバイス４０は、上述した実施例２の情報提示装置１０Ａと同様である。
【0105】
情報提示装置１０Ｃは、推奨情報の提示時において、車室内又は車外において乗員の感情に影響を及ぼす事象が発生していると判定した場合、刺激発生部６０から乗員の感情を抑制する刺激を発生させた後に当該推奨情報を提示する。
【0106】
これにより、情報提示装置１０Ｂは、急を要する推奨情報を提示する際に車室内又は車外において乗員の感情に影響を及ぼす事象が発生している場合においても、提示した推奨情報の評価を適正に行うことが可能となる。
【0107】
以下に、情報提示装置として機能する際の情報提示装置１０Ｃの動作ルーチンの一例について説明する。
【0108】
図１１は、動作ルーチンの一例としての情報提示ルーチンＲ５を示す図である。図１１に示す情報提示ルーチンＲ５は、情報提示装置１０Ｃの動作ルーチンのうち、推奨情報を提示するまでのルーチンを示している。なお、情報提示ルーチンＲ５のうちステップＳ４０１及びＳ４０２の処理は、それぞれ図３に示した情報提示ルーチンＲ１のステップＳ１０１及びＳ１０２と対応し、その処理内容も同様であるため説明は割愛する。また、推奨情報の提示以降のルーチンにおいては、図４に示した情報提示ルーチンＲ２と同様である。本実施例４の説明においては、実施例１と重複する図４に示した情報提示ルーチンＲ２の説明は割愛する。
【0109】
ステップＳ４０２において、制御部５５が推奨情報を発見したと判定された後、制御部５５は、車内状況取得デバイス２０から車内状況情報を取得する（ステップＳ４０３）。
【0110】
次に、制御部５５は、車内状況情報に基づいて車室内において乗員の感情に影響を及ぼす事象が発生しているかを判定する（ステップＳ４０４）。
【0111】
ステップＳ４０４において、制御部５５が車室内において乗員の感情に影響を及ぼす事象が発生していないと判定した場合（ステップＳ４０４：Ｎｏ）、制御部５５は、車外状況取得デバイス４０から車外状況情報を取得する（ステップＳ４０５）。
【0112】
次に、制御部５５は、車外状況情報に基づいて車外において乗員の感情に影響を及ぼす事象が発生しているかを判定する（ステップＳ４０６）。
【0113】
ステップＳ４０６において、制御部５５が車外において乗員の感情に影響を及ぼす事象が発生していないと判定した場合（ステップＳ４０６：Ｎｏ）、制御部５５は、図４に示した推奨情報の提示以降のルーチンである情報提示ルーチンＲ２の処理に移行し、提示した推奨情報に対する評価を行う。
【0114】
ステップＳ４０４又はステップＳ４０６において、制御部５５が車室内又は車外において乗員の感情に影響を及ぼす事象が発生していると判定した場合（ステップＳ４０４：Ｙｅｓ又はステップＳ４０６：Ｙｅｓ）、制御部５５は、ステップＳ４０１で発見した推奨情報が急を要する情報であるかを判定する（ステップＳ４０７）。この判定は、図９で示した情報提示ルーチンＲ４のステップＳ３０５と同様である。具体的には、例えば、制御部５５が、ＧＰＳ受信機４１が受信する自動車Ｍの現在位置と記憶部５３に記録されている地図情報とを照らし合わせ、当該推奨情報へ至る経路への分岐点が所定の距離の範囲内であるか等によって判定する。
【0115】
ステップＳ４０７において、制御部５５が推奨情報が急を要さない情報であると判定した場合（ステップＳ４０７：Ｎｏ）、制御部５５は、ステップＳ４０３の処理に戻り、車室内及び車外の事象が落着したと判定されるまで又は推奨情報が急を要する情報となるまで待機する。
【0116】
ステップＳ４０７において、制御部５５が推奨情報が急を要する情報であると判定した場合（ステップＳ４０７：Ｙｅｓ）、制御部５５は、出力部３９を介して刺激発生部６０から乗員の感情を抑制させる刺激を出力させる（ステップＳ４０８）。乗員の感情を抑制させる刺激は、上述の通り、乗員の五感を刺激してリラックス効果を与える刺激である。
【0117】
なお、実施例２と同様に、本ステップの処理の実行後、制御部５５は、例えば、乗員の感情が抑制されたと考えられるまで所定の時間の間待機するようにしてもよい。また、乗員の感情が抑制されたと考えられるまで所定の時間は、推定された乗員の感情の種類に応じて可変に変更するようにしてもよい。また、制御部５５は、本ステップの後に再度乗員の感情を推定し、乗員の感情が抑制されるまで繰り返し乗員の感情を抑制させる刺激を出力するようにしてもよい。
【0118】
その後、制御部５５は、図４に示した推奨情報の提示以降のルーチンである情報提示ルーチンＲ２の処理に移行し、提示した推奨情報に対する評価を行う。
【0119】
これにより、情報提示装置１０Ｂは、急を要する推奨情報を提示する際に車室内又は車外において乗員の感情に影響を及ぼす事象が発生している場合においても、提示した推奨情報の評価を適正に行うことが可能となる。
【0120】
なお、上述した実施例１～４の各々は、一例に過ぎない。例えば、上記した実施例の各々は組み合わせることができる。
【0121】
例えば、実施例１の情報提示装置１０と実施例３の情報提示装置１０Ｂを組み合わせ、推奨情報が急を要する情報であったとしても、車室内の乗員の感情の種類に応じて推奨情報の提示を行うか中断するかを判定するようにしてもよい。具体的には、乗員の感情が平静でない場合、乗員の感情を抑制させる刺激を発生させた後に推奨情報の提示を行う、又は乗員の感情情報の提示を中断する等の判定を乗員の感情の種類に基づいて行ってもよい。
【0122】
また、例えば、全ての実施例を組み合わせて、乗員の感情が平静であるか否か、車室内における感情に影響を及ぼす事象の有無、車外における感情に影響を及ぼす事象の有無のそれぞれのパターンによって、乗員の感情を抑制させる刺激を発生させた後に推奨情報の提示を行う、又は乗員の感情情報の提示を中断する等の判定を行ってもよい。
【0123】
具体的には、例えば、乗員の感情が平静であっても車室内において乗員の感情に影響を及ぼす事象が判定又は予測される場合には、乗員の感情を抑制させる刺激を発生させた後に推奨情報の提示を行うようにしてもよい。一方、乗員の感情が平静であっても車外において乗員の感情に影響を及ぼす事象が判定又は予測される場合には、推奨情報の提示を中断するようにしてもよい。
【0124】
また、例えば、乗員の感情に影響を及ぼす事象が車室内では発生しているが車外では発生していない場合には、乗員の感情を抑制させる刺激を発生させた後に推奨情報の提示を行うようにしてもよい。一方、乗員の感情に影響を及ぼす事象が車室内では発生していないが車外では発生している場合には、推奨情報の提示を中断するようにしてもよい。
【0125】
上記の組み合わせ例に加え、推定される乗員の感情の種類に基づいて、推奨情報の提示パターンをさらに加えるようにしてもよい。
【0126】
また、実施例１～４では、情報提示装置１０、１０Ａ、１０Ｂ、及び１０Ｃはいずれも自動車Ｍに取り付けられた装置として説明したが、これに限定されない。本発明の情報提示装置は、ユーザによって携帯されるスマートフォンやタブレット等の携帯機器であってもよい。この場合、本発明の情報提示装置としての携帯機器は、自動車Ｍに搭載された車内状況取得デバイス２０、情報提示デバイス３０、車外状況取得デバイス４０、及び刺激発生部６０の少なくとも一部と無線または有線により通信接続されてもよい。
【0127】
または、本発明の情報提示装置は、自動車Ｍの外部に設置されたサーバ装置であってもよい。この場合、本発明の情報提示装置としての携帯機器は、自動車Ｍに搭載された車内状況取得デバイス２０、情報提示デバイス３０、車外状況取得デバイス４０、及び刺激発生部６０の少なくとも一部と無線ネットワークを介して通信接続されてもよい。
【符号の説明】
【0128】
１００ 情報提示システム
２００ 情報提示システム
３００ 情報提示システム
４００ 情報提示システム
１０ 情報提示装置
２０ 車内状況取得デバイス
２１ 車内カメラ
２２ 車内マイク
３０ 情報提示デバイス
３１ 車内スピーカ
３２ ディスプレイ
４０ 車外状況取得デバイス
４１ ＧＰＳ受信機
４２ 車外カメラ
４３ 車外マイク
４４ 車外センサ
５１ システムバス
５３ 記憶部
５５ 制御部
５７ 入力部
５９ 出力部
６０ 刺激発生部
２００ 情報提示システム
３００ 情報提示システム
４００ 情報提示システム
１０ 情報提示装置
２０ 車内状況取得デバイス
２１ 車内カメラ
２２ 車内マイク
３０ 情報提示デバイス
３１ 車内スピーカ
３２ ディスプレイ
４０ 車外状況取得デバイス
４１ ＧＰＳ受信機
４２ 車外カメラ
４３ 車外マイク
４４ 車外センサ
５１ システムバス
５３ 記憶部
５５ 制御部
５７ 入力部
５９ 出力部
６０ 刺激発生部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】