知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2025098901
(43)【公開日】2025-07-02
(54)【発明の名称】情報処理方法、情報処理装置及びプログラム
(51)【国際特許分類】
G06F 3/01 20060101AFI20250625BHJP
G06F 3/0481 20220101ALI20250625BHJP
B60R 16/02 20060101ALI20250625BHJP
【ＦＩ】
G06F3/01 510
G06F3/0481
B60R16/02 640K
【審査請求】未請求
【請求項の数】12
【出願形態】ＯＬ
(21)【出願番号】P 2023215320
(22)【出願日】2023-12-20
(71)【出願人】
【識別番号】000003997
【氏名又は名称】日産自動車株式会社
(71)【出願人】
【識別番号】507308902
【氏名又は名称】ルノー エス．ア．エス．
【氏名又は名称原語表記】ＲＥＮＡＵＬＴ Ｓ．Ａ．Ｓ．
【住所又は居所原語表記】１２２－１２２ ｂｉｓ， ａｖｅｎｕｅ ｄｕ Ｇｅｎｅｒａｌ Ｌｅｃｌｅｒｃ， ９２１００ Ｂｏｕｌｏｇｎｅ－Ｂｉｌｌａｎｃｏｕｒｔ， Ｆｒａｎｃｅ
(74)【代理人】
【識別番号】110002468
【氏名又は名称】弁理士法人後藤特許事務所
(72)【発明者】
【氏名】茂田 美友紀
(72)【発明者】
【氏名】高松 敦
(72)【発明者】
【氏名】柳 拓良
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA41
5E555BA23
5E555BB23
5E555BC01
5E555CB65
5E555DA21
5E555DA23
5E555DB32
5E555DB53
5E555DC19
5E555EA04
5E555FA00
(57)【要約】
【課題】必要に応じてエージェントの存在感を調整することで、ドライバとエージェントとの一体感を高め、エージェントからドライバに伝える情報の伝達能力を高める。
【解決手段】ドライバＤ１に提示する所定情報が存在するか否かを判定する判定処理（ステップＳ５１６、Ｓ５１７）と、所定情報が存在する場合には、ドライバＤ１の視覚に入り易い場所に位置する第１出力機器２００（又は第２出力機器２１０）を利用して、エージェント（エージェント画像ＡＧ１、ＡＧ２）をドライバＤ１に視認可能とした状態で、エージェント画像ＡＧ１、ＡＧ２を用いて所定情報を提示させ（ステップＳ５１８乃至Ｓ５２１）、所定情報が存在しない場合には、周辺機器２２０を利用して、ドライバＤ１に認識され難い態様（発熱）でエージェントの存在を感じさせる演出を実行（ステップＳ５２５乃至Ｓ５２７）する制御処理とを含む。
【選択図】図１２
【解決手段】ドライバＤ１に提示する所定情報が存在するか否かを判定する判定処理（ステップＳ５１６、Ｓ５１７）と、所定情報が存在する場合には、ドライバＤ１の視覚に入り易い場所に位置する第１出力機器２００（又は第２出力機器２１０）を利用して、エージェント（エージェント画像ＡＧ１、ＡＧ２）をドライバＤ１に視認可能とした状態で、エージェント画像ＡＧ１、ＡＧ２を用いて所定情報を提示させ（ステップＳ５１８乃至Ｓ５２１）、所定情報が存在しない場合には、周辺機器２２０を利用して、ドライバＤ１に認識され難い態様（発熱）でエージェントの存在を感じさせる演出を実行（ステップＳ５２５乃至Ｓ５２７）する制御処理とを含む。
【選択図】図１２
【特許請求の範囲】
【請求項1】
車両における複数の機器を利用してドライバとのコミュニケーションを行うための制御を実行する情報処理方法であって、
前記ドライバに提示する所定情報が存在するか否かを判定する判定処理と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御処理と、を含む
情報処理方法。
前記ドライバに提示する所定情報が存在するか否かを判定する判定処理と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御処理と、を含む
情報処理方法。
【請求項2】
請求項１に記載の情報処理方法であって、
前記第１機器は、表示機器であり、
前記制御処理では、
前記所定情報が存在する場合には、前記エージェントを表すエージェント画像を前記第１機器に表示させ、
前記所定情報が存在しない場合には、前記第１機器及び前記第２機器の双方に前記エージェント画像を表示させずに、前記ドライバの五感のうちの視覚以外の感覚を用いて前記エージェントの存在を感じさせる前記演出を前記第２機器により実行する、
情報処理方法。
前記第１機器は、表示機器であり、
前記制御処理では、
前記所定情報が存在する場合には、前記エージェントを表すエージェント画像を前記第１機器に表示させ、
前記所定情報が存在しない場合には、前記第１機器及び前記第２機器の双方に前記エージェント画像を表示させずに、前記ドライバの五感のうちの視覚以外の感覚を用いて前記エージェントの存在を感じさせる前記演出を前記第２機器により実行する、
情報処理方法。
【請求項3】
請求項１に記載の情報処理方法であって、
前記第２機器は、前記ドライバの周辺に設置されている周辺機器であり、
前記制御処理では、前記第２機器の温度を調整する温度調整処理と、前記第２機器を振動させる振動処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定音を出力させる音出力処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定の光を出力させる光出力処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定の匂いを発生させる匂い発生処理と、前記第２機器又はその方向からの反動を変化させる反動処理と、前記第１機器から前記第２機器に前記エージェントが移動する移動処理とのうちの少なくとも１つを実行することにより、前記演出を実行する、
情報処理方法。
前記第２機器は、前記ドライバの周辺に設置されている周辺機器であり、
前記制御処理では、前記第２機器の温度を調整する温度調整処理と、前記第２機器を振動させる振動処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定音を出力させる音出力処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定の光を出力させる光出力処理と、前記第２機器又はその方向から前記エージェントの存在を認識可能な所定の匂いを発生させる匂い発生処理と、前記第２機器又はその方向からの反動を変化させる反動処理と、前記第１機器から前記第２機器に前記エージェントが移動する移動処理とのうちの少なくとも１つを実行することにより、前記演出を実行する、
情報処理方法。
【請求項4】
請求項３に記載の情報処理方法であって、
前記周辺機器は、前記ドライバの周辺に設置され、前記ドライバが触れることが可能な機器であり、シフトレバー、ステアリングホイール、着座シート、アームレスト、シートベルトのうちの少なくとも１つである、
情報処理方法。
前記周辺機器は、前記ドライバの周辺に設置され、前記ドライバが触れることが可能な機器であり、シフトレバー、ステアリングホイール、着座シート、アームレスト、シートベルトのうちの少なくとも１つである、
情報処理方法。
【請求項5】
請求項１に記載の情報処理方法であって、
前記車両の位置情報及び地図情報に基づく前記ドライバの視線の予測処理と、前記ドライバの眼を含む画像に基づく前記ドライバの視線の検出処理とのうちの少なくとも１つを実行することで、前記ドライバの視線方向を検出する視線方向検出処理、をさらに含み、
前記制御処理では、前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視線方向に基づいて求められる前記ドライバの視覚に入る機器を前記第１機器として利用する、
情報処理方法。
前記車両の位置情報及び地図情報に基づく前記ドライバの視線の予測処理と、前記ドライバの眼を含む画像に基づく前記ドライバの視線の検出処理とのうちの少なくとも１つを実行することで、前記ドライバの視線方向を検出する視線方向検出処理、をさらに含み、
前記制御処理では、前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視線方向に基づいて求められる前記ドライバの視覚に入る機器を前記第１機器として利用する、
情報処理方法。
【請求項6】
請求項１に記載の情報処理方法であって、
前記第１機器は、表示機器であり、
前記車両の外部の環境に関する環境情報と、前記ドライバの運転行動に関する運転行動情報とのうちの少なくとも１つに基づいて、前記ドライバの運転負荷を判定する運転負荷判定処理、をさらに含み、
前記制御処理では、前記運転負荷が所定値未満である場合には、前記エージェントを表すエージェント画像を前記第１機器に表示させ、前記エージェント画像を用いて前記コミュニケーションを実行する、
情報処理方法。
前記第１機器は、表示機器であり、
前記車両の外部の環境に関する環境情報と、前記ドライバの運転行動に関する運転行動情報とのうちの少なくとも１つに基づいて、前記ドライバの運転負荷を判定する運転負荷判定処理、をさらに含み、
前記制御処理では、前記運転負荷が所定値未満である場合には、前記エージェントを表すエージェント画像を前記第１機器に表示させ、前記エージェント画像を用いて前記コミュニケーションを実行する、
情報処理方法。
【請求項7】
請求項６に記載の情報処理方法であって、
前記第１機器は、第１表示部と、前記第１表示部よりも前記ドライバから離れた場所に位置する第２表示部とを含む複数の表示機器であり、
前記制御処理では、
前記運転負荷が所定値未満である場合には、前記エージェント画像を前記第１表示部に表示させ、
前記運転負荷が所定値以上である場合において、前記所定情報が存在するときには、前記エージェント画像を前記第２表示部に表示させ、前記エージェント画像を用いて前記所定情報を提示させる、
情報処理方法。
前記第１機器は、第１表示部と、前記第１表示部よりも前記ドライバから離れた場所に位置する第２表示部とを含む複数の表示機器であり、
前記制御処理では、
前記運転負荷が所定値未満である場合には、前記エージェント画像を前記第１表示部に表示させ、
前記運転負荷が所定値以上である場合において、前記所定情報が存在するときには、前記エージェント画像を前記第２表示部に表示させ、前記エージェント画像を用いて前記所定情報を提示させる、
情報処理方法。
【請求項8】
請求項１から７の何れかに記載の情報処理方法であって、
前記制御処理では、前記第１機器を利用して前記エージェントを用いた前記所定情報の提示を実行する第１制御と、前記第２機器を利用して前記演出を実行する第２制御とを切り替える場合には、前記第１機器及び前記第２機器間を前記エージェントが移動する移動演出を実行する、
情報処理方法。
前記制御処理では、前記第１機器を利用して前記エージェントを用いた前記所定情報の提示を実行する第１制御と、前記第２機器を利用して前記演出を実行する第２制御とを切り替える場合には、前記第１機器及び前記第２機器間を前記エージェントが移動する移動演出を実行する、
情報処理方法。
【請求項9】
請求項１から７の何れかに記載の情報処理方法であって、
前記所定情報は、前記ドライバに提示する支援情報のうち、重要度が閾値以上である支援情報である、
情報処理方法。
前記所定情報は、前記ドライバに提示する支援情報のうち、重要度が閾値以上である支援情報である、
情報処理方法。
【請求項10】
請求項１から７の何れかに記載の情報処理方法であって、
前記第２機器は、前記ドライバの視覚に入り難い場所に位置する機器である、
情報処理方法。
前記第２機器は、前記ドライバの視覚に入り難い場所に位置する機器である、
情報処理方法。
【請求項11】
車両における複数の機器を利用してドライバとのコミュニケーションを行うための制御を実行する情報処理装置であって、
前記ドライバに提示する所定情報が存在するか否かを判定する判定部と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御部と、を備える
情報処理装置。
前記ドライバに提示する所定情報が存在するか否かを判定する判定部と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御部と、を備える
情報処理装置。
【請求項12】
車両における複数の機器を利用してドライバとのコミュニケーションを行うための制御を実行するコンピュータに実行させるためのプログラムであって、
前記ドライバに提示する所定情報が存在するか否かを判定する判定処理と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御処理と、
をコンピュータに実行させるためのプログラム。
前記ドライバに提示する所定情報が存在するか否かを判定する判定処理と、
前記所定情報が存在する場合には、前記複数の機器のうち、前記ドライバの視覚に入り易い場所に位置する第１機器を利用して、前記コミュニケーションを行うためのエージェントを前記ドライバに視認可能とした状態で、前記エージェントを用いて前記所定情報を提示させ、
前記所定情報が存在しない場合には、前記複数の機器のうち、前記第１機器以外の第２機器を利用して、前記ドライバに認識され難い態様で前記エージェントの存在を感じさせる演出を実行する制御処理と、
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ユーザとのコミュニケーションを行うことが可能なエージェントを制御する情報処理方法、情報処理装置及びプログラムに関する。
【背景技術】
【0002】
従来、車両において各種情報をユーザに伝える技術が提案されている。例えば、表示部にキャラクタ画像（エージェント画像）を表示させ、ユーザによる車両の運転を支援する技術が提案されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０２０－１７９８４４号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
上述した従来技術では、ユーザに情報を案内するときだけでなく、待機中であってもエージェント画像が表示され続ける。このように、エージェントがユーザと一緒にいるように感じさせるために、エージェント画像を大きく動かさずに、エージェント画像を出現したままにすると、ユーザはエージェント画像の存在を煩わしく感じてしまうおそれがある。そこで、ユーザに情報を案内しないときには、エージェント画像を消去することが考えられる。しかし、エージェント画像を消去してしまうと、そのエージェントの存在をユーザが認識できなくなるため、そのエージェントがユーザと一緒にいるように感じ難くなる。この場合には、そのエージェントに対する信頼度、愛着等が低下し、そのエージェントからユーザに伝える情報の伝達能力が低下するおそれがある。
【0005】
本発明は、必要に応じてエージェントの存在感を調整することで、ドライバとエージェントとの一体感を高め、エージェントからドライバに伝える情報の伝達能力を高めることを目的とする。
【課題を解決するための手段】
【0006】
本発明の一態様は、車両における複数の機器を利用してドライバとのコミュニケーションを行うための制御を実行する情報処理方法である。この情報処理方法は、ドライバに提示する所定情報が存在するか否かを判定する判定処理と、所定情報が存在する場合には、複数の機器のうち、ドライバの視覚に入り易い場所に位置する第１機器を利用して、コミュニケーションを行うためのエージェントをドライバに視認可能とした状態で、エージェントを用いて所定情報を提示させ、所定情報が存在しない場合には、複数の機器のうち、第１機器以外の第２機器を利用して、ドライバに認識され難い態様でエージェントの存在を感じさせる演出を実行する制御処理とを含む。
【発明の効果】
【0007】
本発明によれば、必要に応じてエージェントの存在感を調整することで、ドライバとエージェントとの一体感を高め、エージェントからドライバに伝える情報の伝達能力を高めることができる。
【図面の簡単な説明】
【0008】
【発明を実施するための形態】
【0009】
以下、添付図面を参照しながら本発明の実施形態について説明する。
【0010】
［エージェント画像の表示例］
図１乃至図４は、車両Ｃ１の車室内の構成例を簡略化して示す図である。なお、図１乃至図４では、運転席、助手席（図示省略）よりも前側を、車両Ｃ１の前後方向の後側から見た場合の車両Ｃ１の車室内を簡略化して示す。また、図１では、説明を容易にするため、ダッシュボード２、ステアリングホイール３、フロントウインド４、バックミラー５、シフトレバー６、第１出力機器２００、第２出力機器２１０以外の図示は省略する。なお、図１乃至図４に示す例では、説明を容易にするため、シフトレバー６の構成として、シフトレバー６の上部のみを簡略化して示す。
図１乃至図４は、車両Ｃ１の車室内の構成例を簡略化して示す図である。なお、図１乃至図４では、運転席、助手席（図示省略）よりも前側を、車両Ｃ１の前後方向の後側から見た場合の車両Ｃ１の車室内を簡略化して示す。また、図１では、説明を容易にするため、ダッシュボード２、ステアリングホイール３、フロントウインド４、バックミラー５、シフトレバー６、第１出力機器２００、第２出力機器２１０以外の図示は省略する。なお、図１乃至図４に示す例では、説明を容易にするため、シフトレバー６の構成として、シフトレバー６の上部のみを簡略化して示す。
【0011】
第１出力機器２００、第２出力機器２１０は、車両Ｃ１の内部に設置される出力機器であり、情報処理装置１１０（図３参照）からの指示に基づいて各種出力動作を実行する。第１出力機器２００は、ダッシュボード２の中央付近に設置される機器であり、表示部２０１及び音出力部２０２（図５参照）を備える。また、第２出力機器２１０は、ステアリングホイール３に設置される機器であり、表示部２１１及び音出力部２１２（図５参照）を備える。
【0012】
例えば、第１出力機器２００、第２出力機器２１０は、各種情報を提供可能な１又は複数の機器からなる車載システムである。第１出力機器２００、第２出力機器２１０として、例えば、ナビゲーション機器、オーディオ機器、ＤＶＤ機器、ＴＶチューナー機器、ＩＶＩ（In-Vehicle Infotainment）等のうちの少なくとも１つを用いることが可能である。なお、第１出力機器２００、第２出力機器２１０のそれぞれに表示させる画像については、フロントウインド４において実現されるＨＵＤ（Head Up Display）を用いて表示させることも可能である（図４参照）。また、ドライバＤ１が所持することが可能な携帯型の機器（又は車両Ｃ１に設置可能な機器）、例えば、スマートフォン、タブレット端末、携帯型のパーソナルコンピュータ等の情報処理装置を用いてもよい。
【0013】
また、第１出力機器２００、第２出力機器２１０は、車両Ｃ１に乗車するユーザ（ドライバＤ１を含む）とのコミュニケーションを行うことが可能な出力動作を実行する。例えば、第１出力機器２００の表示部２０１には、ユーザとのコミュニケーションを行うことが可能なエージェント画像ＡＧ１（図１参照）が表示され、エージェント画像ＡＧ１を用いた各種演出が実行される。また、例えば、第２出力機器２１０の表示部２１１には、ユーザとのコミュニケーションを行うことが可能なエージェント画像ＡＧ２（図２参照）が表示され、エージェント画像ＡＧ２を用いた各種演出が実行される。また、例えば、フロントウインド４（ＨＵＤ表示領域）には、ユーザとのコミュニケーションを行うことが可能なエージェント画像ＡＧ３（図４参照）が表示され、エージェント画像ＡＧ３を用いた各種演出が実行される。なお、フロントウインド４（ＨＵＤ表示領域）に表示される画像については、情報処理装置１１０（図３参照）からの指示に基づいて第３出力機器（図示省略）が各種出力動作を実行する。なお、第３出力機器は、公知のＨＵＤ技術を用いてＨＵＤ表示を実現するための表示機器である。すなわち、第１出力機器２００、第２出力機器２１０、フロントウインド４（ＨＵＤ表示領域）は、ユーザとのコミュニケーションを行うことが可能なエージェント機器として機能する。なお、以下では、主に、第１出力機器２００、第２出力機器２１０をエージェント機器として機能させる例を示すが、フロントウインド４（ＨＵＤ表示領域）についても同様にエージェント機器として機能させることが可能である。
【0014】
エージェント画像ＡＧ１乃至ＡＧ３は、ユーザとのコミュニケーションを行うことが可能な物体を表す画像である。本実施形態では、人間の顔を模した画像をエージェント画像ＡＧ１乃至ＡＧ３とする例を示す。ただし、エージェント画像ＡＧ１乃至ＡＧ３はこれに限定されず、例えば、人間の全身又は一部（例えば上半身）を模した画像をエージェント画像ＡＧ１乃至ＡＧ３としてもよく、ウサギ、豚等のような動物（又はその動物の顔）を模した画像、仮想物の生物（例えばアニメのキャラクターの顔）（又はその顔）を模した画像をエージェント画像ＡＧ１乃至ＡＧ３としてもよい。このように、擬生物化された画像をエージェント画像ＡＧ１乃至ＡＧ３とすることが可能である。
【0015】
第１出力機器２００、第２出力機器２１０は、情報処理装置１１０（図３参照）からの指示に基づいて運転支援に関する各種の動作（例えばエージェント画像ＡＧ１、ＡＧ２に関する動作）を実行する。例えば、第１出力機器２００、第２出力機器２１０は、情報処理装置１１０の制御に基づいて、ドライバＤ１が運転操作をする際における運転支援、周囲の施設等に関する各種情報を出力する。なお、本実施形態では、ドライバＤ１の運転負荷が閾値以上である場合には、第１出力機器２００に表示されたエージェント画像ＡＧ１を用いて各種情報を出力し、ドライバＤ１の運転負荷が閾値未満である場合には、第２出力機器３００に表示されたエージェント画像ＡＧ２を用いて各種情報を出力する例を示す。なお、ドライバＤ１の運転負荷が閾値以上である場合は、例えば、車両Ｃ１が走行中の場合である。また、ドライバＤ１の運転負荷が閾値未満である場合は、例えば、車両Ｃ１が停車中の場合である。なお、ドライバＤ１の運転負荷の検出方法については、後述する。
【0016】
なお、エージェント画像ＡＧ１等を用いた運転支援として、前方又は後方の動体の報知等が想定される。例えば、前方の動体の報知として、「この先踏切だから気を付けてよ」と音声出力したり、「前方に人がいるよ」と音声出力したりすることができる。これらの各出力時にエージェント画像ＡＧ１等を用いて各種動作を実行させることが可能である。すなわち、エージェント画像ＡＧ１等を用いて運転支援を実行可能である。また、例えば、第１出力機器２００、第２出力機器２１０は、情報処理装置１１０の制御に基づいて、エージェント画像ＡＧ１等を用いた各種処理を実行する。例えば、第１出力機器２００、第２出力機器２１０は、エージェント画像ＡＧ１、ＡＧ２を用いて、ドライバＤ１との間で各種やりとりを行うコミュニケーション処理を実行する。例えば、第１出力機器２００、第２出力機器２１０は、エージェント画像ＡＧ１、ＡＧ２を用いて、ドライバＤ１との間で各種会話のやりとりを行ったり、ドライバＤ１が好む情報を提供したりする。
【0017】
ここで、本実施形態では、ドライバＤ１の運転負荷が閾値以上であり、かつ、ドライバＤ１に提示する所定情報が存在しない場合には、第１出力機器２００及び第２出力機器２１０の双方にはエージェント画像を表示させず、他の機器を用いてエージェントの存在を感じさせる演出を実行する。他の機器として、例えば、ドライバＤ１の周辺に設置されている周辺機器であって、ドライバＤ１が触れることが可能な機器を利用することが可能である。この機器として、例えば、シフトレバー６、ステアリングホイール３、着座シート、アームレスト、シートベルトのうちの少なくとも１つを用いることが可能である。なお、図３では、シフトレバー６を用いる例を示す。また、これらの機器を用いて、ドライバＤ１に認識され難い態様でエージェントの存在を感じさせる演出を実行する。なお、ドライバＤ１の周辺に設置されている周辺機器のうち、ドライバＤ１の視覚に入り難い場所に位置する機器（例えば、着座シート、アームレスト、シートベルト）を利用することも可能である。
【0018】
エージェントの存在を感じさせる演出は、例えば、周辺機器２２０の接触部における触感を用いてエージェントの存在を感じさせることを意味する。例えば、機器の温度を調整して機器の温度でエージェントの存在を感じさせることが可能である。例えば、シフトレバー６にヒータ部２２１（図５参照）を設け、ヒータ部２２１を発熱させることが可能である。これにより、シフトレバー６に接触したドライバＤ１に、生物的な温もりを感じさせることが可能であり、シフトレバー６においてエージェントの存在感を発生させることが可能である。なお、シフトレバー６を発熱する場合の温度については、生物的な温もりを感じさせる程度の温度（例えば、３０乃至４０度態度）とすることが好ましい。また、これらの温度については、実験又はシミュレーション等に基づいて適宜設定可能である。
【0019】
同様に、ステアリングホイール３、着座シート、アームレスト、シートベルトのそれぞれについても、各機器の温度を調整して機器の温度でエージェントの存在を感じさせることが可能である。例えば、ステアリングホイール３については、ドライバＤ１が握る部分にヒータ部２２１（例えば、ヒートシート）を設けることが可能である。また、着座シートについては、ドライバＤ１の身体が接触する部分（例えば、背中、お尻が接触する部分）にヒータ部２２１（例えば、ヒートシート）を設けることが可能である。また、アームレストについては、ドライバＤ１の身体が接触する部分（例えば、肘が接触する部分）にヒータ部２２１（例えば、ヒートシート）を設けることが可能である。また、シートベルトについては、ドライバＤ１の身体が接触する部分にヒータ部２２１（例えば、ヒートシート）を設けることが可能である。
【0020】
ここで、周辺機器（例えば、シフトレバー６、ステアリングホイール３、着座シート、アームレスト、シートベルト）においてエージェントの存在を表現する場合には、他の出力機器から移動演出があった後に、エージェントの存在を継続して表現する演出（すなわち発熱）を実行してもよく、必要に応じてエージェントの存在を断続的に表現する演出（すなわち発熱）を実行してもよい。例えば、ドライバＤ１が接触した部分について、エージェントの存在を表現する演出（すなわち発熱）を実行してもよい。例えば、ドライバＤ１が両手でステアリングホイール３を握っている場合には、ステアリングホイール３においてドライバＤ１の手で握られている部分において、エージェントの存在を表現する演出（すなわち発熱）を実行することが可能である。また、例えば、ドライバＤ１の一方の手がシフトレバー６を握った場合には、シフトレバー６においてドライバＤ１の手で握られている部分において、エージェントの存在を表現する演出（すなわち発熱）を実行することが可能である。
【0021】
なお、ドライバＤ１が接触している部分については、各機器に設けられている接触センサに基づいて検出可能である。また、ドライバ状況取得部１２２により取得されたドライバＤ１の画像に基づいて、ドライバＤ１が接触している部分を検出してもよい。この検出処理では、公知の画像認識技術を用いることが可能である。
【0022】
また、必要に応じてエージェントの存在を移動させてもよい。例えば、ドライバＤ１が両手でステアリングホイール３を握っていた後に、ドライバＤ１の一方の手がシフトレバー６を握った場合には、ステアリングホイール３における発熱とともに、シフトレバー６においてドライバＤ１の手で握られている部分を発熱させることが可能である。すなわち、ドライバＤ１が新たに触った部分を瞬間的に温かくすることで、エージェントの存在を表現することが可能である。このように、ドライバＤ１の動きに追従させてエージェントの存在を表現してもよい。この場合に、ドライバＤ１の動きに追従させてその移動先の機器を発熱させ、移動元の機器の発熱を停止してもよい。例えば、ドライバＤ１が両手でステアリングホイール３を握っていた後に、ドライバＤ１の一方の手がシフトレバー６を握った場合には、ステアリングホイール３における発熱を停止し、シフトレバー６においてドライバＤ１の手で握られている部分を発熱させることが可能である。
【0023】
以上では、エージェントの存在を感じさせる演出として、周辺機器２２０（例えばシフトレバー６）の温度を調整して機器の温度でエージェントの存在を感じさせる例を示したが、本実施形態は、これに限定されない。例えば、周辺機器２２０を振動させる振動処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定音を出力させる音出力処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の光を出力させる光出力処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の匂いを発生させる匂い発生処理と、周辺機器２２０又はその方向からの反動を変化させる反動処理と、直前にエージェントを表現していた他の機器から周辺機器２２０にエージェントが移動する移動処理とのうちの少なくとも１つを実行することにより、その演出を実行してもよい。これらの場合には、ドライバＤ１の五感（視覚、聴覚、触覚、味覚、嗅覚）のうちの少なくとも１つを用いてエージェントの存在を感じさせる演出が実行される。
【0024】
例えば、バイブレーション機能を備える振動機器を周辺機器２２０に設けることで、周辺機器２２０を振動させる振動処理を実行することが可能である。例えば、エージェントの存在がわかる程度の振動を振動機器で発生させることで、エージェントの存在を表現する演出を実行することが可能である。なお、発熱、振動等でエージェントの存在を表現する演出は、ドライバＤ１の五感のうちの触覚を用いた表現方法の一例である。
【0025】
また、例えば、周辺機器２２０又はその方向（ドライバＤ１を基準とする方向）にスピーカ（音出力機器）を設けることで、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定音を出力させる音出力処理を実行することが可能である。この場合には、各周辺機器２２０にスピーカを設ける必要はなく、周辺機器２２０から音が発せられたようにドライバＤ１に感じさせることが可能であれば、各周辺機器２２０の付近にスピーカを設けることが可能である。例えば、エージェントの存在がわかる程度の音をスピーカから出力させることで、エージェントの存在を表現する演出を実行することが可能である。この場合に出力させる音として、例えばエージェントに関連する音（例えば、エージェントの声質の音、エージェントの登場音又は退場音）を用いることが可能である。なお、音等でエージェントの存在を表現する演出は、ドライバＤ１の五感のうちの聴覚を用いた表現方法の一例である。
【0026】
また、例えば、周辺機器２２０又はその方向（ドライバＤ１を基準とする方向）に発光機器（例えばＬＥＤ（light Emitting Diode））を設けることで、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の光を出力させる光出力処理を実行することが可能である。この場合には、周辺機器２２０に発光機器を設ける必要はなく、周辺機器２２０から光が発せられたようにドライバＤ１に感じさせることが可能であれば、各周辺機器２２０の付近に発光機器を設けることが可能である。例えば、エージェントの存在がわかる程度の光を発光機器から出力させることで、エージェントの存在を表現する演出を実行することが可能である。この場合に出力させる光として、例えばエージェントに関連する色（例えば、エージェント自体の色、エージェントの装飾品の色、エージェントの背景色）の光を用いることが可能である。なお、光等でエージェントの存在を表現する演出は、ドライバＤ１の五感のうちの視覚を用いた表現方法の一例である。
【0027】
また、例えば、周辺機器２２０又はその方向（ドライバＤ１を基準とする方向）に匂い発生機器を設けることで、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の匂いを発生させる匂い発生処理を実行することが可能である。この場合には、周辺機器２２０に匂い発生機器を設ける必要はなく、周辺機器２２０から匂いが発せられたようにドライバＤ１に感じさせることが可能であれば、周辺機器２２０の付近に匂い発生機器を設けることが可能である。ここで、人間に届く匂いに基づいてその匂いが発生する位置を判断することは困難であることが多い。そこで、匂いを用いる場合には、匂いの強弱、方向等でドライバＤ１からエージェントまでの距離の近さ、方向等を調整可能である。例えば、車両Ｃ１に設置されているエアーコンディショナー（エアコン）に匂い発生機を設け、エージェントの存在を示す方向から風が流れるようにする。又は、エージェントの存在を示す方向に風を送ってもよい。また、エージェントの存在を示す位置をドライバＤ１から近い位置とする場合には、ヘッドレスト側から強い風を送り、強い匂いを発生させることが可能である。一方、エージェントの存在を示す位置をドライバＤ１から遠い位置とする場合には、ダッシュボード２から弱い風を送り、薄い匂いを発生させることが可能である。このように、エージェントの存在がわかる程度の匂いを匂い発生機器から出力させることで、エージェントの存在を表現する演出を実行することが可能である。この場合に出力させる匂いとして、例えばエージェントに関連する匂い（例えば、女性的なイメージのエージェントの場合にはその印象に合う香水の匂い、スポーティなイメージのエージェントの場合には汗の匂い、食欲旺盛なイメージのエージェントの場合には飲食物（例えば生姜焼き）の匂い）を用いることが可能である。なお、匂い等でエージェントの存在を表現する演出は、ドライバＤ１の五感のうちの嗅覚を用いた表現方法の一例である。
【0028】
また、例えば、周辺機器２２０又はその方向（ドライバＤ１を基準とする方向）からの反動を変化させる機器を設けることで、周辺機器２２０又はその方向からの反動を変化させる反動処理を実行することが可能である。ここで示す反動は、例えば、着座シートの固さを固めに変化させること、シートベルトの締め付け感を固めに変化させること等を意味する。なお、反動等でエージェントの存在を表現する演出は、ドライバＤ１の五感のうちの触覚を用いた表現方法の一例である。
【0029】
【0030】
また、例えば、エアコンの風圧を利用してエージェントの存在感を表現してもよい。例えば、エージェントが移動する際に、一時的にエアコンの風圧を強くしてエージェントがエアコンに乗り移る演出を実行することが可能である。
【0031】
ここで、光によりエージェントの存在を表現する場合には、点滅等で緩やかに断続的に発光させてもよく、存在だけを感じさせる弱い光を発光し続けてもよい。また、音によりエージェントの存在を表現する場合には、音を出し続ける必要はなく、必要に応じて音を出力することが好ましい。例えば、エージェントを移動させるときに、その移動を感じさせるため、「今から下に行くね」「今から横に移動するね」等の音声情報を出力することが可能である。また、熱によりエージェントの存在を表現する場合には、継続的に発熱させることが好ましい。
【0032】
ここで、エージェントがドライバＤ１と一緒にいるように感じさせるために、エージェント画像ＡＧ１、ＡＧ２を出現したままにすると、ドライバＤ１はエージェント画像ＡＧ１、ＡＧ２の存在を煩わしく感じてしまうおそれがある。そこで、ドライバＤ１に情報を案内しないときには、エージェント画像ＡＧ１、ＡＧ２を消去することが考えられる。しかし、エージェント画像ＡＧ１、ＡＧ２を消去してしまうと、そのエージェントの存在をドライバＤ１が認識できなくなるため、そのエージェントがドライバＤ１と一緒にいるように感じ難くなる。この場合には、そのエージェントに対する信頼度、愛着等が低下し、そのエージェントからドライバＤ１に伝える情報の伝達能力が低下するおそれがある。
【0033】
そこで、本実施形態では、必要に応じてエージェントの存在感を調整することで、ドライバＤ１とエージェントとの一体感を高め、エージェントからドライバＤ１に伝える情報の伝達能力を高めるようにする。
【0034】
［情報処理システムの構成例］
図５は、車両Ｃ１に設置されている情報処理システム１００のシステム構成の一例を示すブロック図である。
図５は、車両Ｃ１に設置されている情報処理システム１００のシステム構成の一例を示すブロック図である。
【0035】
情報処理システム１００は、音取得部１０１と、ドライバ画像取得部１０２と、車室画像取得部１０３と、車外画像取得部１０４と、情報処理装置１１０と、第１出力機器２００と、第２出力機器２１０と、周辺機器２２０とを備える。情報処理装置１１０は、ドライバＤ１とのコミュニケーションを行うことが可能な第１出力機器２００、第２出力機器２１０、周辺機器２２０を制御する機器の一例である。
【0036】
なお、情報処理装置１１０、第１出力機器２００、第２出力機器２１０、周辺機器２２０は、有線通信又は無線通信を利用した通信方式によって接続される。また、情報処理装置１１０は、無線通信を利用した通信方式によってネットワーク２０に接続されている。ネットワーク２０は、公衆回線網、インターネット等のネットワークである。なお、第１出力機器２００、第２出力機器２１０、周辺機器２２０についても、無線通信を利用した通信方式によってネットワーク２０に接続してもよい。なお、図５では、情報処理装置１１０、第１出力機器２００、第２出力機器２１０を別体として構成する例を示すが、情報処理装置１１０、第１出力機器２００、第２出力機器２１０を一体の機器として構成してもよい。
【0037】
音取得部１０１は、車両Ｃ１の内部に設けられ、車両Ｃ１の内部の音を取得するものであり、取得された音に関する音情報を情報処理装置１１０に出力する。音取得部１０１として、例えば、１又は複数のマイクや音取得センサを用いることができる。
【0038】
ドライバ画像取得部１０２は、車両Ｃ１に乗車するドライバＤ１を撮像して画像（画像データ）を生成するものであり、生成された画像に関する画像情報を情報処理装置１１０に出力する。ドライバ画像取得部１０２は、車両Ｃ１のうちの少なくとも内部に設けられ、車両Ｃ１に乗車するドライバＤ１を撮像して画像（画像データ）を生成する。ドライバ画像取得部１０２は、例えば、ドライバＤ１を撮像することが可能な１又は複数のカメラ機器や画像センサにより構成される。例えば、１つのドライバ画像取得部１０２を車両Ｃ１の内部の前方（例えば天井）に設け、車両Ｃ１の前方からのドライバＤ１を撮像して画像（画像データ）を生成することが可能である。例えば、フロントウインド４の上部、すなわち、バックミラー５の上側にドライバ画像取得部１０２を設けることができる。なお、ドライバ画像取得部１０２及び車室画像取得部１０３については、同一の機器を用いてもよく、異なる機器として構成してもよい。
【0039】
車室画像取得部１０３は、車両Ｃ１の内部の被写体を撮像して画像（画像データ）を生成するものであり、生成された画像に関する画像情報を情報処理装置１１０に出力する。車室画像取得部１０３は、車両Ｃ１のうちの少なくとも内部（例えば天井）に設けられ、車両Ｃ１の内部の被写体を撮像して画像（画像データ）を生成する。車室画像取得部１０３は、例えば、被写体を撮像することが可能な１又は複数のカメラ機器や画像センサにより構成される。例えば、１つの車室画像取得部１０３を車両Ｃ１の前方に設け、前方からの被写体を撮像して画像（画像データ）を生成してもよく、他の車室画像取得部１０３を車両Ｃ１の後方に設け、後方からの被写体を撮像して画像（画像データ）を生成してもよい。
【0040】
車外画像取得部１０４は、車両Ｃ１の外部の被写体を撮像して画像（画像データ）を生成するものであり、生成された画像に関する画像情報を情報処理装置１１０に出力する。なお、２以上の車外画像取得部１０４を備え、これらの車外画像取得部１０４のうちの全部又は一部の画像を用いてもよい。例えば、１つの車外画像取得部１０４を車両Ｃ１の前方に設け、車両Ｃ１の前方からの被写体を撮像して画像（画像データ）を生成してもよく、他の車外画像取得部１０４を車両Ｃ１の後方に設け、車両Ｃ１からの後方の被写体を撮像して画像（画像データ）を生成してもよい。また、車両Ｃ１の全方位に存在する被写体と、車両Ｃ１の内部の被写体とを取得可能な１又は複数の機器、例えば、３６０度カメラを用いてもよい。
【0041】
なお、ドライバ画像取得部１０２、車室画像取得部１０３及び車外画像取得部１０４は、例えば、レンズにより集光された被写体からの光を入射する撮像素子（イメージセンサ）と、その撮像素子により生成された画像データについて所定の画像処理を施す画像処理部とにより構成される。撮像素子として、例えば、ＣＣＤ（Charge Coupled Device）型やＣＭＯＳ（Complementary Metal Oxide Semiconductor）型の撮像素子を用いることができる。
【0042】
情報処理装置１１０は、制御部１２０と、記憶部１３０と、通信部１４０とを備える。通信部１４０は、制御部１２０の制御に基づいて、有線通信又は無線通信を利用して、他の機器との間で各種情報のやりとりを行うものである。
【0043】
制御部１２０は、記憶部１３０に記憶されている各種プログラムに基づいて各部を制御するものである。制御部１２０は、例えば、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）等の処理装置により実現される。なお、車両Ｃ１の車両ＥＣＵ（Electronic Control Unit）を制御部１２０としても使用してもよく、車両ＥＣＵとは異なる処理装置を制御部１２０として設けてもよい。
【0044】
制御部１２０は、音取得部１０１、ドライバ画像取得部１０２、車室画像取得部１０３、車外画像取得部１０４、通信部１４０等から出力された各情報と、車両情報取得部１２５により取得された各情報とに基づいて各種制御を実行する。例えば、制御部１２０は、第１出力機器２００、第２出力機器２１０、周辺機器２２０の動作状態を制御する制御処理を実行する。具体的には、制御部１２０は、発話取得部１２１と、ドライバ状況取得部１２２と、車室状況取得部１２３と、車外状況取得部１２４と、車両情報取得部１２５と、コミュニケーション内容決定部１２６と、出力態様決定部１２７と、エージェント制御部１２８とを備える。
【0045】
発話取得部１２１は、音取得部１０１から出力された音情報について所定の音解析処理を実行することにより、その音情報に含まれる各ユーザ（ドライバＤ１を含む）の発話に関する発話情報を取得するものであり、その発話情報をコミュニケーション内容決定部１２６に出力する。この音解析処理は、公知の音解析処理を用いることが可能である。
【0046】
ドライバ状況取得部１２２は、ドライバ画像取得部１０２から出力された画像情報について所定の画像解析処理を実行することにより、その画像情報に含まれるドライバＤ１に関する各種情報を取得するものであり、その各情報をコミュニケーション内容決定部１２６に出力する。この画像解析処理は、公知の画像解析処理を用いることが可能である。ドライバＤ１に関する各種情報として、例えば、ドライバＤ１の表情、ドライバＤ１の視線、手、顔、身体等の動きに関するドライバＤ１の各行動を取得することが可能である。これらにより、例えば、ドライバＤ１の車両Ｃ１への乗車及び降車、車両Ｃ１における各座席の着座の有無、シートベルトを締める動作等を検出可能である。すなわち、ドライバ状況取得部１２２によりドライバＤ１の状態に関するドライバ状態情報が取得される。
【0047】
車室状況取得部１２３は、車室画像取得部１０３から出力された画像情報について所定の画像解析処理を実行することにより、その画像情報に含まれる車両Ｃ１の車室内に関する各種情報を取得するものであり、その各情報をコミュニケーション内容決定部１２６に出力する。この画像解析処理は、公知の画像解析処理を用いることが可能である。車両Ｃ１の車室内に関する各種情報として、例えば、各ユーザの表情、各ユーザの視線、手、顔、身体等の動きに関する各ユーザの各行動を取得することが可能である。すなわち、車室状況取得部１２３により車両Ｃ１に乗車する各ユーザの状態に関するユーザ状態情報と、車両Ｃ１の状態に関する車両状態情報とが取得される。
【0048】
車外状況取得部１２４は、車外画像取得部１０４から出力された画像情報について所定の画像解析処理を実行することにより、その画像情報に含まれる車両Ｃ１の外部に関する各種情報を取得するものであり、その各情報をコミュニケーション内容決定部１２６に出力する。この画像解析処理は、公知の画像解析処理を用いることが可能である。車両Ｃ１の外部に関する各種情報として、例えば、車両Ｃ１が道路上を走行しているか否か、車両Ｃ１が道路上に停車しているか否か、車両Ｃ１の前方に存在する信号、標識等を検出可能である。すなわち、車外状況取得部１２４により車両Ｃ１の状態に関する車両状態情報が取得される。
【0049】
車両情報取得部１２５は、車両Ｃ１に関する各種の車両状態に関する情報（車両状態情報）を取得するものであり、取得された車両状態情報をコミュニケーション内容決定部１２６に出力する。車両状態情報は、例えば、ＣＡＮ（Controller Area Network）信号から取得可能である。なお、車両状態情報は、例えば、車速、加速度、シフトレバーの位置（例えば、Ｐレンジ、Ｄレンジ）、アクセルペダルの踏込量、ブレーキペダルの踏込量、位置情報等である。例えば、車速、加速度等により車両Ｃ１の停車中及び走行中を判定可能である。
【0050】
また、車両情報取得部１２５は、車両Ｃ１に設置されている各種のセンサから出力されたセンサ検出情報を取得してもよい。センサ類は、例えば、ＬｉＤＡＲ（Light Detection And Ranging）、ＲＡＤＡＲ（Radio Detection And Ranging）、Ｓｏｎａｒ、車速センサ、加速度センサ、ステアリングセンサ、アクセルポジションセンサ、位置情報取得センサ（位置情報取得部）、着座センサ、シートベルトセンサ等である。これらの各センサについては、公知のセンサを用いることが可能である。なお、ＬｉＤＡＲ、ＲＡＤＡＲ、Ｓｏｎａｒ等は、車両Ｃ１の周囲の状況を検出するセンサの一例である。また、車速センサ、加速度センサ、ステアリングセンサ、アクセルポジションセンサ等は、ドライバＤ１の運転操作の状況を検出するセンサの一例である。なお、これらは一例であり、他のセンサを用いてもよい。また、これらのうちの一部のセンサのみを用いてもよい。
【0051】
位置情報取得部は、車両Ｃ１が存在する位置に関する位置情報を取得するものである。例えば、ＧＮＳＳ（Global Navigation Satellite System：全球測位衛星システム）を利用して位置情報を取得するＧＮＳＳ受信機により実現できる。また、その位置情報には、ＧＮＳＳ信号の受信時における緯度、経度、高度等の位置に関する各データが含まれる。また、他の位置情報の取得方法により位置情報を取得してもよい。例えば、周囲に存在するアクセスポイントや基地局からの情報を用いて位置情報を導き出してもよい。また、ビーコンを用いて位置情報を取得してもよい。
【0052】
着座センサ（又はシートセンサ）は、車両Ｃ１の各座席に着座している乗員の有無を検出するセンサである。また、シートベルトセンサは、車両Ｃ１の各座席に着座している乗員がシートベルトを着用しているか否かを検出するセンサである。例えば、運転席に着座しているドライバＤ１のシートベルトの着用の有無については、着座センサ、シートベルトセンサ等を用いて検出可能である。
【0053】
コミュニケーション内容決定部１２６は、発話取得部１２１、ドライバ状況取得部１２２、車室状況取得部１２３、車外状況取得部１２４、車両情報取得部１２５等から出力された各情報に基づいて、車両Ｃ１に乗車する何れかのユーザと行うコミュニケーションの内容を決定するものである。そして、コミュニケーション内容決定部１２６は、それらの各情報と、決定されたコミュニケーションの内容とを出力態様決定部１２７、エージェント制御部１２８に出力する。例えば、コミュニケーション内容決定部１２６は、車両Ｃ１に乗車する各ユーザ（ドライバＤ１を含む）の状態に関するユーザ状態情報と、車両Ｃ１の状態に関する車両状態情報とのうちの少なくとも１つを取得する。そして、コミュニケーション内容決定部１２６は、その取得されたユーザ状態情報及び車両状態情報のうちの少なくとも１つに基づいて、何れかのユーザと行うコミュニケーションの内容を決定する。例えば、コミュニケーション内容決定部１２６は、ユーザ状態情報又は車両状態情報に基づいて、ドライバＤ１に伝えるべき支援情報が検出された場合には、その支援情報をドライバＤ１に伝えることを決定する。また、例えば、コミュニケーション内容決定部１２６は、ユーザ状態情報又は車両状態情報に基づいて、車両Ｃ１に乗車する何れかのユーザに対して所定のコミュニケーション（例えば、会話）を実行することが検出された場合には、そのコミュニケーションを実行することを決定する。
【0054】
出力態様決定部１２７は、コミュニケーション内容決定部１２６により決定されたコミュニケーションの内容と、ドライバＤ１の運転負荷とに基づいて、エージェントを出力させる態様（エージェントの表現態様）を決定するものである。そして、出力態様決定部１２７は、決定されたエージェントの表現態様をエージェント制御部１２８に出力する。例えば、出力態様決定部１２７は、車両Ｃ１の外部の環境に関する環境情報（車外状況取得部１２４により取得可能）と、ドライバＤ１の運転行動に関する運転行動情報（ドライバ状況取得部１２２、車両情報取得部１２５により取得可能）とのうちの少なくとも１つに基づいて、ドライバＤ１の運転負荷を検出することが可能である。なお、ドライバＤ１の運転負荷の検出方法については、後述する。また、エージェントの表現態様については、図６を参照して詳細に説明する。
【0055】
エージェント制御部１２８は、コミュニケーション内容決定部１２６により決定されたコミュニケーションの内容と、出力態様決定部１２７により決定されたエージェントの表現態様とに基づいて、第１出力機器２００、第２出力機器２１０、周辺機器２２０の動作状態を制御するものである。なお、これらの各動作については、図６乃至図１０等を参照して詳細に説明する。
【0056】
記憶部１３０は、各種情報を記憶する記憶媒体である。例えば、記憶部１３０には制御部１２０が各種処理を行うために必要となる各種情報（例えば、制御プログラム、エージェント情報ＤＢ１３１、エージェント管理ＤＢ１３２、地図情報ＤＢ）が記憶される。また、記憶部１３０には、通信部１４０を介して取得された各種情報が記憶される。記憶部１３０として、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ＳＲＡＭ（Static Random Access Memory）、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、又は、これらの組み合わせを用いることができる。
【0057】
エージェント情報ＤＢ１３１には、第１出力機器２００、第２出力機器２１０、周辺機器２２０の各種動作を実現するために必要となる各種情報が格納されている。例えば、第１出力機器２００の表示部２０１、第２出力機器２１０の表示部２１１に表示させるエージェント画像ＡＧ１、ＡＧ２に関する画像情報と、周辺機器２２０においてエージェントを表現させる表現情報とがエージェント情報ＤＢ１３１に格納される。また、例えば、各種コミュニケーションを実行する際に第１出力機器２００又は第２出力機器２１０におけるエージェントを動作させるための動作情報等がエージェント情報ＤＢ１３１に格納される。
【0058】
エージェント管理ＤＢ１３２には、エージェントの表現場所を管理するためのエージェント管理情報が格納されている。例えば、エージェントが第１位置乃至第３位置（図６参照）の何れかで表現されているかを示す情報がエージェント管理情報として管理される。
【0059】
第１出力機器２００は、情報処理装置１１０からの指示に基づいてエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１を用いてドライバＤ１等に各種情報を伝えることが可能な機器である。また、第２出力機器２１０は、情報処理装置１１０からの指示に基づいてエージェント画像ＡＧ２を表示させ、エージェント画像ＡＧ２を用いてドライバＤ１等に各種情報を伝えることが可能な機器である。
【0060】
第１出力機器２００は、表示部２０１及び音出力部２０２を備える。なお、表示部２０１及び音出力部２０２は、第１出力機器２００が備える制御部（図示省略）に基づいて制御される。また、第２出力機器２１０は、表示部２１１及び音出力部２１２を備える。なお、表示部２１１及び音出力部２１２は、第２出力機器２１０が備える制御部（図示省略）に基づいて制御される。
【0061】
表示部２０１、表示部２１１は、情報処理装置１１０からの指示に基づいて、各種画像を表示する表示部である。なお、表示部２０１、表示部２１１については、使用者がその指を表示面に接触又は近接することにより操作入力を行うことが可能なタッチパネルとして構成してもよく、別体のユーザインタフェースとして構成してもよい。
【0062】
音出力部２０２、音出力部２１２は、情報処理装置１１０からの指示に基づいて、各種音声を出力するものである。音出力部２０２、音出力部２１２として、例えば、１又は複数のスピーカを用いることができる。なお、表示部２０１、音出力部２１２、音出力部２０２、音出力部２１２は、ユーザインタフェースの一例であり、これらのうちの一部を省略してもよく、他のユーザインタフェースを用いてもよい。
【0063】
周辺機器２２０は、情報処理装置１１０からの指示に基づいてエージェントの存在を表現することが可能な機器である。周辺機器２２０は、例えば、シフトレバー６、ステアリングホイール３、着座シート、アームレスト、シートベルトのうちの少なくとも１つである。周辺機器２２０は、ヒータ部２２１を備える。なお、ヒータ部２２１は、情報処理装置１１０に基づいて発熱が制御される。なお、図５では、周辺機器２２０が発熱処理を実行する場合の例を示すが、上述したように、他の処理（例えば、振動処理、音出力処理、光出力処理、匂い発生処理、形状変化処理、移動処理）を実行する場合には、各処理に応じた処理部が周辺機器２２０（又はその周囲）に設けられる。例えば、周辺機器２２０が振動処理を実行する場合には、周辺機器２２０に振動部が設けられる。また、例えば、周辺機器２２０が音出力処理を実行する場合には、周辺機器２２０又はその方向に音出力機器が設けられる。また、例えば、周辺機器２２０が光出力処理を実行する場合には、周辺機器２２０又はその方向に発光機器が設けられる。また、例えば、周辺機器２２０が匂い発生処理を実行する場合には、周辺機器２２０又はその周囲に匂い発生機器が設けられる。また、例えば、周辺機器２２０が形状変化処理を実行する場合には、周辺機器２２０自体を形状が変化可能な機器とする。
【0064】
［運転負荷の検出例］
運転負荷の度合については、車両Ｃ１が停車中であるか走行中であるかに基づいて判定が可能である。例えば、車両Ｃ１が停車中である場合には、運転負荷が低い（例えば運転負荷が閾値未満）と判定可能である。一方、車両Ｃ１が走行中である場合には、運転負荷が高い（例えば運転負荷が閾値以上）と判定可能である。車両Ｃ１が停車中であるか走行中であるかについては、車両情報取得部１２５により取得された車両情報（例えば、車速、加速度、シフトレバーの位置（例えば、Ｐレンジ、Ｄレンジ）、アクセルペダルの踏込量、ブレーキペダルの踏込量）に基づいて判定可能である。
運転負荷の度合については、車両Ｃ１が停車中であるか走行中であるかに基づいて判定が可能である。例えば、車両Ｃ１が停車中である場合には、運転負荷が低い（例えば運転負荷が閾値未満）と判定可能である。一方、車両Ｃ１が走行中である場合には、運転負荷が高い（例えば運転負荷が閾値以上）と判定可能である。車両Ｃ１が停車中であるか走行中であるかについては、車両情報取得部１２５により取得された車両情報（例えば、車速、加速度、シフトレバーの位置（例えば、Ｐレンジ、Ｄレンジ）、アクセルペダルの踏込量、ブレーキペダルの踏込量）に基づいて判定可能である。
【0065】
また、運転負荷は、車両Ｃ１の前方の信号に基づいて判定が可能である。例えば、車両Ｃ１の前方の信号が赤であり、車両Ｃ１が停車中である場合には、運転負荷が低い（例えば運転負荷が閾値未満）と判定可能である。一方、車両Ｃ１が停車中であるが、車両Ｃ１の前方の信号が青に変化した場合には、運転負荷が高い（例えば運転負荷が閾値以上）と判定可能である。なお、これらの判定以外では、車両Ｃ１が停車中であるか走行中であるかに基づく判定と同様とすることが可能である。
【0066】
なお、ドライバＤ１の運転操作、車両Ｃ１の周辺状況等に基づいてドライバＤ１の運転負荷を判定してもよい。
【0067】
例えば、ドライバＤ１の操作状況、車両Ｃ１の周囲の状況等をドライバ状況取得部１２２、車外状況取得部１２４、車両情報取得部１２５等により取得可能である。例えば、所定時間内におけるアクセル操作の回数が多く、ステアリング操作の回数も多い場合には、ドライバＤ１の運転負荷が高いと推定可能である。また、車両Ｃ１の周囲の状況等に基づいてドライバＤ１の運転負荷を推定可能である。例えば、くねくねする道、狭い道、混雑度が高い道、人が多い道等を車両Ｃ１が走行している場合には、ドライバＤ１の運転負荷が高いと推定可能である。また、ユーザの顔の表情、ドライバＤ１が発する声等に基づいてドライバＤ１の運転負荷を推定可能である。
【0068】
例えば、ドライバＤ１の運転操作として、ステアリングエントロピーを用いることが可能である。ステアリングエントロピー法は、運転者の操舵角の滑らかさに基づいて運転者の負荷を測定して推定する測定方法であり、公知の演算方法を用いることが可能である。また、このステアリングエントロピー法では、時系列舵角データに基づいて計算される情報エントロピー値として数値化された測定結果（測定値）を用いることが可能である。
【0069】
また、例えば、車両Ｃ１の周辺状況として、車両Ｃ１の周囲の交通参加者の数、車両Ｃ１の周囲の天候、車両Ｃ１の周囲の暗さ、車両Ｃ１の周囲の道路形状等を用いることが可能である。
【0070】
上述した各値を用いてドライバＤ１の運転負荷を求めることが可能である。例えば、上述した各値に所定の演算（例えば加算）を施し、この演算結果を用いてドライバＤ１の運転負荷を求めることが可能である。なお、上述した各値のうちの少なくとも１つを用いてドライバＤ１の運転負荷を求めてもよい。
【0071】
［ドライバに提示する情報の重要度について］
本実施形態では、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、ドライバＤ１に提示する情報が発生したときには、その情報の重要度に応じて、ドライバＤ１に提示するタイミングを調整する。なお、ドライバＤ１に提示する情報は、例えば、ドライバＤ１の運転操作を支援する支援情報である。この支援情報は、例えば、ドライバＤ１の運転操作に必要となる情報であって、例えば、ナビゲーション情報、ランドマーク案内情報、観光案内情報、名所案内情報等である。
本実施形態では、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、ドライバＤ１に提示する情報が発生したときには、その情報の重要度に応じて、ドライバＤ１に提示するタイミングを調整する。なお、ドライバＤ１に提示する情報は、例えば、ドライバＤ１の運転操作を支援する支援情報である。この支援情報は、例えば、ドライバＤ１の運転操作に必要となる情報であって、例えば、ナビゲーション情報、ランドマーク案内情報、観光案内情報、名所案内情報等である。
【0072】
例えば、ドライバＤ１に提示する情報の重要度については、車両Ｃ１の安全性等に基づいて決定される。例えば、迅速にドライバＤ１に伝えないと安全性に影響がある情報については、重要度が高く設定される。すなわち、閾値以上の重要度が設定される。閾値以上の重要度が設定される情報は、例えば、ナビゲーション機能を実現するための情報である。この情報として、例えば、前方に存在する交差点、踏切等を知らせる情報、前方の交差点の右左折等を知らせる情報が考えられる。
【0073】
一方、安全性の影響が少ないと考える情報については、重要度が低く設定される。すなわち、閾値未満の重要度が設定される。閾値未満の重要度が設定される情報は、例えば、車両Ｃ１の周囲に存在するランドマーク、観光地、名所等を案内するための情報が考えられる。なお、ドライバＤ１の運転負荷が閾値以上である場合において、ドライバＤ１に提示する情報として閾値未満の重要度の情報が発生したときには、その情報をストックしておく。そして、ドライバＤ１の運転負荷未満となった場合に、エージェントを用いて、その情報を雑談としてドライバＤ１に伝えることが可能である。
【0074】
［車両における各状況とエージェントの役割と使用機器との関係例］
図６は、車両Ｃ１における各状況とエージェントの役割と使用機器との関係例を示す図である。なお、図６で示す関係例は、一例であり、これ以外の関係を用いてもよい。
図６は、車両Ｃ１における各状況とエージェントの役割と使用機器との関係例を示す図である。なお、図６で示す関係例は、一例であり、これ以外の関係を用いてもよい。
【0075】
ここで、人間が感じる生命の存在感については、存在、注目、意図、共感等の各レベル感で示すことが可能である。そこで、本実施形態では、それらの各レベル感をドライバＤ１が感じるように各エージェントの状態を設定する。また、車両Ｃ１の内部では、心理的な距離は物理的な距離に対応すると考えられる。そこで、本実施形態では、物理的な距離をエージェントが行き来することで、ドライバＤ１に接近した状態でコミュニケーションをしたり、ドライバＤ１から遠ざかった状態で存在感のみを示したりして各エージェントの状態を設定する。例えば、車両Ｃ１が走行中（ドライバＤ１が運転中）には、エージェントを２状態（第１状態（第１位置）、第２状態（第２位置））とすることが可能である。また、車両Ｃ１が停車中には、エージェントを１状態（第３状態（第３位置））とすることが可能である。なお、第２状態は、運転中のドライバＤ１の視界に入る位置でのエージェントの表現態様の一例であり、通常状態と考えることが可能である。また、第１状態は、外観を持たないエージェントの表現態様の一例（例えば、熱、音、光）であり、ドライバＤ１から遠ざかる状態と考えることが可能である。また、第３状態は、ドライバＤ１に近づく状態と考えることが可能である。なお、第３状態は、インタラクションを楽しむための状態と称することも可能である。このように、第１位置をエージェントとドライバＤ１との距離が最も遠い位置とし、第３位置がエージェントとドライバＤ１との距離が最も近い位置とする。すなわち、第１位置、第２位置、第３位置となるのに応じて、エージェントの物理的な距離がドライバＤ１に近づくことになる。
【0076】
このように、本実施形態では、車両Ｃ１に存在するエージェントについて３状態を使い分ける例を示す。第１状態は、ドライバＤ１の運転負荷が高い場合に、エージェントが支援情報の提示、コミュニケーション等を実行しない状態を示す。この第１状態では、ドライバＤ１の運転負荷が高いため、ドライバＤ１のディストラクションを減らす必要がある。そこで、第１状態では、ドライバＤ１に認識され難い態様でエージェントの存在を感じさせる演出を実行する。例えば、ドライバＤ１が触れている車両Ｃ１の部品の挙動等を利用してエージェントの存在感を表現することが可能である。例えば、ドライバＤ１が触れる可能性が高いシフトレバー６を発熱させることでエージェントの存在感を表現することが可能である。
【0077】
第２状態は、エージェントが支援情報を提示する必要がある状態を示す。この第２状態では、ドライバＤ１の運転負荷にかかわらず、エージェントが支援情報を提示する必要があるため、ドライバＤ１の視界の入る位置にエージェントを出現させ、エージェントを用いて支援情報を提示する。ドライバＤ１の運転負荷にかかわらず、提示する必要がある支援情報は、例えば重要度が高い支援情報である。この支援情報として、例えば、ナビゲーションを実行するためのナビゲーション情報（例えば、交差点等を知らせる情報）等が想定される。
【0078】
第３状態は、ドライバＤ１の運転負荷が低い場合（例えば停車中）に、エージェントがドライバＤ１とコミュニケーションを実行する状態を示す。この第３状態では、ドライバＤ１の運転負荷が低いため、ドライバＤ１に近い位置にエージェントを出現させ、ドライバＤ１とエージェントとの距離を近くして積極的なコミュニケーションを実行する。例えば、ドライバＤ１の目の前に存在するステアリングホイール３に設置されている第２出力機器２１０を利用してエージェント画像ＡＧ２を表示させることが可能である。
【0079】
次に、上述した３状態について詳細に説明する。例えば、車両Ｃ１における各状況として、ドライバＤ１の運転負荷が閾値以上であり、かつ、ドライバＤ１に提示する提示情報が存在しない場合を想定する。この場合には、ドライバＤ１の運転操作を優先するため、ドライバＤ１と同じ空間（車両Ｃ１内の空間）で存在感を示すことをエージェントの役割とする。また、そのような役割をエージェントが果たすための表現手段を用いる。例えば、図３に示すように、シフトレバー６を発熱させることにより、エージェントが見えなくてもエージェントが車両Ｃ１の内部に存在してその存在感を出すことが可能である。また、例えば、図４に示すように、フロントウインド４（ＨＵＤ表示領域）にエージェント画像ＡＧ３を表示することによりエージェントの存在感を出すことが可能である。このようなエージェントの位置を第１位置と称する。このように、エージェントの存在感を示すことにより、ドライバＤ１がエージェントの存在を煩わしく感じてしまうことを防止することが可能である。また、エージェントの存在をドライバＤ１が認識できるため、エージェントがドライバＤ１と一緒にいるように感じさせることが可能である。このため、エージェントに対する信頼度、愛着等を維持することが可能であり、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0080】
また、例えば、車両Ｃ１における各状況として、ドライバＤ１の運転負荷が閾値以上であり、かつ、ドライバＤ１に提示する提示情報（重要度が閾値以上）が存在する場合を想定する。この場合には、ドライバＤ１の運転負荷を増加させずに、重要な提示情報を提供することをエージェントの役割とする。また、そのような役割をエージェントが果たすための表現手段を用いる。例えば、図１に示すように、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１を用いて提示情報を出力（例えば、音声情報Ｓ１「次の交差点を右だよ」の出力）することにより、重要な提示情報を提供することが可能である。このようなエージェントの位置を第２位置と称する。このように、ドライバＤ１が極力運転中の視線を変えずにエージェントが情報を提示できる位置に移動することにより、車両Ｃ１がドライバＤ１に伝えたいことを適切に表現することが可能である。これにより、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0081】
なお、ここでは、ドライバＤ１が極力運転中の視線を変えずにエージェントが情報を提示できる位置として第１出力機器２００を用いて例を示すが、他の位置としてもよい。例えば、車両Ｃ１の位置情報と、地図情報ＤＢとに基づいて、ドライバＤ１の視線を予測し、この予測した視線の方向にエージェント画像を表示してもよい。例えば、表示機器７２０（図１３（Ｃ）参照）を用いたり、フロントウインド４のＨＵＤ（図１３（Ｄ）参照）を用いたりして表示が可能な位置にエージェント画像を表示することが可能である。例えば、所定のランドマーク等が存在する場合には、ドライバＤ１がそのランドマークの方向を見ることが想定される。例えば、右斜め前方に東京タワーが見える位置を車両Ｃ１が走行している場合には、少なくとも一時的にドライバＤ１が東京タワーを見ることが想定される。そこで、地図情報ＤＢに格納されているランドマーク情報の車両Ｃ１に対する相対位置に基づいて、ドライバＤ１の視線方向を推定可能である。また、例えば、所定形状の道路が存在する場合には、ドライバＤ１はその形状に沿って前方を見ることが想定される。例えば、右方向に大きく曲がる道路を車両Ｃ１が走行している場合には、ドライバＤ１は右方向を見ることが想定される。そこで、地図情報ＤＢに格納されている地図情報の車両Ｃ１に対する相対位置に基づいて、ドライバＤ１の視線方向を推定可能である。なお、ドライバＤ１の眼を含む画像（例えば、ドライバ状況取得部１２２により取得可能）に基づいて、ドライバＤ１の視線を検出する視線検出処理を実行し、ドライバＤ１の視線方向を検出する視線方向検出処理を実行してもよい。例えば、この視線方向の検出方法については、公知の視線検出技術を用いることが可能である。
【0082】
また、例えば、車両Ｃ１における各状況として、ドライバＤ１の運転負荷が閾値未満である場合を想定する。この場合には、ドライバＤ１の運転負荷が低いため、ドライバＤ１との距離が近い位置でコミュニケーションを実行すること（すなわち、パーソナルスペース内でのコミュニケーション）をエージェントの役割とする。また、そのような役割をエージェントが果たすための表現手段を用いる。例えば、図２に示すように、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２を表示させ、エージェント画像ＡＧ２を用いて所定のコミュニケーションを実行（例えば、音声情報Ｓ２「おしゃべりしよう」の出力）することが可能である。このようなエージェントの位置を第３位置と称する。このように、ドライバＤ１に近い位置にエージェントを移動させ、エージェントがドライバＤ１と交流を行うことにより、ドライバＤ１にコミュニケーションを楽しんでもらうことが可能である。これにより、エージェントに対する信頼度、愛着等を高めることが可能であり、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0083】
［第１出力機器からシフトレバーにエージェントを移動させる場合の遷移例］
図７は、第１出力機器２００からシフトレバー６にエージェントを移動させる場合の遷移例を示す図である。なお、図７に示す車両Ｃ１の車室内の構成については、図１乃至図４に示す車両Ｃ１の車室内の構成と同様であるため、図１乃至図４と共通する部分には同一の符号を付してこれらの説明を省略する。また、図８乃至図１０に示す例についても同様に、図１乃至図４と共通する部分には同一の符号を付してこれらの説明を省略する。
図７は、第１出力機器２００からシフトレバー６にエージェントを移動させる場合の遷移例を示す図である。なお、図７に示す車両Ｃ１の車室内の構成については、図１乃至図４に示す車両Ｃ１の車室内の構成と同様であるため、図１乃至図４と共通する部分には同一の符号を付してこれらの説明を省略する。また、図８乃至図１０に示す例についても同様に、図１乃至図４と共通する部分には同一の符号を付してこれらの説明を省略する。
【0084】
図７（Ａ）には、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１が表示されている場合の例を示す。例えば、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、ドライバＤ１に提示する所定情報（重要度が閾値以上）が存在する場合には、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１が表示され、エージェント画像ＡＧ１を用いてその所定情報が出力される。そして、ドライバＤ１の運転負荷が閾値以上であり、かつ、その所定情報の出力が終了した場合には、第１出力機器２００からシフトレバー６にエージェントを移動させる移動演出が実行される。
【0085】
具体的には、図７（Ｂ）に示すように、第１出力機器２００の表示部２０１において、エージェント画像ＡＧ１がシフトレバー６の方向に移動するとともに、その移動に応じてエージェント画像ＡＧ１が小さくなるように表示態様を変化させる移動演出が実行される。
【0086】
続いて、図７（Ｃ）に示すように、第１出力機器２００の表示部２０１において、エージェント画像ＡＧ１がシフトレバー６の方向にさらに移動するとともに、その移動に応じてエージェント画像ＡＧ１がさらに小さくなるように表示態様を変化させる移動演出が実行される。この移動演出の実行後、又は、この移動演出の実行中において、シフトレバー６のヒータ部２２１を徐々に発熱させ、シフトレバー６を所定の温度とする移動演出が実行される。
【0087】
なお、第１出力機器２００の表示部２０１において、エージェント画像ＡＧ１がシフトレバー６の方向に移動する際には、エージェント画像ＡＧ１の移動の軌跡がわかるように、その移動の遷移をアニメーション処理により表現してもよい。
【0088】
図７（Ａ）乃至（Ｃ）に示すように、第１出力機器２００の表示部２０１に表示されているエージェント画像ＡＧ１の存在を、シフトレバー６に移動させる場合には、表示部２０１において移動先（シフトレバー６）の方向にエージェント画像ＡＧ１を移動させる。これにより、エージェント画像ＡＧ１の存在がシフトレバー６に移動したことをドライバＤ１の視覚（五感の一例）により容易に把握可能となる。また、その移動のタイミング、又は、その移動の直後において、シフトレバー６のヒータ部２２１を徐々に発熱させ、シフトレバー６を所定の温度とすることで、エージェント画像ＡＧ１の存在がシフトレバー６に移動したことをドライバＤ１の触覚（五感の一例）により容易に把握可能となる。
【0089】
［シフトレバーから第１出力機器にエージェントを移動させる場合の遷移例］
図８は、シフトレバー６から第１出力機器２００にエージェントを移動させる場合の遷移例を示す図である。
図８は、シフトレバー６から第１出力機器２００にエージェントを移動させる場合の遷移例を示す図である。
【0090】
図８（Ａ）には、シフトレバー６を所定の温度とすることで、エージェントの存在感を示す場合の例を示す。例えば、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、ドライバＤ１に提示する所定情報（重要度が閾値以上）が存在する場合には、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１が表示され、エージェント画像ＡＧ１を用いてその所定情報が出力される。
【0091】
具体的には、図８（Ａ）（Ｂ）に示すように、第１出力機器２００の表示部２０１において、エージェント画像ＡＧ１がシフトレバー６の方向から移動するとともに、その移動に応じてエージェント画像ＡＧ１が大きくなるように表示態様を変化させる移動演出が実行される。
【0092】
続いて、図８（Ｃ）に示すように、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１が表示される移動演出が実行される。この移動演出の実行前、又は、この移動演出の実行中において、シフトレバー６のヒータ部２２１における発熱処理を徐々に停止させる移動演出が実行される。
【0093】
なお、第１出力機器２００の表示部２０１において、エージェント画像ＡＧ１がシフトレバー６の方向から移動する際には、エージェント画像ＡＧ１の移動の軌跡がわかるように、その移動の遷移をアニメーション処理により表現してもよい。
【0094】
図８（Ａ）乃至（Ｃ）に示すように、エージェントの存在感が表現されているシフトレバー６から、そのエージェントの存在を、第１出力機器２００の表示部２０１に移動させる場合には、表示部２０１において移動元（シフトレバー６）の方向からエージェント画像ＡＧ１を移動させる。これにより、エージェント画像ＡＧ１の存在がシフトレバー６から移動したことをドライバＤ１の視覚（五感の一例）により容易に把握可能となる。また、その移動のタイミング、又は、その移動の直前において、シフトレバー６のヒータ部２２１の発熱処理を徐々に停止させることで、シフトレバー６におけるエージェントの存在が第１出力機器２００に移動したことをドライバＤ１の触覚（五感の一例）により容易に把握可能となる。
【0095】
［第２出力機器からシフトレバーにエージェントを移動させる場合の遷移例］
図９は、第２出力機器２１０からシフトレバー６にエージェントを移動させる場合の遷移例を示す図である。
図９は、第２出力機器２１０からシフトレバー６にエージェントを移動させる場合の遷移例を示す図である。
【0096】
図９（Ａ）には、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示されている場合の例を示す。例えば、ドライバＤ１の運転負荷が閾値未満である場合（例えば車両Ｃ１が停車中）には、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示され、エージェント画像ＡＧ２を用いて所定のコミュニケーションが実行される。そして、ドライバＤ１の運転負荷が閾値以上となった場合には、第２出力機器２１０からシフトレバー６にエージェントを移動させる移動演出が実行される。
【0097】
具体的には、図９（Ｂ）に示すように、第２出力機器２１０の表示部２１１において、エージェント画像ＡＧ２がシフトレバー６の方向に移動するとともに、その移動に応じてエージェント画像ＡＧ２が小さくなるように表示態様を変化させる移動演出が実行される。
【0098】
続いて、図９（Ｃ）に示すように、第２出力機器２１０の表示部２１１において、エージェント画像ＡＧ２がシフトレバー６の方向にさらに移動するとともに、その移動に応じてエージェント画像ＡＧ２がさらに小さくなるように表示態様を変化させる移動演出が実行される。この移動演出の実行後、又は、この移動演出の実行中において、シフトレバー６のヒータ部２２１を徐々に発熱させ、シフトレバー６を所定の温度とする移動演出が実行される。
【0099】
なお、第２出力機器２１０の表示部２１１において、エージェント画像ＡＧ２がシフトレバー６の方向に移動する際には、エージェント画像ＡＧ２の移動の軌跡がわかるように、その移動の遷移をアニメーション処理により表現してもよい。
【0100】
図９（Ａ）乃至（Ｃ）に示すように、第２出力機器２１０の表示部２１１に表示されているエージェント画像ＡＧ２の存在を、シフトレバー６に移動させる場合には、表示部２１１において移動先（シフトレバー６）の方向にエージェント画像ＡＧ２を移動させる。これにより、エージェント画像ＡＧ２の存在がシフトレバー６に移動したことをドライバＤ１の視覚（五感の一例）により容易に把握可能となる。また、その移動のタイミング、又は、その移動の直後において、シフトレバー６のヒータ部２２１を徐々に発熱させ、シフトレバー６を所定の温度とすることで、エージェント画像ＡＧ２の存在がシフトレバー６に移動したことをドライバＤ１の触覚（五感の一例）により容易に把握可能となる。
【0101】
［シフトレバーから第２出力機器にエージェントを移動させる場合の遷移例］
図１０は、シフトレバー６から第２出力機器２１０にエージェントを移動させる場合の遷移例を示す図である。
図１０は、シフトレバー６から第２出力機器２１０にエージェントを移動させる場合の遷移例を示す図である。
【0102】
図１０（Ａ）には、シフトレバー６を所定の温度とすることで、エージェントの存在感を示す場合の例を示す。例えば、ドライバＤ１の運転負荷が閾値未満である場合（例えば車両Ｃ１が停車中）には、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示され、エージェント画像ＡＧ２を用いて所定のコミュニケーションが実行される。
【0103】
具体的には、図１０（Ａ）（Ｂ）に示すように、第２出力機器２１０の表示部２１１において、エージェント画像ＡＧ２がシフトレバー６の方向から移動するとともに、その移動に応じてエージェント画像ＡＧ２が大きくなるように表示態様を変化させる移動演出が実行される。
【0104】
続いて、図１０（Ｃ）に示すように、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示される移動演出が実行される。この移動演出の実行前、又は、この移動演出の実行中において、シフトレバー６のヒータ部２２１における発熱処理を徐々に停止させる移動演出が実行される。
【0105】
なお、第２出力機器２１０の表示部２１１において、エージェント画像ＡＧ２がシフトレバー６の方向から移動する際には、エージェント画像ＡＧ２の移動の軌跡がわかるように、その移動の遷移をアニメーション処理により表現してもよい。
【0106】
図１０（Ａ）乃至（Ｃ）に示すように、エージェントの存在感が表現されているシフトレバー６から、そのエージェントの存在を、第２出力機器２１０の表示部２１１に移動させる場合には、表示部２１１において移動元（シフトレバー６）の方向からエージェント画像ＡＧ２を移動させる。これにより、エージェント画像ＡＧ２の存在がシフトレバー６から移動したことをドライバＤ１の視覚（五感の一例）により容易に把握可能となる。また、その移動のタイミング、又は、その移動の直前において、シフトレバー６のヒータ部２２１の発熱処理を徐々に停止させることで、シフトレバー６におけるエージェントの存在が第２出力機器２１０に移動したことをドライバＤ１の触覚（五感の一例）により容易に把握可能となる。
【0107】
このように、本実施形態では、エージェントの移動と称する場合には、ある表示機器に表示されているエージェント画像を消去して、そのエージェント画像を他の表示機器に新たに表示させることを意味する。また、エージェントの移動と称する場合には、ある表示機器に表示されているエージェント画像を消去して、そのエージェント画像に対応するエージェントの存在を感じさせる演出を他の機器に新たに実行させることを意味する。また、エージェントの移動と称する場合には、ある機器において実行されているエージェントの存在を感じさせる演出を止めて、そのエージェントに対応するエージェント画像を他の表示機器に新たに表示させることを意味する。なお、これらの移動の際には、移動元と移動先とにおいて同時にエージェントが存在するように表現してもよく、移動元と移動先との何れかのみにおいてエージェントが存在するように表現をしてもよい。
【0108】
［情報処理システムの動作例］
図１１、図１２は、情報処理システム１００におけるエージェント表現処理の一例を示すフローチャートである。また、このエージェント表現処理は、記憶部１３０（図３参照）に記憶されているプログラムに基づいて、制御部１２０（図３参照）により実行される。また、このエージェント表現処理は、制御周期毎に常時実行される。また、このエージェント表現処理では、図１乃至図１０を適宜参照して説明する。
図１１、図１２は、情報処理システム１００におけるエージェント表現処理の一例を示すフローチャートである。また、このエージェント表現処理は、記憶部１３０（図３参照）に記憶されているプログラムに基づいて、制御部１２０（図３参照）により実行される。また、このエージェント表現処理は、制御周期毎に常時実行される。また、このエージェント表現処理では、図１乃至図１０を適宜参照して説明する。
【0109】
ステップＳ５０１において、コミュニケーション内容決定部１２６は、車両Ｃ１のドライバＤ１の運転負荷が閾値未満であるか否かを判定する。なお、運転負荷の検出方法については、上述した検出方法と同様である。また、ここで示す閾値は、ドライバＤ１の運転負荷が高いか低いかを判定するための判定情報である。この閾値については、実験又はシミュレーション等に基づいて適宜設定可能である。なお、ここでは、ドライバＤ１の運転負荷が閾値未満であるか否かを判定する例を示すが、車両Ｃ１が走行中か停車中かを判定してもよい。ドライバＤ１の運転負荷が閾値未満である場合には、ステップＳ５０２に進む。一方、ドライバＤ１の運転負荷が閾値以上である場合には、ステップＳ５１６（図１２参照）に進む。
【0110】
ステップＳ５０２において、コミュニケーション内容決定部１２６は、エージェント管理ＤＢ１３２に基づいて、エージェントが第３位置（図６参照）に存在するか否かを判定する。具体的には、図２に示すように、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示されているか否かが判定される。エージェントが第３位置に存在する場合には、ステップＳ５０７に進む。一方、エージェントが第３位置に存在しない場合には、ステップＳ５０３に進む。
【0111】
ステップＳ５０３において、コミュニケーション内容決定部１２６は、ドライバＤ１に提示する情報が存在するか否かを判定する。例えば、ドライバＤ１に提示する情報として、ナビゲーション情報、車両Ｃ１の周囲に存在するランドマークに関する情報等が想定される。ドライバＤ１に提示する情報が存在する場合には、ステップＳ５０４に進む。一方、ドライバＤ１に提示する情報が存在しない場合には、ステップＳ５１３に進む。
【0112】
ステップＳ５０４において、出力態様決定部１２７は、他の位置から第３位置にエージェントが移動する演出を実行することを決定する。そして、エージェント制御部１２８は、他の位置から第３位置にエージェントが移動する演出を実行する。例えば、図１０に示すように、シフトレバー６に存在するエージェントを第２出力機器２１０の表示部２１１に移動させる移動演出が実行される。例えば、温かかったシフトレバー６が冷たくなり、エージェント画像ＡＧ２が表示部２１１の画面下から（すなわちシフトレバー６の方向から）出現する演出が実行される。この場合に、シフトレバー６の方向から音声情報「ねえねえ」等を出力してもよく、エージェント画像ＡＧ２が表示部２１１に出現した後には、音声出力をするスピーカを変更し、第２出力機器２１０からエージェントの発話が聞こえるようにしてもよい。なお、上述したように、ドライバＤ１の視線方向を予測し、その視線方向に近い位置にエージェント画像ＡＧ２を表示させてもよい。
【0113】
ステップＳ５０５において、エージェント制御部１２８は、第３位置にエージェントを出現させる処理を実行する。例えば、図１０（Ｃ）に示すように、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２を表示させる処理が実行される。
【0114】
ステップＳ５０６において、エージェント制御部１２８は、第３位置に出現させたエージェントに情報を提示させる処理を実行する。例えば、図１０（Ｃ）に示すように、第２出力機器２１０の表示部２１１に表示させたエージェント画像ＡＧ２を用いてドライバＤ１に対する情報を提供する。例えば、エージェント画像ＡＧ２が発する音声情報により情報を提供することが可能である。
【0115】
ステップＳ５０７において、コミュニケーション内容決定部１２６は、エージェントがドライバＤ１とコミュニケーションを実行中であるか否かを判定する。例えば、図２に示すように、第２出力機器２１０の表示部２１１に表示させたエージェント画像ＡＧ２とドライバＤ１との間で何らかのやりとり（例えば会話）が行われている場合には、エージェントがドライバＤ１とコミュニケーションを実行中であると判定される。エージェントがドライバＤ１とコミュニケーションを実行中である場合には、ステップＳ５１２に進む。一方、エージェントがドライバＤ１とコミュニケーションを実行中でない場合には、ステップＳ５０８に進む。
【0116】
ステップＳ５０８において、コミュニケーション内容決定部１２６は、エージェントがドライバＤ１に所定のコミュニケーションの実行を提案することを決定する。そして、エージェント制御部１２８は、第２出力機器２１０の表示部２１１に表示させたエージェント画像ＡＧ２を用いて、ドライバＤ１に所定のコミュニケーションの実行を提案する。例えば、所定のコミュニケーションとして、エージェント及びドライバＤ１が雑談等の会話をすること、簡単なゲームをすること、ステップＳ５２４（図１２参照）で保持された情報を提供すること等を提案することが可能である。例えば、図２に示すように、第２出力機器２１０の表示部２１１に表示させたエージェント画像ＡＧ２が音声情報Ｓ２「おしゃべりしよう」を発することで、その提案をすることが可能である。
【0117】
ステップＳ５０９において、コミュニケーション内容決定部１２６は、ステップＳ５０８で実行した提案をドライバＤ１が拒否したか否か（すなわち、その提案をドライバＤ１が断ったか否か）を判定する。例えば、ドライバＤ１が拒否する発言（例えば、遠慮するよ、またの機会に）をしたか否かに基づいて、その提案をドライバＤ１が拒否したことを判定可能である。また、例えば、ドライバＤ１が拒否する動き（例えば首を振る動作、手を振る動作）をしたか否かに基づいて、その提案をドライバＤ１が拒否したことを判定可能である。なお、ドライバＤ１が発する音声については、発話取得部１２１により取得された音声情報に基づいて、公知の音声認識技術を用いて認識可能である。また、ドライバＤ１の動きについては、ドライバ状況取得部１２２により取得されたドライバＤ１の画像情報に基づいて、公知の物体認識技術を用いて認識可能である。その提案をドライバＤ１が拒否した場合には、ステップＳ５１０に進む。一方、その提案をドライバＤ１が拒否しなかった場合（その提案を受け入れた場合）には、ステップＳ５１２に進む。なお、その提案がドライバＤ１により拒否された場合には、その拒否された時刻（拒否時刻）を記憶部１３０に保持させる。
【0118】
ステップＳ５１０において、出力態様決定部１２７は、第３位置から第１位置にエージェントが移動する演出を実行することを決定する。そして、エージェント制御部１２８は、第３位置から第１位置にエージェントが移動する演出を実行する。例えば、エージェントがシフトレバー６に帰る演出が実行される。例えば、図９に示すように、第２出力機器２１０の表示部２１１に表示されているエージェント画像ＡＧ２を、シフトレバー６に移動させる移動演出が実行される。なお、エージェント画像ＡＧ２からの提案がドライバＤ１により拒否された場合には、エージェント画像ＡＧ２が「シフトレバーに戻るね」等の音声情報を発した後に、シフトレバー６に移動させる移動演出を実行してもよい。このように、エージェント画像ＡＧ２からの提案がドライバＤ１により拒否された場合には、エージェントの存在をドライバＤ１の視覚から消すような演出を実行するとともに、エージェントの存在をドライバＤ１が感じられる演出を実行する。
【0119】
ステップＳ５１１において、エージェント制御部１２８は、第１位置においてエージェントの存在感を出す処理を実行する。例えば、図９（Ｃ）に示すように、シフトレバー６を発熱させる処理が実行される。
【0120】
ステップＳ５１２において、エージェント制御部１２８は、第３位置に出現させたエージェントがドライバＤ１と所定のコミュニケーションを行うための制御を実行する。例えば、図２に示すように、第２出力機器２１０の表示部２１１に表示させたエージェント画像ＡＧ２を用いてエージェント画像ＡＧ２とドライバＤ１とが会話する制御が実行される。
【0121】
ステップＳ５１３において、コミュニケーション内容決定部１２６は、ステップＳ５０９で提案が拒否されたタイミングから所定時間が経過したか否かを判定する。なお、拒否されたタイミングは、ステップＳ５０９で記憶部１３０に保持された拒否時刻に基づいて取得可能である。また、所定時間は、エージェントの提案を拒否したドライバＤ１の気持ちが変化する程度の時間（例えば数分乃至数十分程度）を設定することが可能である。また、この所定時間については、実験又はシミュレーション等に基づいて適宜設定可能である。提案が拒否されたタイミングから所定時間が経過した場合には、ステップＳ５１４に進む。なお、ステップＳ５０９で提案が拒否されていない場合についても同様にステップＳ５１４に進む。一方、提案が拒否されたタイミングから所定時間が経過していない場合には、エージェント表現処理の動作を終了する。
【0122】
ステップＳ５１４、Ｓ５１５の各処理については、ステップＳ５０４、Ｓ５０５の各処理に対応するため、ここでの説明を省略する。
【0123】
図１２に示すステップＳ５１６において、コミュニケーション内容決定部１２６は、ドライバＤ１に提示する情報が存在するか否かを判定する。ドライバＤ１に提示する情報については、ステップＳ５０３で示した情報と同様である。ドライバＤ１に提示する情報が存在する場合には、ステップＳ５１７に進む。一方、ドライバＤ１に提示する情報が存在しない場合には、ステップＳ５２５に進む。
【0124】
ステップＳ５１７において、コミュニケーション内容決定部１２６は、ドライバＤ１に提示する情報の重要度が閾値未満であるか否かを判定する。ドライバＤ１に提示する情報の重要度については、上述した重要度と同様である。ドライバＤ１に提示する情報の重要度が閾値未満である場合には、ステップＳ５２４に進む。一方、ドライバＤ１に提示する情報の重要度が閾値以上である場合には、ステップＳ５１８に進む。
【0125】
なお、本実施形態では、ドライバＤ１に提示する情報の重要度が閾値未満であるか否か（すなわち、重要度が高いか低いか）に基づいて、エージェントの位置を変化させる例を示す。ただし、ドライバＤ１に提示する情報の重要度を２以上の閾値を用いて判定し、その情報の重要度が高くなるのに応じて、エージェントとドライバＤ１との距離を段階的に近づけるようにしてもよい。例えば、車両Ｃ１の左右方向に長い表示機器７２０（図１３（Ｃ）参照）をダッシュボード２に設け、表示機器７２０にエージェント画像を表示させる場合に、その情報の重要度が高くなるのに応じて、エージェント画像をドライバＤ１に近づけるように表示してもよい。
【0126】
ステップＳ５１８において、コミュニケーション内容決定部１２６は、エージェント管理ＤＢ１３２に基づいて、エージェントが第２位置（図６参照）に存在するか否かを判定する。具体的には、図１に示すように、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１が表示されているか否かが判定される。エージェントが第２位置に存在する場合には、ステップＳ５２１に進む。一方、エージェントが第２位置に存在しない場合には、ステップＳ５１９に進む。
【0127】
ステップＳ５１９において、出力態様決定部１２７は、他の位置から第２位置にエージェントが移動する演出を実行することを決定する。そして、エージェント制御部１２８は、他の位置から第２位置にエージェントが移動する演出を実行する。例えば、図８に示すように、シフトレバー６に存在するエージェントを第１出力機器２００の表示部２０１に移動させる移動演出が実行される。
【0128】
ステップＳ５２０において、エージェント制御部１２８は、第２位置にエージェントを出現させる処理を実行する。例えば、図８（Ｃ）に示すように、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させる処理が実行される。
【0129】
ステップＳ５２１において、エージェント制御部１２８は、第２位置に出現させたエージェントに情報を提示させる処理を実行する。例えば、図１に示すように、第１出力機器２００の表示部２０１に表示させたエージェント画像ＡＧ１を用いてドライバＤ１に対する情報を提供する。例えば、エージェント画像ＡＧ１が発する音声情報Ｓ１により情報「次の交差点を右だよ」をドライバＤ１に提供することが可能である。
【0130】
ステップＳ５２２において、出力態様決定部１２７は、第２位置から第１位置にエージェントが移動する演出を実行することを決定する。そして、エージェント制御部１２８は、第２位置から第１位置にエージェントが移動する演出を実行する。例えば、図７に示すように、第１出力機器２００の表示部２０１に表示されているエージェント画像ＡＧ１を、シフトレバー６に移動させる移動演出が実行される。例えば、表示部２０１に表示されていたエージェント画像ＡＧ１が表示部２０１の下方向（シフトレバー６の方向）へ移動して、表示部２０１の画面から消え、冷たかったシフトレバー６が温かくなる演出が実行される。なお、表示部２０１に表示されていたエージェント画像ＡＧ１が音声情報「必要な情報は伝えたから、シフトレバーに戻るね」等を出力し、表示部２０１の下方向（シフトレバー６の方向）へ移動して、表示部２０１の画面から消えた後に、シフトレバー６の方向から音声情報「シフトレバーに戻ったよ」が出力される演出を実行してもよい。このように、エージェントの存在をドライバＤ１の視覚から消すような演出を実行するとともに、エージェントの存在をドライバＤ１が感じられる演出を実行する。
【0131】
ステップＳ５２３において、エージェント制御部１２８は、第１位置においてエージェントの存在感を出す処理を実行する。例えば、図７（Ｃ）に示すように、シフトレバー６を発熱させる処理が実行される。
【0132】
ステップＳ５２４において、コミュニケーション内容決定部１２６は、ステップＳ５１７で重要度が閾値未満であると判定された情報を、次のタイミングでドライバＤ１に提示するため、その情報を記憶部１３０に保持させる。このように、重要度が閾値未満であると判定された情報については、データベースにストックしておき、ドライバＤ１の運転負荷が閾値未満となった場合に、雑談の話題等としてドライバＤ１に提供することが可能である。
【0133】
ステップＳ５２５において、コミュニケーション内容決定部１２６は、エージェント管理ＤＢ１３２に基づいて、エージェントが第１位置（図６参照）に存在するか否かを判定する。具体的には、図３に示すように、シフトレバー６における発熱によりエージェントの存在が表現されているか否かが判定される。エージェントが第１位置に存在する場合には、エージェント表現処理の動作を終了する。一方、エージェントが第１位置に存在しない場合には、ステップＳ５２６に進む。
【0134】
ステップＳ５２６において、出力態様決定部１２７は、他の位置から第１位置にエージェントが移動する演出を実行することを決定する。そして、エージェント制御部１２８は、他の位置から第１位置にエージェントが移動する演出を実行する。例えば、図７に示すように、第１出力機器２００の表示部２０１に表示されているエージェント画像ＡＧ１を、シフトレバー６に移動させる移動演出が実行される。また、例えば、図９に示すように、第２出力機器２１０の表示部２１１に表示されているエージェント画像ＡＧ２を、シフトレバー６に移動させる移動演出が実行される。例えば、表示部２１１に表示されていたエージェント画像ＡＧ２が表示部２１１の下方向（シフトレバー６の方向）へ移動して、表示部２１１の画面から消え、冷たかったシフトレバー６が温かくなる演出が実行される。
【0135】
ここで、例えば、前方の信号が赤信号で車両Ｃ１が停車している場合には、ステップＳ５０１でドライバＤ１の運転負荷が閾値未満と判定されるため、第２出力機器２１０の表示部２１１にエージェント画像ＡＧ２が表示されていることが多い。このように、表示部２１１にエージェント画像ＡＧ２が表示されている状態で、前方の信号が青信号に変化した場合を想定する。この場合には、前方の信号が青に変わったことをエージェントがドライバＤ１に伝えてもよい。例えば、表示部２１１に表示されていたエージェント画像ＡＧ２が音声情報「青になったね」を出力し、表示部２１１の下方向（シフトレバー６の方向）へ移動して、表示部２１１の画面から消えた後に、シフトレバー６の方向から音声情報「青になったね」が出力される演出を実行してもよい。
【0136】
ステップＳ５２７において、エージェント制御部１２８は、第１位置においてエージェントの存在感を出す処理を実行する。例えば、図７（Ｃ）、図９（Ｃ）に示すように、シフトレバー６を発熱させる処理が実行される。
【0137】
なお、図１１、図１２では、主に、ドライバＤ１の運転負荷の高低の判定処理（ステップＳ５０１）、ドライバＤ１に提示する情報の有無の判定処理（ステップＳ５０３、Ｓ５１６、Ｓ５１７）の結果に基づいて、エージェントの表現態様を変化させる制御処理を示した。ただし、本実施形態はこれに限定されず、他の制御例で実現してもよい。例えば、ドライバＤ１の運転負荷の高低の判定処理（ステップＳ５０１）を省略し、ドライバＤ１に提示する情報の有無（ステップＳ５１６、Ｓ５１７）の結果に基づいて、エージェントの表現態様を変化させる制御処理（例えば、ステップＳ５１６乃至Ｓ５２７）としてもよい。
【0138】
また、ドライバＤ１の運転負荷、ドライバＤ１に提示する情報の有無等に基づいて、エージェントの表現態様を変化させる制御処理を実行する例を示した。ただし、他の方法によりその制御処理を実行してもよい。例えば、人工知能（ＡＩ：Artificial Intelligence）を利用して制御処理を実行することが可能である。例えば、ドライバＤ１、車両Ｃ１等に関する各状況と、それらの状況に対応して実行するエージェントの表現態様とを予め学習しておき、この学習データを制御処理に用いることが可能である。例えば、ドライバＤ１、車両Ｃ１等に関して生じた各状況についてその学習データを用いて、エージェントの表現態様を決定し、その決定された表現態様をエージェントに実行させることができる。
【0139】
［エージェントの他の表現態様例］
図１３は、エージェントの他の表現態様例を示す図である。図１３（Ａ）（Ｂ１）では、エージェントとしてロボットを用いる例を示す。また、図１３（Ｃ）（Ｄ）では、左右方向に長い表示機器に表示させるエージェント画像を用いる例を示す。
図１３は、エージェントの他の表現態様例を示す図である。図１３（Ａ）（Ｂ１）では、エージェントとしてロボットを用いる例を示す。また、図１３（Ｃ）（Ｄ）では、左右方向に長い表示機器に表示させるエージェント画像を用いる例を示す。
【0140】
図１３（Ａ）には、レールＲＬ１上をエージェント機器６００が移動する移動構造の一例を示す。図１３（Ａ）に示すように、ダッシュボード２上において左右方向に延びる２つのレール部材から構成されるレールＲＬ１が設置される。また、エージェント機器６００の下部には、レールＲＬ１上を走行可能な車輪が設置される。そして、エージェント機器６００の駆動部（図示省略）は、エージェント制御部１２８からの制御に基づいて、レールＲＬ１上においてエージェント機器６００を左右方向（矢印Ａ１１方向）に移動させる。なお、レールＲＬ１のレール構造と、エージェント機器６００の車輪構造とについては、公知のレール技術を採用することが可能である。
【0141】
図１３（Ａ）では、第２位置に配置されたエージェント機器をエージェント機器６００ａで示し、第３位置に配置されたエージェント機器をエージェント機器６００ｂで示す。なお、ここでは、２つの位置においてエージェント機器を登場させる例を示すが、３以上の位置においてエージェント機器を登場させてもよい。
【0142】
なお、図１３（Ａ）では、レールＲＬ１上をエージェント機器６００が移動する例を示すが、レールＲＬ１を省略し、自律的に移動可能なエージェント機器６００を用いてもよい。例えば、エージェント機器６００が自律的に移動可能となるように、ダッシュボード２上の少なくとも一部を平面状にする。そして、その平面状のダッシュボード２上をエージェント機器６００が移動することにより、エージェント機器６００の位置を変更することが可能である。
【0143】
図１３（Ｂ１）には、ダッシュボード２上に複数の穴ＨＯ１、ＨＯ２を設置し、複数の穴ＨＯ１、ＨＯ２を利用してエージェント機器６１１、６１２が移動する態様を実現する構造の一例を示す。図１３（Ｂ２）には、穴ＨＯ１の構成例を示す。なお、他の穴ＨＯ２の構成についても穴ＨＯ１と同様とすることが可能である。また、エージェント機器６１２は、エージェント機器６１１と同様とする。
【0144】
穴ＨＯ１は、エージェント機器６１１を収容することが可能な程度の大きさを備える円筒形状の穴であり、底部ＢＯ２には、エージェント機器６１１を上昇又は下降させることが可能な棒状体の上昇下降機構ＵＤ１を備える。上昇下降機構ＵＤ１の上端部は、エージェント機器６１１の下部に連結される。また、上昇下降機構ＵＤ１は、駆動部（図示省略）により上昇又は下降が制御される。
【0145】
例えば、エージェント機器６１２が第３位置に配置される場合には、図１３（Ｂ１）に示すように、穴ＨＯ２のエージェント機器６１２のみが上昇した状態となり、穴ＨＯ１のエージェント機器６１１は、下降した状態で各底部に貼り付いた状態となる。また、例えば、エージェント機器６１１が第２位置に配置される場合には、穴ＨＯ１のエージェント機器６１１のみが上昇した状態となり、穴ＨＯ２のエージェント機器６１２は、下降した状態で各底部に貼り付いた状態となる。
【0146】
なお、図１３（Ｂ１）（Ｂ２）では図示を省略するが、複数の穴ＨＯ１、ＨＯ２のそれぞれに蓋を設置し、エージェント機器が上昇状態となっている穴の蓋のみを開け、他の穴の蓋を閉じた状態としてもよい。このように、複数の穴ＨＯ１、ＨＯ２のそれぞれに蓋を設置することにより、１つのエージェント機器のみをドライバＤ１が視認可能となり、各エージェント機器の同一性を高めることが可能である。なお、ここでは、２つの穴を用いて２つのエージェント機器を登場させる例を示すが、３以上の穴を用いて３以上のエージェント機器を登場させてもよい。
【0147】
なお、図１３（Ａ）（Ｂ１）（Ｂ２）の各例を組み合わせてもよい。例えば、図１３（Ｂ１）（Ｂ２）に示す例と同様に、ダッシュボード２に複数の穴ＨＯ１、ＨＯ２を設置し、ダッシュボード２の内部において各穴ＨＯ１、ＨＯ２の底部を繋ぐ横方向の穴を別途設ける。すなわち、ダッシュボード２の内部において凹型の穴を設ける。そして、横方向の穴にレールを設置し、そのレール上をエージェント機器が移動可能としてもよい。また、各表現態様に応じて、何れかの穴からエージェント機器を上昇させるようにする。
【0148】
図１３（Ｃ）には、車両Ｃ１のダッシュボード２に設置されている表示機器７２０の表示部７２１にエージェント画像７２２、７２３を表示する場合の例を示す。なお、表示機器７２０の表示状態は、エージェント制御部１２８により制御される。例えば、ＣＧ（Computer Graphics）によりエージェント画像７２２、７２３を実現することが可能である。
【0149】
エージェント画像７２２は、第２位置に表示される画像である。また、エージェント画像７２３は、第３位置に表示される画像である。
【0150】
図７（Ｄ）には、車両Ｃ１のＨＵＤ（Head Up Display）にエージェント画像７３１、７３２を表示する場合の例を示す。この場合には、ダッシュボード２の上部において、フロントウインド４との境界付近に、ＨＵＤを実現するためのＨＵＤ表示装置を設ける。
【0151】
ＨＵＤ表示装置は、フロントウインド４の表示領域４ａに光を投射して、その反射光を利用してドライバＤ１に虚像を見せるＨＵＤ表示を実現するための表示装置、例えばプロジェクタ、光学系である。すなわち、ＨＵＤ表示装置からフロントウインド４の表示領域４ａに投射された光は、フロントウインド４により反射され、その反射光がドライバＤ１の眼に向かう。そして、表示領域４ａに投射されてドライバＤ１の眼に入った反射光は、フロントウインド４越しに見える実際の物体とともに、その物体に重畳されて表示される。このように、ＨＵＤ表示装置は、フロントウインド４を用いて虚像を表示することにより、ＨＵＤ表示を実現する。
【0152】
例えば、ＨＵＤ表示装置は、情報処理装置１１０（図５参照）の制御に基づいて、エージェント画像７３１、７３２を表示領域４ａに表示させる。また、フロントウインド４は、車両Ｃ１のＨＵＤの表示媒体として機能する。
【0153】
エージェント画像７３１は、第２位置に表示される画像である。また、エージェント画像７３２は、第３位置に表示される画像である。
【0154】
なお、図１３（Ｃ）（Ｄ）では、エージェント画像を各態様に遷移させる場合には、元の態様の位置から新たな態様の位置へのエージェント画像の移動軌跡をアニメーション処理等により表現してもよい。
【0155】
また、上述した各態様（例えば、図１乃至図４、図１３）については、何れかの態様を組み合わせてもよい。また、第２位置、第３位置にエージェントを配置する場合には、上述したように、ドライバＤ１の視線方向を予測し、その視線方向に対応する位置にエージェントを配置するようにしてもよい。
【0156】
［車両の乗員を考慮する例］
なお、本実施形態では、車両Ｃ１に乗車するドライバＤ１の運転負荷、ドライバＤ１に提示する情報の重要度等に基づいてエージェントの表現態様を変化させる例を示した。ただし、車両Ｃ１に乗車する他の乗員を考慮してエージェントの表現態様を変化させてもよい。例えば、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、助手席の乗員がエージェントと所定のコミュニケーションを実行することも考えられる。この場合には、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１と助手席の乗員とが所定のコミュニケーションを実行することが考えられる。この場合には、ドライバＤ１はエージェントが助手席の乗員と所定のコミュニケーションを実行していることを理解できるため、周辺機器２２０を用いたエージェントの存在感を示す処理（例えばシフトレバー６の発熱処理）を実行しないようにする。仮に、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１と助手席の乗員とが所定のコミュニケーションを実行している場合に、周辺機器２２０を用いたエージェントの存在感を示す処理（例えばシフトレバー６の発熱処理）を実行すると、ドライバＤ１は、エージェントが２人いるように感じてしまうおそれがある。この場合には、エージェントに対する信頼度等が低下し、エージェントからドライバＤ１に伝える情報の伝達能力が低下するおそれがあるため、エージェントが１人いるようにドライバＤ１に感じさせることが重要である。
なお、本実施形態では、車両Ｃ１に乗車するドライバＤ１の運転負荷、ドライバＤ１に提示する情報の重要度等に基づいてエージェントの表現態様を変化させる例を示した。ただし、車両Ｃ１に乗車する他の乗員を考慮してエージェントの表現態様を変化させてもよい。例えば、ドライバＤ１の運転負荷が閾値以上である場合（例えば車両Ｃ１が走行中）において、助手席の乗員がエージェントと所定のコミュニケーションを実行することも考えられる。この場合には、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１と助手席の乗員とが所定のコミュニケーションを実行することが考えられる。この場合には、ドライバＤ１はエージェントが助手席の乗員と所定のコミュニケーションを実行していることを理解できるため、周辺機器２２０を用いたエージェントの存在感を示す処理（例えばシフトレバー６の発熱処理）を実行しないようにする。仮に、第１出力機器２００の表示部２０１にエージェント画像ＡＧ１を表示させ、エージェント画像ＡＧ１と助手席の乗員とが所定のコミュニケーションを実行している場合に、周辺機器２２０を用いたエージェントの存在感を示す処理（例えばシフトレバー６の発熱処理）を実行すると、ドライバＤ１は、エージェントが２人いるように感じてしまうおそれがある。この場合には、エージェントに対する信頼度等が低下し、エージェントからドライバＤ１に伝える情報の伝達能力が低下するおそれがあるため、エージェントが１人いるようにドライバＤ１に感じさせることが重要である。
【0157】
［本実施形態における効果例］
ここで、例えば、エージェントがドライバＤ１と一緒にいるように感じさせるために、エージェント画像を大きく動かさずに、エージェント画像を出現したままにすると、ドライバＤ１はエージェント画像の存在を煩わしく感じてしまうおそれがある。そこで、ドライバＤ１に情報を案内しないときには、エージェント画像を消去することが考えられる。しかし、エージェント画像を消去してしまうと、エージェントの存在をドライバＤ１が認識できなくなるため、エージェントがドライバＤ１と一緒に車両Ｃ１に乗車しているように感じ難くなる。すなわち、必要なときにエージェントを出現させ、不要なときにエージェントの存在を消えてしまうと、必要なときに出現して不要なときは消えるオペレータのような存在としてドライバＤ１に認識されるおそれがある。この場合には、エージェントに対する信頼度、愛着等が低下し、エージェントからドライバＤ１に伝える情報の伝達能力が低下するおそれがある。
ここで、例えば、エージェントがドライバＤ１と一緒にいるように感じさせるために、エージェント画像を大きく動かさずに、エージェント画像を出現したままにすると、ドライバＤ１はエージェント画像の存在を煩わしく感じてしまうおそれがある。そこで、ドライバＤ１に情報を案内しないときには、エージェント画像を消去することが考えられる。しかし、エージェント画像を消去してしまうと、エージェントの存在をドライバＤ１が認識できなくなるため、エージェントがドライバＤ１と一緒に車両Ｃ１に乗車しているように感じ難くなる。すなわち、必要なときにエージェントを出現させ、不要なときにエージェントの存在を消えてしまうと、必要なときに出現して不要なときは消えるオペレータのような存在としてドライバＤ１に認識されるおそれがある。この場合には、エージェントに対する信頼度、愛着等が低下し、エージェントからドライバＤ１に伝える情報の伝達能力が低下するおそれがある。
【0158】
そこで、本実施形態では、必要に応じてエージェントの存在感を調整することで、エージェントがドライバＤ１と一緒に車両Ｃ１に乗車している感じを出すことが可能となり、ドライバＤ１がエージェントと一緒にいる感覚を高めることが可能となる。すなわち、ドライバＤ１とエージェントとの一体感を高めることが可能となる。これにより、エージェントに対する信頼度、愛着等を高めることが可能であり、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0159】
また、エージェントが、車両Ｃ１からの情報を受け入れやすくする存在であるということをドライバＤ１に感じてもらうためには、エージェントがドライバＤ１にとって親しみやすい存在となる必要がある。そこで、エージェントが親しみやすくするため、エージェントを常時表示させ、エージェントとドライバＤ１との接触回数、接触時間を増やすことが考えられる（例えば、単純接触効果）。しかし、運転状況によってはエージェントが常時表示されていることにドライバＤ１が煩わしさを感じてしまうおそれもある。そこで、エージェントが常時存在することによる煩わしさ、エージェントが常時存在することによるディストラクション（気の散ること）を防止するため、必要のないときにエージェントの外観を消すことが考えられる。この場合には、上述した煩わしさ、ディストラクションを防止することができるが、エージェントが消えたり出現したりすることにより、エージェントと車両Ｃ１との一体感が減ってしまうおそれがある。
【0160】
そこで、本実施形態では、必要のないときにエージェントの外観が消えるような演出を実行するが、エージェントの存在感はそのままの状態とする。すなわち、エージェントの外観は認識し難い状態だけど、ドライバＤ１と同じ空間内に存在するという感覚をドライバＤ１に与えることが可能である。
【0161】
これにより、ドライバＤ１の周囲の環境に反応するようなエージェントの演出を実行することが可能である。すなわち、エージェントに知性が感じられる演出を実行することが可能である。また、ドライバＤ１に仲間意識を感じさせ、ドライバＤ１との共感を高める演出を実行することが可能である。
【0162】
［他の機器、他のシステムにおいて処理を実行させる例］
なお、以上では、判定処理、検出処理、制御処理等を情報処理装置１１０（又は情報処理システム１００）において実行する例を示したが、それらの各処理の全部又は一部を他の機器において実行してもよい。この場合には、それらの各処理の一部を実行する各機器により情報処理システムが構成される。例えば、車載機器、ユーザが使用可能な機器（例えば、スマートフォン、タブレット端末、パーソナルコンピュータ、カーナビゲーション装置、ＩＶＩ）、インターネット等の所定のネットワークを介して接続可能なサーバ等の各種情報処理装置、各種電子機器を用いて各処理の少なくとも一部を実行させることができる。
なお、以上では、判定処理、検出処理、制御処理等を情報処理装置１１０（又は情報処理システム１００）において実行する例を示したが、それらの各処理の全部又は一部を他の機器において実行してもよい。この場合には、それらの各処理の一部を実行する各機器により情報処理システムが構成される。例えば、車載機器、ユーザが使用可能な機器（例えば、スマートフォン、タブレット端末、パーソナルコンピュータ、カーナビゲーション装置、ＩＶＩ）、インターネット等の所定のネットワークを介して接続可能なサーバ等の各種情報処理装置、各種電子機器を用いて各処理の少なくとも一部を実行させることができる。
【0163】
また、情報処理装置１１０（又は情報処理システム１００）の機能を実行可能な情報処理システムの一部（又は全部）については、インターネット等の所定のネットワークを介して提供可能なアプリケーションにより提供されてもよい。このアプリケーションは、例えばＳａａＳ（Software as a Service）である。
【0164】
［本実施形態の構成例及びその効果］
本実施形態に係る情報処理方法は、車両Ｃ１における第１出力機器２００、第２出力機器２１０、周辺機器２２０（複数の機器の一例）を利用してドライバＤ１とのコミュニケーションを行うための制御を実行する情報処理方法である。この情報処理方法は、ドライバＤ１に提示する所定情報が存在するか否かを判定する判定処理（ステップＳ５１６、Ｓ５１７）と、所定情報が存在する場合には、複数の機器のうち、ドライバＤ１の視覚に入り易い場所に位置する第１出力機器２００（第１機器の一例）（又は第２出力機器２１０）を利用して、コミュニケーションを行うためのエージェント（例えばエージェント画像ＡＧ１）をドライバＤ１に視認可能とした状態で、エージェント（例えばエージェント画像ＡＧ１）を用いて所定情報を提示させ（ステップＳ５１８乃至Ｓ５２１）、所定情報が存在しない場合には、複数の機器のうち、第１出力機器２００以外の周辺機器２２０（第２機器の一例）を利用して、ドライバＤ１に認識され難い態様（例えば発熱）でエージェントの存在を感じさせる演出を実行（ステップＳ５２５乃至Ｓ５２７）する制御処理とを含む。また、本実施形態に係るプログラムは、これらの各処理をコンピュータに実行させるプログラムである。言い換えると、本実施形態に係るプログラムは、情報処理装置１１０が実行可能な各機能をコンピュータに実現させるプログラムである。
本実施形態に係る情報処理方法は、車両Ｃ１における第１出力機器２００、第２出力機器２１０、周辺機器２２０（複数の機器の一例）を利用してドライバＤ１とのコミュニケーションを行うための制御を実行する情報処理方法である。この情報処理方法は、ドライバＤ１に提示する所定情報が存在するか否かを判定する判定処理（ステップＳ５１６、Ｓ５１７）と、所定情報が存在する場合には、複数の機器のうち、ドライバＤ１の視覚に入り易い場所に位置する第１出力機器２００（第１機器の一例）（又は第２出力機器２１０）を利用して、コミュニケーションを行うためのエージェント（例えばエージェント画像ＡＧ１）をドライバＤ１に視認可能とした状態で、エージェント（例えばエージェント画像ＡＧ１）を用いて所定情報を提示させ（ステップＳ５１８乃至Ｓ５２１）、所定情報が存在しない場合には、複数の機器のうち、第１出力機器２００以外の周辺機器２２０（第２機器の一例）を利用して、ドライバＤ１に認識され難い態様（例えば発熱）でエージェントの存在を感じさせる演出を実行（ステップＳ５２５乃至Ｓ５２７）する制御処理とを含む。また、本実施形態に係るプログラムは、これらの各処理をコンピュータに実行させるプログラムである。言い換えると、本実施形態に係るプログラムは、情報処理装置１１０が実行可能な各機能をコンピュータに実現させるプログラムである。
【0165】
この構成によれば、ドライバＤ１に提示する所定情報の有無に応じてエージェントの存在感を調整することで、エージェントがドライバＤ１と一緒に車両Ｃ１に乗車している感じを出すことが可能となり、ドライバＤ１がエージェントと一緒にいる感覚を高めることが可能となる。すなわち、ドライバＤ１とエージェントとの一体感を高めることが可能となる。これにより、エージェントに対する信頼度、愛着等を高めることが可能であり、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0166】
本実施形態に係る情報処理方法において、第１出力機器２００（第１機器の一例）は、表示機器である。また、制御処理では、所定情報が存在する場合には、エージェントを表すエージェント画像ＡＧ１を第１出力機器２００に表示させ（ステップＳ５１８乃至Ｓ５２１）、所定情報が存在しない場合には、第１出力機器２００及び周辺機器２２０（第２機器の一例）の双方にエージェント画像を表示させずに、ドライバＤ１の五感のうちの視覚以外の感覚を用いてエージェントの存在を感じさせる演出を周辺機器２２０により実行する（ステップＳ５２５乃至Ｓ５２７）。
【0167】
この構成によれば、必要のあるときにエージェントの外観を現わして所定情報を提示させ、必要のないときにはエージェントの外観が消えるような演出を実行する。これにより、ドライバＤ１に提示する所定情報の有無にかかわらず、車両Ｃ１におけるエージェントの存在感はそのままの状態とすることが可能である。すなわち、ドライバＤ１に提示する所定情報がないときには、エージェントの外観は認識し難い状態とはなるが、ドライバＤ１と同じ空間内に存在するという感覚をドライバＤ１に与えることが可能である。
【0168】
本実施形態に係る情報処理方法において、周辺機器２２０（第２機器の一例）は、ドライバＤ１の周辺に設置されている周辺機器である。制御処理では、周辺機器２２０の温度を調整する温度調整処理と、周辺機器２２０を振動させる振動処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定音を出力させる音出力処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の光を出力させる光出力処理と、周辺機器２２０又はその方向からエージェントの存在を認識可能な所定の匂いを発生させる匂い発生処理と、周辺機器２２０又はその方向からの反動を変化させる反動処理と、第１出力機器２００（又は第２出力機器２１０）から周辺機器２２０にエージェントが移動する移動処理とのうちの少なくとも１つを実行することにより、エージェントの存在を感じさせる演出を実行する（ステップＳ５２５乃至Ｓ５２７）。
【0169】
この構成によれば、ドライバＤ１に提示する所定情報がないときでも、エージェントの外観は認識し難い状態だけど、ドライバＤ１と同じ空間内に存在するという感覚をドライバＤ１に与えることが可能である。
【0170】
本実施形態に係る情報処理方法において、周辺機器２２０は、ドライバＤ１の周辺に設置され、ドライバＤ１が触れることが可能な機器であり、シフトレバー、ステアリングホイール、着座シート、アームレスト、シートベルトのうちの少なくとも１つである。
【0171】
この構成によれば、ドライバＤ１の周辺に設置され、運転時にドライバＤ１が触れることが可能な機器を用いて、エージェントがドライバＤ１と同じ空間内に存在するという感覚をドライバＤ１に与えることが可能である。
【0172】
本実施形態に係る情報処理方法において、車両Ｃ１の位置情報及び地図情報（地図情報ＤＢ又は外部から取得可能）に基づくドライバＤ１の視線の予測処理と、ドライバＤ１の眼を含む画像に基づくドライバＤ１の視線の検出処理とのうちの少なくとも１つを実行することで、ドライバＤ１の視線方向を検出する視線方向検出処理、をさらに含む。また、制御処理では、所定情報が存在する場合には、複数の機器のうち、ドライバＤ１の視線方向に基づいて求められるドライバＤ１の視覚に入る機器を第１機器として利用する（ステップＳ５１８乃至Ｓ５２１）。例えば、ステップＳ５１９において、視線方向検出処理を実行することが可能である。
【0173】
この構成によれば、運転時のドライバＤ１の視線方向に基づいて求められるドライバＤ１の視覚に入る機器を第１機器として利用することで、ドライバＤ１の運転負荷の増加を抑制し、所定情報をドライバＤ１に適切に提示することが可能である。
【0174】
本実施形態に係る情報処理方法において、第１出力機器２００は、表示機器である。また、情報処理方法は、車両Ｃ１の外部の環境に関する環境情報（車外状況取得部１２４により取得可能）と、ドライバＤ１の運転行動に関する運転行動情報（ドライバ状況取得部１２２、車両情報取得部１２５により取得可能）とのうちの少なくとも１つに基づいて、ドライバＤ１の運転負荷を判定する運転負荷判定処理（ステップＳ５０１）をさらに含む。制御処理では、運転負荷が所定値未満である場合には、所定情報の存在にかかわらず、エージェントを表すエージェント画像ＡＧ２を第２出力機器２１０（第１機器の一例）に表示させ、エージェント画像ＡＧ２を用いてコミュニケーションを実行する（ステップＳ５０４乃至Ｓ５０９、Ｓ５１２）。
【0175】
この構成によれば、ドライバＤ１の運転負荷が所定値未満である場合には、エージェント画像ＡＧ２を用いてコミュニケーションを実行することで、エージェント画像ＡＧ２に対する愛着等を高めることができ、エージェント画像ＡＧ２からドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0176】
本実施形態に係る情報処理方法において、第１機器は、第２出力機器２１０（第１表示部の一例）と、第２出力機器２１０よりもドライバＤ１から離れた場所に位置する第１出力機器２００（第２表示部の一例）とを含む複数の表示機器である。制御処理（ステップＳ５０２乃至Ｓ５０８、Ｓ５１２、Ｓ５１８乃至Ｓ５２１）では、ドライバＤ１の運転負荷が所定値未満である場合には、エージェント画像ＡＧ２を第２出力機器２１０に表示させ、ドライバＤ１の運転負荷が所定値以上である場合において、所定情報が存在するときには、エージェント画像ＡＧ１を第１出力機器２００に表示させ、エージェント画像ＡＧ１を用いて所定情報を提示させる。
【0177】
この構成によれば、ドライバＤ１の運転負荷に応じた適切な表示機器を用いてエージェント画像ＡＧ１、ＡＧ２を表示させることができる。これにより、ドライバＤ１の運転負荷の増加を抑制し、所定情報をドライバＤ１に適切に提示することが可能である。
【0178】
本実施形態に係る情報処理方法において、制御処理では、第１出力機器２００又は第２出力機器２１０（第１機器の一例）を利用してエージェントを用いた所定情報の提示を実行する第１制御と、周辺機器２２０（第２機器の一例）を利用して、エージェントの存在を感じさせる演出を実行する第２制御とを切り替える場合には、第１出力機器２００（又は第２出力機器２１０）及び周辺機器２２０間をエージェントが移動する移動演出を実行する（ステップＳ５０４、Ｓ５１０、Ｓ５１４、Ｓ５１９、Ｓ５２２、Ｓ５２６）。例えば、図７乃至図１０に示すように、移動演出が実行される。
【0179】
この構成によれば、移動先と移動元とをドライバＤ１が把握し易くなるため、エージェントがドライバＤ１と同じ空間内に存在するという感覚をドライバＤ１に与えることが可能である。
【0180】
本実施形態に係る情報処理方法において、所定情報は、ドライバＤ１に提示する支援情報のうち、重要度が閾値以上である支援情報である。
【0181】
この構成によれば、ドライバＤ１に提示する支援情報のうち、重要度が閾値以上である支援情報を基準としてエージェントの表現態様を決定することができるため、ドライバＤ１の運転負荷の増加を抑制し、所定情報をドライバＤ１に適切に提示することが可能である。
【0182】
本実施形態に係る情報処理方法において、周辺機器２２０を、ドライバＤ１の視覚に入り難い場所に位置する機器としてもよい。
【0183】
この構成によれば、必要のないときにはエージェントの外観を消すような演出を適切に実行することが可能となる。
【0184】
情報処理装置１１０は、車両Ｃ１における第１出力機器２００、第２出力機器２１０、周辺機器２２０（複数の機器の一例）を利用してドライバＤ１とのコミュニケーションを行うための制御を実行する情報処理装置である。情報処理装置１１０は、ドライバＤ１に提示する所定情報が存在するか否かを判定するコミュニケーション内容決定部１２６（判定部の一例）と、所定情報が存在する場合には、複数の機器のうち、ドライバＤ１の視覚に入り易い場所に位置する第１出力機器２００（第１機器の一例）（又は第２出力機器２１０）を利用して、コミュニケーションを行うためのエージェント（例えばエージェント画像ＡＧ１）をドライバＤ１に視認可能とした状態で、エージェント（例えばエージェント画像ＡＧ１）を用いて所定情報を提示させ、所定情報が存在しない場合には、複数の機器のうち、第１出力機器２００以外の周辺機器２２０（第２機器の一例）を利用して、ドライバＤ１に認識され難い態様（例えば発熱）でエージェントの存在を感じさせる演出を実行する出力態様決定部１２７、エージェント制御部１２８（制御部の一例）とを備える。なお、情報処理装置１１０は、第１出力機器２００、第２出力機器２１０、周辺機器２２０の何れかに内蔵される機器としてもよく、第１出力機器２００、第２出力機器２１０、周辺機器２２０とは異なる機器としてもよい。また、情報処理装置１１０の代わりに、情報処理装置１１０により実現される各処理を実行可能な複数の機器により構成される情報処理システムとしてもよい。
【0185】
この構成によれば、ドライバＤ１に提示する所定情報の有無に応じてエージェントの存在感を調整することで、エージェントがドライバＤ１と一緒に車両Ｃ１に乗車している感じを出すことが可能となり、ドライバＤ１がエージェントと一緒にいる感覚を高めることが可能となる。すなわち、ドライバＤ１とエージェントとの一体感を高めることが可能となる。これにより、エージェントに対する信頼度、愛着等を高めることが可能であり、エージェントからドライバＤ１に伝える情報の伝達能力を高めることが可能である。
【0186】
なお、本実施形態で示した各処理手順は、本実施形態を実現するための一例を示したものであり、本実施形態を実現可能な範囲で各処理手順の一部の順序を入れ替えてもよく、各処理手順の一部を省略したり他の処理手順を追加したりしてもよい。
【0187】
なお、本実施形態の各処理は、各種の処理手順をコンピュータに実行させるためのプログラムに基づいて実行される。本実施形態は、それらの各処理を実行する機能を実現するプログラム、そのプログラムを記憶する記録媒体の実施形態としても把握することができる。例えば、情報処理装置に新機能を追加するためのアップデート処理により、そのプログラムを情報処理装置の記憶装置に記憶させることができる。これにより、そのアップデートされた情報処理装置に本実施形態で示した各処理を実施させることが可能となる。
【0188】
以上、本発明の実施形態について説明したが、上記実施形態は本発明の適用例を示したに過ぎず、本発明の技術的範囲を上記実施形態の具体的構成に限定する趣旨ではない。
【符号の説明】
【0189】
２０ ネットワーク、１００ 情報処理システム、１０１ 音取得部、１０２ ドライバ画像取得部、１０３ 車室画像取得部、１０４ 車外画像取得部、１０５ 車両情報入力部、１１０ 情報処理装置、１２０ 制御部、１２１ 発話取得部、１２２ ドライバ状況取得部、１２３ 車室状況取得部、１２４ 車外状況取得部、１２５ 車両情報取得部、１２６ コミュニケーション内容決定部、１２７ 出力態様決定部、１２８ エージェント制御部、１３０ 記憶部、１３１ エージェント情報ＤＢ、１３２ エージェント管理ＤＢ、１４０ 通信部、２００ 第１出力機器、２０１、２１１ 表示部、２０２、２１２ 音出力部、２１０ 第２出力機器、２２０ 周辺機器、２２１ ヒータ部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】