特許 7393216 情報出力装置及び情報出力方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-11-28

(45)【発行日】2023-12-06

(54)【発明の名称】情報出力装置及び情報出力方法

(51)【国際特許分類】

   G06F 3/01 20060101AFI20231129BHJP

   G06F 3/16 20060101ALI20231129BHJP

【ＦＩ】

G06F3/01 510

G06F3/16 650

G06F3/16 620

G06F3/16 690

【請求項の数】 4

(21)【出願番号】P 2020007214

(22)【出願日】2020-01-21

(65)【公開番号】P2021114208

(43)【公開日】2021-08-05

【審査請求日】2022-11-28

(73)【特許権者】

【識別番号】000005326

【氏名又は名称】本田技研工業株式会社

(74)【代理人】

【識別番号】100077665

【弁理士】

【氏名又は名称】千葉 剛宏

(74)【代理人】

【識別番号】100116676

【弁理士】

【氏名又は名称】宮寺 利幸

(74)【代理人】

【識別番号】100191134

【弁理士】

【氏名又は名称】千馬 隆之

(74)【代理人】

【識別番号】100136548

【弁理士】

【氏名又は名称】仲宗根 康晴

(74)【代理人】

【識別番号】100136641

【弁理士】

【氏名又は名称】坂井 志郎

(74)【代理人】

【識別番号】100180448

【弁理士】

【氏名又は名称】関口 亨祐

(72)【発明者】

【氏名】鈴木 智裕

【審査官】▲高▼瀬 健太郎

(56)【参考文献】

【文献】特開２０１９－１３７３２０（ＪＰ，Ａ）

【文献】国際公開第２０１３／１３２７１２（ＷＯ，Ａ１）

【文献】特開２０１６－０６６１６３（ＪＰ，Ａ）

【文献】特開２００７－１４５１３７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／１６

(57)【特許請求の範囲】

【請求項1】

ユーザの要求に応じた情報を出力するＰＵＬＬ型機能と、現状に応じた情報を自発的に出力するＰＵＳＨ型機能とを備える情報出力装置において、
前記ＰＵＬＬ型機能及び前記ＰＵＳＨ型機能が同時に動作可能である場合、前記ＰＵＬＬ型機能を優先して実行し、前記ＰＵＬＬ型機能を優先して実行する場合、タイマによる計時を開始し、前記ＰＵＬＬ型機能の実行を終了し、前記タイマによる計時を終了するまでは、前記ＰＵＳＨ型機能の実行を待機させる情報処理部を有する、情報出力装置。

【請求項2】

請求項１記載の情報出力装置において、
前記ＰＵＬＬ型機能での前記情報と、前記ＰＵＳＨ型機能での前記情報とのうち、少なくとも一方の前記情報を出力する出力部をさらに有し、
前記情報処理部は、前記ＰＵＬＬ型機能及び前記ＰＵＳＨ型機能が同時に動作可能である場合、同じ前記情報であっても出力形態が異なれば、双方の前記情報を前記出力部から出力させる、情報出力装置。

【請求項3】

請求項１又は２記載の情報出力装置において、
前記情報処理部は、前記ＰＵＬＬ型機能での前記情報と前記ＰＵＳＨ型機能での前記情報とが重複するか、又は、前記タイマが計時した時間がタイムアウト時間を超えているときには、前記ＰＵＳＨ型機能での前記情報を破棄する、情報出力装置。

【請求項4】

ユーザの要求に応じた情報を出力するＰＵＬＬ型機能と、現状に応じた情報を自発的に出力するＰＵＳＨ型機能とを備える情報出力方法において、
前記ＰＵＬＬ型機能及び前記ＰＵＳＨ型機能が同時に動作可能である場合、情報処理部によって、前記ＰＵＬＬ型機能を優先して実行させ、
前記ＰＵＬＬ型機能を優先して実行する場合、タイマによる計時を開始し、前記ＰＵＬＬ型機能の実行を終了し、前記タイマによる計時を終了するまでは、前記ＰＵＳＨ型機能の実行を待機させる、情報出力方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ユーザの要求に応じた情報を出力するＰＵＬＬ型機能と、現状に応じた情報を自発的に出力するＰＵＳＨ型機能とを備える情報出力装置、及び、情報出力方法に関する。

【背景技術】

【0002】

近年、音声入力又は手操作によるユーザの要求に対して、該ユーザの嗜好等に合わせた情報を出力するＰＵＬＬ型機能（プル機能）や、現状に応じた適切な情報を推定し、推定した情報を自発的に出力するＰＵＳＨ型機能（プッシュ機能）を用いて、ユーザをアシストするシステムが開発されている。特許文献１には、車載装置でのコンテンツ配信サービス等のＰＵＳＨ型機能として、ユーザに推定結果の提案を行う提案状態、又は、推定結果の提案を行わずに、推定の精度を高める提案待機状態のいずれかを決定し、決定した状態に応じて適切な動作を行うことが開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２００６－１８５１８９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで、例えば、ユーザがＰＵＬＬ型機能を利用して情報の提供を受ける場合、該情報の提供中、ＰＵＳＨ型機能が実行され、ＰＵＳＨ型機能による情報が割り込むと、ＰＵＬＬ型機能による情報の提供が中断される。この結果、ユーザは、提供中のＰＵＬＬ型機能による情報が得られないため、不快感を覚える可能性がある。

【0005】

本発明は、このような課題を考慮してなされたものであり、ユーザを不快に感じさせることなく、情報を提供することができる情報出力装置及び情報出力方法を提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明の態様は、ユーザの要求に応じた情報を出力するＰＵＬＬ型機能と、現状に応じた情報を自発的に出力するＰＵＳＨ型機能とを備える情報出力装置及び情報出力方法に関する。

【0007】

この場合、前記情報出力装置は、前記ＰＵＬＬ型機能及び前記ＰＵＳＨ型機能が同時に動作可能である場合、いずれか一方の機能を優先して実行する情報処理部を有する。

【0008】

また、前記情報出力方法は、前記ＰＵＬＬ型機能及び前記ＰＵＳＨ型機能が同時に動作可能である場合、情報処理部によって、いずれか一方の機能を優先して実行させる。

【発明の効果】

【0009】

本発明によれば、一方の機能及び他方の機能の実行を調停することで、一方の機能による情報の提供中に、他方の機能の情報が割り込み、該一方の機能による情報の提供が中断されることを回避することができる。この結果、ユーザを不快に感じさせることなく、情報を提供することができる。

【図面の簡単な説明】

【0010】

【図1】本実施形態に係る情報出力装置が適用される情報提供システムの構成図である。

【図2】図１の情報出力装置の動作を図示したフローチャートである。

【図3】図１の情報出力装置の動作を図示したフローチャートである。

【発明を実施するための形態】

【0011】

以下、本発明に係る情報出力装置及び情報出力方法について好適な実施形態を例示し、添付の図面を参照しながら説明する。

【0012】

［１．本実施形態の概略構成］
本実施形態に係る情報出力装置１０は、図１に示す情報提供システム１２に適用される。この情報提供システム１２は、例えば、車両１４の乗員（ユーザ）に対して、ＰＵＬＬ型機能によってコンテンツ等の情報を提供し、又は、ＰＵＳＨ型機能によってレコメンド等の情報を提供する情報報知システムである。

【0013】

情報出力装置１０は、乗員が乗車する車両１４側の装置である。このような装置としては、例えば、ナビゲーション装置やオーディオ装置等の車載装置、乗員のスマートフォンがある。情報出力装置１０は、入力デバイス（入力部）としての音入力部１６、操作入力部１８及びカメラ２０と、情報処理装置２２と、出力デバイス（出力部）としての表示部２４及び音出力部２６とを有する。情報提供システム１２（情報出力装置１０）において、情報処理装置２２は、不図示の通信ネットワークを介して、クラウド２８に接続されている。

【0014】

クラウド２８には、自動言語認識部３０と、コンテンツデータベース（コンテンツＤＢ）３２と、パーソナルプロファイルデータベース（ＰＰ－ＤＢ）３４及びレコメンドデータベース（レコメンドＤＢ）３６を有するサーバ３８とが設けられている。

【0015】

情報出力装置１０において、音入力部１６は、マイクロフォンであり、乗員の音声（入力内容（要求））を電気信号に変換して情報処理装置２２に出力する。操作入力部１８は、キーボード、テンキー、タッチパネル等であり、乗員が操作した入力内容（要求）を電気信号に変換して情報処理装置２２に出力する。入力内容としては、例えば、ＰＯＩ（Ｐｏｉｎｔ Ｏｆ Ｉｎｔｅｒｅｓｔ）のスポットの検索、現在地周辺の天気情報の検索、音楽の再生、電話の発信、後述するＰＰ－ＤＢ３４に蓄積されている情報の変更等、乗員からの各種の要求をいう。カメラ２０は、車両１４の車室内の乗員等を撮像し、撮像した乗員等の画像を情報処理装置２２に出力する。

【0016】

情報処理装置２２は、非一過性の記憶媒体である不図示のメモリに記憶されたプログラムを実行することにより、切替部４０、言語認識問い合わせ部４２、情報処理部４４、ローカル言語認識部４６及び出力処理部４８の機能を実現する。情報処理部４４は、対話管理部４４ａ、非言語理解部４４ｂ、文脈理解部４４ｃ、対話コマンド決定部４４ｄ、タイマ４４ｅ、判定部４４ｆ及び出力形態決定部４４ｇを有する。

【0017】

切替部４０は、音入力部１６及び操作入力部１８からの入力内容を、言語認識問い合わせ部４２又はローカル言語認識部４６に切り替えて出力する。言語認識問い合わせ部４２は、切替部４０からの入力内容に示される乗員の要求を、クラウド２８の自動言語認識部３０に問い合わせる。

【0018】

自動言語認識部３０は、音声認識、１次言語理解及び対話管理等の各種の言語認識機能を有する。自動言語認識部３０は、言語認識問い合わせ部４２からの問い合わせ内容（入力内容）を認識し、コンテンツＤＢ３２に蓄積されている情報を参照して、認識した入力内容に応じた適切な情報を決定する。例えば、乗員の音声が入力内容であった場合、該音声に応じた対話内容を決定する。決定した情報は、言語認識問い合わせ部４２に送信される。言語認識問い合わせ部４２は、入力内容と、受信した情報とを情報処理部４４に出力する。

【0019】

情報処理部４４は、自動言語認識部３０からの情報をＰＵＬＬ型機能による情報（対話内容）として出力処理部４８に出力する。あるいは、情報処理部４４は、カメラ２０からの画像や車両情報に応じた対話内容（情報）を、クラウド２８のサーバ３８から取得し、取得した情報をＰＵＳＨ型機能による情報（対話内容）として出力処理部４８に出力する。

【0020】

具体的に、情報処理部４４において、対話管理部４４ａは、乗員との対話内容を管理する。この場合、対話管理部４４ａは、自動言語認識部３０からの対話内容をＰＵＬＬ型機能による情報として決定する。また、対話管理部４４ａは、カメラ２０からの画像に基づき乗員を特定し、特定した乗員を対象として、車両情報や、後述する非言語理解部４４ｂ及び文脈理解部４４ｃでの処理結果に基づき、クラウド２８のサーバ３８に対して、該乗員に応じた適切な情報（対話内容）の送信を要求する。

【0021】

サーバ３８のＰＰ－ＤＢ３４には、乗員の嗜好に合った各種の情報が蓄積されている。また、サーバ３８のレコメンドＤＢ３６には、乗員に提案する情報（レコメンド）が蓄積されている。レコメンドとしては、例えば、乗員に対する休憩の提案、車両１４の給油の通知、交通情報の通知、立ち寄りスポットの提案等、乗員に対する各種の提案内容がある。サーバ３８は、ＰＰ－ＤＢ３４又はレコメンドＤＢ３６に蓄積されている情報の中から、乗員に応じた適切な情報を選択し、選択した情報を情報処理部４４に送信する。対話管理部４４ａは、サーバ３８から送信された情報を取得する。

【0022】

なお、コンテンツＤＢ３２、ＰＰ－ＤＢ３４及びレコメンドＤＢ３６に蓄積される情報は、必要に応じて更新される。また、カメラ２０は、乗員等の画像を逐次撮像している。そのため、サーバ３８は、学習機能によって、カメラ２０が逐次撮像した画像中の乗員の状態等を学習し、その学習結果をＰＰ－ＤＢ３４及びレコメンドＤＢ３６に情報として蓄積することが可能である。

【0023】

非言語理解部４４ｂは、カメラ２０の画像のような非言語情報から乗員の状態を理解する。また、文脈理解部４４ｃは、入力内容から乗員の意図（文脈）を理解する。従って、対話管理部４４ａは、非言語理解部４４ｂ及び文脈理解部４４ｃの結果も参考に、サーバ３８に対して乗員に応じた適切な情報の送信を要求する。

【0024】

なお、対話管理部４４ａは、ＰＵＬＬ型機能による情報又はＰＵＳＨ型機能による情報を表示部及び音出力部から出力する際の優先度を設定する。この場合、対話管理部４４ａは、ＰＵＬＬ型機能による情報の優先度を、ＰＵＳＨ型機能による情報の優先度よりも高く設定する。

【0025】

対話コマンド決定部４４ｄは、情報処理部４４から出力処理部４８に出力する情報（乗員との対話内容）を決定する。具体的に、対話コマンド決定部４４ｄは、対話管理部４４ａで設定された優先度や、後述する判定部４４ｆの判定結果に基づき、ＰＵＬＬ型機能による情報を出力する場合には、自動言語認識部３０からの情報を対話コマンドとして決定する。また、対話コマンド決定部４４ｄは、ＰＵＳＨ型機能による情報を出力する場合には、対話管理部４４ａが取得したサーバ３８からの情報を対話コマンドとして決定する。

【0026】

タイマ４４ｅは、ＰＵＬＬ型機能による情報の出力中、ＰＵＬＬ型機能の実行時間を計時する。また、判定部４４ｆは、ＰＵＬＬ型機能での情報の出力、又は、ＰＵＳＨ型機能での情報の出力のどちらを優先的に実行するかを判定する。この場合、判定部４４ｆは、対話管理部４４ａで設定された優先度を考慮して判定する。さらに、出力形態決定部４４ｇは、情報の出力形態、すなわち、表示部２４から画像として出力するか、又は、音出力部２６から音声として出力するかを決定する。従って、対話コマンド決定部４４ｄは、タイマ４４ｅ、判定部４４ｆ及び出力形態決定部４４ｇの処理結果も考慮して、対話コマンドを決定する。

【0027】

一方、ローカル言語認識部４６は、切替部４０から入力内容が入力された場合、入力内容に応じた対話内容を決定し、決定した対話内容を出力処理部４８に出力する。従って、ローカル言語認識部４６は、ＰＵＬＬ型機能による情報のみ出力する。

【0028】

出力処理部４８は、情報処理部４４又はローカル言語認識部４６から出力された情報に対して、表示部２４又は音出力部２６の出力形態に応じた出力処理を実行する。表示部２４は、車載装置又はスマートフォンの画面であって、出力処理部４８から出力された情報を画像として画面に表示する。音出力部２６は、車載装置又はスマートフォンのスピーカであって、出力処理部４８から出力された情報を音声として出力する。

【0029】

［２．本実施形態の動作］
以上のように構成される本実施形態に係る情報出力装置１０の動作（情報出力方法）について、図２及び図３を参照しながら説明する。図２及び図３の処理の動作主体は、情報処理部４４、特に判定部４４ｆである。そのため、図２及び図３の動作説明では、情報処理部４４の一部の構成要素に関する説明を簡略化するか、又は、省略する場合がある。

【0030】

図２に示す処理は、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に動作可能である場合、いずれか一方の機能を優先して実行するというものである。前述のように、対話管理部４４ａは、ＰＵＬＬ型機能及びＰＵＳＨ型機能の機能毎に、情報の優先度を設定している。図２では、情報の優先度の高低に応じて、機能の割り込みを調停するというものである。

【0031】

ここでは、ＰＵＬＬ型機能を優先して実行する場合について説明する。また、この動作説明では、切替部４０（図１参照）は、音入力部１６又は操作入力部１８からの入力内容を言語認識問い合わせ部４２に出力する。

【0032】

情報処理装置２２には、カメラ２０が撮像した乗員等の画像や、車両情報が逐次入力される。また、乗員は、必要に応じて、音入力部１６に音声を入力し、又は、操作入力部１８を操作する。この場合、音入力部１６又は操作入力部１８の入力内容としては、例えば、近くのガソリンスタンドの場所の報知要求等がある。入力内容は、切替部４０を介して言語認識問い合わせ部４２に入力される。言語認識問い合わせ部４２は、入力内容に応じた適切な情報（乗員の嗜好に合ったガソリンスタンドの場所）を自動言語認識部３０から取得し、取得した情報と入力内容とを情報処理部４４に出力する。

【0033】

そして、図２のステップＳ１において、情報処理部４４（図１参照）の対話管理部４４ａは、カメラ２０が撮像した画像や車両情報に基づき、乗員に提案する情報、例えば、ガソリンスタンドの場所をサーバ３８から取得する。すなわち、ステップＳ１において、情報処理部４４は、ＰＵＳＨ型機能を発生させる。

【0034】

ステップＳ２において、判定部４４ｆは、ＰＵＬＬ型機能による情報が表示部２４に画像として表示されているか、又は、音出力部２６から音声として出力されているか否か、すなわち、ＰＵＬＬ型機能がフォアグラウンドで実行中であるか否かを判定する。

【0035】

ＰＵＬＬ型機能がフォアグラウンドで実行中でない場合（ステップＳ２：ＮＯ）、ステップＳ３に進む。ステップＳ３において、判定部４４ｆは、優先度の高いＰＵＬＬ型機能が実行されていないと判定し、優先度の低いＰＵＳＨ型機能の実行を決定する。すなわち、判定部４４ｆは、サーバ３８から取得した情報の出力処理の実行を決定する。これにより、対話コマンド決定部４４ｄは、判定部４４ｆの結果に基づき、対話管理部４４ａがサーバ３８から取得した情報を対話コマンドとして決定する。この結果、表示部２４は、情報処理部４４から出力処理部４８を介して入力された該情報を、画像として画面上に出力する。あるいは、音出力部２６は、該情報に応じた音声を出力する。

【0036】

一方、ステップＳ２において、ＰＵＬＬ型機能がフォアグラウンドで実行中である場合（ステップＳ２：ＹＥＳ）、ステップＳ４に進む。ステップＳ４において、判定部４４ｆは、ＰＵＳＨ型機能による情報の出力と、ＰＵＬＬ型機能による情報の出力とが重なるか否かを判定する。すなわち、ステップＳ４において、判定部４４ｆは、優先度の低いＰＵＳＨ型機能の実行によって、表示部２４又は音出力部２６からＰＵＳＨ型機能の情報を出力しても、優先度の高いＰＵＬＬ型機能による情報の出力が妨げられないか否か（中断しないか否か）を判定する。

【0037】

例えば、ＰＵＬＬ型機能による表示部２４での画像表示と、ＰＵＳＨ型機能による音出力部２６での音声出力とでは、互いに異なる出力形態である。そのため、該画像表示が中断されることがなく、乗員に不快感を与えることがない。このように、ＰＵＬＬ型機能による情報の出力が中断しない場合（ステップＳ４：ＹＥＳ）、判定部４４ｆは、ステップＳ３に進み、ＰＵＬＬ型機能が実行中であっても、ＰＵＳＨ型機能による情報の出力処理の実行を決定する。

【0038】

一方、ＰＵＳＨ型機能による情報の出力と、ＰＵＬＬ型機能による情報の出力とが重なる場合（ステップＳ４：ＮＯ）、ステップＳ５に進む。ステップＳ５において、判定部４４ｆは、ＰＵＳＨ型機能による表示部２４での画像表示と、ＰＵＬＬ型機能による画像表示とが互いに重ならず、且つ、音出力部２６での音声出力については、ＰＵＳＨ型機能及びＰＵＬＬ型機能の双方が重なるか否かを判定する。

【0039】

例えば、表示部２４の画面において、ＰＵＳＨ型機能による画像と、ＰＵＬＬ型機能による画像とが異なる領域に表示されるが、一方で、音出力部２６からＰＵＳＨ型機能及びＰＵＬＬ型機能の双方の情報を音声として出力することができない場合（ステップＳ５：ＹＥＳ）、ステップＳ６に進む。この場合、判定部４４ｆは、表示部２４については、画像表示が乗員に不快感を与える可能性はないため、ＰＵＳＨ型機能による画像とＰＵＬＬ型機能による画像との双方の表示を許可する。一方、音出力部２６からの音声出力に関しては、ＰＵＬＬ型機能による音声出力が中断され、乗員に不快感を与える可能性があるため、ＰＵＬＬ型機能による音声出力のみ行う。この結果、ＰＵＳＨ型機能による音声出力はバックグラウンド状態（待機状態）となる。

【0040】

一方、ステップＳ５において、ＰＵＳＨ型機能による表示部２４での画像表示と、ＰＵＬＬ型機能による画像表示とが互いに重なるか、又は、ＰＵＳＨ型機能及びＰＵＬＬ型機能による音声出力は互いに重ならない場合（ステップＳ５：ＮＯ）、ステップＳ７に進む。ステップＳ７において、判定部４４ｆは、ＰＵＳＨ型機能による表示部２４での画像表示と、ＰＵＬＬ型機能による画像表示とが互いに重なり、且つ、音出力部２６での音声出力に関しては、ＰＵＳＨ型機能及びＰＵＬＬ型機能で重ならないか否かを判定する。

【0041】

例えば、表示部２４の画面において、ＰＵＳＨ型機能による画像と、ＰＵＬＬ型機能による画像とが同じ領域に表示されるか、又は、一部が重複して表示され、一方で、音出力部２６からは、ＰＵＳＨ型機能又はＰＵＬＬ型機能のいずれか一方の情報が音声として出力される場合（ステップＳ７：ＹＥＳ）、ステップＳ８に進む。ステップＳ８において、判定部４４ｆは、表示部２４については、ＰＵＳＨ型機能及びＰＵＬＬ型機能の画像が重なり、乗員に不快感を与える可能性があるため、ＰＵＳＨ型機能による画像をバックグラウンドとして待機させる。一方、音出力部２６からの音声出力に関しては、いずれか一方の機能による音声出力を行う。

【0042】

一方、ステップＳ７において、ＰＵＳＨ型機能による表示部２４での画像表示と、ＰＵＬＬ型機能による画像表示とが互いに重なるか、又は、ＰＵＳＨ型機能及びＰＵＬＬ型機能による音声出力が互いに重なる場合（ステップＳ７：ＮＯ）、ステップＳ９に進む。ステップＳ９において、判定部４４ｆは、画像表示及び音声出力のいずれの場合でも、ＰＵＳＨ型機能及びＰＵＬＬ型機能での情報の出力が互いに重なることで、乗員に不快感を与える可能性があるため、ＰＵＳＨ型機能をバックグラウンドとして待機させることを決定する。

【0043】

ステップＳ３、Ｓ６、Ｓ８、Ｓ９後のステップＳ１０において、情報処理部４４は、ステップＳ１～Ｓ１０の処理を繰り返し実行するか否かを判定する。繰り返し実行する場合（ステップＳ１０：ＹＥＳ）、情報処理部４４は、ステップＳ１に戻り、ステップＳ１～Ｓ１０の処理を再度実行する。一方、ステップＳ１～Ｓ１０の処理を繰り返し実行しない場合（ステップＳ１０：ＮＯ）、図２の処理を終了する。

【0044】

このように、図２の処理では、優先度の高低に応じて、ＰＵＬＬ型機能に対するＰＵＳＨ型機能の割り込みを調停する。これにより、ＰＵＬＬ型機能による情報の提供の中断が回避され、乗員に不快感を与えないようにすることができる。具体的に、優先度の高いＰＵＬＬ型機能に対して優先度の低いＰＵＳＨ型機能が割り込まないように調停している。また、優先度の高いＰＵＬＬ型機能の実行中に、優先度の低いＰＵＳＨ型機能が発生しても、バックグラウンド状態にして実行を待機させる。

【0045】

さらに、図２の処理では、音声出力の有無や画像表示領域の違いに応じて、ＰＵＳＨ型機能による情報をバックグラウンドで待機させずに出力可能としている。すなわち、フォアグラウンドで実行中のＰＵＬＬ型機能が、ＰＵＳＨ型機能の実行によって中断されない場合には、ＰＵＳＨ型機能とＰＵＬＬ型機能とを同時に実行させても、乗員に不快感を与えない。このように２つの機能を同時に実行することで、乗員に対して双方の情報をオンタイムで出力することが可能となる。

【0046】

従って、図２の処理は、ＰＵＳＨ型機能又はＰＵＬＬ型機能を単独で実行する場合に限定されることはない。（１）ＰＵＬＬ型機能及びＰＵＳＨ型機能の情報を同時に画像表示する場合、（２）ＰＵＬＬ型機能及びＰＵＳＨ型機能の情報を同時に画像表示すると共に、ＰＵＬＬ型機能又はＰＵＳＨ型機能の情報を音声出力する場合、（３）ＰＵＬＬ型機能の情報を画像表示すると共にＰＵＳＨ型機能の情報を音声出力する場合、（４）ＰＵＬＬ型機能の情報を音声出力すると共にＰＵＳＨ型機能の情報を画面出力する場合、のいずれも実行可能である。

【0047】

なお、情報処理部４４がカメラ２０の画像に基づき乗員を認識した場合、表示部２４にログイン画面を表示させ、音出力部２６からログインの音声を出力させてもよい。この場合、ログイン画面は、ＰＵＬＬ型機能の情報とは異なる画像領域に表示し、ログインの音声は、ＰＵＳＨ型機能と同様に、ＰＵＬＬ型機能による音声出力に割り込まないようにバックグラウンドで待機させればよい。

【0048】

図３の処理は、図２の処理後に行われる。図３の処理は、バックグラウンドで待機しているＰＵＳＨ型機能を実行させるか否かを決定するための処理である。すなわち、図３のステップＳ１１では、ＰＵＬＬ型機能がフォアグラウンド状態にあり、ＰＵＳＨ型機能がバックグラウンド状態にある。

【0049】

次のステップＳ１２において、タイマ４４ｅが計時を開始する。この場合、フォアグラウンド状態にあるＰＵＬＬ型機能の実行（画面出力又は音声出力）が終了すれば（ステップＳ１３：ＹＥＳ）、次のステップＳ１４において、タイマ４４ｅは、計時を終了する。

【0050】

次のステップＳ１５において、判定部４４ｆは、タイマ４４ｅが計時した時間がタイムアウト時間（待機時間）を超えたか否かを判定する。

【0051】

計時した時間がタイムアウト時間を超えている場合（ステップＳ１５：ＹＥＳ）、ステップＳ１６に進む。ステップＳ１６において、判定部４４ｆは、バックグラウンド状態のＰＵＳＨ型機能の情報が過去の情報になっている可能性があるため、該情報の破棄を決定する。これにより、待機しているＰＵＳＨ型機能は棄却され、情報は破棄される。

【0052】

一方、計時した時間がタイムアウト時間に到達していない場合（ステップＳ１５：ＮＯ）、ステップＳ１７に進む。ステップＳ１７において、判定部４４ｆは、フォアグラウンドのＰＵＬＬ型機能の情報と、バックグラウンド状態のＰＵＳＨ型機能の情報とが同じ情報であるか（内容が重なるか）否かを判定する。

【0053】

同じ情報である場合（ステップＳ１７：ＹＥＳ）、ＰＵＬＬ型機能の実行が終了し、ＰＵＳＨ型機能を実行した際、同じ情報が再度出力されるので、判定部４４ｆは、ステップＳ１６に進み、ＰＵＳＨ型機能の棄却（情報の破棄）を決定する。

【0054】

一方、フォアグラウンドのＰＵＬＬ型機能の情報と、バックグラウンド状態のＰＵＳＨ型機能の情報とが異なる場合（ステップＳ１７：ＮＯ）、ステップＳ１８に進む。ステップＳ１８において、判定部４４ｆは、待機しているＰＵＳＨ型機能の実行を決定する。これにより、待機しているＰＵＳＨ型機能による情報が表示部２４から画像として表示され、又は、音出力部２６から音声として出力される。

【0055】

ステップＳ１６、Ｓ１８後のステップＳ１９において、情報処理部４４は、ステップＳ１１～Ｓ１９の処理を繰り返し実行するか否かを判定する。繰り返し実行する場合（ステップＳ１９：ＹＥＳ）、情報処理部４４は、ステップＳ１１に戻り、ステップＳ１１～Ｓ１９の処理を再度実行する。一方、ステップＳ１１～Ｓ１９の処理を繰り返し実行しない場合（ステップＳ１９：ＮＯ）、図３の処理を終了する。

【0056】

このように、ＰＵＬＬ型機能がフォアグラウンドで実行中、バックグラウンドで待機中のＰＵＳＨ型機能の情報が過去の情報になる可能性がある。例えば、ＰＵＳＨ型機能の情報が立ち寄りスポットである場合、ＰＵＬＬ型機能の実行中、車両１４が該立ち寄りスポットを通過する可能性がある。また、フォアグラウンドのＰＵＬＬ型機能の情報とＰＵＳＨ型機能の情報とが重複する可能性もある。従って、古くなった情報や重複する情報は、乗員に対する不快感を与えないため、破棄する必要がある。

【0057】

一方、バックグラウンドで待機していても、古くない情報や重複しない情報は、乗員にとって有益な内容である可能性が高い。このような情報は、破棄する必要がないため、ＰＵＬＬ型機能の実行の終了後に出力すればよい。

【0058】

そこで、図３の処理では、タイムアウト時間や、ＰＵＬＬ型機能の情報との関連性に基づき、バックグラウンドで待機しているＰＵＳＨ型機能を、フォアグラウンドのＰＵＬＬ型機能の終了後に実行させるか否かを決定する。この場合でも、乗員に対する不快感を与えないように情報を提供することができる。

【0059】

なお、図３の処理では、待機したＰＵＳＨ型機能の実行又は棄却の情報は、ログとして記録してもよい。

【0060】

また、ステップＳ１７の判定処理では、下記の判定条件に従って重複する情報か否かを判定してもよい。

【0061】

すなわち、ＰＵＬＬ型機能において、乗員が要求する入力内容（スポット）と、ＰＵＳＨ型機能で提案する情報（スポット）とが重なる場合、ＰＯＩのカテゴリに基づき、破棄の対象となるか否かを判定すればよい。例えば、コンビニエンスストアへのルートを音声入力で設定した直後には、コンビニエンスストアへのルートの提案はせず、このような提案をするＰＵＳＨ型機能の情報を破棄の対象とする。

【0062】

また、ＰＯＩの検索の有無に基づき、破棄の対象となるか否かを判定してもよい。例えば、乗員がＰＯＩのカテゴリによらず、音声入力でＰＯＩの検索を要求した直後には、あらゆるスポットに対するルートの提案はせず、このような提案をするＰＵＳＨ型機能の情報を破棄の対象とする。

【0063】

また、タイムアウト時間についても、ＰＵＳＨ型機能の情報に応じて変化させてもよい。例えば、提案するスポットが車両１４の現在地から遠い地点の場合は、タイムアウト時間を長く設定する。また、提案するスポットが現在地から近い地点の場合、車両１４が該スポットを通り過ぎる可能性があるため、タイムアウト時間を短く設定する。

【0064】

［３．変形例］
上記の説明では、ＰＵＬＬ型機能の情報の優先度が高く、ＰＵＳＨ型機能の情報の優先度が低い場合について説明した。本実施形態では、ＰＵＳＨ型機能の情報の優先度を、ＰＵＬＬ型機能の情報の優先度よりも高く設定することも可能である。この場合、図２及び図３の動作説明において、ＰＵＳＨ型機能とＰＵＬＬ型機能との立場を入れ替えれば、ＰＵＳＨ型機能の情報の優先度が高い場合における動作説明となる。

【0065】

［４．本実施形態の効果］
以上説明したように、本実施形態は、乗員（ユーザ）の要求に応じた情報を出力するＰＵＬＬ型機能と、現状に応じた情報を自発的に出力するＰＵＳＨ型機能とを備える情報出力装置１０及び情報出力方法に関する。

【0066】

この場合、情報出力装置１０は、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に動作可能である場合、いずれか一方の機能を優先して実行する情報処理部４４を有する。

【0067】

また、情報出力方法は、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に動作可能である場合、情報処理部４４によって、いずれか一方の機能を優先して実行させる。

【0068】

このように、一方の機能及び他方の機能の実行を調停することで、一方の機能による情報の提供中に、他方の機能の情報が割り込み、該一方の機能による情報の提供が中断されることを回避することができる。この結果、乗員を不快に感じさせることなく、情報を提供することができる。

【0069】

この場合、情報処理部４４は、ＰＵＬＬ型機能及びＰＵＳＨ型機能について、情報を出力する優先度を設定し、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に実行可能である場合、優先度の高い情報を出力する機能を優先して実行する。優先度の高い方を出力することで、乗員は、正確且つ迅速に情報を認識することができる。

【0070】

具体的に、情報処理部４４は、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に動作可能である場合、ＰＵＬＬ型機能を優先して実行する。これにより、ＰＵＬＬ型機能による情報の提供中に、ＰＵＳＨ型機能による情報が割り込んで、ＰＵＬＬ型機能の情報の提供が中断されることを回避することができる。

【0071】

また、情報出力装置１０は、ＰＵＬＬ型機能での情報と、ＰＵＳＨ型機能での情報とのうち、少なくとも一方の情報を出力する表示部２４及び音出力部２６（出力部）をさらに有する。情報処理部４４は、ＰＵＬＬ型機能及びＰＵＳＨ型機能が同時に動作可能である場合、同じ情報であっても出力形態が異なれば、双方の情報を出力部から出力させる。お互いの情報を同時に出力しても、影響がないので、乗員は、有用な情報を効率よく入手することができる。

【0072】

さらに、情報処理部４４は、ＰＵＬＬ型機能（一方の機能）を優先して実行する場合、ＰＵＬＬ型機能の実行に応じたタイムアウト時間（待機時間）を設定し、設定したタイムアウト時間中、ＰＵＳＨ型機能（他方の機能）の実行を待機させる。これにより、２つの情報が同時に出力されることを確実に回避することができる。この結果、乗員は、正確な情報を容易に入手することができる。

【0073】

さらにまた、情報処理部４４は、ＰＵＬＬ型機能（一方の機能）を優先して実行する場合、ＰＵＬＬ型機能での情報とＰＵＳＨ型機能（他方の機能）での情報とが重複するか、又は、ＰＵＬＬ型機能での情報に対して、ＰＵＳＨ型機能での情報が過去の情報であるときには、ＰＵＳＨ型機能での情報を破棄する。このような情報は不必要であり、紛らわしい。従って、このような情報を破棄することで、乗員に対する正確な情報の提供と、不快感の一層の低減を図ることができる。

【0074】

なお、本発明は、上述の実施形態に限らず、この明細書の記載内容に基づき、種々の構成を採り得ることは勿論である。

【符号の説明】

【0075】

１０…情報出力装置 ２４…表示部（出力部）
２６…音出力部（出力部） ４４…情報処理部

【図1】

【図2】

【図3】