特許 6033336 情報表示制御装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6033336

(24)【登録日】2016年11月4日

(45)【発行日】2016年11月30日

(54)【発明の名称】情報表示制御装置

(51)【国際特許分類】

   H04M 1/00 20060101AFI20161121BHJP

   G01C 21/26 20060101ALI20161121BHJP

【ＦＩ】

   H04M1/00 V

   G01C21/26 B

【請求項の数】10

【全頁数】21

(21)【出願番号】特願2014-557280(P2014-557280)

(86)(22)【出願日】2013年1月18日

(86)【国際出願番号】JP2013050875

(87)【国際公開番号】WO2014112096

(87)【国際公開日】20140724

【審査請求日】2014年12月12日

(73)【特許権者】

【識別番号】000006013

【氏名又は名称】三菱電機株式会社

(74)【代理人】

【識別番号】100088672

【弁理士】

【氏名又は名称】吉竹 英俊

(74)【代理人】

【識別番号】100088845

【弁理士】

【氏名又は名称】有田 貴弘

(72)【発明者】

【氏名】竹内 沙織

(72)【発明者】

【氏名】下谷 光生

(72)【発明者】

【氏名】樋口 信吾

(72)【発明者】

【氏名】阿部 和則

【審査官】 白井 孝治

(56)【参考文献】

【文献】 特開２０１１−２５４２９９（ＪＰ，Ａ）

【文献】 特開２０１０−１３０６７２（ＪＰ，Ａ）

【文献】 特開２０１２−１２０２１８（ＪＰ，Ａ）

【文献】 特開２００５−２３６６１５（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｍ １／００

Ｈ０４Ｍ １／２４〜 ３／００

Ｈ０４Ｍ ３／１６〜 ３／２０

Ｈ０４Ｍ ３／３８〜 ３／５８

Ｈ０４Ｍ ７／００〜 ７／１６

Ｈ０４Ｍ１１／００〜１１／１０

Ｈ０４Ｍ９９／００

Ｈ０４Ｂ ７／２４〜 ７／２６

Ｈ０４Ｗ ４／００〜９９／００

Ｇ０１Ｃ２１／００〜２１／３６

Ｇ０１Ｃ２３／００〜２５／００

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０４８〜３／０４８９

(57)【特許請求の範囲】

【請求項1】

通信端末との通信を行う通信部と、
前記通信端末で動作しているアプリケーションの画像を前記通信部を介して取得し、当該アプリケーションの画像を表示装置に表示させる画像処理部と、
前記通信端末で発生したイベントにより前記アプリケーションの画像の取得が中断される場合に、前記アプリケーションと同様の機能を発揮する代替アプリケーションを実行する制御部と、
を備え、
前記画像処理部は、前記イベントにより前記アプリケーションの画像の取得が中断される場合、前記イベントの発生を示すイベント画像と前記代替アプリケーションの画像との合成画像を前記表示装置に表示させ、
前記アプリケーションは、経路案内を行うナビゲーション用のアプリケーションであり、
前記代替アプリケーションは、前記ナビゲーション用のアプリケーションよりも簡略化された地図を表示する簡易ナビゲーション用のアプリケーションであり、
前記ナビゲーション用のアプリケーションおよび前記簡易ナビゲーション用のアプリケーションは、地図に表示する地域を現在位置に合わせて更新する機能を有する
ことを特徴とする情報表示制御装置。

【請求項2】

前記簡易ナビゲーション用のアプリケーションが用いる地図のデータ量は、前記ナビゲーション用のアプリケーションが用いる地図のデータ量よりも少ない
請求項１記載の情報表示制御装置。

【請求項3】

前記表示装置に表示される画像が、前記ナビゲーション用のアプリケーションの地図から、前記簡易ナビゲーション用のアプリケーションの地図に切り替わるとき、前記簡易ナビゲーション用のアプリケーションは、前記ナビゲーション用のアプリケーションが表示していた地図と同じ地域を同じ縮尺および向きで表した地図を表示する
請求項１または請求項２記載の情報表示制御装置。

【請求項4】

前記表示装置に表示される画像が、前記ナビゲーション用のアプリケーションの地図から、前記簡易ナビゲーション用のアプリケーションの地図に切り替わるとき、前記簡易ナビゲーション用のアプリケーションは、前記ナビゲーション用のアプリケーションが表示していた経路と同じ経路を表示する
請求項１または請求項３記載の情報表示制御装置。

【請求項5】

前記制御部は、前記イベントの発生前から前記簡易ナビゲーション用のアプリケーションで使用する現在位置の情報を取得する
請求項１または請求項２記載の情報表示制御装置。

【請求項6】

前記制御部は、前記イベントの発生前から前記簡易ナビゲーション用のアプリケーションを起動させる
請求項１または請求項２記載の情報表示制御装置。

【請求項7】

通信端末との通信を行う通信部と、
前記通信端末で動作しているアプリケーションの画像を前記通信部を介して取得し、当該アプリケーションの画像を表示装置に表示させる画像処理部と、
前記通信端末で発生したイベントにより前記アプリケーションの画像の取得が中断される場合に、前記アプリケーションと同様の機能を発揮する代替アプリケーションを実行する制御部と、
を備え、
前記画像処理部は、前記イベントにより前記アプリケーションの画像の取得が中断される場合、前記イベントの発生を示すイベント画像と前記代替アプリケーションの画像との合成画像を前記表示装置に表示させ、
前記代替アプリケーションは、所定のサイトにアクセスすることによって前記アプリケーションと同様の機能を発揮するブラウザアプリケーションである
ことを特徴とする情報表示制御装置。

【請求項8】

前記画像処理部は、前記アプリケーションの画像の取得の中断が、予め定められた特定のイベントが発生したことによって生じた場合は、前記合成画像に代えて、前記イベント画像を含まない前記代替アプリケーションの画像を前記表示装置に表示させる
請求項１から請求項７のいずれか一項記載の情報表示制御装置。

【請求項9】

前記通信端末は電話機能または電子メール送受信機能を有し、
前記合成画像に含ませる前記イベント画像に対応する前記イベントは、前記通信端末への電話着信または電子メール着信を含む
請求項１から請求項８のいずれか一項記載の情報表示制御装置。

【請求項10】

前記画像処理部は、前記合成画像を生成する際、前記イベント画像に所定の加工処理を施す
請求項１から請求項９のいずれか一項記載の情報表示制御装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報表示装置の動作を制御する情報表示制御装置に関し、特に、外部の通信端末との連携（リンク）機能を有する情報表示制御装置に関する。

【背景技術】

【0002】

近年、スマートフォンや携帯電話などの通信端末との通信機能を有する情報表示装置が実用化されている。そのような情報表示装置としては、通信端末で動作しているアプリケーションプログラム（以下、単に「アプリケーション」という）が出力する画像や音声を取得し、自己の表示部やスピーカから出力したり、画像や音声に基づくユーザの操作を受け付けて通信端末を制御したりするなど、通信端末との連携動作を可能とするリンク機能（例えばMirrorLink（登録商標）機能）を有するものがある。

【0003】

一般に、通信端末において、アプリケーションの実行中に電話着信などのイベントが発生すると、当該アプリケーションの実行が中断される。このとき通信端末の画面表示は、アプリケーションが出力する画像（アプリケーション画像）から、イベントの発生を通知する画像に切り替わるのが通常である。そのため、情報表示装置が通信端末とリンクし、通信端末から取得したアプリケーション画像を表示していても、通信端末でイベントが発生すると、通信端末からのアプリケーション画像の送信が中断される。その場合、情報表示装置の表示も、通信端末でのイベントの発生を通知する画像に切り替えられる。

【0004】

例えば、車載の情報表示装置が、通信端末で動作しているナビゲーション用アプリケーションが出力した地図を表示しているときに、通信端末に電話着信があると、情報表示装置の表示が地図から電話の着信画面に切り替わる。そうなると、運転者は通話が終了するまで地図を見ることができず、利便性が低下する。

【0005】

例えば下記の特許文献１では、車載の情報表示装置が通信端末のナビゲーション用アプリケーションの地図を表示する際にその地図を随時記憶しておき、通信端末にイベントが発生したときに、情報表示装置がその直前に記憶した地図を表示し続ける技術が提案されている。この技術によれば、通信端末に電話着信があっても、情報表示装置には地図が表示されたままになるため、運転者は継続して地図を見ることができる。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２０１１−２５４２９９号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

特許文献１の情報表示装置では、通信端末にイベントが発生したときに表示する画像、すなわちイベント発生直前の地図は、静的な画像であり、イベントの継続中に更新されることはない。そのため、イベントの継続中に車両が進むと、地図に表示されている車両の位置と実際の車両の位置とがずれる。その結果、ユーザは情報表示装置に表示されている地図から現在位置を直感的に把握できなくなり、利便性が低下する。

【0008】

本発明は以上のような課題を解決するためになされたものであり、通信端末でイベントが発生しても利便性を維持できる情報表示制御装置を提供することを目的とする。

【課題を解決するための手段】

【0009】

本発明の第１の態様に係る情報表示制御装置は、通信端末との通信を行う通信部と、通信端末で動作しているアプリケーションの画像を通信部を介して取得し、当該アプリケーションの画像を表示装置に表示させる画像処理部と、通信端末で発生したイベントによりアプリケーションの画像の取得が中断される場合に、アプリケーションと同様の機能を発揮する代替アプリケーションを実行する制御部と、を備え、画像処理部は、イベントによりアプリケーションの画像の取得が中断される場合、イベントの発生を示す画像と代替アプリケーションの画像との合成画像を表示装置に表示させ、アプリケーションは、経路案内を行うナビゲーション用のアプリケーションであり、代替アプリケーションは、ナビゲーション用のアプリケーションよりも簡略化された地図を表示する簡易ナビゲーション用のアプリケーションであり、ナビゲーション用のアプリケーションおよび簡易ナビゲーション用のアプリケーションは、地図に表示する地域を現在位置に合わせて更新する機能を有するものである。

【発明の効果】

【0011】

本発明によれば、通信端末でイベントが発生したとき、表示装置には、イベントの発生を示す画像と、アプリケーションの画像の代わりとなる動的な画像（繰り返し更新される画像）との合成画像が表示される。イベントが発生した後もアプリケーションの画像に対応する動的な画像が表示され続けることにより、利便性が維持される。

【0012】

この発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。

【図面の簡単な説明】

【0013】

【図1】本発明の実施の形態１および２に係る情報表示システムの構成図である。

【図2】情報表示制御装置と通信端末との連携動作を説明するための図である。

【図3】情報表示制御装置と通信端末との連携動作を説明するための図である。

【図4】通信端末からデータを受信したときの情報表示制御装置の動作を示すフローチャートである。

【図5】操作入力装置（タッチパネル）が操作されたときの情報表示制御装置の動作を示すフローチャートである。

【図6】通信端末でユーザへ通知するイベントが発生したときの、実施の形態１に係る情報表示制御装置の動作を説明するための図である。

【図7】通信端末でユーザへの通知が不要なイベントが発生したときの、実施の形態１に係る情報表示制御装置の動作を説明するための図である。

【図8】通信端末でイベントが発生したときの、実施の形態１に係る情報表示制御装置の画像表示動作を示すフローチャートである。

【図9】通信端末でユーザへ通知するイベントが発生したときの、実施の形態２に係る情報表示制御装置の動作を説明するための図である。

【図10】本発明の実施の形態３に係る情報表示システムの構成図である。

【図11】実施の形態３に係る情報表示制御装置の動作を説明するための図である。

【図12】実施の形態３に係る情報表示制御装置の動作を説明するための図である。

【図13】通信端末でイベントが発生したときの、実施の形態３に係る情報表示制御装置の画像表示動作を示すフローチャートである。

【発明を実施するための形態】

【0014】

＜実施の形態１＞
図１は、本発明に係る情報表示システムの構成図である。当該情報表示システムは、情報表示制御装置１０と、それに接続される画像表示装置２１、音声出力装置２２および操作入力装置２３と、情報表示制御装置１０と連携（リンク）可能な通信端末３０とを含んでいる。

【0015】

情報表示制御装置１０は、画像表示装置２１に表示させる画像および音声出力装置２２に出力させる音声を制御する。操作入力装置２３は、ユーザが情報表示制御装置１０に対する操作、もしくは情報表示制御装置１０を介して通信端末３０をリモート操作するためのユーザインターフェイスである。情報表示制御装置１０が組み込まれる具体的な製品としては、例えば、カーナビゲーション装置、デジタルテレビ、テレビゲーム機などが考えられる。

【0016】

本実施の形態では、情報表示制御装置１０に、情報表示制御装置１０の位置を取得する機能を有する現在位置取得装置２４がさらに接続される例を示す。現在位置取得装置２４は、情報表示制御装置１０が例えばナビゲーション用のアプリケーションを実行する際に用いられる。情報表示制御装置１０が、位置情報を必要としないアプリケーションを実行する場合、基本的に現在位置取得装置２４は当該情報表示制御装置１０には不要である。

【0017】

画像表示装置２１、音声出力装置２２、操作入力装置２３および現在位置取得装置２４は、情報表示制御装置１０に内蔵されていてもよいし、外付けのデバイスであってもよい。画像表示装置２１、音声出力装置２２、操作入力装置２３および現在位置取得装置２４が外付けのデバイスの場合、それらと情報表示制御装置１０との間の接続（通信）は、それぞれ有線方式でも無線方式でもよい。

【0018】

画像表示装置２１としては、液晶表示装置が代表的であるが、画像表示機能を有する任意の装置（例えば、テレビジョン表示装置、スマートフォン、タブレット端末、車両のインストルメントパネルの表示部、画面付きのゲームコントローラなど）を利用してもよい。音声出力装置２２は、スピーカやヘッドフォン等が一般的であるが、これも音声出力機能を有する任意の装置を利用してもよい。

【0019】

操作入力装置２３は、基本的に情報表示制御装置１０の操作に用いられるが、情報表示制御装置１０が通信端末３０とリンクしている状態では、ユーザは、操作入力装置２３を介して通信端末３０をリモート操作することもできる。操作入力装置２３は、操作ボタン、操作スティック、キーボード、トラックパッド等のハードウェアでもよいし、画面に表示されるアイコンを用いたソフトウェアキーでもよい。操作入力装置２３としてのソフトウェアキーを画像表示装置２１に表示させる場合、画像表示装置２１と操作入力装置２３は、両者の機能を兼ね備えた１つのタッチパネルとしてもよい。

【0020】

現在位置取得装置２４は、ＧＰＳ（Global Positioning System）４３から発信される信号を受信して絶対的な位置（緯度、経度）を取得するＧＰＳ受信機が代表的であるが、相対的な位置（位置の変化）を取得するための速度センサ、方位センサなども含まれる。

【0021】

情報表示制御装置１０は、制御部１１、通信部１２、画像処理部１３、音声処理部１５、通信端末情報解析部１６、通信端末制御部１７および記憶部１８を備えている。情報表示制御装置１０はコンピュータを用いて構成されており、情報表示制御装置１０の各要素は、コンピュータが、記憶部１８に記憶されている制御プログラム１８１に従って動作することにより実現される。なお、記憶部１８は、ハードディスク、リムーバブルディスク、メモリなどの記録媒体によって構成される。

【0022】

制御部１１は、制御プログラム１８１に従って情報表示制御装置１０の全体を制御する機能を有する。また、制御部１１は、記憶部１８に記憶されている情報表示制御装置１０用のアプリケーションプログラム１８２を実行することもできる。情報表示制御装置１０の記憶部１８に記憶されているアプリケーションプログラム１８２には、通信端末３０で動作するアプリケーションと同様の機能を発揮する代替アプリケーションが含まれている。

【0023】

通信部１２は、情報表示制御装置１０が通信端末３０とリンクするのに必要な通信を行う機能を有し、通信端末３０との間で、画像データ、音声データ、制御命令など各種の情報をやりとりする。通信部１２と通信端末３０との間の通信方式は、例えばＵＳＢ（Universal Serial Bus）ケーブルやＬＡＮ（Local Area Network）ケーブルなどを用いる有線通信でもよいし、無線ＬＡＮやBluetooth（登録商標）などの無線通信でもよい。

【0024】

画像処理部１３は、画像表示装置２１に画像を表示させるための画像信号を生成する機能を有している。特に、情報表示制御装置１０が通信端末３０とリンクした状態では、画像処理部１３は、通信端末３０で動作しているアプリケーションが出力する画像（アプリケーション画像）を、通信部１２を介して取得し、画像表示装置２１に表示させることができる。

【0025】

但し、画像処理部１３が通信端末３０で動作しているアプリケーションの画像（アプリケーション画像）を画像表示装置２１に表示させているときに、通信端末３０で所定のイベントが発生すると、それによって通信端末３０からのアプリケーション画像の送信が中断され、情報表示制御装置１０はアプリケーション画像を取得できなくなる。その場合、制御部１１は、当該アプリケーションと同様の機能を発揮する代替アプリケーションを実行し、画像処理部１３は、イベントの発生を示す画像（イベント画像）と代替アプリケーションの画像（代替アプリケーション画像）とを合成した合成画像を画像表示装置２１に表示させる。

【0026】

音声処理部１５は、音声出力装置２２に音声を出力させるための音声信号を生成する機能を有している。特に、情報表示制御装置１０が通信端末３０とリンクした状態では、音声処理部１５は、通信端末３０で動作しているアプリケーションが出力する音声を、通信部１２を介して取得し、音声出力装置２２から出力させることができる。さらに、通信端末３０で所定のイベントが発生した場合、音声処理部１５は、そのイベントの発生をユーザに通知する音声を音声出力装置２２から出力させることもできる。

【0027】

通信端末情報解析部１６は、通信部１２を介して通信端末３０から取得した情報（データ）に基づき、通信端末３０の識別や状態判断を行う。通信端末情報解析部１６が通信端末３０から取得する情報としては、例えば、通信端末３０で実行中のアプリケーションの属性情報（アプリケーションの種別など）や、通信端末３０の属性情報（機種名、機能、電話番号、所有者名など）、各イベント（電話着信、メール着信、電池切れ、通信不可など）の発生情報等が挙げられる。

【0028】

通信端末制御部１７は、通信部１２を介して通信端末３０へ各種の制御命令やデータを送信することにより、通信端末３０を制御する機能を有している。情報表示制御装置１０が通信端末３０とリンクした状態では、ユーザは、操作入力装置２３を用いて、画像表示装置２１に表示された通信端末３０の操作画面（通信端末３０で動作しているアプリケーションの操作画面や、通信端末３０で発生したイベントに対する操作画面）の画像に基づく操作を行うことができる。このユーザの操作内容は、通信端末制御部１７が通信端末３０に伝達し、通信端末３０がその操作内容に応じた動作を行う。その結果、操作入力装置２３を用いた通信端末３０のリモート操作が実現される。

【0029】

通信端末３０は、情報表示制御装置１０とリンクするための通信機能を有している。スマートフォンや携帯電話などのように、通信網４１（通信端末３０が在圏するネットワーク）を介した遠端側通信装置４２との通信機能を有しても良い。また、通信端末３０は、通信端末３０用のアプリケーションを実行することによって、電話機能や、電子メール（Ｅメール）の送受信機能、インターネットの閲覧機能（ブラウザ機能）、ＧＰＳ４３を利用して経路案内を行うナビゲーション機能などの様々な機能を発揮できてもよい。

【0030】

通信端末３０の構成は、例えば一般的なスマートフォンと同様でよいため詳細な説明は省略するが、図１では、本発明と特に関係する表示部３１、操作部３２、制御部３３および通信部３４を図示している。

【0031】

表示部３１は、通信端末３０で実行中のアプリケーションの画像を表示したり、イベント発生時には当該イベントの通知画面や操作画面の画像を表示したりする。操作部３２は、通信端末３０のユーザインターフェイスであり、ユーザは、操作部３２を用いてアプリケーションやイベントに対する操作を行うことができる。制御部３３は、通信端末３０用の制御プログラムを実行することで、通信端末３０の基本的な機能（通信機能や通話機能など）の制御を行うと共に、各種のアプリケーションを実行することにより、上記した様々な機能を通信端末３０に発揮させることができる。通信部３４は、情報表示制御装置１０とリンクするための通信を行うが、通信網４１を介した遠端側通信装置４２との通信にも用いられてもよい。

【0032】

次に、実施の形態１に係る情報表示システムの動作を説明する。以下の説明では、情報表示制御装置１０、画像表示装置２１、音声出力装置２２、操作入力装置２３および現在位置取得装置２４はいずれも車載装置であり、通信端末３０はスマートフォンであると仮定する。また、画像表示装置２１と操作入力装置２３は、一つのタッチパネル（後述の「タッチパネル装置２１２」）として構成されているものとする。同様に、通信端末３０の表示部３１および操作部３２も、一つのタッチパネル（後述の「タッチパネル部３１２」）として構成されているものとする。

【0033】

また、以下の説明では、通信端末３０で動作するアプリケーションとして、経路案内を行うナビゲーション用アプリケーションを例示し、通信端末３０に発生するイベントとして、電話着信を例示する。但し、本発明の適用は、そのアプリケーションとイベントの組み合わせに限定されるものではない。例えば、通信端末３０で動作するアプリケーションはブラウザなどでもよく、通信端末３０に発生するイベントとしては、Ｅメール着信などでもよい。

【0034】

まず、情報表示制御装置１０と通信端末３０との連携（リンク）機能の概要を説明する。情報表示制御装置１０と通信端末３０とが有線または無線により物理接続され、双方の通信によってリンクが確立すると、図２に示すように、情報表示制御装置１０に接続したタッチパネル装置２１２（画像表示装置２１）に、通信端末３０のタッチパネル部３１２（表示部３１）と同じ画像が表示される。また、情報表示制御装置１０に接続した音声出力装置２２には、通信端末３０が出力するものと同じ音声が出力される。

【0035】

情報表示制御装置１０と通信端末３０とがリンクしている間、通信端末３０が出力する画像や音声などのデータは情報表示制御装置１０へ送信され、情報表示制御装置１０は当該データをタッチパネル装置２１２および音声出力装置２２を用いて出力することができる。

【0036】

さらに、ユーザは、情報表示制御装置１０と通信端末３０とがリンクしている間、タッチパネル装置２１２（操作入力装置２３）を操作することによって、通信端末３０のタッチパネル部３１２（操作部３２）を操作するのと同じ感覚で、通信端末３０をリモート操作することができる。なお、リンクが確立している間も通信端末３０のタッチパネル部３１２の操作は禁止されず、通信端末３０は、タッチパネル部３１２からもタッチパネル装置２１２からも操作可能な状態になる。

【0037】

例えば、図２に示した状態から、ユーザがタッチパネル装置２１２に表示された「ナビゲーション」のアイコンにタッチすると、通信端末３０のタッチパネル部３１２を操作したときと同じように、通信端末３０でナビゲーション用アプリケーションが起動する。すると、図３のように、通信端末３０のタッチパネル部３１２に当該アプリケーションの画像（ここでは地図）が表示され、それと共に、タッチパネル装置２１２にも通信端末３０のタッチパネル部３１２と同じ画像が表示される。また、当該アプリケーションが、例えば経路案内のための音声を出力すると、その音声が情報表示制御装置１０に接続された音声出力装置２２から出力される。

【0038】

このように、情報表示制御装置１０と通信端末３０とがリンクした状態では、情報表示制御装置１０と通信端末３０とが互いに連携した動作を行う。

【0039】

以下では、情報表示制御装置１０における通信端末３０との連携動作の詳細を説明する。

【0040】

まず、リンク中の通信端末３０からデータを受信した場合における、情報表示制御装置１０の動作を説明する。図４はその動作を示すフローチャートである。

【0041】

情報表示制御装置１０の通信部１２は、リンク中の通信端末３０から送信されたデータを受信すると（ステップＳ１０１）、受信したデータの種類を確認する（ステップＳ１０２）。

【0042】

受信したデータが画像のデータであれば（ステップＳ１０３でＹＥＳ）、通信部１２は、その画像（データ）を画像処理部１３へと送る（ステップＳ１０４）。画像処理部１３は、当該画像を画像表示装置２１に表示させる（ステップＳ１０５）。

【0043】

また、受信したデータが音声のデータであれば（ステップＳ１０３でＮＯ、且つ、ステップＳ１０６でＹＥＳ）、その音声（データ）を音声処理部１５へと送る（ステップＳ１０７）。音声処理部１５は、当該音声を音声出力装置２２から出力させる（ステップＳ１０８）。

【0044】

一方、受信したデータが画像でも音声でもなく、通信端末３０で実行中のアプリケーションの属性情報、通信端末３０の属性情報、通信端末３０の各イベントの発生情報などであれば（ステップＳ１０３でＮＯ、且つ、ステップＳ１０６でＮＯ）、通信部１２は、その情報（データ）を通信端末情報解析部１６へと送る（ステップＳ１０９）。通信端末情報解析部１６は、それらの情報を解析し、その結果を制御部１１へ送る（ステップＳ１１０）。それにより、制御部１１は、通信端末３０の状況に応じた情報表示制御装置１０の制御を行うことができる。

【0045】

次に、通信端末３０とのリンク中にユーザが操作入力装置２３を操作した場合における、情報表示制御装置１０の動作を説明する。図５は、その動作を示すフローチャートである。

【0046】

ユーザにより操作入力装置２３の操作が行われると、操作入力装置２３はその操作を情報表示制御装置１０の制御部１１に通知し（ステップＳ２０１）、制御部１１が、その操作の内容を確認する（ステップＳ２０２）。

【0047】

当該操作が、通信端末３０の制御が必要となる操作であれば（ステップＳ２０３でＹＥＳ）、制御部１１は、その操作に対応する制御命令を通信端末制御部１７へと送る（ステップＳ２０４）。通信端末制御部１７は、その制御命令を、通信端末３０が認識可能なフォーマットに変換して通信部１２へ渡す（ステップＳ２０５）。通信部１２は、フォーマット変換された制御命令を通信端末３０へ送信する（ステップＳ２０６）。

【0048】

また、当該操作が、通信端末３０へのデータ送信が必要となる操作であれば（ステップＳ２０３でＮＯ、且つ、ステップＳ２０７でＹＥＳ）、制御部１１は、通信端末３０へ送信するデータを通信端末制御部１７へと送る（ステップＳ２０８）。通信端末制御部１７は、そのデータを、通信端末３０が認識可能なフォーマットに変換して通信部１２へ渡す（ステップＳ２０９）。通信部１２は、フォーマット変換されたデータを通信端末３０へ送信する（ステップＳ２１０）。

【0049】

一方、当該操作が、その他の操作であれば（ステップＳ２０３でＮＯ、且つ、ステップＳ２０７でＮＯ）、その操作の対象は通信端末３０ではなく情報表示制御装置１０であるので、制御部１１は、当該操作により入力された情報を、制御プログラム１８１およびアプリケーションプログラム１８２の処理に利用する（ステップＳ２１１）。それにより、情報表示制御装置１０は、ユーザの操作に基づく動作を行うこととなる。

【0050】

次に、通信端末３０とのリンク中に、通信端末３０で所定のイベントが発生した場合における情報表示制御装置１０の動作を説明する。

【0051】

情報表示制御装置１０は、リンク中の通信端末３０で所定のイベントが発生すると、通信端末３０で動作しているアプリケーションと同様の機能を有する代替アプリケーションを実行し、イベントの発生を示す画像（イベント画像）と代替アプリケーションの画像（代替アプリケーション画像）とを画像表示装置２１に表示させる。つまり、通信端末３０のアプリケーション画像とイベント画像とを合成した合成画像を、画像表示装置２１に表示させる。イベント画像は、イベント発生の通知のみを目的とする画像に限らず、イベントの操作画面（ユーザインターフェイス）としても働く画像であってもよい。

【0052】

例えば、情報表示制御装置１０と通信端末３０とがリンクしており、図３に示したように画像表示装置２１（タッチパネル装置２１２）と通信端末３０の表示部３１（タッチパネル部３１２）の両方に、通信端末３０で動作しているナビゲーション用のアプリケーションの画像（地図）が表示されている状態を仮定する。

【0053】

その状態から、通信端末３０で電話着信のイベントが発生すると、図６のように、通信端末３０の表示部３１には、電話着信を通知する画面（着信画面）の画像が表示される。ここでは、着信画面の画像として、発信者の名前および電話番号を表す文字と「通話開始」および「保留」の操作ボタン（アイコン）とからなる画像を例示している。

【0054】

通信端末３０に電話着信があると、通信端末３０からのアプリケーション画像の送信は中断される。この場合、情報表示制御装置１０は、通信端末３０からイベント画像（着信画面の画像）を取得すると共に、通信端末３０で動作しているアプリケーションと同様の機能を発揮する代替アプリケーションを起動させる。ここでは、通信端末３０でナビゲーション用のアプリケーションが動作しているので、情報表示制御装置１０は、代替アプリケーションとして、ナビゲーション用のアプリケーションを起動させる。

【0055】

本実施の形態では、代替アプリケーションとしてのナビゲーション用のアプリケーションは、通信端末３０で動作しているナビゲーション用のアプリケーションよりも簡略化された地図を表示する簡易ナビゲーション用のアプリケーションとする。代替アプリケーションとして、簡易ナビゲーション用のアプリケーションを使用することにより、情報表示制御装置１０の記憶部１８に記憶させる地図データを少なくできるという利点がある。

【0056】

代替アプリケーションが起動すると、情報表示制御装置１０は、図６のように、代替アプリケーション画像（簡易ナビゲーション用の地図）とイベント画像（着信画面の画像）とを合成して、画像表示装置２１に表示させる。図６では、画像表示装置２１（タッチパネル装置２１２）の画面に、代替アプリケーション画像の一部にイベント画像（着信画面の画像）が重ねて表示される例を示している。

【0057】

ユーザは、タッチパネル装置２１２に表示されているイベント画像にタッチすることにより、通信端末３０のリモート操作が可能である。例えば図６の状態で、ユーザがタッチパネル装置２１２に表示されたイベント画像の「通話開始」ボタンにタッチすると、通信端末３０を用いたハンズフリー通話を開始させることができる。

【0058】

また、代替アプリケーションは情報表示制御装置１０で動作しているため、情報表示制御装置１０は、通信端末３０にイベントが発生している間も、代替アプリケーションの画像を随時更新させながら動的に表示させることができる。よって、電話着信後や通話開始後に車両が進むと、現在位置取得装置２４から取得した位置を使うなどにより、代替アプリケーション画像としての地図に表示されている車両の位置も移動させることができる。従って、ユーザは、タッチパネル装置２１２に表示されている地図から現在位置を直感的に把握でき、利便性は維持される。

【0059】

ところで、通信端末３０で発生するイベントの中には、ユーザへの通知が不要なものもある。例えば、アプリケーションのアップデート情報の受信など、緊急性の低いものはユーザに通知する必要性も低い。また電話着信のイベントの中にも、特定の発信者からの電話着信や、発信者番号非通知の電話着信は、ユーザが通知の拒否を希望することが考えられる。

【0060】

そこで、実施の形態１では、ユーザへの通知が不要なものとして予め定められた特定のイベントが発生した場合には、情報表示制御装置１０がそのイベントに対応するイベント画像は表示させないように構成する。

【0061】

例えば図３の状態から、ユーザへの通知が不要と予め定められた発信者番号非通知の電話着信が発生した場合、情報表示制御装置１０は、図７のように、通信端末３０の表示部３１（タッチパネル部３１２）に表示されたイベント画像（着信画面の画像）を画像表示装置２１（タッチパネル装置２１２）には表示させず、画像表示装置２１には代替アプリケーション画像（地図）を表示させる。

【0062】

なお、どのイベントの通知を必要とするか（又は、どのイベントの通知を必要としないか）は、ユーザが任意に設定できるようにするとよい。

【0063】

図８は、通信端末３０とのリンク中に、通信端末３０でイベントが発生した場合における情報表示制御装置１０の画像表示動作を示すフローチャートである。

【0064】

情報表示制御装置１０と通信端末３０とがリンクしているときに、通信端末３０でイベントが発生すると、そのイベントの発生情報（以下「イベント情報」）が通信端末３０から情報表示制御装置１０へと送信される。通信端末３０が送信するイベント情報には、イベントの発生時に送信される開始通知と、イベントの終了時に送信される終了通知とが含まれる。

【0065】

情報表示制御装置１０の通信部１２がイベント情報を受信すると（ステップＳ３０１）、通信部１２はそのイベント情報を通信端末情報解析部１６へ送る（ステップＳ３０２）。通信端末情報解析部１６は、制御部１１の内部に保存されているイベントに関するフラグ（条件判定処理の結果を保存するためのデータ）をクリアし（ステップＳ３０３）、そのイベント情報を解析する（ステップＳ３０４）。

【0066】

解析の結果、イベント情報が、ユーザに通知するイベントの開始通知であった場合（ステップＳ３０５でＹＥＳ）、通信端末情報解析部１６は、制御部１１内部に保存されているイベントフラグをセットする（ステップＳ３０６）。イベント情報が、イベントの終了通知であった場合（ステップＳ３０５でＮＯ、且つ、ステップＳ３０７でＹＥＳ）、フラグはセットされない。イベント情報が、ユーザに通知するイベントの開始通知でもイベントの終了通知でもなかった場合（ステップＳ３０５でＮＯ、且つ、ステップＳ３０７でＮＯ）、通信端末情報解析部１６は、制御部１１に保存されている読み捨てフラグをセットする（ステップＳ３０８）。

【0067】

その後、通信端末３０からの画像（データ）を通信部１２が受信すると（ステップＳ３０９）、通信部１２は受信した画像を画像処理部１３に送り（ステップＳ３１０）、制御部１１がイベントフラグおよび読み捨てフラグの状態を確認する（ステップＳ３１１）。そして、画像処理部１３が、イベントフラグおよび読み捨てフラグの状態に応じて、取得した画像を利用して画像表示装置２１（タッチパネル装置２１２）に表示させる画像を生成する。

【0068】

通信端末３０から受信したイベント情報が、ユーザに通知するイベントの開始通知であった場合、すなわち、イベントフラグがセット状態の場合は（ステップＳ３１２でＹＥＳ）、制御部１１は、代替アプリケーションを起動させる（ステップＳ３１３）。また、代替アプリケーションで必要であれば、制御部１１は現在位置取得装置２４から位置情報を取得する。そして、通信部１２から受信した画像（受信画像）の加工処理（ステップＳ３１４）を行い、起動した代替アプリケーションの画像（代替アプリケーション画像）と加工処理後の受信画像とを合成した合成画像を生成する（ステップＳ３１５）。このケースは、イベント発生中の状態なので、受信画像はイベント画像である。画像処理部１３は、生成した合成画像を、画像表示装置２１に表示させる（ステップＳ３１６）。合成画像の生成とその表示（ステップＳ３１５，Ｓ３１６）は、情報表示制御装置１０が次のイベント情報を受信するまで繰り返し実行される（ステップＳ３１７）。その結果、画像表示装置２１（タッチパネル装置２１２）には、図６のように代替アプリケーション画像とイベント画像の両方が表示される。

【0069】

図６のように代替アプリケーション画像の一部に受信画像（イベント画像）を重ねて表示させる場合、受信画像の加工処理（ステップＳ３１４）では、イベント画像のサイズ調整（拡大または縮小）が必要に応じて行われる。また、合成画像の生成処理（ステップＳ３１５）では、代替アプリケーション画像の一部に加工処理後の受信画像を重ねた合成画像が生成される。

【0070】

通信端末３０から受信したイベント情報が、ユーザに通知するイベントの開始通知でもイベントの終了通知でもなかった場合、すなわち、読み捨てフラグがセット状態の場合は（ステップＳ３１２でＮＯ、ステップＳ３１８でＹＥＳ）、代替アプリケーションを起動させて（ステップＳ３１９）、処理を終了する。この場合、画像表示装置２１（タッチパネル装置２１２）には、図７のように、代替アプリケーション画像が表示されるようになる（操作入力装置２３に対するユーザの操作で代替アプリケーションを起動させたときと同じ状態になる）。

【0071】

通信端末３０から受信したイベント情報が、イベントの終了通知であった場合、すなわち、イベントフラグも読み捨てフラグもセットされていない場合は（ステップＳ３１２でＮＯ、且つ、ステップＳ３１８でＮＯ）、受信画像を画像表示装置２１に表示させて（ステップＳ３２０）、処理を終了する。このケースは、イベントの終了後の状態なので、受信画像は通信部１２を介して取得した通信端末３０のアプリケーション画像である。その結果、画像表示装置２１（タッチパネル装置２１２）の表示は、図３のように、通信端末３０の表示部３１（タッチパネル部３１２）と同じアプリケーション画像となる。

【0072】

イベントが終了したとき、代替アプリケーションは終了させてもよい。例えば、代替アプリケーションを起動させる際（ステップＳ３１３またはＳ３１９）に、その代替アプリケーションが既に起動中か否かを記憶しておき、イベント終了時に、代替アプリケーションを元の状態に戻すようにしてもよい。すなわち、イベント発生時に既に起動中だった代替アプリケーションはイベントが終了しても動作を継続させ、イベント発生に応じて起動した代替アプリケーションは、イベント終了時に終了させるようにしてもよい。

【0073】

代替アプリケーションは、イベント発生時に通信端末３０で動作しているアプリケーションと同様の機能を発揮するものであるが、さらに、イベントが発生する前後で画像表示装置２１の画面表示の継続性を担保できるものであることが望ましい。

【0074】

例えば、イベントが発生したことによって、画像表示装置２１（タッチパネル装置２１２）の表示が、通信端末３０で動作しているナビゲーション用のアプリケーションの地図（図３）から、代替アプリケーション（簡易ナビゲーション）の地図（図６または図７）に切り替わる場合、代替アプリケーションの地図は、通信端末３０のアプリケーションの地図と同じ地域を同じ縮尺・向きで表示することが望ましい。それを実現するためには、通信端末３０のアプリケーションがどの地域の地図を、どのような縮尺で、どの方角を上にして表示していたか、といった情報を、情報表示制御装置１０が取得する必要がある。

【0075】

さらに、通信端末３０のアプリケーションの地図に現在位置から目的地までの経路が表示されていた場合には、その経路の情報も取得して代替アプリケーションの地図に表示するとよい。あるいは、情報表示制御装置１０が目的地の情報を取得し、現在位置から目的地までの経路を代替アプリケーションで再検索して表示させてもよい。

【0076】

また、代替アプリケーションの起動が遅いと、画像表示装置２１の表示を通信端末３０のアプリケーション画像から代替アプリケーション画像へ即座に切り替えることができない。例えば、簡易ナビゲーション用のアプリケーションは、起動時に現在位置取得装置２４を用いて現在位置を取得する必要があるため、起動にある程度の時間を要する。この問題は、情報表示制御装置１０が、イベント発生前から現在位置取得装置２４を用いて現在位置を取得しておく、あるいは、イベント発生前から代替アプリケーションを起動させておく、などの措置により解決できる。

【0077】

なお、所定のイベント発生時に画像表示装置２１（タッチパネル装置２１２）に表示させる画像の例として、図６では代替アプリケーション画像の一部にイベント画像（受信画像）を重ねた合成画像を示したが、合成画像の構成（アプリケーション画像とイベント画像のレイアウト）はこれに限定されるものではなく、例えば代替アプリケーション画像とイベント画像とを上下または左右に並べた合成画像としてもよい。

【0078】

また、図６では、合成画像に含まれているイベント画像が、通信端末３０の表示部３１に表示されたイベント画像と同じもの（サイズ調整のみを行ったもの）となっているが、所定の加工処理を施したイベント画像を用いてもよい。加工処理としては、例えば、トリミング、回転、透過、３Ｄ化、明るさ変更およびそれらの組み合わせなどが考えられる。イベント画像を加工処理することによって、イベント画像およびアプリケーション画像をそれぞれ見やすくするなどの視覚効果を得ることができる。

【0079】

さらに、合成画像に含ませるイベント画像の構成（例えばスタイルやレイアウト）を変更してもよい。この場合、受信画像の加工処理（ステップＳ３１４）では、受信画像の解析を行って、それに含まれる文字やボタン（アイコン）の位置、大きさ、スタイル（文字のフォントを含む）等を抽出し、それらに変更を加える処理が行われる。イベント画像の構成を変更することによって、イベント画像の表示を目立たせることができる他、ユーザインターフェイスとしてのイベント画像の操作性を向上させることもできる。

【0080】

＜実施の形態２＞
実施の形態２では、リンク中の通信端末３０でイベントが発生したときに情報表示制御装置１０が起動させる代替アプリケーションとして、インターネットのサイト（ウェブページ）を表示する機能を有するブラウザアプリケーション（以下「ブラウザ」）を用いる。代替アプリケーションがブラウザであることを除いて、情報表示システムの構成および動作は、実施の形態１と同様である。また、本実施の形態では、情報表示制御装置１０がインターネットへのアクセス手段を有していることが前提となる。例えば通信部１２がインターネットへのアクセス手段としての機能を有していてもよい。

【0081】

代替アプリケーションとしてのブラウザは、所定のサイトにアクセスすることによって、通信端末３０で動作しているアプリケーションと同様の機能を発揮できる状態になる。ブラウザは、アクセスするサイトに応じて様々な機能を発揮することができるので、記憶部１８に記憶させておく代替アプリケーションを少なくできる。

【0082】

例えば、通信端末３０で動作しているアプリケーションが、ナビゲーション用のアプリケーションであれば、情報表示制御装置１０は、代替アプリケーションを起動させる工程で（図８のステップＳ３１３またはＳ３１９）、ブラウザを起動させると共に、ナビゲーション機能を有する地図表示サイトにアクセスさせる。このとき、地図表示サイトへの入力パラメータとして、現在位置取得装置２４から取得した位置情報を送信する。その結果、ブラウザは、情報表示制御装置１０で動作しているナビゲーション用のアプリケーションと同様の機能を発揮できる状態になる。なお、現在位置取得装置２４が位置を取得するタイミングは、必ずしもイベント発生時でなくてもよく、定期的に位置を取得して、記憶部１８に記憶させておいてもよい。

【0083】

この場合、情報表示制御装置１０と通信端末３０とのリンクが確立した状態（図３）から、通信端末３０で電話着信のイベントが発生すると、画像表示装置２１（タッチパネル装置２１２）には、図９のように、電話の着信画面の画像（イベント画像）と、地図表示サイトにアクセスしたブラウザの画像（代替アプリケーション画像）との合成画像が表示されることになる。

【0084】

本実施の形態においても、実施の形態１と同様の効果を得ることができる。

【0085】

＜実施の形態３＞
図１０は、本発明に係る情報表示システムの構成図である。図１０に示す情報表示システムは、図１の構成に対して画像記憶部１４を設けた構成となっている。

【0086】

画像記憶部１４は、情報表示制御装置１０が通信端末３０とリンクしている間、通信端末３０から取得したアプリケーションの画面（スクリーンショット）を随時記憶する機能を有している。

【0087】

実施の形態３では、情報表示制御装置１０とリンクしている通信端末３０で所定のイベントが発生し、情報表示制御装置１０において、通信端末３０で動作しているアプリケーションの画像（アプリケーション画像）の取得が中断される場合、制御部１１は、当該アプリケーションが動作を継続したと仮定したときのアプリケーション画像の変化を推定する。さらに、画像処理部１３は、画像記憶部１４に記憶されているアプリケーション画像に、制御部１１が推定した変化を加える加工処理を行って、加工処理後のアプリケーション画像とイベント画像とを合成した合成画像を画像表示装置２１に表示させる。

【0088】

以下、実施の形態３に係る情報表示システムの動作を説明する。通信端末３０でイベントが発生していない状態における情報表示制御装置１０と通信端末３０との連携動作は、実施の形態１で図２〜図５を用いて説明したものと同様なので説明は省略する。ここでは、リンク中の通信端末３０で所定のイベントが発生した場合における情報表示制御装置１０の動作を説明する。

【0089】

本実施の形態でも、情報表示制御装置１０、画像表示装置２１、音声出力装置２２、操作入力装置２３および現在位置取得装置２４は、いずれも車載装置であり、通信端末３０はスマートフォンであると仮定する。また、画像表示装置２１と操作入力装置２３は、一つのタッチパネル（タッチパネル装置２１２）として構成されているものとする。同様に、通信端末３０の表示部３１および操作部３２も、一つのタッチパネル（タッチパネル部３１２）として構成されているものとする。

【0090】

また、通信端末３０で動作するアプリケーションは、経路案内を行うナビゲーション用アプリケーションとし、通信端末３０に発生するイベントは電話着信とする。通信端末３０に発生するイベントは、Ｅメール着信などでもよい。

【0091】

実施の形態３の情報表示制御装置１０は、リンク中の通信端末３０で所定のイベントが発生すると、通信端末３０で動作しているアプリケーションの画像の表示を継続しつつ、イベント画像を画像表示装置２１に表示させる。つまり、通信端末３０のアプリケーション画像とイベント画像とを合成した合成画像を、画像表示装置２１に表示させる。但し、イベントが発生したことで、通信端末３０からのアプリケーション画像の受信は中断されるので、合成画像に含ませるアプリケーション画像としては、当該アプリケーションが動作を継続したと仮定して推定したアプリケーション画像を用いる。

【0092】

例えば、図３に示したように画像表示装置２１（タッチパネル装置２１２）と通信端末３０の表示部３１（タッチパネル部３１２）に、通信端末３０のナビゲーション用のアプリケーションの画像（地図）が表示されている状態を仮定する。

【0093】

その状態から、通信端末３０で電話着信のイベントが発生すると、図１１のように、通信端末３０の表示部３１には、イベント画像としての着信画面の画像が表示される。通信端末３０に電話着信があると、情報表示制御装置１０は、通信端末３０からイベント画像（着信画面の画像）を取得し、図１１のように、アプリケーション画像とイベント画像とを合成して、画像表示装置２１に表示させる。このとき、通信端末３０からのアプリケーション画像の送信は電話着信により中断しているため、合成画像に含ませるアプリケーション画像には、電話着信の直前に通信部１２で受信した、画像記憶部１４に記憶されているアプリケーション画像を用いる。図１１では、画像表示装置２１の画面に、アプリケーション画像（地図）の一部にイベント画像（着信画面の画像）が重ねて表示される例を示している。

【0094】

ユーザは、タッチパネル装置２１２に表示されているイベント画像にタッチすることにより、通信端末３０のリモート操作が可能である。例えば図１１の状態で、ユーザがタッチパネル装置２１２に表示されたイベント画像の「通話開始」ボタンにタッチすると、通信端末３０を用いたハンズフリー通話を開始させることができる。

【0095】

図１１の状態から、タッチパネル装置２１２が表示している地図が更新されなければ、情報表示制御装置１０を搭載した車両が移動したとき、その地図に表示されている車両の位置から実際の車両がずれることになる。

【0096】

そこで本実施の形態では、制御部１１が、現在位置取得装置２４から得られる車両の位置の変化を検知することにより、通信端末３０のアプリケーションが動作を継続したと仮定したときのアプリケーション画像の変化を推定する。

【0097】

車両が進むと、制御部１１が、現在位置取得装置２４から車両の位置を取得して、その変化（移動の方向と距離）を算出し、表示されている地図の縮尺や向きに基づいて、当該地図上で車両の位置がどの方向にどの程度移動するのかを推定する。

【0098】

画像処理部１３は、制御部１１が推定した地図上の車両の位置変化が反映されるように、画像記憶部１４に記憶されている地図（アプリケーション画像）の加工処理を行う。そして画像処理部１３は、イベント画像と加工処理後の地図との合成画像を生成し、当該合成画像をタッチパネル装置２１２に表示させる。

【0099】

例えば図１１の状態では、タッチパネル装置２１２の画面中央のやや下側に車両の位置を示すアイコン（白丸と黒三角とを組み合わせたマーク）が表示されている。その状態から車両が前進した場合、通信端末３０のアプリケーションが動作を継続していると仮定すると、地図上の車両のアイコンは上方向に移動すると推定される。画像処理部１３は、その推定結果に基づき、図１２のように車両の位置を示すアイコンを上方向に動かす加工処理を行う。この処理を繰り返すことにより、車両の移動に応じて地図上の車両の位置を示すアイコンが移動することになる。

【0100】

このように、通信端末３０にイベントが発生している間もタッチパネル装置２１２に表示されているアプリケーション画像（地図）が動的に表示されることにより、ユーザはアプリケーション画像から現在位置を直感的に把握でき、利便性は維持される。

【0101】

なお、実施の形態３でも、ユーザへの通知が不要なものとして予め定められた特定のイベントが発生した場合には、情報表示制御装置１０がそのイベントに対応するイベント画像は表示させない（推定したアプリケーション画像のみを表示する）ものとする。

【0102】

図１３は、通信端末３０とのリンク中に、通信端末３０でイベントが発生した場合における、情報表示制御装置１０の画像表示動作を示すフローチャートである。図１３のフローチャートにおいて、ステップＳ３０１〜３１１は、図８と同様であるので、ここではそれらのステップの説明は省略する。

【0103】

情報表示制御装置１０と通信端末３０とがリンクしているときに、通信端末３０でイベントが発生すると、そのイベントの発生情報（イベント情報）が通信端末３０から送信され、情報表示制御装置１０の通信部１２に受信される。

【0104】

通信端末３０から受信したイベント情報が、ユーザに通知するイベントの開始通知であった場合、すなわち、イベントフラグがセット状態の場合は（ステップＳ３２０でＹＥＳ）、画像処理部１３は、通信部１２から受信した画像（受信画像）に対して拡大、縮小等の加工処理を必要に応じて行う（ステップＳ３２１）。このケースは、イベント発生中の状態なので、受信画像はイベント画像である。

【0105】

次に、制御部１１は、現在位置取得装置２４から現在位置を取得し（ステップＳ３２２）、それに基づき、現在位置の変化を算出する（ステップＳ３２３）。続いて、画像処理部１３は、現在位置の変化が反映されるように、画像記憶部１４に記憶されているアプリケーション画像（記憶画像）の加工処理（更新処理）を行う（ステップＳ３２４）。そして、加工処理後の記憶画像と受信画像とを合成した合成画像を生成し（ステップＳ３２５）、当該合成画像を、画像表示装置２１に表示させる（ステップＳ３２６）。

【0106】

現在位置の変化の算出、記憶画像の更新、合成画像の生成および表示（ステップＳ３２２〜Ｓ３２６）は、情報表示制御装置１０の通信部１２が次のイベント情報を受信するまで繰り返し実行される（ステップＳ３２７）。その結果、画像表示装置２１（タッチパネル装置２１２）には、図１２に示したように、イベント画像と共に動的なアプリケーション画像（地図）が表示される。

【0107】

通信端末３０から受信したイベント情報が、ユーザに通知するイベントの開始通知でもイベントの終了通知でもなかった場合、すなわち、読み捨てフラグがセット状態の場合は（ステップＳ３２０でＮＯ、ステップＳ３２８でＹＥＳ）、制御部１１は、現在位置取得装置２４から現在位置を取得し（ステップ３２９）、それに基づき、現在位置の変化を算出する（ステップＳ３３０）。続いて、画像処理部１３は、現在位置の変化が反映されるように、画像記憶部１４に記憶されたアプリケーション画像（記憶画像）の加工処理（更新処理）を行う（ステップＳ３３１）。そして、加工処理後の記憶画像を画像表示装置２１に表示させる（ステップＳ３３２）。

【0108】

現在位置の変化の算出、記憶画像の更新、記憶画像の表示（ステップＳ３２９〜Ｓ３３２）は、情報表示制御装置１０が次のイベント情報を受信するまで繰り返し実行される（ステップＳ３３３）。その結果、画像表示装置２１（タッチパネル装置２１２）には、イベント画像を含まない動的なアプリケーション画像（地図）が表示される。

【0109】

通信端末３０から受信したイベント情報が、イベントの終了通知であった場合、すなわち、イベントフラグも読み捨てフラグもセットされていない場合は（ステップＳ３２０でＮＯ、且つ、ステップＳ３２８でＮＯ）、受信画像を画像表示装置２１に表示させて（ステップＳ３３４）、処理を終了する。このケースは、イベントの終了後の状態なので、受信画像は通信部１２を介して取得した通信端末３０のアプリケーション画像である。その結果、画像表示装置２１（タッチパネル装置２１２）の表示は、図３のように、通信端末３０の表示部３１（タッチパネル部３１２）と同じアプリケーション画像となる。

【0110】

なお、所定のイベント発生時に画像表示装置２１（タッチパネル装置２１２）に表示させる画像の例として、図１１および図１２ではアプリケーション画像の一部にイベント画像（受信画像）を重ねた合成画像を示したが、合成画像の構成（アプリケーション画像とイベント画像のレイアウト）はこれに限定されるものではなく、例えばアプリケーション画像とイベント画像とを上下または左右に並べた合成画像としてもよい。

【0111】

また、合成画像に含ませるイベント画像に対して、所定の加工処理を施してもよい。加工処理としては、例えば、拡大、縮小、トリミング、回転、透過、３Ｄ化、明るさ変更およびそれらの組み合わせなどが考えられる。イベント画像を加工処理することによって、イベント画像およびアプリケーション画像をそれぞれ見やすくするなどの視覚効果を得ることができる。

【0112】

さらに、合成画像に含ませるイベント画像の構成（例えばスタイルやレイアウト）を変更してもよい。この場合、受信画像の加工処理（ステップＳ３２１）では、受信画像の解析を行って、それに含まれる文字やボタン（アイコン）の位置、大きさ、スタイル（文字のフォントを含む）等を抽出し、それらに変更を加える処理が行われる。イベント画像の構成を変更することによって、イベント画像の表示を目立たせることができる他、ユーザインターフェイスとしてのイベント画像の操作性を向上させることもできる。

【0113】

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。

【0114】

この発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。

【符号の説明】

【0115】

１０ 情報表示制御装置、１１ 制御部、１２ 通信部、１３ 画像処理部、１４ 画像記憶部、１５ 音声処理部、１６ 通信端末情報解析部、１７ 通信端末制御部、１８ 記憶部、１８１ 制御プログラム、１８２ アプリケーションプログラム、２１ 画像表示装置、２２ 音声出力装置、２３ 操作入力装置、２４ 現在位置取得装置、３０ 通信端末、４１ 通信網、４２ 遠端側通信装置、４３ ＧＰＳ、３１ 表示部、３２ 操作部、３３ 制御部、２１２ タッチパネル装置、３１２ タッチパネル部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】