特許 7166725 表示装置、表示方法および表示プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-10-28

(45)【発行日】2022-11-08

(54)【発明の名称】表示装置、表示方法および表示プログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20221031BHJP

   B60R 1/20 20220101ALI20221031BHJP

   B60R 1/24 20220101ALI20221031BHJP

   B60R 1/26 20220101ALI20221031BHJP

   B60R 1/27 20220101ALI20221031BHJP

   B60R 1/28 20220101ALI20221031BHJP

【ＦＩ】

H04N7/18 J

B60R1/20 100

B60R1/24

B60R1/26

B60R1/27

B60R1/28 200

【請求項の数】 19

(21)【出願番号】P 2018217593

(22)【出願日】2018-11-20

(65)【公開番号】P2020088511

(43)【公開日】2020-06-04

【審査請求日】2021-03-22

(73)【特許権者】

【識別番号】000101732

【氏名又は名称】アルパイン株式会社

(74)【代理人】

【識別番号】100098497

【弁理士】

【氏名又は名称】片寄 恭三

(74)【代理人】

【識別番号】100099748

【弁理士】

【氏名又は名称】佐藤 克志

(74)【代理人】

【識別番号】100103171

【弁理士】

【氏名又は名称】雨貝 正彦

(74)【代理人】

【識別番号】100105784

【弁理士】

【氏名又は名称】橘 和之

(72)【発明者】

【氏名】工藤 信範

【審査官】益戸 宏

(56)【参考文献】

【文献】特開平０３－２５０８７９（ＪＰ，Ａ）

【文献】特開２０１０－１３７６９７（ＪＰ，Ａ）

【文献】特開２０００－１１８３００（ＪＰ，Ａ）

【文献】特開２０１３－０３４１４２（ＪＰ，Ａ）

【文献】国際公開第２０１３／１７５７５３（ＷＯ，Ａ１）

【文献】特開２０１３－０５５４１６（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｂ６０Ｒ １／２０

(57)【特許請求の範囲】

【請求項1】

少なくとも車両の前方および後方を撮像する撮像手段と、
表示手段と、
撮像された画像を前記表示手段に表示させるときの表示アングルを決定する決定手段と、
前記表示アングルに基づき前記撮像された画像の中から画像を切り出す切り出し手段と、
前記切り出された画像をその左右が反転した反転画像に加工する加工手段と、
前記表示アングルに応じて切り出された画像を前記表示手段に表示させ、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示させる表示制御手段とを有し、
前記切り出し手段は、前記表示アングルに対応する第１の切り出し画像と、表示アングルと反対方向の第２の切り出し画像を切り出し、
前記加工手段は、第１の切り出し画像および第２の切り出し画像の一方を反転画像に加工し、
前記表示制御手段は、第１の切り出し画像および第２の切り出し画像を前記表示手段に同時に表示させる、表示装置。

【請求項2】

前記表示制御手段は、表示アングルが車両前方を示すとき、反転していない切り出し画像を前記表示手段に表示させる、請求項１に記載の表示装置。

【請求項3】

前記表示制御手段は、前記表示アングルに基づき第１の切り出し画像または第２の切り出し画像を拡大させる、請求項１に記載の表示装置。

【請求項4】

前記表示制御手段は、前記表示アングルに基づき第１の切り出し画像または第２の切り出し画像を縮小させる、請求項１または３に記載の表示装置。

【請求項5】

前記表示制御手段は、前記表示手段の背景画面に第１または第２の切り出し画像を表示させ、前記背景画面に含まれる前景画面に第２または第１の切り出し画像を表示させる、請求項１ないし４いずれか１つに記載の表示装置。

【請求項6】

前記表示制御手段は、前記背景画面に非反転の前方画像を表示させ、前記前景画面に反転の後方画像を表示させる、請求項５に記載の表示装置。

【請求項7】

表示装置はさらに、前記表示アングルに基づき表示モードを決定する表示モード決定手段を含み、
前記表示制御手段は、前記表示モード決定手段により決定された表示モードに基づき切り出し画像の表示サイズを制御する、請求項１ないし６いずれか１つに記載の表示装置。

【請求項8】

前記表示モードは、フロントビューモードおよびリアビューモードを含み、
前記表示制御手段は、フロントビューモードのとき車両前方の画像を拡大し、リアビューモードのとき車両後方の画像を拡大する、請求項７に記載の表示装置。

【請求項9】

前記表示制御手段は、フロントビューモードのとき前記表示手段の背景画面をメイン表示、前記表示手段の前景画面をサブ表示にし、リアビューモードのとき前記背景画面をサブ表示、前記前景画面をメイン表示にする、請求項８に記載の表示装置。

【請求項10】

前記表示制御手段は、フロントビューモードからリアビューモードに切替える際、車両後方の画像を段階的または連続的に拡大する、請求項８に記載の表示装置。

【請求項11】

前記表示手段の前景画面のサイズを段階的または連続的に拡大する、請求項１０に記載の表示装置。

【請求項12】

前記表示制御手段は、リアビューモードからフロントビューモードに切替える際、車両後方の画像を段階的または連続的に縮小する、請求項８ないし１１いずれか１つに記載の表示装置。

【請求項13】

前記表示手段の前景画面のサイズを段階的または連続的に縮小する、請求項１２に記載の表示装置。

【請求項14】

表示装置はさらに、ユーザーの操作情報を入力する入力手段を含み、
前記決定手段は、前記入力手段から入力された操作情報に基づき表示アングルを決定する、請求項１に記載の表示装置。

【請求項15】

前記入力手段は、前記表示手段に搭載されたタッチパネルを含み、
前記決定手段は、前記タッチパネル上で操作された方向および移動量に基づき表示アングルを決定する、請求項１４に記載の表示装置。

【請求項16】

前記前景画面は、ルームミラーを模した形状を有する、請求項５に記載の表示装置。

【請求項17】

前記撮像手段は、車両の全方位を撮像する撮像カメラを含み、
前記表示アングルは車両の全方位を示すことが可能であり、
前記表示制御手段は、前記表示アングルに対応する画像を前記表示手段に表示させる、請求項１ないし１６いずれか１つに記載の表示装置。

【請求項18】

少なくとも車両の前方および後方を撮像する撮像手段と、撮像された画像を表示可能な表示手段とを含む表示装置の表示方法であって、
撮像された画像を前記表示手段に表示するときの表示アングルを決定するステップと、
前記表示アングルに基づき前記撮像された画像の中から画像を切り出すステップと、
前記切り出された画像をその左右が反転した反転画像に加工するステップと、
前記表示アングルに応じて切り出された画像を前記表示手段に表示し、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示するステップとを有し、
前記切り出すステップは、前記表示アングルに対応する第１の切り出し画像と、表示アングルと反対方向の第２の切り出し画像を切り出し、
前記加工するステップは、第１の切り出し画像および第２の切り出し画像の一方を反転画像に加工し、
前記表示するステップは、第１の切り出し画像および第２の切り出し画像を前記表示手段に同時に表示させる、表示方法。

【請求項19】

少なくとも車両の前方および後方を撮像する撮像手段と、撮像された画像を表示可能な表示手段と、前記表示手段を制御する制御手段とを含む表示装置の前記制御手段が実行する表示プログラムであって、
撮像された画像を前記表示手段に表示するときの表示アングルを決定するステップと、
前記表示アングルに基づき前記撮像された画像の中から画像を切り出すステップと、
前記切り出された画像をその左右が反転した反転画像に加工するステップと、
前記表示アングルに応じて切り出された画像を前記表示手段に表示し、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示するステップとを有し、
前記切り出すステップは、前記表示アングルに対応する第１の切り出し画像と、表示アングルと反対方向の第２の切り出し画像を切り出し、
前記加工するステップは、第１の切り出し画像および第２の切り出し画像の一方を反転画像に加工し、
前記表示するステップは、第１の切り出し画像および第２の切り出し画像を前記表示手段に同時に表示させる、表示プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像カメラにより撮像された車両周辺の画像を表示する表示装置に関する。

【背景技術】

【0002】

近年、車両には、種々の撮像カメラが搭載されている。例えば、運転支援のために自車周辺の障害物等を検出するために撮像カメラを搭載したり、走行中の事故等の事象を記録するために撮像カメラを搭載したり、ドアミラー等の光学式ミラーの代わりに撮像カメラを搭載している。

【0003】

例えば、特許文献１に開示される車両周辺視認装置は、魚眼レンズ等の広い視野範囲を有するカメラで車両周辺を撮像し、その撮像された画像をドアミラーの鏡像の代わりに、あるいは鏡像と一緒に用いることで、ドアミラーの鏡像で見るときよりも死角の少ない画像を運転者に提供している。この際、車両後方を撮像した画像をそのまま表示すると、運転者がドアミラーで見たときの鏡像と上下の位置関係が逆になるので、この違和感を無くすために、ドアミラーの鏡像に対応するように、車両後方の画像の反転処理を行っている。また、特許文献２は、全方位カメラを使用した周辺画像表示装置に関し、ユーザー操作に応じて表示画像の切替えを可能にしている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００６－５０２４６号公報

【文献】特開２０１３－０３４１４２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

撮像カメラシステムの中には、車両の全方位（３６０度）を撮像する全方位カメラシステムが一般的になりつつある。例えば、魚眼レンズのような視野範囲（約１８０度）が広い撮像カメラを２つ用意し、一方の撮像カメラで自車前方を撮像し、他方の撮像カメラで自車後方を撮像したり、全方位を撮像可能なドライブレコーダなども実用化されている。

【0006】

このような全方位カメラシステムを用いた従来の表示装置の概要を図１に示す。図１（Ａ）に示すように、撮像カメラ１０は、例えば、車両Ｍのフロントガラス２０の上部に取り付けられ、車両Ｍの前方、側方、後方の全方位（３６０度）を、略水平方向に撮像する。全方位を撮像した画像の中から表示アングルに応じた画像が切り出され、切り出された画像が車内に設置されたディスプレイ３０に表示される。ユーザーは、ディスプレイ３０のタッチパネルをフリック操作することで表示アングルを決定することができる。例えば、図１（Ｂ）のようにユーザーが左方向にフリック操作Ｌをすると、その方向および移動量に応じて表示アングルが切替えられ、図１（Ｃ）に示すように、ディスプレイ３０に表示される撮像画像を、前方、右側方、後方、左側方、前方へと右回りに移動させることができる。このような表示機能により、ユーザーは、確認したい方向や表示アングルの微調整を簡単に行うことができる。

【0007】

従来のカメラシステム(リアカメラ、サイドカメラ後方ビュー、ルームカメラ、ドライブレコーダのカメラ等)では、後方画像を表示する場合、基本的には後方画像の左右を反転した反転画像に加工処理して表示している。ディスプレイ上の後方画像の視認は、運転者がルームミラーやサイドミラーの鏡像を視認する場合と同じであり、両者の親和性／整合性を保つ為に後方画像を反転処理し、あたかもミラー越しに見ているような画像としている。

【0008】

しかし、上記した全方位カメラシステムを用いた表示装置では、表示アングルに応じて画像をシームレスに切替えるようにするため、後方画像の左右反転の処理が行われずに、単純に撮影方向のままの画像を表示するに過ぎなかった。つまり、後方画像を表示すると、図２（Ａ）に示すように、シームレスの切替えを優先させるが故に撮像画像がそのまま表示され、車室内での運転者の感覚では、左右を混同してしまい、非常に危険な場合がある。本来、車室内の運転者の感覚を考慮すれば、図２（Ｂ）に示すように、左右反転した後方画像を表示すべきである。このように従来の全方位カメラシステムを用いた表示装置は、車載機器としての運転者にとっての配慮に欠け、安全性において大きな課題があった。

【0009】

本発明は、このような従来の課題を解決するものであり、表示アングルに応じた撮像画像を表示するとき、後方画像の左右を反転した画像を表示することができる表示装置、表示方法および表示プログラムを提供することを目的とする。

【課題を解決するための手段】

【0010】

本発明に係る表示装置は、少なくとも車両の前方および後方を撮像する撮像手段と、表示手段と、撮像された画像を前記表示手段に表示させるときの表示アングルを決定する決定手段と、前記表示アングルに基づき前記撮像された画像の中から画像を切り出す切り出し手段と、前記切り出された画像をその左右が反転した反転画像に加工する加工手段と、前記表示アングルに応じて切り出された画像を前記表示手段に表示させ、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示させる表示制御手段とを有する。

【0011】

ある実施態様では、前記表示制御手段は、表示アングルが車両前方を示すとき、反転していない切り出し画像を前記表示手段に表示させる。ある実施態様では、前記切り出し手段は、前記表示アングルに対応する第１の切り出し画像と、表示アングルと反対方向の第２の切り出し画像を切り出し、前記加工手段は、第１の切り出し画像および第２の切り出し画像の一方を反転画像に加工し、前記表示制御手段は、第１の切り出し画像および第２の切り出し画像を前記表示手段に同時に表示させる。ある実施態様では、前記表示制御手段は、前記表示アングルに基づき第１の切り出し画像または第２の切り出し画像を拡大させる。ある実施態様では、前記表示制御手段は、前記表示アングルに基づき第１の切り出し画像または第２の切り出し画像を縮小させる。ある実施態様では、前記表示制御手段は、前記表示手段の背景画面に第１または第２の切り出し画像を表示させ、前記背景画面に含まれる前景画面に第２または第１の切り出し画像を表示させる。ある実施態様では、前記表示制御手段は、前記背景画面に非反転の前方画像を表示させ、前記前景画面に反転の後方画像を表示させる。ある実施態様では、表示装置はさらに、前記表示アングルに基づき表示モードを決定する表示モード決定手段を含み、前記表示制御手段は、前記表示モード決定手段により決定された表示モードに基づき切り出し画像の表示サイズを制御する。ある実施態様では、前記表示モードは、フロントビューモードおよびリアビューモードを含み、前記表示制御手段は、フロントビューモードのとき車両前方の画像を拡大し、リアビューモードのとき車両後方の画像を拡大する。ある実施態様では、前記表示制御手段は、フロントビューモードのとき前記背景画面をメイン表示、前記前景画面をサブ表示にし、リアビューモードのとき前記背景画面をサブ表示、前記前景画面をメイン表示にする。ある実施態様では、前記表示制御手段は、フロントビューモードからリアビューモードに切替える際、車両後方の画像を段階的または連続的に拡大する。ある実施態様では、前記前景画面のサイズを段階的または連続的に拡大する。ある実施態様では、前記表示制御手段は、リアビューモードからフロントビューモードに切替える際、車両後方の画像を段階的または連続的に縮小する。ある実施態様では、前記前景画面のサイズを段階的または連続的に縮小する。ある実施態様では、表示装置はさらに、ユーザーの操作情報を入力する入力手段を含み、前記決定手段は、前記入力手段から入力された操作情報に基づき表示アングルを決定する。ある実施態様では、前記入力手段は、前記表示手段に搭載されたタッチパネルを含み、前記決定手段は、前記タッチパネル上で操作された方向および移動量に基づき表示アングルを決定する。ある実施態様では、前記前景画面は、ルームミラーを模した形状を有する。ある実施態様では、前記撮像手段は、車両の全方位を撮像する撮像カメラを含み、前記表示アングルは車両の全方位を示すことが可能であり、前記表示制御手段は、前記表示アングルに対応する画像を前記表示手段に表示させる。

【0012】

本発明に係る表示方法は、少なくとも車両の前方および後方を撮像する撮像手段と、撮像された画像を表示可能な表示手段とを含む表示装置のものであって、撮像された画像を前記表示手段に表示するときの表示アングルを決定するステップと、前記表示アングルに基づき前記撮像された画像の中から画像を切り出すステップと、前記切り出された画像をその左右が反転した反転画像に加工するステップと、前記表示アングルに応じて切り出された画像を前記表示手段に表示し、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示するステップとを有する。

【0013】

本発明に係る表示プログラムは、少なくとも車両の前方および後方を撮像する撮像手段と、撮像された画像を表示可能な表示手段と、前記表示手段を制御する制御手段とを含む表示装置の前記制御手段が実行するものであって、撮像された画像を前記表示手段に表示するときの表示アングルを決定するステップと、前記表示アングルに基づき前記撮像された画像の中から画像を切り出すステップと、前記切り出された画像をその左右が反転した反転画像に加工するステップと、前記表示アングルに応じて切り出された画像を前記表示手段に表示し、かつ前記表示アングルが車両後方を示すとき、反転された後方画像を前記表示手段に表示するステップとを有する。

【発明の効果】

【0014】

本発明によれば、表示アングルが車両後方を示すときに、反転した後方画像を表示させるようにしたので、運転者は、自身の感覚に整合した画像を認識することができ、それ故、車両後方の画像を確認する際の安全性を向上させることができる。

【図面の簡単な説明】

【0015】

【図1】従来の全方位カメラシステムを用いた表示装置の概要を説明する図である。

【図2】従来の表示装置の課題を説明する図である。

【図3】本発明の実施例に係る全方位カメラシステムを用いた表示装置の一構成例を示すブロック図である。

【図4】本発明の実施例に係る表示制御プログラムの機能的な構成を示す図である。

【図5】本実施例の操作情報検出部の動作例を説明する図である。

【図6】表示アングルと表示モードとの関係を説明する図である。

【図7】図７（Ａ）は、フロントビューモードのときの背景画面と前景画面の表示サイズ例を示し、図７（Ｂ）は、リアビューモードのときの背景画面と前景画面の表示サイズ例を示す。

【図8】本発明の実施例による表示制御を行った場合の表示アングル、表示モード、背景画面および前景画面の関係を説明するためのテーブルである。

【図9】本発明の実施例に係る表示装置の具体的な撮像画像の表示例を説明する図である。

【図10】本発明の実施例に係る前景画面の表示サイズを段階的に拡大または縮小する例を示す図である。

【発明を実施するための形態】

【0016】

次に、本発明の実施の形態について説明する。ある実施の形態では、表示装置は、車両の３６０度の全方位を撮像可能な撮像カメラと、撮像された全方位の撮像画像の中から、ユーザー操作によって選択された表示アングルに対応する撮像画像を切り出し、これをディスプレイに表示する機能とを備えている。撮像カメラの数や取り付け位置は任意であるが、例えば、車両のフロントガラスの上部に撮像カメラを取り付けることで、車両の前方、側方、車室内を含む全方位を撮像することができる。また、１つの例として、全方位を撮像可能なドライブレコーダの撮像カメラを利用することができる。撮像画像を表示するディスプレイは、任意であり、例えば、専用のモニターであってもよいし、ナビゲーション装置等の車載装置に利用されるディスプレイと共用されるものであってもよいし、車両のインスツルメンツパネル内のディスプレイであっても良いし、車両周辺用のディスプレイであってもよい。

【実施例】

【0017】

図３は、本発明の実施例に係る表示装置の構成を示すブロック図である。本実施例の表示装置１００は、車両の全方位を撮像可能な撮像部１１０と、ユーザーからの入力を受け取る入力部１２０と、撮像部１１０で撮像された画像を表示可能な表示部１３０と、種々のデータやソフトウエア等を記憶可能な記憶部１４０と、各部を制御する制御部１５０とを含んで構成される。表示装置１００が他の電子機器の表示出力を兼ねる場合には、表示装置１００は、他の電子機器と接続するためのインターフェースを備えることができる。

【0018】

撮像部１１０は、例えば、車両の全方位を撮像することができる１つまたは複数の撮像カメラを含む。車両の全方位とは、車両の前方、左右の側方、後方を含む。撮像部１１０の取付け位置は、車外、または車内のいずれでもよく、例えば、図１に示すように、車両Ｍのフロントガラス２０の上部に取り付けることができ、その取り付けられた位置から、前方、側方、後方の全方位を撮像する。この場合、後方の撮像画像には、運転席、助手席および後部座席等の車室内の空間が含まれる。撮像部１１０によって撮像された画像は、制御部１５０に提供され、そこで必要な画像処理が施される。また、撮像された画像または加工された画像は、記憶部１４０に保持することができる。

【0019】

入力部１２０は、ユーザーからの入力を受け取り、これを制御部１５０に提供する。入力部１２０は、例えば、表示部１３０に搭載されたタッチパネル、リモコン、操作ボタン、音声入力などを含む。本実施例の１つの態様では、ユーザーは、表示部１３０のタッチパネルを操作して、表示部１３０に表示される撮像画像の表示アングルを指示する。勿論、ユーザーは、他の入力方法によって表示アングルの指示を行うことも可能である。

【0020】

表示部１３０は、車内の任意の位置に取り付けられ、撮像部１１０で撮像された画像を表示することができる。表示部１３０は、例えば、液晶や有機ＥＬ等のディスプレイパネルと、当該ディスプレイパネル上に積層されたタッチパネルとを含む。タッチパネルは、ユーザーの指等の接触やその移動を検出し、この検出結果を制御部１５０へ伝える。つまり、ユーザーは、タッチパネル上でフリック操作により入力を指示することができる。

【0021】

記憶部１４０は、撮像部１１０で撮像された画像を一時記憶したり、撮像画像から切り取られた画像や、左右反転等の加工された画像等を一時記憶することができる。また、記憶部１４０は、表示装置１００の動作に必要なソフトウエアやデータ等を記憶することもできる。

【0022】

制御部１５０は、表示装置１００の各部を制御し、例えば、ＲＯＭ／ＲＡＭ等を含むマイクロプロセッサまたはマイクロコンピュータを備え、そこに搭載された表示制御プログラムを実行することで表示装置１００の各部を制御する。図４に、表示制御プログラムの機能的な構成を示す。本実施例に係る表示制御プログラム２００は、操作情報検出部２１０、表示アングル決定部２２０、表示モード決定部２３０、画像切り出し部２４０、画像加工部２５０、および表示制御部２６０を含んで構成される。

【0023】

操作情報検出部２１０は、ユーザーが撮像画像の表示アングルを指示するために入力した操作情報を検出する。１つの態様では、操作情報検出部２１０は、ユーザーが表示部１３０のタッチパネル上をフリック操作したときの操作情報を検出する。例えば、図５（Ａ）、（Ｂ）に示すように、操作情報検出部２１０は、ユーザーのフリック操作の水平方向の成分とその移動量を検出する。図５（Ａ）の例では、ユーザーがほぼ水平方向に指を距離Ｌだけ移動させており、操作情報検出部２１０は、距離Ｌを水平方向の移動量として検出する。図５（Ｂ）の例では、ユーザーが幾分斜め方向に指を距離Ｌだけ移動させており、操作情報検出部２１０は、Ｌcosθを水平方向の移動量として検出する。

【0024】

他の態様では、操作情報検出部２１０は、音声入力やリモコン操作などから操作情報を検出するようにしてもよい。例えば、「９０度回転して表示」、「車両の右側方を表示」、「車両の後方を表示」等の音声入力があった場合には、操作情報検出部２１０は、入力された音声を解析し、当該解析結果から操作情報を検出する。

【0025】

表示アングル決定部２２０は、操作情報検出部２１０により検出された検出結果に基づき撮像画像の表示アングルを決定する。表示アングルは、全方位３６０度で撮像されたパノラマ画像の中から、表示部１３０に表示させる画像の角度または方位を表す。表示アングルは、例えば、図６に示すように、自車前方の方向を０度とし、そこから時計方向に３６０度で規定される。表示アングルのデフォルト値（初期値）は、例えば、０度に設定され、この場合、電源投入時または表示装置１００が起動されたとき、３６０度のパノラマ画像の中から表示アングルが０度の画像が切り出され、これが表示部１３０に表示される。

【0026】

表示アングル決定部２２０は、例えば、図５に示すようなフリック操作が検出された場合、予め用意されたアルゴリズム等に従い、その操作方向と移動量を表示アングルに変換する。例えば、フリック操作が図５（Ａ）に示すように左側の移動であれば、表示アングルは、０度から時計方向に、フリックの移動量に対応する角度で決定される。また、操作情報検出部２１０が「９０度回転して表示」のような音声を入力した場合には、表示アングル決定部２２０は、現在の表示アングルから時計方向に９０度回転した角度を表示アングルに決定する。

【0027】

表示モード決定部２３０は、表示アングル決定部２２０により決定された表示アングルに基づき表示部１３０の表示モードを決定する。本実施例では、表示モード決定部２３０は、表示アングルに基づきフロントビューモードまたはリアビューモードのいずれかに決定する。一例として、図６に示すように、表示アングルの０度が車両前方である場合、表示アングルが２７０度～９０度の範囲であるときフロントビューモード、９０度～２７０度であるときリアビューモードになる。

【0028】

本実施例の１つの実施態様では、表示部１３０に撮像画像を表示する場合、２つの撮像画像がピクチャーインピクチャー（ＰｉｎＰ）形式で同時に表示される。ＰｉｎＰ形式の一例を図７（Ａ）、（Ｂ）に示す。同図に示すように、ディスプレイ１３２の全体が背景画面１３４に割り当てられ、背景画面１３４の中に前景画面１３６が割り当てられる。背景画面１３４には、自車前方の撮像画像が表示され、前景画面１３６には、自車後方の撮像画像が表示される。本例では、前景画面１３６は、ルームミラーの形状を呈しており、前景画面１３６には、車室内の運転席や助手席を含む車内空間の後方画像が表示される。背景画面１３４と前景画面１３６とが重複する領域は、前景画面１３６の後方画像が表示され、前方画像は、後方画像によって遮蔽される。なお、後述するように前景画面１３６には、常に左右が反転された後方画像が表示されるが、背景画面１３４には、左右が反転されていない前方画面が表示される。

【0029】

フロントビューモードのとき、図７（Ａ）に示すように、前方画像を表示する背景画面１３４が見易くなるようにするため、背景画面１３４は、比較的大きな表示面積を持つメイン表示になり、後方画像を表示する前景画面１３６は、比較的小さな表示面積を持つサブ表示になる。他方、リアビューモードのときは、この関係が反転し、図７（Ｂ）に示すように、後方画像を表示する前景画面１３６が見易くなるようにするため、前景画面１３６は、比較的大きな表示面積を持つメイン表示に切替わり、背景画面１３４は、比較的小さな表示面積を持つサブ表示に切替わる。

【0030】

画像切り出し部２４０は、表示アングル決定部２２０により決定された表示アングルに基づき、撮像部１１０で撮像された全方位のパノラマ画像の中から表示すべき画像の切り出しを行う。本例では、画像切り出し部２４０は、背景画面１３４と前景画面１３６のそれぞれに前方画像および後方画像を表示させるため、それぞれに対応する１組の画像の切り出しを行う。ここで、第１の切り出し画像は、表示アングルに対応する画像であり、第２の切り出し画像は、第１の切り出し画像と反対方向の画像、つまり、表示アングルと１８０度異なる方向の画像である。例えば、表示アングルが３０度であれば、第１の切り出し画像は、表示アングルが３０度に対応し、第２の切り出し画像は、表示アングルが２１０度に対応する。切り出す画像の大きさは、表示部１３０の表示範囲との関係等から予め設定される。

【0031】

画像切り出し部２４０により切り出された第１および第２の切り出し画像は、画像加工部２５０へ提供される。画像加工部２５０は、第１および第２の切り出し画像について、トリミング加工、サイズ調整、左右が反転する反転処理等を行う。表示制御部２６０は、背景画面１３４および前景画面１３６に表示される第１および第２の切り出し画像の制御を行う。図８のテーブルに、表示制御部２６０による表示制御の内容を示す。

【0032】

先ず、表示アングルが０～９０度のとき、表示モードはフロントビューモードである。フロントビューモードでは、背景画面１３４がメイン表示となり、背景画面１３４には、表示アングルに応じて切り出された第１の切り出し画像が表示される。第１の切り出し画像は、左右が反転されていない前方画像である。他方、前景画面１３６はサブ表示となり、前景画面１３６には、表示アングルと１８０と異なる方向で切り出された第２の切り出し画像が表示される。第２の切り出し画像は、左右が反転された後方画像である。

【0033】

表示アングルが９０～１８０度のとき、表示モードはリアビューモードである。リアビューモードでは、ルームミラーの形状を呈した前景画面１３６がメイン表示となり、前景画面１３６には、表示アングルに応じて切り出された第１の切り出し画像が表示される。このとき、第１の切り出し画像は、左右が反転された後方画像である。他方、背景画面１３４はサブ表示となり、背景画面１３４には、表示アングルと１８０と異なる方向で切り出された第２の切り出し画像が表示される。このとき、第２の切り出し画像は、左右が反転されていない前方画像である。

【0034】

表示アングルが１８０～２７０度のとき、表示モードはリアビューモードであり、９０～１８０度のときと同様の表示制御が行われる。表示アングルが２７０～０度のとき、表示モードはフロントビューモードであり、０～９０度のときの同様の表示制御が行われる。

【0035】

次に、本実施例の表示装置１００の具体的な表示動作を、図９に示す画面遷移図を参照して説明する。表示装置１００が起動されると、表示アングル決定部２２０は、初期設定（例えば、０度）を表示アングルと決定し、表示モード決定部２３０は、フロントビューモードを決定する。その結果、ディスプレイ１３２の背景画面１３４がメイン表示となり、そこに自車の前方画像が表示される。ルームミラー形状の前景画面１３６には、自車後方の反転画像が表示される。

【0036】

この状態から、例えば、ユーザーが左方向にフリック操作をすると、その方向および移動量が検出され、それに応じて、０度から時計方向に回転した表示アングルが決定され、そこで、第１および第２の切り出し画像が切り出され、背景画面１３４には、第１の切り出し画像の非反転の前方画像が表示され、前景画面１３６には、第２の切り出し画像の反転された後方画像が表示される。

【0037】

ユーザーがさらに左方向にフリック操作を継続すると、表示アングルがさらに時計方向に進み、背景画面１３４には表示アングルに応じた非反転の前方画像が表示され、前景画面１３６には、それと正反対の反転された後方画像が表示される。

【0038】

ある実施態様では、表示アングルが一定角度に到達すると、それ以降、前景画面１３６のサイズを段階的に、あるいは連続的に拡大する。例えば、表示アングルが７５度に到達すると、図１０（Ａ）～（Ｄ）に示すように、７５度から９０度まで間、前景画面１３６のサイズが段階的に拡大される。あるいは、前景画面１３６のサイズが連続的で拡大さえる。

【0039】

左方向のフリック操作がさらに継続され、表示アングルが９０度に到達すると、表示モードがフロントビューモードからリアビューモードに切替わる。このとき、前景画面１３６が図１０（Ｄ）に示すように、サブ表示からメイン表示に完全に切替えられ、背景画面１３４がメイン表示からサブ表示に完全に切替えられる。

【0040】

左方向のフリック操作がさらに継続されると、メイン表示の前景画面１３６には、表示アングルに対応する反転された後方画像が表示され、サブ表示の背景画面１３４には、非反転の前方画像が表示される。表示アングルが９０～２７０度の範囲では、前景画面１３６の表示サイズは一定である。

【0041】

左方向のフリック操作がさらに継続され、表示アングルが２７０度に到達すると、表示モードがリアビューモードからフロントビューモードに切替わる。前景画面１３６は、メイン表示からサブ表示に切替えられ、背景画面１３４は、サブ表示からメイン表示に切替えられる。１つの実施態様では、例えば、表示アングルが２７０度から２８５度の間は、図１０（Ｅ）～（Ｈ）に示すように、前景画面１３６のサイズが段階的に、あるいは連続的に小さくされる。

【0042】

左方向のフリック操作がさらに継続され、表示アングルが２８５～０度の範囲では、背景画面１３４に表示アングルに対応する非反転の前方画像が表示され、前景画面１３６には、それと１８０度異なる方向の反転された後方画像が表示される。上記の表示制御は、ユーザーがフリック操作を右方向に行い、表示アングルを反時計方向に回転させた場合にも同様に行われる。

【0043】

このように本実施例によれば、シームレスな表示アングルの移動を保ちつつ、リアモードに切替わったときに、左右反転された後方画像を表示させることができる。これにより、ユーザーの利便性を損なうことなく、ルームミラーで鏡像をみたときの映像との整合性を保ち、運転者に誤解や混乱を生じさせることなく、安全に寄与する表示機能を提供することができる。

【0044】

上記実施例では、車両の全方位を撮像し、その中から任意の画像を表示する例を示したが、これに限らず、本発明は、少なくとも車両の前方と後方を撮像し、前方および後方の中から任意の画像を表示できるようにしてもよい。

【0045】

上記実施例では、２７０～９０度の範囲をフロンビューモードに設定し、９０～２７０度の範囲をリアビューモードに設定したが、これは一例であり、その範囲は任意に適宜設定することが可能である。例えば、自車の前方を撮像する前方カメラと、自車の後方を撮像する後方カメラを搭載する場合には、フロントビューモードは、前方カメラの視野範囲に応じた角度に設定され（例えば、３００～６０度）、リアビューモードは、後方カメラの視野範囲に応じた角度に設定される（例えば、１９０～２６０度）。

【0046】

また、上記実施例は、背景画面とその中に表示される前景画面とを含むＰｉｎＰ形式を例示したが、必ずしもＰｉｎＰ形式を用いず、１つの画面で非反転前方画像から反転後方画像への切替え表示を行うようにしてもよい。例えば、フロントビューモードにおいて、表示アングルに対応する非反転の前方画像を表示し、リアビューモードにおいて、表示アングルに対応する反転の後方画像を表示する。

【0047】

さらに上記実施例では、撮像カメラを車両のフロントガラスの上部に取り付け、車両の後方画像として車室内の画像を表示する例を示したが、これに限らず、撮像カメラは、ドアミラー、車両の前方、後方、側方のいずれかに取り付けられるものであってもよい。そして、後方画像は、必ずしも車室内の画像に限らず、自車両の後方の空間を撮像した画像であってもよい。上記実施例では、ディスプレイの画面全体を背景画面とし、ルームミラー形状を前景画面としたが、背景画面および前景画面の形状や大きさは任意に設定することが可能である。

【0048】

以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々の変形、変更が可能である。

【符号の説明】

【0049】

１００：表示装置 １１０：撮像部
１２０：入力部 １３０：表示部
１３２：ディスプレイ １３４：背景画面
１３６：前景画面 １４０：記憶部
１５０：制御部 ２００：表示制御プログラム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】