特許 5715534 立体映像処理装置および映像表示装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5715534

(24)【登録日】2015年3月20日

(45)【発行日】2015年5月7日

(54)【発明の名称】立体映像処理装置および映像表示装置

(51)【国際特許分類】

   H04N 13/00 20060101AFI20150416BHJP

【ＦＩ】

   H04N13/00 220

   H04N13/00 370

【請求項の数】10

【全頁数】20

(21)【出願番号】特願2011-208405(P2011-208405)

(22)【出願日】2011年9月26日

(65)【公開番号】特開2013-70296(P2013-70296A)

(43)【公開日】2013年4月18日

【審査請求日】2014年2月12日

(73)【特許権者】

【識別番号】000005810

【氏名又は名称】日立マクセル株式会社

(74)【代理人】

【識別番号】110001689

【氏名又は名称】青稜特許業務法人

(72)【発明者】

【氏名】坂庭 秀紀

(72)【発明者】

【氏名】荻野 昌宏

(72)【発明者】

【氏名】福田 伸宏

(72)【発明者】

【氏名】長谷川 実

【審査官】 菅 和幸

(56)【参考文献】

【文献】 特開２０１１−０５９６５８（ＪＰ，Ａ）

【文献】 国際公開第２０１０／０２１３７３（ＷＯ，Ａ１）

【文献】 特開平１１−０２７７０３（ＪＰ，Ａ）

【文献】 特開２００１−０１４４５７（ＪＰ，Ａ）

【文献】 国際公開第２０１２／１５３６０４（ＷＯ，Ａ１）

【文献】 特開２００５−２３１４８８（ＪＰ，Ａ）

【文献】 特開２０００−２２４４１０（ＪＰ，Ａ）

【文献】 特開２００９−１４６０３４（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００７／０１２０９７２（ＵＳ，Ａ１）

【文献】 特開２００３−１１１１０１（ＪＰ，Ａ）

【文献】 特開２００７−１５１１２５（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ １３／００−１７／０６

(57)【特許請求の範囲】

【請求項1】

放送または通信を介して映像が入力される入力部と、
放送または通信を介して前記入力部に入力された映像について、２Ｄ映像か３Ｄ映像かを判定するための識別情報を取得し２Ｄ映像／３Ｄ映像判定処理を行う判定部と、
ユーザインタフェースと、
入力された３Ｄ映像に左目用映像と右目用映像とが含まれる場合にそれぞれについて色空間のヒストグラムを生成してそれぞれの映像について、色空間のヒストグラムのピーク色相位置、ピーク色相の度数、ピーク色相周辺の分布幅、ピーク色相周辺分布の重心の位置、またはこれらの組合せである特徴パラメータを検出する解析部と、
前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像特徴パラメータとの差分を低減する色空間上の補正処理を行う補正部と、
を備え、
前記補正部の処理状態には、
前記判定部により、前記入力部に入力された映像が２Ｄ映像であると判定された場合に前記補正部による色空間上の補正処理を行わない第１の状態と、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されており、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値以下の場合に前記補正部による色空間上の補正処理を行う第２の状態と、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されていない場合に、前記補正部による色空間上の補正処理を行なわない第３の状態とがある
ことを特徴とする立体映像処理装置。

【請求項2】

請求項１に記載の立体映像処理装置であって、
前記補正部の処理状態には、さらに、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されていても、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値より大きい場合には、前記補正部による色空間上の補正処理を行わない第４の状態があることを特徴とする立体映像処理装置。

【請求項3】

請求項１に記載の立体映像処理装置であって、
前記第３の状態のあとに前記ユーザインタフェースに２Ｄ表示から３Ｄ表示への切り替え指示が入力された場合に、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値以下であれば、前記補正部が前記色空間上の補正処理を開始することを特徴とする立体映像処理装置。

【請求項4】

請求項１に記載の立体映像処理装置であって、
前記第３の状態のあとに前記ユーザインタフェースに３Ｄ表示から２Ｄ表示への切り替え指示が入力された場合に、前記補正部が前記色空間上の補正処理を終了することを特徴とする立体映像処理装置。

【請求項5】

請求項１に記載の立体映像処理装置であって、
オクルージョン検出部を備え、
前記オクルージョン検出部は、入力された映像含まれる左目用映像と右目用映像とにおいて、一方の視点では見えずに他方の視点では見える物体が存在するオクルージョン領域を検出し、
前記解析部は、前記オクルージョン領域については、前記色空間のヒストグラムの生成処理において除外し、
前記補正部は、前記オクルージョン領域については、色空間上の補正の対象から除外することを特徴とする立体映像処理装置。

【請求項6】

放送または通信を介して映像が入力される入力部と、
放送または通信を介して前記入力部に入力された映像について、２Ｄ映像か３Ｄ映像かを判定するための識別情報を取得し２Ｄ映像／３Ｄ映像判定処理を行う判定部と、
ユーザインタフェースと、
入力された３Ｄ映像に左目用映像と右目用映像とが含まれる場合にそれぞれについて色空間のヒストグラムを生成してそれぞれの映像について、色空間のヒストグラムのピーク色相位置、ピーク色相の度数、ピーク色相周辺の分布幅、ピーク色相周辺分布の重心の位置、またはこれらの組合せである特徴パラメータを検出する解析部と、
前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像特徴パラメータとの差分を低減する色空間上の補正処理を行う補正部と、
前記補正部において前記色空間上の補正処理を行った映像を表示可能な表示部と、
を備え、
前記補正部の処理状態には、
前記判定部により、前記入力部に入力された映像が２Ｄ映像であると判定された場合に前記補正部による色空間上の補正処理を行わない第１の状態と、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されており、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値以下の場合に前記補正部による色空間上の補正処理を行う第２の状態と、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されていない場合に、前記補正部による色空間上の補正処理を行なわない第３の状態とがある
ことを特徴とする映像表示装置。

【請求項7】

請求項６に記載の映像表示装置であって、
前記補正部の処理状態には、さらに、
前記判定部により、前記入力部に入力された映像が３Ｄ映像であると判定され、前記ユーザインタフェースを介して３Ｄ映像を３Ｄ表示する指示が入力されていても、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値より大きい場合には、前記補正部による色空間上の補正処理を行わない第４の状態があることを特徴とする映像表示装置。

【請求項8】

請求項６に記載の映像表示装置であって、
前記第３の状態のあとに前記ユーザインタフェースに２Ｄ表示から３Ｄ表示への切り替え指示が入力された場合に、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像の特徴パラメータとの差分が所定の閾値以下であれば、前記補正部が前記色空間上の補正処理を開始することを特徴とする映像表示装置。

【請求項9】

請求項６に記載の映像表示装置であって、
前記第３の状態のあとに前記ユーザインタフェースに３Ｄ表示から２Ｄ表示への切り替え指示が入力された場合に、前記補正部が前記色空間上の補正処理を終了することを特徴とする映像表示装置。

【請求項10】

請求項６に記載の映像表示装置であって、
オクルージョン検出部を備え、
前記オクルージョン検出部は、入力された映像含まれる左目用映像と右目用映像とにおいて、一方の視点では見えずに他方の視点では見える物体が存在するオクルージョン領域を検出し、
前記解析部は、前記オクルージョン領域については、前記色空間のヒストグラムの生成処理において除外し、
前記補正部は、前記オクルージョン領域については、色空間上の補正の対象から除外することを特徴とする映像表示装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、立体映像の色補正技術に関する。

【背景技術】

【0002】

立体（３Ｄ）映像を作成する場合に、右目から見た映像、左目から見た映像を撮影するためのカメラまたはレンズを２つ用意して、映像を撮影したそれぞれの映像を同時(偏光方式や視差バリアやレンチキュラ方式など)またはタイムシーケンシャル(シャッタ眼鏡方式など)に表示装置に立体映像を表現する方法がある。視差のある左右の映像を右目、左目に見せることにより、視聴者が左右視差を脳で立体化することにより、映像を立体的に見せることができる。この様な立体映像の作成、表示方法において、複数のカメラやレンズの個体差や光の入射量や入射角度などにより、同じ映像を撮影している場合でも、それぞれの映像の色合いや明度などが異なる場合がある。

【0003】

このように、左右の映像の色合いや明度などの差がある状態で、左右の眼に映像を見せた場合の現象として、左右像に色ズレが大きいと視野闘争が生じて融合しにくくなる可能性左右像の色ズレは眼精疲労の原因となる可能性がある。

【0004】

立体表示用の左右画像の補正方法として、特許文献１には、左右画像の垂直位置ずれを補正する方法が開示されている。特許文献２には、左眼用映像信号と右眼用映像信号の平均輝度レベルとダイナミックレンジとを一致させる補正方法が開示されている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２００３−６１１１６

【特許文献2】特開平２−５８９９３

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかし、特許文献１や特許文献２に開示される左右映像の補正技術には、左右映像の色ズレに関する補正技術については述べられていない。複数のカメラで撮影した際の、個々のカメラの特性の違いや、それぞれのカメラのピント、フォーカスずれ、ホワイトバランス調整の差異による色ズレが生じる場合がある。その場合、視聴者は、右目、左目に色ズレがある映像を見ることになる。

【0007】

本発明は上記課題を鑑みてなされたものであり、その目的は、立体映像において、左右の眼に入るそれぞれの映像の色合いをより好適に補正することにある。

【課題を解決するための手段】

【0008】

上記課題を解決するために、本発明の一実施の態様は、映像が入力される入力部と、入力された映像に左目用映像と右目用映像とが含まれる場合にそれぞれについて色空間のヒストグラムを生成してそれぞれの映像についての特徴パラメータを検出する解析部と、前記解析部で検出した前記左目用映像の特徴パラメータと前記右目用映像特徴パラメータとの差分を低減する色空間上の補正を行う補正部とを備えるように構成する。

【発明の効果】

【0009】

立体映像において、左右の眼に入るそれぞれの映像の色合いをより好適に補正する。

【図面の簡単な説明】

【0010】

【図1】本発明の実施例１に係る立体映像処理装置の構成の一例を示すブロック図である。

【図2】本発明の実施例１に係る左右映像色補正処理部の一例を示すブロック図である。

【図3】本発明の実施例１に係る左右映像色補正処理部の左右色補正処理シーケンスを示した例である。

【図4】ＨＳＶ色空間の説明を示した例である。

【図5】本発明の実施例１に係る左右色補正処理部の色相ヒストグラムを示した例である。

【図6】本発明の実施例１に係る左右色補正処理部の色相ヒストグラムの特徴を示した例である。

【図7】本発明の実施例２に係る立体映像処理装置の構成の一例を示すブロック図である。

【図8】本発明の実施例２に係る立体映像処理装置のユーザ操作と左右色補正処理の連動の例を示した図である。

【図9】本発明の実施例３に係る立体映像処理装置の構成の一例を示すブロック図である。

【図10】本発明の実施例３に係る立体映像処理装置のオクルージョン検出時の左右映像イメージを示した例である。

【図11】本発明の実施例３に係る立体映像処理装置のオクルージョン検出時の動作シーケンスを示した例である。

【図12】本発明の実施例４に係る受信装置の構成例を示す図である。

【図13】本発明の実施例４に係る受信装置の動作シーケンスの一例である。

【図14】本発明の実施例４に係る受信装置の動作シーケンスの一例である。

【図15】本発明の実施例４に係る受信装置の動作シーケンスの一例である。

【図16】本発明の実施例４に係る受信装置の動作シーケンスの一例である。

【図17】本発明の実施例４に係る受信装置の動作シーケンスの一例である。

【発明を実施するための形態】

【0011】

以下、本発明の実施形態を、図面を用いて以下に説明する。

【実施例1】

【0012】

以下、本発明の実施例１について、図１〜図６を参照して説明する。

【0013】

図１は、本発明の実施例１に係る立体映像処理装置の構成の一例を示すブロック図である。

【0014】

図1において、１００は映像入力Ｉ／Ｆ、１０１は映像デコーダ回路、１０２は立体映像色補正処理部、１０３は立体映像処理部、１０４は左右色補正処理部、１０５は立体表示処理部、１０６は表示部である。

【0015】

映像入力Ｉ／Ｆ１００は、放送や光ディスクなどのプレーヤ装置やゲーム機などから映像や音声、文字などのコンテンツの入力を行うインタフェースである。映像デコーダ回路１０１は映像のデコード処理などを行い、映像信号を出力する。立体映像色補正処理部１０２では、Ｓｉｄｅ−ｂｙ−Ｓｉｄｅ（ＳＢＳ）方式やＴｏｐ−ａｎｄ−Ｂｏｔｔｏｍ（ＴＡＢ）方式、Ｆｒａｍｅ−Ｐａｃｋｉｎｇ（ＦＰ）方式や多眼方式などの立体映像が入力された場合に、立体映像処理部１０３にて、左右のそれぞれの目に対応する映像を分離する映像信号処理を行う。左右色補正処理部１０４では、左右のそれぞれの目に対応する映像の色の差分が小さくなるように色補正（色空間上の補正）を行う。左右色補正処理部１０４にて色補正がなされた映像を立体表示処理部１０５にて、左目用映像Ｌ、右目用映像Ｒを切替えて表示部１０６に出力し、その切替えタイミングをシャッタ眼鏡に伝送する赤外線信号処理などを行う。偏光眼鏡方式の３Ｄ表示部場合には、表示部１０６に設置された視差バリアに合わせて、Ｌ、Ｒの映像が表示されるように表示画素を調整する処理も行う。裸眼方式の場合には、表示部に設置したレンチキュラレンズなどに合わせた映像信号処理を行う。表示部１０６は液晶デバイスやＯＬＥＤ（Organic light-emitting diode）、プラズマなどを利用した表示部であり、立体表示処理部１０５で出力されたＬ、Ｒの映像を調整されたタイミングで切替えて表示や、設置された視差バリアに合わせた画素での表示、または設置されたレンチキュラレンズに合わせた画素での表示などを行い、立体表示を行う。

【0016】

次に、立体映像表示時に右目用映像と左目用映像の色の差異を軽減する仕組みを説明する。

【0017】

図２は、第一の実施形態本発明の実施例１に係るである左右映像色補正処理装置部の詳細な構成の一例を示すブロック図である。 ＳＢＳ方式やＴＡＢ方式、ＦＰ方式などの立体表示用の映像は図１の立体映像信号処理部１０３にて左目用映像２０１と右目用映像２０２に分離をしされ、図２の左右映像色補正処理部１０４へ入力される。例えばＳＢＳ方式であれば、映像デコーダ回路１０１にてデコードされた映像の左半分を左目用映像、右半分を右目用映像として分離する。その後、左右色補正処理部１０４にて、左右それぞれの映像の色分析を行う。

【0018】

図２の左右色補正処理部１０４において、Ｌ映像色相ヒストグラム解析部２０３、Ｒ映像色相ヒストグラム解析部２０４は、左右映像の色空間解析をそれぞれ行う。色相補正処理部２０５は、例えば左右それぞれのヒストグラムのピークや色相幅、ヒストグラムの重心などの特徴パラメータ（以下、単に「特徴」と記す）を抽出し、その特徴の差分を求める。さらに差分を低減する様に、左右映像の色相をそれぞれ変化させる補正を行う。これにより、色相の差異が少ない左目用映像２０６と右目用映像２０７が出力される。

【0019】

ここで、Ｌ映像色相ヒストグラム解析部２０３、Ｒ映像色相ヒストグラム解析部２０４、色相補正処理部２０５における処理に用いられる色相ヒストグラムについて説明する。

【0020】

本実施例では、Ｌ映像色相ヒストグラム解析部２０３、Ｒ映像色相ヒストグラム解析部２０４において、左目用映像と右目用映像のそれぞれの色相のヒストグラムを算出する。まず、色相の数値の定義を図４に示す。ＨＳＶ色空間において円柱の円一周が色相を表し、赤を０度として、黄、緑、青、紫と３６０度変化する。この色相を横軸にとり、左（または右）目用映像１画面に含まれる色相毎の画素の数を数えてグラフ化した例が、図５に示す色相ヒストグラムである。この色相ヒストグラムの分布を使って、左右映像それぞれの色相の差異を算出する。ヒストグラムの算出と色相補正の詳細については図３を用いて後述する。

【0021】

本例では、ＨＳＶ色空間の色相でのヒストグラム解析の例を示しているが、色分析としては、例えば、色相（Ｈｕｅ）、彩度（Ｓａｔｕｒａｔｉｏｎ／Ｃｈｒｏｍａ）、明度（Ｂｒｉｇｈｔｎｅｓｓ／Ｌｉｇｈｔｎｅｓｓ／Ｖａｌｕｅ）を使ったＨＳＶ／ＨＳＢ色空間に分離して、それぞれのヒストグラム分布などを求めてもよい。これは、色相（Ｈｕｅ）、彩度（Ｓａｔｕｒａｔｉｏｎ）、輝度（Ｌｉｇｈｔｎｅｓｓ／Ｌｕｍｉｎａｎｃｅ または Ｉｎｔｅｎｓｉｔｙ）を使ったＨＬＳ／ＨＳＩ色空間や、ＣＩＥ表色系（ＲＧＢ、ＸＹＺ、ｘｙＹ、Ｌ*ｕ*ｖ*、Ｌ*ａ*ｂ*）やｓＲＧＢカラートライアングルなど様々な色空間を表すそれぞれの軸でヒストグラム分布を算出する色分析などでよい。

【0022】

また、本例においては、ＨＳＶ色空間の色相、彩度、明度の軸で表現されるヒストグラムの内、色相ヒストグラムを解析し、左右映像のヒストグラム特徴を近づけることで、色空間の差異を低減する。色相のみでなく、彩度や明度もヒストグラム分布を解析して、その特徴の差分量を算出し、この差分量を低減しても良い。この処理は、色相のヒストグラム解析と同時に行っても良いし、または時間的に異なるフレームに対して行っても良い。

【0023】

次に、図３は、本発明の実施例１の左右映像色補正処理部１０４の左右色補正処理シーケンスの例について図３、図５、図６を用いて説明する。

【0024】

Ｓ３００では、左右映像色補正処理部１０４に左右の映像が入力されて、処理が開始される。Ｓ３０１では、Ｌ映像色相ヒストグラム解析部２０３が左目用映像に含まれる各色相の画素数を集計する。同様にＳ３０３では、Ｒ映像色相ヒストグラム解析部２０４が右目用映像に含まれる各色相の画総数を集計する。Ｓ３０２では、Ｌ映像色相ヒストグラム解析部２０３が左目用映像色相ヒストグラムの色相の特徴を検出する。ここで色相の特徴とは、ピーク色相位置、ピーク色相の度数、ピーク色相周辺の分布幅、ピーク色相周辺分布の重心の位置、またはこれらの組合せである。図５が左右色補正処理部のＬ映像色相ヒストグラム解析部２０３またはＲ映像色相ヒストグラム解析部２０４が集計した色相ヒストグラムの例である。例えば、青い空が表現されているような映像であれば、青の色相周辺にヒストグラムが現れ、ピーク色相、ピーク色相周辺の分布の幅、ピーク周辺の重心の色相を検出することで、映像の色相の特徴を判断することができる。同様にＳ３０４において、映像色相ヒストグラム解析部２０４が右目用映像の色相ヒストグラムの特徴を検出する。次に、Ｓ３０５において、色相補正処理部２０５が、左目用映像の色相の特徴と右目用映像の色相の特徴とを比較する。例えば、ピーク色相位置やピーク度数、ピーク色相周辺分布の幅、ピーク周辺色相分布の重心位置などが、どのくらいずれているのか等を算出して、特徴の差分を数値化する。Ｓ３０６において、色相補正処理部２０５は、Ｓ３０５で算出したヒストグラム分布の特徴の差分量が、所定の閾値以上だった場合には、色補正をしないと判断する（Ｓ３０７）。Ｓ３０７の判断に加えて、左右映像の色分析の結果、特徴の差分量が大きい場合には、入力が３D映像信号ではないと判断してもよい。この場合、立体映像信号処理部１０３に対して入力映像を左右映像に分離しない指示をしてもよい（Ｓ３０８）。このとき図１の立体映像処理装置は2Dの映像信号処理を行う。

【0025】

Ｓ３０８の処理を行う利点を以下に説明する。まず、Ｓ３０７において特徴の差分量が大きい場合には、入力映像が３D映像ではない入力映像信号に対して、立体表示装置の設定で強制的にＳＢＳやＴＡＢなどの３Ｄのように映像を半分に分離して左目用映像と右目用映像を作成して３D表示をしようとしている可能性がある。この場合には、映像が破綻してしまっているので、左右映像の色合わせは必要なく（Ｓ３０７）、さらに、左右映像に分離する必要がない。そこで、立体映像信号処理部１０３に対して左右映像分離処理をしない制御を指示する（Ｓ３０８）。

【0026】

立体映像信号処理部１０３がＳ３０８の指示を受けた場合の処理としては、立体映像信号処理部１０３が、映像デコーダ回路で出力された映像信号をそのまま、左目用映像出力、右目用映像出力として同じ映像を出力し、立体表示処理１０５が３D表示と同様の表示（左右映像を交互に表示／左右映像をラインバイラインで表示）を行って２Ｄ表示を実現してもよい。

【0027】

また、立体映像信号処理部１０３がＳ３０８の指示を受けた場合の処理の別の例としては、立体映像色補正処理部１０２ともに何もせず、映像デコーダ回路１０１の２Ｄの出力映像信号をそのまま立体表示部１０５に送信し、出力映像信号を立体表示部１０５が表示処理設定を３Ｄ表示から２Ｄ表示に切換えて表示してもよい。

【0028】

また、Ｓ３０５において、色相のヒストグラム特徴の差分量が大きくても、ある所定の差分である場合には、赤青メガネを利用したアナグリフ方式で映像が入力されていると判断して、色補正はせずにそのまま左右映像を出力する処理を行ってもよい。

【0029】

また、色相のヒストグラム特徴の差分量が大きい場合には、左右のピントやホワイトバランスが合っていないカメラを２台使って、撮影された映像の可能性もある。この場合は、眼精疲労等を考慮し、立体感はなくなってしまうが、左目用または右目用映像のどちらかのみを選択して、左右同じ映像を出力し、左右の目に見える映像の色ズレを無くす処理をおこなってもよい。

【0030】

また、上述したアナグリフ方式と判定する色分布の左右映像の差異の閾値と、カメラのピントやホワイトバランスの差による色分布の左右映像の差異の閾値は、異なる閾値を有しても良い。すなわち、複数の閾値を設定することにより、差異の大きさに応じてこれらの複数の判断を切換えてもよい。

【0031】

図６は、Ｓ３０５で算出する、左右色補正処理における左右の装置の色相ヒストグラムの特徴を示した例を示している。であり、色相ピークの色相位置、やピーク色相の度数、ピーク色相周辺の分布幅（ヒストグラム集中範囲）などがヒストグラムの特徴を表している。ここで、さらにヒストグラム度数とヒストグラム集中範囲を利用して、ヒストグラムが集中している部分のヒストグラム重心を算出したりすることができる。図６中には、色相ヒストグラムの特徴を表すために算出する数値の例を示している。例えば、まず、左目用映像と右目用映像のそれぞれの色相のピークを示す色相位置（ＰＬ0、ＰＬ1、ＰＲ0、ＰＲ1）、ヒストグラムの各ピーク度数（ΔＰＬ0、ΔＰＲ0、ΔＰＬ1、ΔＰＲ1）を算出する。さらに、ヒストグラムにおいて設定した閾値以上のヒストグラム度数が集中している範囲ΔＷL0、ΔWL1、ΔWR0、ΔWR1を算出する。これらをヒストグラムの特徴として利用し、左右映像の特徴の差分量を算出する。以上のように、図３のＳ３０６において左右映像の色相の特徴差分量の大きさの判定際に、色相ピークの位置の差である｜ＰＬ0−ＰＲ0｜や｜ＰＬ1−ＰＲ1｜と所定の閾値を比較してもよい。また、ピーク度数の差である｜ΔＰＬ0−ΔＰＲ0｜や｜ΔＰＬ1−ΔＰＲ1｜と所定の閾値を比較してもよい。さらに、ヒストグラム集中範囲の差を判定に用いてもよい。

【0032】

次に、Ｓ３０９では上記のとおり、Ｓ３０５で算出した特徴の差分量を色相の補正量として決定する。例えば、Ｓ３０５で算出した左目用映像と右目用映像の色相のピークの色相ズレ（ＰＬ0−ＰＲ0、ＰＬ1−ＰＲ1；ＰＬ0、ＰＲ0、ＰＬ1、ＰＲ1はヒストグラムの各ピーク度数の色相位置）、ピーク度数差分（ΔＰＬ0−ΔＰＲ0、ΔＰＬ1−ΔＰＲ1；ΔＰＬ0、ΔＰＲ0、ΔＰＬ1、ΔＰＲ1はヒストグラムの各ピーク度数）を色相補正量とする。さらに、Ｓ３０９ではヒストグラムにおいて設定した閾値以上のヒストグラム度数が集中している範囲ΔＷｎ（ｎ：整数）を算出し、色相補正の補正範囲とする。

【0033】

Ｓ３１０において、Ｓ３０９で決定した補正量に応じて、左目用映像、右目用映像の色相補正処理を行う。映像の色相補正は少なくとも一方の映像に対して行えばよい。例えば、右目用映像のピーク色相ＰＲ0の周辺ΔＷL0の範囲を｜ＰＬ0−ＰＲ0｜だけ色相を右方向にずらし、ＰＲ1の周辺ΔＷL1の範囲を｜ＰＬ１−ＰＲ1｜だけ色相を左方向にずらすような色相補正を行う。このように、補正範囲をΔＷL0やΔＷL1に制限し、その範囲にある色相の画素を補正することで、補正の精度を上げるとともに、補正による弊害を少なくすることができる。

【0034】

さらに、ΔＷL0、ΔＷL1それぞれの範囲内の画素を補正し、ピーク度数や周辺の色相の度数を合わせる処理を行ってもよい。

【0035】

このような色相補正によって左右映像のヒストグラム分布の特徴を近づける際は、右目用映像のヒストグラム分布の特徴を変化させて、左目用映像のヒストグラム分布の特徴に近づけても良い。また、左目用映像の特徴を変化させて、右目用映像の特徴に近づけても良い。または、左目用映像のヒストグラム分布の特徴と右目用映像のヒストグラム分布の特徴の平均を取り、左右映像の両方を算出した平均のヒストグラム分布の特徴に近づけても良い。

【0036】

また、本処理は、毎フレーム行っても良いし、数フレーム毎に行っても良い。数フレーム毎に行う場合には、数フレームの間は同じ色相補正を行うことで、処理負荷を低減できる。

【0037】

以上説明した処理により、左右の映像の色相のズレ量を定量化し、ズレ量に応じた左右映像の色相のヒストグラムの近似が可能となる。

【0038】

なお、上述の例では色相の補正例を説明したが、他の色空間をについて、左右映像の色の特徴の差異量に応じた左右映像の色補正を行ってもよい。

【0039】

なお、左目用映像と右目用映像とのうちいずれの映像を補正対象にするかについては、処理部に後に入力される映像を補正対象としてもよい。この場合、先入力映像をラインメモリに格納し、先入力映像のヒストグラム分布の特徴を先に解析し、当該解析結果を利用して、後入力映像の色相を先入力映像の解析結果に応じて色相補正する方が、処理高速化の観点で利点がある。例えば、Ｆｒａｍｅ Ｐａｃｋｉｎｇ方式などにおいて、左目用映像が先に伝送される場合には、左目用の映像のヒストグラム分布の特徴の解析結果を利用して、右目用映像の色相を左目用映像のヒストグラム分布の特徴に合わせることが望ましい。また、ＳＢＳ方式、ＴＡＢ方式においても受信した映像が左目用映像からラインメモリに納められる場合も同様である。

【0040】

処理高速化の例としては、Ｆｒａｍｅ Ｐａｃｋｉｎｇ方式の場合は、先に入力される一方の目の映像（例えば、左目用映像）のヒストグラム分布の特徴の解析をし、後から入力される他方の目の映像（例えば、右目用映像）に対し右目用映像の色補正処理を行う。このとき、先に入力された左目用映像のヒストグラム解析結果を利用して、１ラインもしくは数ラインずつ右目用映像のヒストグラム分布の特徴が解析でき次第、リアルタイムに後から入力される右目用映像の色補正処理が可能となる。後から入力される映像（右目用映像）のヒストグラム解析結果を先に入力される映像（左目用映像）の色補正に適用する場合は、１フレーム表示処理が遅れることになるので、先に入力される映像（左目用映像）の結果を利用して後から入力される映像（右目用映像）の色補正を行う方が高速である。ＴＡＢ方式においても、同様に左目用映像のヒストグラム解析を先にしておくことで、その結果を利用して、右目用映像を１ライン毎に補正していくことが可能となる。ＳＢＳ方式の場合には、１ラインもしくは数ラインメモリ上に左右映像が両方入力されるため、左右同時な処理が可能となる。高速な処理が可能であれば、左から画素をカウントすると先に左目用映像のヒストグラム結果が得られるため、その結果に合わせて後半でカウントしていく画素の色補正をリアルタイムに補正できるので、高速化ができる。ＴＡＢ方式においても、同様に先に入力された左目用映像のヒストグラム解析を先にしておくことで、その結果を利用して、後に入力される右目用映像を１ライン毎に補正していくことが可能となる。

【0041】

なお、図１において、映像入力Ｉ／Ｆ１００から立体表示処理部１０５までを一体として立体映像処理装置を構成し、表示部１０６を有する別体の表示装置と接続してもよく、映像入力Ｉ／Ｆ１００から表示部１０６までを一体として立体表示装置を構成してもよい。

【実施例2】

【0042】

以下、本発明の実施例２について、図７、図８を参照して説明する。 図７は、本発明の実施例２に係る立体映像処理装置の構成の一例を示すブロック図である。

【0043】

図７に示す構成は、図１の構成にユーザの操作を入力するインタフェースであるユーザI／F（インタフェース）７００を追加した構成である。本ユーザＩ／Ｆを搭載することで、ユーザが3D視聴を選択したことを検知してから、左右色補正処理を実施することが可能となる。

【0044】

図８にユーザ操作と左右色補正処理の連動の例を示す。表示装置１０６は、まずは、放送やネットからＳＢＳ方式で受信した３Ｄ映像信号は、表示例８００のように表示する。また、ＴＡＢ方式で受信した３Ｄ映像信号は、表示例８０１の様に表示する。次に、リモコン８０２から、２Ｄから３Ｄへの切替え指示信号が送信された場合、ユーザＩ／Ｆ７００が当該切換え指示信号を受信する。ユーザＩ／Ｆ７００が切換え指示信号の受信を立体映像色補正処理部１０２に伝達して、立体映像色補正処理部１０２が、そのタイミングで左右色補正処理を開始し、3D表示時には左右色補正がなされた映像を見ることができる。逆の動作も同様で、３D表示時には左右色補正がなされているが、リモコン８０２からの指示信号により、２D表示に切替えたタイミングで立体映像色補正処理部１０２の左右色補正処理を終了する制御を行う。

【0045】

これにより、ユーザが３Ｄ視聴を行う状態か否かを容易に判別することが可能となり、実施例の図３のＳ３０６のような判断処理が不要となる。

【0046】

表示例８９００や表示例８９０１などの２D表示時には、ピントやフォーカス、ホワイトバランスなどが調整されていない２台のカメラを利用して撮影した映像を表示装置で視聴する際に、左右の色ズレ等がないかを確認することもできる。ユーザが３D表示に切替えたタイミングでは、左右色補正を行い、良好な表示特性を提供できる。

【0047】

また、（１）左目用映像の色分布を補正して、右目用映像の色分布に合わせるのか、（２）右目用映像の色分布を補正して、左目用映像の色分布に合わせるのか、または、（３）左右映像の色分布の特徴の平均に左右映像の色分布を合わせるのかをリモコン８０２とユーザＩ／Ｆ７００を介して、ユーザが選択できるようにしても良い。

【0048】

また、ユーザＩ／Ｆに替えて人感センサを搭載しても良い。例えば人体の体の熱から出る赤外線センサによる人検知やカメラによる人検知や動き検知などにより、視聴範囲に人の存在を検知するセンサを搭載する場合には、センサにより装置近くに人が居ると判断した場合にのみ左右色補正を行い、人が居ない場合には左右色補正をしないことも可能である。このとき、人が居るという条件に加えて、３Ｄ表示設定がされていることを条件に加えても良い。このような処理により視聴者が不在の場合には、左右色補正処理を省略することが可能となり、処理負荷を低減することができる。

【実施例3】

【0049】

以下、本発明の実施例３について、図９〜図１１を用いて説明する。

【0050】

図９は、本発明の実施例３に係る立体表示制御装置の構成の一例を示すブロック図である。

【0051】

図９に示す構成は、図１の構成に、オクルージョン検出部を追加した構成である。オクルージョン検出部は、図１０に示すような、一方の目（視点）では見えずに、他方の目（視点）では見えるような物体を検出する。このオクルージョンの領域は、一方の目の映像のみに存在し、他方の目の映像には存在しない。よって、左右映像の色差分として算出されてしまうと、色相補性の誤差成分となり、悪影響を生じる恐れがある。そこで、本実施例では、オクルージョン領域を検出して、その領域を補正範囲から外し、他の部分に弊害をもたらせないようにヒストグラム分析にも利用しないようにする。なお、オクルージョン検出は、映像内のオブジェクト検出や、左右色差分の領域を検出することなどで実現する。

【0052】

ここで、図１０は、本発明の第３の実施例に係るオクルージョン検出部におけるオクルージョン検出処理時の左右映像イメージを示した例である。色の異なる立方体１０００と球１００１が少しずれて置いてあった場合に、左目では立方体しか見えず、右目では立方体と球の両方が見えている状況を示している。これを、両目に対応する２つのカメラを使って撮影した場合には、左目用映像１００２、右目用映像１００３が撮影されることとなる。

【0053】

これが、立体映像処理装置に入力され、左右映像の色相などのヒストグラム解析を行うと、左目用映像には無い球の色の領域が右目用映像には存在するので、ヒストグラム特徴の差分量が大きく検出されることとなる。しかし、これは色相の相違ではなく、もともとの映像の撮像対象が異なるのであり、カメラのピントやホワイトバランスの違いによる左右色差分ではないことがわかる。

【0054】

図１１は、本発明の第３の実施例に係る立体映像処理装置のオクルージョン検出の動作シーケンスを示した例である。

【0055】

Ｓ１１００から処理を開始し、Ｓ１１０１において、左右映像内のオクルージョン領域を検出する。そして、Ｓ１１０２において、オクルージョン領域をヒストグラム解析の対象外とする。次に、Ｓ１１０３において、オクルージョン領域は、左右色補正領域から外す。図１１の動作は、例えば、オクルージョン検出部９００において、左右色補正処理部１０４の処理と連動して行えばよい。このとき、オクルージョン領域をヒストグラム解析対象外とするためには、図１１のＳ１１０１は、図３のＳ３０１、Ｓ３０２の前に行う必要がある。また、図１１のＳ１１０２では、図３のＳ３０１、Ｓ３０２と連動して、Ｓ３０１、Ｓ３０２のヒストグラムの集計処理からオクルージョン領域の数の部分を除外する。また、図１１のＳ１１０３では、図３のＳ３０９と連動して、Ｓ３０９の補正範囲からオクルージョン領域を除外する。

【0056】

以上の処理により、オクルージョン領域の色に影響されることなく、オクルージョン領域以外の左右映像色補正をおこなうことが可能となる。さらには、一方の目にしか関係のないオクルージョン領域内の色は補正が不要となるメリットがある。

【実施例4】

【0057】

以下、本発明の実施例４を説明する。

【0058】

図１２は、実施例４に係る受信装置の構成例を示す図である。図１２において、図１または図７に記載の要素と同一の符号の要素については、上述した各実施例の要素と同一である。よって、これらの構成、動作については説明を省略し、相違する構成または動作について以下に説明する。

【0059】

アンテナ１２００において、無線放送波（衛星、地上）、またはケーブルなどの有線放送伝送網を介して放送信号を受信し、チューナ１２０１において、特定の周波数を選局し復調、誤り訂正処理、などを行う。放送信号がスクランブルされている場合はデスクランブラ１２０２において、スクランブル信号を復号する。以上の処理により、多重化信号が復元され、多重分離部１２０３に入力される。多重分離部１２０３では、ＭＰＥＧ２―ＴＳ（Transport Stream）などの形式に多重化されている信号を、映像ＥＳ（Elementary Stream）、音声ＥＳ、番組情報などの信号に分離する。ＥＳとは、圧縮・符号化された画像・音声データのそれぞれのことである。映像復号部１２０４は、映像ＥＳを映像信号に復号し、左右色補正部１０２に出力する。左右色補正部１０２では、制御部１２１０の制御により色補正を行う。色補正の内容は上述の各実施例に記載したとおりである。左右色補正部１０２から出力された映像は、３Ｄ映像を３Ｄ表示する場合は立体表示処理部１０５の立体表示処理を経て表示装置１０５にて３Ｄ表示される。２Ｄ映像を２Ｄ表示する場合は、立体表示処理部１０５の立体表示処理を行わず表示装置１０５にて２Ｄ表示される。３Ｄ映像を２Ｄ表示する場合は立体表示処理部１０５にて３Ｄ映像に含まれる一視点の映像（例えば、ＳＢＳ方式であれば、左目用映像または右目用映像のいずれか一方の映像）を２Ｄ映像として出力し表示装置１０５にて２Ｄ表示すればよい。２Ｄ映像を３Ｄ表示する場合は立体表示処理部１０５にて、２Ｄ映像を３Ｄ映像に変換する２Ｄ３Ｄ映像変換処理を行って、３Ｄ映像として出力し表示装置１０５にて３Ｄ表示すればよい。２Ｄ／３Ｄ変換処理方法としては、様々な方法が知られているので、いずれかの方法の２Ｄ／３Ｄ変換処理機能を立体表示処理部１０５に実装しておけばよい。立体表示処理部１０５の立体表示処理は、制御部１２１０が制御する。音声復号部１２０７は音声ＥＳを音声信号に復号し、スピーカ１２０８に出力または音声出力として外部に出力する。ネットワーク１２０５は、インターネットやインフラのネットワーク群である。ネットワークＩ／Ｆ１２０６は、ネットワークを介して情報を送受信し、インターネットと受信装置間で各種情報およびＭＰＥＧ２―ＴＳなどを送受信する。多重分離部１２０３に入力される映像や音声は、チューナ１２０１を介して受信装置に入力されてもよく、ネットワークＩ／Ｆ１２０６を介して受信装置に入力されてもよい。

【0060】

２Ｄ／３Ｄ判定部１２０９においては、アンテナ１２００やネットワークＩ／Ｆ１２０６から受信した情報に含まれる３Ｄ／２Ｄ識別情報（３D映像コンテンツか否かを示す情報）や３Ｄ方式識別情報（ＳＢＳ、ＴＡＢ、Ｆｒａｍｅ Ｐａｃｋｉｎｇなど３Ｄ映像の方式を示す情報）を利用して、映像が３Ｄ映像であるか２Ｄ映像であるかを判定する。

【0061】

３Ｄ／２Ｄ識別情報や３Ｄ方式識別情報の伝送方法は、様々に考えられる。例えば、ＭＰＥＧ２―ＴＳ（Transport Stream）に含まれ、多重分離部１２０３で分離される番組情報（番組特定情報と番組配列情報）に格納する方法が考えられる。番組特定情報（ＰＳＩ：Program Specific Information）は、所要の番組を選択するために必要な情報で、映像の符号化情報、音声の符号化情報、番組の構成を含む。番組配列情報(ＳＩ：Service Information)は、番組選択の利便性のために規定された各種情報であり、ＭＰＥＧ−２システム規格のＰＳＩ 情報も含まれ、番組名、放送日時、番組内容など、番組に関する情報が記載されるＥＩＴ（Event Information Table）、編成チャンネル名、放送事業者名など、編成チャンネル（サービス）に関する情報が記載されるＳＤＴ（Service Description Table）などがある。これらＰＳＩやＳＩで規定された記述子または新たに追加した記述子に３Ｄ／２Ｄ識別情報を格納すればよい。これらの記述子に３Ｄ／２Ｄ識別情報や３Ｄ方式識別情報を格納することにより、番組単位での３Ｄ番組コンテンツか否かの識別や、サービス単位での３Ｄ番組用サービスか否かの識別が可能となる。

【0062】

また、映像を符号化する段階で映像ＥＳに３Ｄ／２Ｄ識別情報を付加するように構成してもよい。例えば、映像符号化方式がＭＰＥＧ２方式である場合には、Picture header、Picture Coding Extensionに続くユーザデータ領域に上記の３Ｄ／２Ｄ識別情報や３Ｄ方式識別情報を含めて符号化を行えばよい。この場合、映像復号部１２０４にて、映像のフレーム（ピクチャー）単位で３Ｄ識別フラグが認識でき、３Ｄ映像ストリームの途中に２Ｄ映像が挿入された場合なども識別が可能になる。

【0063】

２Ｄ／３Ｄ判定部１２０９は、上述のとおり、分離部１２０３や映像復号部１２０４で分離または抽出した３Ｄ／２Ｄ識別情報や３Ｄ方式識別情報を用いて映像が３Ｄ映像であるか２Ｄ映像であるかを判定する。２Ｄ／３Ｄ判定部１２０９の判定結果に応じて、制御部１２１０は、左右色補正部１０２における色補正の制御を行う。

【0064】

ここで、２Ｄ／３Ｄ判定部１２０９および制御部１２１０の動作シーケンスの一例を図１３に示す。まず判定処理を開始する（Ｓ１３００）。受信した３Ｄ／２Ｄ識別情報が３Ｄ映像を示している場合（Ｓ１３０１）には、２Ｄ／３Ｄ判定部１２０９は、入力映像が３Ｄ映像であると判定し（Ｓ１３０２）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行うように制御する（Ｓ１３０３）。受信した３Ｄ／２Ｄ識別情報が２Ｄ映像を示している場合（Ｓ１３０１）には、２Ｄ／３Ｄ判定部１２０９は、入力映像が２Ｄ映像であると判定し（Ｓ１３０４）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行わないように制御する（Ｓ１３０５）。これにより、３Ｄ表示装置で映像視聴時などでは、受信情報に含まれる３Ｄ情報を元に、自動的に左右映像の色補正をすることが可能となる。

【0065】

２Ｄ／３Ｄ判定部１２０９および制御部１２１０の動作シーケンスの他の一例を図１４に示す。図１４は、図１３の動作シーケンスに、受信信号に処理対象番組の３Ｄ／２Ｄ識別情報が受信信号に含まれていない場合の判定も追加したものである。まず判定処理を開始する（Ｓ１４００）。受信信号に処理対象番組の３Ｄ／２Ｄ識別情報が含まれていない場合（Ｓ１４０１）には、２Ｄ／３Ｄ判定部１２０９は処理対象番組が２Ｄ映像番組であると判定し（Ｓ１４０５）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行わないように制御する（Ｓ１４０６）。受信信号に処理対象番組の３Ｄ／２Ｄ識別情報が含まれている場合（Ｓ１４０１）には、Ｓ１４０２に移行する。受信信号に含まれる処理対象番組の３Ｄ／２Ｄ識別情報が３Ｄ映像を示している場合（Ｓ１４０２）には、２Ｄ／３Ｄ判定部１２０９は処理対象番組が３Ｄ映像番組であると判定し（Ｓ１４０３）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行うように制御する（Ｓ１４０４）。受信信号に含まれる処理対象番組の３Ｄ／２Ｄ識別情報が２Ｄ映像を示している場合（Ｓ１４０２）には、２Ｄ／３Ｄ判定部１２０９が処理対象番組が２Ｄ映像番組であると判定し（Ｓ１４０５）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行わないように制御する（Ｓ１４０６）。これにより、送信側が意図せず３Ｄ／２Ｄ識別情報が受信信号から欠落した場合であっても、受信装置の色補正により不適当な表示を行うことを防止することができる。

【0066】

２Ｄ／３Ｄ判定部１２０９および制御部１２１０の動作シーケンスの他の一例を図１５に示す。図１５は、ＳＢＳ、ＴＡＢ、Ｆｒａｍｅ Ｐａｃｋｉｎｇなど３Ｄ映像の方式を示す情報である３Ｄ方式識別情報を用いて２Ｄ／３Ｄ判定部１２０９が判定を行うものである。まず判定処理を開始する（Ｓ１５００）。受信信号に処理対象番組についての３Ｄ方式識別情報が含まれている場合（Ｓ１５０１）には、２Ｄ／３Ｄ判定部１２０９は、入力映像が３Ｄ映像であると判定し（Ｓ１５０２）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行うように制御する（Ｓ１５０３）。受信信号に処理対象番組についての３Ｄ方式識別情報が含まれていない場合（Ｓ１５０１）には、２Ｄ／３Ｄ判定部１２０９は、入力映像が２Ｄ映像であると判定し（Ｓ１５０４）、制御部１２１０が左右色補正部１０２において左右映像の色補正処理を行わないように制御する（Ｓ１５０５）。これにより、３Ｄ映像の方式（フォーマット）を示す情報である３Ｄ方式識別情報の有無に応じて、左右映像の色補正処理の要否を制御することが可能となる。

【0067】

本発明の左右映像の色補正処理を開始や停止をするタイミングは、上述の方法などにより、３Dもしくは２Dを識別できたタイミングで良く、識別する方法は上述のいずれでも良い。

【0068】

また、２Ｄ／３Ｄ判定部１２０９の判定結果とユーザI／F７００から入力されるのユーザ操作信号と組合せて、制御部１２１０が処理を決定する構成としてもよい。例えば、上記２Ｄ／３Ｄ判定部１２０９により３Ｄ映像であると判定した場合であっても、ユーザI／F７００を介して３Ｄ表示指示を受け付けるまでは、３D表示処理、左右色補正処理をしない処理にしても良い。この場合の、２Ｄ／３Ｄ判定部１２０９、ユーザI／F７００、制御部１２１０の動作シーケンスの一例を図１６を用いて説明する。まず判定処理を開始する（Ｓ１６００）。２Ｄ／３Ｄ判定部１２０９は３Ｄ映像であるか否かを判定する（Ｓ１６０１）。ここで、Ｓ１６０１における２Ｄ／３Ｄ判定部１２０９の判定処理は、上述の図１３、図１４、図１５のうちの２Ｄ／３Ｄ判定部１２０９の判定処理のいずれを用いてもよい。また、その他の判定処理でもかまわない。２Ｄ／３Ｄ判定部１２０９が入力映像は２Ｄ映像であると判定した場合（Ｓ１６０１）、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行わないように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなわないように制御する（Ｓ１６０４）。Ｓ１６０４では、２Ｄ映像が２Ｄ表示されることとなる。２Ｄ／３Ｄ判定部１２０９が入力映像は３Ｄ映像であると判定した場合（Ｓ１６０１）、Ｓ１６０２に移行する。ここで、ユーザI／F７００を介してユーザからの３Ｄ表示指示信号が未だ入力されていない場合（Ｓ１６０２）、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行わないように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなわないように制御する（Ｓ１６０４）。Ｓ１６０４では、３Ｄ映像が２Ｄ表示されることとなるが、このとき、３Ｄ映像中の一方の映像を２Ｄ表示してもよいし、例えば、ＳＢＳ、ＴＡＢなどの２Ｄ画像の１画面に複数視点が格納される方式の３Ｄ映像では、そのまま複数視点が格納される画面を２Ｄ映像として表示してもよい。ユーザI／F７００を介してユーザからの３Ｄ表示指示信号が既に入力された場合（Ｓ１６０２）、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行なうように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなうように制御する（Ｓ１６０３）。Ｓ１６０３では、３Ｄ映像が３Ｄ表示されることとなる。以上の動作により、ユーザの３Ｄ表示の意図が確認できるまでは左右色補正部１０２における左右映像の色補正処理を省略することができ、ユーザの３Ｄ表示の意図が確認できたあとは、左右色ズレが少ない安全な３Ｄ映像を視聴できる。なお、受信信号に、ＳＢＳ、ＴＡＢ、ＦｒａｍｅＰａｃｋｉｎｇなどの３Ｄフォーマットを示す３Ｄ方式識別情報が含まれる場合には、ユーザが３D表示の操作をした場合に、当該識別情報が示すフォーマットに適した左右映像の色補正処理を行えばよい。

【0069】

また、ユーザI／F７００を介して３D表示を指示する情報が入力されても、映像が２Dと識別される場合には、左右色補正処理は行わないようにしてもよい。この場合の、２Ｄ／３Ｄ判定部１２０９、ユーザI／F７００、制御部１２１０の動作シーケンスの一例を図１７を用いて説明する。まず判定処理を開始する（Ｓ１７００）。ユーザI／F７００を介してユーザからの３Ｄ表示指示信号が入力された場合（Ｓ１７０１）、Ｓ１７０２に移行する。２Ｄ／３Ｄ判定部１２０９は入力映像が３Ｄ映像であるか否かを判定する（Ｓ１７０２）。ここで、Ｓ１７０２における２Ｄ／３Ｄ判定部１２０９の判定処理は、上述の図１３、図１４、図１５のうちの２Ｄ／３Ｄ判定部１２０９の判定処理のいずれを用いてもよい。２Ｄ／３Ｄ判定部１２０９が入力映像は３Ｄ映像であると判定した場合（Ｓ１７０２）、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行なうように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなうように制御する（Ｓ１７０３）。Ｓ１７０３では、３Ｄ映像が３Ｄ表示されることとなる。ここで、Ｓ１７０２にて、２Ｄ／３Ｄ判定部１２０９が入力映像は２Ｄ映像であると判定した場合（Ｓ１７０２）、Ｓ１７０４に移行する。Ｓ１７０４では二通りの制御例が考えられる。第１の制御例は、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行わないように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなわないように制御する例である。この場合、２Ｄ映像が２Ｄ表示される。第２の制御例は、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行わないように制御し、立体映像処理部１０５で２Ｄ映像を３Ｄ映像に変換する２Ｄ／３Ｄ変換処理を行うように制御する例である。この場合、２Ｄ映像が３Ｄ映像に変換されて３Ｄ表示される。なお、第１の制御例と第２の制御例のいずれを行うかは、立体表示装置の実装において適宜選択すればよい。また、メニュー設定で第１の制御例と第２の制御例をユーザが予め選択設定できるように構成してもよい。次に、Ｓ１７０１において、ユーザI／F７００を介してユーザからの２Ｄ表示指示信号が入力された場合、Ｓ１７０５に移行する。２Ｄ／３Ｄ判定部１２０９が入力映像は３Ｄ映像であると判定した場合（Ｓ１７０５）、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行なうように制御し、立体映像処理部１０５において３Ｄ映像中の一視点の映像を２Ｄ映像として出力するように制御する（Ｓ１７０６）。Ｓ１７０６では、３Ｄ映像中の一視点の映像が２Ｄ表示されることとなる。Ｓ１７０５において、２Ｄ／３Ｄ判定部１２０９が入力映像は２Ｄ映像であると判定した場合、制御部１２１０は、左右色補正部１０２において左右映像の色補正処理を行わないように制御し、立体映像処理部１０５で立体表示のための映像処理をおこなわないように制御する（Ｓ１７０７）。Ｓ１７０７では、２Ｄ映像が２Ｄ表示されることとなる。以上説明した動作により、映像の２Ｄ／３Ｄの識別とユーザ操作信号に応じた、左右色補正処理のＯｎ／Ｏｆｆと２Ｄ３Ｄ表示処理とをより好適に行うことができる。

【0070】

以上説明した各実施例において、３D表示方式が液晶シャッタ方式、偏光メガネ方式、裸眼方式のいずれの場合でも同様な処理が可能である。

【0071】

また、立体表示制御装置で動作するプログラムは、立体表示制御装置内に実装してあっても良いし、記録媒体に記録して提供するようにしても良いし、ネットワークを介してダウンロードして提供するようにしても良い。

【0072】

なお、以上説明した各実施例では色相の解析例、補正例を説明した。しかしながら、これらの解析、補正の適用は色相に限られない。彩度、明度、輝度などの他の色空間について、左右映像の色の特徴の差異量に応じた左右映像の色補正を行ってもよい。または、色相、彩度、明度、輝度などの複数の色空間のうちの複数の色空間に対する解析、補正をあわせておこなってもよい。

【符号の説明】

【0073】

１００ 映像入力Ｉ／Ｆ部
１０１ 映像デコーダ回路部
１０２ 立体映像色補正処理部
１０３ 立体映像信号処理部
１０４ 左右色補正処理部
１０５ 立体表示処理部
１０６ 表示装置部
２０１ 左目用映像（入力）
２０２ 右目用映像（入力）
２０３ 左目用映像色相ヒストグラム解析
２０４ 右目用映像色相ヒストグラム解析
２０５ 色補正処理
２０６ 左目用映像（出力）
２０７ 右目用映像（出力）
４００ ＨＳＶ色空間
５００ 色相ヒストグラム
６００ 左目用映像の色相ヒストグラム
６０１ 右目用映像の色相ヒストグラム
７００ ユーザＩ／Ｆ部
８００ ＳＢＳ表示映像（２D表示時）
８０１ ＴＡＢ表示映像（２D表示時）
８０２ リモコン
８０３ ３D表示映像
９００ オクルージョン検出部
１０００ 立方体（被写体）
１００１ 球（被写体）
１００２ 左目用映像
１００３ 右目用映像
１２００ アンテナ
１２０１ チューナ
１２０２ デスクランブラ
１２０３ 多重分離部
１２０４ 映像復号部
１２０５ ネットワーク
１２０６ ２D／３D判定部
１２０７ 音声復号部
１２０８ スピーカ
１２０９ ネットワークI ／Ｆ
１２１０ 制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】