特開 2024-18465 照明制御装置、照明装置及び照明制御用プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024018465

(43)【公開日】2024-02-08

(54)【発明の名称】照明制御装置、照明装置及び照明制御用プログラム

(51)【国際特許分類】

   H05B 47/105 20200101AFI20240201BHJP

   H05B 45/20 20200101ALI20240201BHJP

   H05B 47/165 20200101ALI20240201BHJP

【ＦＩ】

H05B47/105

H05B45/20

H05B47/165

【審査請求】有

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2022121825

(22)【出願日】2022-07-29

(71)【出願人】

【識別番号】000005267

【氏名又は名称】ブラザー工業株式会社

(74)【代理人】

【識別番号】100157118

【弁理士】

【氏名又は名称】南 義明

(72)【発明者】

【氏名】愛葉 隆喜

【テーマコード（参考）】

3K273

【Ｆターム（参考）】

3K273PA05

3K273QA14

3K273RA04

3K273RA07

3K273RA17

3K273SA04

3K273SA06

3K273SA21

3K273SA37

3K273SA46

3K273SA57

3K273SA60

3K273TA03

3K273TA05

3K273TA15

3K273TA28

3K273TA30

3K273TA40

3K273TA75

3K273TA79

3K273TA80

3K273UA02

3K273UA22

(57)【要約】

【課題】入力される映像情報中、特徴的な領域に応じた照明制御を行う。
【解決手段】本発明に係る照明制御装置は、入力される映像情報のうちの一部分である対象領域を特定する特定処理と、前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、前記色判断処理で判断した色情報に基づいて、照明装置の照明制御情報を生成し、前記照明装置に照明制御情報を送信する送信処理と、を実行する。
【選択図】図２

【特許請求の範囲】

【請求項1】

入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて、照明装置の照明制御情報を生成し、前記照明装置に照明制御情報を送信する送信処理と、を実行する
照明制御装置。

【請求項2】

前記特定処理は、入力される映像情報の変化部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域の色情報を判断する
請求項１に記載の照明制御装置。

【請求項3】

前記特定処理は、入力される映像情報中、人物部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域以外の領域の色情報を判断する
請求項１に記載の照明制御装置。

【請求項4】

前記特定処理は、入力される映像情報中、テロップ部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域以外の領域の色情報を判断する
請求項１に記載の照明制御装置。

【請求項5】

前記色判断処理は、入力される映像情報の種別に基づいて、前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する
請求項１から請求項４の何れか１項に記載の照明制御装置。

【請求項6】

前記色判断処理は、ユーザの指定に応じて、前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する
請求項１から請求項４の何れか１項に記載の照明制御装置。

【請求項7】

前記色判断処理は、入力される映像情報の変化量が所定の閾値よりも大きい場合は、前記特定処理で特定した対象領域の色情報を判断し、入力される映像情報の変化量が前記所定の閾値以下の場合は、入力される映像情報全体の色情報を判断する
請求項２に記載の照明制御装置。

【請求項8】

映像情報には、区分領域が設けられており、
前記送信処理は、区分領域毎に照明制御情報を生成し、区分領域に対応した前記照明装置に対して照明制御情報を送信する
請求項１から請求項４の何れか１項に記載の照明制御装置。

【請求項9】

前記特定処理は、映像情報の変化部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域の色情報を判断し、さらに、区分領域のうち前記特定処理で特定した対象領域を含まない区分領域全体の色情報を判断し、
前記送信処理は、
前記色判断処理で判断した対象領域の色情報に基づいて、対象領域を含む区分領域に対応づけられた第１の照明装置の第１の照明制御情報を生成し、前記第１の照明装置に前記第１の照明制御情報を送信し、
前記色判断処理で判断した対象領域を含まない区分領域全体の色情報に基づいて、区分領域のうち対象領域を含まない分割領域に対応付けられた第２の照明装置の第２の照明制御情報を生成し、前記第２の照明装置に第２の照明制御情報を送信する
請求項８に記載の照明制御装置

【請求項10】

入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて照明制御情報を生成し、照明制御情報に基づいて照明を行う照明処理と、を実行する
照明装置。

【請求項11】

入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて、照明装置の照明制御情報を生成し、当該照明装置に送信する送信処理と、を情報処理装置に実行させる
照明制御用プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、映像情報に基づき照明を制御する照明装置、映像情報に基づき照明を行う照明装置、並びに、情報処理装置で実行可能な照明制御用プログラムに関する。

【背景技術】

【0002】

液晶表示装置等、各種表示装置は大型化が進むことで、映画、コンサート、カラオケ等、各種コンテンツを楽しむ際の臨場感は大幅に向上している。更なる臨場感の向上を図ることを目的として、音響設備を充実させることも行われている。現在、音響設備のみならず、視聴ルームに設けられた照明を制御することで、視聴する際の臨場感、雰囲気向上を図る試みも行われている。

【0003】

特許文献１には、映像コンテンツを視聴する際、映像の色情報を色解析し、映像の色情報の変化に連動して照明手段を制御するディスプレイ装置が開示されている。このような照明手段の制御を行うことで、ディスプレイ装置に表示される映像コンテンツに広がり感を感じさせることが可能となっている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００５－２５１５０８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

特許文献１における色情報の解析には、（１）映像をフレーム単位でバッファメモリに取り込み、取り込まれた映像を三原色のプレーンに分け、それぞれのプレーンにおいて、画面全体の三原色の各色成分の平均値を求め、平均値に対応する単一の色の照明を行うこと、（２）映像をフレーム単位でバッファメモリに取り込み、取り込まれた映像を複数の領域に分割し、分割領域毎の三原色の各色成分の平均値を求め、平均値に基づいて、分割領域にそれぞれ対応する色の照明を行うことが開示されている。

【0006】

特許文献１に記載のディスプレイ装置において、（１）の解析方法では映像全体の解析を行うものであり、映像全体の色による照明制御が行われることになる。（２）の解析方法についても、分割された映像の領域毎に色情報の解析が行われるため、分割された映像の領域毎に平均化された色情報で照明制御が行われることになる。

【0007】

したがって、特許文献１に記載のディスプレイ装置では、画面全体、もしくは、分割された領域毎で平均化された色情報で照明制御が行われるため、メリハリのない照明制御となることが考えられる。

【課題を解決するための手段】

【0008】

そのため、本発明に係る照明制御装置は、以下の構成を採用する。
入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて、照明装置の照明制御情報を生成し、前記照明装置に照明制御情報を送信する送信処理と、を実行する。

【0009】

さらに、本発明に係る照明制御装置において、
前記特定処理は、入力される映像情報の変化部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域の色情報を判断する。

【0010】

さらに、本発明に係る照明制御装置において、
前記特定処理は、入力される映像情報中、人物部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域以外の領域の色情報を判断する。

【0011】

さらに、本発明に係る照明制御装置において、
前記特定処理は、入力される映像情報中、テロップ部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域以外の領域の色情報を判断する。

【0012】

さらに、本発明に係る照明制御装置において、
前記色判断処理は、入力される映像情報の種別に基づいて、前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する。

【0013】

さらに、本発明に係る照明制御装置において、
前記色判断処理は、ユーザの指定に応じて、前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する。

【0014】

さらに、本発明に係る照明制御装置において、
前記色判断処理は、入力される映像情報の変化量が所定の閾値よりも大きい場合は、前記特定処理で特定した対象領域の色情報を判断し、入力される映像情報の変化量が前記所定の閾値以下の場合は、入力される映像情報全体の色情報を判断する。

【0015】

さらに、本発明に係る照明制御装置において、
映像情報には、区分領域が設けられており、
前記送信処理は、区分領域毎に照明制御情報を生成し、区分領域に対応した前記照明装置に対して照明制御情報を送信する。

【0016】

さらに、本発明に係る照明制御装置において、
前記特定処理は、映像情報の変化部分を対象領域として特定し、
前記色判断処理は、前記特定処理で特定した対象領域の色情報を判断し、さらに、区分領域のうち前記特定処理で特定した対象領域を含まない区分領域全体の色情報を判断し、
前記送信処理は、
前記色判断処理で判断した対象領域の色情報に基づいて、対象領域を含む区分領域に対応づけられた第１の照明装置の第１の照明制御情報を生成し、前記第１の照明装置に前記第１の照明制御情報を送信し、
前記色判断処理で判断した対象領域を含まない区分領域全体の色情報に基づいて、区分領域のうち対象領域を含まない分割領域に対応付けられた第２の照明装置の第２の照明制御情報を生成し、前記第２の照明装置に第２の照明制御情報を送信する。

【0017】

また、本発明に係る照明装置は、
入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて照明制御情報を生成し、照明制御情報に基づいて照明を行う照明処理と、を実行する。

【0018】

また、本発明に係る照明制御用プログラムは、
入力される映像情報のうちの一部分である対象領域を特定する特定処理と、
前記特定処理で特定した対象領域の色情報、もしくは、対象領域以外の領域の色情報の何れか一方を判断する色判断処理と、
前記色判断処理で判断した色情報に基づいて、照明装置の照明制御情報を生成し、当該照明装置に送信する送信処理と、を情報処理装置に実行させる。

【発明の効果】

【0019】

本発明に係る照明制御装置、照明装置、照明制御用プログラムによれば、映像情報中、特定された対象領域の色情報、もしくは、対象領域以外の色情報を使用することで、色情報に応じた照明制御を行うことが可能となる。例えば、映像情報に応じたメリハリのある照明制御を行うことも可能となる。

【図面の簡単な説明】

【0020】

【図1】本実施形態のカラオケシステムの構成を示す図

【図2】本実施形態の照明関連の構成を説明するための図

【図3】本実施形態のメイン処理を示すフロー図

【図4】本実施形態の第１照明制御処理を示すフロー図

【図5】本実施形態の第２照明制御処理を示すフロー図

【図6】本実施形態の第３照明制御処理を示すフロー図

【図7】本実施形態の第４照明制御処理を示すフロー図

【図8】本実施形態の第１照明制御処理を説明するための図

【図9】本実施形態の第２照明制御処理を説明するための図

【図10】本実施形態の第３照明制御処理を説明するための図

【図11】他の実施形態の照明制御処理を示すフロー図

【発明を実施するための形態】

【0021】

図１は、本実施形態のカラオケシステムの構成を示す図である。本実施形態におけるカラオケシステムは、カラオケ装置２（コマンダと呼ぶこともある）と、リモコン装置１を含んで構成されている。カラオケ装置２とリモコン装置１は、ＬＡＮ１００及びアクセスポイント１３０を利用してネットワークを形成するように通信接続されている。

【0022】

カラオケボックスなどの店舗に設置されるカラオケ装置２は、楽曲を演奏するための演奏部として音響制御部２５を備えている。また、カラオケ装置２は、ユーザからの各種入力を受け付ける操作部２１を備える。カラオケ装置２は、操作部２１からの入力を解釈してＣＰＵ３０に伝達する操作処理部２２を備える。また、カラオケ装置２は、各種情報を記憶する記憶部としてのハードディスク３２を備える。カラオケ装置２は、ＬＡＮ１００に接続してネットワークに加入する通信手段としてのＬＡＮ通信部２４ａを備えている。また、本実施形態のカラオケ装置２は、無線ＬＡＮ通信部２４ｂも備えており、ＬＡＮ通信部２４ａを使用した有線によるネットワーク接続に代え、無線ＬＡＮ通信部２４ｂを使用した無線によるネットワーク接続を行うことも可能である。

【0023】

また、カラオケ装置２は、モニタ４１に対して歌詞映像、背景映像を表示させる映像再生手段を備える。この映像再生手段は、映像情報に基づいて映像を再生する映像再生部２９、再生する映像を一時的に蓄積するビデオＲＡＭ２８、再生された映像に対する歌詞テロップの重畳、映像効果の付与等を行う映像制御部３１を備えて構成される。

【0024】

さらに、このカラオケ装置２では、外部に接続されるモニタ４１以外に、タッチパネルモニタ３３に対して各種情報を表示することを可能としている。タッチパネルモニタ３３は映像制御部３１から入力された映像情報を表示する表示部３５と、タッチ入力された位置を操作処理部２２に出力するタッチパネル３４が重畳されて構成されている。このタッチパネルモニタ３３は、カラオケ装置２の筐体前面等に配置され、カラオケ装置２の操作部２１、あるいは、リモコン装置１のタッチパネルモニタ１１などと同様、入力部として機能する。ユーザは、タッチパネルモニタ３３にて楽曲を選択することで、直接カラオケ装置２に予約させる等、カラオケ装置２に対する各種操作を行うことが可能である。

【0025】

さらに、カラオケ装置２は、各構成を統括して制御するためのＣＰＵ３０、各種プログラムを実行するにあたって必要となる情報を一時記憶するためのメモリ２７を含んだ制御部を備えて構成されている。

【0026】

このような構成にてカラオケ装置２は、各種処理を実行することとなるが、カラオケ装置２の主な機能として、楽曲予約処理、楽曲再生処理などを実行可能としている。楽曲予約処理は、ユーザからの指定に基づいて楽曲を指定、予約するための処理であってリモコン装置１と連携して実行される。リモコン装置１の選曲処理で形成された予約情報は、カラオケ装置２に送信される。カラオケ装置２は、受信した予約情報をメモリ２７中の予約テーブルに登録する。楽曲再生処理は、予約された楽曲を再生させる処理であって、楽曲演奏処理と歌詞表示処理とが同期して実行される処理である。

【0027】

楽曲演奏処理は、楽曲情報に含まれる演奏情報に基づき、音響制御部２５に演奏を実行させる処理である。音響制御部２５にて演奏された楽曲は、マイクロホン４３ａ、４３ｂから入力される歌唱音声と一緒にスピーカー４２から放音される。歌詞表示処理は、楽曲情報に含まれる歌詞情報をモニタ４１に表示させることで歌唱補助を行う処理である。この歌詞表示処理で表示される歌詞に、背景映像を重畳させて表示させる背景映像表示処理を実行することとしてもよい。

【0028】

一方、リモコン装置１は、ユーザからの指示に基づいて楽曲を検索し、再生指示のあった楽曲について予約情報をカラオケ装置２に送信する選曲処理を実行可能としている。また、リモコン装置１は、カラオケ装置２あるいはインターネット上に接続されたサーバー装置５から各種情報を受信し、各種処理を実行することが可能である。本実施形態では、ユーザから各種指示を受け付けるユーザインターフェイスとして、操作部１７と、タッチパネルモニタ１１を備えている。タッチパネルモニタ１１は、表示部１１ａとタッチパネル１１ｂを有して構成され、表示部１１ａに各種インターフェイスを表示するとともに、ユーザからのタッチ入力を受付可能としている。

【0029】

さらにリモコン装置１は、選曲処理に必要とされるデータベース、各種プログラム、並びに、プログラム実行に伴って発生する各種情報を記憶する記憶部として、メモリ１４、そして、これら構成を統括して制御するためのリモコン側制御部を備えて構成される。リモコン側制御部には、ＣＰＵ１５、タッチパネルモニタ１１に対して表示する映像を形成する映像制御部１３、表示する映像情報を一時的に蓄えるビデオＲＡＭ１２、タッチパネルモニタ１１あるいは操作部１７からの入力を解釈してＣＰＵ１５に伝える操作処理部１８が含まれている。

【0030】

リモコン装置１は、無線ＬＡＮ通信部１６によって、アクセスポイント１３０と無線接続されることで、ＬＡＮ１００によって構成されるネットワークに接続される。なお、各リモコン装置１は、特定のカラオケ装置２に対して事前に対応付けされている。リモコン装置１から出力される各種命令は、対応付けされたカラオケ装置２にて受信されることとなる。

【0031】

このようなリモコン装置１の構成により、ユーザからの各種入力をタッチパネルモニタ１１、あるいは、操作部１７から受付けるとともに、タッチパネルモニタ１１の表示により各種情報を提供することで、カラオケ装置２に対して出力する予約情報を送信する選曲処理など、各種処理を行うことが可能となっている。

【0032】

また、本実施形態のカラオケシステムは、カラオケ装置２に接続される照明制御装置４４を有している。照明制御装置４４は、カラオケ装置２が出力する映像情報に基づいて照明装置４５ａ～４５ｅの照明制御を行う。照明制御の内容としては、照明装置４５ａ～４５ｅのそれぞれについて、明るさ、照明色を制御することが可能である。映像情報に基づいて照明装置４５ａ～４５ｅを制御することで、視聴者に対して、モニタ４１の拡張感を与える、あるいは、視聴における雰囲気向上を図ることが可能である。なお、本実施形態では、照明制御装置４４と照明装置４５ａ～４５ｅ間を有線接続しているが、照明制御装置４４と照明装置４５ａ～４５ｅ間は、無線接続の形態を採用してもよい。

【0033】

図２は、本実施形態の照明関連の構成を説明するための図であって、カラオケルーム６内の様子、及び、モニタ４１と照明装置４５ａ～４５ｅの配置関係が示されている。照明装置４５ａ～４５ｅは、基部４５１と発光部４５２を備えて構成されている。基部４５１内には、ＬＥＤ等、複数の発光素子が配置され、アクリルパイプ等の透明部材で形成された発光部４５２を照明する。複数の発光素子には、三原色の３色が使用され、各発光素子の明るさを変更することで、多様な色で発光部４５２を照明することが可能である。

【0034】

図２にはモニタ４１の区分領域４１ａ～４１ｅと、カラオケルーム６内における照明装置４５ａ～４５ｅの配置関係が示されている。本実施形態では、モニタ４１を縦方向に５分割し、それぞれを区分領域４１ａ～４１ｅに割り当てられている。照明装置４５ａ～４５ｅは、この区分領域４１ａ～４１ｅの位置に従って配置されている。例えば、最も左に位置する区分領域４１ａに対応する照明装置４５ａは、モニタ４１の左手前に配置される。また、区分領域４１ｂに対応する照明装置４５ｂは、モニタ４１の左奥に配置される。

【0035】

このように、モニタ４１の区分領域４１ａ～４１ｅの位置に対応して、照明装置４５ａ～４５ｅを配置することで、モニタ４１に表示される映像に対応して照明装置４５ａ～４５ｅを照明することが可能となる。

【0036】

ところで、カラオケ装置２では、映像配信、ゲーム等、カラオケ以外のコンテンツも再生することが可能である。本実施形態の照明制御装置４４は、コンテンツの種類、あるいは、モニタ４１に表示される映像の種類に応じて照明装置４５ａ～４５ｅを制御することが可能となっている。

【0037】

［メイン処理］
図３は、本実施形態の照明制御装置４４のメイン処理を示すフロー図である。照明制御装置４４は、カラオケ装置２が出力する映像情報に基づき照明装置４５ａ～４５ｅの制御を実行する。本実施形態の照明制御装置４４は、第１～第４照明制御処理を行うことが可能であって、入力される映像情報の種別に基づき、自動で第１～第４照明制御処理を切り換える自動モードと、ユーザの操作により手動で第１～第４照明制御処理を切り換える自動モードを備えている。本実施形態のカラオケ装置２は、出力する映像情報に伴い、映像情報の種別（例えば、カラオケ、映像配信、ゲーム等）を照明制御装置４４に出力することが可能となっている。

【0038】

メイン処理では、自動モードに設定されているか、手動モードに設定されているかを判断する（Ｓ１０１）。手動モードでは、照明制御装置４４に設けられた操作部、あるいは、カラオケ装置２の操作部２１を使用して、第１～第４設定を選択することが可能である。手動モードが設定されている場合（Ｓ１０１：手動モード）、操作部の設定状態に基づき、変数Ｉに１～４の値を立てる（Ｓ１０４）。

【0039】

一方、自動モードが設定されている場合（Ｓ１０１：自動モード）、照明制御装置４４は、カラオケ装置２から入力される映像情報の種別を監視し（Ｓ１０２）、第１～第３種映像の何れかであるかを判断する。例えば、第１種映像には、ゲーム、第２種映像にはコンサート、映画等の配信映像、第３種映像にはカラオケが割り当てられる。判断の結果、第１種映像の場合、変数Ｉに１の値が立てられ、第２種映像の場合、変数Ｉに２の値が立てられ、第３種映像の場合、変数Ｉに３の数値が立てられる。なお、映像情報の種別としては、上述する形態に限らず、適宜設定することが可能である。

【0040】

手動モード、自動モード、何れの場合について、変数Ｉ＝１の場合、第１照明制御処理（Ｓ２１０）が実行され、変数Ｉ＝２の場合、第２照明制御処理（Ｓ２２０）が実行され、変数Ｉ＝３の場合、第３照明制御処理（Ｓ２３０）が実行され、それ以外（変数Ｉ＝４を含む）の場合、第４照明制御処理（Ｓ２４０）が実行される。

【0041】

このように、本実施形態の自動モードでは、入力される映像情報の種別に基づき、第１～第４照明制御処理が実行される。したがって、映像情報の種別毎に設けられた第１～第４照明制御処理が自動選択され、映像情報に即した照明制御を行うことが可能である。また、手動モードでは、ユーザが選択することで、ユーザの嗜好に合った第１～第４照明制御処理を実行することが可能である。

【0042】

では、本実施形態で利用可能な第１～第４照明制御処理について説明する。図４は、本実施形態の第１照明制御処理（Ｓ２１０）を示すフロー図である。第１照明制御処理（Ｓ２１０）は、入力される映像情報の変化のある部分を照明に反映させることが可能である。

【0043】

［第１照明処理］
第１照明制御処理（Ｓ２１１）では、入力される映像情報の二値化（グレースケール化）を実行する（Ｓ２１１）。そして、二値化された映像情報を映像バッファに格納し（Ｓ２１２）、前回、二値化した前フレームの映像情報と比較し、差分の抽出を行う（Ｓ２１３）。そして、抽出した差分から変化点の位置（画面のｘｙ値）をマーキングする（Ｓ２１４）。変化点のマーキングは、例えば、差分が閾値以上である位置がマーキングされる。なお、変化点は、複数、マーキングすることも可能であり、また、画面の状況によっては、変化点が無い場合も考えられる。

【0044】

次に、抽出した変化点を基準位置に有する特定の領域を対象領域として特定する（Ｓ２１５）。例えば、対象領域は、変化点を中心位置に有する正方形（面積ａ）とすることが考えられる。なお、本実施形態において対象領域は、映像情報全体ではなく、映像情報のうちの一部分である。そして、二値化前の映像情報について、対象領域の色情報の解析を行う（Ｓ２１６）。解析方法としては、対象領域内の平均色を算出すること等、各種方法を採用することが可能である。そして、解析された色情報に基づき照明制御情報を生成する（Ｓ２１７）。

【0045】

図８は、本実施形態の第１照明制御処理（Ｓ２１０）を説明するための図である。図８では、時間経過に伴い、移動体Ａが画面の左から右に移動している状態を示している。図８（ａ）、図８（ｂ）、図８（ｃ）、図８（ｄ）の順で時間が経過している。例えば、図８（ｂ）の時点では、移動体Ａの領域が対象領域として特定され、移動体Ａの色が色情報として解析される。この場合、照明制御情報としては、区分領域４１ｂについて、移動体Ａの色が設定され、対象領域が含まれる区分領域４１ｂに対応する照明装置４５ｂに送信され、照明装置４５ｂが移動体Ａの色で照明される。なお、他の区分領域４１ａ、４１ｃ、４１ｄは対象領域を含まないため、それらに対応する照明装置４５ａ、４５ｃ、４５ｄによる照明は行われない。

【0046】

図８（ｃ）の場合も同様であって、区分領域４１ｃに対応する照明装置４５ｃが移動体Ａの色で照明され、また、図８（ｄ）の場合、区分領域４１ｄに対応する照明装置４５ｄが移動体Ａの色で照明される。このように、モニタ４１の画面左から右に移動体Ａが移動する場合、移動体Ａの移動に追従して、照明装置４５ａ～４５ｅが順に移動体Ａの色で照明されることになる。したがって、カラオケルーム６でモニタ４１を聴取するユーザは、画面の拡張感、あるいは、雰囲気の向上を体感することが可能となる。

【0047】

以上、本実施形態の第１照明制御処理（Ｓ２１０）では、対象領域が位置する区分領域４１ａ～４１ｅに対応する照明装置４５ａ～４５ｅの照明を制御し、区分領域４１ａ～４１ｅが対象領域を含まない場合、照明装置４５ａ～４５ｅは照明制御されない状態（消灯状態）となる。このような形態のみならず、対象領域を含まない区分領域に４１ａ～４１ｅに対しても照明制御をおこなうこととしてもよい。

【0048】

このような形態として、例えば、（１）対象領域を含んでいない区分領域４１ａ～４１ｅについて、その区分領域４１ａ～４１ｅ全体の色情報を解析し、解析された色情報に基づき、対応する照明装置４５ａ～４５ｅを制御する、あるいは、（２）映像情報の全体から対象領域を除いた領域について色情報を解析し、解析した色情報に基づいて、対象領域を含まない区分領域４１ａ～４１ｅの照明を制御する等、各種形態を採用することができる。

【0049】

［第２照明処理］
図５は、本実施形態の第２照明制御処理（Ｓ２２０）を示すフロー図である。第２照明制御処理（Ｓ２２０）では、映像情報中、人物領域を対象領域として検出する（Ｓ２２１）。映像情報中において人物が占める領域の色は、服や肌の色で占められることになる。このような人物領域の色が照明装置４５ａ～４５ｅに反映された場合、必ずしも画面の雰囲気に即した照明とならないことが考えられる。

【0050】

そのため、第２照明制御処理（Ｓ２２０）では、人物領域を対象領域として検出し、時対象領域以外の部分である人物除去領域の色を照明装置４５ａ～４５ｅに反映することで、画面の雰囲気に即した照明を行うこととしている。

【0051】

図９は、本実施形態の第２照明制御処理（Ｓ２２０）を説明するための図である。図９（ａ）に示されるようにモニタ４１には、人物７１ａが表示された映像情報が映し出されている。本実施形態では、映像情報から人物領域を検出する際、図９（ｂ）に示されるように、映像情報から骨格モデル７１ｂの検出を行い、骨格モデル７１ｂに対応付けられた骨格対応領域７１ｃを特定し、図９（ｃ）に示されるように骨格対応領域７１ｃを重ね合わせた領域を人物領域７１ｄとして検出している（Ｓ２２１）。

【0052】

なお、人物領域の検出は、このような骨格モデルを使用する形態に限られるものではなく、顔認識等を使用する、あるいは、顔認識と骨格モデルを併用する等、各種形態を採用することが可能である。

【0053】

映像情報から対象領域である人物領域７１ｄを除去することで、人物除去領域７１ｅを得ることが可能である。この人物除去領域７１ｅの色情報を解析（Ｓ２２２）することで、照明装置４５ａ～４５ｅの照明制御情報が生成される（Ｓ２２３）。本実施形態では、人物除去領域７１ｅの平均色を、各照明装置４５ａ～４５ｅに割り当てた照明制御情報を生成することとしている。したがって、照明制御情報を受信した照明装置４５ａ～４５ｅは、人物除去領域７１ｅに基づく平均色で周囲を照明する。

【0054】

なお、第２照明制御処理（Ｓ２２０）では、人物除去領域７１ｅについても区分領域４１ａ～４１ｅ毎に色情報を検出し、各区分領域４１ａ～４１ｅの色情報を使用し、照明装置４５ａ～４５ｅを照明することとしてもよい。

【0055】

［第３照明処理］
図６は、本実施形態の第３照明制御処理（Ｓ２３０）を示すフロー図である。第３照明制御処理（Ｓ２３０）では、映像情報中、テロップ領域を対象領域として検出する（Ｓ２３２）。カラオケ、映画等で使用される映像では、テロップ（字幕）が表示される場合がある。特に、カラオケでは、歌唱を補助するため、画面中、テロップが占める領域は大きく取られ、歌唱箇所を示すようにテロップが色変化する。このような映像情報を使用し、照明装置４５ａ～４５ｅを制御した場合、テロップの色を含んで照明制御されるため、必ずしも画面の雰囲気に即した照明とならないことが考えられる。

【0056】

そのため、第３照明制御処理（Ｓ２３０）では、テロップ領域を対象領域として検出し、対象領域以外の部分であるテロップ除去領域の色を照明装置４５ａ～４５ｅに反映することで、画面の雰囲気に即した照明を行うこととしている。

【0057】

図１０は、本実施形態の第３照明制御処理（Ｓ２３０）を説明するための図である。第３照明制御処理（Ｓ２３０）では、映像情報中、テロップ領域８１ａを対象領域として検出する（Ｓ２３１）。テロップ領域８１ａの検出は、映像情報に対して文字認識処理を行う、あるいは、画面中、予め定められた領域をテロップ領域８１ａとすること等が考えられる。また、テロップ領域８１ａは、図１０に示されるように、テロップ周囲に十分な余白を持たせた形態のみならず、テロップ（文字）部分のみをテロップ領域８１ａとして、特定することとしてもよい。

【0058】

映像情報から対象領域であるテロップ領域８１ａを除去することで、テロップ除去領域８１ｂを得ることが可能である。このテロップ除去領域の色情報を解析（Ｓ２３２）することで、照明装置４５ａ～４５ｅの照明制御情報が生成される（Ｓ２３３）。本実施形態では、テロップ除去領域の平均色を、各照明装置４５ａ～４５ｅに割り当てた照明制御情報を生成することとしている。したがって、照明制御情報を受信した照明装置４５ａ～４５ｅは、テロップ除去領域８１ｂに基づく平均色で周囲を照明する。

【0059】

なお、第２照明制御処理（Ｓ２２０）では、人物除去領域についても区分領域４１ａ～４１ｅ毎に色情報を検出し、各区分領域４１ａ～４１ｅの色情報を使用し、照明装置４５ａ～４５ｅを照明することとしてもよい。

【0060】

なお、第３照明制御処理（Ｓ２３０）では、テロップ除去領域８１ｂについて区分領域４１ａ～４１ｅ毎に色情報を検出し、各区分領域４１ａ～４１ｅの色情報を使用し、照明装置４５ａ～４５ｅを照明することとしてもよい。

【0061】

［第４照明処理］
図７は、本実施形態の第４照明制御処理（Ｓ２４０）を示すフロー図である。第４照明制御処理（Ｓ２４０）は、第１～第３照明制御処理（Ｓ２１０、Ｓ２２０、Ｓ２３０）とは異なり、画像情報中、対象領域の検出は行わず、区分領域４１ａ～４１ｅ毎に色情報の解析を行う（Ｓ２４１）。そして、区分領域４１ａ～４１ｅ毎に解析された色情報を使用し、各区分領域４１ａ～４１ｅに対応する照明装置４５ａ～４５ｅについての照明制御情報を生成する（Ｓ２４２）。

【0062】

生成された照明制御情報は、各照明装置４５ａ～４５ｅに送信される（Ｓ２４３）。各照明装置４５ａ～４５ｅは、受信した照明制御情報に基づき、対応する区分領域４１ａ～４１ｅの色情報で照明される。

【0063】

以上、本実施形態の各種照明制御処理（第１～第４照明制御処理）について説明したが、画像情報に基づいて照明制御処理を実行することで、表示画面に即して照明装置４５ａ～４５ｅが制御されることになり、画面に拡張感を持たせる、あるいは、雰囲気の向上を図ることが可能となる。

【0064】

特に、本実施形態の第１～第３照明制御処理では、画像情報から対象領域を検出し、対象領域の色情報（第１照明制御処理）、あるいは、対象領域以外の色情報（第２、第３照明制御処理）で照明装置４５ａ～４５ｅの照明色を制御することで、表示画面の特徴的な部分の色、あるいは、不要な部分を除いた色で照明を行うことが可能となる。

【0065】

［第１変形例］
図１１は、他の実施形態（第１変形例）の照明制御処理を示すフロー図である。先に説明した第１照明制御処理（Ｓ２１０）は、画像情報中の変化部分を対象領域として特定し、対象領域の色情報を使用して照明装置４５ａ～４５ｅを制御している。したがって、表示画面において変化部分が無い、あるいは、変化部分が少ない場合、照明装置４５ａ～４５ｅによって照明が行われないことが考えられる。変化部分に対応する区分領域４５ａ～４５ｅについて、それに対応する照明装置４５ａ～４５ｅで照明が行われた場合であっても、変化部分ではない区分領域４５ａ～４５ｅに対応する照明装置４５ａ～４５ｅでは照明が行われない。

【0066】

第１変形例では、そのような状況を考慮し、変化部分が生じていない区分領域４１ａ～４１ｅについては、区分領域４１ａ～４１ｅの色に基づき、照明装置４５ａ～４５ｅの制御を行うこととしている。図１１に示される照明制御処理のフロー図において、区分領域４１ａ～４１ｅを示す変数Ｊがリセット（Ｊ＝１）される。本実施形態において、変数Ｊは、画面左側からの区分領域４１ａ～４１ｅの順番を示したものとなっている。

【0067】

Ｓ３０２～３０３では、図４で説明した第１照明制御処理と同様、映像情報の二値化（Ｓ３０２）、映像バッファへの格納（Ｓ３０３）が実行される。そして、変数Ｊで指定されている区分領域４１ａ～４１ｅに対してＳ３０４～Ｓ３０５の処理が実行される。

【0068】

各区分領域４１ａ～４１ｅに対する処理では、まず、変数Ｊ番目の区分領域４１ａ～４１ｅが処理対象として設定される（Ｓ３０４）。そして、当該区分領域４１ａ～４１ｅについて、前フレームとの差分が抽出される（Ｓ３０５）。

【0069】

そして、前フレームとの差分抽出結果、差分を閾値と比較し、差分が閾値よりも大きい場合（Ｓ３０６：Ｙｅｓ）は、対象としている区分領域４１ａ～４１ｅに対して、第１照明制御処理（Ｓ２１４～Ｓ２１８）と同様の処理が実行され、現在、変数Ｊで指定されている区分領域４１ａ～４１ｅに対する照明制御情報が生成（Ｓ３１０）され、対応する照明装置４５ａ～４５ｅに送信される。

【0070】

一方、差分が閾値以下である場合（Ｓ３０６：Ｎｏ）は、対象としている区分領域４１ａ～４１ｅの画面全体の色情報が解析され（Ｓ３１２）、解析された色情報に基づき、現在、変数Ｊで指定されている区分領域４１ａ～４１ｅに対する照明制御情報が生成される（Ｓ３１４）。

【0071】

１つの区分領域４１ａ～４１ｅに対する処理（Ｓ３０４～Ｓ３１４）が完了すると、変数Ｊを１つ歩進（Ｓ３１６）し、次の区分領域４１ａ～４１ｅに対する処理を実行する。１画面中、全ての区分領域４１ａ～４１ｅに対する処理が完了した場合（Ｓ３１７：Ｙｅｓ）、Ｓ３０１に戻って変数Ｊをリセットし、次に入力される映像情報に対する処理が実行される。

【0072】

また、映像情報の入力が無くなった場合（Ｓ３１５：Ｙｅｓ）、照明制御処理を終了する。このように、第１変形例では、画像情報の変化の大小に基づき、照明制御の手法の切り替えを行うこととしている。したがって、各区分領域４１ａ～４１ｅについて、画像情報の変化の大小に適した照明制御を行うことが可能となっている。

【0073】

［第２変形例］
前述の実施形態において、図２で説明したメイン処理では、自動モードあるいは手動モードで第１～第４照明制御処理（Ｓ２１０～Ｓ２４０）の切り替えを行うこととしていた。特に、自動モードでは、カラオケ装置２の出力する映像情報の種別に基づいて切り替えを行うものであった。自動モードでは、このように映像情報の種別をカラオケ装置２から受信することに代え、映像情報を解析することで映像情報の種別を判断することとしてもよい。

【0074】

［第３変形例］
前述の実施形態では、図３で説明したメイン処理から分かるように、照明制御装置４４は、常時処理を実行し、第１～第４照明制御処理（Ｓ２１０～Ｓ２４０）の何れかの処理を行うこととしていた。このような形態に代え、特定のコンテンツ再生中にのみ照明制御を行うこととしてもよい。例えば、コンサート、映画等、映像配信が行われる際に起動して第１照明制御処理（Ｓ２１０）を実行する、あるいは、カラオケの楽曲再生中、第３照明制御処理（Ｓ２３０）を実行する形態が考えられる。

【0075】

［第４変形例］
前述の実施形態では、照明制御装置４４と照明装置４５ａ～４５ｅは異なる構成としていた。このような構成に代え、照明制御装置４４は、照明装置４５ａ～４５ｅに組み込まれたものであってもよい。また、照明制御装置４４は、カラオケ装置２等、映像情報を出力する装置（映像再生装置）に組み込まれるものであってもよい。

【0076】

［第５変形例］
前述の実施形態では、照明制御装置４４は、装置として設ける形態としている。このような構成に代え、照明制御装置４４の機能を、各種情報処理装置で実行されるプログラムで提供することとしてもよい。

【0077】

［第６変形例］
前述の実施形態では、図２で説明したように、映像情報に対する区分領域４１ａ～４１ｅは、縦方向に５分割した形態としている。区分領域４１ａ～４１ｅは、このような縦方向の５分割のみならず、分割形態、もしくは、分割数の少なくとも一方を適宜変更することができる。例えば、区分領域は、縦ｎ個、横ｍ個に分割したｍ×ｎ個のマトリクス形態とすることとしてもよい。その場合、照明装置４５ａ～４５ｅは、分割された区分領域に対応して適宜位置に配置される。なお、照明装置４５ａ～４５ｅの数も適宜に設定することが可能であり、１つの区分領域４１ａ～４１ｅに複数の照明装置４５ａ～４５ｅを割り当てることとしてもよい。

【0078】

また、区分領域は必ずしも設ける必要はなく、照明装置４５ａ～４５ｅに対する制御は、画面全体の解析結果に基づいて行うこととしてもよい。例えば、図８で説明した映像情報に対して第１照明制御処理を行った場合、図８（ａ）～図８（ｄ）のそれぞれのタイミングで、照明装置４５ａ～４５ｅはすべて移動体Ａの色に照明されることになる。

【符号の説明】

【0079】

１：リモコン装置 ３１：映像制御部
２：カラオケ装置 ３２：ハードディスク
５：サーバー装置 ３３：タッチパネルモニタ
６：カラオケルーム ３４：タッチパネル
１１：タッチパネルモニタ ３５：表示部
１１ａ：表示部 ４１：モニタ
１１ｂ：タッチパネル ４１ａ～４１ｅ：区分領域
１２：ビデオＲＡＭ ４２：スピーカー
１３：映像制御部 ４３ａ：マイクロホン
１４：メモリ ４３ｂ：マイクロホン
１５：ＣＰＵ ４４：照明制御装置
１６：無線ＬＡＮ通信部 ４５ａ～４５ｅ：照明装置
１７：操作部 ４５１：基部
１８：操作処理部 ４５２：発光部
２１：操作部 ７１ａ：人物
２２：操作処理部 ７１ｂ：骨格モデル
２４ａ：ＬＡＮ通信部 ７１ｃ：骨格対応領域
２４ｂ：無線ＬＡＮ通信部 ７１ｄ：人物領域
２５：音響制御部 ７１ｅ：人物除去領域
２７：メモリ ８１ａ：テロップ領域
２８：ビデオＲＡＭ ８１ｂ：テロップ除去領域
２９：映像再生部 １３０：アクセスポイント
３０：ＣＰＵ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】