特許 6223326 電力使用状態の表示方法及びその方法を適用した携帯機器

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6223326

(24)【登録日】2017年10月13日

(45)【発行日】2017年11月1日

(54)【発明の名称】電力使用状態の表示方法及びその方法を適用した携帯機器

(51)【国際特許分類】

   G06F 3/0481 20130101AFI20171023BHJP

   G06Q 50/06 20120101ALI20171023BHJP

   H02J 13/00 20060101ALI20171023BHJP

   H04M 11/00 20060101ALI20171023BHJP

【ＦＩ】

   G06F3/0481

   G06Q50/06

   H02J13/00 301A

   H02J13/00 301J

   H04M11/00 301

【請求項の数】11

【全頁数】16

(21)【出願番号】特願2014-506318(P2014-506318)

(86)(22)【出願日】2012年4月13日

(65)【公表番号】特表2014-517955(P2014-517955A)

(43)【公表日】2014年7月24日

(86)【国際出願番号】KR2012002824

(87)【国際公開番号】WO2012144770

(87)【国際公開日】20121026

【審査請求日】2015年4月1日

【審判番号】不服2017-100(P2017-100/J1)

【審判請求日】2017年1月5日

(31)【優先権主張番号】10-2011-0036297

(32)【優先日】2011年4月19日

(33)【優先権主張国】KR

(73)【特許権者】

【識別番号】503447036

【氏名又は名称】サムスン エレクトロニクス カンパニー リミテッド

(74)【代理人】

【識別番号】100133400

【弁理士】

【氏名又は名称】阿部 達彦

(74)【代理人】

【識別番号】100110364

【弁理士】

【氏名又は名称】実広 信哉

(74)【代理人】

【識別番号】100154922

【弁理士】

【氏名又は名称】崔 允辰

(74)【代理人】

【識別番号】100140534

【弁理士】

【氏名又は名称】木内 敬二

(72)【発明者】

【氏名】ヨン−キュ・ジン

(72)【発明者】

【氏名】ヨン−ホ・リー

(72)【発明者】

【氏名】ヨン−シル・ジャン

(72)【発明者】

【氏名】イル−ク・チャン

【合議体】

【審判長】 和田 志郎

【審判官】 山澤 宏

【審判官】 山田 正文

(56)【参考文献】

【文献】 特開２００５−２５０７３４（ＪＰ，Ａ）

【文献】 特開２００４−０１２１４８（ＪＰ，Ａ）

【文献】 特開２００３−２４０３３５（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１０／０１９１４８７（ＵＳ，Ａ１）

【文献】 神武直彦ほか５名，“ＳｔａｔｅＳｎａｐ：状態再現可能な情報機器操作のためのスナップショットインタフェース”，ヒューマンインタフェース学会誌，日本，ヒューマンインタフェース学会，２００４年１１月２５日，第６巻 第４号，ｐｐ．３７９〜３８８

【文献】 坂本陽ほか４名，“拡張現実感技術を用いた家電機器連携システムの構築”，マルチメディア，分散，協調とモバイル（ＤＩＣＯＭＯ２０１０）シンポジウム論文集，日本，社団法人情報処理学会，２０１０年 ６月３０日，第２０１０巻 第１号，ｐｐ．３７２〜３７７

(58)【調査した分野】（Int.Cl.，ＤＢ名）

G06F3/01

G06F3/14

(57)【特許請求の範囲】

【請求項1】

カメラを通じてキャプチャされディスプレイされた画面上のイメージで少なくとも一つの電子機器を識別するステップと、
前記少なくとも一つの電子機器に対する電力使用情報を受信するステップと、
前記受信された電力使用情報を用いて、前記少なくとも一つの電子機器に対する電力使用状態を判断するステップと、
前記少なくとも一つの電子機器に対する電力使用状態の段階に応じて異なるＧＵＩを、前記少なくとも一つの電子機器の前記画面上での大きさ及び形状にマッチングするように生成し、前記画面上で前記少なくとも一つの電子機器上にオーバーラップさせてディスプレイするステップと、
前記生成されたＧＵＩが選択されると、前記選択されたＧＵＩに対応する電子機器の電力使用に対する情報及び当該電子機器の電力使用を制御することのできるメニューが含まれたメニューウィンドウをディスプレイするステップと、
前記メニューウィンドウを介して入力されたユーザ命令に基づいて前記電子機器の電力使用を制御するための制御命令を前記電子機器に伝送するステップと
を含む電力使用状態の表示方法。

【請求項2】

前記少なくとも一つの電子機器の位置情報または形状情報を保存するステップを更に含むことを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項3】

前記識別するステップは、
前記予め保存された少なくとも一つの電子機器の位置情報または形状情報を用いて、前記少なくとも一つの電子機器を識別することを特徴とする請求項２に記載の電力使用状態の表示方法。

【請求項4】

前記ＧＵＩは、
前記電力使用状態の段階に応じて、前記電子機器を色別に表示したＧＵＩであることを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項5】

前記ＧＵＩは、
前記電力使用状態の段階に応じて、異なる形態で表示されるアイコンであることを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項6】

前記判断するステップは、
電子機器の現在の電力使用量が基準使用量目標値を超過しているか否か、または現在の電子機器の使用パターンで使用する場合に前記基準使用量目標値を超過すると予想されるか否かを判断し、前記少なくとも一つの電子機器に対する電力使用状態を判断することを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項7】

時間帯別の電気代に対する情報を受信するステップを更に含み、
前記判断するステップは、
前記受信した時間帯別の電気代に基づき現在の時間帯の電気代に比べて高い瞬間電力を使用するか否かを判断し、前記少なくとも一つの電子機器に対する電力使用状態を判断することを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項8】

前記受信するステップは、 Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ（登録商標）ネットワーク、ＮＦＣネットワーク及びブルートゥース（登録商標）（Ｂｌｕｅｔｏｏｔｈ（登録商標））ネットワークのうち何れか一つを用いて、前記少なくとも一つの電子機器に対する電力使用情報を受信することを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項9】

前記電力使用情報は、
前記少なくとも一つの電子機器に対する現在までの電力使用量、瞬間電力使用量及び電気代情報のうち、少なくとも一つを含むことを特徴とする請求項１に記載の電力使用状態の表示方法。

【請求項10】

少なくとも一つの電子機器を撮影するカメラを含む撮影部と、
前記少なくとも一つの電子機器に対する電力使用情報を受信する通信部と、
ＧＵＩを生成するためのＧＵＩ生成部と、
前記撮影部により撮影された画像を画面上にディスプレイするディスプレイ部と、
前記撮影部により撮影された画像内から前記少なくとも一つの電子機器を識別し、前記受信された電力使用情報を用いて、前記少なくとも一つの電子機器に対する電力使用状態を判断し、前記少なくとも一つの電子機器に対する電力使用状態の段階に応じて異なるＧＵＩを、前記少なくとも一つの電子機器の前記画面上での大きさ及び形状にマッチングするように生成し、前記ディスプレイ部の画面上の前記少なくとも一つの電子機器上にオーバーラップさせてディスプレイし、前記生成されたＧＵＩが選択されると、前記選択されたＧＵＩに対応する電子機器の電力使用に対する情報及び当該電子機器の電力使用を制御することのできるメニューが含まれたメニューウィンドウをディスプレイするように前記ＧＵＩ生成部及び前記ディスプレイ部を制御し、前記メニューウィンドウを介して入力されたユーザ命令に基づいて前記電子機器の電力使用を制御するための制御命令を前記通信部を介して前記電子機器に伝送する制御部と
を含む携帯機器。

【請求項11】

前記少なくとも一つの電子機器の位置情報または形状情報を保存する保存部を更に含むことを特徴とする請求項１０に記載の携帯機器。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、電力使用状態の表示方法及びその方法を適用した携帯機器に関し、より詳細には、拡張現実（ａｕｇｍｅｎｔｅｄ ｒｅａｌｉｔｙ）を用いて電子機器の電力使用情報を提供する電力使用状態の表示方法及びそれを適用した携帯機器に関する。

【背景技術】

【0002】

世界的に温室効果ガスを減らすために、様々な政策及び研究が盛んに進められてきた。特に、温室効果ガスを削減するための政策として、電気代を引き上げたり、時間帯別に異なる電気代を設定して特定の時間に集中する電気使用量を分散させようとする取り組みが進められてきた。

【0003】

これらにより、一般使用者は、電気代の引き上げ及び供給と需要に応じて電気代が変化するＲＴＰ（Ｒｅａｌ Ｔｉｍｅ Ｐｒｉｃｉｎｇ）により、電気の使用に対して敏感になっており、現在使用している電気の使用に対する情報の入手を望んでいる。

【0004】

しかし、ユーザは、従来の家庭で使用する電子機器を通じて現在使用している電気の使用に対する情報を獲得することが困難であった。具体的に、ユーザは、従来の家庭で使用する電子機器の電気使用情報を獲得するために、電子機器の裏に表示されている電子機器の定格使用情報を調べたり、家庭内に設置された電力量計を通じて総消費電力を調べるしかないという問題点があった。

【0005】

従って、ユーザが家庭内に備えられた電子機器の電気の使用情報を把握し、電子機器を制御するための方法への模索が求められる。

【発明の概要】

【発明が解決しようとする課題】

【0006】

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、受信した電子機器の電力使用情報を用いて、電子機器に対する電力使用状態を判断し、電子機器に対する電力使用状態に応じて段階別に異なるＧＵＩをディスプレイする電力使用状態の表示方法及びそれを適用した携帯機器を提供することにある。

【課題を解決するための手段】

【0007】

前記目的を達成するための本発明の一実施形態に係る携帯機器の電力使用状態の表示方法は、カメラを通じて入力された画面で少なくとも一つの電子機器を識別するステップと、前記少なくとも一つの電子機器に対する電力使用情報を受信するステップと、前記受信された電力使用情報を用いて、前記少なくとも一つの電子機器に対する電力使用状態を判断するステップと、前記少なくとも一つの電子機器に対する電力使用状態に応じて段階別に異なるＧＵＩをディスプレイするステップとを含む。

【0008】

一方、前記目的を達成するための本発明の一実施形態に係る携帯機器は、少なくとも一つの電子機器を撮影するカメラを含む撮影部と、前記少なくとも一つの電子機器に対する電力使用情報を受信する通信部と、ＧＵＩを生成するためのＧＵＩ生成部と、ディスプレイ部と、前記撮影部を介して入力された画面で前記少なくとも一つの電子機器を識別し、前記受信された電力使用情報を用いて、前記少なくとも一つの電子機器に対する電力使用状態を判断し、前記少なくとも一つの電子機器に対する電力使用状態に応じて段階別に異なるＧＵＩをディスプレイするように前記ＧＵＩ生成部及び前記ディスプレイ部を制御する制御部とを含む。

【図面の簡単な説明】

【0009】

【図1】本発明の一実施形態に係る電子機器の電力使用状態に対する情報を含むＧＵＩを提供するためのホームネットワークシステムを示す図である。

【図2】本発明の一実施形態に係る携帯機器のブロック図を示す図である。

【図3】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図4】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図5】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図6】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図7】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図8】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図9】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図10】本発明の一実施形態に係る携帯機器にディスプレイされたＧＵＩを示す図である。

【図11】本発明の一実施形態に係る電子機器の電力使用状態に対する情報を提供するための携帯機器の電力使用状態の表示方法を簡略に説明するためのフローチャートである。

【図12】本発明の一実施形態に係る電子機器の電力使用状態に対する情報を提供するための携帯機器の電力使用状態の表示方法を詳細に説明するためのフローチャートである。

【図13】本発明の別の実施形態に係る電子機器の電力使用状態に対する情報を含むＧＵＩを提供するためのホームネットワークシステムを示す図である。

【図14】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【図15】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【図16】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【図17】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【図18】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【図19】本発明の一実施形態に係る電子機器の位置情報及び形状情報を保存する方法を説明するための図である。

【発明を実施するための形態】

【0010】

以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。

【0011】

図１は、本発明の一実施形態に係る電子機器の電力使用状態に対する情報を含むＧＵＩを提供するためのホームネットワークシステム１０を示す図である。図１に示すように、ホームネットワークシステム１０には、電子機器の電力使用状態に対する情報を提供するＧＵＩを生成する携帯機器１００及び複数の電子機器２００−１、２００−２、…、２００−５を含む。

【0012】

このとき、複数の電子機器２００−１、２００−２、…、２００−５は、自分の電力使用情報を携帯機器に提供する。具体的に、複数の電子機器２００−１、２００−２、…、２００−５は、自ら備えられた電力測定装置を用いて測定された電力使用情報をメッシュネットワーク（Ｍｅｓｈ Ｎｅｔｗｏｒｋ）を用いて携帯機器１００に提供することができる。具体的に、複数の電子機器２００−１、２００−２、…、２００−５は、Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ(登録商標)ネットワーク、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）ネットワーク及びブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））ネットワークのうち、何れか一つを用いて携帯機器１００に電力使用情報を提供することができる。このとき、電力使用情報は、電子機器に対する現在までの電力使用量、瞬間電力使用量及び電気代情報等が含まれてよい。

【0013】

なお、複数の電子機器２００−１、２００−２、…、２００−５に自体的に電力量計が備えられていない場合、外部のスマートメータ（ＳｍａｒｔＭｅｔｅｒ）を用いて測定された電力使用情報をメッシュネットワークを通じて携帯機器１００に提供することができる。このとき、スマートメータは、時間帯別の使用量を測定し、その情報を送信することができる機能を備えた装置として、時間帯別の電気代を知ることができる電子式電力量計のことをいう。

【0014】

図１に示す複数の電子機器２００−１、２００−２、…、２００−５は、テレビ２００−１、冷蔵庫２００−２、洗濯機２００−３、クックトップ２００−４及びエアコン２００−５で実現されてよいが、これらは一実施形態に過ぎず、コンピュータ、電子レンジ、扇風機等のような他の電子機器が適用されてよい。

【0015】

携帯機器１００は、カメラを用いて複数の電子機器２００−１、２００−２、…、２００−５を撮影し、撮影された画面内で複数の電子機器２００−１、２００−２、…、２００−５を識別する。このとき、携帯機器１００は、予め保存された複数の電子機器２００−１、２００−２、…、２００−５の位置情報または形状情報を用いて、複数の電子機器２００−１、２００−２、…、２００−５を識別することができる。携帯機器１００が撮影された映像内に電子機器を識別する方法は、図１４ないし図１９を参照して後述する。

【0016】

そして、携帯機器１００は、Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ（登録商標）ネットワーク、ＮＦＣネットワーク及びブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））ネットワークのようなメッシュネットワークを通じて識別された複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報を受信する。

【0017】

そして、携帯機器１００は、受信された複数の電子機器２００−１、２００−２、…、２００−５の電力使用情報を用いて、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を判断し、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態に応じて段階別に異なるＧＵＩをディスプレイする。

【0018】

具体的に、携帯機器１００は、電子機器の現在の電力使用量が基準使用量目標値を超過しているか否か、現在の電子機器の使用パターンで使用する場合に基準使用量目標値を超過すると予想されるか否か、又は現在の時間帯の電気代に比べて高い瞬間電力を使用するか否かを判断し、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を判断する。

【0019】

このとき、携帯機器１００は、拡張現実機能を用いて生成されたＧＵＩを画面にディスプレイすることができる。具体的に、携帯機器１００は、複数の電子機器２００−１、２００−２、…、２００−５が含まれたイメージを画面上にディスプレイし、複数の電子機器２００−１、２００−２、…、２００−５の電力使用状態に対応するＧＵＩを複数の電子機器２００−１、２００−２、…、２００−５の表示位置にマッチングさせてディスプレイすることができる。

【0020】

例えば、携帯機器１００は、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を「良い」、「普通」、「悪い」のように、３段階に分けて判断することができ、電子機器の電力使用状態の各段階に応じて、当該電子機器を色別に表示したＧＵＩを生成することができる。更に別の実施形態として、携帯機器１００は、電子機器の電力使用状態の各段階に対応するアイコンを生成し、イメージ内に含まれた当該電子機器の周辺に生成されたアイコンをディスプレイすることができる。

【0021】

なお、ユーザ入力部（例えば、タッチパネル）を通じて生成されたＧＵＩが選択されると、携帯機器１００は、当該電子機器の電力使用に対する情報及び当該電子機器の電力使用を制御することができるメニューが含まれたメニューウィンドウを生成することができる。

【0022】

このとき、携帯機器１００は、スマートフォンで実現されてよいが、それは一実施形態に過ぎず、撮影部及びディスプレイ部を備えるタブレットパソコン、デジタルカメラ、デジタルカムコーダ等で実現されてよい。

【0023】

上述のホームネットワークシステム１０によって、ユーザは家庭内で使用する電子機器の電子使用状態を直観的に確認することができ、確認した電子使用状態に応じて電子機器を制御することができるようになる。

【0024】

以下においては、図２を参照し、本発明の一実施形態に係る携帯機器１００に対してより詳細に説明する。図２は、本発明の一実施形態に係る携帯機器１００のブロック図を示す図である。図２に示すように、携帯機器１００は、通信部１１０と、制御部１２０と、ディスプレイ部１３０と、撮影部１４０と、ＧＵＩ生成部１５０及び保存部１６０を含む。

【0025】

通信部１１０は、外部の複数の電子機器２００−１、２００−２、…、２００−５から当該電子機器の電力使用情報を受信する。このとき、電力使用情報には、電子機器に対する現在までの電力使用量、瞬間電力使用量及び電気代情報及び月別目標電力使用量等が含まれてよい。

【0026】

なお、通信部１１０は、外部の複数の電子機器２００−１、２００−２、…、２００−５で直接電力使用情報を受信することができるが、それは一実施形態に過ぎず、外部のＤＲコントローラから複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報を受信することができる。それに対しては、図１３を参照して説明する。なお、通信部１１０は、ＤＲコントローラから時間帯別の電気代に対する情報を受信することができる。

【0027】

なお、通信部１１０は、撮影部１４０で撮影が行われると、撮影部１４０によって入力される画面で識別される少なくとも一つの電子機器に対する電力使用情報を受信することができ、予め設定された周期で全電子機器に対する電力使用情報を受信することもできる。

【0028】

このとき、通信部１１０は、Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ（登録商標）ネットワーク、ＮＦＣネットワーク及びブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））ネットワークのうち、何れか一つを通じて複数の電子機器２００−１、２００−２、…、２００−５及びＤＲコントローラから電気使用情報を受信する。特に、Ｚｉｇｂｅｅ（登録商標）ネットワークは、近距離無線パーソナル通信網として、低電力、低価格でホームネットワークシステム１０に適用されることができる。

【0029】

ディスプレイ部１３０は、撮影部１４０によって撮影された映像または保存部１６０に保存された映像をディスプレイする。なお、ディスプレイ部１３０は、ＧＵＩ生成部１５０から生成されたＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）をディスプレイすることができる。

【0030】

撮影部１４０は、複数の電子機器２００−１、２００−２、…、２００−５が含まれた周辺イメージを撮影する。具体的に、撮影部１４０は、撮影部１４０内に含まれたカメラを用いて、映像をイメージセンサ領域に結像するようにし、イメージセンサはレンズを通じて入射された光を電気信号を光電変換する。そして、撮影部１４０に含まれたイメージ処理部（図示せず）は、イメージセンサから入力される映像に対する信号処理を行い、映像データを獲得するようになる。このような映像データは、ディスプレイ部１３０によってディスプレイされる。

【0031】

ＧＵＩ生成部１５０は、複数の電子機器２００−１、２００−２、…、２００−５の電力使用状態に対する情報を示すＧＵＩを生成する。なお、ＧＵＩ生成部１５０は、電子機器の電力使用に対する情報及び当該電子機器の電力使用を制御することができるメニューが含まれたメニューウィンドウを生成することができる。

【0032】

保存部１６０は、外部から入力される映像または撮影された映像を保存する。なお、保存部１６０は、複数の電子機器２００−１、２００−２、…、２００−５の位置情報及び形状情報の何れか一方を含んでよい。

【0033】

一方、保存部１６０は、ハードディスク、非揮発性メモリ等で実現されてよい。

【0034】

制御部１２０は、ユーザ入力部（図示せず）を介して伝達されるユーザの操作内容に基づいてユーザ命令を把握し、把握したユーザ命令に応じて携帯機器１００の動作全般を制御する。

【0035】

具体的には、制御部１２０は、撮影部１４０を介して入力された画面で複数の電子機器２００−１、２００−２、…、２００−５のうち少なくとも一つを識別する。このとき、制御部１２０は、保存部１６０に保存された複数の電子機器２００−１、２００−２、…、２００−５の形状情報または位置情報を用いて、複数の電子機器２００−１、２００−２、…、２００−５のうち少なくとも一つの電子機器を識別することができる。電子機器の形状情報または位置情報を保存し、それを用いて電子機器を識別する方法は、図１４ないし図１９を参照して説明する。

【0036】

具体的には、ユーザは、図１４のように、携帯機器１００を用いてテレビ１４００を正面から撮影する。そして、図１５ないし図１８のように、テレビ１４００を基準として下方、上方、右方及び左方の映像を撮影する。それは、携帯機器１００が方位角センサを用いてテレビ１４００の現在の位置の上／下／左／右映像を保存させることで、テレビ１４００の相対的な位置を保存するためである。

【0037】

そして、ユーザは図１９に示すように、携帯機器１００によって撮影された映像内に含まれたテレビ１４００をドラッグし、テレビ１４００の形状を保存する。

【0038】

上述のように、予め保存されたテレビ１４００の（相対的な）位置情報及び形状情報を用いて、制御部１２０は、現在撮影された映像内で予め保存されたテレビ１４００の位置情報及び形状情報を追跡する。追跡の結果、保存されたテレビ１４００の位置情報及び形状情報と一致するテレビ１４００が存在すると、制御部１２０は現在撮影される映像内に含まれたテレビ１４００を識別することができるようになる。

【0039】

しかし、電子機器の形状情報又は位置情報を用いて電子機器を識別することは一実施形態に過ぎず、別の方法によって電子機器を識別することができる。例えば、制御部１２０は、電子機器に付けられたＱＲコード（登録商標）を用いて当該電子機器を識別することができる。

【0040】

なお、制御部１２０は、メッシュネットワークを通じて受信された複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報を用いて、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を判断し、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態に応じて段階別に異なるＧＵＩをディスプレイする。

【0041】

具体的には、制御部１２０は、電子機器の現在の電力使用量が基準使用量目標値を超過しているか否か、現在の電子機器の使用パターンで使用する場合に基準使用量目標値を超過すると予想されるか否か、又は現在の時間帯の電気代に比べて高い瞬間電力を使用するか否かを判断し、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を判断する。このとき、制御部１２０は、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用状態を第１段階（良い）、第２段階（普通）、第３段階（悪い）のように３段階に分けて判断することができる。

【0042】

例えば、制御部１２０は、現在の電力使用量が基準使用量目標値を超過しているか否かについての情報を用いて、電子機器の電力使用状態を判断することができる。すなわち、エアコンの現在の電力使用量が基準使用量の５０％以下である場合、すなわち、エアコンの基準使用量が３０ＫＷであるとき、現在エアコンの電力使用量が１５ＫＷ以下である場合、制御部１２０は、エアコンの電力使用状態を第１段階と判断する。また、エアコンの現在の電力使用量が基準使用量の５０％超過かつ基準使用量以下である場合、すなわち、現在エアコンの電力使用量が１５ＫＷ超過かつ３０ＫＷ以下である場合、制御部１２０はエアコンの電力使用状態を第２段階と判断する。また、エアコンの現在の電力使用量が基準使用量を超過する場合、すなわち、現在エアコンの電力使用量が３０ＫＷ超過である場合、制御部１２０はエアコンの電力使用状態を第３段階と判断する。このとき、第１段階から第３段階まで進むほど、電力使用状態が次第に悪くなることが分かる。

【0043】

更に別の例として、制御部１２０は、現在の電子機器の使用パターンとして使用する場合、基準使用量目標値を超過すると予想されるか否かを用いて、電子機器の電力使用状態を判断することができる。すなわち、現在までのテレビ使用パターンで使用する場合に使用量目標値の８０％以下であることが予想される場合、制御部１２０はテレビの電力使用状態を第１段階と判断する。なお、現在までのテレビ使用パターンで使用する際に使用量目標値の８０％を超過し、使用量目標値以下であることが予想される場合、制御部１２０はテレビの電力使用状態を第２段階と判断する。なお、現在までのテレビ使用パターンとして使用する際に使用量目標値を超過することが予想される場合、制御部１２０はテレビの電力使用状態を第３段階と判断する。

【0044】

更に別の例として、制御部１２０は、現在の時間帯の電気代を考慮して高い瞬間電力を使用するか否かについての情報を用いて、電子機器の電力使用状態を判断することができる。すなわち、制御部１２０は、現在の電気代の段階が４段階（１．非常に安い、２．若干安い、３．若干高い、４．非常に高い）のうち何れかであるかを判断し、テレビの電気消費段階が４段階（１．パワーモード、２．通常モード、３．節電モード、４．超節電モード）のうち何れかであるかを判断する。そして、もし、現在の電気代の段階が“４．非常に高い”段階である場合、テレビの電気消費段階が“４．超節電モード”である場合、制御部１２０はテレビの電力使用状態を第１段階と判断し、テレビの電気消費段階が“３．節電モード”である場合、制御部１２０はテレビの電力使用状態を第２段階と判断し、テレビの電気消費段階が“１．パワーモード”または“２．通常モード”であると、テレビの電力使用状態を第３段階と判断する。しかし、現在の電気代の段階が“１．非常に安い”である場合、制御部１２０はテレビの電気消費段階に関係なく、テレビの電力使用状態を第１段階と判断する。すなわち、現在の時間の電気代に応じて高い電力を使用するか否かを用いて、電子機器の電力使用状態を判断することができるようになる。

【0045】

一方、上述の実施形態において言及した値は、一実施形態に過ぎず、別の値によって各段階が設定されてよい。

【0046】

なお、上述の実施形態において言及した電子機器の電力使用状態に対する判断方法は一実施形態に過ぎず、別の方法によって電力使用状態を把握することができるようになる。

【0047】

なお、制御部１００は、拡張現実機能を用いて生成されたＧＵＩを画面にディスプレイすることができる。具体的に、制御部１２０は、複数の電子機器２００−１、２００−２、…、２００−５が含まれたイメージを画面上にディスプレイし、識別された電子機器の電力使用状態に対応するＧＵＩを識別された電子機器の表示位置にマッチングさせてディスプレイすることができる。このとき、制御部１２０は、電子機器の電力使用状態の各段階に応じて、当該電子機器を色別に表示したＧＵＩを生成することができる。それに対して、図３ないし図８を参照して説明する。

【0048】

具体的には、エアコンの電力使用状態が第１段階と判断された場合、制御部１２０は、図３に示すように、映像内に含まれたエアコンに第１色がオーバーラッピングされるようにＧＵＩ３１０を付加することができる。このとき、第１の色は緑色であってよい。なお、冷蔵庫の電力使用状態が第２段階と判断された場合、制御部１２０は、図５に示すように、映像内に含まれた冷蔵庫に第２の色がオーバーラッピングされるようにＧＵＩ５１０を付加することができる。このとき、第２の色は黄色であってよい。なお、洗濯機の電力使用状態が第３段階と判断された場合、制御部１２０は、図６に示すように、映像内に含まれた冷蔵庫に第３の色がオーバーラッピングされるようにＧＵＩ６１０を付加することができる。このとき、第３の色は赤色であってよい。

【0049】

一方、上述の例においては、第１の色、第２の色、第３の色を緑色、黄色、赤色で表示しているが、それは一実施形態に過ぎず、別の色によって表現されてよい。

【0050】

なお、制御部１２０は、電子機器の電力使用状態の各段階に対応するアイコンを生成し、イメージ内に含まれた当該電子機器の周辺に生成されたアイコンをディスプレイすることができる。

【0051】

例えば、テレビの電力使用状態が第１段階と判断される場合、図７及び図８に示すように、制御部１２０は笑っている顔のアイコン７１０、８１０をディスプレイすることができる。また、点灯の電力使用状態が第２段階と判断される場合、制御部１２０は、図８に示すように、無表情の顔のアイコン８２０をディスプレイすることができる。なお、冷蔵庫の電力使用状態が第３段階と判断される場合、制御部１２０は、図８に示すように、不満のある顔のアイコン８３０をディスプレイすることができる。

【0052】

一方、上述の例においては、アイコンは一実施形態に過ぎず、別のアイコンによって表現されてよい。

【0053】

上述のように、電子機器の電力使用状態に応じて、電子機器を異なる色で表現したりアイコンを生成することで、ユーザはより直観的に当該電子機器の電力使用状態を把握することができるようになる。

【0054】

なお、ユーザ入力部（例えば、タッチパネル）を介して生成されたＧＵＩが選択されると、制御部１２０は当該電子機器の電力使用に対する情報及び当該電子機器の電力使用を制御することができるメニューが含まれたメニューウィンドウを生成することができる。

【0055】

例えば、図８に示すテレビの電力使用状態を表示するアイコン８１０が選択されると、図９または図１０に示すメニューウィンドウ９１０、１０１０がディスプレイされてよい。このとき、図９は、テレビの電力使用を制御することができるメニューウィンドウ９１０として、メニューウィンドウ９１０内に含まれた状態調節バーを通じてテレビの電力使用を制御することができる。例えば、状態調節バーを通じて電力使用を増加させる命令が入力されると、制御部１２０は制御命令を通信部１１０を介してテレビに伝達することができる。なお、図１０は、テレビの現在の電力使用に対する情報を示すメニューウィンドウ１０１０として、メニュー１０１０は現在までの電力使用量、瞬間電力使用量、現在までの電気代等に対する情報をディスプレイすることができる。

【0056】

図９及び図１０のメニューウィンドウによって、ユーザは電子機器の電力使用状態に対して認識することができるだけでなく、より効率的に電子機器の電力使用を制御することができるようになる。

【0057】

以下においては、図１１及び図１２を参照して、電子機器の電力使用状態に対する情報を提供するための携帯機器１００のＧＵＩ生成方法について説明する。図１１は、本発明の一実施形態に係る電子機器の電力使用状態に対する情報を提供するための携帯機器の電力使用状態の表示方法を簡略に説明するためのフローチャートである。

【0058】

まず、携帯機器１００はカメラを通じて入力された画面内で少なくとも一つの電子機器を識別する（Ｓ１１１０）。このとき、携帯機器１００は、予め保存された少なくとも一つの電子機器の位置情報または形状情報を用いて少なくとも一つの電子機器を識別することができる。

【0059】

そして、携帯機器１００は、識別された少なくとも一つの電子機器に対する電力使用情報を受信する（Ｓ１１２０）。このとき、携帯機器１００は、Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ（登録商標）ネットワーク、ＮＦＣネットワーク及びブルートゥースネットワークの何れか一つを用いて、識別された少なくとも一つの電子機器に対する電力使用情報を受信することができる。しかし、識別された少なくとも一つの電子機器に対する電力使用情報を受信することは一実施形態に過ぎず、カメラを用いて電子機器を撮影する前に予め設定された周期で電子機器に対する電力使用情報を受信することができる。

【0060】

そして、携帯機器１００は、受信された電力使用情報を用いて、少なくとも一つの電子機器に対する電力使用状態を判断する（Ｓ１１３０）。このとき、携帯機器１００は、電子機器の現在の電力使用量が基準使用量目標値を超過しているか否か、現在の電子機器の使用パターンで使用する場合に基準使用量目標値を超過すると予想されるか否か、または現在の時間帯の電気代を考慮して高い瞬間電力を使用するか否かを判断し、少なくとも一つの電子機器に対する電力使用状態を判断する。このとき、携帯機器１００は、少なくとも一つの電子機器に対する電力使用状態を複数の段階に分けて判断することができる。

【0061】

そして、携帯機器１００は、電力使用状態に対するＧＵＩを生成する（Ｓ１１４０）。このとき、生成されたＧＵＩは、電子機器の電力使用状態の各段階に応じて、当該電子機器を色別に表示したＧＵＩであってよく、電子機器の電力使用状態の各段階に対応するアイコンであってよい。

【0062】

携帯機器１００は、生成されたＧＵＩをディスプレイする（Ｓ１１５０）。特に、携帯機器１００は、拡張現実機能を用いて生成されたＦＵＩを画面にディスプレイされてよい。具体的に、携帯機器１００は、少なくとも一つの電子機器が含まれたイメージを画面上にディスプレイし、識別された少なくとも一つの電子機器の電力使用状態に対応するＧＵＩを識別された少なくとも一つの電子機器の表示位置にマッチングさせてディスプレイすることができる。

【0063】

図１２は、本発明の一実施形態に係る電子機器の電力使用状態に対する情報を提供するための携帯機器の電力使用状態の表示方法を詳細に説明するためのフローチャートである。

【0064】

まず、携帯機器１００は、撮影部１６０を介して電子機器が含まれた映像を撮影する（Ｓ１２１０）。このとき、映像内には一つの電子機器が含まれてよく、複数の電子機器が含まれてよい。

【0065】

そして、携帯機器１００は、映像内で電子機器を識別する（Ｓ１２２０）。このとき、携帯機器１００は上述のように、電子機器の形状情報または位置情報を用いて、電子機器を識別することができる。

【0066】

そして、携帯機器１００は、識別された電子機器に対する電力使用情報を受信する（Ｓ１２３０）。このとき、携帯機器１００は、Ｗｉ−Ｆｉネットワーク、Ｚｉｇｂｅｅ（登録商標）ネットワーク、ＮＦＣネットワーク及びブルートゥースネットワークの何れか一つを用いて、識別された電子機器に対する電力使用情報を受信することができる。

【0067】

識別された電子機器の電力使用情報を受信すると、携帯機器１００は識別された電子機器の電力使用状態を判断する（Ｓ１２４０）。このとき、携帯機器は上述のように、多様な方法によって当該電子機器の電力使用状態を判断する。このとき、携帯機器１００は、少なくとも一つの電子機器に対する電力使用状態を第１段階（良い）、第２段階（普通）、第３段階（悪い）のように、３段階に分けて判断することができる。

【0068】

携帯機器１００は、識別された電子機器の電力使用状態が第１状態か否かを判断する（Ｓ１２５０）。識別された電子機器の電力使用状態が第１状態である場合（Ｓ１２５０−Ｙ）、携帯機器１００は映像内の当該電子機器に緑色がオーバーラッピングされるようにＧＵＩを生成する（Ｓ１２７０）。

【0069】

識別された電子機器の電力使用状態が第１状態ではない場合（Ｓ１２５０−Ｎ）、携帯機器１００は識別された電子機器の電力使用状態が第２状態か否かを判断する（Ｓ１２６０）。識別された電子機器の電力使用状態が第２状態である場合（Ｓ１２６０−Ｙ）、携帯機器１００は映像内の当該電子機器に黄色がオーバーラッピングされるようにＧＵＩを生成する（Ｓ１２７３）。

【0070】

識別された電子機器の電力使用状態が第２状態ではない場合（Ｓ１２６０−Ｎ）、携帯機器１００は当該電子機器の電力使用状態が第３段階であると判断し、映像内の当該電子機器に赤色がオーバーラッピングされるようにＧＵＩを生成する（Ｓ１２７６）。

【0071】

そして、携帯機器１００は、ステップＳ１２７０、Ｓ１２７３、Ｓ１２７６で生成されたＧＵＩをディスプレイする（Ｓ１２８０）。

【0072】

図１１及び図１２において説明した方法によって、ユーザは家庭内で使用する電子機器の電気使用状態を直観的に確認することができるようになる。

【0073】

以下では、図１３を参照して、ＤＲコントローラを用いて、電力使用情報を受信する実施形態について説明する。図１３は、本発明の更に別の実施形態に係る電子機器の電力使用状態に対する情報を含むＧＵＩを提供するためのホームネットワークシステムを示す図である。

【0074】

図１３に示すように、ホームネットワークシステム２０は、図１に示すホームネットワークシステム１０でＤＲ（Ｄｅｍａｎｄ Ｒｅｓｐｏｎｓｅ）コントローラ３００が更に含まれる。

【0075】

このとき、ＤＲコントローラ３００は、効率的に電力管理のために、電子機器の電力を制御する装置をいう。具体的に、電力需要がピークの場合または電気代が最も高い場合、ＤＲコントローラ３００は電子機器の電力を下げ、電力需要が少ない場合または電気代が最も安い場合、ＤＲコントローラ３００は電子機器の電力を高めるように制御する。例えば、ＤＲコントローラ３００が冷暖房装置の電力を制御する際、ＤＲコントローラ３００は電気代に応じて冷暖房の温度を調節することができる。

【0076】

図１３に示すように、ＤＲコントローラ３００が、複数の電子機器２００−１、２００−２、…、２００−５から複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報を受信する。そして、ＤＲコントローラ３００は、受信した電力使用情報を再び携帯機器１００に伝送する。このとき、ＤＲコントローラ３００は、複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報だけでなく、現在の電気代情報等のような付加的な制御情報を伝送することができる。

【0077】

よって、携帯機器１００は、ＤＲコントローラ３００から受信した複数の電子機器２００−１、２００−２、…、２００−５に対する電力使用情報及び付加的な制御情報を用いて、図２ないし図１２において説明したように、ＧＵＩを提供することができるようになる。

【0078】

一方、上述の実施形態においては、カメラによって撮影された映像内で識別された電子機器の電力使用状態をＧＵＩで表示する実施形態で説明してきたが、保存部１６０に予め保存されたスチルイメージを用いて、予め保存されたスチルイメージ内に含まれた複数の電子機器の電力使用状態を判断し、それをＧＵＩで表示することができる。例えば、図８に示すように、携帯機器１００はリビングに対するスチルイメージを予め保存し、予め保存された位置に電力使用状態に対応するアイコンをディスプレイすることができる。

【0079】

なお、以上では、電子機器の電力使用状態を３段階で表示しており、それは一実施形態に過ぎず、２つ以上の段階を用いて、電子機器の電力使用状態を表示することができる。

【0080】

なお、以上では、色またはアイコンを通じて電子機器の電力使用状態を実現したが、それは一実施形態に過ぎず、別の表現方式で電子機器の電力使用状態を表現することができる。

【0081】

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

【符号の説明】

【0082】

１００ 携帯機器
１１０ 通信部
１２０ 制御部
１３０ ディスプレイ部
１４０ 撮影部
１５０ ＧＵＩ生成部
１６０ 保存部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】