特許 5921047 ユーザーインターフェース装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5921047

(24)【登録日】2016年4月22日

(45)【発行日】2016年5月24日

(54)【発明の名称】ユーザーインターフェース装置

(51)【国際特許分類】

   G06F 3/01 20060101AFI20160510BHJP

   G06F 3/0346 20130101ALI20160510BHJP

   G06F 3/0487 20130101ALI20160510BHJP

【ＦＩ】

   G06F3/01 570

   G06F3/0346 422

   G06F3/0487

【請求項の数】7

【全頁数】13

(21)【出願番号】特願2014-127830(P2014-127830)

(22)【出願日】2014年6月23日

(62)【分割の表示】特願2010-107868(P2010-107868)の分割

【原出願日】2010年5月10日

(65)【公開番号】特開2014-199673(P2014-199673A)

(43)【公開日】2014年10月23日

【審査請求日】2014年6月23日

(73)【特許権者】

【識別番号】314008976

【氏名又は名称】レノボ・イノベーションズ・リミテッド（香港）

(74)【代理人】

【識別番号】100084250

【弁理士】

【氏名又は名称】丸山 隆夫

(72)【発明者】

【氏名】小松 茂樹

【審査官】 菅原 浩二

(56)【参考文献】

【文献】 特開２００８−２８９０３９（ＪＰ，Ａ）

【文献】 特開２００２−２５９０４６（ＪＰ，Ａ）

【文献】 特開２００４−２６４８９２（ＪＰ，Ａ）

【文献】 特開２００５−３０１５８３（ＪＰ，Ａ）

【文献】 特開２００５−１６５６７０（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００５／０２５９０３５（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０３４６

Ｇ０６Ｆ ３／０４８−３／０４８９

(57)【特許請求の範囲】

【請求項1】

ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器の動作を制御する操作信号を出力する制御部とを有するユーザーインターフェース装置であって、ユーザの姿勢変化および表情変化の少なくとも一方をユーザの操作所作として撮像するカメラを前記操作検出手段として有するユーザーインターフェース装置において、
ユーザに装着されるホルダをさらに有し、
前記カメラは、広角レンズを備え、前記ホルダがユーザに装着されたときに該広角レンズの画角中心がユーザの反対側を向くように該ホルダに搭載されており、
前記広角レンズは魚眼レンズであり、
前記カメラは、ユーザの姿勢変化および表情変化の少なくとも一方に加えてユーザの正面の画像をも撮像し、前記制御部は、検出したユーザの操作所作に加え、正面の画像に含まれる識別信号と予め記憶された識別信号との差分に応じて電子機器の動作を制御する操作信号を出力する
ことを特徴とするユーザーインターフェース装置。

【請求項2】

前記ホルダは、ブローチ状、ネクタイピン状、ネックレス状、チェストバンド状、腰ベルト状、ウエストバッグ状、眼鏡状、ヘッドバンド状、ヘッドホン状、ヘッドセット状、アームバンド状、リストバンド状、レッグバンド状、またはアンクルバンド状を呈する請求項１記載のユーザーインターフェース装置。

【請求項3】

電子機器と個別に構成されている請求項１又は２に記載のユーザーインターフェース装置。

【請求項4】

前記カメラと、前記制御部と、前記制御部に接続され、前記操作信号を無線送信する送信部とが、前記ホルダに搭載されてなるトランスミッタと、
電子機器に接続され、前記操作信号を無線受信する受信部を備えたレシーバとを有する請求項３に記載のユーザーインターフェース装置。

【請求項5】

ユーザに装着可能な電子機器と一体に構成され、前記ホルダは、ユーザーインターフェース装置と電子機器とで兼用となっている請求項１又は２に記載のユーザーインターフェース装置。

【請求項6】

前記ホルダは、操作時にユーザが動かす部位に装着され、前記カメラは、ユーザの周囲の画像変化をユーザの姿勢変化の相対値として撮像し、前記制御部は、当該相対値をユーザの姿勢変化に変換する請求項１から５のいずれか一項に記載のユーザーインターフェース装置。

【請求項7】

請求項１から６のいずれか一項に記載のユーザーインターフェース装置を有することを
特徴とする電子機器。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器の動作を制御する信号を出力する制御部とを有するユーザーインターフェース装置に関する。

【背景技術】

【0002】

電子機器には、ユーザによる電子機器に対する操作を検出する操作検出手段または操作入力手段として操作ボタン（操作キー）を備えたユーザーインターフェース装置が広く採用されている。操作ボタンとしては、複数の操作ボタンが配列されて成るキーボード、回転ダイアル、キーパッド、タッチパネル等、種々の形態がある。また、ユーザーインターフェース装置には、ユーザに装着可能な電子機器と一体に構成されたものや、電子機器とは個別に構成されたものがある。

【0003】

しかし、近年の電子機器の小型化に伴い、電子機器に一体に構成されたユーザーインターフェース装置は、操作ボタンを配置可能なスペースが狭小化することになり、ユーザの指先に見合った操作し易いサイズや形状の操作ボタンを必要なボタン数だけ配置することが、困難になりつつある。あるいは、電子機器と個別に構成されたユーザーインターフェース装置においても、通常は電子機器同様に小型化が望まれるため、操作し易いサイズや形状の操作ボタンを必要なボタン数だけ配置することが、困難になりつつ状況は同じである。しかも、近年、電子機器は多機能化の傾向にあり、それに応じて必要なボタン数も増加している。さらに、電子機器の多機能化に伴い、ユーザーインターフェース装置の操作方法も益々複雑になってきており、ユーザは不便を感じるようになっている。

【0004】

操作検出手段としての操作ボタンを備えたユーザーインターフェース装置の上述したような諸問題の解決策として、操作ボタンに代わる操作検出手段を備えたユーザーインターフェース装置が提案されている。例えば、特許文献１には、ユーザによる操作の操作検出手段として、ユーザの顔の表情変化やジェスチャを撮影するカメラを備えたユーザーインターフェース装置を有する移動通信端末機が開示されている。このユーザーインターフェース装置は、ユーザの顔の表情変化やジェスチャに応じて移動通信端末機の動作を制御する信号を出力するものである。尚、特許文献１において、操作検出手段としてのカメラは、移動通信端末機に内蔵されるか、あるいは、移動通信端末機とは個別に配置される（移動通信端末機に外蔵される）とされている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２００４−２０６７０７号公報（特許第３９７４１０９号）

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかし、特許文献１に開示された技術において、操作検出手段としてのカメラが移動通信端末機に内蔵される場合は、ユーザは移動通信端末機を手に持ちながら自らにカメラを向ける必要があるため、手や腕を動かして行うジェスチャを検出することはできず、顔の表情変化しか検出できない。一方、顔の表情変化を検出するためには、カメラを自らの顔が撮像範囲内に常時かつ正確に納まるように移動通信端末機を構え続けなければならず、使い勝手に劣る。

【0007】

他方、カメラが移動通信端末機とは個別に配置される場合も、上半身や顔が撮像範囲に常時かつ正確に納まるように、ユーザとカメラとの相対位置を調整すること、即ち、撮像範囲内に入るようにユーザ自らが移動するか、あるいは、ユーザが撮像範囲内に入るようにカメラの位置を調整する必要があり、使い勝手に劣る。カメラが移動通信端末機とは個別に配置される場合はさらに、ジェスチャや顔の表情変化を検出するために、ユーザに対してカメラを焦点距離等を考慮した所定の距離を隔てて対向配置しなければならず、ユーザーインターフェース装置を有する電子機器（移動通信端末機）という構成全体として、広い設置スペースを必要とする。このため、電子機器が携帯電話機等の可搬型である場合は著しく実用性に欠くことになる。

【0008】

それ故、本発明の課題は、操作ボタンを操作検出手段として備えたユーザーインターフェース装置に関する上述した諸問題を解決できることに加え、コンパクトで、使い勝手に優れ、可搬型の電子機器にも適用でき、また、電子機器の内外どちらにも装備可能なユーザーインターフェース装置を提供することである。

【課題を解決するための手段】

【0009】

本発明によれば、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器の動作を制御する操作信号を出力する制御部とを有するユーザーインターフェース装置であって、ユーザの姿勢変化および表情変化の少なくとも一方をユーザの操作所作として撮像するカメラを前記操作検出手段として有するユーザーインターフェース装置において、ユーザに装着されるホルダをさらに有し、前記カメラは、広角レンズを備え、前記ホルダがユーザに装着されたときに該広角レンズの画角中心がユーザの反対側を向くように該ホルダに搭載されており、広角レンズは魚眼レンズであり、カメラは、ユーザの姿勢変化および表情変化の少なくとも一方に加えてユーザの正面の画像をも撮像し、制御部は、検出したユーザの操作所作に加え、正面の画像に含まれる識別信号と予め記憶された識別信号との差分に応じて電子機器の動作を制御する操作信号を出力することを特徴とするユーザーインターフェース装置が得られる。

【発明の効果】

【0017】

本発明によるユーザーインターフェース装置は、操作ボタンを操作検出手段として備えたユーザーインターフェース装置に関する諸問題を解決できることに加え、コンパクトで、使い勝手に優れ、可搬型の電子機器にも適用でき、また、電子機器の内外どちらにも装備可能である。

【図面の簡単な説明】

【0018】

【図1】本発明の実施例１によるユーザーインターフェース装置を示すブロック図である。

【図2】図１に示されたユーザーインターフェース装置における広角レンズとホルダとを示す概念図である。

【図3】図１に示されたユーザーインターフェース装置における制御部の動作を説明するためのフロー図である。

【図4】本発明の実施例２によるユーザーインターフェース装置における制御部の動作を説明するためのフロー図である。

【図5】本発明の実施例３によるユーザーインターフェース装置を有する電子機器を示すブロック図である。

【図6】図５に示されたユーザーインターフェース装置における制御部の動作を説明するためのフロー図である。

【発明を実施するための形態】

【0019】

本発明によるユーザーインターフェース装置は、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器の動作を制御する操作信号を出力する制御部とを有するユーザーインターフェース装置であって、ユーザの姿勢変化および表情変化の少なくとも一方をユーザの操作所作として撮像するカメラを操作検出手段として有している。

【0020】

特に、本ユーザーインターフェース装置は、ユーザに装着されるホルダをさらに有している。カメラは、広角レンズを備え、ホルダがユーザに装着されたときに広角レンズの画角中心がユーザの反対側を向くようにホルダに搭載されている。

【0021】

上記構成により、本ユーザーインターフェース装置は、操作ボタンを操作検出手段として備えたユーザーインターフェース装置に関する諸問題を解決できることに加え、コンパクトで、使い勝手に優れ、可搬型の電子機器にも適用でき、また、電子機器の内外どちらにも装備可能である。

【0022】

即ち、本ユーザーインターフェース装置が電子機器に内蔵される場合、ユーザは、電子機器を手に持たなくとも、自身による操作を検出することができる。このため、手や腕を動かして行うジェスチャをも検出でき、また、顔の表情変化を検出する際にも自らの顔が撮像範囲内に常時かつ正確に納まるように電子機器を構え続ける必要もない。

【0023】

さらに、カメラが電子機器とは個別に配置される場合も、上半身や顔が撮像範囲に常時かつ正確に納まるように、ユーザとカメラとの相対位置を調整すること、即ち、撮像範囲内に入るようにユーザ自らが移動するか、あるいは、ユーザが撮像範囲内に入るようにカメラの位置を調整する必要がない。カメラが移動通信端末機とは個別に配置される場合はさらに、ジェスチャや顔の表情変化を検出するために、ユーザに対してカメラを焦点距離等を考慮した所定の距離を隔てて対向配置する必要もない。よって、ユーザーインターフェース装置を有する電子機器の構成全体として、広い設置スペースを必要とすることもない。このことは、電子機器が携帯電話機等の可搬型である場合は特に有用である。

【0024】

以下、図面を参照して、本発明によるユーザーインターフェース装置、本ユーザーインターフェース装置のより具体的な実施例を詳細に説明する。

【実施例1】

【0025】

図１を参照すると、本発明の実施例１によるユーザーインターフェース装置は、電子機器１００としての携帯型音楽プレーヤに適用されている。本ユーザーインターフェース装置は、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器１００としての携帯型音楽プレーヤの動作を制御する操作信号を出力する制御部１３とを有し、操作検出手段として、ユーザのジェスチャや腕、手、指の動きといった姿勢変化ならびに表情変化のうち、ユーザの手、指の動きをユーザの操作所作として撮像するカメラ１１を有している。

【0026】

本ユーザーインターフェース装置は、ユーザに装着されるホルダ１６を有している。本実施例において、ホルダ１６は、具体的な形状は図示していないが、ユーザの手首に取り外し可能に装着されるリストバンド状（腕時計状）を呈している。

【0027】

カメラ１１は、広角レンズ１１２と、広角レンズ１１２を通して撮像するイメージセンサ１１１とを備えている。カメラ１１は、図２に示されるように、ホルダ１６がユーザＵＢに装着されたときに広角レンズ１１２の画角中心がユーザＵＢの反対側を向くようにホルダ１６に搭載されている。

【0028】

広角レンズ１１２は、画角１８０度の魚眼レンズであり、カメラ１１は、ユーザの指の所作（動き）を撮像する。ただし、本発明において、広角レンズの画角は、１８０度よりも大きいか、あるいは、ユーザの操作所作を撮像可能であるならば、１８０度未満であってもよい。

【0029】

ホルダ１６には、カメラ１１以外に、ビデオメモリ１２と、制御部１３と、プログラムメモリ１５と、送信部１４と、図示しないバッテリとが搭載されている。ビデオメモリ１２は、カメラ１１の出力信号を一時的に記憶する。制御部１３は、ビデオメモリ１２に記憶された画像信号を後述するように解析してユーザの操作所作に応じた電子機器１００を操作するための操作信号を出力する他、本ユーザーインターフェース装置の動作全般を制御する。プログラムメモリ１５は、制御部１３の動作プログラムを格納している。送信部１４は、制御部１３に接続され、操作信号を無線送信する。バッテリは、ホルダ１６に搭載されたデバイスに電力を供給する。ホルダ１６と、これに搭載されたデバイスとにより、トランスミッタ１０が構成される。

【0030】

一方、電子機器１００には、レシーバ２０が接続されている。レシーバ２０は、受信部２１と、物理インターフェース（Ｉ／Ｆ）変換部２２とを備えている。受信部２１は、トランスミッタ１０の送信部１４から出力された操作信号を無線受信する。物理インターフェース変換部２２は、受信部２１が受信した操作信号を電子機器１００が受け入れられるインターフェース形式（データ形式、物理層）に変換する。

【0031】

送信部と受信部との間の無線通信の規格としては、Bluetooth（登録商標）等の近距離無線通信規格が用いられる。尚、電子機器１００が無線通信機能を持っている場合は、レシーバ２０は、電子機器１００によって代用可能である。

【0032】

また、制御部１３が出力する操作信号を直接電子機器１００が受け入れられるインターフェース形式（データ形式、物理層）にした場合には、ユーザーインターフェース装置を電子機器に有線で接続することが可能である。この場合、無線送受信のための構成を省略することが可能である。そのインターフェース形式は、具体的には、例えば、ＵＳＢ、ＰＳ／２、シリアルポート等である。

【0033】

次に、本発明の実施例１によるユーザーインターフェース装置の動作を説明する。

【0034】

電子機器１００としての携帯型音楽プレーヤと、これに接続されたレシーバ２０と、ユーザの手首に装着されたトランスミッタ１０とが起動されると、トランスミッタ１０におけるカメラ１１のイメージセンサ１１１が広角レンズ１１２を通してユーザのトランスミッタ１０が装着された側の手指の所作を撮像する。

【0035】

イメージセンサ１１１から出力される画像信号は、ビデオメモリ１２に一時的に記憶される。

【0036】

制御部１３は、プログラムメモリ１５に格納された動作プログラムに従い、ビデオメモリ１２に記憶された画像信号を解析してユーザの操作所作に応じた操作信号を出力する。

【0037】

送信部１４は、制御部１３から出力された操作信号を無線送信する。

【0038】

受信部２１は、トランスミッタ１０の送信部１４から出力された操作信号を無線受信する。

【0039】

物理インターフェース変換部２２は、受信部２１が受信した操作信号を電子機器１００が受け入れられるインターフェース形式に変換する。

【0040】

電子機器１００は、レシーバ２０から出力された操作信号に従って動作する。

【0041】

次に、制御部１３による画像信号の解析動作を、より具体的な例を挙げて説明する。

【0042】

［音楽プレーヤの音量調整操作］
電子機器１００としての携帯音楽プレーヤの音量調整という操作を行うとき、本ユーザーインターフェース装置の制御部１３は、次のように動作する。即ち、指の所作を音量調整に利用する場合、図３のフロー図に示されるような画像解析が制御部１３によって行われる。

【0043】

ステップＳ１１において、制御部１３は、所定の周期でビデオメモリ１２から出力されるフレームデータの、１つ前のフレームデータとの差分をとる。

【0044】

ステップＳ１２において、制御部１３は、当該差分を所定の閾値と比較する。比較の結果、差分が閾値未満の場合は指の所作がなかったと判断し、ステップＳ１１に戻る。一方、差分が閾値以上である場合、ステップＳ１３に移行する。

【0045】

ステップＳ１３において、制御部１３は、画像領域の右半分および左半分それぞれの積分値を計算する。

【0046】

ステップＳ１４において、制御部１３は、両積分値のうち、右半分の方が大きい場合は音量を上げる指示の操作信号を出力する（ステップＳ１５）一方、右半分の方が大きい場合と左右が同値の場合は音量を下げる指示の操作信号を出力する（ステップＳ１６）。

【実施例2】

【0047】

本発明の実施例２は、電子機器の種類、ホルダの形状、トランスミッタのユーザへの装着箇所、およびユーザの検出部位が、実施例１と異なる。このため、実施例１と同一または同様の部分については、実施例１の図面を流用すると共に、詳細な説明は省略する。

【0048】

図１および図２を参照すると、本発明の実施例２によるユーザーインターフェース装置は、電子機器１００としての電子楽器に適用されている。本ユーザーインターフェース装置は、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器１００としての電子楽器の動作を制御する操作信号を出力する制御部１３とを有し、操作検出手段として、ユーザのジェスチャや腕、手、指の動きといった姿勢変化ならびに表情変化のうち、ユーザのジェスチャをユーザの操作所作として撮像するカメラ１１を有している。

【0049】

本ユーザーインターフェース装置は、ユーザに装着されるホルダ１６を有している。本実施例において、ホルダ１６は、具体的な形状は図示していないが、ユーザの衣服の胸部に取り外し可能に装着されるブローチ状を呈している。

【0050】

カメラ１１は、広角レンズ１１２と、広角レンズ１１２を通して撮像するイメージセンサ１１１とを備えている。カメラ１１は、図２に示されるように、ホルダ１６がユーザＵＢに装着されたときに広角レンズ１１２の画角中心がユーザＵＢの反対側を向くようにホルダ１６に搭載されている。

【0051】

広角レンズ１１２は、画角１８０度の魚眼レンズであり、カメラ１１は、ユーザのジェスチャ（腕の所作）を撮像する。

【0052】

ホルダ１６には、カメラ１１と、ビデオメモリ１２と、制御部１３と、プログラムメモリ１５と、送信部１４と、図示しないバッテリとが搭載されている。ホルダ１６と、これに搭載されたデバイスとにより、トランスミッタ１０が構成される。

【0053】

一方、電子機器１００には、レシーバ２０が接続されている。レシーバ２０は、受信部２１と、物理インターフェース（Ｉ／Ｆ）変換部２２とを備えている。

【0054】

次に、本発明の実施例２によるユーザーインターフェース装置の動作を説明する。

【0055】

電子機器１００としての電子楽器と、これに接続されたレシーバ２０と、ユーザの胸元に装着されたトランスミッタ１０とが起動されると、トランスミッタ１０におけるカメラ１１のイメージセンサ１１１が広角レンズ１１２を通してユーザのジェスチャを撮像する。

【0056】

イメージセンサ１１１から出力される画像信号は、ビデオメモリ１２に一時的に記憶される。

【0057】

制御部１３は、プログラムメモリ１５に格納された動作プログラムに従い、ビデオメモリ１２に記憶された画像信号を解析してユーザの操作所作に応じた操作信号を出力する。

【0058】

送信部１４は、制御部１３から出力された操作信号を無線送信する。

【0059】

受信部２１は、トランスミッタ１０の送信部１４から出力された操作信号を無線受信する。

【0060】

物理インターフェース変換部２２は、受信部２１が受信した操作信号を電子機器１００が受け入れられるインターフェース形式に変換する。

【0061】

電子機器１００は、レシーバ２０から出力された操作信号に従って動作する。

【0062】

次に、制御部１３による画像信号の解析動作を、より具体的な例を挙げて説明する。

【0063】

［電子楽器のピッチおよび音量の調整操作］
電子機器１００としての電子楽器のピッチおよび音量の調整という操作を行うとき、本ユーザーインターフェース装置の制御部１３は、次のように動作する。即ち、ジェスチャをピッチおよび音量の調整に利用する場合、図４のフロー図に示されるような画像解析が制御部１３によって行われる。

【0064】

ステップＳ２１において、制御部１３は、所定の周期でビデオメモリ１２から出力されるフレームデータの、１つ前のフレームデータとの差分をとる。

【0065】

ステップＳ２２において、制御部１３は、画像領域を右半分および左半分に分割する。尚、右半分の画像領域には右腕が、左半分の画像領域には左腕が撮像されている。

【0066】

ステップＳ２３において、制御部１３は、右半分の画像領域についての差分を所定の閾値と比較する。比較の結果、差分が閾値未満の場合は指の所作がなかったと判断し、ステップＳ２１に戻る。一方、差分が閾値以上である場合、ステップＳ２５に移行する。

【0067】

同様に、ステップＳ２４において、制御部１３は、左半分の画像領域についての差分を所定の閾値と比較する。比較の結果、差分が閾値未満の場合は指の所作がなかったと判断し、ステップＳ２１に戻る。一方、差分が閾値以上である場合、ステップＳ２６に移行する。

【0068】

ステップＳ２５において、制御部１３は、右腕の移動方向が上向きの場合はピッチを上げる指示の操作信号を出力する（ステップＳ２７）一方、右腕の移動方向が下向きの場合と不動の場合はピッチを下げる指示の操作信号を出力する（ステップＳ２８）。

【0069】

同様に、ステップＳ２６において、制御部１３は、左腕の移動方向が上向きの場合は音量を上げる指示の操作信号を出力する（ステップＳ２９）一方、左腕の移動方向が下向きの場合と不動の場合は音量を下げる指示の操作信号を出力する（ステップＳ３０）。

【実施例3】

【0070】

本発明の実施例３は、電子機器の種類、ユーザーインターフェース装置の形態、およびユーザの検出部位が、実施例１と異なる。このため、実施例１と同一または同様の部分については、実施例１と同符号を付すと共に、詳細な説明は省略する。

【0071】

図５を参照すると、本発明の実施例３によるユーザーインターフェース装置は、電子機器１５０としての美術館等における貸し出し式の音声ガイダンス装置と一体的に構成されている。換言すれば、図５に示された電子機器１５０としての音声ガイダンス装置は、ユーザーインターフェース装置を内蔵している。音声ガイダンス装置は、美術館における展示物等に関するガイダンス音声をイヤホン１５６から再生する装置である。

【0072】

本ユーザーインターフェース装置は、ユーザの操作所作を検出する操作検出手段と、検出したユーザの操作所作に応じて電子機器１５０としての音声ガイダンス装置の動作を制御する操作信号を出力する制御部１３とを有し、操作検出手段として、ユーザのジェスチャや腕、手、指の動きといった姿勢変化ならびに表情変化のうち、ユーザのジェスチャをユーザの操作所作として撮像するカメラ１１を有している。

【0073】

本ユーザーインターフェース装置は、ユーザに装着されるホルダ１６を有している。本実施例において、ホルダ１６は、具体的な形状は図示していないが、ユーザの衣服の首下に取り外し可能に装着されるネックレス状を呈している。ホルダ１６は、ユーザーインターフェース装置と、電子機器１５０としての音声ガイダンス装置とで兼用となっている。

【0074】

カメラ１１は、広角レンズ１１２と、広角レンズ１１２を通して撮像するイメージセンサ１１１とを備えている。カメラ１１は、図２に示されるように、ホルダ１６がユーザＵＢに装着されたときに広角レンズ１１２の画角中心がユーザＵＢの反対側を向くようにホルダ１６に搭載されている。

【0075】

広角レンズ１１２は、画角１８０度の魚眼レンズであり、カメラ１１は、ユーザのジェスチャ（腕の所作）に加え、ユーザの周囲の画像をも撮像する。ここで、本発明におけるカメラは、広角レンズを備えているため、ユーザの周囲としては、ユーザの正面も含まれる。

【0076】

制御部１３は、検出したユーザの操作所作と、周囲の画像とに基づいて電子機器１５０としての音声ガイダンス装置の動作を制御する操作信号を出力する。

【0077】

ホルダ１６には、カメラ１１と、ビデオメモリ１２と、制御部１３と、プログラムメモリ１５と、電子機器１５０と兼用の図示しないバッテリとが搭載されている。

【0078】

次に、本発明の実施例３によるユーザーインターフェース装置の動作を説明する。

【0079】

本ユーザーインターフェース装置が電子機器１５０としての音声ガイダンス装置と共に起動されると、カメラ１１のイメージセンサ１１１が広角レンズ１１２を通してユーザのジェスチャと、ユーザの正面の画像を同一フレーム内に撮像する。

【0080】

イメージセンサ１１１から出力される画像信号は、ビデオメモリ１２に一時的に記憶される。

【0081】

制御部１３は、プログラムメモリ１５に格納された動作プログラムに従い、ビデオメモリ１２に記憶された画像信号を解析してユーザの操作所作と、ユーザの正面の画像とに基づいて操作信号を出力する。

【0082】

電子機器１００は、制御部１３から出力された操作信号に従って動作する。

【0083】

次に、制御部１３による画像信号の解析動作を、より具体的な例を挙げて説明する。

【0084】

［音声ガイダンス装置の操作］
電子機器１００としての音声ガイダンス装置の操作を行うとき、本ユーザーインターフェース装置の制御部１３は、次のように動作する。即ち、ユーザのジェスチャと、ユーザの正面の画像とを音声ガイダンス装置の操作に利用する場合、図４のフロー図に示されるような画像解析が制御部１３によって行われる。尚、ユーザのジェスチャの認識については、前述の実施例において説明したため、以下では、ユーザの正面の画像に基づく操作のための画像解析についてのみ、説明する。

【0085】

ここで、音声ガイダンス装置を使用する美術館等の施設には、展示物等それぞれの近辺に各展示物等に固有のＩＤ記号（ＩＤ１、ＩＤ２、ＩＤ３・・・ＩＤｎ）が掲げられている。一方、本ユーザーインターフェース装置は、ＩＤ記号に対応付けて各展示物等のガイダンス音声の再生開始を指示する操作信号を記憶している。また、音声ガイダンス装置は、ＩＤ記号に対応付けて各展示物等のガイダンス音声を記憶している。

【0086】

ステップＳ３１において、制御部１３は、所定の周期でビデオメモリ１２から出力されるユーザの正面の画像と、予め記憶したＩＤ記号（ＩＤ１）との差分をとる。

【0087】

ステップＳ３２において、制御部１３は、当該差分を所定の閾値と比較する。比較の結果、差分が閾値以下の場合は、そのＩＤ記号（ＩＤ１）が対応する展示物等の前にユーザが居ると判断し、ステップＳ３３に移行する。一方、差分が閾値超過である場合、ステップＳ３４に移行する。

【0088】

ステップＳ３２において、制御部１３は、ＩＤ１に対応付けられた展示物等のガイダンス音声の再生開始を指示する操作信号を出力する。

【0089】

ステップＳ３４において、制御部１３は、ＩＤ記号をカウントアップし（ＩＤ１＋１＝ＩＤ２）、ステップＳ３１に戻る。尚、カウントアップ不可能である場合（ＩＤｎ）は、終了する。

【0090】

詳細な説明は省略するが、電子機器１００としての音声ガイダンス装置がガイダンス音声の再生を開始した後は、ユーザのジェスチャに応じて音量の加減、一時停止、巻き戻し／早送りとの操作が実行される。

【0091】

尚、実施例３の変形例として、ホルダ１６が操作時にユーザが動かす部位、例えば手首に装着されるようにすると共に、カメラ１１がユーザの周囲の画像変化をユーザの姿勢変化の相対値として撮像するように構成してもよい。この場合、制御部１３は、当該相対値をユーザの姿勢変化に変換する。

【産業上の利用可能性】

【0092】

以上説明した実施例に限定されることなく、本発明は、当該特許請求の範囲に記載された技術範囲内であれば、種々の変形が可能であることは云うまでもない。

【0093】

例えば、本発明は、携帯型音楽プレーヤ、電子楽器、音声ガイダンス装置に限らず、携帯電話機、ＰＤＡ（Personal Digital Assistant）、パーソナルコンピュータ、車載型オーディオおよび／またはビデオプレーヤ、据置型オーディオおよび／またはビデオプレーヤ、ナビゲーション機、手話翻訳装置、手話練習装置、ビデオゲーム機、デジタルカメラ、カムコーダ、自動車等の乗り物の運転装置等、ユーザの操作を受け付けるようになっている電子機器全般に適用可能である。

【0094】

また、本発明におけるホルダは、リストバンド状、ブローチ状、ネックレス状に限らず、ネクタイピン状、チェストバンド状、腰ベルト状、ウエストバッグ状、眼鏡状、ヘッドバンド状、ヘッドホン状、ヘッドセット状、アームバンド状、リストバンド状、レッグバンド状、アンクルバンド状等を呈していてもよい。

【符号の説明】

【0095】

１０ トランスミッタ
１１ カメラ
１２ ビデオメモリ
１３ 制御部
１４ 送信部
１５ プログラムメモリ
１６ ホルダ
２０ レシーバ
２１ 受信部
２２ 物理インターフェース変換部
１００、１５０ 電子機器
１１２ 広角レンズ
１５６ イヤホン

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】