特許 7245167 表示情報及び／又はデータの同時多機能操作を可能とするディスプレイを備えたスマートデバイス

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-03-14

(45)【発行日】2023-03-23

(54)【発明の名称】表示情報及び／又はデータの同時多機能操作を可能とするディスプレイを備えたスマートデバイス

(51)【国際特許分類】

   G06F 3/0488 20220101AFI20230315BHJP

   G06F 3/04847 20220101ALI20230315BHJP

   B62D 1/04 20060101ALI20230315BHJP

   G04G 21/08 20100101ALI20230315BHJP

【ＦＩ】

G06F3/0488

G06F3/04847

B62D1/04

G04G21/08 Z

【請求項の数】 5

(21)【出願番号】P 2019546362

(86)(22)【出願日】2018-02-23

(65)【公表番号】

(43)【公表日】2020-04-02

(86)【国際出願番号】 HU2018050010

(87)【国際公開番号】W WO2018154346

(87)【国際公開日】2018-08-30

【審査請求日】2021-02-22

(31)【優先権主張番号】P1700089

(32)【優先日】2017-02-27

(33)【優先権主張国・地域又は機関】HU

(73)【特許権者】

【識別番号】517371040

【氏名又は名称】ゲーザ バーリント

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋 真二

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山 知広

(74)【代理人】

【識別番号】100165191

【弁理士】

【氏名又は名称】河合 章

(74)【代理人】

【識別番号】100133835

【弁理士】

【氏名又は名称】河野 努

(72)【発明者】

【氏名】ゲーザ バーリント

【審査官】木村 慎太郎

(56)【参考文献】

【文献】韓国公開特許第１０－２０１５－００６１４２０（ＫＲ，Ａ）

【文献】特開２０１３－０９５２８９（ＪＰ，Ａ）

【文献】特開２０１２－２４７８３８（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１５／０１１１５５８（ＵＳ，Ａ１）

【文献】国際公開第２０１６／１７０３７４（ＷＯ，Ａ１）

【文献】特開２０１５－００５１８２（ＪＰ，Ａ）

【文献】特開２０１１－１２００９０（ＪＰ，Ａ）

【文献】米国特許第０８２４５１５８（ＵＳ，Ｂ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０４８８

Ｇ０６Ｆ ３／０４８４７

Ｂ６２Ｄ １／０４

Ｇ０４Ｇ ２１／０８

(57)【特許請求の範囲】

【請求項1】

ユーザにより選択可能な複数の機能性モードを有し、ユーザの第１の指のタッチにより制御されるタッチセンサー式表面を備える操作領域（２、２５、３２、４１）を有するスマート電子デバイスのディスプレイ（１３、２２）上に示されるイメージの制御された手動選択、及び／又はその表示パラメータの調整に対する取り決めであって、
前記操作領域（２、２５、３２、４１）は、前記ディスプレイ（１３、２２）の外部に配置され、
少なくとも１つの選択された機能において、指の動きは、イメージ及び／又は表示パラメータの第１の所定のグループを調整し、
前記スマート電子デバイスは、タッチセンサー式表面を備え、前記操作領域（２、２５、３２、４１）及び前記ディスプレイ（１３、２２）から離れて配置される更なる操作領域（１、２７、３７、３８、４２）を有し、
２つの操作領域は、共通の本体（１１、２４、３１）を通して機械的に接続され、
前記更なる操作領域（１、２７、３７、３８、４２）は、前記第１の指による前記操作領域のタッチと同時に、前記ユーザの同じ手の第２の指によりタッチできる位置に配置され、
選択された機能性モードにおいて、前記操作領域（２、２５、３２、４１）は、２つの互いに垂直な方向における前記第１の指の動きを感知し、前記更なる操作領域（１、２７、３７、３８、４２）に沿った前記第２の指の動きが、前記第１の所定のグループに属さない少なくとも１つの更なる表示パラメータを調整でき、
前記操作領域（２、２５、３２、４１）及び前記更なる操作領域（１、２７、３７、３８、４２）は、互いに角度を狭め、又はそれらは前記本体（１１、２４、３１）の反対側の表面上に配置され、
前記操作領域及び前記更なる操作領域上の２本の指の同時の動きは、所定の論理システムに従い互いに連動され、そのような動きは、同一の論理システムと論理的に関連付けられたイメージ移動となり、
前記２本の指の同時の動きは、３つの互いに垂直な座標（ｘ、ｙ、ｚ）に沿った前記ディスプレイ上の前記イメージを調整し、前記論理システムは、空間内の前記イメージの移動に対応する、取り決め。

【請求項2】

前記本体は、前記ユーザの手首に取り付けられるスマートウォッチ（１０）の本体（１１）により構成され、前記操作領域（２）はディスプレイ（１３）の端に接近して配置され、前記更なる操作領域（１）は前記ディスプレイ（１３）のその他の端に接近して配置され、前記更なる操作領域（１）は、前記操作領域（２）より実質的に小さい、請求項１に記載の取り決め。

【請求項3】

前記本体は、車のハンドル（２０）の一部により構成され、前記操作領域（２５）は、前記ハンドル（２０）を握るとき、手の指の範囲内に位置し、前記操作領域は運転者と向き合い、前記更なる操作領域（２７）は、同じの手の更なる指の範囲に配置されて、反対方向に向いている、請求項１に記載の取り決め。

【請求項4】

前記本体は、スマート電子デバイスの平坦な長方形本体（３１）により構成され、前記操作領域（３５）は前記デバイスの前面上に配置され、前記前面は前記デバイスのディスプレイを含み、前記更なる操作領域（３７、３８）は前記デバイスの後面上に配置され、前記操作領域（３５）は、前記選択された機能性モードと異なるデータ入力機能性モードにおいて、ジェスチャーの組合せにより、閉じた経路に沿って手段又は指のどちらかを移動させることによるハプティックフィードバックによるデータの入力を促す手段を有する、請求項１に記載の取り決め。

【請求項5】

キーボード（３９）を備えたラップトップ又はタブロイドの平面の操作面から空間に傾き出ることができる前記操作領域（４１）及び前記更なる操作領域（４２）が、本体又は複数の本体上に備えられる、請求項１に記載の取り決め。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、インテリジェント電子デバイスのディスプレイ上に表示される画像の手動制御された選択のため、及び／又は画像の表示パラメータを調整するための取り決め（arrangement）に関し、インテリジェント電子デバイスは、指のタッチにより制御される操作領域（handling field）を有し、画像の第１の所定グループ及び／又は表示のパラメータはユーザの指により制御できる。

【背景技術】

【0002】

コンピュータデバイスの迅速な発展が、全てが小型の幾つかの種類のスマートデバイスの実現を可能にしたような高いプロセッサーとデータストレージの能力を提供してきたことは周知の事実である。そのようなデバイスは、第１に、より多くの機能を備えたモバイルフォンであり、それら機能の中で、電話としての使用はその能力のほんの一部分を必要とし、又はそのようなモバイルフォンの能力と競う性能を有するスマートウォッチであり、更には異なるタスクを提供する特定のスマートデバイスである。車内に搭載することができるデバイスもまた、ナビゲーション用の使用に加え、幾つかのタスクを実行できるそのようなデバイスに属する。

【0003】

そのようなデバイスは、そのユーザがこれまでより高い選択の可能性の中から選べること、又はそのようなデバイスにより供給される電力を利用することを要求し、一方で、人間の手と指のサイズ、及びその身体構造上の制限又はその他の環境（例えば、車の運転者の手のその他のタスク、又はデバイスを保持する必要性）は、デバイスを操作する観点からの小型化及び複数の機能から選択ことに人間的制限を与える。

【0004】

そのような制限は、例えば、データの入力に必要なキーボードの設計であり、小型化は今までより小さい範囲での操作を要求する。データ入力に関する限り、発展の１つの方向は、手動のデータ入力をある程度まで置き換えられる音声認識の完成であり、又は少しの指の動きのスマートな認識が直接データ入力を提供できる解決方法の発明であり、ここでユーザは所定のジェスチャーの組合せを習得しなければならない。そのようなシステムは、公報WO2016/170374 A1から知ることができ、ここでは、直接データ入力に対して新たな実例的システムが提供されている。ここで、同じジェスチャーの組合せの検出に対して、２つの代替的な解決方法が提案されている。それらの１つにおいて、デバイスの操作表面の一部又は全部は、２つの互いに垂直な方向に沿って、デバイスの本体に対して僅かな範囲で移動できる。移動は閉じた経路（好ましくは、円形又は楕円形）により制限され、この経路に沿って、好ましくは直径方向に反対の位置に凹部又はブロックが配置され、これらは、タッチにより、又はハプティックフィードバックによりユーザの指で簡単に検出できる。経路の端の到達も検出できる。操作領域は、バイアスがかかったばねシステムにより、常に領域の中心に移動され、このため、文字の入力は、簡単に学習及び検出できるジェスチャーの組合せの描画（drawing）により行うことができる。同じ原理を用いるその他の実施例において、入力領域は固定であるが、一種の凹部の同様の経路を含み、それに沿って指を動かすことができる。特定の位置は、そのような位置に配置された凹部、又は指先により検出できる小さく膨らんだ島のどちらか一方により認識できる。文字の「描画」が同一の方法で行われることが、これら代替案の両方に対する特徴であり、この操作はハプティックフィードバックと常に関連し、即ち、文字の描写において、ユーザはディスプレイ領域を観察すること、又は視覚の観察により指移動を確認することを必要としない。

【0005】

ユーザの必要性に応じてディスプレイ上に示される画像の制御は、可能性とユーザ要求の正に増加する数のために益々複雑化するタスクを表す。タッチスクリーンデバイスの場合、幾つかのディスプレイ機能が、両方向での画像のシフト、増加、減少する縮尺、又は画像の回転を含む異なる方向で行われるジェスチャーにより実現できる。これら解決方法の共通の欠点は、それ自体もまた小さいディスプレイ領域から無視できない小さいエリアを利用することである。問題は、ディスプレイサイズの減少に伴い増加する。

【発明の概要】

【発明が解決しようとする課題】

【0006】

要求の進展は、リストに挙げられた可能性を上回る画像操作を必要とする。そのような要求に対する典型的な例は、これまでより多くのアプリケーションにおいて必要となる３Ｄでの可視化である。表示されるオブジェクトの３次元データは、デバイスのメモリ内で利用可能であるが、ユーザは、３つの相互に垂直な方向の１以上で画像をシフトさせ、任意の軸を中心に画像を回転させ、及びそのサイズを拡大又は縮小させる必要があるだろう。２次元平面において解決できない同様のタスクは、ナビゲーションの際に、所定のエリアの地図を異なる観点から観察すべきかどうかにあり、例えば、興味ある地点（ＰＯＩ）の選択されたタイプであり、交通ボード又は等高線又は周辺の建物をより近接に観察する必要があるかである。これらの異なるディスプレイコンテンツは、レイヤ内に配置され、画像制御のために、レイヤ間を移動する必要もある。

【0007】

画像操作パラメータの更なるグループは、３Ｄタスクと関連せず、探索（スクロール）タスクの最適性能と関連し、ここでは、先ず、より小さい領域が大きい領域内で探索され、目的に到達すると、拡大された画像がよりゆっくりと動かされるべきである。これは、パラメータに沿った移動（左右又は上下移動）において、探索速度を変えることもできなければならないことを意味する。要求の側面から、多数のパラメータを変更する必要があり、一方、これまでより小さいサイズを有する２次元領域において、操作できるパラメータ数は制限され、タスクは、例えば、幾つかの機能領域の関連付け及び使用により解決できる。

【課題を解決するための手段】

【0008】

本発明の目的は、このようなマン・マシンシステムの人間側のより良い利用であり、画像の制御及び操作の可能性を提供することであり、これにより、以前に使用された２次元制御により十分に操作することができるパラメータのグループが、更なるパラメータに対する調整の可能性を生成することにより拡張される。

【0009】

本発明の更なる目的は、可能性の拡大がユーザをより疲労させるのではなく、ユーザが快適に、ほぼ自動的な方法で必要な調整を実行できることにある。

【0010】

本発明の更なる目的は、利用可能なディスプレイ表面から貴重な部分を取り込まない、又は最大でも小さいエリアのみの更なる操作領域を提供することである。

【0011】

本発明のより更なる目的は、特定のアプリケーション（スマートウォッチ、車アプリケーション、モバイルデバイスでの使用）の制限を考慮することにより、そのようなアプリケーションの個別の重要な領域に以前に設定されたオブジェクトを最適化することである。

【0012】

本発明のより更なる目的は、拡大された画像の操作及び画像の制御タスクの提供の際に、画像の操作及び制御に対してもまた、上記した直接データ入力機能の使用を提供することである。

【0013】

これらの目的は、指のタッチにより制御される操作領域を含むスマート電子デバイスのディスプレイ上に示されるイメージの制御された手動選択、及び／又はイメージの表示パラメータの調整に対する取り決めを提供することにより達成されており、イメージの第１の所定グループ及び／又は表示パラメータはユーザの指により制御でき、本発明によれば、取り決めは、同じユーザの異なる指によりタッチできる位置に配置される更なる操作領域を含み、タッチされることにより、第１のグループに属さない少なくとも１つの更なる表示パラメータが調整され、更なる操作領域は上記の操作領域から間隔を空けて配置され、操作領域は共通の本体を通して機械的に相互接続される。

【0014】

自然な３Ｄの動きを再現するために、上記の操作領域が互いに角度を縮めるか、又はそれらが本体の反対面に配置されるかが望まれる。

【0015】

既知の直接データ入力の解決方法の利用において、操作領域又はその一部は、２つの互いに垂直な方向で閉じた経路に沿って本体に対して移動でき、操作領域のそのような設計は、第１の機能性モードにおいて、既知のデータ入力デバイスそれ自体の要素を構成し、異なるその他の機能性モードにおいて、本体に関連するそのような移動は更なる表示パラメータに関連する。

【0016】

上記の操作領域及び更なる操作領域上での２本の指の同時の動きが、所定の論理体系に従い互いに連動され、そのような動きが同一の論理体系と論理的に結合されたイメージの移動をもたらす場合、入力の習得はより容易になるであろう。

【0017】

表示パラメータの第１及び第２グループが、３つの互いに垂直な座標ｘ、ｙ、ｚに沿ったイメージの調整に要求されるパラメータを同時に含むとき、特定のイメージ処理の可能性が提供されるであろう。

【0018】

アプリケーションの重要な領域において、本体は、ユーザの手首に取り付けることができるスマートウォッチの本体により構成され、操作領域はディスプレイの端に接近して配置され、更なる操作領域はディスプレイのその他の端に接近して配置される。

【0019】

更なる操作領域が操作領域より実質的に小さい場合、全体のサイズを減らすことができる。

【0020】

更なる重要なアプリケーションにおいて、本体は車のハンドルの一部により構成される。

【0021】

この場合、ハンドルを握っているとき、操作領域は手の指の届く範囲内に置かれ、それは運転者に向いており、更なる操作領域は同じ手の別の指の届く範囲に配置され、反対方向を向いていることが好ましい。

【0022】

アプリケーションの更なる目的にかなった領域において、本体はスマート電子デバイスの平坦な長方形本体により構成され、操作領域はデバイスの前面上に配置され、前面はデバイスのディスプレイを含み、更なる操作領域はデバイの後面上に配置され、ジェスチャーの組合せにより閉じた経路に沿って手段又は指の一方を動かすことにより、操作領域はハプティックフィードバックによるデータの入力を促す手段を備え、一方、操作の更なるモードにおいて閉じた経路を含む同一の手段により、更なるイメージ表示パラメータを制御できる。

【0023】

アプリケーションの更なる可能な領域において、操作領域及び更なる操作領域は、キーボードを備えたラップトップ又はタブロイドの平面的な処理表面から空間に傾き出た１つの本体又は複数の本体上に提供される。

【0024】

本発明による取り決めは、タスクのセットの完全な解決方法を提供し、その使用は、以前に知られた解決方法と比べ、実質的に改善され、簡潔化された操作を提供する。

【0025】

本発明による取り決めは、その例示的な実施例と関連して、より詳細に記載され、ここで添付する図面が説明される。

【図面の簡単な説明】

【0026】

【図1】わずかに下から見えるスマートウォッチの斜視図を示す。

【図2】わずかに上から見える図１と類似した図である。

【図3】操作領域１の可動特性を可視化する拡大された見取り図である。

【図4】異なる方向から見えるスマートウォッチの簡潔な斜視図を示す。

【図5】軸ｚに沿った下方への動きの見取り図を示す。

【図6】軸ｚに沿った上方への動きの見取り図を示す。

【図7】軸ｘに沿った動きの見取り図を示す。

【図8】軸ｚを中心とする時計方向の回転動きの見取り図を示す。

【図9】その他の方向での軸ｚを中心とする回転の見取り図を示す。

【図10】平面ｘ、ｙ内の動きの見取り図を示す。

【図11】１つの方向での軸ｘを中心とする回転の見取り図を示す。

【図12】その他の方向での軸ｘを中心とする回転の見取り図を示す。

【図13】ハンドル及びダッシュボードとフロントガラスの一部を備えた車の内部空間の詳細を示す。

【図14】運転者に向いた第１の操作領域の操作を説明する見取り図である。

【図15】運転者に後ろを向けている第２の操作領域の見取り図である。

【図16】スマートモバイルデバイスの斜視図であり、全ディスプレイ領域が移動可能である。

【図17】図１６と類似した図であり、操作領域は上部表面の上部表面の小部分のみ利用する。

【図18】モバイルデバイスの後プレートを示す見取り図である。

【図19】ラップトップ又はデスクトップデバイスのプレート面の見取り図を示す。

【図20】図１９に示されるデバイスの上面から上方向に延びた２つの操作領域を示す。

【発明を実施するための形態】

【0027】

本発明によるデバイスの第１の実施例は、前腕（手首）の形状に従う大きく弧状をなす本体を有するスマートウォッチ１０であり、本体は、取り外し又は開放が可能なマッチングスタイルの金属ストラップ１２に回転による（pivotal）接続を通して連結され、ストラップは、前腕へのウォッチ１０の快適な装着を確保する。小型の電子システムがスマートウォッチ１０の内部に配置され、スマートウォッチ１０は、最先端のスマートモバイルフォンと同等の内部構造及び処理電力を有し、実質的に同一の機能、更に本事例において、従来の平面のハンドヘルド型のモバイルフォンで実現できなかった追加の機能を提供できる。本発明の本質は、スマートウォッチの内部設計にあるのではなく、この小型の電子デバイスがより快適、高速に、同時により効率的な方法で、そのユーザにより操作できる解決方法にある。

【0028】

ウォッチ１０の最大の中心領域は、好適には、しかし必須ではないが、タッチセンサー式であるわずかに湾曲したディスプレイ１３である。ウォッチ１０は、やや下から図１に示され、やや上から図２に示される。（図２に示されるように）ディスプレイ１３の上部端を超えて下側に（over and under）、第1の操作領域（センサー）１が配置され、タッチセンサー式の操作面を有し、水平方向に伸長し、実質的にウォッチ１０の全幅に沿って伸びた長方形を形成する細長い形状を有する。

【0029】

ディスプレイ１３の下に、第２の操作領域（センサー）２が配置され、図１において十分に見ることができ、ウォッチ１０の本体１１の幅と好ましくは等しい幅を持ち、しかし、第１の操作領域１の高さより大きい高さを有し、このため実質的により大きい表面を持つ。

【0030】

好適な実施例において、第２の操作領域２は、２つの矢印１４により図１において視覚化される２つの互いに垂直な軸に沿って、ウォッチ１０の本体１１に対してそれ自体と平行に（しかし、回転する場合はない）、わずかに動かすことができる平坦な機械的ユニットである。操作領域２と本体１１との間の機械的な接続及び関連する機能は、公報WO2016/170374 A1において開示されるように行われ、即ち、操作領域２は、図３に示される閉じた経路１５により制限される方法で、１本の指により動かすことができ、その動きはハプティックフィードバックを提供し、簡単な方法で習得できるデータ入力を可能にする。経路１５の直径方向に反対側でのハプティックフィードバックを容易にするため、それぞれ小型の凹部１６が形成され、これにより、使用中、経路１５に沿った移動の間、それぞれの凹部１６に達したときに検出できる。そのような操作領域２を移動することの可能性が、参照する公報に記載される直接データ入力を可能にする。図３に示される経路１５の実際のサイズはかなり小さく、変位の直径の長さは最大で数ミリメートルであることに注意すべきである。その他の点において、操作領域１及び２の表面は検出面であり、このため、表面に沿った指の動きは適切な電子ユニットにより検出され、それぞれの動きジェスチャーは、それらの方向、速度、サイズ及び位置に従い互いに区別できる。操作表面２がもう一方より実質的に大きいため、この表面に沿って指を動かすことにより、より詳細で、複雑なジェスチャーを作ることができる。

【0031】

図３に示される経路１５に沿った操作領域２の移動は、ばねバイアスに対して行われることに注目すべきであり、このため、ユーザは、彼／彼女が固定された表面に沿って指を動かしているのか（ただ撫でられているかのように）、又は、データ入力において要求される全体の操作領域２が力で押されて、動かされたのかを十分に区別することができる。

【0032】

操作領域２は、その上の（好ましくは、その上部分上の）異なる役割のために使用されるため、幾つかの小さい機能ゾーンが示され、図１において、その機能ゾーン１７は数字入力に関連して示されている。デフォルト状態において、操作領域２のセンサー入力機能が設定され、操作領域２が押されて、本体１１に対して完全に動かされる場合、データ入力機能がトリガーされるであろう。この開始状態において、データ入力は、例えば、英語のアルファベットの文字の入力に適合されるが、機能ゾーン１７の先の押下に続いて、それぞれの移動の組合せが数字又は句読点と関連するであろうし、更なる機能ゾーンを様々なワードプロセッシングのコマンド又は状態に割り当てることができる。これらの可能性は、引用された公報に詳細に記載されており、本発明の観点から、より強い押下状態において、操作領域２はデータ及びコマンドの入力に対しても使用できることが唯一重要である。

【0033】

本発明がスマートウォッチ１０に対して使用される場合において、操作領域１及び２が、それらが互いに離れて、例えば、ディスプレイ１３の２つの端に配置されるという事実により特徴付けられる点に注目することが重要であるだけでなく、それらのそれぞれの面が角度を狭め、これにより、後述される空間制御の処理をユーザに対して容易にすることもまた重要である。また、操作領域１及び２の距離及び配置が、何らかの肉体的な努力なしに、それら操作領域を２本の指により簡単にタッチできることを可能にする点に注目することも重要であり、これにより、それら操作領域は、別個に又は同時に、指により接触することができ、指をそれらに沿って快適に動かすことができる。

【0034】

図４は、操作領域１及び２により狭められた相対角度がより良く示されたスマートウォッチ１０の簡潔な斜視図を示す。それぞれの機能の理解をより簡単に提供するために、それら機能の基本的な特性が、その英語表現により図４～１２に示されている。

【0035】

それぞれの主な機能の実現を説明している図５～１２について述べる。操作は空間、即ち、３次元で行われるため、それぞれの指の横に、空間座標系の方向ｘ、ｙ及びｚが常に示されており、座標の右横に、ｘ－ｙ面内の投影が示され、これらの座標は太線を用いて描写されており、この太線に沿って、既定の機能（動きの組合せ）がディスプレイ１３上に示される画像又はカーソルの移動を制御できる。スマートウォッチ１０内のプロセッサーは、既定の機能の空間データを含み、それらを表示できると想定する。そのようなものは、例えば、地図の場合、ｘ、ｙ面内の地図自体の表示であり、同時に、（知られているように）それぞれ異なるレイヤ内で視覚化される特性があり（例えば、異なる興味ある地点、交通ボード、規則、等高線など）、これは、それらの同時の表示が画像を解釈するために余りに複雑なものにするためである。本体又は製品の内部座標が機械内で利用可能である場合（例えば、３Ｄプランニングの場合）、更なる機能及びプログラムがあり、ユーザは、ｘ、ｙ面内のみの構造を見ることができるだけでなく、深さ、即ち、軸ｚに沿った検査も可能とするべきであり、即ち、関心ある画像を選択できることが重要である。本発明による解決方法は、操作の間、指及び手がディスプレイ１３のエリアを覆うことのないように、このかなり洗練されたタスクを処理する簡単な方法を提供する。

【0036】

図５は、軸ｚに沿った下方への動き（スプレッド）を示す。そのような動きに対し、図内の矢印により示されるように、２本の指は操作領域１、２に沿って下方に移動するであろう。そして、深さ方向の下方にレイヤからレイヤに移動する。ウォッチ１０は、殆どの場合に左手首に装着されるため、空間内のコンテンツの下方移動は、２本の指を下方にスライドするための脳による自然なイメージングを表し、このため、そのような制御はユーザにとって最も自然なものである動きの組合せを利用する。

【0037】

図６は、上に記載した動きの正に反対である、軸ｚに沿った反対の上方への動き（ピッチ（pitch））を示す。

【0038】

図７は、両方向への２本の指を用いた制御の場合に、面ｘ－ｙ内のイメージの方向ｘでのシフト（スワイプと呼ばれる）を示す。実際に表示される面内において、基本的な動き（右から左と上下のシフト、及びイメージの拡大又は縮小）は、操作領域２の平面的な制御によっても実現できるが、ユーザが表示されたイメージの位置を制御することに慣れた場合、２本の指によるそのような動きの制御を保証することに価値があることに注意すべきである。

【0039】

図８は軸ｚを中心とした時計方向の回転の制御を示し、一方、図９は半時計方向の同様の制御を示す。複数指は反対方向に動かされるため、回転に関連する指の動きは、同様に自然な方法に対応する。

【0040】

図１０は、１本の指を用いた上述した動きを示し、ここで、操作領域２に沿ってのみ指を動かす必要がある。既定のイメージ面内で行われるこの種の動き（パン動き）は、最もよく使用される。このため、そのような動きは、複数の機能によりサポートされる。イメージ又はカーソルが表示された面内を移動しなければならないとき、先ず、探索される位置がより粗い移動で探索され、そして、目標が可視化されるようになると、移動の速度を低下させるべきである。用語「速度（speed）」は、単一の指の変位に関連したスクリーン上の変位と解釈される。速度の変化に対し、その他の操作領域１の存在は良い可能性を提供する。操作領域１が不変の位置１８において異なる指でタッチされた場合、この接触は、速度を変化するための制御イベントとして、ウォッチ１０内のプロセッサーにより検出されるであろう。幾つかの例において、１回の速度変更ステップのみが与えられれば十分であり、そのような場合、位置１８が単にタッチされれば十分である。幾つかの速度を持つシステムにおいて、複数の続く接触により制御が行われ、反対方向への変更も幾つかの方法を有する。そのような可能性の１つとして、操作領域１の右側がタッチされた場合に速度は減少し、左側がタッチされた場合に速度は増加する。代わりの可能性において、接触の位置は何の役割も持たないが、例えば、初めの３回の接触は速度を増加し、それぞれの続く接触は速度を減少する。本質は、速度の変化が行われる方法にはなく、速度の変化がその他の操作領域１のタッチにより可能となる事実にある。

【0041】

最後に、図１１と１２は、ｙ－ｚ面内の回転（即ち、軸ｙを中心とした）の制御を示し、ｘ－ｙ面にあるのと同様にユーザにおいて自然である。

【0042】

２本の指を用いた制御に加えて、先のデバイスで使用され、学習された機能が更に使用でき、即ち、２本の指がより大きい操作領域２に沿って離れた場合、イメージは拡大され、指が互いに向かい動いた場合、イメージはより小さくなるだろう。

【0043】

操作領域２が本体１１に対して移動した場合、更なる興味ある可能性が得られ、即ち、既定の面内に表示されるイメージのシフトが、上方向と下方向又は右から左を行うために１本の指により制御され、この可能性はスクロール機能に対応する。ディスプレイがこの方法により制御される場合、操作領域２はデータ入力モードではなく、このため、操作領域２は、図３に示される経路１５に沿った４つの凹部１６により定義される特定の位置のどれか１つに移動できる。それらの位置は、例えば、上方、下方、右及び左方向の移動のそれぞれに関連することができる。ディスプレイ制御モードにおいて、凹部１６のどれか１つへの操作領域２の配置が表示されたイメージを関連する方向に移動（シフト）するような方法で、ウォッチ１０内のプロセッサーをプログラムすることもでき、これは、何らかの別個の操作手段の必要なしに、上下及び左右方向へのスクロール機能の簡単な実現を意味する。本体１１に対して操作領域２を移動する可能性は、それぞれのジェスチャーを簡単に解釈することができる適切な表示制御機能に関連付けることにより更なる表示制御機能と関連付けることができることに注目すべきである。例えば、経路１５に沿った時計方向の回転ジェスチャーは、右へのイメージの回転となり、反対方向へのジェスチャーは、左へのイメージの回転をもたらす。このため、本発明によれば、単一の面内での従来の制御は、図５～１２に示されるように、まず、２つの操作領域を用いた制御により拡大され、これは、本体１１に対して操作領域２を移動させ、及び特定の位置の存在を利用する可能性と結合し、又は補完することができ、これにより、更なる表示機能が実現されて、操作の自由の程度が増加し、その快適性も増加する。

【0044】

複数の指によるイメージ及び／又はカーソルの３次元制御は、スマートウォッチの事例だけではなく、アプリケーションの幾つかのその他の領域においても利用できる。図１３は、車の内部空間の詳細を示し、ここで、ハンドル２０が運転者の両手によって握られている。車の内部空間において、内蔵のディスプレイ２１が示す通常の操作及び表示手段を見ることができ、フロントガラスの前に、ダッシュボードに内蔵されたスマート電子制御ユニットのプロジェクターにより生成される投影イメージ２２を見ることができる。イメージ２２は、ルートマップの詳細を示すことができる。本発明による制御のタスクは、先の実施例において説明された方法と同様の方法で、上述されているが、描写されていない制御ユニットにより運転者のために投影された表示されたイメージ２２の３次元制御である。車のハンドル２０及びステアリングコラムに固定されたその中心部分２３は、一般的に２つの接続部材２４により相互接続され、それらの１つは運転者の右手に近く、他の１つは左手に近い。運転者が右利きか又は左利きかに応じて、右又は左の接続部材２４の前面上に、センサーを用いた操作領域２５が配置され、これは、先の例におけるスマートウォッチ１０の操作領域２と同様の方法で設計し、及び制御することができる。違いは、操作領域２における事例でのように全操作領域２５が可動する方法で設計されて、それによりデータ入力タスクを解決することを不要にするより大きい利用可能な表面にある。この場合、異なるタイプのデータ入力がより好適となり、これは、公報WO2016/170374 A1内に第２のデータ入力モードとして記載され、ここで、操作領域が閉じた経路に沿って動かされるのではなく、閉じた経路が表面上に作られ、対角線上に反対の位置のタッチ検出を可能にする凹部が経路の端に配置される。この内部領域は、僅かに外側に膨らんだ島により、複数の部分、好ましくは４つの部分に分割され、そのような場合、全領域が経路に沿って移動されたとき、データ入力は同じ動きの組合せで行うことができ、しかし、この場合、指は固定された領域上を移動しなければならない。データ入力領域が操作領域２５の分離された部分上に提供されるのか、あるいはその横又はどこか都合の良い場所に配置されるのかどうかは、単なる詳細の課題である。

【0045】

図１４及び１５の拡大された図において、ハンドルの接続部材２４の前部分（図１４）及びその後部分（図１５）が示されている。図１４は、親指２６によりタッチされるよう、運転者に向かい合う前操作領域２５の拡大された図を示す。図１５は、運転者からより離れた接続部材２４の後面を示し、後面上に後操作領域２７が提供され、センサーを有し、運転者の人差し指２８によりタッチされる。

【0046】

投影される又はディスプレイ２１上に表示されるイメージ及び／又はカーソルを制御するため、同一の動きの組合せを、それらが図５～１２と関連して示されて、説明されたように、関連付けることができ、このため、軸ｘ、ｙ、ｚに沿った又はそれら軸を中心とした全ての種類の動きが、運転者の２本の指の簡単に連動された動きにより制御できる。２つの前及び後操作領域２５、２７が互いの後ろに配置され、同じ手の２本の指みより制御できることが好ましいが、異なる解決方法も可能であり、第２の操作領域２７がハンドル２０のその他の接続部材又は更なる接続部材の前面上に提供され、そして、これは、運転者の左手２９（図１３）の１本の指により制御される。

【0047】

上記したデータ入力機能は、先に参照した公報の両方のバージョンに従い実現することができる。前操作領域２５は、操作領域２の移動と同様に、ハンドルの接続部材２４に対して可動とすることができ、その場合、同様の機能的可能性が利用できるであろう。その代わりに、上記したように、閉じた経路が前操作領域２５の一部分上に備えられ、その領域上の指の動きが、データ入力又は特定のイメージ移動機能のどちらかをもたらすことが可能である。これまでに記載された実施例において、ウォッチ１０は手に固定され、もう一方の手の指がその上を自由に移動できたため、操作領域がその上に提供される構造は、手による特定の保持を必要としなかった。このアプリケーションにおいて、車内で、操作領域はハンドルにより保持され、ハンドルを握る手の指は領域に沿って簡単な方法で移動できる。

【0048】

スマートモバイルフォン又はその他のインテリジェント電子デバイスの操作要素の場合、３次元制御に対する、又は操作機能の拡大に対する最も頻繁な要求の１つは、それ自体に存在する。そのような場合、指の自由な動きは、手によりデバイス自体を保持する必要性により制限され、即ち、手は複数のタスクを有し、先の事例でのように、デバイスを落とす危険を伴わずに、指の動きは極めて自由が少ない。

【0049】

図１６及び１７において、それぞれ典型的なスマートモバイルデバイスが示され、これらは、先に参照した公報WO2016/170374 A1に記載されるように、データ入力操作領域を基本的に備える。図１６に示されるデバイス３０は、平坦な長方形の本体３１を有し、本体は、同時にタッチスクリーンディスプレイである操作領域３２によりほぼ完全にカバーされる。操作領域３２は、公報で詳細に記載されるように、２つの矢印３３のそれぞれの方向に沿って、一定の制限内で移動できる。図１７に示されるデバイス３４は、より小さい操作領域３５のみを有するという点においてのみ、それと異なり、操作領域は、一定の制限内で両方向に移動することもでき、デバイス３４の前面の大部分をそのまま残し、その上で、タッチスクリーンディスプレイもまた提供される。操作領域３５の表面は、同時に、それに接触する指の動きを検出できるセンサー面である。操作領域３５は、参照された公報に記載されるように、データ入力に対しても当然に使用することができる。

【0050】

図１８は、上記のデバイス３０、３４の後ろ側を示し、好ましくは、中心部において、突起部３６が、デバイスの長手方向の軸と平行に、表面から僅かに盛り上がっている。突起部の両側上に、それぞれ操作領域３７、３８が提供される。デバイスが手により保持されるとき、親指は、デバイスの前側上に備えられた前操作領域３２又は３５を自由に動かすことができ、更なる指が、デバイスを落とす危険なしに、後表面に沿って移動でき、しかし、保持機能が制限を与えるため、この移動は、指がその他のタスクを持たない場合のように優れて、洗練されてはないだろう。後側をタッチする指の１つは、突起部３６の存在を感じるためのそのような自由度を有し、突起部３６の右又は左側における領域３７又は３８に接触しているかどうかを区別できる。

【0051】

そのようなデバイスにおいて、前面上の操作領域は、再び、複数の方法で使用され、即ち、それが僅かに押されて、デバイス３０又は３４の本体３１に対して方向ｘ又はｙに沿って動かされる場合、データ入力機能が選択されて、移動と共に、データ入力が行われる。

【0052】

操作領域がそのバイアスのかかった基本位置から離れないような小さい力で、指が操作領域３２又は３５上を移動するとき、指の移動に伴い、図１０に示されるように、パン制御が実現できる。同時に、例えば、突起部３６から左側の操作領域３７がタッチされる場合（即ち、デバイスを保持することにより拘束された指を動かす必要がない）、機能の変更が行われ、操作領域３２又は３５を動かすことにより、更なる動き機能を選択することができる。操作領域３２又は３５は、異なるジェスチャーを作成することで、中心部から凹部１６のいずれかへの放射状の移動により動かすことができ、それら凹部に押下することができ、又は閉じた経路に沿って動かすことができる。それぞれのイメージ又はカーソル制御機能はこれらの位置及びジェスチャーと関連付けることができ、例えば、操作領域が軸ｙに沿って上側凹部に押された場合、イメージは上方向又は反対に下方向に移動し、それを横断する対角線の端部に押下すると、イメージは左又は右にシフトし、時計方向の円弧のジェスチャーは右への回転となり、反対方向の円弧によるジェスチャーは左への回転となる。興味ある組合せに達することができ、例えば、操作領域が縦の凹部に押されると、イメージは上に移動し、この場合において、圧力が減少されて、指が検出領域に沿って同一の縦方向に動く場合、指が離れるか、持ち上げられるまで、開始された縦のイメージ移動は継続する。

【0053】

後側にある指が突起部３６の左側において操作領域３７にタッチせず、右側の操作領域３８にタッチされる場合、機能の変更が行われ、前操作領域３２又は３５の移動の場合、上方向又は下方向の移動である方向ｚに沿った移動の制御が行われ、先のケースで行われた制御に垂直である。

【0054】

図１６～１８に示される解決方法は、特別なイメージ制御モードにおける本質を有さないが、従来の制御に加えてセンサーの操作表面に沿って指を動かすことを加えて、更なる制御次元が提供されるであろう。これを達成するために、操作領域自体は、デバイスの本体に対して移動しなければならず、デバイスの後側における適当な領域をタッチすることにより、２つの更なる機能をこれらの可能性に追加することができ、これは、落下の危険なしに、後側においてデバイスを保持する指により実行される。

【0055】

最後に、図１９及び２０を参照して、図１９は、従来のラップトップ４０又は同様のコンピュータの上面図を示し、キーボードはエリア３９により記号化され、その前に、実質的に長方形の領域が、カーソル制御領域として従来のタッチパッドに対して提供される。本発明によれば、既定のエリア内で、互いに対して角度を持って起き上がる２つの操作領域４１、４２が備えられるような方法で、操作領域の拡張された機能が提供される。最初又は基本の位置において、これらの領域はラップトップ４０の上部平面に配置され、２つの部分に分割されているにも関わらず、それらは従来のカーソル制御機能に使用できる。操作領域４１、４２の横に、ボタン４３又は同様の手段が提供され、ボタン４３の押下の結果として、２つの操作領域４１、４２は（ばねバイアスのおかげで）上部平面から飛び出し、図２０に示される位置につくであろう。図には示されないガイド要素が、操作領域４１、４２のこの傾斜位置が安定して保たれるようにする。この持ち上がった位置において、操作領域４１、４２の役割は分離されており、それらは、図１～１２に関連したスマートウォッチ１０の記載に関連して記載されるように、操作領域１、２の機能を仮定するであろう。２つの操作領域４１、４２は分離して、それぞれに異なる傾斜した平面を有するため、スマートウォッチ１０の制御に関連して記載されたものと同一の機能が、それらにより実現できる。角度を持って傾斜した設計が好適ではあるが、代替の解決方法も実現可能であり、ここで、長方形のサポート要素が上部平面に対して直立の位置を取り、操作領域はこの平面上の前面及び後面上に備えられる。

【0056】

本発明は、示された例示の実施例の何れにも限定されず、これは、その本質が操作機能の実質的な拡張と簡素化にあるためであり、一方、本発明は、これまで解決不可能として見られていたタスクを解決し、例えば、スマートウォッチ１０のような小型の操作領域を持つデバイスは、ラップトップ又はモバイルフォンの操作可能性を有するだけでなく、それらの機能を考慮して、そのようなデバイスに関して、優れたサービスを提供できる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】