特表2024-541931 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

青山学院大学 (神奈川県相模原市中央区淵野辺)

▶ テレフオンアクチーボラゲット　エル　エム　エリクソン（パブル）の特許一覧

特表2024-541931仮想入力デバイスの人間工学ベース再設定

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-11-13

(54)【発明の名称】仮想入力デバイスの人間工学ベース再設定

(51)【国際特許分類】

G06F 3/01 20060101AFI20241106BHJP

G06F 3/023 20060101ALI20241106BHJP

【ＦＩ】

G06F3/01 510

G06F3/023 460

G06F3/01 570

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024524986

(86)(22)【出願日】2021-10-29

(85)【翻訳文提出日】2024-06-21

(86)【国際出願番号】 EP2021080160

(87)【国際公開番号】W WO2023072404

(87)【国際公開日】2023-05-04

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．Ｂｌｕ－ｒａｙ

２．コンパクトフラッシュ

(71)【出願人】

【識別番号】598036300

【氏名又は名称】テレフオンアクチーボラゲットエルエムエリクソン（パブル）

(74)【代理人】

【識別番号】100109726

【弁理士】

【氏名又は名称】園田吉隆

(74)【代理人】

【識別番号】100150670

【弁理士】

【氏名又は名称】小梶晴美

(74)【代理人】

【識別番号】100199705

【弁理士】

【氏名又は名称】仙波和之

(74)【代理人】

【識別番号】100194294

【弁理士】

【氏名又は名称】石岡利康

(72)【発明者】

【氏名】クリステンソン，アンドレアス

(72)【発明者】

【氏名】オークヴィスト，ペータル

(72)【発明者】

【氏名】アーングレン，トミ

【テーマコード（参考）】

5B020

5E555

【Ｆターム（参考）】

5B020AA02

5B020CC11

5B020DD04

5B020DD11

5B020DD30

5E555AA42

5E555BA01

5E555BB01

5E555BB20

5E555BC13

5E555BC19

5E555BE17

5E555CA02

5E555CA21

5E555CA22

5E555CA42

5E555CB66

5E555DB20

5E555DC19

5E555DC21

5E555DC25

5E555DC30

5E555EA03

5E555EA22

5E555FA00

(57)【要約】

仮想入力デバイスの人間工学ベース再設定のための機構が提供される。方法が、制御デバイスによって実施される。本方法は、ユーザが仮想環境において仮想入力デバイスと対話している間、センサーからユーザの姿勢および／または動きの情報を取得することを含む。本方法は、ユーザの姿勢および／または動きを参照人間工学データと比較することによって、ユーザの姿勢および／または動きが人間工学基準を満たすか否かを決定することを含む。本方法は、ユーザの姿勢および／または動きが人間工学基準を満たすことができないとき、仮想入力デバイスの少なくとも１つのセッティングを再設定することを含む。
【選択図】図４

【特許請求の範囲】

【請求項1】

仮想入力デバイス（１２０）の人間工学ベース再設定のための制御デバイス（６００）であって、前記制御デバイス（６００）が処理回路（６１０）を備え、前記処理回路（６１０）が、前記制御デバイス（６００）に、
ユーザ（２１０ａ、２１０ｂ）が仮想環境において前記仮想入力デバイス（１２０）と対話している間、センサー（１１２）から前記ユーザ（２１０ａ、２１０ｂ）の姿勢および／または動きの情報を取得することと、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きを参照人間工学データと比較することによって、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが人間工学基準を満たすか否かを決定することと、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記人間工学基準を満たすことができないとき、前記人間工学基準を満たすことにより近くなるように前記姿勢および／または動きを変更するように前記ユーザ（２１０ａ、２１０ｂ）に示唆するために、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きと前記参照人間工学データとの関数として、前記仮想入力デバイス（１２０）の少なくとも１つのセッティング（４１０ａ、４１０ｂ）を再設定することと
を行わせるように設定された、制御デバイス（６００）。

【請求項2】

前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが、前記ユーザ（２１０ａ、２１０ｂ）のデジタルツインを規定するユーザモデル（２２０ａ、２２０ｂ）によって表され、前記デジタルツインは、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記人間工学基準を満たすか否かを決定するとき、前記参照人間工学データと比較される、請求項１に記載の制御デバイス（６００）。

【請求項3】

前記デジタルツインが、前記ユーザ（２１０ａ、２１０ｂ）のデジタル表現から抽出された相対寸法をもつ、前記ユーザ（２１０ａ、２１０ｂ）の腕、手、脚、足、首、頭部および胴のうちのいずれか、またはそれらの任意の組合せを表す、請求項２に記載の制御デバイス（６００）。

【請求項4】

しきい値が、前記ユーザ（２１０ａ、２１０ｂ）のデジタル表現から導出された、前記ユーザ（２１０ａ、２１０ｂ）の腕、手、頭部および／または胴の相対寸法に依存する、請求項１から３のいずれか一項に記載の制御デバイス（６００）。

【請求項5】

前記参照人間工学データが、前記ユーザ（２１０ａ、２１０ｂ）によって使用されるべき姿勢および／または動きを表し、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きは、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記参照人間工学データから第１のしきい値を超えて逸脱したとき、前記人間工学基準を満たすことができず、それにより、前記ユーザ（２１０ａ、２１０ｂ）が、前記参照人間工学データにより近くなるように前記姿勢および／または動きを変更するように示唆される、請求項１から４のいずれか一項に記載の制御デバイス（６００）。

【請求項6】

前記参照人間工学データが、前記ユーザ（２１０ａ、２１０ｂ）によって回避されるべき姿勢および／または動きを表し、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きは、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記参照人間工学データから第２のしきい値未満逸脱したとき、前記人間工学基準を満たすことができず、それにより、前記ユーザ（２１０ａ、２１０ｂ）が、前記参照人間工学データからさらに離れるように前記姿勢および／または動きを変更するように示唆される、請求項１から５のいずれか一項に記載の制御デバイス（６００）。

【請求項7】

前記処理回路（６１０）が、前記制御デバイス（６００）に、
前記ユーザ（２１０ａ、２１０ｂ）の前の姿勢および／または動きを表す履歴データを取り出すことを行わせるようにさらに設定され、さらに、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記人間工学基準を満たすか否かを決定することが、前記履歴データの関数である、請求項１から６のいずれか一項に記載の制御デバイス（６００）。

【請求項8】

前記処理回路（６１０）が、前記制御デバイス（６００）に、
経時的に前記ユーザ（２１０ａ、２１０ｂ）の追跡された姿勢および／または動きをアグリゲートすることと、
前記ユーザ（２１０ａ、２１０ｂ）の前記追跡された姿勢および／または動きからユーザモデル（２２０ａ、２２０ｂ）を構築することと
を行わせるようにさらに設定された、請求項１から７のいずれか一項に記載の制御デバイス（６００）。

【請求項9】

前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが、前記ユーザ（２１０ａ、２１０ｂ）のデジタル表現を表すセンサーデータを記録するように設定された少なくとも１つのセンサー（１１２）によって追跡され、前記ユーザ（２１０ａ、２１０ｂ）の前記デジタル表現が、前記仮想環境におけるユーザ入力デバイスに関する前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きを追跡するために分析される、請求項１から８のいずれか一項に記載の制御デバイス（６００）。

【請求項10】

前記ユーザ（２１０ａ、２１０ｂ）の前記デジタル表現が、前記ユーザ（２１０ａ、２１０ｂ）の手位置および／または動きと、前記ユーザ（２１０ａ、２１０ｂ）の腕位置および／または動きと、前記ユーザ（２１０ａ、２１０ｂ）の頭部位置および／または動きと、前記ユーザ（２１０ａ、２１０ｂ）の首位置および／または動きと、前記ユーザ（２１０ａ、２１０ｂ）の胴位置および／または動きとのうちの少なくとも１つに関係する、請求項９に記載の制御デバイス（６００）。

【請求項11】

前記仮想入力デバイス（１２０）の前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）を再設定することが、前記仮想入力デバイス（１２０）が展開される物理的環境の少なくとも１つの性質によって制約される、請求項１から１０のいずれか一項に記載の制御デバイス（６００）。

【請求項12】

前記制約が、前記物理的環境の前記制御デバイス（６００）によって受信された情報から、前記制御デバイス（６００）によって導出される、請求項１１に記載の制御デバイス（６００）。

【請求項13】

前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）が、前記仮想入力デバイス（１２０）上のボタンおよび／またはキーのレイアウトに関係し、前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）は、前記ボタンおよび／またはキーの前記レイアウトが前記仮想入力デバイス（１２０）上で変更されることによって再設定される、請求項１から１２のいずれか一項に記載の制御デバイス（６００）。

【請求項14】

前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）が、前記仮想入力デバイス（１２０）上のボタンおよび／またはキーのサイズおよび／または形状に関係し、前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）は、前記ボタンおよび／またはキーの前記サイズおよび／または形状が前記仮想入力デバイス（１２０）上で変更されることによって再設定される、請求項１から１３のいずれか一項に記載の制御デバイス（６００）。

【請求項15】

前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）が、前記仮想入力デバイス（１２０）のサイズおよび／または形状に関係し、前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）は、前記仮想入力デバイス（１２０）の前記サイズおよび／または形状が変更されることによって再設定される、請求項１から１４のいずれか一項に記載の制御デバイス（６００）。

【請求項16】

前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）が、前記仮想入力デバイス（１２０）の空間ロケーションに関係し、前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）は、前記仮想入力デバイス（１２０）の前記空間ロケーションが変更されることによって再設定される、請求項１から１５のいずれか一項に記載の制御デバイス（６００）。

【請求項17】

前記仮想入力デバイス（１２０）の前記少なくとも１つのセッティング（４１０ａ、４１０ｂ）が、初期セッティングから、少なくとも１つの中間セッティングを介して、最終セッティングまで段階的に再設定される、請求項１から１６のいずれか一項に記載の制御デバイス（６００）。

【請求項18】

前記仮想入力デバイス（１２０）が、仮想キーボード、仮想コンピュータマウス、仮想リモートコントローラ、仮想ゲーミングコントローラのうちのいずれかである、請求項１から１７のいずれか一項に記載の制御デバイス（６００）。

【請求項19】

前記仮想環境が、エクステンデッドリアリティ（ＸＲ）仮想環境である、請求項１から１８のいずれか一項に記載の制御デバイス（６００）。

【請求項20】

前記仮想環境が、拡張現実（ＡＲ）仮想環境、仮想現実（ＶＲ）仮想環境、または複合現実（ＭＲ）仮想環境のいずれかである、請求項１から１９のいずれか一項に記載の制御デバイス（６００）。

【請求項21】

前記制御デバイス（６００）が、通信デバイスの一部であるか、または通信デバイスと一体化される、請求項１から２０のいずれか一項に記載の制御デバイス（６００）。

【請求項22】

請求項１から２１のいずれか一項に記載の制御デバイス（６００）と、ユーザインターフェースデバイス（１１０）とを備えるシステム（１００）であって、前記ユーザインターフェースデバイス（１１０）が、仮想入力デバイス（１２０）を表面上で可視にするための投影モジュール（１１４）と、前記仮想入力デバイス（１２０）とのユーザ（２１０ａ、２１０ｂ）のユーザ対話を検知するためのセンサー（１１２）とを備える、システム（１００）。

【請求項23】

仮想入力デバイス（１２０）の人間工学ベース再設定のための方法であって、前記方法が制御デバイス（６００）によって実施され、前記方法は、
ユーザ（２１０ａ、２１０ｂ）が仮想環境において前記仮想入力デバイス（１２０）と対話している間、センサー（１１２）から前記ユーザ（２１０ａ、２１０ｂ）の姿勢および／または動きの情報を取得すること（Ｓ１０２）と、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きを参照人間工学データと比較することによって、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが人間工学基準を満たすか否かを決定すること（Ｓ１１０）と、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記人間工学基準を満たすことができないとき、前記人間工学基準を満たすことにより近くなるように前記姿勢および／または動きを変更するように前記ユーザ（２１０ａ、２１０ｂ）に示唆するために、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きと前記参照人間工学データとの関数として、前記仮想入力デバイス（１２０）の少なくとも１つのセッティング（４１０ａ、４１０ｂ）を再設定すること（Ｓ１１２）と
を含む、方法。

【請求項24】

仮想入力デバイス（１２０）の人間工学ベース再設定のためのコンピュータプログラム（８２０）であって、前記コンピュータプログラムがコンピュータコードを備え、前記コンピュータコードは、制御デバイス（６００）の処理回路（６１０）上で稼働されたとき、前記制御デバイス（６００）に、
ユーザ（２１０ａ、２１０ｂ）が仮想環境において前記仮想入力デバイス（１２０）と対話している間、センサー（１１２）から前記ユーザ（２１０ａ、２１０ｂ）の姿勢および／または動きの情報を取得すること（Ｓ１０２）と、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きを参照人間工学データと比較することによって、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが人間工学基準を満たすか否かを決定すること（Ｓ１１０）と、
前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きが前記人間工学基準を満たすことができないとき、前記人間工学基準を満たすことにより近くなるように前記姿勢および／または動きを変更するように前記ユーザ（２１０ａ、２１０ｂ）に示唆するために、前記ユーザ（２１０ａ、２１０ｂ）の前記姿勢および／または動きと前記参照人間工学データとの関数として、前記仮想入力デバイス（１２０）の少なくとも１つのセッティング（４１０ａ、４１０ｂ）を再設定すること（Ｓ１１２）と
を行わせる、コンピュータプログラム（８２０）。

【請求項25】

請求項２４に記載のコンピュータプログラム（８２０）と、前記コンピュータプログラムが記憶されるコンピュータ可読記憶媒体（８３０）とを備えるコンピュータプログラム製品（８１０）。

【発明の詳細な説明】

【技術分野】

【0001】

本明細書で提示される実施形態は、仮想入力デバイスの人間工学ベース再設定のための制御デバイス、方法、コンピュータプログラム、およびコンピュータプログラム製品に関する。

【背景技術】

【0002】

光学仮想キーボードなどの仮想入力デバイスは、物理キーの必要なしに仮想現実（ＶＲ）または拡張現実（ＡＲ）環境における文字の入力を可能にする。仮想キーボードとの人間対話は、たいていタッチスクリーンインターフェースを介して行われるが、ＶＲまたはＡＲ環境における異なる形式で行われることもある。この点において、光学仮想キーボードは、人間の手および指の動きを光学的に検出および分析し、それらを、ペイントされたまたは投影されたキーをもつ表面など、物理的に存在しない入力デバイス上での動作として解釈するように設定されたＶＲまたはＡＲにおけるユーザインターフェースの例である。このようにして、光学仮想キーボードは、（マウス、キーボード、および他のデバイスなどの）手動で動作される入力デバイスの無制限のタイプをエミュレートすることができる。さらに、光学仮想キーボードの別の例は、コンピュータ入力デバイスの形式である投影キーボードであり、それにより、仮想キーボードの画像が表面上に投影される。ユーザがキーの画像によってカバーされた表面にタッチしたとき、入力デバイスは対応するキーストロークを記録する。その上、いくつかの光学仮想キーボードは、レーザーと触覚センサーとの組合せに基づき、マイクロ振動検出と組み合わせた、投影されたエリア上の指（ｆｉｎｇｅｒ－ｏｎ－ｐｒｏｊｅｃｔｅｄ－ａｒｅａ）が考慮される。たとえば、タップでレンダリングされた振動と同時に検出された投影された指タップが、キーストロークとして示している。機械的入力ユニットは、それにより、特定の適用例のために、およびユーザの生理学のために潜在的に最適化されたそのような仮想入力デバイスによって置き換えられ、手動データ入力の速度、単純さ、および明瞭さを維持する。

【0003】

しかしながら、ユーザが仮想入力デバイスの正しいセッティングを見つけることは煩雑であり得、したがって、仮想入力デバイスは、実際、特定の適用例のために、およびユーザの生理学のために最適化される。ユーザがそのような正しいセッティングを見つけることが困難である場合、ユーザは、セッティングを行うことを回避するか、または仮想入力デバイスを使用することさえ回避するかのいずれかを行い得る。

【0004】

仮想入力デバイスのユーザは、したがって、依然として、ユーザについての人間工学問題を生じることがある。したがって、改善された人間工学を伴う仮想入力デバイスが依然として必要である。

【発明の概要】

【0005】

本明細書で説明される実施形態の目的は、上記の問題点に対処すること、および仮想入力デバイスとの対話中にユーザのための人間工学を改善する技法を提供することである。

【0006】

第１の態様によれば、目的は、仮想入力デバイスの人間工学ベース再設定のための制御デバイスを提供することによって対処される。本制御デバイスは、処理回路を備える。処理回路は、本制御デバイスに、ユーザが仮想環境において仮想入力デバイスと対話している間、センサーからユーザの姿勢および／または動きの情報を取得することを行わせるように設定される。処理回路は、本制御デバイスに、ユーザの姿勢および／または動きを参照人間工学データと比較することによって、ユーザの姿勢および／または動きが人間工学基準を満たすか否かを決定することを行わせるように設定される。処理回路は、本制御デバイスに、ユーザの姿勢および／または動きが人間工学基準を満たすことができないとき、仮想入力デバイスの少なくとも１つのセッティングを再設定することを行わせるように設定される。少なくとも１つのセッティングは、人間工学基準を満たすことにより近くなるように姿勢および／または動きを変更するようにユーザに示唆するために、ユーザの姿勢および／または動きと参照人間工学データとの関数として再設定される。

【0007】

第２の態様によれば、目的は、仮想入力デバイスの人間工学ベース再設定のための方法を提供することによって対処される。本方法は、制御デバイスによって実施される。本方法は、ユーザが仮想環境において仮想入力デバイスと対話している間、センサーからユーザの姿勢および／または動きに関する情報を取得することを含む。本方法は、ユーザの姿勢および／または動きを参照人間工学データと比較することによって、ユーザの姿勢および／または動きが人間工学基準を満たすか否かを決定することを含む。本方法は、ユーザの姿勢および／または動きが人間工学基準を満たすことができないとき、仮想入力デバイスの少なくとも１つのセッティングを再設定することを含む。少なくとも１つのセッティングは、人間工学基準を満たすことにより近くなるように姿勢および／または動きを変更するようにユーザに示唆するために、ユーザの姿勢および／または動きと参照人間工学データとの関数として再設定される。

【0008】

第３の態様によれば、目的は、仮想入力デバイスの人間工学ベース再設定のためのコンピュータプログラムを提供することによって対処され、本コンピュータプログラムはコンピュータプログラムコードを備え、コンピュータプログラムコードは、制御デバイス上で稼働されたとき、制御デバイスに、第２の態様による方法を実施させる。

【0009】

第４の態様によれば、目的は、第４の態様によるコンピュータプログラムと、コンピュータプログラムが記憶されるコンピュータ可読記憶媒体とを備えるコンピュータプログラム製品を提供することによって対処される。コンピュータ可読記憶媒体は、非一時的コンピュータ可読記憶媒体であり得る。

【0010】

第４の態様によれば、目的は、第１の態様による制御デバイスと、ユーザインターフェースデバイスとを備えるシステムを提供することによって対処される。ユーザインターフェースデバイスは、仮想入力デバイスを表面上で可視にするための投影モジュールを備える。ユーザインターフェースデバイスは、仮想入力デバイスとのユーザのユーザ対話を検知するためのセンサーをさらに備える。

【0011】

有利には、これらの態様は、仮想入力デバイスの形状、サイズ、形式、および／または物理的配置がユーザの個々の物理的特性に適応されることを可能にする。このようにして、ユーザは、仮想入力デバイスに関してより人間工学的な位置を仮定するように促され、したがって、仮想入力デバイスと対話することによって生じる人間工学問題を回避するか、低減するか、または少なくとも緩和する。

【0012】

いくつかの実施形態では、ユーザの姿勢および／または動きは、ユーザのデジタルツインを規定するユーザモデルによって表され、デジタルツインは、ユーザの姿勢および／または動きが人間工学基準を満たすか否かを決定するとき、参照人間工学データと比較される。

【0013】

いくつかの実施形態では、デジタルツインは、ユーザのデジタル表現から抽出された相対寸法をもつ、ユーザの腕、手、脚、足、首、頭部および胴のうちのいずれか、またはそれらの任意の組合せを表す。

【0014】

いくつかの実施形態では、しきい値は、ユーザのデジタル表現から導出された、ユーザの腕、手、頭部および／または胴の相対寸法に依存する。

【0015】

いくつかの実施形態では、参照人間工学データは、ユーザによって使用されるべき姿勢および／または動きを表し、ユーザの姿勢および／または動きは、ユーザの姿勢および／または動きが参照人間工学データから第１のしきい値を超えて逸脱したとき、人間工学基準を満たすことができず、それにより、ユーザは、参照人間工学データにより近くなるように姿勢および／または動きを変更するように示唆される。

【0016】

いくつかの実施形態では、参照人間工学データは、ユーザによって回避されるべき姿勢および／または動きを表し、ユーザの姿勢および／または動きは、ユーザの姿勢および／または動きが参照人間工学データから第２のしきい値未満逸脱したとき、人間工学基準を満たすことができず、それにより、ユーザは、参照人間工学データからさらに離れるように姿勢および／または動きを変更するように示唆される。

【0017】

いくつかの実施形態では、処理回路は、制御デバイスに、
ユーザの前の姿勢および／または動きを表す履歴データを取り出すことを行わせるようにさらに設定され、さらに、ユーザの姿勢および／または動きが人間工学基準を満たすか否かを決定することが、履歴データの関数である。

【0018】

いくつかの実施形態では、処理回路は、制御デバイスに、
経時的にユーザの追跡された姿勢および／または動きをアグリゲートすることと、
ユーザの追跡された姿勢および／または動きからユーザモデルを構築することと
を行わせるようにさらに設定される。

【0019】

いくつかの実施形態では、ユーザの姿勢および／または動きは、ユーザのデジタル表現を表すセンサーデータを記録するように設定された少なくとも１つのセンサーによって追跡され、ユーザのデジタル表現は、仮想環境におけるユーザ入力デバイスに関するユーザの姿勢および／または動きを追跡するために分析される。

【0020】

いくつかの実施形態では、ユーザのデジタル表現は、ユーザの手位置および／または動きと、ユーザの腕位置および／または動きと、ユーザの頭部位置および／または動きと、ユーザの首位置および／または動きと、ユーザの胴位置および／または動きとのうちの少なくとも１つに関係する。

【0021】

いくつかの実施形態では、仮想入力デバイスの少なくとも１つのセッティングを再設定することは、仮想入力デバイスが展開される物理的環境の少なくとも１つの性質によって制約される。

【0022】

いくつかの実施形態では、制約は、物理的環境の制御デバイスによって受信された情報から、制御デバイスによって導出される。

【0023】

いくつかの実施形態では、少なくとも１つのセッティングは、仮想入力デバイス上のボタンおよび／またはキーのレイアウトに関係し、少なくとも１つのセッティングは、ボタンおよび／またはキーのレイアウトが仮想入力デバイス上で変更されることによって再設定される。

【0024】

いくつかの実施形態では、少なくとも１つのセッティングは、仮想入力デバイス上のボタンおよび／またはキーのサイズおよび／または形状に関係し、少なくとも１つのセッティングは、ボタンおよび／またはキーのサイズおよび／または形状が仮想入力デバイス上で変更されることによって再設定される。

【0025】

いくつかの実施形態では、少なくとも１つのセッティングは、仮想入力デバイスのサイズおよび／または形状に関係し、少なくとも１つのセッティングは、仮想入力デバイスのサイズおよび／または形状が変更されることによって再設定される。

【0026】

いくつかの実施形態では、少なくとも１つのセッティングは、仮想入力デバイスの空間ロケーションに関係し、少なくとも１つのセッティングは、仮想入力デバイスの空間ロケーションが変更されることによって再設定される。

【0027】

いくつかの実施形態では、仮想入力デバイスの少なくとも１つのセッティングは、開始セッティングから、少なくとも１つの中間セッティングを介して、最終セッティングまで段階的に再設定される。

【0028】

いくつかの実施形態では、仮想入力デバイスは、仮想キーボード、仮想コンピュータマウス、仮想リモートコントローラ、仮想ゲーミングコントローラのうちのいずれかである。

【0029】

いくつかの実施形態では、仮想環境は、エクステンデッドリアリティ（ＸＲ）仮想環境である。

【0030】

いくつかの実施形態では、仮想環境は、拡張現実（ＡＲ）仮想環境、仮想現実（ＶＲ）仮想環境、または複合現実（ＭＲ）仮想環境のいずれかである。

【0031】

いくつかの実施形態では、制御デバイスは、通信デバイスの一部であるか、または通信デバイスと一体化される。

【0032】

同封の実施形態の他の目標、特徴、および利点は、以下の詳細な開示から、添付の従属請求項から、ならびに図面から明らかとなるであろう。

【0033】

概して、特許請求の範囲において使用されるすべての用語は、本明細書で別段明示的に規定されない限り、本技術分野におけるその通例の意味に従って解釈されるべきである。「１つの（ａ／ａｎ）／その（ｔｈｅ）エレメント、装置、構成要素、手段、モジュール、ステップなど」へのすべての言及は、別段明示的に述べられていない限り、そのエレメント、装置、構成要素、手段、モジュール、ステップなどの少なくとも１つの事例を指すようにオープンに解釈されるべきである。本明細書で開示されるいずれの方法のステップも、明示的に述べられていない限り、開示される厳密な順序で実施される必要はない。

【0034】

その上、「備える、含む（ｃｏｍｐｒｉｓｉｎｇ）」という用語の後に続く、技術的特徴または方法ステップの記述は、添付の特許請求の範囲において述べられていない方法ステップの他の技術的特徴の存在を除外しないものとして理解されたい。

【0035】

次に、例として、添付の図面を参照しながら、本発明の概念が説明される。

【図面の簡単な説明】

【0036】

【図1】実施形態によるシステムを示す概略図である。

【図2】実施形態によるユーザインターフェースデバイスと対話するユーザを概略的に示す図である。

【図3】実施形態による仮想入力デバイスを投影するユーザインターフェースデバイスを概略的に示す図である。

【図4】実施形態による方法のフローチャートである。

【図5】実施形態による方法のフローチャートである。

【図6】一実施形態による制御デバイスの機能ユニットを示す概略図である。

【図7】一実施形態による制御デバイスの機能モジュールを示す概略図である。

【図8】一実施形態によるコンピュータ可読記憶媒体を備えるコンピュータプログラム製品の一例を示す図である。

【発明を実施するための形態】

【0037】

次に、本発明の概念のいくつかの実施形態が示された添付の図面を参照しながら、本発明の概念が以下でより十分に説明される。しかしながら、本発明の概念は、多くの異なる形態で具現され得、本明細書に記載される実施形態に限定されるものとして解釈されるべきではなく、むしろ、これらの実施形態は、本開示が徹底的かつ完全であり、本発明の概念の範囲を当業者に十分に伝えるように、例として提供される。同様の番号は、説明全体にわたって同様のエレメントを指す。破線によって示される任意のステップまたは特徴は、随意と見なされるべきである。

【0038】

図１は、システム１００の概略図である。システム１００は、ユーザインターフェースデバイス１１０と制御デバイス６００とを備える。ユーザインターフェースデバイス１１０と制御デバイス６００とは、互いに動作可能に接続される。

【0039】

いくつかの実装形態では、制御デバイス６００は、ユーザインターフェースデバイス１１０の一部であるか、またはユーザインターフェースデバイス１１０と一体化される。いくつかの実装形態では、制御デバイス６００は、モバイルフォン、タブレット、コンピュータなど、通信デバイスの一部であるか、または通信デバイスと一体化される。

【0040】

ユーザインターフェースデバイス１１０は、仮想入力デバイス１２０を表面上で可視にするための投影モジュール１１４を備える。図１では、仮想入力デバイス１２０は、仮想キーボードとして概略的に示されている。他の非限定的な例では、仮想入力デバイス１２０は、仮想コンピュータマウス、仮想リモートコントローラ、仮想ゲーミングコントローラのうちのいずれかである。

【0041】

ユーザインターフェースデバイス１１０は、表面に沿った座標において、仮想入力デバイス１２０とのユーザのユーザ対話を検知するためのセンサー１１２をさらに備える。センサー１１２は、ユーザの姿勢および／または動きを追跡するようにさらに設定される。ユーザの姿勢および／または動きは、ユーザのデジタル表現を表すセンサーデータを記録するように設定された少なくとも１つのセンサー１１２によって追跡され得る。ユーザ２１０ａ、２１０ｂのデジタル表現は、仮想環境におけるユーザ入力デバイス１２０に関するユーザの姿勢および／または動きを追跡するために分析され得る。いくつかの非限定的な例では、ユーザ２１０ａ、２１０ｂのデジタル表現は、ユーザ２１０ａ、２１０ｂの手位置および／または動きと、ユーザ２１０ａ、２１０ｂの腕位置および／または動きと、ユーザ２１０ａ、２１０ｂの頭部位置および／または動きと、ユーザ２１０ａ、２１０ｂの首位置および／または動きと、ユーザ２１０ａ、２１０ｂの胴位置および／または動きとのうちの少なくとも１つに関係する。センサー１１２は、レーダーモジュール、ライダーモジュール、カメラモジュールなどであり得る。いくつかの例では、センサー１１２は慣性測定ユニット（ＩＭＵ）であり、ユーザによって装着されるグローブ上に提供される。したがって、ユーザインターフェースデバイス１１０の機能は、少なくとも２つの物理デバイス間でスプリットされ得る。さらに、センサー１１２の異なるタイプの組合せも可能である。

【0042】

図１では、ユーザは、２つの手１３０ａ、１３０ｂによって概略的に表される。ソフトウェアは、ユーザによって入れられたアクションまたは文字を識別するために座標を変換する。仮想入力デバイス１２０は、仮想環境の一部である。異なるタイプの仮想環境があり得る。いくつかの非限定的な例では、仮想環境は、エクステンデッドリアリティ（ＸＲ）仮想環境である。さらなる非限定的な例では、仮想環境は、拡張現実（ＡＲ）仮想環境、仮想現実（ＶＲ）仮想環境、または複合現実（ＭＲ）仮想環境のいずれかである。したがって、図１中のユーザインターフェースデバイス１１０はスタンドアロンデバイスとして示されているが、ユーザインターフェースデバイス１１０は、（ＶＲヘッドセットなどの）ヘッドセット、または（ＡＲグラスまたはスマートグラスなどの）ウェアラブルコンピュータグラスの一部であり得る。

【0043】

上述のように、改善された人間工学を伴う仮想入力デバイス１２０が依然として必要である。さらにこれを示すために、図２への参照が行われる。図２は、第１のレイアウト２３０ａを有する仮想キーボードに関してユーザインターフェースデバイス１２０と対話する第１のユーザ１２０ａと、第２のレイアウト２３０ｂを有する仮想キーボードに関してユーザインターフェースデバイス１２０と対話する第２のユーザ１２０ｂとを概略的に示す。第１のユーザ２１０ａは、第１のユーザモデル２２０ａに従ってモデル化され、第２のユーザ２１０ｂは、第２のユーザモデル２２０ｂに従ってモデル化される。第１のユーザ２１０ａと第２のユーザ１２０ｂとが互いに同等であると仮定される。ユーザの腕および手がともに直線に従い、肩間の想像線がその直線に対して９０度に近くなるべきである標準人間工学モデルと比較した場合、第１のレイアウト２３０ａは、第１のユーザ１２０ａの肩および手首上にストレスを生じる。第２のレイアウト２３０ｂは、標準人間工学モデルにはるかに近い。したがって、第１のユーザモデル２２０ａと第２のユーザモデル２２０ｂとから、第２のレイアウト２３０ｂが第１のレイアウト２３０ａよりも人間工学的に適切な仮想キーボードをユーザに提供することが結論付けられ得る。したがって、第１のレイアウト２３０ａを有する仮想キーボードに関してユーザインターフェースデバイス１２０と対話することは、第１のユーザ２１０ａについての人間工学問題を生じることがある。

【0044】

したがって、本明細書で開示される実施形態は、仮想入力デバイスの人間工学ベース再設定のための機構に関する。そのような機構を取得するために、制御デバイスと、制御デバイスによって実施される方法と、たとえばコンピュータプログラムの形式で、コードを備えるコンピュータプログラム製品とが提供され、コードは、制御デバイス上で稼働されたとき、制御デバイスに方法を実施させる。

【0045】

次に、仮想入力デバイス１２０の人間工学ベース再設定の開示のために、図３および図４への並行参照が行われることになる。

【0046】

図３は、第１のセッティング４１０ａ、たとえば、デフォルトキーボード設定と、現在のユーザ２１０ａ、２１０ｂについてより人間工学的に有利なキーボード位置およびレイアウトに対応することになる第２のセッティング４１０ｂとの間で変更可能である仮想キーボードの形式で、仮想入力デバイス１２０を投影するユーザインターフェースデバイス１１０を概略的に示す。第１のセッティング４１０ａと第２のセッティング４１０ｂとの間の変更が、矢印４２０によって概略的に示されている。以下でさらに開示されるように、制御デバイス６００が、ユーザ２１０ａ、２１０ｂの現在の姿勢および／または動きと参照人間工学データとの比較に基づいて、第１のセッティング４１０ａと第２のセッティング４１０ｂとの間で仮想入力デバイス１２０を適応的に変更するように設定される。

【0047】

図４は、仮想入力デバイス１２０の人間工学ベース再設定のための方法の実施形態を示すフローチャートである。方法は、制御デバイス６００によって実施される。方法は、有利には、コンピュータプログラム３２０として提供される。

【0048】

Ｓ１０２：制御デバイス６００は、ユーザ２１０ａ、２１０ｂが仮想環境において仮想入力デバイス１２０と対話している間、センサー１１２からユーザ２１０ａ、２１０ｂの姿勢および／または動きの情報を取得する。

【0049】

Ｓ１１０：制御デバイス６００は、ユーザ２１０ａ、２１０ｂの姿勢および／または動きを参照人間工学データと比較することによって、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすか否かを決定する。

【0050】

Ｓ１１２：制御デバイス６００は、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすことができないとき、仮想入力デバイス１２０の少なくとも１つのセッティング４１０ａ、４１０ｂを再設定する。

【0051】

少なくとも１つのセッティング４１０ａ、４１０ｂは、姿勢および／または動きに関して、ユーザ２１０ａ、２１０ｂが仮想環境において仮想入力デバイス１２０とどのように対話するべきであるかを示唆する。セッティングの例が、以下で提供される。少なくとも１つのセッティング４１０ａ、４１０ｂは、ユーザ２１０ａ、２１０ｂの姿勢および／または動きと参照人間工学データとの関数として再設定される。

【0052】

仮想入力デバイス１２０の少なくとも１つのセッティング４１０ａ、４１０ｂを再設定することは、人間工学基準を満たすことにより近くなるように姿勢および／または動きを変更するようにユーザ２１０ａ、２１０ｂに示唆する。

【0053】

再び図２を参照すると、ユーザ２１０ａ、２１０ｂが仮想環境において仮想入力デバイス１２０と対話している間、ユーザ２１０ａ、２１０ｂの姿勢および／または動きを追跡することによって、制御デバイス６００は、ユーザ２１０ａ、２１０ｂの姿勢および／または動きに応じて、第１のレイアウト２３０ａと第２のレイアウト２３０ｂとの間で仮想キーボードを適応的に変更し、それにより、ユーザ２１０ａ、２１０ｂが人間工学問題を回避するのを助けるか、または少なくとも、ユーザ２１０ａ、２１０ｂについてのより少ない人間工学問題をもたらすことができる。

【0054】

次に、制御デバイス６００によって実施される、仮想入力デバイス１２０の人間工学ベース再設定のさらなる詳細に関係する実施形態が開示される。

【0055】

いくつかの態様では、ユーザ２１０ａ、２１０ｂの姿勢および／または動きは、ユーザモデル２２０ａ、２２０ｂによって追跡される。特に、いくつかの実施形態では、ユーザ２１０ａ、２１０ｂの姿勢および／または動きは、ユーザ２１０ａ、２１０ｂのデジタルツインとして記憶されたユーザモデル２２０ａ、２２０ｂによって表される。デジタルツインは、次いで、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすか否かを決定するとき、参照人間工学データと比較される。したがって、ユーザ２１０ａ、２１０ｂの、デジタルツインによって規定されるホリスティックモデルが、作成され得、ユーザ２１０ａ、２１０ｂの各体肢は、制御デバイス６００が、現在のユーザポーズおよび体肢配置、ならびに互いに対する手、腕、および指配置および動きの表現を計算することができるように、デジタル的に再作成され得る。これは、制御デバイス６００が、現在の人間工学状況のスナップショットを得るだけでなく、経時的に人間工学状況の理解を築くことをも可能にする。

【0056】

いくつかの態様では、ユーザ２１０ａ、２１０ｂの体肢のスケールの相対長さが、個々のユーザ２１０ａ、２１０ｂについての不良な人間工学位置を生じる仮想入力デバイス１２０のセッティング４１０ａ、４１０ｂを使用することを回避するために考慮される。特に、いくつかの非限定的な例では、デジタルツインは、ユーザ２１０ａ、２１０ｂのデジタル表現から抽出された相対寸法をもつ、ユーザ２１０ａ、２１０ｂの腕、手、脚、足、首、頭部および胴のうちのいずれか、またはそれらの任意の組合せを表す。同様に、いくつかの非限定的な例では、しきい値は、ユーザ２１０ａ、２１０ｂのデジタル表現から導出された、ユーザ２１０ａ、２１０ｂの腕、手、頭部および／または胴の相対寸法に依存する。

【0057】

いくつかの態様では、ユーザモデル２２０ａ、２２０ｂは、人間工学的に適切で好ましい、ポーズおよび体肢配置の既存のあらかじめ規定されたモデル、ならびに／または（鋭い体肢角度、頭部前方位姿勢／猫背を引き起こす胴までの短い距離など）回避されるべきである識別された明示的に不良なコンスタレーションのセットと比較される。既存のあらかじめ規定されたモデルからの逸脱が検出された場合、人間工学問題点が識別されると見なされ、したがって、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすか否かを判断する。

【0058】

いくつかの態様では、ユーザモデル２２０ａ、２２０ｂは、人間工学的に適切であり、使用されるべきである、姿勢および／または動きのあらかじめ規定されたモデルと比較される。特に、いくつかの実施形態では、参照人間工学データは、ユーザ２１０ａ、２１０ｂによって使用されるべき姿勢および／または動きを表す。ユーザ２１０ａ、２１０ｂの姿勢および／または動きは、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが参照人間工学データから第１のしきい値を超えて逸脱したとき、人間工学基準を満たすことができない。ユーザ２１０ａ、２１０ｂは、それにより、参照人間工学データにより近くなるように姿勢および／または動きを変更するように示唆される。

【0059】

いくつかの態様では、ユーザモデル２２０ａ、２２０ｂは、人間工学的に不良であり、回避されるべきである、姿勢および／または動きのあらかじめ規定されたモデルと比較される。特に、いくつかの実施形態では、参照人間工学データは、ユーザ２１０ａ、２１０ｂによって回避されるべき姿勢および／または動きを表す。ユーザ２１０ａ、２１０ｂの姿勢および／または動きは、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが参照人間工学データから第２のしきい値未満逸脱したとき、人間工学基準を満たすことができない。ユーザ２１０ａ、２１０ｂは、それにより、参照人間工学データからさらに離れるように姿勢および／または動きを変更するように示唆される。

【0060】

いくつかの態様では、空間履歴データと時間履歴データの両方が入力として使用され得、たとえば、入力が経時的にあるパターンで繰り返されない場合、ユーザにとって、あまり最適でないポーズおよび体肢配置を５分未満の間使用することは大丈夫であり得る。特に、いくつかの実施形態では、制御デバイス６００は、（随意の）ステップＳ１０４を実施するように設定される。
Ｓ１０４：制御デバイス６００は、ユーザ２１０ａ、２１０ｂの前の姿勢および／または動きを表す履歴データを取り出す。さらに、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすか否かを決定することが、履歴データの関数である。

【0061】

いくつかの態様では、制御デバイス６００は、経時的に人間工学状況の理解を築くために、経時的に位置および／または動きをアグリゲートする。特に、いくつかの実施形態では、制御デバイス６００は、（随意の）ステップＳ１０６およびステップＳ１０８を実施するように設定される。
Ｓ１０６：制御デバイス６００は、経時的にユーザ２１０ａ、２１０ｂの追跡された姿勢および／または動きをアグリゲートする。
Ｓ１０８：制御デバイス６００は、ユーザ２１０ａ、２１０ｂの追跡された姿勢および／または動きからユーザモデル２２０ａ、２２０ｂを構築する。

【0062】

それぞれの頭部、胴、腕、手および指などの相対測位は、それにより、制御デバイス６００が、使用される不良な人間工学コンスタレーションを間欠的に検出するだけでなく、それらの長期の（アグリゲートされた）使用をも考慮するために、経時的にアグリゲートされ得る。

【0063】

いくつかの態様では、再設定することは、仮想入力デバイス１２０が展開される物理的環境によって制約される。たとえば、仮想入力デバイス１２０が、ユーザが公共交通手段を使用して移動しているときなど、制限された物理的空間において展開される場合は、仮想入力デバイス１２０が、特に仮想入力デバイス１２０との対話のために設計されたプライベート環境、または労働環境において展開される場合よりも、少ない利用可能な空間があり得る。特に、いくつかの実施形態では、仮想入力デバイス１２０は物理的環境において展開され、仮想入力デバイス１２０の少なくとも１つのセッティング４１０ａ、４１０ｂを再設定することは、物理的環境の少なくとも１つの性質によって制約される。特に、いくつかの実施形態では、制約は、物理的環境の制御デバイス６００によって受信された情報から、制御デバイス６００によって導出される。物理的環境の少なくとも１つの性質は、センサー１１２によって検知され得る。たとえば、センサー１１２は、物理的環境における物体への近接度を測定または推定し、測定値または推定値を、情報として制御デバイス６００に提供するように設定され得る。

【0064】

いくつかの態様では、仮想入力デバイス１２０は、レイアウト、サイズ、形状、形式、またはロケーションに関して変更され得る。これは、仮想入力デバイス１２０が仮想キーボードであるのか、仮想コンピュータマウスであるのか、仮想リモートコントローラであるのか、仮想ゲーミングコントローラであるのかに関係ない。したがって、仮想入力デバイス１２０は、ユーザが関節、首などの静荷重を回避するのを助けるために、決定された適切な位置範囲内でユーザによって使用される他の入力デバイスに関して仮想入力デバイス１２０の物理的局所性を交互させるように再設定され得る。

【0065】

第１の例によれば、変更は、仮想入力デバイス１２０の個々のボタンおよび／またはキーのサイズまたは形状に関係する。特に、いくつかの実施形態では、少なくとも１つのセッティング４１０ａ、４１０ｂは、仮想入力デバイス１２０上のボタンおよび／またはキーのサイズおよび／または形状に関係する。少なくとも１つのセッティング４１０ａ、４１０ｂは、次いで、ボタンおよび／またはキーのサイズおよび／または形状が仮想入力デバイス１２０上で変更されることによって再設定される。

【0066】

第２の例によれば、変更は、仮想入力デバイス１２０の全体的なサイズまたは形状に関係する。特に、いくつかの実施形態では、少なくとも１つのセッティング４１０ａ、４１０ｂは、仮想入力デバイス１２０のサイズおよび／または形状に関係する。少なくとも１つのセッティング４１０ａ、４１０ｂは、次いで、仮想入力デバイス１２０のサイズおよび／または形状が変更されることによって再設定される。

【0067】

第３の例によれば、変更は、仮想入力デバイス１２０の空間ロケーションに関係する。特に、いくつかの実施形態では、少なくとも１つのセッティング４１０ａ、４１０ｂは、仮想入力デバイス１２０の空間ロケーションに関係する。少なくとも１つのセッティング４１０ａ、４１０ｂは、次いで、仮想入力デバイス１２０の空間ロケーションが変更されることによって再設定される。

【0068】

いくつかの態様では、仮想入力デバイス１２０は、段階的に再設定される。特に、いくつかの実施形態では、仮想入力デバイス１２０の少なくとも１つのセッティング４１０ａ、４１０ｂは、初期セッティングから、少なくとも１つの中間セッティングを介して、最終セッティングまで段階的に再設定される。したがって、再設定は、入力セッション中にユーザを妨害しないように、ある時間期間にわたって徐々に実施され得る。これは、たとえば、仮想キーボードが、あるキーボードレイアウトから別のキーボードレイアウトに緩やかにおよび徐々に形状を変える（ｓｈａｐｅｓｈｉｆｔ）ことができることを意味する。

【0069】

いくつかの態様では、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすことができないと決定すると、ただし、仮想入力デバイス１２０の少なくとも１つのセッティング４１０ａ、４１０ｂを再設定する前に、制御デバイス６００は、ユーザ２１０ａ、２１０ｂにユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすことができないことを気づかせるための指示を、ユーザ２１０ａ、２１０ｂに提供し得る。場合によっては、その指示は、提案されたソリューションをキャンセルまたは承認するための機会をユーザ２１０ａ、２１０ｂに与えるための命令が付随する。提案されたソリューションを承認することは、同様に仮想入力デバイス１２０の形状を変えることを高速化し、さらには、たとえば、中間キーボードレイアウトなしに新しいキーボードレイアウトに直接進むことを可能にされ得る。

【0070】

図５は、本明細書で開示される実施形態、態様、および例のうちの少なくともいくつかによる、制御デバイス６００によって実施される、仮想入力デバイス１２０の人間工学ベース再設定のための方法のフローチャートである。

【0071】

Ｓ２０１：制御デバイス６００が、ユーザが仮想入力デバイス１２０とのセッションを開始しようとしたことを検出する。

【0072】

Ｓ２０２：制御デバイス６００は、ユーザインターフェースデバイス１１０に、仮想入力デバイス１２０を可視にするように命令する。

【0073】

Ｓ２０３：制御デバイス６００は、ユーザ２１０ａ、２１０ｂが仮想入力デバイス１２０と対話している間、ユーザ２１０ａ、２１０ｂの姿勢および／または動きを追跡する。

【0074】

Ｓ２０４：制御デバイス６００は、ユーザ２１０ａ、２１０ｂの姿勢および／または動きを参照人間工学データと比較することによって、ユーザ２１０ａ、２１０ｂの姿勢および／または動きが人間工学基準を満たすか否かを決定する。

【0075】

Ｓ２０５：ユーザ２１０ａ、２１０ｂの姿勢および／または動きは、人間工学基準を満たすことができない。制御デバイス６００は、仮想入力デバイスの少なくとも１つのセッティング４１０ａ、４１０ｂを再設定する。

【0076】

Ｓ２０６：制御デバイス６００は、ユーザが、もはや仮想入力デバイス１２０と対話せず、Ｓ２０１において開始されたセッションを終了することを決定することを検出する。

【0077】

Ｓ２０７：制御デバイス６００は、ユーザインターフェースデバイス１１０に、仮想入力デバイス１２０を可視にすることを停止するように命令する。

【0078】

図６は、いくつかの機能ユニットに関して、一実施形態による制御デバイス６００の構成要素を概略的に示す。処理回路６１０は、たとえば、記憶媒体６３０の形態で（図８の場合のように）コンピュータプログラム製品８１０に記憶されたソフトウェア命令を実行することが可能な、好適な中央処理ユニット（ＣＰＵ）、マルチプロセッサ、マイクロコントローラ、デジタル信号プロセッサ（ＤＳＰ）などのうちの１つまたは複数の任意の組合せを使用して提供される。処理回路６１０はさらに、少なくとも１つの特定用途向け集積回路（ＡＳＩＣ）、またはフィールドプログラマブルゲートアレイ（ＦＰＧＡ）として提供され得る。

【0079】

詳細には、処理回路６１０は、上記で開示されたように、制御デバイス６００に、動作またはステップのセットを実施させるように設定される。たとえば、記憶媒体６３０は動作のセットを記憶し得、処理回路６１０は、制御デバイス６００に動作のセットを実施させるために、記憶媒体６３０から動作のセットを取り出すように設定され得る。動作のセットは、実行可能な命令のセットとして提供され得る。

【0080】

したがって、それにより、処理回路６１０は、本明細書で開示される方法を実行するように構成される。記憶媒体６３０はまた、たとえば、磁気メモリ、光メモリ、固体メモリ、さらにはリモートに位置されるメモリのうちのいずれか単独の１つまたは組合せであり得る、永続記憶域を備え得る。制御デバイス６００は、少なくとも、他のエンティティ、機能、ノード、およびデバイスとの通信のために設定された、通信インターフェース６２０をさらに備え得る。したがって、通信インターフェース６２０は、アナログおよびデジタル構成要素を備える１つまたは複数の送信機および受信機を備え得る。処理回路６１０は、たとえば、データおよび制御信号を通信インターフェース６２０および記憶媒体６３０に送ることによって、データおよび報告を通信インターフェース６２０から受信することによって、ならびにデータおよび命令を記憶媒体６３０から取り出すことによって、制御デバイス６００の全般の動作を制御する。制御デバイス６００の他の構成要素、ならびに関係する機能は、本明細書で提示される概念を不明瞭にしないために省略される。

【0081】

図７は、いくつかの機能モジュールに関して、一実施形態による制御デバイス６００の構成要素を概略的に示す。図７の制御デバイス６００は、いくつかの機能モジュール、ステップＳ１０２を実施するように設定された取得モジュール７１０と、ステップＳ１１０を実施するように設定された決定モジュール７５０と、ステップＳ１１２を実施するように設定された再設定モジュール７６０とを備える。図７の制御デバイス６００は、ステップＳ１０４を実施するように設定された取出しモジュール７２０と、ステップＳ１０６を実施するように設定されたアグリゲートモジュール７３０と、ステップＳ１０８を実施するように設定された構築モジュール７４０とのうちのいずれかなど、いくつかの随意の機能モジュールをさらに備え得る。大まかに言えば、各機能モジュール７１０：７６０は、一実施形態では、ハードウェアのみで実装され、別の実施形態では、ソフトウェアの助けをかりて実装され得、すなわち、後者の実施形態は、処理回路上で稼働されたとき、制御デバイス６００に、図７に関連して上述の対応するステップを実施させる、記憶媒体６３０に記憶されたコンピュータプログラム命令を有する。モジュールは、コンピュータプログラムの一部に対応するが、それらのモジュールは、その中で別個のモジュールである必要がなく、それらのモジュールがソフトウェアで実装されるやり方は、使用されるプログラミング言語に依存することも言及されるべきである。好ましくは、１つまたは複数のまたはすべての機能モジュール７１０：７６０が、処理回路６１０によって、場合によっては通信インターフェース６２０および／または記憶媒体６３０と協働して実装され得る。処理回路６１０は、したがって、機能モジュール７１０：７６０によって提供される命令を記憶媒体６３０からフェッチし、これらの命令を実行するように設定され、それにより、本明細書で開示される任意のステップを実施し得る。

【0082】

制御デバイス６００によって実施される命令の第１の部分が第１のデバイスにおいて実行され得、制御デバイス６００によって実施される命令の第２の部分が第２のデバイスにおいて実行され得る。本明細書で開示される実施形態は、制御デバイス６００によって実施される命令が実行され得るいかなる特定の数のデバイスにも限定されない。したがって、本明細書で開示される実施形態による方法は、クラウドコンピュータによる環境に常住する制御デバイス６００によって実施されることに好適である。したがって、図６には単一の処理回路６１０が示されているが、処理回路６１０は、複数のデバイスまたはノードの間で分散され得る。同じことが、図７の機能モジュール７１０：７６０、および図８のコンピュータプログラム８２０に適用される。

【0083】

図８は、コンピュータ可読記憶媒体８３０を備えるコンピュータプログラム製品８１０の一例を示す。このコンピュータ可読記憶媒体８３０上に、コンピュータプログラム８２０が記憶され得、そのコンピュータプログラム８２０は、処理回路６１０に、ならびに通信インターフェース６２０および記憶媒体６３０など、処理回路６１０に動作可能に結合されたエンティティおよびデバイスに、本明細書で説明される実施形態による方法を実行させることができる。したがって、コンピュータプログラム８２０および／またはコンピュータプログラム製品８１０は、本明細書で開示される任意のステップを実施するための手段を提供し得る。

【0084】

図８の例では、コンピュータプログラム製品８１０は、ＣＤ（コンパクトディスク）またはＤＶＤ（デジタル多用途ディスク）またはＢｌｕ－Ｒａｙディスクなどの光ディスクとして示されている。コンピュータプログラム製品８１０はまた、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭ）または電気的消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ）など、メモリとして、より詳細には、ＵＳＢ（ユニバーサルシリアルバス）メモリ、またはコンパクトフラッシュメモリなどのフラッシュメモリなど、外部メモリにおけるデバイスの不揮発性記憶媒体として具現され得る。したがって、コンピュータプログラム８２０は、ここでは、示された光ディスク上のトラックとして概略的に示されているが、コンピュータプログラム８２０は、コンピュータプログラム製品８１０に好適な任意のやり方で記憶され得る。

【0085】

本発明の概念が、主に数個の実施形態を参照しながら上記で説明された。しかしながら、当業者によって直ちに諒解されるように、上記で開示された実施形態以外の他の実施形態が、添付の特許請求の範囲によって規定される本発明の概念の範囲内で等しく可能である。

【図1】