知財求人 - 知財ポータルサイト「IP Force」
▶ パナソニックオートモーティブシステムズ株式会社の特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024080218
(43)【公開日】2024-06-13
(54)【発明の名称】制御装置
(51)【国際特許分類】
G06F 3/04886 20220101AFI20240606BHJP
G06F 3/041 20060101ALI20240606BHJP
G06F 3/023 20060101ALI20240606BHJP
【ＦＩ】
G06F3/04886
G06F3/041 580
G06F3/023 460
【審査請求】未請求
【請求項の数】20
【出願形態】ＯＬ
(21)【出願番号】P 2022193227
(22)【出願日】2022-12-02
(71)【出願人】
【識別番号】322003857
【氏名又は名称】パナソニックオートモーティブシステムズ株式会社
(74)【代理人】
【識別番号】100123102
【弁理士】
【氏名又は名称】宗田 悟志
(72)【発明者】
【氏名】平井 敦士
【テーマコード（参考）】
5B020
5E555
【Ｆターム（参考）】
5B020AA02
5B020AA03
5B020DD04
5B020DD12
5B020DD30
5E555AA04
5E555AA13
5E555AA14
5E555BA02
5E555BA05
5E555BA08
5E555BB02
5E555BB05
5E555BB08
5E555BC19
5E555BE12
5E555CA11
5E555CA12
5E555CA13
5E555CA16
5E555CA42
5E555CB09
5E555CB22
5E555CB23
5E555DC07
5E555FA00
(57)【要約】
【課題】制御装置において、更なる改善を実現する技術を提供する。
【解決手段】制御装置１２において、座標取得部２６は、ディスプレイ１４の表示面の前に位置する検知対象物の空間座標を取得する。設定部３２は、表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、検知対象物により第１表示領域が指定された時刻である基準時刻の検知対象物の空間座標と、に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する。判定部３０は、第１判定領域が設定された後、検知対象物が第１判定領域内に位置するか否かを判定する。表示出力部３６は、検知対象物が第１判定領域内に位置すると判定部３０が判定した場合、第１文字情報を第１表示領域に表示させる。
【選択図】図１
【解決手段】制御装置１２において、座標取得部２６は、ディスプレイ１４の表示面の前に位置する検知対象物の空間座標を取得する。設定部３２は、表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、検知対象物により第１表示領域が指定された時刻である基準時刻の検知対象物の空間座標と、に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する。判定部３０は、第１判定領域が設定された後、検知対象物が第１判定領域内に位置するか否かを判定する。表示出力部３６は、検知対象物が第１判定領域内に位置すると判定部３０が判定した場合、第１文字情報を第１表示領域に表示させる。
【選択図】図１
【特許請求の範囲】
【請求項1】
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させる表示出力部と、
を備える制御装置。
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させる表示出力部と、
を備える制御装置。
【請求項2】
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記第１表示領域と、を結ぶ直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
請求項１に記載の制御装置。
請求項１に記載の制御装置。
【請求項3】
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記表示面と、を結ぶ直線であって、前記表示面の法線である直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
請求項１に記載の制御装置。
請求項１に記載の制御装置。
【請求項4】
前記設定部は、前記第１文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記第１表示領域に表示させる、
請求項２または３に記載の制御装置。
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記第１表示領域に表示させる、
請求項２または３に記載の制御装置。
【請求項5】
前記表示出力部は、第２文字情報グループに関する情報を前記表示面の第２表示領域に表示させ、
前記判定部は、前記検知対象物の空間座標と、前記第１表示領域の座標と、前記第２表示領域の座標と、に基づいて、前記検知対象物が前記第１表示領域と前記第２表示領域のいずれかを指定しているか否かを判定し、
前記設定部は、
前記検知対象物が前記第１表示領域を指定していると前記判定部が判定した場合、前記第１文字情報を前記第１判定領域に対応付け、前記第１判定領域を設定し、
前記検知対象物が前記第２表示領域を指定していると前記判定部が判定した場合、前記第２文字情報グループに含まれる第２文字情報を前記第１判定領域に対応付け、前記検知対象物により前記第２表示領域が指定された時刻である前記基準時刻の前記検知対象物の空間座標に基づいて、前記第１判定領域を設定する、
請求項１から３のいずれか一項に記載の制御装置。
前記判定部は、前記検知対象物の空間座標と、前記第１表示領域の座標と、前記第２表示領域の座標と、に基づいて、前記検知対象物が前記第１表示領域と前記第２表示領域のいずれかを指定しているか否かを判定し、
前記設定部は、
前記検知対象物が前記第１表示領域を指定していると前記判定部が判定した場合、前記第１文字情報を前記第１判定領域に対応付け、前記第１判定領域を設定し、
前記検知対象物が前記第２表示領域を指定していると前記判定部が判定した場合、前記第２文字情報グループに含まれる第２文字情報を前記第１判定領域に対応付け、前記検知対象物により前記第２表示領域が指定された時刻である前記基準時刻の前記検知対象物の空間座標に基づいて、前記第１判定領域を設定する、
請求項１から３のいずれか一項に記載の制御装置。
【請求項6】
前記表示出力部は、前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させ、かつ、前記第１文字情報に関連付けられた第２文字情報を前記第１表示領域に隣接する第２表示領域に表示させる、
請求項２に記載の制御装置。
請求項２に記載の制御装置。
【請求項7】
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、かつ、前記第３文字情報に関連付けられた第４文字情報を前記第２表示領域に表示させる、
請求項６に記載の制御装置。
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、かつ、前記第３文字情報に関連付けられた第４文字情報を前記第２表示領域に表示させる、
請求項６に記載の制御装置。
【請求項8】
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって第１決定動作または第２決定動作が行われたか否か、および、前記検知対象物が前記第２表示領域を指定しているか否かを判定し、
前記表示出力部は、
前記検知対象物が前記第１判定領域に位置し、かつ第１決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させ、
前記検知対象物が前記第２表示領域を指定し、かつ第２決定動作が行われたと前記判定部が判定した場合、前記第２文字情報を前記入力表示領域に表示させる、
請求項６または７に記載の制御装置。
前記判定部は、前記検知対象物によって第１決定動作または第２決定動作が行われたか否か、および、前記検知対象物が前記第２表示領域を指定しているか否かを判定し、
前記表示出力部は、
前記検知対象物が前記第１判定領域に位置し、かつ第１決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させ、
前記検知対象物が前記第２表示領域を指定し、かつ第２決定動作が行われたと前記判定部が判定した場合、前記第２文字情報を前記入力表示領域に表示させる、
請求項６または７に記載の制御装置。
【請求項9】
前記設定部は、前記基準時刻から所定時間後における前記検知対象物の移動速度が速いほど、前記第１判定領域と前記第２判定領域との前記直線に沿った間隔を広く設定する、
請求項４に記載の制御装置。
請求項４に記載の制御装置。
【請求項10】
前記第１文字情報と前記第２文字情報は、それぞれ数字の情報であり、
前記設定部は、前記基準時刻から前記所定時間後における前記検知対象物の移動速度が速いほど、前記第１文字情報の数字と、前記第２文字情報の数字との差を大きく設定する、
請求項９に記載の制御装置。
前記設定部は、前記基準時刻から前記所定時間後における前記検知対象物の移動速度が速いほど、前記第１文字情報の数字と、前記第２文字情報の数字との差を大きく設定する、
請求項９に記載の制御装置。
【請求項11】
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記第２判定領域の体積は、前記第１判定領域の体積よりも大きい、
請求項４に記載の制御装置。
前記第２判定領域の体積は、前記第１判定領域の体積よりも大きい、
請求項４に記載の制御装置。
【請求項12】
前記第１判定領域と前記第２判定領域は、前記直線に沿って隣接し、
前記設定部は、前記検知対象物が前記第２判定領域に位置する場合、前記第２判定領域を前記第１判定領域側に広げ、かつ、前記第１判定領域を狭める、
請求項４に記載の制御装置。
前記設定部は、前記検知対象物が前記第２判定領域に位置する場合、前記第２判定領域を前記第１判定領域側に広げ、かつ、前記第１判定領域を狭める、
請求項４に記載の制御装置。
【請求項13】
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって決定動作が行われたか否かを判定し、
前記表示出力部は、前記検知対象物が前記第１判定領域に位置し、かつ決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させる、
請求項１から請求項３のいずれか一項に記載の制御装置。
前記判定部は、前記検知対象物によって決定動作が行われたか否かを判定し、
前記表示出力部は、前記検知対象物が前記第１判定領域に位置し、かつ決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させる、
請求項１から請求項３のいずれか一項に記載の制御装置。
【請求項14】
ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得する座標取得部と、
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定する設定部と、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定する判定部と、
前記第１検知対象物が前記第１判定領域に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面の第２表示領域に表示させる表示出力部と、
を備える制御装置。
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定する設定部と、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定する判定部と、
前記第１検知対象物が前記第１判定領域に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面の第２表示領域に表示させる表示出力部と、
を備える制御装置。
【請求項15】
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記第１表示領域と、を結ぶ第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記第２表示領域と、を結ぶ第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
請求項１４に記載の制御装置。
前記基準時刻における前記第１検知対象物の空間座標と、前記第１表示領域と、を結ぶ第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記第２表示領域と、を結ぶ第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
請求項１４に記載の制御装置。
【請求項16】
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記表示面と、を結ぶ第１直線であって、前記表示面の法線である第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記表示面と、を結ぶ第２直線であって、前記表示面の法線である第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
請求項１４に記載の制御装置。
前記基準時刻における前記第１検知対象物の空間座標と、前記表示面と、を結ぶ第１直線であって、前記表示面の法線である第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記表示面と、を結ぶ第２直線であって、前記表示面の法線である第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
請求項１４に記載の制御装置。
【請求項17】
前記設定部は、
前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記第１直線に交差するように設定し、
前記第２文字情報グループに含まれる第４文字情報に対応付けられた第４判定領域を、前記第２直線に交差するように設定し、
前記判定部は、
前記第３判定領域が設定された後、前記第１検知対象物が前記第３判定領域内に位置するか否かを判定し、
前記第４判定領域が設定された後、前記第２検知対象物が前記第４判定領域内に位置するか否かを判定し、
前記表示出力部は、
前記第１検知対象物が前記第３判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、
前記第２検知対象物が前記第４判定領域内に位置すると前記判定部が判定した場合、前記第４文字情報を前記第２表示領域に表示させる、
請求項１５または１６に記載の制御装置。
前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記第１直線に交差するように設定し、
前記第２文字情報グループに含まれる第４文字情報に対応付けられた第４判定領域を、前記第２直線に交差するように設定し、
前記判定部は、
前記第３判定領域が設定された後、前記第１検知対象物が前記第３判定領域内に位置するか否かを判定し、
前記第４判定領域が設定された後、前記第２検知対象物が前記第４判定領域内に位置するか否かを判定し、
前記表示出力部は、
前記第１検知対象物が前記第３判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、
前記第２検知対象物が前記第４判定領域内に位置すると前記判定部が判定した場合、前記第４文字情報を前記第２表示領域に表示させる、
請求項１５または１６に記載の制御装置。
【請求項18】
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させる表示出力部と、
を備える制御装置。
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させる表示出力部と、
を備える制御装置。
【請求項19】
前記設定部は、前記表示面に平行な面内、または、前記表示面に交差する面内に、前記第１判定領域と、第２文字情報に対応付けられた第２判定領域と、を設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面に表示させる、
請求項１８に記載の制御装置。
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面に表示させる、
請求項１８に記載の制御装置。
【請求項20】
前記第１判定領域と前記第２判定領域は、隣接し、
前記設定部は、前記検知対象物が前記第１判定領域に位置する場合、前記第１判定領域を前記第２判定領域側に広げ、かつ、前記第２判定領域を狭める、
請求項１９に記載の制御装置。
前記設定部は、前記検知対象物が前記第１判定領域に位置する場合、前記第１判定領域を前記第２判定領域側に広げ、かつ、前記第２判定領域を狭める、
請求項１９に記載の制御装置。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、制御装置に関する。
【背景技術】
【0002】
空間上に配置される仮想のキーボードのキーである仮想キーを、複数の階層に対応付けて記憶する情報処理装置が知られている（たとえば特許文献１参照）。この情報処理装置では、指示媒体の空間上の位置を特定し、指示媒体が階層に対応する領域に位置する場合、階層に対応付けて記憶された仮想キーを表示画面に表示する。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１４－８２６０５号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ユーザによる操作入力を受け付ける制御装置において、更なる改善が求められている。
【課題を解決するための手段】
【0005】
上記課題を解決するために、本開示のある態様の制御装置は、ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、検知対象物により第１表示領域が指定された時刻である基準時刻の検知対象物の空間座標と、に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する設定部と、第１判定領域が設定された後、検知対象物が第１判定領域内に位置するか否かを判定する判定部と、検知対象物が第１判定領域内に位置すると判定部が判定した場合、第１文字情報を第１表示領域に表示させる表示出力部と、を備える。
【0006】
本開示の別の態様もまた、制御装置である。この装置は、ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得する座標取得部と、所定の入力開始条件が満たされた時刻である基準時刻の第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、基準時刻の第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定する設定部と、第１判定領域と第２判定領域が設定された後、第１検知対象物が第１判定領域内に位置するか否か、および、第２検知対象物が第２判定領域内に位置するか否かを判定する判定部と、第１検知対象物が第１判定領域に位置すると判定部が判定した場合、第１文字情報を表示面の第１表示領域に表示させ、第２検知対象物が第２判定領域に位置すると判定部が判定した場合、第２文字情報を表示面の第２表示領域に表示させる表示出力部と、を備える。
【0007】
本開示のさらに別の態様もまた、制御装置である。この装置は、ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、検知対象物が所定の入力空間に入ったときの検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定する設定部と、第１判定領域が設定された後、検知対象物が第１判定領域内に位置するか否かを判定する判定部と、検知対象物が第１判定領域内に位置すると判定部が判定した場合、第１文字情報を表示面に表示させる表示出力部と、を備える。
【発明の効果】
【0008】
上記の態様により、更なる改善を実現できる。
【図面の簡単な説明】
【0009】
【図1】第１の実施の形態の情報処理システムのブロック図である。
【図8】第２の実施の形態の情報処理システムにおける文字入力動作を説明するための図である。
【図9】第３の実施の形態の情報処理システムにおける文字入力動作を説明するためのディスプレイの平面図である。
【図11】第３の実施の形態の情報処理システムの処理を示すフローチャートである。
【図12】第４の実施の形態の情報処理システムにおける文字入力動作を説明するためのディスプレイの斜視図である。
【図14】第４の実施の形態の情報処理システムの処理を示すフローチャートである。
【図15】第５の実施の形態の情報処理システムにおける文字入力動作を説明するためのディスプレイの平面図である。
【図18】第５の実施の形態の情報処理システムにおける文字入力動作の別の例を説明するためのディスプレイの平面図である。
【図20】第５の実施の形態の情報処理システムの処理を示すフローチャートである。
【図22】第６の実施の形態の情報処理システムにおける文字入力動作の第１の例を説明するための図である。
【図23】第６の実施の形態の情報処理システムにおける文字入力動作の第２の例を説明するための図である。
【図24】第６の実施の形態の情報処理システムにおける文字入力動作の第３の例を説明するためのディスプレイの平面図である。
【図25】第６の実施の形態の情報処理システムにおける文字入力動作の第４の例を説明するためのディスプレイの平面図である。
【図26】第６の実施の形態の情報処理システムにおける文字入力動作の第５の例を説明するための図である。
【図27】情報処理システムにおける判定領域の各種の設定例を示す図である。
【図28】情報処理システムにおける判定領域の別の設定例を示す図である。
【図29】情報処理システムにおける判定領域のさらに別の設定例を示す図である。
【図30】第７の実施の形態の情報処理システムにおける文字入力動作を説明するためのディスプレイの斜視図である。
【図32】第７の実施の形態の複数の判定領域の別の設定例を示す図である。
【図33】第７の実施の形態の情報処理システムにおける判定領域のサイズ変更処理を説明するための図である。
【図34】第１の実施の形態の変形例の情報処理システムにおける文字入力動作を説明するための図である。
【発明を実施するための形態】
【0010】
以下、各図面に示される同一または同等の構成要素、部材、工程には、同一の符号を付するものとし、適宜重複した説明は省略する。また、各図面における部材の寸法は、理解を容易にするために適宜拡大、縮小して示される。
【0011】
（第１の実施の形態）
図１は、第１の実施の形態の情報処理システム１のブロック図である。情報処理システム１は、センサ１０、制御装置１２、およびディスプレイ１４を備える。
図１は、第１の実施の形態の情報処理システム１のブロック図である。情報処理システム１は、センサ１０、制御装置１２、およびディスプレイ１４を備える。
【0012】
情報処理システム１は、室内等に設置されてもよく、自動車などの車両に搭載されてもよく、用途は特に限定されない。ユーザは、ディスプレイ１４に触れず空中で手の指先を動かす文字入力動作を行うことで、文字を選択し、選択した文字を制御装置１２に入力できる。文字入力動作は、空中タッチ動作またはジェスチャー動作とも呼べる。
【0013】
センサ１０は、例えば深度カメラであり、ディスプレイ１４の表示面の前に位置するユーザを撮像可能な位置に設置される。センサ１０は、ユーザを定期的に撮像し、撮像した時系列の距離画像を制御装置１２に出力する。撮像する頻度は、実験やシミュレーションにより適宜定めることができ、例えば、１秒間に複数回であってよい。距離画像は、画像内の各位置の空間座標の情報を含む。この空間座標は、センサ１０に固有の３次元直交座標系における座標である。
【0014】
制御装置１２は、センサ１０から供給された時系列の距離画像に基づいて、ユーザの指先の動きを認識し、指先の動きに応じて文字入力を受け付ける。制御装置１２は、受け付けた文字に基づいて処理を実行する。
【0015】
指先は操作入力に利用される検知対象物の一例であり、検知対象物は指先には限られない。検知対象物の他の一例として、ユーザの身体の一部分である握り拳などが挙げられる。検知対象物は、ユーザの身体の一部分に限らず、ユーザの手に保持された物体またはユーザの身体に装着された物体であってもよい。
【0016】
ディスプレイ１４は、制御装置１２の制御に従い画像を表示する。ディスプレイ１４は、例えば、室内設置用の数十インチ以上の画面サイズのものでもよいし、車載用のより小さい画面サイズのものでもよい。
【0017】
図１に示すように、制御装置１２は、制御部２０および記憶部２２を備える。制御部２０は、画像取得部２４、座標取得部２６、算出部２８、判定部３０、設定部３２、機能実行部３４、および表示出力部３６を有する。
【0018】
制御部２０の構成は、ハードウェア的には、任意のコンピュータのＣＰＵ、メモリ、その他のＬＳＩで実現でき、ソフトウェア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。制御装置１２は、例えばプロセッサとメモリとを備え、プロセッサがメモリにロードされたプログラムを実行することによって、制御部２０および制御部２０が有する各機能ブロックの機能を実現する。
【0019】
記憶部２２は、各種情報を記憶する。記憶部２２は、メモリまたはストレージのような、情報（言い換えるとデータ）を記憶するためのハードウェアにより実現される。記憶部２２は、座標情報、文字情報、表示領域情報、および判定領域情報を保持する。座標情報は、センサ１０の設置位置の空間座標、センサ１０の取り付け角度、およびディスプレイ１４の設置位置の空間座標を含む。文字情報は、複数の文字情報グループを識別するための情報と、複数の文字情報グループのそれぞれに含まれる文字情報と、を含む。表示領域情報は、複数の表示領域のそれぞれの中心座標およびサイズの情報と、表示領域と文字情報グループとの対応関係の情報と、を含む。判定領域情報は、複数の判定領域のサイズの情報を含む。座標情報、文字情報、表示領域情報、および判定領域情報の詳細は後述する。
【0020】
【0021】
以下、制御装置１２は、日本語のひらがなの文字の入力を受け付ける一例を説明する。入力可能な文字は特に限定されず、制御装置１２は、日本語の片仮名の入力を受け付けてもよいし、後述するように、数字の入力を受け付けてもよいし、英語などの任意の言語の文字の入力を受け付けてもよい。
【0022】
「あ」行の５文字「あ」、「い」、「う」、「え」、および「お」を第１文字情報グループの文字情報とする。「か」行の５文字を第２文字情報グループの文字情報とする。「さ」行の５文字を第３文字情報グループの文字情報とする。「た」行の５文字を第４文字情報グループの文字情報とする。「な」行の５文字を第５文字情報グループの文字情報とする。「は」行の５文字を第６文字情報グループの文字情報とする。「ま」行の５文字を第７文字情報グループの文字情報とする。「や」行の３文字を第８文字情報グループの文字情報とする。「ら」行の５文字を第９文字情報グループの文字情報とする。半濁点「゜」と濁点「゛」を第１０文字情報グループの文字情報とする。「わ」行の文字「わ」と「を」、および「ん」を第１０文字情報グループの文字情報とする。記号「？」、「。」、「、」、および「！」を第１１文字情報グループの文字情報とする。
【0023】
図２では、表示面１５は、初期状態の画像を表示している。表示面１５は、第１表示領域４０＿１、第２表示領域４０＿２、第３表示領域４０＿３、第４表示領域４０＿４、第５表示領域４０＿５、第６表示領域４０＿６、第７表示領域４０＿７、第８表示領域４０＿８、第９表示領域４０＿９、第１０表示領域４０＿１０、第１１表示領域４０＿１１、第１２表示領域４０＿１２、および入力表示領域４２を有する。これらの第１表示領域４０＿１等を区別しない場合には、表示領域４０と呼ぶ。複数の表示領域４０は、スクリーンキーボードとも呼べる。表示領域４０と、文字情報グループは、予め１対１に対応付けられている。
【0024】
表示出力部３６は、記憶部２２に記憶された表示領域４０と文字情報グループとの対応関係の情報に基づいて、初期状態の画像において、複数の文字情報グループのそれぞれについて、文字情報グループに関する情報を、対応する表示領域４０に表示させる。初期状態の画像では、文字情報グループに関する情報は、例えば、文字情報グループを代表する文字の情報である。文字情報グループを代表する文字の情報は、文字情報グループを識別するための情報とも呼べる。
【0025】
第１表示領域４０＿１には、第１文字情報グループを代表する文字「あ」が表示される。第２表示領域４０＿２には、第２文字情報グループを代表する文字「か」が表示される。第３表示領域４０＿３には、第３文字情報グループを代表する文字「さ」が表示される。第４表示領域４０＿４から第１２表示領域４０＿１２も同様である。後述するように、それぞれの表示領域４０に表示される文字は、ユーザの文字入力動作に応じて変化し得る。
【0026】
また、後述するように、入力表示領域４２には、ユーザの文字入力動作に応じて入力された文字が表示される。
【0027】
図２では、情報処理システム１の３次元直交座標系のＸ軸、Ｙ軸、Ｚ軸を示す。Ｚ軸は、ディスプレイ１４の表示面１５の法線方向に延びる。Ｘ軸は、表示面１５の横方向に延びる。Ｙ軸は、表示面１５の縦方向に延びる。
【0028】
以下、ユーザが「あ」行の文字「い」を入力する一例を説明する。図２に示すように、まず、ユーザは、ディスプレイ１４に触れずに指先５０で、文字「あ」が表示された第１表示領域４０＿１を指定する。次に、ユーザは、第１表示領域４０＿１に表示された文字「あ」が文字「い」に変わるまで、指先５０を第１表示領域４０＿１に近づける。ユーザは、第１表示領域４０＿１に文字「い」が表示された場合、指先で所定の決定動作を行う。これにより、文字「い」が入力表示領域４２に表示され、かつ、制御装置１２に入力される。ユーザは、これらの動作を繰り返すことで、複数の文字を入力できる。以下、より詳細に説明する。
【0029】
画像取得部２４は、ディスプレイ１４の前に位置するユーザを撮像した時系列の距離画像をセンサ１０から取得し、取得したそれぞれの距離画像を画像認識することで、ユーザの指先５０と目５２を検出する。指先５０と目５２の検出には公知の画像認識技術を利用できる。画像取得部２４は、検出した指先５０と目５２のそれぞれの空間座標を時系列に取得し、座標取得部２６に出力する。
【0030】
座標取得部２６は、画像取得部２４から供給されたセンサ１０の座標系でのユーザの指先５０と目５２のそれぞれの空間座標と、記憶部２２に記憶された座標情報に含まれるセンサ１０の設置位置の空間座標およびセンサ１０の取り付け角度とに基づいて、情報処理システム１の３次元直交座標系でのユーザの指先５０と目５２のそれぞれの時系列の空間座標を演算し、取得する。座標取得部２６は、取得した空間座標を算出部２８と判定部３０に出力する。算出部２８の処理は後述する。
【0031】
判定部３０は、座標取得部２６から供給された指先５０と目５２のそれぞれの空間座標と、記憶部２２に記憶された複数の表示領域４０のそれぞれの中心座標およびサイズの情報と、に基づいて、指先５０が複数の表示領域４０のいずれかを指定しているか否かを判定する。
【0032】
判定部３０は、目５２と指先５０を通る直線Ｌ０上に表示領域４０がある場合、指先５０が当該直線Ｌ０上の表示領域４０を指定していると判定する。判定部３０は、目５２と指先５０を通る直線Ｌ０上に表示領域４０がない場合、指先５０が表示領域４０を指定していないと判定する。判定部３０は、判定結果を設定部３２に出力する。判定部３０は、指先５０が複数の表示領域４０のいずれかを指定していると判定した場合、判定に用いられた指先５０の空間座標も設定部３２に出力する。判定に用いられた指先５０の空間座標は、指先５０により表示領域４０が指定された時刻である基準時刻の指先５０の空間座標である。
【0033】
図２の例では、ユーザは、第１表示領域４０＿１を指定するために、直線Ｌ０上に第１表示領域４０＿１が位置するように、指先５０と目５２の少なくとも何れかを動かす。判定部３０は、直線Ｌ０に交差する第１表示領域４０＿１が指定されたと判定する。
【0034】
図３は、図２に続く、文字入力動作を説明するための図である。図３（ａ）は、ディスプレイ１４の平面図であり、図３（ｂ）は、ディスプレイ１４の側面図であり、図３（ｃ）は、ディスプレイ１４の上面図である。図３（ａ）では、第１表示領域４０＿１、第２表示領域４０＿２、および第３表示領域４０＿３を図２より拡大して示し、他の表示領域４０は図示を省略する。
【0035】
ｎを表示領域４０の数とし、ｉを１からｎまでの整数の何れかとする。設定部３２は、指先５０が第ｉ表示領域４０＿ｉを指定していると判定部３０が判定した場合、第ｉ表示領域４０＿ｉの座標と、判定部３０から供給された基準時刻における指先５０の空間座標と、に基づいて、第ｉ表示領域４０＿ｉと指先５０との間に第１判定領域４４＿１、第２判定領域４４＿２、第３判定領域４４＿３、第４判定領域４４＿４、および第５判定領域４４＿５を設定する。これらの第１判定領域４４＿１等を区別しない場合には、判定領域４４と呼ぶ。
【0036】
設定部３２は、基準時刻における指先５０の空間座標と、第ｉ表示領域４０＿ｉと、を結ぶ操作用の直線Ｌ１を設定し、直線Ｌ１に複数の判定領域４４が交差するように、複数の判定領域４４を設定する。設定部３２は、基準時刻における目５２の空間座標と、基準時刻における指先５０の空間座標と、第ｉ表示領域４０＿ｉと、を結ぶ操作用の直線Ｌ１を設定してもよい。この場合、操作用の直線Ｌ１は、直線Ｌ０と同一である。設定部３２は、基準時刻における目５２の空間座標と、第ｉ表示領域４０＿ｉと、を結ぶ操作用の直線Ｌ１を設定してもよい。
【0037】
設定部３２は、記憶部２２に記憶された複数の判定領域４４のサイズの情報に基づいて、例えば、同じサイズの複数の判定領域４４を、表示面１５に平行に等間隔に設定する。判定領域４４は、任意の立体形状を有し、例えば、図３に示す例のように板状であってよい。表示面１５に平行な断面における、判定領域４４の断面積および形状は、特に限定されないが、例えば、図３に示す例のように表示領域４０の面積および形状と同等であってよい。指先５０側から表示面１５側に、第１判定領域４４＿１、第２判定領域４４＿２、第３判定領域４４＿３、第４判定領域４４＿４、第５判定領域４４＿５の順に並ぶ。設定部３２は、第ｉ文字情報グループに含まれる複数の文字情報と複数の判定領域４４とを１対１に対応付ける。
【0038】
図３の例では、指先５０が第１表示領域４０＿１を指定したため、設定部３２は、基準時刻における指先５０の空間座標と、第１表示領域４０＿１の中心座標と、を結ぶ直線Ｌ１に交差する複数の判定領域４４を設定する。第１判定領域４４＿１は、文字「あ」に対応し、第２判定領域４４＿２は、文字「い」に対応し、第３判定領域４４＿３は、文字「う」に対応し、第４判定領域４４＿４は、文字「え」に対応し、第５判定領域４４＿５は、文字「お」に対応する。
【0039】
また、設定部３２は、判定領域４４を設定した場合、図３（ｂ）と図３（ｃ）に示す選択領域Ｒ１を設定する。選択領域Ｒ１は、複数の判定領域４４を含み、立体形状を有する。表示面１５に平行な断面における、選択領域Ｒ１の断面積および形状は、特に限定されないが、例えば、図３に示す例のように判定領域４４の面積および形状と同等であってよい。判定部３０は、指先５０が選択領域Ｒ１内に位置するか否か判定する。指先５０が選択領域Ｒ１内に位置すると判定部３０が判定した場合、設定部３２は、複数の判定領域４４を維持する。
【0040】
指先５０が選択領域Ｒ１内に位置しないと判定部３０が判定した場合、設定部３２は、複数の判定領域４４の設定を解除する。判定部３０は、指先５０が選択領域Ｒ１内に位置しないと判定した場合、指先５０が複数の表示領域４０のいずれかを指定しているか否かを再び判定する。この場合、ユーザは、指先５０により表示領域４０を新たに指定できる。
【0041】
図４は、図３に続く、文字入力動作を説明するための図である。図４（ａ）は、ディスプレイ１４の平面図であり、図４（ｂ）は、ディスプレイ１４の側面図である。図４に示すように、ユーザは、指先５０を第１表示領域４０＿１に近づけ、指先５０が文字「い」の第２判定領域４４＿２に入っている。
【0042】
判定部３０は、複数の判定領域４４が設定された後、指先５０が何れかの判定領域４４内に位置するか否かを判定し、判定結果を機能実行部３４に出力する。判定結果は、指先５０が位置する判定領域４４を識別するための情報を含む。
【0043】
判定部３０が、指先５０が何れかの判定領域４４内に位置すると判定した場合、機能実行部３４は、記憶部２２に保持された文字情報に基づき、第ｉ表示領域４０＿ｉの文字情報を変更する処理を表示面１５に表示された画像に対して実行する。機能実行部３４は、画像データを生成し、表示出力部３６に供給する。
【0044】
表示出力部３６は、機能実行部３４から供給された画像データをディスプレイ１４に出力し、ディスプレイ１４に画像を表示させる。
【0045】
つまり、ｍを判定領域の数とし、ｊを１からｍまでの整数の何れかとして、表示出力部３６は、指先が第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を第ｉ表示領域４０＿ｉに表示させる。
【0046】
機能実行部３４は、指先が第ｊ判定領域４４＿ｊに位置している間、第ｉ表示領域４０＿ｉの文字を強調表示してもよい。強調表示として、例えば、文字の色を変えること、文字のサイズを変えることなどが挙げられる。複数の判定領域４４が間隔を空けて設定されている場合でも、強調表示により、指先５０が判定領域４４に位置しているか否か、即ち指先５０の位置において文字を入力可能か否かをユーザに認識させることができる。
【0047】
図４の例では、指先５０が第２判定領域４４＿２に位置するため、表示出力部３６は、第１表示領域４０＿１に文字「あ」に替えて文字「い」を表示させる。
【0048】
算出部２８は、座標取得部２６から供給された空間座標に基づいて、所定の単位時間における指先５０の軌跡を算出し、算出した軌跡の情報を判定部３０に供給する。指先５０の軌跡は、決定動作が行われたか判定するために用いられる。決定動作が、一定時間の間、指先５０を停止する動作である場合、算出部２８を設けなくてもよい。
【0049】
判定部３０は、座標取得部２６から供給された空間座標と、算出部２８から供給された指先５０の軌跡の情報とに基づいて、第ｊ判定領域４４＿ｊで、指先５０によって決定動作が行われたか否かを判定する。
【0050】
機能実行部３４は、指先５０が第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定し、当該文字情報の入力を受け付ける。機能実行部３４は、受け付けた文字情報を用いて、所定のアプリケーションの処理を実行してもよいし、受け付けた文字情報を図示しない他の処理装置に供給してもよい。
【0051】
機能実行部３４は、受け付けた文字情報を入力表示領域４２に追加する処理を、表示面１５に表示された画像に対して実行する。
【0052】
つまり、表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を入力表示領域４２に表示させる。
【0053】
図４の例では、ユーザは、入力したい文字「い」が第１表示領域４０＿１に表示されたとき、即ち指先５０が第１判定領域４４＿１に位置するとき、指先５０で決定動作を行う。これに応じて、機能実行部３４は、第１判定領域４４＿１に対応付けられた文字情報である文字「い」の入力を受け付け、表示出力部３６は、文字「い」を入力表示領域４２に表示させる。
【0054】
このように、実施の形態によれば、ユーザが指先５０で指定した表示領域４０に対応する判定領域４４を、指先５０と、指定した表示領域４０との間の空間に設定できる。よって、ディスプレイ１４の表示面１５のサイズによらず、文字情報を選択しやすい。
【0055】
また、ユーザは、表示領域４０を指定したときの指先５０の位置から、指定した表示領域４０に指先５０を近づけることで、その表示領域４０に対応付けられた文字情報グループに含まれる文字情報を選択し、決定できる。つまり、指定した表示領域４０に対して斜め方向または垂直方向に指先５０を移動させることで、文字情報を入力できる。よって、直感的に操作可能であり、操作性が良い。
【0056】
次に、以上の構成による情報処理システム１の全体的な動作を説明する。図５は、図１の情報処理システム１の処理を示すフローチャートである。判定部３０は、目５２と指先５０を通る直線Ｌ０上に表示領域４０があるか判定する（Ｓ１０）。直線Ｌ０上に表示領域４０がなければ（Ｓ１０のＮ）、判定部３０は、Ｓ１０の処理に戻る。
【0057】
直線Ｌ０上に表示領域４０がある場合（Ｓ１０のＹ）、判定部３０は、特定された第ｉ表示領域４０＿ｉに対応する第ｉ文字情報グループを決定する（Ｓ１２）。設定部３２は、操作用の直線Ｌ１を設定し（Ｓ１４）、操作用の直線Ｌ１上に判定領域４４と選択領域Ｒ１を設定する（Ｓ１６）。
【0058】
判定部３０は、指先５０が何れかの判定領域４４内に位置するか判定する（Ｓ１８）。指先５０が何れかの判定領域４４内に位置する場合（Ｓ１８のＹ）、表示出力部３６は、特定された第ｊ判定領域４４＿ｊに対応付けられた文字情報を第ｉ表示領域４０＿ｉに表示させる（Ｓ２０）。
【0059】
判定部３０は、第ｊ判定領域４４＿ｊで決定動作があるか判定する（Ｓ２２）。決定動作があった場合（Ｓ２２のＹ）、機能実行部３４は、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定する（Ｓ２４）。判定部３０は、指先５０が選択領域Ｒ１から外れたか判定する（Ｓ２６）。指先５０が選択領域Ｒ１から外れていない場合（Ｓ２６のＮ）、判定部３０は、Ｓ１８の処理に戻る。
【0060】
指先５０が選択領域Ｒ１から外れた場合（Ｓ２６のＹ）、表示出力部３６は、第ｉ文字情報グループを代表する文字情報を第ｉ表示領域４０＿ｉに表示させ（Ｓ２８）、情報処理システム１の処理は、判定部３０によるＳ１０の処理に戻る。
【0061】
Ｓ１８で、指先５０が何れかの判定領域４４内に位置しない場合（Ｓ１８のＮ）、判定部３０は、Ｓ２６の処理に移る。Ｓ２２で、第ｊ判定領域４４＿ｊで決定動作がない場合（Ｓ２２のＮ）、判定部３０は、Ｓ２６の処理に移る。
【0062】
なお、判定部３０は、ユーザの目５２の位置を用いずに、指先５０が複数の表示領域４０のいずれかを指定しているか否かを判定してもよい。
【0063】
図６は、図１の情報処理システム１における表示領域４０の指定動作の別の例を説明するためのディスプレイ１４の平面図である。図６では、入力表示領域４２の図示を省略する。図６（ａ）は、指先５０の方向による表示領域４０の指定動作を説明するための図である。座標取得部２６は、ユーザの指先５０と指の所定位置５４のそれぞれの時系列の空間座標を取得する。指の所定位置５４は、例えば、指の第１関節、第２関節、または指の付け根などである。判定部３０は、指先５０と指の所定位置５４とを通る直線Ｌ１上に表示領域４０がある場合、指先５０が当該直線Ｌ１上の表示領域４０を指定していると判定する。図６（ａ）の例では、指先５０が第１表示領域４０＿１を指定していると判定される。直線Ｌ１は、操作用の直線としても用いられる。
【0064】
図６（ｂ）は、指先５０の移動方向による表示領域４０の指定動作を説明するための図である。判定部３０は、時刻ｔ１の指先５０の空間座標と、時刻ｔ１の後の時刻ｔ２の指先５０の空間座標とを通る直線Ｌ１上に表示領域４０がある場合、指先５０が当該直線Ｌ１上の表示領域４０を指定していると判定する。図６（ｂ）の例では、指先５０が第１表示領域４０＿１を指定していると判定される。直線Ｌ１は、操作用の直線としても用いられる。これらの変形例では、ユーザは、目５２の位置を考慮せずに表示領域４０を指定できる。
【0065】
また、複数の判定領域４４のサイズは、異なってもよい。図７は、図１の情報処理システム１における判定領域４４の別の例を示す。図７（ａ）は、ディスプレイ１４の平面図であり、図７（ｂ）は、ディスプレイ１４の側面図であり、図７（ｃ）は、ディスプレイ１４の上面図である。
【0066】
設定部３２は、基準時刻における指先５０の位置に近いほど、表示面１５に平行な断面における、判定領域４４の断面積を小さく設定する。表示面１５に平行な断面における、第２判定領域４４＿２の断面積は、表示面１５に平行な断面における、第１判定領域４４＿１の断面積よりも大きい。表示面１５に平行な断面における、第３判定領域４４＿３の断面積は、表示面１５に平行な断面における、第２判定領域４４＿２の断面積よりも大きい。表示面１５に平行な断面における、第４判定領域４４＿４の断面積は、表示面１５に平行な断面における、第３判定領域４４＿３の断面積よりも大きい。表示面１５に平行な断面における、第５判定領域４４＿５の断面積は、表示面１５に平行な断面における、第４判定領域４４＿４の断面積よりも大きい。
【0067】
それぞれの判定領域４４において、表示面１５に平行な断面における、判定領域４４の断面積は、表示面１５に平行な断面の位置によらず等しい。
【0068】
また、第２判定領域４４＿２の体積は、第１判定領域４４＿１の体積よりも大きい。第３判定領域４４＿３の体積は、第２判定領域４４＿２の体積よりも大きい。第４判定領域４４＿４の体積は、第３判定領域４４＿３の体積よりも大きい。第５判定領域４４＿５の体積は、第４判定領域４４＿４の体積よりも大きい。
【0069】
この変形例では、判定領域４４の設定の自由度を高めることができる。
【0070】
（第２の実施の形態）
第２の実施の形態では、判定領域４４の設定方向が第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第２の実施の形態では、判定領域４４の設定方向が第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0071】
図８は、第２の実施の形態の情報処理システム１における文字入力動作を説明するための図である。図８（ａ）は、ディスプレイ１４の平面図であり、図８（ｂ）は、ディスプレイ１４の側面図であり、図８（ｃ）は、ディスプレイ１４の上面図である。
【0072】
設定部３２は、基準時刻における指先５０の空間座標と、表示面１５と、を結ぶ直線Ｌ１であって、表示面１５の法線である直線Ｌ１に複数の判定領域４４が交差するように、複数の判定領域４４を設定する。つまり、直線Ｌ１は、直線Ｌ０とは異なる。
【0073】
図８の例では、指先５０が第２表示領域４０＿２を指定したため、設定部３２は、文字「か」、「き」、「く」、「け」、「こ」に対応する複数の判定領域４４を指先５０と表示面１５との間の空間に設定する。
【0074】
本実施の形態によれば、ユーザは、表示領域４０を指定したときの指先５０の位置から、表示面１５の法線方向に沿って指先５０を移動させることで、文字情報を選択できる。
【0075】
（第３の実施の形態）
第３の実施の形態では、文字情報の選択および決定方法が第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第３の実施の形態では、文字情報の選択および決定方法が第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0076】
図９は、第３の実施の形態の情報処理システム１における文字入力動作を説明するためのディスプレイ１４の平面図である。第１文字情報グループは、５文字「あ」、「か」、「さ」、「た」、「な」の文字情報を含む。第２文字情報グループは、５文字「は」、「ま」、「や」、「ら」、「わ」の文字情報を含む。第１文字情報グループに含まれる各文字は、当該文字の行の複数の文字に関連付けられている。つまり、文字「あ」は、「あ」行の他の文字「い」、「う」、「え」、「お」に関連付けられている。文字「か」は、「か」行の他の文字「き」、「く」、「け」、「こ」に関連付けられている。文字「さ」等も同様である。
【0077】
第１表示領域４０＿１には、第１文字情報グループが対応付けられており、第１文字情報グループを代表する文字「あ」が表示される。図９に示すように、第１表示領域４０＿１が指先５０で指定されると、設定部３２は、５つの判定領域４４を直線Ｌ１に交差するように設定し、第１文字情報グループの５文字を５つの判定領域４４に１文字ずつ対応付ける。
【0078】
図９では、第１判定領域４４＿１は、文字「あ」に対応し、第２判定領域４４＿２は、文字「か」に対応し、第３判定領域４４＿３は、文字「さ」に対応し、第４判定領域４４＿４は、文字「た」に対応し、第５判定領域４４＿５は、文字「な」に対応する。
【0079】
図示は省略するが、表示面１５内の第６表示領域には、第２文字情報グループが対応付けられており、第２文字情報グループを代表する文字「は」が表示される。第６表示領域が指先５０で指定されると、設定部３２は、５つの判定領域４４を設定し、第２文字情報グループの５文字を５つの判定領域４４に１文字ずつ対応付ける。
【0080】
判定部３０は、複数の判定領域４４が設定された後、指先５０が何れかの判定領域４４内に位置するか否かを判定する。
【0081】
表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を第１表示領域４０＿１に表示させ、かつ、第１表示領域４０＿１に表示させた当該文字情報に関連付けられた４つの文字情報を第２表示領域４０＿２、第３表示領域４０＿３、第４表示領域４０＿４、および第５表示領域４０＿５に１文字ずつ表示させる。
【0082】
第２表示領域４０＿２、第３表示領域４０＿３、第４表示領域４０＿４、第５表示領域４０＿５は、それぞれ、第１表示領域４０＿１に隣接する。第２表示領域４０＿２は、第１表示領域４０＿１の左に位置する。第３表示領域４０＿３は、第１表示領域４０＿１の上に位置する。第４表示領域４０＿４は、第１表示領域４０＿１の右に位置する。第５表示領域４０＿５は、第１表示領域４０＿１の下に位置する。
【0083】
図９では、指先５０は第１判定領域４４＿１内に位置するため、第１表示領域４０＿１に文字「あ」が表示され、第２表示領域４０＿２に文字「い」が表示され、第３表示領域４０＿３に文字「う」が表示され、第４表示領域４０＿４に文字「え」が表示され、第５表示領域４０＿５に文字「お」が表示される。
【0084】
図１０は、図９に続く、文字入力動作を説明するためのディスプレイ１４の平面図である。図１０では、第２判定領域４４＿２以外の判定領域４４を省略する。図１０では、指先５０は第２判定領域４４＿２内に位置するため、第１表示領域４０＿１に文字「か」が表示され、第２表示領域４０＿２に文字「き」が表示され、第３表示領域４０＿３に文字「く」が表示され、第４表示領域４０＿４に文字「け」が表示され、第５表示領域４０＿５に文字「こ」が表示される。
【0085】
このように、指先５０の動作により選択した文字情報の周囲に、入力可能な、関連する文字情報を表示できる。
【0086】
判定部３０は、指先５０によって第１決定動作または第２決定動作が行われたか否かを判定する。表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊに位置し、かつ第１決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を入力表示領域４２に表示させる。つまり、第１文字情報グループの文字情報は、第１決定動作で入力できる。第１決定動作は、第１の実施の形態の決定動作と同じであってよい。
【0087】
表示出力部３６は、指先５０が第１表示領域４０＿１の周囲の表示領域４０のいずれかを指定し、かつ第２決定動作が行われたと判定部３０が判定した場合、第２決定動作の対象の文字情報を入力表示領域４２に表示させる。第２決定動作は、第１表示領域４０＿１の周囲の表示領域４０の文字情報に対する決定動作であり、例えば、指先５０を第１表示領域４０＿１から周囲の表示領域４０のいずれかに向けて所定速度以上で動かす動作である。この動作は、空中でのフリック動作とも呼べる。
【0088】
第２決定動作は、第１決定動作と同じでもよい。つまり、指先５０で周囲の表示領域４０を指定した状態で第１決定動作を行ってもよい。
【0089】
図１０では、指先５０により空中でのフリック動作が行われて、指先５０が第３表示領域４０＿３を指定したため、第３表示領域４０＿３に表示された文字「く」が入力される。
【0090】
このように、第１の実施の形態とは異なる文字入力動作で文字情報を入力できる。
【0091】
なお、第１文字情報グループと第２文字情報グループを１つの文字情報グループにまとめてもよい。この場合、第１表示領域４０＿１が指先５０で指定されると、設定部３２は、１０個の判定領域４４を設定し、文字情報グループの１０文字を１０個の判定領域４４に１文字ずつ対応付ける。
【0092】
図１１は、第３の実施の形態の情報処理システム１の処理を示すフローチャートである。Ｓ１０からＳ１８の処理は、図５の第１の実施の形態と同じである。Ｓ１８で、指先５０が何れかの判定領域４４内に位置する場合（Ｓ１８のＹ）、表示出力部３６は、特定された第ｊ判定領域４４＿ｊに対応付けられた文字情報を第ｉ表示領域４０＿ｉに表示させ、当該文字情報に関連付けられた文字情報を第ｉ表示領域４０＿ｉの周囲に表示させる（Ｓ４０）。
【0093】
判定部３０は、第ｊ判定領域４４＿ｊで第１決定動作があるか判定する（Ｓ４２）。第１決定動作があった場合（Ｓ４２のＹ）、機能実行部３４は、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定する（Ｓ４４）。判定部３０は、指先５０が選択領域Ｒ１から外れたか判定する（Ｓ５０）。選択領域Ｒ１は、第１の実施の形態と同様に設定される。指先５０が選択領域Ｒ１から外れていない場合（Ｓ５０のＮ）、判定部３０は、Ｓ１８の処理に戻る。
【0094】
指先５０が選択領域Ｒ１から外れた場合（Ｓ５０のＹ）、表示出力部３６は、第ｉ文字情報グループを代表する文字情報を第ｉ表示領域４０＿ｉに表示させ、第ｉ表示領域４０＿ｉの周囲の文字情報を非表示にさせ（Ｓ５２）、情報処理システム１の処理は、判定部３０によるＳ１０の処理に戻る。
【0095】
Ｓ１８で、指先５０が何れかの判定領域４４内に位置しない場合（Ｓ１８のＮ）、判定部３０は、Ｓ５０の処理に移る。Ｓ４２で、第ｊ判定領域４４＿ｊで決定動作がない場合（Ｓ４２のＮ）、判定部３０は、第ｉ表示領域４０＿ｉの周囲の文字情報に対する第２決定動作があるか判定する（Ｓ４６）。第２決定動作があった場合（Ｓ４６のＹ）、機能実行部３４は、第２決定動作の対象の文字情報を決定し（Ｓ４８）、情報処理システム１の処理は、判定部３０によるＳ５０の処理に戻る。Ｓ４６で第２決定動作がない場合（Ｓ４６のＮ）、判定部３０は、Ｓ５０の処理に移る。
【0096】
（第４の実施の形態）
第４の実施の形態では、５本の指のそれぞれの文字入力動作により文字を入力可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第４の実施の形態では、５本の指のそれぞれの文字入力動作により文字を入力可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0097】
図１２は、第４の実施の形態の情報処理システム１における文字入力動作を説明するためのディスプレイ１４の斜視図である。ディスプレイ１４の表示面１５上に所定の入力空間４８が設定されている。ユーザは、文字入力を開始する場合、片手の５つの指先を表示面１５の前にかざし、入力空間４８に入れる。
【0098】
座標取得部２６は、表示面１５の前に位置する手の第１指先５０＿１、第２指先５０＿２、第３指先５０＿３、第４指先５０＿４、および第５指先５０＿５のそれぞれの空間座標を取得する。例えば、第１指先５０＿１は、親指の指先であり、第２指先５０＿２は、人差し指の指先であり、第３指先５０＿３は、中指の指先である。第４指先５０＿４は、薬指の指先であり、第５指先５０＿５は、小指の指先である。以下、第１指先５０＿１から第５指先５０＿５を区別しない場合には、指先５０と呼ぶ。５つの指先５０は操作入力に利用される５つの検知対象物の一例であり、５つの検知対象物は５つの指先５０には限られない。
【0099】
判定部３０は、５つの指先５０のそれぞれの空間座標に基づいて、５つの指先５０が入力空間４８に入ったか否か判定する。５つの指先５０が入力空間４８に入ったことは、所定の入力開始条件が満たされたことに相当する。判定部３０は、判定結果を表示出力部３６に出力する。判定部３０は、判定結果と、入力開始条件が満たされた時刻である基準時刻における５つの指先５０のそれぞれの空間座標と、を設定部３２に出力する。
【0100】
【0101】
表示出力部３６は、入力開始条件が満たされたと判定部３０が判定した場合、５つの指先５０のそれぞれの基準時刻の空間座標に基づいて、第１表示領域４０＿１、第２表示領域４０＿２、第３表示領域４０＿３、第４表示領域４０＿４、および第５表示領域４０＿５を含む画像を表示面１５に表示させる。ｋを１から５までの整数として、例えば、第ｋ表示領域４０＿ｋは、基準時刻における第ｋ指先５０＿ｋの空間座標と、表示面１５と、を結ぶ直線であって、表示面１５の法線である直線に交差する。
【0102】
表示出力部３６は、初期状態の画像において、第ｋ文字情報グループに関する情報である第ｋ文字情報グループを代表する文字情報を、第ｋ表示領域４０＿ｋに表示させる。
【0103】
図１３（ａ）に示すように、ユーザから見て、第１指先５０＿１に文字「あ」が重なり、第２指先５０＿２に文字「か」が重なり、第３指先５０＿３に文字「さ」が重なり、第４指先５０＿４に文字「た」が重なり、第５指先５０＿５に文字「な」が重なる。よって、ユーザは、どの指先５０を動かせばどの行の文字を入力可能であるか、容易に把握できる。
【0104】
設定部３２は、第ｋ表示領域４０＿ｋの座標と、基準時刻における第ｋ指先５０＿ｋの空間座標と、に基づいて、第ｋ表示領域４０＿ｋと第ｋ指先５０＿ｋとの間に複数の判定領域４４を設定する。
【0105】
設定部３２は、基準時刻における第ｋ指先５０＿ｋの空間座標と、第ｋ表示領域４０＿ｋと、を結ぶ操作用の第ｋ直線Ｌｋを設定し、第ｋ直線Ｌｋに５つの判定領域４４が交差するように、５つの判定領域４４を設定する。
【0106】
設定部３２は、第１文字情報グループから第５文字情報グループに含まれる２５個の文字情報と２５個の判定領域４４とを１対１に対応付ける。
【0107】
図１３（ｂ）に示すように、第１直線Ｌ１に、第１判定領域４４＿１から第５判定領域４４＿５が交差する。第２直線Ｌ２に、第６判定領域４４＿６から第１０判定領域４４＿１０が交差する。第３直線Ｌ３に、第１１判定領域４４＿１１から第１５判定領域４４＿１５が交差する。第４直線Ｌ４に、第１６判定領域４４＿１６から第２０判定領域４４＿２０が交差する。第５直線Ｌ５に、第２１判定領域４４＿２１から第２５判定領域４４＿２５が交差する。
【0108】
判定部３０は、複数の判定領域４４が設定された後、第１指先５０＿１が第１判定領域４４＿１から第５判定領域４４＿５の何れかに位置するか否か、および、第２指先５０＿２が第６判定領域４４＿６から第１０判定領域４４＿１０の何れかに位置するか否かを判定する。判定部３０は、複数の判定領域４４が設定された後、第３指先５０＿３が第１１判定領域４４＿１１から第１５判定領域４４＿１５の何れかに位置するか否か、第４指先５０＿４が第１６判定領域４４＿１６から第２０判定領域４４＿２０の何れかに位置するか否か、および、第５指先５０＿５が第２１判定領域４４＿２１から第２５判定領域４４＿２５の何れかに位置するか否かを判定する。
【0109】
ｍを１から５までの整数の何れかとする。表示出力部３６は、第ｍ指先５０＿ｍが第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を第ｍ表示領域４０＿ｍに表示させる。
【0110】
判定部３０は、第ｊ判定領域４４＿ｊで、第ｍ指先５０＿ｍによって決定動作が行われたか否かを判定する。
【0111】
機能実行部３４は、第ｍ指先５０＿ｍが第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定し、当該文字情報の入力を受け付ける。
【0112】
表示出力部３６は、第ｍ指先５０＿ｍが第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を入力表示領域４２に表示させる。
【0113】
ユーザは、入力したい文字が属する行に対応する表示領域４０上の指先５０を表示領域４０に近づけ、入力したい文字を選択し、指先５０による決定動作を行うことで、選択した文字を入力できる。
【0114】
また、判定部３０は、少なくとも１つの指先５０により、入力空間４８で所定の文字切り替え動作が行われたか否か判定する。文字切り替え動作が行われたと判定部３０が判定した場合、表示出力部３６は、初期状態の画像において、第（ｋ＋５）文字情報グループに関する情報を第ｋ表示領域４０＿ｋに表示させる。表示面１５には、文字「は」、「ま」、「や」、「ら」、「わ」が表示される。
【0115】
文字切り替え動作が行われたと判定部３０が判定した場合、設定部３２は、第６文字情報グループから第１０文字情報グループに含まれる複数の文字情報と複数の判定領域４４とを１対１に対応付ける。
【0116】
図１４は、第４の実施の形態の情報処理システム１の処理を示すフローチャートである。判定部３０は、５つの指先５０が入力空間４８に位置するか否かを判定する（Ｓ６０）。５つの指先５０が入力空間４８に位置しなければ（Ｓ６０のＮ）、判定部３０は、Ｓ６０の処理に戻る。
【0117】
５つの指先５０が入力空間４８に位置する場合（Ｓ６０のＹ）、表示出力部３６は、各文字情報グループを代表する文字情報を表示させる（Ｓ６２）。設定部３２は、各指先５０を文字情報グループに割り当て（Ｓ６４）、各指先５０について判定領域４４を設定する（Ｓ６６）。
【0118】
判定部３０は、何れかの指先５０が何れかの判定領域４４内に位置するか判定する（Ｓ６８）。この条件が満たされる場合（Ｓ６８のＹ）、表示出力部３６は、特定された第ｊ判定領域４４＿ｊに対応付けられた文字情報を第ｍ表示領域４０＿ｍに表示させる（Ｓ７０）。
【0119】
判定部３０は、第ｊ判定領域４４＿ｊで決定動作があるか判定する（Ｓ７２）。決定動作があった場合（Ｓ７２のＹ）、機能実行部３４は、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定する（Ｓ７４）。判定部３０は、５つの指先５０が入力空間４８から外れたか判定する（Ｓ７６）。５つの指先５０が入力空間４８から外れていない場合（Ｓ７６のＮ）、判定部３０は、Ｓ６８の処理に戻る。
【0120】
５つの指先５０が入力空間４８から外れた場合（Ｓ７６のＹ）、表示出力部３６は、各文字情報グループを代表する文字情報を非表示にさせ（Ｓ７８）、情報処理システム１の処理は、判定部３０によるＳ６０の処理に戻る。
【0121】
Ｓ６８で、何れかの指先５０が何れかの判定領域４４内に位置しない場合（Ｓ６８のＮ）、判定部３０は、Ｓ７６の処理に移る。Ｓ７２で、第ｊ判定領域４４＿ｊで決定動作がない場合（Ｓ７２のＮ）、判定部３０は、Ｓ７６の処理に移る。
【0122】
本実施の形態によれば、５本の指を用いて文字情報を入力できる。
【0123】
なお、複数の表示領域４０は、基準時刻における５つの指先５０のそれぞれの空間座標によらず、表示面１５上の所定位置に表示されてもよい。
【0124】
また、第２の実施の形態と同様に、それぞれの指先５０に対して、複数の判定領域４４を表示面１５の法線に沿って設定してもよい。つまり、設定部３２は、基準時刻における第ｋ指先５０＿ｋの空間座標と、表示面１５と、を結ぶ操作用の第ｋ直線Ｌｋであって、表示面１５の法線である第ｋ直線Ｌｋに５つの判定領域４４が交差するように、５つの判定領域４４を設定してもよい。ユーザは、表示面１５の法線方向に沿ってそれぞれの指先５０を移動させることで、文字情報を選択できる。
【0125】
（第５の実施の形態）
第５の実施の形態では、入力された文字から始まる単語を選択および入力可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第５の実施の形態では、入力された文字から始まる単語を選択および入力可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0126】
図１５は、第５の実施の形態の情報処理システム１における文字入力動作を説明するためのディスプレイ１４の平面図である。まず、ユーザは、第１の実施の形態と同様に、指先５０で文字入力動作を行う。ここでは、文字「あ」が入力されたことを想定する。
【0127】
図１６は、図１５に続く、文字入力動作を説明するためのディスプレイ１４の平面図である。記憶部２２は、複数の単語情報を記憶している。機能実行部３４は、文字情報の入力を受け付けた場合、記憶部２２に保持された単語情報から、受け付けた文字から始まる単語を選択し、選択した単語を単語の表示領域６０に表示させるための画像データを生成する。例えば、図１５に示すように、単語「あさ」が単語の表示領域６０に表示される。
【0128】
ユーザは、単語を入力したい場合、指先５０で単語の表示領域６０を指定する。設定部３２は、指先５０が単語の表示領域６０を指定していると判定部３０が判定した場合、単語の表示領域６０の座標と、判定部３０から供給された基準時刻における指先５０の空間座標と、に基づいて、単語の表示領域６０と指先５０との間に複数の単語の判定領域４４を設定する。
【0129】
設定部３２は、記憶部２２に保持された単語情報から、受け付けた文字から始まる複数の単語を選択し、選択した複数の単語と複数の判定領域４４とを１対１に対応付ける。選択された複数の単語は、文字情報グループを構成する。
【0130】
図１７は、図１６に続く、文字入力動作を説明するためのディスプレイ１４の平面図である。ユーザは、指先５０を単語の表示領域６０に近づけ、指先５０が第２判定領域４４＿２に入っている。第２判定領域４４＿２には、単語「あき」が対応付けられている。
【0131】
表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた単語を単語の表示領域６０に表示させる。第２判定領域４４＿２に、単語「あさ」に替えて単語「あき」が表示される。
【0132】
ユーザは、入力したい単語「あき」が単語の表示領域６０に表示されたとき、即ち指先５０が第２判定領域４４＿２に位置するとき、指先５０で決定動作を行う。これに応じて、機能実行部３４は、第２判定領域４４＿２に対応付けられた文字情報である単語「あき」の入力を受け付け、表示出力部３６は、単語「あき」を入力表示領域４２に表示させる。本実施の形態によれば、単語を入力できる。
【0133】
単語の表示領域６０に複数の単語を表示してもよい。図１８は、第５の実施の形態の情報処理システム１における文字入力動作の別の例を説明するためのディスプレイ１４の平面図である。
【0134】
機能実行部３４は、文字情報の入力を受け付けた場合、記憶部２２に保持された単語情報から、受け付けた文字から始まる複数の単語を選択し、選択した複数の単語を単語の表示領域６０に表示させるための画像データを生成する。例えば、図１８に示すように、３つの単語「あさ」、「あき」、「あめ」が単語の表示領域６０に表示される。
【0135】
設定部３２は、指先５０が単語の表示領域６０を指定していると判定部３０が判定した場合、単語の表示領域６０と指先５０との間に複数の単語の判定領域４４を設定する。
【0136】
設定部３２は、記憶部２２に保持された単語情報から、受け付けた文字から始まる複数の単語を選択し、選択した複数の単語と複数の判定領域４４とを複数対１に対応付ける。例えば、設定部３２は、１つの判定領域４４に３つの単語を対応付ける。選択された複数の単語は、文字情報グループを構成する。文字情報グループに含まれる複数の文字情報は、それぞれ、所定の文字から始まる複数の単語を含む。
【0137】
図１９は、図１８に続く、文字入力動作を説明するためのディスプレイ１４の平面図である。ユーザは、指先５０を単語の表示領域６０に近づけ、指先５０が第２判定領域４４＿２に入っている。第２判定領域４４＿２には、文字情報として３つの単語「あり」、「あじ」、「あす」が対応付けられている。
【0138】
表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた複数の単語を単語の表示領域６０に表示させる。第２判定領域４４＿２には、３つの単語「あさ」、「あき」、「あめ」に替えて、３つの単語「あり」、「あじ」、「あす」が表示される。
【0139】
ユーザは、入力したい単語「あす」が単語の表示領域６０に表示されたとき、即ち指先５０が第２判定領域４４＿２に位置するとき、指先５０で、入力したい単語に対する決定動作を行う。入力したい単語に対する決定動作とは、例えば、単語の表示領域６０に表示された単語に指先５０を向けて、第１の実施の形態の決定動作を行うことである。これに応じて、機能実行部３４は、決定動作の対象の文字情報である単語「あす」の入力を受け付け、表示出力部３６は、単語「あす」を入力表示領域４２に表示させる。この例では、複数の単語が表示されるので、単語を選択しやすい。
【0140】
図２０は、第５の実施の形態の情報処理システム１の処理を示すフローチャートである。図２１は、図２０に続くフローチャートである。判定部３０は、目５２と指先５０を通る直線上に文字の表示領域４０があるか判定する（Ｓ８０）。当該直線上に文字の表示領域４０がある場合（Ｓ８０のＹ）、判定部３０は、Ｓ１２の処理に移る。Ｓ１２からＳ２４の処理は、図５の第１の実施の形態と同じである。Ｓ２４の次に、表示出力部３６は、決定された文字から始まる複数の単語を表示させる（Ｓ８２）、判定部３０は、Ｓ２６の処理に移る。Ｓ２６とＳ２８の処理は、図５の第１の実施の形態と同じである。
【0141】
Ｓ８０において、目５２と指先５０を通る直線上に文字の表示領域４０がなければ（Ｓ８０のＮ）、判定部３０は、目５２と指先５０を通る直線上に単語の表示領域６０があるか判定する（Ｓ８４）。当該直線上に単語の表示領域６０がなければ（Ｓ８４のＮ）、判定部３０は、Ｓ１０の処理に戻る。当該直線上に単語の表示領域６０がある場合（Ｓ８４のＹ）、設定部３２は、操作用の直線Ｌ１上に判定領域４４と選択領域Ｒ１を設定する（Ｓ８６）。
【0142】
判定部３０は、指先５０が何れかの判定領域４４内に位置するか判定する（Ｓ８８）。指先５０が何れかの判定領域４４内に位置する場合（Ｓ８８のＹ）、表示出力部３６は、特定された第ｊ判定領域４４＿ｊに対応付けられた複数の単語を単語の表示領域６０に表示させる（Ｓ９０）。
【0143】
判定部３０は、単語の何れかに対する決定動作があるか判定する（Ｓ９２）。決定動作があった場合（Ｓ９２のＹ）、機能実行部３４は、決定動作の対象の単語を決定する（Ｓ９４）。表示出力部３６は、複数の単語を非表示にして（Ｓ９８）、情報処理システム１の処理は、判定部３０によるＳ８０の処理に戻る。
【0144】
Ｓ８８において指先５０が何れかの判定領域４４内に位置しない場合（Ｓ８８のＮ）、または、Ｓ９２において決定動作がない場合（Ｓ９２のＮ）、判定部３０は、指先５０が選択領域Ｒ１から外れたか判定する（Ｓ９６）。指先５０が選択領域Ｒ１から外れていない場合（Ｓ９６のＮ）、判定部３０は、Ｓ８８の処理に移る。指先５０が選択領域Ｒ１から外れた場合（Ｓ９６のＹ）、表示出力部３６は、Ｓ９８の処理を実行する。
【0145】
（第６の実施の形態）
第６の実施の形態では、アルファベットまたは数字の入力が受け付けられることが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第６の実施の形態では、アルファベットまたは数字の入力が受け付けられることが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0146】
【0147】
制御装置１２は、アルファベットの入力を受け付ける。複数の文字情報グループは、異なるアルファベットを含む。それぞれの文字情報グループは、同じアルファベットの大文字と小文字を含む。
【0148】
第１表示領域４０＿１に対応付けられた第１文字情報グループは、文字「ａ」と「Ａ」を含む。第２表示領域４０＿２に対応付けられた第２文字情報グループは、文字「ｂ」と「Ｂ」を含む。第３表示領域４０＿３に対応付けられた第３文字情報グループは、文字「ｃ」と「Ｃ」を含む。図示しない他の複数の表示領域４０のそれぞれに対応付けられた他の文字情報グループも同様である。
【0149】
ユーザが文字「Ａ」を入力する一例を説明する。図２２（ａ）に示すように、まず、ユーザは、文字「ａ」が表示された第１表示領域４０＿１を指先５０で指定する。設定部３２は、文字「ａ」に対応付けられた第１判定領域４４＿１と、文字「Ａ」に対応付けられた第２判定領域４４＿２と、を設定する。
【0150】
次に、ユーザは、第１表示領域４０＿１に表示された文字「ａ」が文字「Ａ」に変わるまで、指先５０を第１表示領域４０＿１に近づける。指先５０が第２判定領域４４＿２に入り、第１表示領域４０＿１に文字「Ａ」が表示された場合、ユーザは、指先５０で決定動作を行う。これにより、文字「Ａ」が図示しない入力表示領域に表示され、かつ、制御装置１２に入力される。ユーザは、これらの動作を繰り返すことで、複数の文字を入力できる。
【0151】
【0152】
複数の文字情報グループのそれぞれは、アルファベットの複数の大文字を含む。第１表示領域４０＿１に対応付けられた第１文字情報グループは、文字「Ａ」、「Ｂ」、および「Ｃ］を含む。第２表示領域４０＿２に対応付けられた第２文字情報グループは、文字「Ｄ」、「Ｅ」、および「Ｆ］を含む。第３表示領域４０＿３に対応付けられた第３文字情報グループは、文字「Ｇ」、「Ｈ」、および「Ｉ］を含む。説明を省略するが、図２３（ａ）に示すように、他の複数の表示領域４０のそれぞれに対応付けられた他の文字情報グループに含まれる文字も同様である。
【0153】
初期状態の画像では、第１表示領域４０＿１には、第１文字情報グループに含まれる複数の文字「ＡＢＣ」が表示される。第２表示領域４０＿２には、第２文字情報グループに含まれる複数の文字「ＤＥＦ」が表示される。第３表示領域４０＿３には、第３文字情報グループに含まれる複数の文字「ＧＨＩ」が表示される。説明を省略するが、図２３（ａ）に示すように、他の複数の表示領域４０のそれぞれにおいても、対応付けられた文字情報グループに含まれる複数の文字が表示される。これにより、ユーザは、どの表示領域４０でどの文字が選択可能であるか容易に把握できる。
【0154】
ユーザが文字「Ａ」を入力する一例を説明する。図２３（ａ）に示すように、まず、ユーザは、文字「ＡＢＣ」が表示された第１表示領域４０＿１を指先５０で指定する。設定部３２は、複数の文字「ＡＢＣ」に対応付けられた第１判定領域４４＿１と、文字「Ａ」に対応付けられた第２判定領域４４＿２と、文字「Ｂ」に対応付けられた第３判定領域４４＿３と、文字「Ｃ」に対応付けられた第４判定領域４４＿４と、を設定する。
【0155】
次に、ユーザは、第１表示領域４０＿１に表示された文字「ＡＢＣ」が文字「Ａ」に変わるまで、指先５０を第１表示領域４０＿１に近づける。指先５０が第２判定領域４４＿２に入り、第１表示領域４０＿１の表示が文字「Ａ」に変わった場合、ユーザは、指先５０で決定動作を行う。これにより、文字「Ａ」が図示しない入力表示領域に表示され、かつ、制御装置１２に入力される。ユーザは、これらの動作を繰り返すことで、複数の文字を入力できる。
【0156】
なお、複数の文字「ＡＢＣ」に対応付けられた第１判定領域４４＿１に指先５０が位置した場合、第１表示領域４０＿１には文字「ＡＢＣ」が表示される。第１判定領域４４＿１に指先５０が位置した状態で、決定動作が行われた場合、文字は制御装置１２に入力されなくてもよいし、文字「ＡＢＣ」が入力されてもよい。
【0157】
また、図２２の文字入力動作の第１の例、および、図２３の文字入力動作の第２の例において、第５の実施の形態と同様に、入力された文字から始まる単語を選択および入力可能に構成してもよい。基本的な文字入力動作と処理は、第５の実施の形態と同様である。例えば、最初に文字「Ｃ」が入力された場合、文字「Ｃ」から始まる１または複数の単語が単語の表示領域に表示され、指先５０による動作に応じて表示された単語を選択および入力可能である。
【0158】
図２４は、第６の実施の形態の情報処理システム１における文字入力動作の第３の例を説明するためのディスプレイ１４の平面図である。基本的な文字入力動作と処理は、第３の実施の形態と同様である。
【0159】
文字情報グループは、６文字「Ａ」、「Ｆ」、「Ｋ」、「Ｐ」、「Ｕ」、「Ｚ」の文字情報を含む。文字情報グループに含まれる各文字は、当該文字にアルファベット順に続く４つの文字に関連付けられている。つまり、文字「Ａ」は、「Ａ」に続く４文字「Ｂ」、「Ｃ」、「Ｄ」、「Ｅ」に関連付けられている。文字「Ｆ」は、「Ｆ」に続く４文字「Ｇ」、「Ｈ」、「Ｉ」、「Ｊ」に関連付けられている。文字「Ｋ」等も同様である。
【0160】
第１表示領域４０＿１には、上記文字情報グループが対応付けられており、初期状態では、文字情報グループを代表する文字「Ａ」が表示される。第１表示領域４０＿１が指先５０で指定されると、設定部３２は、６つの判定領域４４を設定し、文字情報グループの６文字を６つの判定領域４４に対応付ける。図２４に示すように、例えば、第２表示領域４０＿２が指先５０で指定されると、第１表示領域４０＿１には文字「Ｆ」が表示され、その周囲に文字「Ｇ」、「Ｈ」、「Ｉ」、「Ｊ」が表示される。第３の実施の形態と同様の文字入力動作により、アルファベットを入力できる。
【0161】
図２５は、第６の実施の形態の情報処理システム１における文字入力動作の第４の例を説明するためのディスプレイ１４の平面図である。基本的な文字入力動作と処理は、第４の実施の形態と同様である。この例では、ＱＷＥＲＴＹ配列のキーボードを模擬している。ユーザから見て、第１指先５０＿１に文字「Ｑ」が重なり、第２指先５０＿２に文字「Ｗ」が重なり、第３指先５０＿３に文字「Ｅ」が重なり、第４指先５０＿４に文字「Ｒ」が重なり、第５指先５０＿５に文字「Ｔ」が重なる。
【0162】
設定部３２は、第ｋ表示領域４０＿ｋと第ｋ指先５０＿ｋとの間に、例えば３つの判定領域４４を設定する。図示しないが、第１表示領域４０＿１と第１指先５０＿１との間には、例えば、文字「Ｑ」に対応する第１判定領域４４＿１、文字「Ａ」に対応する第２判定領域４４＿２、および文字「Ｚ」に対応する第３判定領域４４＿３が設定される。第２表示領域４０＿２と第２指先５０＿２との間には、例えば、文字「Ｗ」に対応する第４判定領域４４＿４、文字「Ｓ」に対応する第５判定領域４４＿５、および文字「Ｘ」に対応する第６判定領域４４＿６が設定される。
【0163】
ユーザは、入力したい文字に対応する表示領域４０上の指先５０を表示領域４０に近づけ、入力したい文字を選択し、指先５０による決定動作を行うことで、選択した文字を入力できる。
【0164】
【0165】
制御装置１２は、数字の入力を受け付ける。図２６（ａ）では、表示面１５は、例えば、４文字のパスワードの入力画面を表示している。４つの表示領域４０は、それぞれ、入力された数字を表示する入力表示領域として機能する。
【0166】
４つの表示領域４０のそれぞれには、同じ文字情報グループが対応付けられている。文字情報グループは、複数の数字の情報を含む。例えば、文字情報グループは、０から９までの整数の情報を含む。
【0167】
ユーザは、ディスプレイ１４に触れずに指先５０で、例えば第１表示領域４０＿１を指定する。設定部３２は、数字「０」に対応付けられた第１判定領域４４＿１、数字「１」に対応付けられた第２判定領域４４＿２、数字「２」に対応付けられた第３判定領域４４＿３等を設定する。
【0168】
次に、ユーザは、第１表示領域４０＿１に表示された数字が、入力したい数字に変わるまで、指先５０を第１表示領域４０＿１に近づける。第１表示領域４０＿１に入力したい数字が表示された場合、ユーザは、指先５０で決定動作を行う。これにより、入力したい数字が制御装置１２に入力される。ユーザは、４つの表示領域４０のそれぞれで、これらの動作を行うことで、４つの数字を入力できる。
【0169】
（第１から第６の実施の形態における判定領域４４の各種の例）
図２７は、情報処理システム１における判定領域４４の各種の設定例を示す。図２７（ａ）は、判定領域４４の第１設定例を示す。直線Ｌ１と表示面１５のなす角度によらず、複数の判定領域４４は、表示面１５に平行である。直線Ｌ１と表示面１５のなす角度によらず、隣り合う２つの判定領域４４の表示面１５の法線に沿った間隔ｓ１は等しい。例えば、表示面１５の法線に沿った第１判定領域４４＿１と第２判定領域４４＿２との間隔ｓ１は、表示面１５の法線に沿った第２判定領域４４＿２と第３判定領域４４＿３との間隔ｓ１と等しい。
図２７は、情報処理システム１における判定領域４４の各種の設定例を示す。図２７（ａ）は、判定領域４４の第１設定例を示す。直線Ｌ１と表示面１５のなす角度によらず、複数の判定領域４４は、表示面１５に平行である。直線Ｌ１と表示面１５のなす角度によらず、隣り合う２つの判定領域４４の表示面１５の法線に沿った間隔ｓ１は等しい。例えば、表示面１５の法線に沿った第１判定領域４４＿１と第２判定領域４４＿２との間隔ｓ１は、表示面１５の法線に沿った第２判定領域４４＿２と第３判定領域４４＿３との間隔ｓ１と等しい。
【0170】
図２７（ｂ）は、判定領域４４の第２設定例を示す。直線Ｌ１と表示面１５のなす角度によらず、複数の判定領域４４は、直線Ｌ１に垂直である。直線Ｌ１と表示面１５のなす角度によらず、隣り合う２つの判定領域４４の直線Ｌ１に沿った間隔ｓ２は等しい。例えば、第１判定領域４４＿１と第２判定領域４４＿２との直線Ｌ１に沿った間隔ｓ２は、第２判定領域４４＿２と第３判定領域４４＿３との直線Ｌ１に沿った間隔ｓ２と等しい。この例では、指先５０を動かす方向によらず、隣り合う２つの判定領域４４の間における指先５０の移動距離を同等にできる。
【0171】
【0172】
設定部３２は、基準時刻における指先５０の位置から離れた判定領域４４ほど、直線Ｌ１に沿った判定領域４４の長さを長く設定する。例えば、直線Ｌ１に沿った第２判定領域４４＿２の長さａ２は、直線Ｌ１に沿った第１判定領域４４＿１の長さａ１よりも長い。また、第２判定領域４４＿２の体積は、第１判定領域４４＿１の体積よりも大きい。
【0173】
腕を伸ばして指先５０がユーザの身体から離れるほど、指先５０の位置のぶれが大きくなりやすいが、その状況でも判定領域４４を選択しやすい。そのため、表示面１５に近い判定領域４４を選択しやすい。
【0174】
図２８（ｂ）は、判定領域４４の第４設定例を示す。図２８（ｂ）から図２８（ｄ）に示す例では、文字は数字である。設定部３２は、基準時刻における指先５０の位置から離れるほど、直線Ｌ１に沿った隣り合う２つの判定領域４４の間隔を広く設定する。
【0175】
第２判定領域４４＿２と第３判定領域４４＿３との直線Ｌ１に沿った間隔ｓ２は、第１判定領域４４＿１と第２判定領域４４＿２との直線Ｌ１に沿った間隔ｓ１より広い。第３判定領域４４＿３と第４判定領域４４＿４との直線Ｌ１に沿った間隔ｓ３は、間隔ｓ２より広い。第４判定領域４４＿４と第５判定領域４４＿５との直線Ｌ１に沿った間隔ｓ４は、間隔ｓ３より広い。
【0176】
第１判定領域４４＿１に対応する第１文字情報は、所定数を第１指数で累乗した数字である。例えば、所定数は「１０」であり、第１指数は「０」である。第２判定領域４４＿２に対応する第２文字情報は、所定数を第１指数より大きい第２指数で累乗した数字である。例えば、第２指数は「１」である。
【0177】
第３判定領域４４＿３に対応する第３文字情報は、所定数を第２指数より大きい第３指数で累乗した数字である。例えば、第３指数は「２」である。第４判定領域４４＿４に対応する第４文字情報は、所定数を第３指数より大きい第４指数で累乗した数字である。例えば、第４指数は「３」である。第５判定領域４４＿５に対応する第５文字情報は、所定数を第４指数より大きい第５指数で累乗した数字である。例えば、第５指数は「４」である。
【0178】
この設定例では、累乗で変化する数字を選択できる。より大きい数字を選択するためには、指先５０をより長い距離動かす必要があるため、直感的に選択できる。
【0179】
図２８（ｃ）は、指先５０の移動速度が相対的に速い場合の判定領域の設定例を示す。図２８（ｄ）は、指先５０の移動速度が相対的に遅い場合の判定領域の設定例を示す。算出部２８は、指先５０の移動速度を定期的に算出し、算出した移動速度を判定部３０に出力する。判定部３０は、算出部２８から供給された指先５０の移動速度を速度しきい値と比較し、比較結果を設定部３２に出力する。１つ以上の速度しきい値が予め設定されている。
【0180】
設定部３２は、判定部３０から供給された比較結果に基づき、基準時刻から所定時間後における指先５０の移動速度が速いほど、複数の判定領域４４の直線Ｌ１に沿った間隔を広く設定し、かつ判定領域４４の数を減らす。所定時間は、実験またはシミュレーションにより適宜定めることができる。これにより、指先５０の移動速度が速い場合に判定領域４４を選択しやすい。
【0181】
設定部３２は、基準時刻における指先５０の位置から離れた判定領域４４ほど、大きい数字を対応付ける。設定部３２は、基準時刻から所定時間後における指先５０の移動速度が速いほど、隣り合う２つの判定領域４４のうち一方の判定領域４４に対応付ける数字と、他方の判定領域４４に対応付ける数字との差を大きく設定する。これにより、指先５０の移動速度が速い場合、移動速度が遅い場合よりも大きな数字を選択できる。
【0182】
図２９は、情報処理システム１における判定領域４４のさらに別の設定例を示す。図２９では、第１判定領域４４＿１と第２判定領域４４＿２以外の判定領域４４の図示を省略する。図２９（ａ）は、基準サイズの判定領域４４を示す。図２９（ｂ）は、サイズが変更された判定領域４４を示す。
【0183】
設定部３２は、直線Ｌ１に沿って隣接するように複数の判定領域４４を配置する。設定部３２は、指先５０が第２判定領域４４＿２に位置する場合、第２判定領域４４＿２を第１判定領域４４＿１側に広げ、かつ第１判定領域４４＿１を狭める。
【0184】
設定部３２は、その後、指先５０が第２判定領域４４＿２から第１判定領域４４＿１に移動した場合、第１判定領域４４＿１と第２判定領域４４＿２のサイズを元に戻す。つまり、設定部３２は、図２９（ａ）の基準サイズの判定領域４４に戻す。
【0185】
この例では、指先５０が基準サイズの第１判定領域４４＿１と第２判定領域４４＿２の境界に位置する場合に、表示領域４０に表示される文字が頻繁に切り替わり、不安定になることを抑制できる。
【0186】
（第７の実施の形態）
第７の実施の形態では、指先５０を表示領域４０に向けることなく文字を選択可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
第７の実施の形態では、指先５０を表示領域４０に向けることなく文字を選択可能なことが、第１の実施の形態と異なる。以下、第１の実施の形態との相違点を中心に説明する。
【0187】
図３０は、第７の実施の形態の情報処理システム１における文字入力動作を説明するためのディスプレイ１４の斜視図である。ディスプレイ１４の表示面１５に重ならない位置に所定の入力空間４８が設定されている。ユーザは、文字入力を開始する場合、指先５０を入力空間４８に入れる。
【0188】
判定部３０は、指先５０が入力空間４８に入ったか否か判定する。指先５０が入力空間４８に入ったことは、入力開始条件が満たされたことに相当する。判定部３０は、判定結果と、入力開始条件が満たされた時刻である基準時刻における指先５０の空間座標と、を設定部３２に出力する。
【0189】
図３１は、図３０に続く、文字入力動作を説明するための図である。設定部３２は、基準時刻の指先５０の空間座標を基準として、表示面１５に平行な面６０内に、最上層の複数の判定領域４４を設定する。面６０内の判定領域４４の数は、表示領域４０の数と等しく、この例では「１２」である。設定部３２は、基準時刻の指先５０の空間座標に重なる第１判定領域４４＿１を設定し、面６０内に他の複数の判定領域４４をマトリクス状に設定する。設定部３２は、下層の複数層の判定領域４４をＺ軸に平行な方向に設定する。例えば、第１判定領域４４＿１、第２判定領域４４＿２、第３判定領域４４＿３、第４判定領域４４＿４、第５判定領域４４＿５がＺ軸に平行な方向に離間して設定される。図３１では、下層の判定領域４４の一部を示す。
【0190】
複数の文字情報グループに含まれる複数の文字情報は、複数の判定領域４４に予め１対１に対応付けられている。
【0191】
ユーザは、面６０内およびＺ軸に平行な方向に指先５０を動かすことで、複数の判定領域４４の何れかに対応付けられた文字情報を選択する。
【0192】
判定部３０は、複数の判定領域４４が設定された後、指先５０が複数の判定領域４４の何れかに位置するか否かを判定する。
【0193】
表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊ内に位置すると判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を、当該文字情報を含む文字情報グループに対応付けられた表示領域４０に表示させる。例えば、指先５０が第３判定領域４４＿３内に位置する場合、文字「う」が文字「あ」に替えて第１表示領域４０＿１に表示される。
【0194】
機能実行部３４は、指先５０が第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を決定し、当該文字情報の入力を受け付ける。
【0195】
表示出力部３６は、指先５０が第ｊ判定領域４４＿ｊに位置し、かつ決定動作が行われたと判定部３０が判定した場合、第ｊ判定領域４４＿ｊに対応付けられた文字情報を入力表示領域４２に表示させる。
【0196】
このように、入力空間４８におけるユーザの所望の位置に第１判定領域４４＿１を設定できる。よって、空中動作により文字情報を選択しやすい。
【0197】
【0198】
設定部３２は、表示面１５に交差する面６２であって、ＸＺ平面に平行な面６２内に、最上層の複数の判定領域４４を設定する。設定部３２は、下層の複数層の判定領域４４をＹ軸に平行な方向に設定する。例えば、第１判定領域４４＿１、第２判定領域４４＿２、第３判定領域４４＿３、第４判定領域４４＿４、第５判定領域４４＿５がＹ軸に平行な方向に離間して設定される。図３２では、最上層と下層の判定領域４４の一部を示す。
【0199】
【0200】
設定部３２は、表示面１５、ＸＺ平面、およびＺＹ平面に交差する面６４内に、最上層の複数の判定領域４４を設定する。設定部３２は、下層の複数層の判定領域４４を面６４の法線方向に設定する。例えば、第１判定領域４４＿１、第２判定領域４４＿２、第３判定領域４４＿３、第４判定領域４４＿４、第５判定領域４４＿５が面６４の法線方向に離間して設定される。
【0201】
図３２の例では、表示面１５に交差する面６２内および面６２の法線方向に指先５０を動かすことで、文字情報を選択できる。
【0202】
なお、指先５０が入力空間４８に入った場合、設定部３２は、指先５０の位置を基準とせず、複数の判定領域４４を所定位置に設定してもよい。
【0203】
図３３は、第７の実施の形態の情報処理システム１における判定領域４４のサイズ変更処理を説明するための図である。図３３では、図３１の面６０内の複数の判定領域４４のうち、Ｘ軸方向に隣接する第１判定領域４４＿１、第６判定領域４４＿６、および第１１判定領域４４＿１１を示す。
【0204】
図３３（ａ）は、基準サイズの判定領域４４を示す。図３３（ｂ）は、図３３（ａ）に続く、サイズが変更された判定領域４４を示す。図３３（ｃ）は、図３３（ｂ）に続く、サイズが変更された判定領域４４を示す。図３３（ｄ）は、図３３（ｃ）に続く、サイズが変更された判定領域４４を示す。
【0205】
図３３（ａ）と図３３（ｂ）に示すように、設定部３２は、指先５０が第１判定領域４４＿１に位置する場合、第１判定領域４４＿１を第６判定領域４４＿６側と第６判定領域４４＿６の反対側とに広げ、かつ、第６判定領域４４＿６を狭める。
【0206】
設定部３２は、その後、指先５０が、広がった第１判定領域４４＿１から狭まった第６判定領域４４＿６に移動した場合、第６判定領域４４＿６を第１判定領域４４＿１側と第１１判定領域４４＿１１側に広げ、かつ、第１判定領域４４＿１を狭める。
【0207】
設定部３２は、指先５０が複数の判定領域４４のいずれかに位置する場合、上記の処理を実行する。
【0208】
この例では、指先５０が基準サイズの第１判定領域４４＿１と第６判定領域４４＿６の境界に位置する場合に、誤入力を抑制できる。
【0209】
なお、設定部３２は、指先５０が第１判定領域４４＿１に位置する場合、第１判定領域４４＿１を第６判定領域４４＿６側のみに広げてもよく、第１判定領域４４＿１を上下方向に広げてもよく、第１判定領域４４＿１を上下方向および左右方向に広げてもよい。
【0210】
以上、本開示について、実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素あるいは各処理プロセスの組合せにいろいろな変形例が可能なこと、また、そうした変形例も本開示の範囲にあることは当業者に理解されるところである。
【0211】
例えば、第５の実施の形態を第３の実施の形態に組み合わせてもよい。組合せによって生じる新たな実施の形態は、組み合わされる実施の形態それぞれの効果をあわせもつ。
【0212】
また、第１の実施の形態、第２の実施の形態、第３の実施の形態、第４の実施の形態、第５の実施の形態、および第６の実施の形態のそれぞれにおいて、表示面１５に平行な断面における、判定領域４４と選択領域Ｒ１のそれぞれの断面積は、表示領域４０の面積より大きくてもよい。図３４は、第１の実施の形態の変形例の情報処理システム１における文字入力動作を説明するための図である。図３４（ａ）は、ディスプレイ１４の平面図であり、図３４（ｂ）は、ディスプレイ１４の側面図であり、図３４（ｃ）は、ディスプレイ１４の上面図である。
【0213】
図３４に示すように、表示面１５に平行な断面において、判定領域４４と選択領域Ｒ１のそれぞれは、Ｘ軸の方向に表示領域４０より長い。そのため、図３の例と比較して、指先５０が判定領域４４と選択領域Ｒ１から左右方向に外れにくい。よって、例えば、入力する文字を迷うことなどで指先５０が第２表示領域４０＿２側に意図せず移動しても、図３の例と比較して、意図しない第２表示領域４０＿２が指定され難くできる。また、決定動作時に指先５０の位置が左右方向にぶれてしまっても、図３の例と比較して、入力ミスを抑制できる。
【0214】
なお、表示面１５に平行な断面において、判定領域４４と選択領域Ｒ１のそれぞれは、Ｙ軸の方向に表示領域４０より長くてもよい。この場合、図３の例と比較して、指先５０が判定領域４４と選択領域Ｒ１から上下方向に外れにくい。また、表示面１５に平行な断面において、判定領域４４と選択領域Ｒ１のそれぞれは、Ｘ軸とＹ軸のそれぞれの方向に表示領域４０より長くてもよい。この場合、図３の例と比較して、指先５０が判定領域４４と選択領域Ｒ１から上下方向と左右方向に外れにくい。
【0215】
本開示の一態様は、次の通りである。
【0216】
［項目１］
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させる表示出力部と、
を備える制御装置。
この態様によれば、ユーザが指定した表示領域に関する判定領域を所望の位置に設定できる。よって、ディスプレイの表示面のサイズによらず、空中動作により文字情報を選択しやすい。
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させる表示出力部と、
を備える制御装置。
この態様によれば、ユーザが指定した表示領域に関する判定領域を所望の位置に設定できる。よって、ディスプレイの表示面のサイズによらず、空中動作により文字情報を選択しやすい。
【0217】
［項目２］
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記第１表示領域と、を結ぶ直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
項目１に記載の制御装置。
この場合、表示面に対して任意の方向から第１表示領域に検知対象物を近づけることで、第１文字情報を選択できる。
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記第１表示領域と、を結ぶ直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
項目１に記載の制御装置。
この場合、表示面に対して任意の方向から第１表示領域に検知対象物を近づけることで、第１文字情報を選択できる。
【0218】
［項目３］
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記表示面と、を結ぶ直線であって、前記表示面の法線である直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
項目１に記載の制御装置。
この場合、表示面の法線方向に沿って表示面に検知対象物を近づけることで、第１文字情報を選択できる。
前記設定部は、前記基準時刻における前記検知対象物の空間座標と、前記表示面と、を結ぶ直線であって、前記表示面の法線である直線に前記第１判定領域が交差するように、前記第１判定領域を設定する、
項目１に記載の制御装置。
この場合、表示面の法線方向に沿って表示面に検知対象物を近づけることで、第１文字情報を選択できる。
【0219】
［項目４］
前記設定部は、前記第１文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記第１表示領域に表示させる、
項目２または３に記載の制御装置。
この場合、表示面に検知対象物を近づけることで、第１文字情報または第２文字情報を選択できる。
前記設定部は、前記第１文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記第１表示領域に表示させる、
項目２または３に記載の制御装置。
この場合、表示面に検知対象物を近づけることで、第１文字情報または第２文字情報を選択できる。
【0220】
［項目５］
前記表示出力部は、第２文字情報グループに関する情報を前記表示面の第２表示領域に表示させ、
前記判定部は、前記検知対象物の空間座標と、前記第１表示領域の座標と、前記第２表示領域の座標と、に基づいて、前記検知対象物が前記第１表示領域と前記第２表示領域のいずれかを指定しているか否かを判定し、
前記設定部は、
前記検知対象物が前記第１表示領域を指定していると前記判定部が判定した場合、前記第１文字情報を前記第１判定領域に対応付け、前記第１判定領域を設定し、
前記検知対象物が前記第２表示領域を指定していると前記判定部が判定した場合、前記第２文字情報グループに含まれる第２文字情報を前記第１判定領域に対応付け、前記検知対象物により前記第２表示領域が指定された時刻である前記基準時刻の前記検知対象物の空間座標に基づいて、前記第１判定領域を設定する、
項目１から３のいずれかに記載の制御装置。
この場合、所望の文字情報グループを指定できる。
前記表示出力部は、第２文字情報グループに関する情報を前記表示面の第２表示領域に表示させ、
前記判定部は、前記検知対象物の空間座標と、前記第１表示領域の座標と、前記第２表示領域の座標と、に基づいて、前記検知対象物が前記第１表示領域と前記第２表示領域のいずれかを指定しているか否かを判定し、
前記設定部は、
前記検知対象物が前記第１表示領域を指定していると前記判定部が判定した場合、前記第１文字情報を前記第１判定領域に対応付け、前記第１判定領域を設定し、
前記検知対象物が前記第２表示領域を指定していると前記判定部が判定した場合、前記第２文字情報グループに含まれる第２文字情報を前記第１判定領域に対応付け、前記検知対象物により前記第２表示領域が指定された時刻である前記基準時刻の前記検知対象物の空間座標に基づいて、前記第１判定領域を設定する、
項目１から３のいずれかに記載の制御装置。
この場合、所望の文字情報グループを指定できる。
【0221】
［項目６］
前記表示出力部は、前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させ、かつ、前記第１文字情報に関連付けられた第２文字情報を前記第１表示領域に隣接する第２表示領域に表示させる、
項目２に記載の制御装置。
この場合、選択した第１文字情報の隣に、関連する第２文字情報を表示できる。
前記表示出力部は、前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記第１表示領域に表示させ、かつ、前記第１文字情報に関連付けられた第２文字情報を前記第１表示領域に隣接する第２表示領域に表示させる、
項目２に記載の制御装置。
この場合、選択した第１文字情報の隣に、関連する第２文字情報を表示できる。
【0222】
［項目７］
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、かつ、前記第３文字情報に関連付けられた第４文字情報を前記第２表示領域に表示させる、
項目６に記載の制御装置。
この場合、第１文字情報または第３文字情報を選択でき、選択した文字情報の隣に、関連する文字情報を表示できる。
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第２判定領域を、前記直線に交差するように設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、かつ、前記第３文字情報に関連付けられた第４文字情報を前記第２表示領域に表示させる、
項目６に記載の制御装置。
この場合、第１文字情報または第３文字情報を選択でき、選択した文字情報の隣に、関連する文字情報を表示できる。
【0223】
［項目８］
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって第１決定動作または第２決定動作が行われたか否か、および、前記検知対象物が前記第２表示領域を指定しているか否かを判定し、
前記表示出力部は、
前記検知対象物が前記第１判定領域に位置し、かつ第１決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させ、
前記検知対象物が前記第２表示領域を指定し、かつ第２決定動作が行われたと前記判定部が判定した場合、前記第２文字情報を前記入力表示領域に表示させる、
項目６または７に記載の制御装置。
この場合、第１文字情報または第２文字情報を入力できる。
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって第１決定動作または第２決定動作が行われたか否か、および、前記検知対象物が前記第２表示領域を指定しているか否かを判定し、
前記表示出力部は、
前記検知対象物が前記第１判定領域に位置し、かつ第１決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させ、
前記検知対象物が前記第２表示領域を指定し、かつ第２決定動作が行われたと前記判定部が判定した場合、前記第２文字情報を前記入力表示領域に表示させる、
項目６または７に記載の制御装置。
この場合、第１文字情報または第２文字情報を入力できる。
【0224】
［項目９］
前記第１文字情報と前記第２文字情報は、それぞれ、所定の文字から始まる１または複数の単語の情報を含む、
項目４に記載の制御装置。
この場合、単語を選択できる。
前記第１文字情報と前記第２文字情報は、それぞれ、所定の文字から始まる１または複数の単語の情報を含む、
項目４に記載の制御装置。
この場合、単語を選択できる。
【0225】
［項目１０］
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記直線に交差するように設定し、
前記検知対象物側から前記表示面側に、前記第１判定領域、前記第２判定領域、前記第３判定領域の順に並び、
前記第１判定領域と前記第２判定領域との前記直線に沿った間隔は、前記第２判定領域と前記第３判定領域との前記直線に沿った間隔と等しい、
項目４に記載の制御装置。
この場合、基準時刻の検知対象物の位置によらず、隣り合う２つの判定領域の間における検知対象物の移動距離を同等にできる。
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記直線に交差するように設定し、
前記検知対象物側から前記表示面側に、前記第１判定領域、前記第２判定領域、前記第３判定領域の順に並び、
前記第１判定領域と前記第２判定領域との前記直線に沿った間隔は、前記第２判定領域と前記第３判定領域との前記直線に沿った間隔と等しい、
項目４に記載の制御装置。
この場合、基準時刻の検知対象物の位置によらず、隣り合う２つの判定領域の間における検知対象物の移動距離を同等にできる。
【0226】
［項目１１］
前記設定部は、前記基準時刻から所定時間後における前記検知対象物の移動速度が速いほど、前記第１判定領域と前記第２判定領域との前記直線に沿った間隔を広く設定する、
項目４に記載の制御装置。
この場合、検知対象物の移動速度が速い場合に判定領域を選択しやすい。
前記設定部は、前記基準時刻から所定時間後における前記検知対象物の移動速度が速いほど、前記第１判定領域と前記第２判定領域との前記直線に沿った間隔を広く設定する、
項目４に記載の制御装置。
この場合、検知対象物の移動速度が速い場合に判定領域を選択しやすい。
【0227】
［項目１２］
前記第１文字情報と前記第２文字情報は、それぞれ数字の情報であり、
前記設定部は、前記基準時刻から前記所定時間後における前記検知対象物の移動速度が速いほど、前記第１文字情報の数字と、前記第２文字情報の数字との差を大きく設定する、
項目１１に記載の制御装置。
この場合、検知対象物の移動速度に応じて選択可能な数字を変更できる。
前記第１文字情報と前記第２文字情報は、それぞれ数字の情報であり、
前記設定部は、前記基準時刻から前記所定時間後における前記検知対象物の移動速度が速いほど、前記第１文字情報の数字と、前記第２文字情報の数字との差を大きく設定する、
項目１１に記載の制御装置。
この場合、検知対象物の移動速度に応じて選択可能な数字を変更できる。
【0228】
［項目１３］
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記第２判定領域の体積は、前記第１判定領域の体積よりも大きい、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記第２判定領域の体積は、前記第１判定領域の体積よりも大きい、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
【0229】
［項目１４］
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記表示面に平行な断面における、前記第２判定領域の断面積は、前記表示面に平行な断面における、前記第１判定領域の断面積よりも大きい、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記表示面に平行な断面における、前記第２判定領域の断面積は、前記表示面に平行な断面における、前記第１判定領域の断面積よりも大きい、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
【0230】
［項目１５］
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記直線に沿った前記第２判定領域の長さは、前記直線に沿った前記第１判定領域の長さよりも長い、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
前記第２判定領域は、前記第１判定領域よりも前記表示面側に位置し、
前記直線に沿った前記第２判定領域の長さは、前記直線に沿った前記第１判定領域の長さよりも長い、
項目４に記載の制御装置。
この場合、表示面に近い判定領域を選択しやすい。
【0231】
［項目１６］
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記直線に交差するように設定し、
前記検知対象物側から前記表示面側に、前記第１判定領域、前記第２判定領域、前記第３判定領域の順に並び、
前記第２判定領域と前記第３判定領域との前記直線に沿った間隔は、前記第１判定領域と前記第２判定領域との前記直線に沿った間隔より広く、
前記第１文字情報は、所定数を第１指数で累乗した数字であり、
前記第２文字情報は、前記所定数を前記第１指数より大きい第２指数で累乗した数字であり、
前記第３文字情報は、前記所定数を前記第２指数より大きい第３指数で累乗した数字である、
項目４に記載の制御装置。
この場合、累乗で変化する数字を選択できる。
前記設定部は、前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記直線に交差するように設定し、
前記検知対象物側から前記表示面側に、前記第１判定領域、前記第２判定領域、前記第３判定領域の順に並び、
前記第２判定領域と前記第３判定領域との前記直線に沿った間隔は、前記第１判定領域と前記第２判定領域との前記直線に沿った間隔より広く、
前記第１文字情報は、所定数を第１指数で累乗した数字であり、
前記第２文字情報は、前記所定数を前記第１指数より大きい第２指数で累乗した数字であり、
前記第３文字情報は、前記所定数を前記第２指数より大きい第３指数で累乗した数字である、
項目４に記載の制御装置。
この場合、累乗で変化する数字を選択できる。
【0232】
［項目１７］
前記第１判定領域と前記第２判定領域は、前記直線に沿って隣接し、
前記設定部は、前記検知対象物が前記第２判定領域に位置する場合、前記第２判定領域を前記第１判定領域側に広げ、かつ、前記第１判定領域を狭める、
項目４に記載の制御装置。
この場合、検知対象物が第１判定領域と第２判定領域の境界に位置する場合に文字情報の表示が不安定になることを抑制できる。
前記第１判定領域と前記第２判定領域は、前記直線に沿って隣接し、
前記設定部は、前記検知対象物が前記第２判定領域に位置する場合、前記第２判定領域を前記第１判定領域側に広げ、かつ、前記第１判定領域を狭める、
項目４に記載の制御装置。
この場合、検知対象物が第１判定領域と第２判定領域の境界に位置する場合に文字情報の表示が不安定になることを抑制できる。
【0233】
［項目１８］
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって決定動作が行われたか否かを判定し、
前記表示出力部は、前記検知対象物が前記第１判定領域に位置し、かつ決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させる、
項目１から項目５、項目９から項目１７のいずれか一項に記載の制御装置。
この場合、文字情報を入力できる。
前記表示面は、入力された文字が表示される入力表示領域を有し、
前記判定部は、前記検知対象物によって決定動作が行われたか否かを判定し、
前記表示出力部は、前記検知対象物が前記第１判定領域に位置し、かつ決定動作が行われたと前記判定部が判定した場合、前記第１文字情報を前記入力表示領域に表示させる、
項目１から項目５、項目９から項目１７のいずれか一項に記載の制御装置。
この場合、文字情報を入力できる。
【0234】
［項目１９］
ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得する座標取得部と、
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定する設定部と、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定する判定部と、
前記第１検知対象物が前記第１判定領域に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面の第２表示領域に表示させる表示出力部と、
を備える制御装置。
この態様によれば、複数の検知対象物により文字情報を選択できる。
ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得する座標取得部と、
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定する設定部と、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定する判定部と、
前記第１検知対象物が前記第１判定領域に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面の第２表示領域に表示させる表示出力部と、
を備える制御装置。
この態様によれば、複数の検知対象物により文字情報を選択できる。
【0235】
［項目２０］
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記第１表示領域と、を結ぶ第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記第２表示領域と、を結ぶ第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
項目１９に記載の制御装置。
この場合、表示面に対して任意の方向から第１表示領域に第１検知対象物を近づけることで、第１文字情報を選択できる。表示面に対して任意の方向から第２表示領域に第２検知対象物を近づけることで、第２文字情報を選択できる。
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記第１表示領域と、を結ぶ第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記第２表示領域と、を結ぶ第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
項目１９に記載の制御装置。
この場合、表示面に対して任意の方向から第１表示領域に第１検知対象物を近づけることで、第１文字情報を選択できる。表示面に対して任意の方向から第２表示領域に第２検知対象物を近づけることで、第２文字情報を選択できる。
【0236】
［項目２１］
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記表示面と、を結ぶ第１直線であって、前記表示面の法線である第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記表示面と、を結ぶ第２直線であって、前記表示面の法線である第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
項目１９に記載の制御装置。
この場合、表示面の法線方向に沿って表示面に第１検知対象物を近づけることで、第１文字情報を選択できる。表示面の法線方向に沿って表示面に第２検知対象物を近づけることで、第２文字情報を選択できる。
前記設定部は、
前記基準時刻における前記第１検知対象物の空間座標と、前記表示面と、を結ぶ第１直線であって、前記表示面の法線である第１直線に前記第１判定領域が交差するように、前記第１判定領域を設定し、
前記基準時刻における前記第２検知対象物の空間座標と、前記表示面と、を結ぶ第２直線であって、前記表示面の法線である第２直線に前記第２判定領域が交差するように、前記第２判定領域を設定する、
項目１９に記載の制御装置。
この場合、表示面の法線方向に沿って表示面に第１検知対象物を近づけることで、第１文字情報を選択できる。表示面の法線方向に沿って表示面に第２検知対象物を近づけることで、第２文字情報を選択できる。
【0237】
［項目２２］
前記設定部は、
前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記第１直線に交差するように設定し、
前記第２文字情報グループに含まれる第４文字情報に対応付けられた第４判定領域を、前記第２直線に交差するように設定し、
前記判定部は、
前記第３判定領域が設定された後、前記第１検知対象物が前記第３判定領域内に位置するか否かを判定し、
前記第４判定領域が設定された後、前記第２検知対象物が前記第４判定領域内に位置するか否かを判定し、
前記表示出力部は、
前記第１検知対象物が前記第３判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、
前記第２検知対象物が前記第４判定領域内に位置すると前記判定部が判定した場合、前記第４文字情報を前記第２表示領域に表示させる、
項目２０または２１に記載の制御装置。
この場合、表示面に第１検知対象物を近づけることで、第１文字情報または第３文字情報を選択できる。表示面に第２検知対象物を近づけることで、第２文字情報または第４文字情報を選択できる。
前記設定部は、
前記第１文字情報グループに含まれる第３文字情報に対応付けられた第３判定領域を、前記第１直線に交差するように設定し、
前記第２文字情報グループに含まれる第４文字情報に対応付けられた第４判定領域を、前記第２直線に交差するように設定し、
前記判定部は、
前記第３判定領域が設定された後、前記第１検知対象物が前記第３判定領域内に位置するか否かを判定し、
前記第４判定領域が設定された後、前記第２検知対象物が前記第４判定領域内に位置するか否かを判定し、
前記表示出力部は、
前記第１検知対象物が前記第３判定領域内に位置すると前記判定部が判定した場合、前記第３文字情報を前記第１表示領域に表示させ、
前記第２検知対象物が前記第４判定領域内に位置すると前記判定部が判定した場合、前記第４文字情報を前記第２表示領域に表示させる、
項目２０または２１に記載の制御装置。
この場合、表示面に第１検知対象物を近づけることで、第１文字情報または第３文字情報を選択できる。表示面に第２検知対象物を近づけることで、第２文字情報または第４文字情報を選択できる。
【0238】
［項目２３］
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させる表示出力部と、
を備える制御装置。
この態様によれば、入力空間におけるユーザの所望の位置に第１判定領域を設定できる。よって、空中動作により文字情報を選択しやすい。
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得する座標取得部と、
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定する設定部と、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定する判定部と、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させる表示出力部と、
を備える制御装置。
この態様によれば、入力空間におけるユーザの所望の位置に第１判定領域を設定できる。よって、空中動作により文字情報を選択しやすい。
【0239】
［項目２４］
前記設定部は、前記表示面に平行な面内、または、前記表示面に交差する面内に、前記第１判定領域と、第２文字情報に対応付けられた第２判定領域と、を設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面に表示させる、
項目２３に記載の制御装置。
この場合、表示面に平行な面内、または、表示面に交差する面内で文字情報を選択できる。
前記設定部は、前記表示面に平行な面内、または、前記表示面に交差する面内に、前記第１判定領域と、第２文字情報に対応付けられた第２判定領域と、を設定し、
前記判定部は、前記第２判定領域が設定された後、前記検知対象物が前記第２判定領域内に位置するか否かを判定し、
前記表示出力部は、前記検知対象物が前記第２判定領域内に位置すると前記判定部が判定した場合、前記第２文字情報を前記表示面に表示させる、
項目２３に記載の制御装置。
この場合、表示面に平行な面内、または、表示面に交差する面内で文字情報を選択できる。
【0240】
［項目２５］
前記第１判定領域と前記第２判定領域は、隣接し、
前記設定部は、前記検知対象物が前記第１判定領域に位置する場合、前記第１判定領域を前記第２判定領域側に広げ、かつ、前記第２判定領域を狭める、
項目２４に記載の制御装置。
この場合、検知対象物が第１判定領域と第２判定領域の境界に位置する場合に文字情報の表示が不安定になることを抑制できる。
前記第１判定領域と前記第２判定領域は、隣接し、
前記設定部は、前記検知対象物が前記第１判定領域に位置する場合、前記第１判定領域を前記第２判定領域側に広げ、かつ、前記第２判定領域を狭める、
項目２４に記載の制御装置。
この場合、検知対象物が第１判定領域と第２判定領域の境界に位置する場合に文字情報の表示が不安定になることを抑制できる。
【0241】
［項目２６］
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得するステップと、
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定するステップと、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定するステップと、
前記検知対象物が前記第１判定領域内に位置すると判定された場合、前記第１文字情報を前記第１表示領域に表示させるステップと、
を備える制御方法。
この態様によれば、ディスプレイの表示面のサイズによらず、空中動作により文字情報を選択しやすい。
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得するステップと、
前記表示面において第１文字情報グループに関する情報が表示される第１表示領域の座標と、前記検知対象物により前記第１表示領域が指定された時刻である基準時刻の前記検知対象物の空間座標と、に基づいて、前記第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定するステップと、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定するステップと、
前記検知対象物が前記第１判定領域内に位置すると判定された場合、前記第１文字情報を前記第１表示領域に表示させるステップと、
を備える制御方法。
この態様によれば、ディスプレイの表示面のサイズによらず、空中動作により文字情報を選択しやすい。
【0242】
［項目２７］
ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得するステップと、
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定するステップと、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定するステップと、
前記第１検知対象物が前記第１判定領域に位置すると判定された場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると判定された場合、前記第２文字情報を前記表示面の第２表示領域に表示させるステップと、
を備える制御方法。
この態様によれば、複数の検知対象物により文字情報を選択できる。
ディスプレイの表示面の前に位置する第１検知対象物と第２検知対象物の空間座標を取得するステップと、
所定の入力開始条件が満たされた時刻である基準時刻の前記第１検知対象物の空間座標に基づいて、第１文字情報グループに含まれる第１文字情報に対応付けられた第１判定領域を設定し、前記基準時刻の前記第２検知対象物の空間座標に基づいて、第２文字情報グループに含まれる第２文字情報に対応付けられた第２判定領域を設定するステップと、
前記第１判定領域と前記第２判定領域が設定された後、前記第１検知対象物が前記第１判定領域内に位置するか否か、および、前記第２検知対象物が前記第２判定領域内に位置するか否かを判定するステップと、
前記第１検知対象物が前記第１判定領域に位置すると判定された場合、前記第１文字情報を前記表示面の第１表示領域に表示させ、前記第２検知対象物が前記第２判定領域に位置すると判定された場合、前記第２文字情報を前記表示面の第２表示領域に表示させるステップと、
を備える制御方法。
この態様によれば、複数の検知対象物により文字情報を選択できる。
【0243】
［項目２８］
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得するステップと、
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定するステップと、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定するステップと、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させるステップと、
を備える制御方法。
この態様によれば、空中動作により文字情報を選択しやすい。
ディスプレイの表示面の前に位置する検知対象物の空間座標を取得するステップと、
前記検知対象物が所定の入力空間に入ったときの前記検知対象物の空間座標を基準として、第１文字情報に対応付けられた第１判定領域を設定するステップと、
前記第１判定領域が設定された後、前記検知対象物が前記第１判定領域内に位置するか否かを判定するステップと、
前記検知対象物が前記第１判定領域内に位置すると前記判定部が判定した場合、前記第１文字情報を前記表示面に表示させるステップと、
を備える制御方法。
この態様によれば、空中動作により文字情報を選択しやすい。
【符号の説明】
【0244】
１…情報処理システム、１０…センサ、１２…制御装置、１４…ディスプレイ、１５…表示面、２０…制御部、２２…記憶部、２４…画像取得部、２６…座標取得部、２８…算出部、３０…判定部、３２…設定部、３４…機能実行部、３６…表示出力部、４０…表示領域、４２…入力表示領域、４４…判定領域、４８…入力空間、６０…表示領域。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
【図30】
【図31】
【図32】
【図33】
【図34】