(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-09-28
(45)【発行日】2022-10-06
(54)【発明の名称】画面情報処理装置並びにその制御方法及び制御プログラム
(51)【国際特許分類】
G06F 3/0482 20130101AFI20220929BHJP
G06F 3/04842 20220101ALI20220929BHJP
G06F 3/04883 20220101ALI20220929BHJP
【ＦＩ】
G06F3/0482
G06F3/04842
G06F3/04883
【請求項の数】
6
(21)【出願番号】P 2020182103
(22)【出願日】2020-10-30
(62)【分割の表示】P 2017249063の分割
【原出願日】2017-12-26
(65)【公開番号】P2021009742
(43)【公開日】2021-01-28
【審査請求日】2020-12-22
(73)【特許権者】
【識別番号】500033117
【氏名又は名称】株式会社ミクシィ
(72)【発明者】
【氏名】楠井 大地
【審査官】木村 慎太郎
(56)【参考文献】
【文献】米国特許出願公開第２０１１／００１６３９０（ＵＳ，Ａ１）
【文献】特開２０１７－０７２９４４（ＪＰ，Ａ）
【文献】特開２００８－２５０６２０（ＪＰ，Ａ）
【文献】特開２０１７－１６２３７１（ＪＰ，Ａ）
【文献】特開２００５－２６７３９０（ＪＰ，Ａ）
【文献】特開２００４－３２６１８９（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｆ ３／０４８２
Ｇ０６Ｆ ３／０４８４２
Ｇ０６Ｆ ３／０４８８３
(57)【特許請求の範囲】
【請求項1】
第１スライド操作の軌跡に基づいてメニューを表示するための第１領域を配置する第１配置手段と、メニューに含まれる複数の要素のうち、前記第１領域のサイズに応じた数の要素を前記第１領域に配置する第２配置手段と、を備え、
前記第２配置手段は、
第２スライド操作に基づいて前記第１領域に配置する要素を変更し、
前記第１配置手段は、
前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるように設定し、
前記第２配置手段は、
前記第２領域に、関連要素を配置し、
前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて前記第１領域内に配置する要素を変更し、且つ、前記第２領域に配置する関連要素を変更する、
情報処理装置。
【請求項2】
第１スライド操作の軌跡に基づいてメニューを表示するための第１領域を配置し、前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるように設定する第１配置手段と、前記第２領域に、関連要素を配置する第２配置手段と、を備え、
前記第２配置手段は、前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて変更した後の前記第１領域内の要素のうち、前記第２領域と重畳して配置されている要素に関連付けられた関連要素を前記第２領域に配置する、
情報処理装置。
【請求項3】
第１スライド操作の軌跡に基づいてメニューを表示するための第１領域をコンピュータが配置し、メニューに含まれる複数の要素のうち、前記第１領域のサイズに応じた数の要素を前記第１領域にコンピュータが配置し、
第２スライド操作に基づいて前記第１領域に配置する要素をコンピュータが変更し、
前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるようにコンピュータが設定し、
前記第２領域に、関連要素をコンピュータが配置し、
前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて前記第１領域内に配置する要素を変更し、且つ、前記第２領域に配置する関連要素をコンピュータが変更する、
情報処理方法。
【請求項4】
第１スライド操作の軌跡に基づいてメニューを表示するための第１領域を配置し、前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるようにコンピュータが設定し、前記第２領域に、関連要素をコンピュータが配置し、
前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて変更した後の前記第１領域内の要素のうち、前記第２領域と重畳して配置されている要素に関連付けられた関連要素を前記第２領域にコンピュータが配置する、
情報処理方法。
【請求項5】
コンピュータを、第１配置手段と第２配置手段として機能させるためのプログラムであって、
前記第１配置手段は、第１スライド操作の軌跡に基づいてメニューを表示するための第１領域を配置し、
前記第２配置手段は、メニューに含まれる複数の要素のうち、前記第１領域のサイズに応じた数の要素を前記第１領域に配置し、第２スライド操作に基づいて前記第１領域に配置する要素を変更し、
前記第１配置手段は、前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるように設定し、
前記第２配置手段は、前記第２領域に、関連要素を配置し、前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて前記第１領域内に配置する要素を変更し、且つ、前記第２領域に配置する関連要素を変更する、
プログラム。
【請求項6】
コンピュータを、第１配置手段と第２配置手段として機能させるためのプログラムであって、
前記第１配置手段は、第１スライド操作の軌跡に基づいてメニューを表示するための第１領域を配置し、前記第１領域内の何れかの要素を選択する操作を受け付けると、選択された要素に関連付けられた関連要素を表示するための第２領域を、選択された要素に少なくとも一部が重なるように設定し、
前記第２配置手段は、
前記第２領域に、関連要素を配置し、
前記第２領域が配置された状態で、前記第１領域を対象とする第３スライド操作を受け付けると、前記第３スライド操作に基づいて変更した後の前記第１領域内の要素のうち、前記第２領域と重畳して配置されている要素に関連付けられた関連要素を前記第２領域に配置する、
プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、グラフィカルユーザインタフェースに基づく相互作用技術に関する。
本発明は、特に、タッチ入力画面に選択メニューを表示させ当該選択メニューを介して選択を受け付ける技術に関する。
本発明は、特に、タッチ入力画面に選択メニューを表示させ当該選択メニューを介して選択を受け付ける技術に関する。
【背景技術】
【0002】
タッチパネルに対するスライド操作の軌跡に沿って複数のアイコンを含む選択メニューを表示させる仕組みが知られている（例えば、特許文献１参照）。
特許文献１に記載の表示処理装置は、選択メニュー内のいずれかのアイコンがタップされた場合に、上記軌跡の形状に相似する軌跡を自動的に形成し、タップされたアイコンに対応する機能のサブ機能に対応する複数のアイコンを含む新たな選択メニューを当該新たな軌跡に沿って配置する（同文献の図６参照）。
特許文献１に記載の表示処理装置は、選択メニュー内のいずれかのアイコンがタップされた場合に、上記軌跡の形状に相似する軌跡を自動的に形成し、タップされたアイコンに対応する機能のサブ機能に対応する複数のアイコンを含む新たな選択メニューを当該新たな軌跡に沿って配置する（同文献の図６参照）。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１４－１２３１５９号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１に記載の表示処理装置は、サブ機能に対応するアイコンを表示させる新たな選択メニューを画面内に自動的に配置する。そのため、当初の選択メニューが空きスペースに配置されたとしても、新たな選択メニューが意図しない位置に配置されてしまう可能性がある。
【0005】
本発明が解決しようとする課題は、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせることである。
【課題を解決するための手段】
【0006】
〔Ａ〕上記課題を解決するため、本発明の一態様である「画面情報処理装置」は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置手段と、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置手段と、を備える。
〔Ｂ〕上記課題を解決するため、本発明の一態様である「画面情報処理装置の制御方法」は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置ステップと、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置ステップと、を含む。
〔Ｃ〕上記課題を解決するため、本発明の一態様である「制御プログラム」は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置機能と、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置機能と、を画面情報処理装置のコンピュータに実現させる。
〔Ｄ〕上記課題を解決するため、本発明の一態様である「コンピュータ読取り可能な記録媒体」に記録される制御プログラムは、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置機能と、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置機能と、を画面情報処理装置のコンピュータに実現させる。
〔Ｂ〕上記課題を解決するため、本発明の一態様である「画面情報処理装置の制御方法」は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置ステップと、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置ステップと、を含む。
〔Ｃ〕上記課題を解決するため、本発明の一態様である「制御プログラム」は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置機能と、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置機能と、を画面情報処理装置のコンピュータに実現させる。
〔Ｄ〕上記課題を解決するため、本発明の一態様である「コンピュータ読取り可能な記録媒体」に記録される制御プログラムは、上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する領域配置機能と、前記上位領域内の前記下位領域と重畳する重畳要素に関連付けられた関連要素を該下位領域に配置する要素配置機能と、を画面情報処理装置のコンピュータに実現させる。
【0007】
上記〔Ａ〕の「画面情報処理装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、上記〔Ｂ〕の「制御方法」，上記〔Ｃ〕の「制御プログラム」及び上記〔Ｄ〕の「記録媒体」が記録する制御プログラムに加えてもよい。
・前記上位領域に要素を配置する前記要素配置手段が、該上位領域に配置される要素の組合せと並び順の少なくともいずれかを、該上位領域を対象とする更新指示操作に応じて変更する。
・前記領域配置手段が、前記下位領域に部分的に重畳する新たなスライド操作の軌跡に沿うようにさらに下位領域を配置し、前記要素配置手段が、前記更新指示操作の対象が最下位領域の直近の上位領域である場合に限り、該直近の上位領域に配置される要素の組合せと並び順の少なくともいずれかを変更する。
・前記要素配置手段が、前記更新指示操作により前記重畳要素が変更される度に、前記最下位領域に配置される要素を該変更後の重畳要素に関連付けられた関連要素に変更する。
・前記要素配置手段が、関連要素の有無を識別可能な特定形態の要素を配置する。
・前記要素配置手段が、新たな下位領域を表示させるスライド操作が開始されてから終了されるまでの間に限り、最下位領域内の要素を前記特定形態の要素に変更する。
・前記領域配置手段が、最下位領域の削除を指示する削除指示操作に応じて該最下位領域を削除する。
・前記要素配置手段が、前記削除指示操作に対応する削除指示要素を最下位領域にさらに配置するとともに、最下位領域でなくなった領域内の該削除指示要素を消去し又は無効化する。
・前記要素配置手段が、前記削除指示操作に対応する削除指示要素を最下位領域にさらに配置し、前記領域配置手段が、最下位領域でなくなった領域内の該削除指示要素に対する削除指示操作に応じて該領域と該領域に対して新たに配置された最下位領域の両方を削除する。
・前記上位領域に要素を配置する前記要素配置手段が、該上位領域に配置される要素の組合せと並び順の少なくともいずれかを、該上位領域を対象とする更新指示操作に応じて変更する。
・前記領域配置手段が、前記下位領域に部分的に重畳する新たなスライド操作の軌跡に沿うようにさらに下位領域を配置し、前記要素配置手段が、前記更新指示操作の対象が最下位領域の直近の上位領域である場合に限り、該直近の上位領域に配置される要素の組合せと並び順の少なくともいずれかを変更する。
・前記要素配置手段が、前記更新指示操作により前記重畳要素が変更される度に、前記最下位領域に配置される要素を該変更後の重畳要素に関連付けられた関連要素に変更する。
・前記要素配置手段が、関連要素の有無を識別可能な特定形態の要素を配置する。
・前記要素配置手段が、新たな下位領域を表示させるスライド操作が開始されてから終了されるまでの間に限り、最下位領域内の要素を前記特定形態の要素に変更する。
・前記領域配置手段が、最下位領域の削除を指示する削除指示操作に応じて該最下位領域を削除する。
・前記要素配置手段が、前記削除指示操作に対応する削除指示要素を最下位領域にさらに配置するとともに、最下位領域でなくなった領域内の該削除指示要素を消去し又は無効化する。
・前記要素配置手段が、前記削除指示操作に対応する削除指示要素を最下位領域にさらに配置し、前記領域配置手段が、最下位領域でなくなった領域内の該削除指示要素に対する削除指示操作に応じて該領域と該領域に対して新たに配置された最下位領域の両方を削除する。
【0008】
本明細書では、下記のように用語を用いる。
・「上位領域」とは、基準とする領域より相対的に上位の領域をいう。
・「下位領域」とは、基準とする領域より相対的に下位の領域をいう。
・「最上位領域」とは、全ての領域の中で相対的に最上位の領域をいう。
・「最下位領域」とは、全ての領域の中で相対的に最下位の領域をいう。
・「直近の上位領域」とは、ある領域より相対的に１階層だけ上位の領域をいう。
・「直近の下位領域」とは、ある領域より相対的に１階層だけ下位の領域をいう。
・「上位領域」とは、基準とする領域より相対的に上位の領域をいう。
・「下位領域」とは、基準とする領域より相対的に下位の領域をいう。
・「最上位領域」とは、全ての領域の中で相対的に最上位の領域をいう。
・「最下位領域」とは、全ての領域の中で相対的に最下位の領域をいう。
・「直近の上位領域」とは、ある領域より相対的に１階層だけ上位の領域をいう。
・「直近の下位領域」とは、ある領域より相対的に１階層だけ下位の領域をいう。
【発明の効果】
【0009】
本発明に係る画面情報処理装置は、上位領域に部分的に重畳するスライド操作の軌跡に沿うように配置される下位領域に当該上位領域内の重畳要素に関連付けられた関連要素を配置する。つまり、上位領域内の要素に関連する関連要素が配置される下位領域が、画面内においてユーザが意図する位置にユーザが意図する形態で配置される。
よって、本発明によれば、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせることが可能になる。
よって、本発明によれば、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせることが可能になる。
【図面の簡単な説明】
【0010】
【図1】画面情報の更新例を示す。（実施形態）
【図2】画面情報の更新例を示す。（実施例）
【図3】ユーザ装置のハードウェア的機能構成例を示す。（実施例）
【図4】ユーザ端末のソフトウェア的機能構成例を示す。（実施例）
【図5】要素情報の項目例を示す。（実施例）
【図6】画面情報更新手順を例示する。（実施例）
【図7】画面情報の更新例を示す。（実施例）
【図8】画面情報の更新例を示す。（実施例）
【図9】画面情報の更新例を示す。（実施例）
【図10】画面情報の更新例を示す。（変形例）
【発明を実施するための形態】
【0011】
［１．実施形態］
［１－１．概要］
本実施形態は、タッチ入力画面に選択メニューを表示させ当該選択メニューを介して選択操作を受け付ける画面情報処理装置に関する。
本実施形態に係る画面情報処理装置は、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせるため、上位領域内の要素に関連する関連要素が配置される下位領域が、画面内においてユーザが意図する位置にユーザが意図する形態で配置されるように構成されている。
［１－１．概要］
本実施形態は、タッチ入力画面に選択メニューを表示させ当該選択メニューを介して選択操作を受け付ける画面情報処理装置に関する。
本実施形態に係る画面情報処理装置は、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせるため、上位領域内の要素に関連する関連要素が配置される下位領域が、画面内においてユーザが意図する位置にユーザが意図する形態で配置されるように構成されている。
【0012】
［１－２．画面情報処理装置］
図１は、画面情報の更新例を示す。
本実施形態に係る画面情報処理装置（例えば、ユーザ端末１０）は、上位領域１１０に部分的に重畳するスライド操作の軌跡１２０に沿うように下位領域１３０を配置する領域配置手段（例えば、領域配置部４４１）と、上位領域１１０内の下位領域１３０と重畳する重畳要素１１１に関連付けられた関連要素を下位領域１３０に配置する要素配置手段（例えば、要素配置部４４２）と、を備える。
図１は、画面情報の更新例を示す。
本実施形態に係る画面情報処理装置（例えば、ユーザ端末１０）は、上位領域１１０に部分的に重畳するスライド操作の軌跡１２０に沿うように下位領域１３０を配置する領域配置手段（例えば、領域配置部４４１）と、上位領域１１０内の下位領域１３０と重畳する重畳要素１１１に関連付けられた関連要素を下位領域１３０に配置する要素配置手段（例えば、要素配置部４４２）と、を備える。
【実施例】
【0013】
［２．実施例］
［２－１．概要］
本実施例は、タッチ入力画面に選択メニューを表示させ当該選択メニューに対するタッチ操作により選択操作を受け付けるユーザ端末に関する。
ユーザ端末は、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせるため、上位領域内の要素に関連する関連要素が配置される下位領域が、画面内においてユーザが意図する位置にユーザが意図する形態で配置されるように構成されている。
［２－１．概要］
本実施例は、タッチ入力画面に選択メニューを表示させ当該選択メニューに対するタッチ操作により選択操作を受け付けるユーザ端末に関する。
ユーザ端末は、画面内の空きスペースを有効に活用しユーザに効率よく選択操作を行わせるため、上位領域内の要素に関連する関連要素が配置される下位領域が、画面内においてユーザが意図する位置にユーザが意図する形態で配置されるように構成されている。
【0014】
図２は、画面情報の更新例を示す。
ユーザ端末１０は、スライド操作の軌跡２１０に沿うように領域２２０を配置し、領域２２０に部分的に重畳するスライド操作の軌跡２３０に沿うように領域２４０を配置し、領域２４０に部分的に重畳するスライド操作の軌跡２５０に沿うように領域２６０を配置する。
また、ユーザ端末１０は、領域２２０内の領域２４０と重畳する重畳要素２２１に関連付けられた関連要素を領域２４０に配置し、領域２４０内の領域２６０と重畳する重畳要素２４１に関連付けられた関連要素を領域２６０に配置する。
ユーザ端末１０は、スライド操作の軌跡２１０に沿うように領域２２０を配置し、領域２２０に部分的に重畳するスライド操作の軌跡２３０に沿うように領域２４０を配置し、領域２４０に部分的に重畳するスライド操作の軌跡２５０に沿うように領域２６０を配置する。
また、ユーザ端末１０は、領域２２０内の領域２４０と重畳する重畳要素２２１に関連付けられた関連要素を領域２４０に配置し、領域２４０内の領域２６０と重畳する重畳要素２４１に関連付けられた関連要素を領域２６０に配置する。
【0015】
［２－２．ユーザ端末］
ユーザ端末１０は、所定のプログラム（例えば、ゲームプログラム）がインストールされたユーザ装置（コンピュータ）である。
本実施例では、ユーザ装置として、プログラムをインストール可能な汎用の携帯装置（例えば、携帯電話，スマートフォン（smartphone），タブレット（tablet）端末，タブレットＰＣ（personal computer），ウェアラブルデバイス（wearable device）など）や汎用の処理装置（例えば、ＰＣ（personal computer）など）を用いることができる。
ユーザ端末１０は、所定のプログラム（例えば、ゲームプログラム）がインストールされたユーザ装置（コンピュータ）である。
本実施例では、ユーザ装置として、プログラムをインストール可能な汎用の携帯装置（例えば、携帯電話，スマートフォン（smartphone），タブレット（tablet）端末，タブレットＰＣ（personal computer），ウェアラブルデバイス（wearable device）など）や汎用の処理装置（例えば、ＰＣ（personal computer）など）を用いることができる。
【0016】
［２－２－１．ハードウェア的機能］
図３は、ユーザ装置のハードウェア的機能構成例を示す。
典型的なユーザ装置は、制御処理部を構成するＭＰＵ（Micro-Processing Unit）３１１と、主記憶部を構成するＲＡＭ（Random Access Memory）３２１と、補助記憶部を構成するＲＯＭ（Read Only Memory）３２２及びＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）３２３と、入力部及び表示部を構成するタッチパネルディスプレイ３３１と、音声出力部を構成するスピーカ３３２と、通信制御部を構成するＮＩＣ（Network Interface Controller）３４１及び無線ＬＡＮ（Local Area Network）チップ３４２と、を少なくとも有する。
図３は、ユーザ装置のハードウェア的機能構成例を示す。
典型的なユーザ装置は、制御処理部を構成するＭＰＵ（Micro-Processing Unit）３１１と、主記憶部を構成するＲＡＭ（Random Access Memory）３２１と、補助記憶部を構成するＲＯＭ（Read Only Memory）３２２及びＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）３２３と、入力部及び表示部を構成するタッチパネルディスプレイ３３１と、音声出力部を構成するスピーカ３３２と、通信制御部を構成するＮＩＣ（Network Interface Controller）３４１及び無線ＬＡＮ（Local Area Network）チップ３４２と、を少なくとも有する。
【0017】
ＲＡＭ３２１と、ＲＯＭ３２２と、ＥＥＰＲＯＭ３２３と、タッチパネルディスプレイ３３１と、スピーカ３３２と、ＮＩＣ３４１と、無線ＬＡＮチップ３４２とは、バスラインを介してＭＰＵ３１１と接続される。
ＭＰＵ３１１は、（１）ＲＯＭ３２２又はＥＥＰＲＯＭ３２３に記憶されたプログラムをＲＡＭ３２１上に読み込み、（２）プログラムの指示に従ってタッチパネルディスプレイ３３１とＥＥＰＲＯＭ３２３とＮＩＣ３４１と無線ＬＡＮチップ３４２との少なくともいずれかからデータを取得し、（３）取得したデータをプログラムに規定される手順で演算・加工した上で、（４）演算済み・加工済みのデータをＥＥＰＲＯＭ３２３とタッチパネルディスプレイ３３１とスピーカ３３２とＮＩＣ３４１と無線ＬＡＮチップ３４２との少なくともいずれかに提供する。
ＭＰＵ３１１は、（１）ＲＯＭ３２２又はＥＥＰＲＯＭ３２３に記憶されたプログラムをＲＡＭ３２１上に読み込み、（２）プログラムの指示に従ってタッチパネルディスプレイ３３１とＥＥＰＲＯＭ３２３とＮＩＣ３４１と無線ＬＡＮチップ３４２との少なくともいずれかからデータを取得し、（３）取得したデータをプログラムに規定される手順で演算・加工した上で、（４）演算済み・加工済みのデータをＥＥＰＲＯＭ３２３とタッチパネルディスプレイ３３１とスピーカ３３２とＮＩＣ３４１と無線ＬＡＮチップ３４２との少なくともいずれかに提供する。
【0018】
［２－２－２．ソフトウェア的機能］
図４は、ユーザ端末のソフトウェア的機能構成例を示す。
図４に例示されるように、ユーザ端末１０は、表示部４１０と、検出部４２０と、入力解析部４３０と、配置部４４０と、表示制御部４５０と、記憶部４６０と、を含む。配置部４４０は、領域配置部４４１と要素配置部４４２を含む。
表示部４１０及び検出部４２０は、タッチパネルディスプレイ３３１を含んで構成される。記憶部４６０は、ＥＥＰＲＯＭ３２３を含んで構成される。その他の機能は、ＭＰＵ３１１を含んで構成される。
図４は、ユーザ端末のソフトウェア的機能構成例を示す。
図４に例示されるように、ユーザ端末１０は、表示部４１０と、検出部４２０と、入力解析部４３０と、配置部４４０と、表示制御部４５０と、記憶部４６０と、を含む。配置部４４０は、領域配置部４４１と要素配置部４４２を含む。
表示部４１０及び検出部４２０は、タッチパネルディスプレイ３３１を含んで構成される。記憶部４６０は、ＥＥＰＲＯＭ３２３を含んで構成される。その他の機能は、ＭＰＵ３１１を含んで構成される。
【0019】
ユーザ端末１０のソフトウェア的機能は、ユーザ装置向けＯＳ（Operating System）と当該ＯＳ上で動作するプログラムとがユーザ装置にそれぞれインストールされることにより実現される。
ユーザ装置にインストールされるべきＯＳは、出荷当初からユーザ装置にインストールされているのが一般的である。また、ユーザ装置にインストールされるべきプログラムは、通信ネットワークを介し搬送波に重畳させてユーザ装置に供給されるのが一般的である。なお、当該ＯＳや当該プログラムは、ＣＤ（Compact Disc），ＤＶＤ（Digital Versatile Disk），ＭＯディスク（Magneto-Optical disk），フラッシュメモリ（flash memory）などの記録媒体に記録された状態で配布され当該記録媒体からユーザ装置に読み込まれてもよい。
ユーザ装置にインストールされるべきＯＳは、出荷当初からユーザ装置にインストールされているのが一般的である。また、ユーザ装置にインストールされるべきプログラムは、通信ネットワークを介し搬送波に重畳させてユーザ装置に供給されるのが一般的である。なお、当該ＯＳや当該プログラムは、ＣＤ（Compact Disc），ＤＶＤ（Digital Versatile Disk），ＭＯディスク（Magneto-Optical disk），フラッシュメモリ（flash memory）などの記録媒体に記録された状態で配布され当該記録媒体からユーザ装置に読み込まれてもよい。
【0020】
表示部４１０は、表示制御部４５０による制御の下で、ディスプレイに選択メニューを表示する。検出部４２０は、タッチパネルに対する指又はタッチペンの接触位置を検出する。
入力解析部４３０は、検出部４２０により検出される接触位置からユーザ操作の軌跡を特定する。配置部４４０は、領域や要素が表示部４１０のディスプレイに配置されるよう表示制御部４５０に指示する。表示制御部４５０は、表示部４１０を制御する。記憶部４６０は、選択メニューに関するデータを記憶する。
入力解析部４３０は、検出部４２０により検出される接触位置からユーザ操作の軌跡を特定する。配置部４４０は、領域や要素が表示部４１０のディスプレイに配置されるよう表示制御部４５０に指示する。表示制御部４５０は、表示部４１０を制御する。記憶部４６０は、選択メニューに関するデータを記憶する。
【0021】
領域配置部４４１は、次のように領域を配置・削除する。
・スライド操作の軌跡に沿うように各領域を配置する。特に、直近の上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する。
・領域の削除を指示する削除指示操作に応じて当該領域を削除する。本実施例では、領域内に配置される削除指示要素を対象とする削除指示操作に応じて、当該領域を削除する。
・スライド操作の軌跡に沿うように各領域を配置する。特に、直近の上位領域に部分的に重畳するスライド操作の軌跡に沿うように下位領域を配置する。
・領域の削除を指示する削除指示操作に応じて当該領域を削除する。本実施例では、領域内に配置される削除指示要素を対象とする削除指示操作に応じて、当該領域を削除する。
【0022】
要素配置部４４２は、次のように要素を配置・削除する。
・各領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置する。特に、上位領域内の下位領域と重畳する重畳要素に関連付けられた関連要素を下位領域に配置する。
・最下位領域及び最下位領域の直近の上位領域に配置される要素の組合せと並び順の少なくともいずれかを、当該直近の上位領域を対象とする更新指示操作に応じて変更する。本実施例では、最下位領域及び最下位領域の直近の上位領域を対象とするスライド操作を更新指示操作として入力し、当該更新指示操作に応じて当該領域内に表示される要素をスクロールさせる。
・直近の上位領域内の最下位領域に重畳する重畳要素が変更される度に、最下位領域に配置される要素を当該変更後の重畳要素に関連付けられた関連要素に変更する。例えば、他の要素を配置する場合と同様に、最下位領域のサイズに応じた数の関連要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて最下位領域に配置するとよい。
・各領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置する。特に、上位領域内の下位領域と重畳する重畳要素に関連付けられた関連要素を下位領域に配置する。
・最下位領域及び最下位領域の直近の上位領域に配置される要素の組合せと並び順の少なくともいずれかを、当該直近の上位領域を対象とする更新指示操作に応じて変更する。本実施例では、最下位領域及び最下位領域の直近の上位領域を対象とするスライド操作を更新指示操作として入力し、当該更新指示操作に応じて当該領域内に表示される要素をスクロールさせる。
・直近の上位領域内の最下位領域に重畳する重畳要素が変更される度に、最下位領域に配置される要素を当該変更後の重畳要素に関連付けられた関連要素に変更する。例えば、他の要素を配置する場合と同様に、最下位領域のサイズに応じた数の関連要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて最下位領域に配置するとよい。
【0023】
・新たな下位領域を表示させるスライド操作が開始されてから終了されるまでの間に限り、最下位領域内の要素の形態を、関連要素の有無を視覚的に識別可能な特定形態に変更する。
・上記削除指示操作に対応する削除指示要素を最下位領域に配置する。そして、最下位領域でなくなった領域内の削除指示要素を無効化する。なお、最下位領域でなくなった領域内の削除指示要素を消去してもよい。
・上記削除指示操作に対応する削除指示要素を最下位領域に配置する。そして、最下位領域でなくなった領域内の削除指示要素を無効化する。なお、最下位領域でなくなった領域内の削除指示要素を消去してもよい。
【0024】
［２－２－３．要素情報］
図５（ａ）は、最上位要素情報の項目例を示す。最上位要素情報は、最上位領域に配置されるべき要素に関する情報である。
図５（ａ）に例示されるように、最上位要素情報は、キー項目である「要素ＩＤ」と、「表示優先度」と、「下位要素有無フラグ」と、「起動モジュールパス」と、「デフォルトアイコンパス」と、「特定形態アイコンパス」と、を含む。
「表示優先度」は、使用頻度に相当する数値である。「下位要素有無フラグ」は、有意のとき下位要素（関連要素）が存在することを示す。「起動モジュールパス」は、当該要素を対象とする起動指示操作（タップ操作）がなされた場合に起動させる機能モジュールを特定する文字列である。「デフォルトアイコンパス」は、通常形態のアイコン画像データを特定する文字列である。「特定形態アイコンパス」は、下位要素（関連要素）が存在することが視覚的に識別可能な特定形態のアイコン画像データを特定する文字列である。
図５（ａ）は、最上位要素情報の項目例を示す。最上位要素情報は、最上位領域に配置されるべき要素に関する情報である。
図５（ａ）に例示されるように、最上位要素情報は、キー項目である「要素ＩＤ」と、「表示優先度」と、「下位要素有無フラグ」と、「起動モジュールパス」と、「デフォルトアイコンパス」と、「特定形態アイコンパス」と、を含む。
「表示優先度」は、使用頻度に相当する数値である。「下位要素有無フラグ」は、有意のとき下位要素（関連要素）が存在することを示す。「起動モジュールパス」は、当該要素を対象とする起動指示操作（タップ操作）がなされた場合に起動させる機能モジュールを特定する文字列である。「デフォルトアイコンパス」は、通常形態のアイコン画像データを特定する文字列である。「特定形態アイコンパス」は、下位要素（関連要素）が存在することが視覚的に識別可能な特定形態のアイコン画像データを特定する文字列である。
【0025】
図５（ｂ）は、下位要素情報の項目例を示す。下位要素情報は、最上位領域以外の領域（下位領域）に配置されるべき要素に関する情報である。
図５（ｂ）に例示されるように、下位要素情報は、キー項目である「上位要素ＩＤ」及び「要素ＩＤ」と、「表示優先度」と、「下位要素有無フラグ」と、「起動モジュールパス」と、「デフォルトアイコンパス」と、「特定形態アイコンパス」と、を含む。
「表示優先度」，「下位要素有無フラグ」，「起動モジュールパス」，「デフォルトアイコンパス」，「特定形態アイコンパス」は、上記（ａ）最上位要素情報における項目と同じである。
図５（ｂ）に例示されるように、下位要素情報は、キー項目である「上位要素ＩＤ」及び「要素ＩＤ」と、「表示優先度」と、「下位要素有無フラグ」と、「起動モジュールパス」と、「デフォルトアイコンパス」と、「特定形態アイコンパス」と、を含む。
「表示優先度」，「下位要素有無フラグ」，「起動モジュールパス」，「デフォルトアイコンパス」，「特定形態アイコンパス」は、上記（ａ）最上位要素情報における項目と同じである。
【0026】
［２－３．画面情報更新手順］
図６は、ユーザ端末１０による画面情報更新手順を例示する。
Ｓ６１０：検出部４２０がタッチパネルに対する接触操作（タッチ操作）を検出した場合に、Ｓ６２０に進む。
Ｓ６２０：入力解析部４３０が、ユーザ操作の種類を解析する。ユーザ操作がスライド操作（スワイプ操作又はフリック操作）であればＳ６３０に進み、ユーザ操作がタップ操作であればＳ６７０に進む。ユーザ操作がスライド操作でもタップ操作でもない場合は、Ｓ６１０に戻る。
図６は、ユーザ端末１０による画面情報更新手順を例示する。
Ｓ６１０：検出部４２０がタッチパネルに対する接触操作（タッチ操作）を検出した場合に、Ｓ６２０に進む。
Ｓ６２０：入力解析部４３０が、ユーザ操作の種類を解析する。ユーザ操作がスライド操作（スワイプ操作又はフリック操作）であればＳ６３０に進み、ユーザ操作がタップ操作であればＳ６７０に進む。ユーザ操作がスライド操作でもタップ操作でもない場合は、Ｓ６１０に戻る。
【0027】
Ｓ６３０：ユーザ操作がスライド操作であると判定された場合に、入力解析部４３０がさらにスライド操作の対象エリアを特定する。本実施例では、スライド操作の軌跡が始点から終点まで特定の領域内に収まっている場合に、当該領域を対象エリアとして特定する。対象エリアが領域外であればＳ６４０に進み、対象エリアが最下位領域の直近の上位領域であればＳ６５０に進み、対象エリアが最下位領域であればＳ６６０に進む。
【0028】
Ｓ６４０：領域配置部４４１が、スライド操作の軌跡に沿うように領域を配置し、Ｓ６４５に進む（図２（ａ）～（ｆ））。
Ｓ６４５：要素配置部４４２が、領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置し（図２（ｂ），（ｄ），（ｆ））、Ｓ６１０に戻る。本実施例では、Ｓ６４０で配置される領域が最上位領域であれば、最上位要素情報（図５（ａ））に対応する要素の中から要素を選択する。一方、Ｓ６４０で配置される領域が下位領域であれば、直近の上位領域内の下位領域と重畳する重畳要素に関連付けられた下位要素情報（図５（ｂ））に対応する関連要素の中から要素を選択する。なお、各領域（本実施例では、最上位領域以外の領域）には、領域の削除を指示する削除指示操作に対応する削除指示要素が配置されるものとする。
Ｓ６４５：要素配置部４４２が、領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置し（図２（ｂ），（ｄ），（ｆ））、Ｓ６１０に戻る。本実施例では、Ｓ６４０で配置される領域が最上位領域であれば、最上位要素情報（図５（ａ））に対応する要素の中から要素を選択する。一方、Ｓ６４０で配置される領域が下位領域であれば、直近の上位領域内の下位領域と重畳する重畳要素に関連付けられた下位要素情報（図５（ｂ））に対応する関連要素の中から要素を選択する。なお、各領域（本実施例では、最上位領域以外の領域）には、領域の削除を指示する削除指示操作に対応する削除指示要素が配置されるものとする。
【0029】
Ｓ６５０：要素配置部４４２が、最下位領域の直近の上位領域内に表示される要素を更新し、Ｓ６５５に進む。本実施例では、スライド操作の方向及び大きさに応じて、当該領域内に表示される要素をスクロールさせる（図８（ａ）→（ｂ））。
Ｓ６５５：最下位領域に配置される要素を、直近の上位領域内の最下位領域に重畳する重畳要素に関連付けられた関連要素の少なくともいずれかに変更する。具体的には、変更後の重畳要素に関連付けられた下位要素情報（図５（ｂ））に対応する関連要素の中から最下位領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置する（図８（ｂ）→（ｃ））。
Ｓ６６０：要素配置部４４２が、最下位領域に表示される要素を更新し、Ｓ６１０に戻る。本実施例では、スライド操作の方向及び大きさに応じて、当該領域内に表示される要素をスクロールさせる（図７（ａ）→（ｂ），図７（ｃ）→（ｄ））。
Ｓ６５５：最下位領域に配置される要素を、直近の上位領域内の最下位領域に重畳する重畳要素に関連付けられた関連要素の少なくともいずれかに変更する。具体的には、変更後の重畳要素に関連付けられた下位要素情報（図５（ｂ））に対応する関連要素の中から最下位領域のサイズに応じた数の要素を「表示優先度」が高い順に選択し、「表示優先度」の順に並べて当該領域に配置する（図８（ｂ）→（ｃ））。
Ｓ６６０：要素配置部４４２が、最下位領域に表示される要素を更新し、Ｓ６１０に戻る。本実施例では、スライド操作の方向及び大きさに応じて、当該領域内に表示される要素をスクロールさせる（図７（ａ）→（ｂ），図７（ｃ）→（ｄ））。
【0030】
Ｓ６７０：ユーザ操作がタップ操作であると判定された場合に、入力解析部４３０がさらにユーザ操作の対象要素を特定する。対象要素が削除指示要素であればＳ６８０に進み、対象要素が通常要素であればＳ６９０に進む。
Ｓ６８０：領域内に配置される削除指示要素を対象とする削除指示操作に応じて、当該領域を削除する（図９（ａ）→（ｂ），図９（ｃ）→（ｄ））。
Ｓ６９０：領域内に配置される起動指示要素（「下位要素有無フラグ」（図５（ａ）（ｂ））が有意でない要素）を対象とする起動指示操作に応じて、当該要素に対応する機能を起動させる。
Ｓ６８０：領域内に配置される削除指示要素を対象とする削除指示操作に応じて、当該領域を削除する（図９（ａ）→（ｂ），図９（ｃ）→（ｄ））。
Ｓ６９０：領域内に配置される起動指示要素（「下位要素有無フラグ」（図５（ａ）（ｂ））が有意でない要素）を対象とする起動指示操作に応じて、当該要素に対応する機能を起動させる。
【0031】
［２－４．画面情報更新例］
［２－４－１．領域の追加］
図２は、領域が追加される場合の画面情報更新例を示す。
図２（ａ）→図２（ｂ）：領域配置部４４１は、スライド操作の軌跡２１０に沿うように領域２２０を配置する。このとき要素配置部４４２は、領域２２０に要素Ａ－Ｄを配置する。
［２－４－１．領域の追加］
図２は、領域が追加される場合の画面情報更新例を示す。
図２（ａ）→図２（ｂ）：領域配置部４４１は、スライド操作の軌跡２１０に沿うように領域２２０を配置する。このとき要素配置部４４２は、領域２２０に要素Ａ－Ｄを配置する。
【0032】
図２（ｃ）→図２（ｄ）：領域配置部４４１は、領域２２０に部分的に重畳するスライド操作の軌跡２３０に沿うように領域２４０を配置する。スライド操作が開始されると、要素配置部４４２は、領域２２０に配置されている要素のうち下位要素（関連要素）が存在する要素（「下位要素有無フラグ」（図５（ａ））が有意である要素）を、「デフォルトアイコン」から「特定形態アイコン」に変更する。図２（ｃ）では、要素Ｂ－Ｄの色が反転している。また、要素配置部４４２は、領域２２０内の領域２４０と重畳する重畳要素２２１に関連付けられた関連要素ｂ１－ｂ４を領域２４０に配置する。
【0033】
図２（ｅ）→図２（ｆ）：領域配置部４４１は、領域２４０に部分的に重畳するスライド操作の軌跡２５０に沿うように領域２６０を配置する。スライド操作が開始されると、要素配置部４４２は、領域２４０に配置されている要素のうち下位要素（関連要素）が存在する要素（「下位要素有無フラグ」（図５（ｂ））が有意である要素）を、「デフォルトアイコン」から「特定形態アイコン」に変更する。図２（ｅ）の表示例では、要素ｂ１，ｂ２の色が反転している。また、要素配置部４４２は、領域２４０内の領域２６０と重畳する重畳要素２４１に関連付けられた関連要素ｂ２１－ｂ２４を領域２６０に配置する。このとき、要素配置部４４２は、領域２４０内の削除指示要素を無効化する。図２（ｆ）の表示例では、削除指示要素の色が反転している。
【0034】
［２－４－２．要素の変更］
図７及び図８は、要素が変更される場合の画面情報更新例を示す。
図７（ａ）→図７（ｂ）：要素配置部４４２は、領域２２０を対象とするスライド操作（更新指示操作）の軌跡２２５の方向及び大きさに応じて、領域２２０内に表示される要素をＡ－ＤからＣ－Ｆに変更する。
図７（ｃ）→図７（ｄ）：要素配置部４４２は、領域２４０を対象とするスライド操作（更新指示操作）の軌跡２４５の方向及び大きさに応じて、領域２４０内に表示される要素をｂ１－ｂ４からｂ２－ｂ５に変更する。
図７及び図８は、要素が変更される場合の画面情報更新例を示す。
図７（ａ）→図７（ｂ）：要素配置部４４２は、領域２２０を対象とするスライド操作（更新指示操作）の軌跡２２５の方向及び大きさに応じて、領域２２０内に表示される要素をＡ－ＤからＣ－Ｆに変更する。
図７（ｃ）→図７（ｄ）：要素配置部４４２は、領域２４０を対象とするスライド操作（更新指示操作）の軌跡２４５の方向及び大きさに応じて、領域２４０内に表示される要素をｂ１－ｂ４からｂ２－ｂ５に変更する。
【0035】
図８（ａ）→図８（ｂ）：要素配置部４４２は、領域２２０を対象とするスライド操作（更新指示操作）の軌跡２２６の方向及び大きさに応じて、領域２２０内に表示される要素をＡ－ＤからＣ－Ｆに変更する。このとき、重畳要素が要素Ｂから要素Ｄに変更される。
図８（ｂ）→図８（ｃ）：重畳要素が要素Ｂから要素Ｄに変更されると、要素配置部４４２は、変更後の重畳要素Ｄに関連付けられた下位要素情報（図５（ｂ））に対応する関連要素ｄ１－ｄ４を選択して領域２４０に配置する。
図８（ｂ）→図８（ｃ）：重畳要素が要素Ｂから要素Ｄに変更されると、要素配置部４４２は、変更後の重畳要素Ｄに関連付けられた下位要素情報（図５（ｂ））に対応する関連要素ｄ１－ｄ４を選択して領域２４０に配置する。
【0036】
［２－４－３．領域の削除］
図９は、領域が削除される場合の画面情報更新例を示す。
図９（ａ）→図９（ｂ）：領域配置部４４１は、領域２６０内に配置される削除指示要素２６１を対象とするタップ操作（削除指示操作）がなされると、領域２６０を削除する。このとき、要素配置部４４２は、領域２４０内に配置される削除指示要素２４２を有効化する。図９（ｂ）の表示例では、色の反転が復元している。
図９（ｃ）→図９（ｄ）：領域配置部４４１は、領域２４０内に配置される削除指示要素２４２を対象とするタップ操作（削除指示操作）がなされると、領域２４０を削除する。
図９は、領域が削除される場合の画面情報更新例を示す。
図９（ａ）→図９（ｂ）：領域配置部４４１は、領域２６０内に配置される削除指示要素２６１を対象とするタップ操作（削除指示操作）がなされると、領域２６０を削除する。このとき、要素配置部４４２は、領域２４０内に配置される削除指示要素２４２を有効化する。図９（ｂ）の表示例では、色の反転が復元している。
図９（ｃ）→図９（ｄ）：領域配置部４４１は、領域２４０内に配置される削除指示要素２４２を対象とするタップ操作（削除指示操作）がなされると、領域２４０を削除する。
【0037】
［３．変形例］
上記実施例では、最下位領域でなくなった領域に配置される削除指示要素が無効化される（図２（ｆ）等）。また、削除指示操作による削除対象となる領域は、最下位領域に限られる（図９（ａ）等）。
これに対し、最下位領域でなくなった領域に配置される削除指示要素を有効のまま残しつつ、削除指示操作の対象となった削除指示要素を含む領域とその全ての下位領域をまとめて削除できるように構成してもよい。
上記実施例では、最下位領域でなくなった領域に配置される削除指示要素が無効化される（図２（ｆ）等）。また、削除指示操作による削除対象となる領域は、最下位領域に限られる（図９（ａ）等）。
これに対し、最下位領域でなくなった領域に配置される削除指示要素を有効のまま残しつつ、削除指示操作の対象となった削除指示要素を含む領域とその全ての下位領域をまとめて削除できるように構成してもよい。
【0038】
図１０は、領域がまとめて削除される場合の画面情報更新例を示す。
図１０（ａ）→図１０（ｂ）：領域配置部４４１は、領域２４０が配置された後にさらに領域２６０が配置された場合において、領域２４０内に配置される削除指示要素２４２を対象とするタップ操作（削除指示操作）がなされると、領域２４０と領域２６０をまとめて削除する。
図１０（ａ）→図１０（ｂ）：領域配置部４４１は、領域２４０が配置された後にさらに領域２６０が配置された場合において、領域２４０内に配置される削除指示要素２４２を対象とするタップ操作（削除指示操作）がなされると、領域２４０と領域２６０をまとめて削除する。
【符号の説明】
【0039】
１０ ユーザ端末（「画面情報処理装置」の一例）
４１０ 表示部
４２０ 検出部
４３０ 入力解析部
４４０ 配置部
４４１ 領域配置部
４４２ 要素配置部
４５０ 表示制御部
４６０ 記憶部
４１０ 表示部
４２０ 検出部
４３０ 入力解析部
４４０ 配置部
４４１ 領域配置部
４４２ 要素配置部
４５０ 表示制御部
４６０ 記憶部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】