特許 6794763 表示システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6794763

(24)【登録日】2020年11月16日

(45)【発行日】2020年12月2日

(54)【発明の名称】表示システム

(51)【国際特許分類】

   G06F 3/01 20060101AFI20201119BHJP

   H04N 1/00 20060101ALI20201119BHJP

   G06F 3/0488 20130101ALI20201119BHJP

   G06F 3/0482 20130101ALI20201119BHJP

   G06F 3/0484 20130101ALI20201119BHJP

【ＦＩ】

   G06F3/01 560

   H04N1/00 C

   H04N1/00 350

   G06F3/0488

   G06F3/0482

   G06F3/0484 120

【請求項の数】9

【全頁数】21

(21)【出願番号】特願2016-203674(P2016-203674)

(22)【出願日】2016年10月17日

(65)【公開番号】特開2018-67048(P2018-67048A)

(43)【公開日】2018年4月26日

【審査請求日】2019年7月23日

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】100110788

【弁理士】

【氏名又は名称】椿 豊

(72)【発明者】

【氏名】前川 武士

(72)【発明者】

【氏名】谷口 陽介

(72)【発明者】

【氏名】杉田 克行

(72)【発明者】

【氏名】副島 英明

【審査官】 滝谷 亮一

(56)【参考文献】

【文献】 特開２０１０−０１５２３９（ＪＰ，Ａ）

【文献】 特開２００１−２９６９５０（ＪＰ，Ａ）

【文献】 特開２０１４−０２１８８２（ＪＰ，Ａ）

【文献】 特開２０１５−１３０１８６（ＪＰ，Ａ）

【文献】 特表２０１４−５１２６１９（ＪＰ，Ａ）

【文献】 特開２０１１−１２３７７３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０４８２

Ｇ０６Ｆ ３／０４８４

Ｇ０６Ｆ ３／０４８８

Ｈ０４Ｎ １／００

(57)【特許請求の範囲】

【請求項1】

表示装置と、前記表示装置とは別体でありユーザーの手首に装着される力覚デバイスとを備えた表示システムであって、
前記表示装置は、
ファイルに関連付けられたオブジェクトを表示する表示手段と、
前記表示手段にて表示したオブジェクトを選択する操作を前記ユーザーから受け付ける選択受付手段と、
前記選択受付手段にて操作を受け付けた場合に、選択されたオブジェクトに関連付けられたファイルの属性を抽出する抽出手段と、
前記抽出手段にて抽出した属性に応じて決定した知覚の内容を、前記力覚デバイスに通知する通知手段とを含み、
前記力覚デバイスは、
前記表示装置から前記知覚の内容の通知を受信する受信手段と、
前記知覚の内容を前記受信手段にて受信した後で、選択されたオブジェクトに対する操作を検知する操作検知手段と、
選択されたオブジェクトに対する操作を前記操作検知手段にて検知した場合に、前記受信手段にて受信した前記知覚の内容に応じた知覚である力覚を前記ユーザーに付与する付与手段とを含む、表示システム。

【請求項2】

前記表示装置は、
ファイルの属性と知覚との関係が記載されたテーブルを記憶する記憶装置と、
前記抽出手段にて抽出した属性に基づいて、前記テーブルを用いて前記知覚の内容を決定する決定手段とをさらに含み、
前記通知手段は、前記決定手段にて決定した前記知覚の内容を前記力覚デバイスに通知する、請求項１に記載の表示システム。

【請求項3】

前記記憶装置は、複数の前記テーブルを記憶し、前記複数のテーブルの各々に記載されたファイルの属性の種類は互いに異なり、
前記表示装置は、前記複数のテーブルの優先順位の設定を受け付ける優先順位設定受付手段をさらに含む、請求項２に記載の表示システム。

【請求項4】

前記複数のテーブルの各々に記載されたファイルの属性の種類は、ファイルのサイズ、ファイルの数、ファイルの権限、またはファイルの作成者である、請求項３に記載の表示システム。

【請求項5】

前記表示装置は、前記テーブルに記載されるファイルの属性と知覚との関係の設定を受け付けるテーブル設定受付手段をさらに含む、請求項２〜４のいずれかに記載の表示システム。

【請求項6】

前記力覚デバイスは、前記選択受付手段にて操作を受け付けてからの経過時間が閾値を超えた場合に、前記付与手段にて付与する力覚を緩和する緩和手段をさらに含む、請求項１〜５のいずれかに記載の表示システム。

【請求項7】

前記選択受付手段にて操作を受け付けてからの経過時間が閾値を超えた場合に、前記緩和手段は、前記付与手段による力覚の付与を停止する、請求項６に記載の表示システム。

【請求項8】

前記操作検知手段は、選択されたオブジェクトをドラッグする操作を検知し、
前記付与手段は、前記操作検知手段にてドラッグ操作を検知した場合に、前記受信手段にて受信した前記知覚の内容に応じた知覚である力覚の付与を開始する、請求項１〜７のいずれかに記載の表示システム。

【請求項9】

前記通知手段は、前記抽出手段にて抽出した属性に応じて決定した、強度、方向、およびタイミングのうち少なくとも１つが異なる前記知覚の内容を、前記力覚デバイスに通知する、請求項１〜８のいずれかに記載の表示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、表示システムに関する。より特定的には、本発明は、利便性を向上することのできる表示システムに関する。

【背景技術】

【0002】

電子写真式の画像形成装置には、スキャナー機能、ファクシミリ機能、複写機能、プリンターとしての機能、データ通信機能、およびサーバー機能を備えたＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）、ファクシミリ装置、複写機、プリンターなどがある。

【0003】

ＭＦＰは、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの記憶装置を備えている。記憶装置は、ＭＦＰのユーザーが個人で用いることのできる記憶領域（ボックス領域）を含んでいる。ＭＦＰのユーザーは、自身の携帯端末などに保存されているファイルをボックス領域に保存したり、ボックス領域に保存されているファイルを自身の携帯端末などに送信したりすることが可能である。

【0004】

ところで、近年、力覚提示デバイスが提案されている。力覚提示デバイスとは、物体と接触した際の反力感覚である力覚を装着者に対して与えるデバイスである。力覚提示デバイスは、今後、小型で装着できるものが一般化するものと予想される。力覚提示デバイスは、各種職業技術訓練、遠隔操作、健康医療福祉機器などへの応用が期待されている。

【0005】

力覚提示デバイスに関する技術は、たとえば下記特許文献１などに開示されている。下記特許文献１には、単一の情報を利用して、複数種類の力触覚提示装置を適切に動作させることが可能な情報処理装置が開示されている。情報処理装置は、画像オブジェクトの特徴量に基づいて、ＩＦ（インターフェース）部に接続された力触覚提示装置に提示する力を算出する。情報処理装置は、力触覚提示装置の種類に応じて、当該算出された力をＩＦ部に接続された力触覚提示装置に適合する力に補正する。情報処理装置は、補正された提示力を示す信号を、ＩＦ部を介して力触覚提示装置に出力する。

【0006】

また、オブジェクトの処理に関する技術は、たとえば下記特許文献２などに開示されている。下記特許文献２の情報処理装置は、入力操作受付部と、距離特定部と、制御部とを備えている。入力操作受付部は、タッチパネルが積層された表示部の表示面（２次元平面）に略平行な物体の移動を、タッチパネルに対するタッチ操作として受け付ける。距離特定部は、タッチ操作がなされた場合の物体についての、表示部の表示面（２次元平面）からの距離を検出する。制御部は、入力操作受付部により受け付けられたタッチ操作の種類（物体の移動の軌跡に応じて異なる種類）と、距離特定部により検出された距離に基づいて、表示されたオブジェクトに関する処理の実行を可変制御する。

【先行技術文献】

【特許文献】

【0007】

【特許文献1】特開２００８−３０５１０９号公報

【特許文献2】特開２０１６−０９５８８５号公報

【発明の概要】

【発明が解決しようとする課題】

【0008】

タッチパネルＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を備えた表示装置において、ファイルの保存場所を移動する場合（たとえば表示装置からＭＦＰにファイルを移動する場合）、ユーザーは、表示装置のディスプレイに表示されたオブジェクト（ファイルに関連するオブジェクト）を選択し、そのオブジェクトに対してドラッグ操作などを行う。表示装置は、ユーザーからの操作を受け付けた後で、ファイルの保存場所を移動する処理を開始する。

【0009】

ユーザーは、ディスプレイに表示されたオブジェクトを一見しただけでは、オブジェクトに関連付けられたファイルの属性（サイズや権限など）を把握することはできない。このため、ユーザーは、ファイルの保存場所を移動するドラッグ操作を行った後で、その操作が適切でないことを知る場合があった。言い換えれば、ユーザーは、ファイルの保存場所を移動するドラッグ操作が完了する前に、その操作が適切であるか否かを容易に判断することができなかった。その結果、表示装置の利便性の低下を招いていた。

【0010】

一例として、移動しようとするファイルのサイズが大きい場合には、ファイルの移動に時間を要し、ファイルを移動している間の表示装置の応答速度の低下を招く。また、ファイルのコピーが禁止されている場合には、ドラッグ操作を行ったとしてもファイルを移動することはできない。これらの場合には、ユーザーは、ファイルの保存場所を移動するドラッグ操作を行った後で、その操作が不適切であったと判断する可能性が高い。

【0011】

ファイルを処理する操作が完了する前に、その処理に関する操作が適切であるか否かを容易に判断することができないという問題は、表示装置上でファイルを操作する場合に共通して起こり得る問題であった。

【0012】

本発明は、上記課題を解決するためのものであり、その目的は、利便性を向上することのできる表示システムを提供することである。

【課題を解決するための手段】

【0013】

本発明の一の局面に従う表示システムは、表示装置と、表示装置とは別体でありユーザーの手首に装着される力覚デバイスとを備えた表示システムであって、表示装置は、ファイルに関連付けられたオブジェクトを表示する表示手段と、表示手段にて表示したオブジェクトを選択する操作をユーザーから受け付ける選択受付手段と、選択受付手段にて操作を受け付けた場合に、選択されたオブジェクトに関連付けられたファイルの属性を抽出する抽出手段と、抽出手段にて抽出した属性に応じて決定した知覚の内容を、力覚デバイスに通知する通知手段とを含み、力覚デバイスは、表示装置から知覚の内容の通知を受信する受信手段と、知覚の内容を受信手段にて受信した後で、選択されたオブジェクトに対する操作を検知する操作検知手段と、選択されたオブジェクトに対する操作を操作検知手段にて検知した場合に、受信手段にて受信した知覚の内容に応じた知覚である力覚をユーザーに付与する付与手段とを含む。
上記表示システムにおいて好ましくは、表示装置は、ファイルの属性と知覚との関係が記載されたテーブルを記憶する記憶装置と、抽出手段にて抽出した属性に基づいて、テーブルを用いて知覚の内容を決定する決定手段とをさらに含み、通知手段は、決定手段にて決定した知覚の内容を力覚デバイスに通知する。
上記表示システムにおいて好ましくは、記憶装置は、複数のテーブルを記憶し、複数のテーブルの各々に記載されたファイルの属性の種類は互いに異なり、表示装置は、複数のテーブルの優先順位の設定を受け付ける優先順位設定受付手段をさらに含む。
上記表示システムにおいて好ましくは、複数のテーブルの各々に記載されたファイルの属性の種類は、ファイルのサイズ、ファイルの数、ファイルの権限、またはファイルの作成者である。
上記表示システムにおいて好ましくは、表示装置は、テーブルに記載されるファイルの属性と知覚との関係の設定を受け付けるテーブル設定受付手段をさらに含む。
上記表示システムにおいて好ましくは、力覚デバイスは、選択受付手段にて操作を受け付けてからの経過時間が閾値を超えた場合に、付与手段にて付与する力覚を緩和する緩和手段をさらに含む。
上記表示システムにおいて好ましくは、選択受付手段にて操作を受け付けてからの経過時間が閾値を超えた場合に、緩和手段は、付与手段による力覚の付与を停止する。
上記表示システムにおいて好ましくは、操作検知手段は、選択されたオブジェクトをドラッグする操作を検知し、付与手段は、操作検知手段にてドラッグ操作を検知した場合に、受信手段にて受信した知覚の内容に応じた知覚である力覚の付与を開始する。
上記表示システムにおいて好ましくは、通知手段は、抽出手段にて抽出した属性に応じて決定した、強度、方向、およびタイミングのうち少なくとも１つが異なる知覚の内容を、力覚デバイスに通知する。

【発明の効果】

【0024】

本発明によれば、利便性を向上することのできる表示システムを提供することができる。

【図面の簡単な説明】

【0025】

【図1】本発明の一実施の形態における表示システムの概念的な構成を示す概念図である。

【図2】本発明の一実施の形態における表示システムのハードウェア構成を示すブロック図である。

【図3】本発明の一実施の形態において、携帯端末１００の操作表示部１１０に表示される基本画面を模式的に示す図である。

【図4】本発明の一実施の形態において、携帯端末１００が記憶する属性テーブル１５２を模式的に示す図である。

【図5】本発明の一実施の形態における知覚変換テーブル１５３ａを模式的に示す図である。

【図6】本発明の一実施の形態における知覚変換テーブル１５３ｂを模式的に示す図である。

【図7】本発明の一実施の形態における知覚変換テーブル１５３ｃを模式的に示す図である。

【図8】本発明の一実施の形態における優先順位テーブル１５４を模式的に示す図である。

【図9】本発明の一実施の形態における表示システムの動作を示すシーケンス図の前半部分である。

【図10】本発明の一実施の形態における表示システムの動作を示すシーケンス図の後半部分である。

【図11】図９のステップＳ７において、携帯端末１００の操作表示部１１０に表示される知覚変換テーブルの設定画面を模式的に示す図である。

【図12】図１０のステップＳ３２において、力覚値に応じた負荷を力覚デバイス２００がユーザーＵＲに対して印加した状態を模式的に示す図である。

【図13】本発明の一実施の形態における携帯端末１００の動作を示すフローチャートである。

【図14】本発明の一実施の形態の第１の変形例において、携帯端末１００が記憶する知覚変換テーブル１５３を模式的に示す図である。

【図15】本発明の一実施の形態の第２の変形例における携帯端末１００の動作を模式的に示す図である。

【図16】本発明の一実施の形態の第２の変形例における視覚変換テーブル１５３を模式的に示す図である。

【発明を実施するための形態】

【0026】

以下、本発明の実施の形態について、図面に基づいて説明する。

【0027】

以下の実施の形態では、表示装置が携帯端末である場合について説明する。表示装置は携帯端末である場合の他、携帯電話、タブレットＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、または画像形成装置などの機器の操作を受け付ける操作パネルなどであってもよい。

【0028】

［表示システムの構成］

【0029】

始めに、本実施の形態における表示システムの構成について説明する。

【0030】

図１は、本発明の一実施の形態における表示システムの概念的な構成を示す概念図である。

【0031】

図１を参照して、本実施の形態における表示システムは、携帯端末１００（表示装置の一例）と、力覚デバイス（力覚提示デバイス）２００とを備えている。携帯端末１００と力覚デバイス２００とは、たとえば近距離無線通信などの無線通信により相互に通信を行う。

【0032】

ユーザーＵＲは、携帯端末１００および力覚デバイス２００を使用可能なユーザーである。ユーザーＵＲは、一方の手で携帯端末１００を持ちながら、力覚デバイス２００を手首に装着したもう一方の手で携帯端末１００の操作表示部１１０を操作する。

【0033】

携帯端末１００は、ファイルに関連付けられたオブジェクトを操作表示部１１０に表示し、表示したオブジェクトを選択する操作をユーザーＵＲから受け付ける。携帯端末１００は、オブジェクトを選択する操作を受け付けた場合に、選択されたオブジェクトに関連付けられたファイルの属性を抽出する。携帯端末１００は、抽出した属性に応じた知覚をユーザーＵＲに与える。

【0034】

本実施の形態では、携帯端末１００は、抽出した属性に応じて、強度、方向、およびタイミングのうち少なくとも１つが異なる力覚を与える指示を、ユーザーＵＲが装着している力覚デバイス２００に対して送信する。力覚デバイス２００は、指示に従って力覚をユーザーＵＲに与える。

【0035】

図２は、本発明の一実施の形態における表示システムのハードウェア構成を示すブロック図である。

【0036】

図２を参照して、携帯端末１００は、ユーザーＵＲからの操作を受け付ける被操作端末であり、ＣＰＵ１０１と、ＲＯＭ１０２と、ＲＡＭ１０３と、記憶装置１０４と、無線通信部１０５と、近距離無線通信部１０６と、座標管理部１０７と、属性判断部１０８と、知覚変換部１０９と、操作表示部１１０とを含んでいる。ＣＰＵ１０１には、ＲＯＭ１０２、ＲＡＭ１０３、記憶装置１０４、無線通信部１０５、近距離無線通信部１０６、座標管理部１０７、属性判断部１０８、知覚変換部１０９、および操作表示部１１０の各々がバスを介して接続されている。

【0037】

ＣＰＵ１０１は、ＲＯＭ１０２に記憶された制御プログラムを実行することにより、携帯端末１００全体の制御を行う。

【0038】

ＲＯＭ１０２は、たとえばフラッシュＲＯＭである。ＲＯＭ１０２には、ＣＰＵ１０１が実行する各種プログラムと、各種固定データとが格納されている。ＲＯＭ１０２は、書換え不可能なものであってもよい。

【0039】

ＲＡＭ１０３は、ＣＰＵ１０１のメインメモリである。ＲＡＭ１０３は、ＣＰＵ１０１が各種プログラムを実行するときに必要なデータや画像データを一時的に記憶するためなどに用いられる。

【0040】

記憶装置１０４は、たとえばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）よりなっており、力覚デバイス２００との連携のためのアプリケーションである知覚通知アプリ１５１のプログラムと、属性テーブル１５２と、知覚変換テーブル１５３、優先順位テーブル１５４などの各種情報を記憶している。

【0041】

無線通信部１０５は、ＣＰＵ１０１からの指示に従って、ＴＣＰ／ＩＰなどの通信プロトコルによって、力覚デバイス２００などの他の機器との間で無線通信を行う。

【0042】

近距離無線通信部１０６は、たとえばＢｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信規格に基づいて、力覚デバイス２００などの他の機器との間で近距離無線通信を行う。

【0043】

座標管理部１０７は、属性テーブル１５２を参照することで、ユーザーＵＲからの操作を受け付けた位置の座標に存在するオブジェクトを特定する。

【0044】

属性判断部１０８は、属性テーブル１５２を参照することで、座標管理部１０７によって特定されたオブジェクトに関連付けられたファイルの属性を抽出する。

【0045】

知覚変換部１０９は、知覚変換テーブル１５３を参照することで、属性判断部１０８にて判断された属性に応じた知覚であって、ユーザーＵＲに与える知覚を決定する。

【0046】

操作表示部１１０は、タッチパネルディスプレイなどからなる表示部と、タッチパネルディスプレイに表示されたソフトウェアキーなどからなる操作部とを含んでいる。操作表示部１１０は、各種操作をユーザーから受け付け、オブジェクトを含む画面などの各種情報をユーザーに対して表示する。

【0047】

力覚デバイス２００は、装着しているユーザーＵＲに対し、携帯端末１００からの指示に従って力覚を与える。力覚デバイス２００は、ＣＰＵ２０１と、ＲＯＭ２０２と、ＲＡＭ２０３と、記憶装置２０４と、無線通信部２０５と、近距離無線通信部２０６と、力覚提示部２０７と、操作表示部２０８と、位置取得部２０９とを含んでいる。ＣＰＵ２０１には、ＲＯＭ２０２、ＲＡＭ２０３、記憶装置２０４、無線通信部２０５、近距離無線通信部２０６、力覚提示部２０７、操作表示部２０８、および位置取得部２０９の各々がバスを介して接続されている。

【0048】

ＣＰＵ２０１は、力覚デバイス２００全体の動作を制御する。ＣＰＵ２０１は、制御プログラムに基づいて処理を行う。

【0049】

ＲＯＭ２０２は、ＣＰＵ２０１が実行する制御プログラムなどを記憶する。

【0050】

ＲＡＭ２０３はＣＰＵ２０１の作業用のメモリであり、各種情報を一時的に記憶する。

【0051】

記憶装置２０４は、力覚デバイス２００を装着しているユーザーＵＲに対して力覚を与えるためのアプリケーションである力覚提示アプリ２５１のプログラムなどの各種情報を記憶している。

【0052】

無線通信部２０５は、ＣＰＵ２０１からの指示に従って、ＴＣＰ／ＩＰなどの通信プロトコルによって、携帯端末１００などの他の機器との間で無線通信を行う。

【0053】

近距離無線通信部２０６は、たとえばＢｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信規格に基づいて、携帯端末１００などの他の機器との間で近距離無線通信を行う。

【0054】

力覚提示部２０７は、力覚デバイス２００を装着しているユーザーＵＲに対して力覚を与える（提示する）。

【0055】

操作表示部２０８は、各種入力をユーザーＵＲから受け付け、各種情報をユーザーＵＲに対して表示する。

【0056】

位置取得部２０９は、加速度センサー、地磁気センサー、およびＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信機などにより構成されている。位置取得部２０９は、力覚デバイス２００の位置の情報を取得する。また位置取得部２０６は、装着しているユーザーＵＲによる自機の移動の方向および加速度を検知する。

【0057】

図３は、本発明の一実施の形態において、携帯端末１００の操作表示部１１０に表示される基本画面を模式的に示す図である。

【0058】

図３を参照して、基本画面は、ユーザーの操作対象となるアイテムである複数のオブジェクトＯＢ１、ＯＢ２、ＯＢ３、およびＯＢ４を含んでいる。オブジェクトＯＢ１は「ファイルＡ１」のオブジェクトである。オブジェクトＯＢ２は「ファイルＡ２」のオブジェクトである。オブジェクトＯＢ３は「フォルダＢ」のオブジェクトであり、フォルダＢ内には「ファイルＢ１」および「ファイルＢ２」が保存されている。オブジェクトＯＢ４は「アプリＣ」のオブジェクトである。オブジェクトＯＢ１、ＯＢ２、およびＯＢ３は、ファイルに関連するオブジェクトである。オブジェクトＯＢ４は、アプリケーションを起動するためのオブジェクトであり、ファイルに関連するオブジェクトではない。

【0059】

図４は、本発明の一実施の形態において、携帯端末１００が記憶する属性テーブル１５２を模式的に示す図である。

【0060】

図４を参照して、属性テーブル１５２は、操作表示部１１０に表示される画面に含まれるオブジェクトの座標（ｘ，ｙ）と、オブジェクト名と、オブジェクトに関連するファイルの属性との関係を記載したテーブルである。属性テーブル１５２は、操作表示部１１０に表示される画面ごとに予め作成されている。図４に示す属性テーブル１５２は、図２の基本画面に関する属性テーブル１５２である。なお、オブジェクトの座標の表記の仕方は任意であるが、ここでは、操作表示部１１０の左上の角が原点とされ、操作表示部１１０の図３中右方向がｘ方向、図３中下方向がｙ方向とされている。

【0061】

図４に示す属性テーブル１５２は、オブジェクトＯＢ１、ＯＢ２、ＯＢ３、ＯＢ４の各々に関する情報を含んでいる。たとえば最上段の情報によれば、（１０，３０）、（３０，３０）、（１０，７０）、および（３０，７０）で囲まれる領域には、ファイルＡ１というオブジェクト名のオブジェクト（図３のオブジェクトＯＢ１に相当）が存在しており、このオブジェクトに関連付けられているファイルは、６ＭＢのサイズを有し、ユーザーＵＲ１によって作成され、コピーが許可されていることが分かる。上から３段目の情報は、２つのファイルが関連付けられたオブジェクトＯＢ３の情報であるため、それぞれのファイルの属性が記載されている。最下段の情報は、ファイルに関連付けられていないオブジェクトＯＢ４に関する情報であるため、ファイル属性の欄は空欄になっている。

【0062】

図５〜図７は、本発明の一実施の形態における知覚変換テーブル１５３を模式的に示す図である。

【0063】

図５〜図７を参照して、知覚変換テーブル１５３は、ファイルの属性と、ユーザーＵＲに与える知覚との関係が記載されたテーブルである。ファイルの属性とは、たとえばファイルのサイズ、ファイルの数、ファイルの権限、またはファイルの作成者などである。

【0064】

本実施の形態では、ユーザーＵＲに対して力覚を与える。以降の説明において、ユーザーＵＲに与える力覚の具体的な内容（方向、強度、タイミングなど）を、力覚値と記すことがある。

【0065】

携帯端末１００は知覚変換テーブル１５３として、複数の知覚変換テーブル１５３ａ、１５３ｂ、および１５３ｃを記憶している。複数の知覚変換テーブル１５３ａ、１５３ｂ、および１５３ｃの各々に記載されたファイルの属性の種類は互いに異なっている。なお、携帯端末２００は、１つのみの知覚変換テーブル１５３を記憶していてもよい。

【0066】

図５に示す知覚変換テーブル１５３ａは、ファイルサイズと力覚値との関係が記載された力覚変換テーブルである。知覚変換テーブル１５３ａには、ファイルサイズが１０ＭＢ以上である場合に、θ＝０度の方向に１ｋｇという強い力覚を与えることが記載されている。また、ファイルサイズが５ＭＢ以上１０ＭＢ未満である場合に、θ＝０度の方向に０．５ｋｇという弱い力覚を与えることが記載されている。さらに、ファイルサイズが５ＭＢ未満である場合に、力覚を与えないことが記載されている。

【0067】

ここで、θは、操作表示部１１０の表示面に対して垂直な方向に沿って携帯端末１００へ向かう方向（端末方向）をθ＝０度とし、操作表示部１１０の表示面に対して垂直な方向に沿って携帯端末１００から離れる方向をθ＝１８０度とした角度である。θの基準となる方向（操作表示部１１０の表示面に対して垂直な方向に沿って携帯端末１００へ向かう方向）は、携帯端末１００と力覚デバイス２００との間の近距離無線通信により特定される。

【0068】

図６に示す知覚変換テーブル１５３ｂは、ファイルの権限と力覚値との関係が記載された力覚変換テーブルである。知覚変換テーブル１５３ｂには、ファイルのコピーが禁止されている場合に、θ＝０度、９０度、１８０度の各々の方向に対して順番に１ｋｇという強い力覚を３秒間与えることが記載されている。また、ファイルのコピーが許可されている場合に、力覚を与えないことが記載されている。

【0069】

知覚変換テーブル１５３ｂには、ファイルの読取りや書込みの権限と力覚値との関係がさらに記載されていてもよい。

【0070】

図７に示す知覚変換テーブル１５３ｃは、オブジェクトに関連付けられたファイルの数と力覚値との関係が記載された力覚変換テーブルである。知覚変換テーブル１５３ｃには、オブジェクトに関連付けられたファイルの数が４個以上である場合に、θ＝０度の方向に１ｋｇという強い力覚を与えることが記載されている。また、オブジェクトに関連付けられたファイルの数が１〜３個である場合に、θ＝１８０度の方向に０．５ｋｇという強い力覚を与えることが記載されている。

【0071】

なお、知覚変換テーブル１５３に記載されている知覚が力覚値である場合、力覚値は、ファイルの属性に応じて、方向、強度、またはタイミングのうち少なくともいずれか１つが異なるものであればよい。また、知覚変換テーブル１５３に記載されるファイルの属性と知覚との関係については、ユーザーＵＲによる設定が可能である。

【0072】

図８は、本発明の一実施の形態における優先順位テーブル１５４を模式的に示す図である。

【0073】

図８を参照して、優先順位テーブル１５４は、知覚変換テーブル１５３ａ、１５３ｂ、および１５３ｃの各々と、設定されている優先順位および有効性との関係が記載されたテーブルである。図８の優先順位テーブル１５４によれば、ファイルサイズの知覚変換テーブル１５３ａおよびファイル権限の知覚変換テーブル１５３ｂが有効にされている一方で、ファイル数の知覚変換テーブル１５３ｃは無効にされていることが分かる。また、ファイル権限の知覚変換テーブル１５３ｂ、ファイルサイズの知覚変換テーブル１５３ａ、およびファイル数の知覚変換テーブル１５３ｃという優先順序が設定されていることが分かる（無効にされた知覚変換テーブル１５３ｃの優先順位は自動的に最も低く設定される）。

【0074】

なお、優先順位テーブル１５４における知覚変換テーブルの優先順位および有効性については、後述するように、ユーザーＵＲによる設定が可能である。

【0075】

［表示システムの構成］

【0076】

続いて、本実施の形態における表示システムの動作について説明する。

【0077】

図９および図１０は、本発明の一実施の形態における表示システムの動作を示すシーケンス図である。

【0078】

図９を参照して、ユーザーＵＲは、携帯端末１００および力覚デバイス２００の各々において、力覚提示機能を起動するための所定の操作（たとえば知覚通知アプリ１５１および力覚提示アプリ２５１を起動する操作）を行う（Ｓ１）。携帯端末１００および力覚デバイス２００は、ユーザーＵＲからの操作を受け付けると、セキュリティ維持のために互いを認証する作業であるペアリングを行う。具体的には、携帯端末１００は、ペアリングのための信号を周囲に送信する（Ｓ３）。力覚デバイス２００は、携帯端末１００からの信号を受信すると、ペアリングのための応答信号を携帯端末１００に送信する（Ｓ５）。これにより、携帯端末１００と力覚デバイス２００との間の近距離無線通信が確立される。

【0079】

携帯端末１００は、力覚デバイス２００との間の近距離無線通信が確立されると、知覚変換テーブルの設定画面（図１１）を操作表示部１１０に表示することで、ユーザーＵＲに対して知覚変換テーブルの設定を要求する（Ｓ７）。ユーザーＵＲは、知覚変換テーブルの設定画面を通じて知覚変換テーブルの設定を行い（Ｓ９）、知覚変換テーブルの設定完了を携帯端末１００に通知する（Ｓ１１）。携帯端末１００は、ユーザーＵＲからの設定完了の通知を受け付けると、設定された内容を保存する（Ｓ１２）。

【0080】

ここで、ステップＳ７〜Ｓ１２の処理を詳細に説明する。

【0081】

図１１は、図９のステップＳ７において、携帯端末１００の操作表示部１１０に表示される知覚変換テーブルの設定画面を模式的に示す図である。

【0082】

図９および図１１を参照して、ステップＳ７で表示される知覚変換テーブルの設定画面は、知覚変換テーブルの設定を要求するメッセージＭＧと、キーＫＹ１、ＫＹ２、ＫＹ３、ＫＹ４、ＫＹ５、ＫＹ６、ＫＹ７、およびＫＹ８とを含んでいる。設定画面の上部には、メッセージＭＧが表示されている。設定画面の下部右側には、キーＫＹ１、ＫＹ２、ＫＹ３、ＫＹ４、ＫＹ５、ＫＹ６、ＫＹ７、およびＫＹ８が表示されている。設定画面の下部左側には、「ファイルサイズ」、「ファイル権限」、および「ファイル数」という知覚変換テーブルの各項目が表示されている。キーＫＹ１およびＫＹ２は、ファイルサイズの知覚変換テーブル１５３ａに対応するキーである。キーＫＹ３およびＫＹ４は、ファイル権限の知覚変換テーブル１５３ｂに対応するキーである。キーＫＹ５およびおＫＹ６は、ファイル数の知覚変換テーブル１５３ｃに対応するキーである。キーＫＹ１、ＫＹ３、およびＫＹ５は、知覚変換テーブルの優先順序を設定するためのキーである。キーＫＹ２、ＫＹ４、およびＫＹ６は、テーブルの有効性を設定するためのキーである。

【0083】

ステップＳ９において、ユーザーＵＲは、キーＫＹ１、ＫＹ３、およびＫＹ５の各々を任意の順序で押下することで、知覚変換テーブル１５３ａ、１５３ｂ、および１５３ｃの優先順序を設定する。またユーザーＵＲは、キーＫＹ２、ＫＹ４、およびＫＹ６の各々における「ＯＮ」または「ＯＦＦ」の部分を押下することで、知覚変換テーブル１５３ａ、１５３ｂ、および１５３ｃの有効性を設定する。

【0084】

キーＫＹ１、ＫＹ３、およびＫＹ５の各々が任意の順序で押下されると、携帯端末１００は、押下された順序で、各知覚変換テーブルに「１」、「２」、「３」という優先順序を設定する。ここでは、ファイル権限の知覚変換テーブル１５３ｂ、ファイルサイズの知覚変換テーブル１５３ａ、およびファイル数の知覚変換テーブル１５３ｃという順序で知覚変換テーブルの優先順序が設定されている。

【0085】

キーＫＹ２、ＫＹ４、またはＫＹ６における「ＯＮ」の部分が押下された場合には、携帯端末１００は、その知覚変換テーブルを有効にする。ユーザーによってキーＫＹ２、ＫＹ４、またはＫＹ６における「ＯＦＦ」の部分が押下された場合には、携帯端末１００は、その知覚変換テーブルを無効にし、知覚を決定する際に使用しない。ここでは、ファイル権限の知覚変換テーブル１５３ａおよびファイルサイズの知覚変換テーブル１５３ｂが有効にされており、ファイル数の知覚変換テーブル１５３ｃが無効にされている。

【0086】

ステップＳ１１において、ユーザーＵＲは、「ＯＫ」キーＫＹ７を押下することで、知覚変換テーブルの設定完了を携帯端末１００に通知する。

【0087】

ステップＳ１２において、携帯端末１００は、キーＫＹ７が押下されると設定された内容を確定し、設定された内容を優先順位テーブル１５４に登録する。

【0088】

一方、携帯端末１００は、「キャンセル」キーＫＹ８が押下されると、設定された内容をキャンセルする。

【0089】

図９を参照して、ステップＳ１２の処理に続いて、携帯端末１００は、自機の動作状態を通常モードから、受け付けた操作に応じた力覚を与える力覚通知モードに変更する（Ｓ１３）。次に携帯端末１００は、自機の動作状態を力覚通知モードに変更した事実を操作表示部１１０に一定時間表示することによりユーザーＵＲに通知し（Ｓ１５）、オブジェクトを含む基本画面（図３）を操作表示部１１０に表示する（Ｓ１６）。

【0090】

ステップＳ１６の処理に続いて、ユーザーＵＲは、操作表示部１１０に表示された基本画面内のオブジェクトをタッチ操作などにより選択する。ここではオブジェクトＯＢ１が選択されたものとする。

【0091】

携帯端末１００は、操作表示部１１０への操作を受け付けると、属性テーブル１５２（図４）を参照して、操作を受け付けた座標にオブジェクトが存在するか否かを判別し、操作を受け付けた座標にオブジェクトが存在する場合、そのオブジェクトの選択を受け付ける（Ｓ１９）。この処理は、座標管理部１０７を用いて行われる。ここでは、オブジェクトＯＢ１の選択を受け付ける。

【0092】

次に携帯端末１００は、属性テーブル１５２（図４）を参照して、選択されたオブジェクトに関連付けられたファイルの属性を抽出する（Ｓ２１）。この処理は、属性判断部１０８を用いて行われる。ここでは、オブジェクトＯＢ１に関連付けられたファイルＡ１の属性（サイズ：６ＭＢ、作成者：ユーザーＵＲ１、コピー：可）が抽出される。

【0093】

続いて携帯端末１００は、優先順位テーブル１５４を参照し、最も高い優先順位を有する知覚変換テーブル１５３を取得する（Ｓ２３）。携帯端末１００は、取得した知覚変換テーブル１５３を用いて、抽出した属性に対応する力覚値を参照する。

【0094】

携帯端末１００は、参照した力覚値における強度が０．０ｋｇよりも大きい場合には、参照した力覚値に力覚値を決定し（Ｓ２５）、決定した力覚値を力覚デバイス２００に通知する（Ｓ２７）。

【0095】

携帯端末１００は、参照した力覚値における強度が０である場合には、参照した力覚値を破棄する。そして携帯端末１００は、一つだけ低い優先順位を有する知覚変換テーブル１５３をさらに取得し、取得した知覚変換テーブル１５３を用いて、抽出した属性に対応する力覚値を参照する。携帯端末１００は、全ての有効な知覚変換テーブル１５３について、参照した力覚値が０である場合には、力覚値を０に決定し（Ｓ２５）、決定した力覚値を力覚デバイス２００に通知する（Ｓ２７）。

【0096】

ここでは、最も優先順位の高い知覚変換テーブルは知覚変換テーブル１５３ｂ（図６）である。しかし、抽出したファイルＡ１の権限はコピー可であり、参照した力覚値は０である。このため、抽出したファイルＡ１の６ＭＢというサイズを用いて、二番目に優先順位の高い知覚変換テーブルである知覚変換テーブル１５３ａ（図５）における「方向θ＝０、強度０．５ｋｇ」という力覚値を参照し、力覚デバイス２００に通知する力覚値としてこの力覚値が決定される。

【0097】

図１０を参照して、力覚デバイス２００は、携帯端末１００から力覚値を受信する（Ｓ２９）。

【0098】

ユーザーＵＲは、選択したオブジェクトＯＢ１に対して所望の操作（たとえば、ファイルＡ１の保存場所を移動するためのドラッグ操作）を開始する（Ｓ３１）。

【0099】

力覚デバイス２００は、位置取得部２０９を用いてユーザーＵＲによる所望の操作を受け付けると、力覚値に応じた力覚（負荷）をユーザーＵＲに対して与える（Ｓ３２）。

【0100】

なお、ステップＳ３２において、力覚デバイス２００は、携帯端末１００から力覚値を受信した場合に、所望の操作の開始の有無にかかわらず力覚値に応じた力覚を直ちにユーザーに与えてもよい。

【0101】

図１２は、図１０のステップＳ３２において、力覚値に応じた負荷を力覚デバイス２００がユーザーＵＲに対して印加した状態を模式的に示す図である。

【0102】

図１２を参照して、力覚デバイス２００は、矢印ＡＲ１で示すように「方向θ＝０、強度０．５ｋｇ」という力覚値に応じた力覚（負荷）をユーザーＵＲに対して与える。θは、操作表示部１１０の表示面に対して垂直な方向に沿って携帯端末１００へ向かう方向（端末方向）であるため、ユーザーＵＲが受ける力覚は、操作表示部１１０の表示面に対して垂直に携帯端末１００へ向かう方向となっている。

【0103】

図１０を参照して、ユーザーＵＲは、力覚デバイス２００から力覚を受けると（Ｓ３３）、その力覚からファイルの属性を類推し、類推したファイルの属性に基づいて所望の操作を継続するか否かを判断する（Ｓ３５）。たとえばユーザーＵＲがファイルＡ１のサイズが大きいと類推した場合、ユーザーＵＲは、ファイルＡ１の移動に長い時間を要することを憂慮してファイルＡ１を移動する操作を中止することが想定される。また、ユーザーＵＲがファイルＡ１のコピーが禁止されていると類推した場合、ユーザーＵＲは、ファイルＡ１をコピーする操作を中止することが想定される。

【0104】

次に携帯端末１００は、オブジェクトが選択されてからの経過時間が閾値（たとえば３．０秒）を超えたか否かを判断する（Ｓ３７）。携帯端末１００は、経過時間が閾値を超えた場合に、決定した力覚値を０に変更し（Ｓ３９）、力覚値を０にすることを力覚デバイス２００に通知する（Ｓ４１）。

【0105】

力覚デバイス２００は、通知を受信すると、力覚の印加を停止する（Ｓ４３）。

【0106】

図１３は、本発明の一実施の形態における携帯端末１００の動作を示すフローチャートである。

【0107】

図１３を参照して、携帯端末１００のＣＰＵ１０１は、操作表示部１１０へのタッチ操作を検出したか否かを判別する（Ｓ１０１）。ステップＳ１０１において、操作表示部１１０へのタッチ操作を検出したと判別するまで、ＣＰＵ１０１は、ステップＳ１０１の処理を繰り返す。

【0108】

ステップＳ１０１において、操作表示部１１０へのタッチ操作を検出したと判別した場合（Ｓ１０１でＹＥＳ）、ＣＰＵ１０１は、タッチされた座標を操作表示部１１０から取得する（Ｓ１０３）。次にＣＰＵ１０１は、属性テーブル１５２を参照し、取得した座標にオブジェクトが存在すればそれを特定する（Ｓ１０５）。続いてＣＰＵ１０１は、オブジェクトを特定したか否かを判別する（Ｓ１０７）。

【0109】

ステップＳ１０７において、オブジェクトを特定したと判別した場合（Ｓ１０７でＹＥＳ）、ＣＰＵ１０１は、特定したオブジェクトにファイルが関連付けられているか否かを判別する（Ｓ１０９）。

【0110】

ステップＳ１０９において、特定したオブジェクトにファイルが関連付けられていると判別した場合（Ｓ１０９でＹＥＳ）、ＣＰＵ１０１は、知覚変換テーブル１５３を参照し、ファイルの属性に基づいて力覚値を決定し（Ｓ１１１）、決定した力覚値を力覚デバイス２００に通知する（Ｓ１１３）。続いてＣＰＵ１０１は、タッチ操作を検出してからの経過時間を取得し（Ｓ１１５）、経過時間が閾値を超えたか否かを判別する（Ｓ１１７）。経過時間が閾値を超えたと判別するまで、ＣＰＵ１０１はステップＳ１１７の処理を繰り返す。

【0111】

ステップＳ１１７において、経過時間が閾値を超えたと判別した場合（Ｓ１１７でＹＥＳ）、ＣＰＵ１０１は、力覚値を０とすることを力覚デバイス２００に通知し（Ｓ１１９）、処理を終了する。

【0112】

ステップＳ１０７において、オブジェクトを特定しないと判別した場合（Ｓ１０７でＮＯ）、またはステップＳ１０９において、特定したオブジェクトにファイルが関連付けられていないと判別した場合（Ｓ１０９でＮＯ）、ＣＰＵ１０１は処理を終了する。

【0113】

本実施の形態によれば、オブジェクトを選択したユーザーは、選択したオブジェクトに関連付けられたファイルの属性に応じた知覚を受けるので、ファイルの属性を感覚的に知ることができる。その結果、選択したファイルを処理する操作が完了する前に、その処理に関する操作が適切であるか否かを容易に判断することができ、利便性を向上することができる。

【0114】

［第１の変形例］

【0115】

上述の実施の形態では、オブジェクトを選択する操作を受け付けてからの経過時間が閾値を超えた場合に、ユーザーＵＲへの力覚の付与を停止する携帯端末１００の動作について説明した。携帯端末１００は、この動作に代えて、オブジェクトを選択する操作を受け付けてからの経過時間が閾値を超えた場合に、ユーザーＵＲに付与する力覚の強度を０でない値に緩和してもよい。閾値は複数であってもよい。

【0116】

図１４は、本発明の一実施の形態の第１の変形例において、携帯端末１００が記憶する知覚変換テーブル１５３を模式的に示す図である。

【0117】

図１４を参照して、本変形例の知覚変換テーブル１５３には、オブジェクトを選択する操作を受け付けてからの経過時間が閾値（たとえば５．０秒）以下である場合の力覚値Ａと、オブジェクトを選択する操作を受け付けてからの経過時間が閾値を超えた場合の力覚値Ｂとが設定されている。力覚値Ａの内容は、図５の知覚変換テーブル１５３ａの内容と同じである。力覚値Ｂの各項目の力覚値の強度は、力覚値Ａの各項目の力覚値の強度よりも緩和されている。

【0118】

力覚値Ｂでは、具体的には、ファイルサイズが１０ＭＢ以上である場合の強度は１ｋｇから０．５ｋｇに緩和されており、ファイルサイズが５ＭＢ以上１０ＭＢ未満である場合の強度は０．５ｋｇから０．０ｋｇに緩和されている。ファイルサイズが５ＭＢ未満である場合の強度は、０．０ｋｇのままである。

【0119】

なお、本変形例において、オブジェクトを選択する操作を受け付けてからの経過時間が、上記の閾値よりも長い別の閾値（たとえば１０．０秒）を超えた場合に、力覚の付与が停止されてもよい。また、オブジェクトを選択する操作を受け付けてからの経過時間とともに、力覚値の強度が段階的に緩和されてもよい。

【0120】

本変形例によれば、オブジェクトを選択してから時間が経過すると力覚が緩和されるので、ユーザーＵＲに対して不要な力覚を与えることを回避しつつ、オブジェクトに関連付けられたファイルの属性を継続的に知らせることができる。

【0121】

［第２の変形例］

【0122】

上述の実施の形態では、ユーザーＵＲに対してファイルの属性に応じた力覚を与える場合について示した。ユーザーＵＲに対して与える知覚は力覚の他、視覚、嗅覚、または聴覚などであってもよい。本変形例では、ユーザーＵＲに対してファイルの属性に応じた視覚（視覚的効果）を与える場合について説明する。すなわち、本変形例における携帯端末１００は、オブジェクトを選択する操作を受け付けた場合に、選択されたオブジェクトに関連付けられたファイルの属性を抽出し、抽出した属性に応じた視覚をユーザーＵＲに付与する。

【0123】

なお、本変形例の動作は、携帯端末１００単独の動作であり、本変形例において力覚デバイス２００は不要である。

【0124】

図１５は、本発明の一実施の形態の第２の変形例における携帯端末１００の動作を模式的に示す図である。なお図１５では、説明の便宜上、基本画面におけるオブジェクトＯＢ２のみが示されている。図１５中の点線は、オブジェクトＯＢ２の初期位置を示している。

【0125】

図１５を参照して、携帯端末１００の操作表示部１１０には基本画面が表示されている。基本画面において、オブジェクトＯＢ２は初期位置に存在している。ユーザーＵＲは、オブジェクトＯＢ２を選択し（図１５（ａ））、操作表示部１１０上で図１５中下方向にオブジェクトＯＢ２を移動させるドラッグ操作を行う（図１５（ｂ））。

【0126】

携帯端末１００は、ドラッグ操作を受け付けると、操作表示部１１０上において、受け付けたドラッグ操作の方向にオブジェクトを移動させる。携帯端末１００は、ドラッグ操作に対するオブジェクトＯＢ２の追従性を、ファイルの属性に応じて変化させる。

【0127】

携帯端末１００は、知覚変換テーブルを参照し、ファイルの属性に応じた遅れ時間を決定する。そして、オブジェクトＯＢ２が、ドラッグ操作を行う操作指よりも決定した遅れ時間だけ遅れて追従するように、操作表示部１１０上でオブジェクトＯＢ２を移動させる。具体的には、オブジェクトＯＢ２は、決定した遅れ時間が経過するまでは初期位置に留まる（図１５（ｂ））。オブジェクトＯＢ２は、決定した遅れ時間が経過した後で、操作表示部１１０上で操作指の方向に徐々に移動する（図１５（ｃ））。オブジェクトＯＢ２は、最終的に操作指の位置まで移動する（図１５（ｄ））。

【0128】

図１６は、本発明の一実施の形態の第２の変形例における視覚変換テーブル１５３を模式的に示す図である。

【0129】

図１６に示す知覚変換テーブル１５３は、ファイルサイズと遅れ時間との関係が記載されたテーブルである。この知覚変換テーブル１５３では、ファイルサイズが大きい程長い遅れ時間が設定されている。具体的には、この知覚変換テーブル１５３には、ファイルサイズが１０ＭＢ以上である場合には遅れ時間を２秒にすることが記載されている。また、ファイルサイズが５ＭＢ以上１０ＭＢ未満である場合には遅れ時間を１秒にすることが記載されている。さらに、ファイルサイズが５ＭＢ未満である場合には遅れ時間を０にすることが記載されている。

【0130】

本変形例によれば、力覚デバイス２００を用いなくても、オブジェクトに関連付けられたファイルの属性をユーザーＵＲに対して感覚的に伝えることができる。

【0131】

なお、第１および第２の変形例における表示システムの上述以外の構成および動作は、上述の実施の形態の構成および動作と同様であるため、それらの説明は繰り返さない。

【0132】

［その他］

【0133】

上述の実施の形態および変形例は適宜組み合わせることができる。たとえば、第１の変形例と第２の変形例とを組み合わせることにより、ユーザーＵＲに対して与える視覚、嗅覚、または聴覚の視覚を段階的に緩和してもよい。

【0134】

上述の実施の形態における処理は、ソフトウェアにより行っても、ハードウェア回路を用いて行ってもよい。また、上述の実施の形態における処理を実行するプログラムを提供することもできるし、そのプログラムをＣＤ−ＲＯＭ、フレキシブルディスク、ハードディスク、ＲＯＭ、ＲＡＭ、メモリカードなどの記録媒体に記録してユーザーに提供することにしてもよい。プログラムは、ＣＰＵなどのコンピューターにより実行される。また、プログラムはインターネットなどの通信回線を介して、装置にダウンロードするようにしてもよい。

【0135】

上述の実施の形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

【符号の説明】

【0136】

１００ 携帯端末
１０１，２０１ ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）
１０２，２０２ ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）
１０３，２０３ ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）
１０４，２０４ 記憶装置
１０５，２０５ 無線通信部
１０６，２０６ 近距離無線通信部
１０７ 座標管理部
１０８ 属性判断部
１０９ 知覚変換部
１１０ 操作表示部
１５１ 知覚通知アプリ
１５２ 属性テーブル
１５３，１５３ａ，１５３ｂ，１５３ｃ 知覚変換テーブル
１５４ 優先順位テーブル
２００ 力覚デバイス
２０６ 位置取得部
２０７ 力覚提示部
２０８ 操作表示部
２０９ 位置取得部
２５１ 力覚提示アプリ
ＫＹ１，ＫＹ２，ＫＹ３，ＫＹ４，ＫＹ５，ＫＹ６，ＫＹ７，ＫＹ８ キー
ＭＧ メッセージ
ＯＢ，ＯＢ１，ＯＢ２，ＯＢ３，ＯＢ４ オブジェクト
ＵＲ ユーザー

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】