特開 2024-137189 情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024137189

(43)【公開日】2024-10-07

(54)【発明の名称】情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラム

(51)【国際特許分類】

   G06F 3/01 20060101AFI20240927BHJP

   G06F 3/04817 20220101ALI20240927BHJP

【ＦＩ】

G06F3/01 560

G06F3/01 510

G06F3/04817

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2023048609

(22)【出願日】2023-03-24

(71)【出願人】

【識別番号】000142595

【氏名又は名称】株式会社栗本鐵工所

(74)【代理人】

【識別番号】100114557

【弁理士】

【氏名又は名称】河野 英仁

(74)【代理人】

【識別番号】100078868

【弁理士】

【氏名又は名称】河野 登夫

(72)【発明者】

【氏名】橋田 真一朗

(72)【発明者】

【氏名】赤岩 修一

(72)【発明者】

【氏名】上嶋 優矢

(72)【発明者】

【氏名】増田 勇貴

(72)【発明者】

【氏名】辻 仁志

(72)【発明者】

【氏名】木野井 慶介

(72)【発明者】

【氏名】梶本 泰生

【テーマコード（参考）】

5E555

【Ｆターム（参考）】

5E555AA08

5E555AA76

5E555BA04

5E555BA20

5E555BA38

5E555BB04

5E555BB20

5E555BB38

5E555BC04

5E555CB33

5E555CB34

5E555DA23

5E555DA24

5E555DB18

5E555DB19

5E555FA00

(57)【要約】

【課題】情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラムを提供する。
【解決手段】情報処理システムは、操作者の操作を受け付ける操作部に、前記操作に応じた力覚又は振動を生じさせて触覚を提示する触覚提示装置と、画像を表示する表示装置と、前記触覚提示装置における触覚、及び前記表示装置における画像を処理する情報処理装置とを含み、前記情報処理装置は、前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶し、前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、選択した制御データによって前記触覚提示装置から触覚を提示させる。
【選択図】図１

【特許請求の範囲】

【請求項1】

操作者の操作を受け付ける操作部に、前記操作に応じた力覚を生じさせて触覚を提示する触覚提示装置と、
画像を表示する表示装置と、
前記触覚提示装置における触覚、及び前記表示装置における画像を処理する情報処理装置と
を含み、
前記情報処理装置は、前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶し、
前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、
選択した制御データによって前記触覚提示装置から触覚を提示させる
情報処理システム。

【請求項2】

前記情報処理装置は、
前記ＧＵＩに対する前記操作部による操作位置が、前記ＧＵＩにおける前記複数のインタフェースそれぞれに対応する操作範囲内であることを検知したことによって、前記複数のインタフェースそれぞれに対応する制御データを選択し、
前記操作位置の変化に応じて、制御データの選択を変更して触覚を提示させる
請求項１に記載の情報処理システム。

【請求項3】

前記情報処理装置は、
前記複数のインタフェースそれぞれに対応する確定操作が前記操作部に対して行なわれるまで、前記操作位置に応じて選択される制御データに基づく触覚提示を継続する
請求項２に記載の情報処理システム。

【請求項4】

前記情報処理装置は、
前記操作部への操作状態を逐次取得し、
取得した前記操作部への操作状態に応じて、前記表示装置に表示中の前記インタフェースの画像を変化させる
請求項１から請求項３までのいずれか１項に記載の情報処理システム。

【請求項5】

音声を出力する音声出力装置を更に備え、
取得した前記操作部への操作状態に応じて、前記表示装置に表示中の前記インタフェースに対応する音声を出力する
請求項４に記載の情報処理システム。

【請求項6】

前記情報処理装置は、
前記表示装置に表示するＧＵＩを含む画面を提供するサーバ装置から、前記画面のデータを取得し、
取得した画面のデータから、前記画面に含まれる前記異なる機能に対応する複数のインタフェースの数を特定し、
特定した数に応じて、前記複数のパターンの制御データそれぞれを識別する識別データを、前記複数のインタフェースに対して付与し、
操作の対象であるインタフェースに付与されているパターンの制御データを前記触覚提示装置へ送信する
請求項１から請求項３までのいずれか１項に記載の情報処理システム。

【請求項7】

前記触覚提示装置は、操作者の操作に対して変位可能に設けられた変位部を前記操作部として有し、前記変位部の変位量に応じて、前記変位部への操作に対する力覚を生じさせ、表示される対象物の触覚を提示する
請求項１から請求項３までのいずれか１項に記載の情報処理システム。

【請求項8】

操作者の操作を受け付ける操作部に、前記操作に応じた力覚を生じさせて触覚を提示する触覚提示装置と、前記触覚提示装置での触覚提示と対応する画像を表示する表示装置と接続される情報処理装置であって、
前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶部に記憶し、
前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、
選択した制御データによって前記触覚提示装置から触覚を提示させる
情報処理装置。

【請求項9】

操作者の操作を受け付ける操作部に、前記操作に応じた力覚を生じさせて触覚を提示する触覚提示装置と、前記触覚提示装置での触覚提示と対応する画像を表示する表示装置と接続される情報処理装置が、
前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶部に記憶し、
前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、
選択した制御データによって前記触覚提示装置から触覚を提示させる
情報処理方法。

【請求項10】

操作者の操作を受け付ける操作部に、前記操作に応じた力覚を生じさせて触覚を提示する触覚提示装置と、前記前記触覚提示装置での触覚提示と対応する画像を表示する表示装置と接続される通信するコンピュータに、
前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶部に記憶し、
前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、
選択した制御データによって前記触覚提示装置から触覚を提示させる
処理を実行させるコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、触覚提示装置による触覚提示と、他の感覚提示との連動により、新たなユーザインタフェースを実現する情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラムに関する。

【背景技術】

【0002】

触覚を提示する技術（ハプティクス）が種々提案されている。発明者らは、磁気粘性流体に対する知見に基づいて、操作者が操作可能であって、対象物によって異なる感触を再現する触覚提示装置を提案した（特許文献１等）。特許文献２には、触覚提示装置による触覚提示と、視覚提示（画像出力）とを合わせて出力するシステムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許第６９０６２７５号

【特許文献2】特開２０２０－１３０６３２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

触覚提示装置は、特許文献２に示されているように、視覚や聴覚の出力と併せることで、知覚をよりリアルに認識させることが期待できる。これまで、スマートフォンやタブレット端末等のタッチパネル内蔵ディスプレイで出力される視覚情報や、スピーカから出力される聴覚情報は多様化されても、タッチパネル上で出力される触感は「ボタンを押下した」と認識できる範囲にとどまっていた。

【0005】

本発明は、触覚提示装置による触覚提示で新たなユーザインタフェースを実現する情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示の一実施形態の情報処理システムは、操作者の操作を受け付ける操作部に、前記操作に応じた力覚を生じさせて触覚を提示する触覚提示装置と、画像を表示する表示装置と、前記触覚提示装置における触覚、及び前記表示装置における画像を処理する情報処理装置とを含み、前記情報処理装置は、前記操作部に触覚を生じさせるための制御データを複数のパターンで記憶し、前記表示装置に表示するＧＵＩに含まれる異なる機能に対応する複数のインタフェースのうち、いずれのインタフェースへの操作であるかに応じて、前記複数のパターンの制御データから制御データを選択し、選択した制御データによって前記触覚提示装置から触覚を提示させる。

【0007】

情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラムでは、表示されるＧＵＩに含まれるＧＵＩ部品のいずれに対する操作であるかによって、触覚提示装置に提示される触覚を複数パターンで変更できる。

【発明の効果】

【0008】

本開示によれば、表示されるＧＵＩに含まれるＧＵＩ部品によって、異なる触覚が提示される。異なるＧＵＩ部品を触覚で区別可能とする新たなユーザインタフェースを実現できる。

【図面の簡単な説明】

【0009】

【図1】触覚提示システムの概要図である。

【図2】情報処理装置の構成を示すブロック図である。

【図3】触覚ＤＢの内容例を示す説明図である。

【図4】ＧＵＩ部品のセットの内容例を示す説明図である。

【図5】触覚提示装置の構成を示すブロック図である。

【図6】サーバ装置の内部構成を示すブロック図である。

【図7】触覚提示システムにおける提示処理の一例を示すフローチャートである。

【図8】触覚提示装置における処理手順の一例を示すフローチャートである。

【図9】触覚提示システムにおける触覚提示の例を示す概要図である。

【図10】触覚提示システムにおける触覚提示の例を示す概要図である。

【図11】触覚提示システムにおける提示処理の他の一例を示すフローチャートである。

【図12】変形例の触覚提示システムにおける提示処理の他の一例を示すフローチャートである。

【図13】変形例の触覚提示システムにおける提示処理の他の一例を示すフローチャートである。

【図14】触覚提示システムにおける触覚提示の他の例を示す概要図である。

【発明を実施するための形態】

【0010】

本開示をその実施の形態を示す図面を参照して具体的に説明する。以下の実施の形態では、触覚提示システムにおける触覚提示方法の実施について説明する。

【0011】

図１は、触覚提示システム１００の概要図である。触覚提示システム１００は、情報処理装置１と、触覚提示装置２と、サーバ装置３とを含む。情報処理装置１と、触覚提示装置２とは近距離無線通信で通信接続され、相互にデータを授受する。情報処理装置１と、サーバ装置３とは、所謂インターネットを含むネットワークＮを介して相互にデータを送受信する。ネットワークＮは、インターネットＮ１、キャリアネットワークＮ２、基地局ＢＳ、及びアクセスポイントＡＰを含む。

【0012】

情報処理装置１は、図１に示すようにスマートフォンを用いる。情報処理装置１は、スマートフォンに限られず、タブレット端末であってもよい。情報処理装置１は、ラップトップ型のＰＣ（Personal Computer）であってもよい。情報処理装置１がＰＣである場合、触覚提示装置２はマウスの一部（クリック部）であってもよい。情報処理装置１は、ゲーム専用機器であってもよい。情報処理装置１は、触覚提示装置２と一体化されたゲーム専用機器、すなわち、コントローラ部分に触覚提示装置２を含むゲーム機であってもよい。

【0013】

触覚提示装置２は、操作者が指を変位部２０２に沿えて持ちながら指を動かして操作できる装置である。触覚提示装置２は、操作者が指を動かすことで変位する変位部２０２の位置を読み取り、内蔵するＭＲＦ（Magneto-Rheological Fluid ）デバイス２４をその位置に応じて制御して操作者の変位部２０２への操作に対する反力（回転抵抗）により力覚を生じさせ、触覚を提示する装置である。触覚提示装置２の変位部２０２の態様は、図１に示すようなものに限られず、スティック状であってもよいし、カバーに覆われたクッション状のものであってもよい。触覚提示装置２は、ＭＲＦデバイス２４に代えて、モータやピエゾ素子などを採用し、操作者の操作に対し回転力や振動により力覚を生じさせるものでもよく、変位部２０２の他、振動や温感、冷感を提示するものと組み合わされてもよい。指輪状など、操作者の指に装着され、他の指で操作する構造でもよい。更に言えば、触覚提示装置２は、情報処理装置１に内蔵されるタッチパネルにてモータやピエゾ素子などによって振動を発生させるものや、超音波振動又は静電気力によって摩擦を変調させる技術を使用したものであってもよい。

【0014】

触覚提示システム１００では、触覚提示装置２は、情報処理装置１と連携し、情報処理装置１又は他の表示装置やスピーカ等を用いて画像及び音声を出力させつつ、制御により多様な触覚を触覚提示装置２で出力させる。例えば、情報処理装置１は、図１に示すような複数のボタン４０１，４０２を含む画面をサーバ装置３で記憶している配信データ３１１から取得して表示部１４に表示した場合、ボタン４０１，４０２それぞれに対応する異なる触覚を触覚提示装置２から出力させる。

【0015】

図２は、情報処理装置１の構成を示すブロック図である。情報処理装置１は、処理部１０、記憶部１１、第１通信部１２、第２通信部１３、表示部１４、音声出力部１５及び操作部１６を備える。処理部１０は、ＣＰＵ（Central Processing Unit ）及び／又はＧＰＵ（Graphics Processing Unit）を用いたプロセッサである。処理部１０は、記憶部１１に記憶されている情報処理プログラムＰ１に基づき、触覚提示装置２からの触覚提示処理と、視覚情報の表示及び聴覚情報の出力を実行する。

【0016】

記憶部１１は、フラッシュメモリ、ＳＳＤ等の不揮発性メモリを用いる。記憶部１１は、情報処理プログラムＰ１と、他のアプリケーションプログラムＰ２２と、後述の触覚データベース（ＤＢ：Data Base ）１１０と、その他、処理部１０が参照するデータとを記憶する。情報処理プログラムＰ１は、記憶媒体８に記憶されている情報処理プログラムＰ８を処理部１０が読み出して記憶部１１に複製したものであってもよい。情報処理プログラムＰ１は、第１通信部１２を介してサーバ装置３又は他のプログラムサーバ装置からダウンロードして実行可能に記憶したものであってもよい。アプリケーションプログラムＰ２２は、情報処理装置１上で動作可能な多様なアプリケーションである。

【0017】

記憶部１１は、複数のアイコンに対応する複数の触覚パターンについて触覚ＤＢ１１０を記憶する。触覚ＤＢ１１０は、触覚パターンを識別するパターンＩＤに対応付けて、触覚提示装置２における変位部２０２の変位データ（角度）毎に、その変位において出力すべき触覚データを格納している。触覚ＤＢ１１０に含まれる触覚データは、逐次、サーバ装置３から画面データを取得する都度、サーバ装置３から共に取得するものであってもよいし、予め記憶されているものであってもよい。

【0018】

記憶部１１は、表示部１４に表示させる視覚データ（画像、動画、テキストデータ）を記憶する。視覚データには、単に表示させる画像や文字のみならず、ウィンドウ、アイコン、ボタン等、操作部１６での操作の対象であるＧＵＩ（Graphic User Interface）を構成する画像データやテキストデータが含まれる。それらのＧＵＩのＧＵＩ部品として表示され得る視覚データには、画像ＩＤが割り当てられている。

【0019】

記憶部１１は、音声出力部１５から出力させる聴覚データ（音声、効果音）を記憶する。聴覚データは、上述のＧＵＩ部品同様に、アイコンやボタン等の選択に応じて出力される効果音が含まれる。それらのＧＵＩの一部となる聴覚データには、視覚データと同様に、音声ＩＤが割り当てられている。

【0020】

記憶部１１は、上述した触覚データ、視覚データ及び聴覚データを、１つのＧＵＩ部品（例えばボタン）を構成する要素としてセットで記憶してもよい。例えば、特定のアイコンについて、視覚データの画像ＩＤ、触覚データのパターンＩＤ、及び聴覚データの音声ＩＤが、セットを識別する識別データに対応付けられて記憶される。処理部１０は、表示する画面に特定のアイコンが含まれる場合、その特定のアイコンを識別する識別データに対応付けられた画像ＩＤのアイコン画像を表示する。更に処理部１０は、触覚提示装置２で変位部２０２に対する操作が行なわれたことに応じて同一のセットの触覚データによって触覚を提示させ、変位部２０２の変位（角度）に応じて同一のセットの効果音を音声出力部１５から出力させる。

【0021】

第１通信部１２は、インターネット又はキャリアネットワークを含むネットワークＮを介したサーバ装置３との通信を実現する。第１通信部１２は具体的には、キャリアネットワークと接続する無線通信デバイスであってもよいし、ＷｉＦｉ用の無線通信デバイスであってもよい。処理部１０は、第１通信部１２によってサーバ装置３との間でデータを送受信できる。

【0022】

第２通信部１３は、近距離無線通信、例えばBluetooth（登録商標）の通信モジュールである。処理部１０は、第２通信部１３によって触覚提示装置２との間でデータを送受信できる。

【0023】

表示部１４は、液晶ディスプレイ、有機ＥＬ（Electro Luminescence）ディスプレイ等のディスプレイである。表示部１４は例えば、タッチパネル内蔵型ディスプレイである。処理部１０は表示部１４に、各種アプリケーションプログラムＰ２２の操作画面やコンテンツを表示する。

【0024】

音声出力部１５は、スピーカ等を含む。処理部１０は、各種アプリケーションプログラムＰ２２のコンテンツとしての音楽や、操作画面のＢＧＭや効果音を出力する。

【0025】

操作部１６は、処理部１０との間で入出力が可能な物理的なＵＩである。操作部１６は例えば、表示部１４内蔵のタッチパネルである。操作部１６は、無線により接続されるマウスであってもよい。操作部１６は、ゲームコントローラであってもよい。操作部１６は、物理ボタンを含んでもよい。操作部１６は、情報処理装置１の傾き、触覚提示装置２に設けられる加速度センサやジャイロセンサを含んでもよい。操作部１６は、音声入力部を用いてもよい。

【0026】

図３は、触覚ＤＢ１１０の内容例を示す説明図である。触覚ＤＢ１１０は、パターンＩＤに対応付けて、変位部２０２の変位量（角度）毎の触覚提示装置２のＭＲＦデバイス２４への電流の電流値を触覚データとして格納している。電流値に限らず、電圧値等であってもよい。図３には、触覚データ（パターンＩＤ：T001）と、触覚データ（パターンＩＤ：T002）とが例示されている。触覚データは、触覚データで表現される触覚がどのような文字表現に相当するものなのかを、括弧書きに示すように検索用に含んでもよい。図３の例では、パターンＩＤ：T001の触覚データは、「ぷにぷに」、「ぷるぷる」、「ゼリー」という文字表現に相当するものであることが読み取り可能である。同様にしてパターンＩＤ：T002の触覚データは、「とげとげ」、「チクチク」、「とがり」という文字表現に相当する。

【0027】

触覚ＤＢ１１０は、図３に示すように、変位量全てに対して電流値がゼロ又は微小である触覚データ（ゼロテーブルともいう）を含む（パターンＩＤ：T999）。ゼロテーブルは、後述の処理で情報処理装置１が使用する際に逐次作成されてもよい。ゼロテーブルは、触覚提示装置２において触覚の提示を中止する（感触なし）ために用いられる。

【0028】

触覚ＤＢ１１０に格納される触覚データは、上述したように、触覚提示装置２のＭＲＦデバイス２４に代替して、モータやピエゾ素子等による振動を採用した場合、ＧＵＩ部品のどこに触れているかという操作内容に対応付けた電圧値又は電流値等の制御データであってもよい。この場合、ＧＵＩ部品を操作対象としている時間の長さを操作量とし、操作量に応じた制御データが、触覚データとして格納されてもよい。タッチパネル内にモータ、ピエゾ素子を用いて振動や、超音波振動又は静電気力の変調によって触覚を提示する場合も同様に、ＧＵＩ部品のどこに触れているか、また触れている期間の長さを操作内容や操作量として、操作内容や操作量に対応する電圧値、電流値、変調信号の位相などが触覚データとして格納されてもよい。

【0029】

図４は、ＧＵＩ部品のセットの内容例を示す説明図である。記憶部１１は、図４に示すようなセットテーブル１１１を記憶してもよい。図４に示すセットテーブルの例では、「ぷにぷにデザイン」のボタン（p-button）は、図３に示したパターンＩＤ：T001の触覚データと、「ぷにぷにデザイン」のボタン画像データ（puni-button ）の画像ＩＤとが対応付けられていることが示されている。ボタン画像データは、例えばアニメーション画像（動画）である。静止画像であってもよいし、複数のフレーム画像に分けられており、変位量毎に設定されたフレーム画像の集合であってもよい。画像ＩＤではなく、ボタン画像データが直接的にセットテーブル１１１に含まれてもよい。図４の例では更に、「ぷにぷにデザイン」のボタン（p-button）は、「ぷにぷにデザイン」に対応する「ぷに」と感じさせる効果音データ（例えば、「ポヨン」「プルン」と聴こえるような効果音）の音声ＩＤ（puru-audio）が対応付けられていることが示されている。

【0030】

図４では、同様に、「とげとげデザイン」のボタン（t-button）は、図３に示したパターンＩＤ：T002の「チクチク」の触覚データと、「とげとげデザイン」の画像データの画像ＩＤ（toge-button ）とが対応付けられていることが示されている。また、図４の例では、「とげとげデザイン」のボタン（t-button）は、「とげとげデザイン」に対応する「チクチク」と感じさせる効果音データ（例えば、金属等の固体の衝突音や、短いパルス音）の聴覚ＩＤ（toge-audio）が対応付けられていることが示されている。

【0031】

図５は、触覚提示装置２の構成を示すブロック図である。触覚提示装置２は、図１に示したように、扁平な有底円筒状の把持体２００に周方向に一部沿うような湾曲部を有する帯状平板の変位部２０２を設けて構成される。変位部２０２は、それ自体が撓むことが可能な素材であるが、剛性の高い素材を採用し、把持体２００と支軸を介して回動可能に支持されていてもよい。変位部２０２の先端の外側の面には、布テープ状の結束具２０３が設けられている。変位部２０２の先端の内側面は、把持体２００内部に収容されているＭＲＦデバイス２４のロータの回転軸と連結するリンク機構２０４が設けられている。変位部２０２には、その表面にシリコンラバーや毛並みを持つもの等、多様な感触を加えた素材等が取り付けられていてもよい。

【0032】

操作者は図１に示したように、把持体２００を例えば親指と中指とで把持しつつ、人差し指等の指を変位部２０２に沿わせて結束具２０３に人差し指を差し込んで使用する。操作者は人差し指を押し込むように変位部２０２を動かすことができ、また、人差し指を伸ばして把持体２００から変位部２０２を遠ざけるように動かすことができる。

【0033】

触覚提示装置２は、図１に示すような把持体２００と、制御部２０、記憶部２１、通信部２２、電源部２３、ＭＲＦデバイス２４、センサ２５を備える。把持体２００は、ＭＲＦデバイス２４を内蔵する。制御部２０、記憶部２１、通信部２２、及び電源部２３は把持体２００と一体に設けられてもよいし、把持体２００と無線又は有線により接続される別体に設けられてもよい。

【0034】

制御部２０は、ＣＰＵ、ＭＰＵ（Micro-Processing Unit ）等のプロセッサ、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等のメモリを含む。制御部２０は、例えばマイクロコントローラである。制御部２０は、内蔵ＲＯＭに記憶されている制御プログラムＰ２に基づいて各構成部を制御し、触覚提示を実現する。

【0035】

記憶部２１は、制御部２０に対する補助記憶メモリであり、ＭＲＦデバイス２４の制御データ（触覚データ）を書き換え可能に記憶する。

【0036】

通信部２２は、近距離無線通信、例えばBluetooth（登録商標）の通信モジュールである。制御部２０は、通信部２２によって情報処理装置１との間でデータを送受信できる。

【0037】

制御部２０は、電源部２３、ＭＲＦデバイス２４及びセンサ２５とＩ／Ｏを介して接続されており、相互に信号を授受する。

【0038】

電源部２３は、充電可能なバッテリを含む。電源部２３は、ＯＮ状態になると各構成部及びＭＲＦデバイス２４へ電力を供給する。

【0039】

ＭＲＦデバイス２４は、円板状のロータを、隙間を開けて挟むようにして設けられたヨークを有し、ヨークに設けられたコイルに制御電流を流して磁界を発生させ、隙間に封入されている磁気粘性流体の粘度（ずり応力）を制御してロータの回転抵抗を与える。制御部２０が、ＭＲＦデバイス２４への制御電流の大きさを制御すると即座に回転抵抗が変更される。

【0040】

センサ２５は、変位部２０２の位置（角度）を測定して制御部２０へ出力する。センサ２５は変位部２０２の変位を、角度として測定して出力する。センサ２５は、ジャイロセンサ、加速度センサ等の複数のセンサから構成されてもよい。

【0041】

図５に示すように構成される触覚提示装置２では、変位部２０２が操作者によって操作されると、変位部２０２の変位がリンク機構２０４を介してＭＲＦデバイス２４のロータの回転軸への回転方向に伝達される。回転軸は、ＭＲＦデバイス２４が動作していない場合、即ち制御電流がゼロである間は、自由に回転するため、変位部２０２は抵抗なく変動する。一方で、ＭＲＦデバイス２４が動作し、制御電流がゼロでない場合には、ＭＲＦデバイス２４へ流れる電流の大きさに応じてＭＲＦデバイス２４内部の磁気粘性流体の粘度（ずり応力）が変更される。制御部２０が、ＭＲＦデバイス２４への電流の大きさを連続的に変更したり、電流値を所定の周波数で振動させたりすることで、変位部２０２に対する抵抗の力やその出現方法を変更できる。

【0042】

このようにして触覚提示装置２は、変位部２０２の押し込む量に応じて抵抗（電流値）を変動させてプルンとした触覚を提示したり、押し込む量が大きくなるにつれて抵抗を大きくしてギュッとした固さの触覚を提示したり、抵抗の大小の繰り返しや矩形波的なＯＮ・ＯＦＦの繰り返しによってチクチクとした触覚を提示したりすることができる。

【0043】

図６は、サーバ装置３の内部構成を示すブロック図である。サーバ装置３は、情報処理装置１との間でデータの送受信が可能なＷｅｂサーバである。以下の説明において、サーバ装置３は１台のＷｅｂサーバとして説明するが、複数台のサーバコンピュータをネットワークで通信接続して分散処理させる態様であってもよい。

【0044】

サーバ装置３は、処理部３０、記憶部３１、及び通信部３２を備える。処理部３０は、ＣＰＵ及び／又はＧＰＵを用いたプロセッサである。処理部３０は、記憶部３１に記憶されているサーバプログラムＰ３に基づき、Ｗｅｂサーバとしての処理を実行する。

【0045】

記憶部３１は、例えばハードディスク、フラッシュメモリ、ＳＳＤ（Solid State Drive ）等の不揮発性メモリを用いる。記憶部３１は、処理部３０が参照するデータを記憶する。記憶部３１は、サーバプログラムＰ３を記憶する。サーバプログラムＰ３は、記憶媒体９に記憶されているサーバプログラムＰ９を処理部３０が読み出して記憶部３１に複製したものであってもよい。サーバプログラムＰ３は、通信部３２を介して他のプログラムサーバ装置から処理部３０がダウンロードして記憶したものであってもよい。

【0046】

記憶部３１は、複数の情報処理装置１へ配信する配信データ３１１を記憶する。配信データ３１１は、例えばＷｅｂページ、Ｗｅｂアプリケーションを含む。Ｗｅｂページ又はＷｅｂアプリケーションの画面は、ＧＵＩを含む。配信データ３１１はそれらのＧＵＩの設定、ＧＵＩの部品の画像、音声を含む。配信データ３１１は、Ｗｅｂページ又はＷｅｂアプリケーションの画面内のオブジェクトに対応する触覚データそのものを含む。配信データ３１１は、触覚データを識別するパターンＩＤのみを含んでもよい。

【0047】

通信部３２は、ネットワークＮを介した情報処理装置１との通信を実現する。通信部３２は具体的には、ネットワークカードである。通信部３２は、キャリアネットワークＮ２と接続する無線通信モジュールであってもよいし、ＷｉＦｉ用の無線通信モジュールであってもよい。処理部３０は、通信部３２によって情報処理装置１との間でデータを送受信できる。

【0048】

このように構成される触覚提示システム１００における処理について、以下に説明する。図７は、触覚提示システム１００における提示処理の一例を示すフローチャートである。操作者が情報処理プログラムＰ１を起動させ、触覚提示装置２の電源をＯＮとすると、情報処理装置１の処理部１０が、第２通信部１３により触覚提示装置２と通信接続を確立し、以下の処理を開始する。

【0049】

処理部１０は、操作者の操作に応じて、サーバ装置３から提示される画面のデータをサーバ装置３へ要求する（ステップＳ１０１）。ステップＳ１０１において処理部１０は、サーバ装置３を運営する事業者から提供されている特定のアプリケーションの起動を受け付け、その特定のアプリケーション（アプリＸ）のホーム画面（ポータル画面）を表示させる。アプリＸは、ゲームでもよいし、メッセージアプリケーションでもよいし、検索アプリケーションでもよいし、地図アプリケーションでもよい。アプリＸのホーム画面（ポータル画面）は、アプリＸのアプリケーションプログラムＰ２２と共に記憶されている部品に加え、サーバ装置３から逐次、Ｗｅｂベースで取得するコンテンツ（お知らせ、通知、等）を含むので、処理部１０は、そのデータをサーバ装置３へ要求する。処理部１０は、ホーム画面に限らず、アプリＸの操作に応じて画面を遷移させる都度、ステップＳ１０１の処理を実行する。

【0050】

サーバ装置３は、情報処理装置１からの要求を受信し（ステップＳ３０１）、情報処理装置１で表示される画面に含まれるＧＵＩ部品のデータを配信データ３１１から読み出す（ステップＳ３０２）。ステップＳ３０２においてサーバ装置３の処理部３０は、要求されている画面が「ぷにぷに」のボタンと「とげとげ」のボタンとをいずれも含む場合、セットの識別データ「p-button」に対応付けられているデータ及び「t-button」に対応付けられているデータの両方を読み出す。具体的には処理部３０は、「p-button」の触覚データ（パターンＩＤ：T001）、視覚データ（画像ＩＤ：puni-button）、及び聴覚データ（音声ＩＤ：puru-audio）と、「t-button」の触覚データ（パターンＩＤ：T002）、視覚データ（画像ＩＤ：toge-button）、及び聴覚データ（音声ＩＤ：toge-audio）と、を配信データ３１１から読み出す。

【0051】

サーバ装置３の処理部３０は、読み出したＧＵＩ部品のデータを含む画面のデータを、要求元の情報処理装置１へ通信部３２から送信する（ステップＳ３０３）。

【0052】

情報処理装置１は、第２通信部１３から画面のデータを受信し（ステップＳ１０２）、受信した画面のデータを記憶する（ステップＳ１０３）。ステップＳ１０３において処理部１０は、受信したデータのうち、画面に含まれるＧＵＩ部品の触覚データを触覚ＤＢ１１０に追記する。受信したデータに、２種類のＧＵＩ部品（ボタン）が含まれている場合、処理部１０は、２種類の触覚データを触覚ＤＢ１１０に記憶する。受信した触覚データが元々触覚ＤＢ１１０に記憶されていた触覚データである場合、処理部１０は、この処理をスキップしてもよい。

【0053】

処理部１０は、画面を表示部１４に表示する（ステップＳ１０４）。表示される画面は操作可能なＧＵＩであって、ボタン、アイコン等の選択可能なＧＵＩ部品を含む。処理部１０は、操作部１６により、画面に含まれるＧＵＩ部品のうちのいずれかに対する操作であるかを決定する（ステップＳ１０５）。ステップＳ１０５において処理部１０は、複数のオブジェクトのいずれに対する操作であるかについて、本実施形態では、画面上に表示される所謂ポインタ又はカーソル等と呼ばれるオブジェクトの操作位置が、いずれのＧＵＩ部品の操作範囲内にあるかによって決定する。情報処理装置１の処理部１０は、ステップＳ１０５においてタッチパネル上で操作者になぞられることでオブジェクトを移動させ、オブジェクトの操作位置と各ＧＵＩ部品に対応する操作範囲との関係からＧＵＩ部品を決定する。処理部１０は、タップで選択を受け付けてもよい。

【0054】

処理部１０は、決定されたＧＵＩ部品の識別データに対応する触覚データ、視覚データ及び聴覚データを記憶したデータから取得する（ステップＳ１０６）。処理部１０は、取得したデータのうち、触覚データを触覚提示装置２へ送信する（ステップＳ１０７）。触覚提示装置２では、送信された触覚データに基づき、後述の図８に示す処理手順を実行する。

【0055】

触覚提示装置２にて変位部２０２に対する操作が行なわれると、処理部１０は、触覚提示装置２から送信される変位量を操作状態として受信する（ステップＳ１０８）。処理部１０は、受信した変位量に対応する画像及び音声を、ステップＳ１０６で取得した視覚データ及び聴覚データに基づき、表示部１４に画像を表示し、音声出力部１５から音声を出力させる（ステップＳ１０９）。ステップＳ１０９において処理部１０は、後述の操作完了と判断される変位量に至る前の変位量にて、puni-buttonあるいはtoge-buttonに対応するアニメーション画像の再生を開始し、音声を出力してもよい。変位部２０２又はＧＵＩ部品への操作期間の長さを操作状態として受信してもよい。

【0056】

処理部１０は、受信した変位量に基づきＧＵＩ部品に対する操作が確定したか否かを判断する（ステップＳ１１０）。ステップＳ１１０において処理部１０は、所定の変位量に到達したか否かを判断してもよいし、所定の変位量に到達し、且つ、変位量の変動スピードが所定速度以上であるか否かで判断してもよい。ＭＲＦデバイス２４を用いた触覚提示装置２であれば、変位量が９０°に達成した場合には操作が確定したと判断できる。処理部１０は、所定の変位量へ２回到達したか否か（ダブルクリックに相当）を判断してもよい。

【0057】

受信した変位量に基づきＧＵＩ部品に対する操作が確定していないと判断された場合（Ｓ１１０：ＮＯ）、処理部１０は、処理をステップＳ１０８へ戻す。触覚提示装置２から変位量が送信される都度、情報処理装置１は、それに対応する画像及び音声を出力する。処理部１０は、操作が確定していない間に、操作位置が移動して、即ちポインタ又はカーソル等の操作位置が移動して、操作対象のＧＵＩ部品が変わる場合、キャンセル操作であるとして処理をステップＳ１０５へ戻してもよい。

【0058】

受信した変位量に基づきＧＵＩ部品に対する操作が確定したと判断された場合（Ｓ１１０：ＹＥＳ）、処理部１０は当該ＧＵＩ部品に対応付けられた所定の処理（機能）を実行する（ステップＳ１１１）。ステップＳ１１１では例えば、処理部１０は、puni-buttonが選択された場合、ぷるぷるのキャラクタを選択した場合の処理を実行し、toge-buttonが選択された場合、トゲトゲのキャラクタを選択した場合の処理を実行する。所定の処理を実行する前に処理部１０は操作が確定した特定のpuni-buttonあるいはtoge-buttonに対応するアニメーション画像の再生を開始し、音声を出力してもよい。処理部１０は、ゼロテーブルの触覚データを送信し（ステップＳ１１２）、処理を終了する。ＧＵＩ部品への操作の確定により、次の画面（Ｗｅｂページ）への遷移が実行されると、処理部１０は図７に示した処理手順をステップＳ１０１から再度開始する。

【0059】

図８は、触覚提示装置２における処理手順の一例を示すフローチャートである。触覚提示装置２の制御部２０は、起動して情報処理装置１と通信接続が確立されると、以下の処理を実行する。

【0060】

触覚提示装置２は、通信接続中の情報処理装置１から触覚データを受信すると（ステップＳ２０１）、記憶部２１に記憶する（ステップＳ２０２）。ステップＳ２０１で受信する触覚データは、上述した変位量毎の電流値の一覧テーブルであり、ゼロテーブルであってもよい。

【0061】

触覚提示装置２の制御部２０は、センサ２５から出力される変位部２０２の変位量（角度）に対応する信号をサンプリングする（ステップＳ２０３）。制御部２０は、サンプリングにより得られる変位量を、情報処理装置１へ送信する（ステップＳ２０４）。変位量（角度）は、上端からの相対的な変位量でもよいし、センサ２５によって検出された絶対位置でもよい。

【0062】

制御部２０は、サンプリングにより得られる変位量に対応する電流値を、記憶部２１に記憶した触覚データから参照し（ステップＳ２０５）、参照した電流をＭＲＦデバイス２４へ出力する（ステップＳ２０６）。

【0063】

制御部２０は、新たに他の触覚データ（ゼロテーブルを含む）を受信したか否かを判断し（ステップＳ２０７）、受信していないと判断された場合（Ｓ２０７：ＮＯ）、処理をステップＳ２０３へ戻す。

【0064】

制御部２０は、新たに他の触覚データを受信したと判断した場合（Ｓ２０７：ＹＥＳ）、処理をステップＳ２０２へ戻して他の触覚データを記憶部２１に記憶し（Ｓ２０２）、ステップＳ２０３－Ｓ２０６の処理を繰り返し実行する。

【0065】

上述した図７の情報処理装置１の処理手順と、図８の触覚提示装置２における処理手順とにより、画面に含まれるボタン、アイコン等のＧＵＩ部品に対し、異なる触覚を提示し、新たなＵＩとして機能する。

【0066】

図９及び図１０は、触覚提示システム１００における触覚提示の例を示す概要図である。図９は、表示部１４に表示される画面例を示す。図９及び図１０に示す画面１４１は、触覚提示装置２との連携によって実現されるゲームの選択画面である。画面１４１は、ぷるぷるのゼリーやスライムのような身体を持つキャラクタを選択するためのボタン４０１と、トゲトゲの体表を持つキャラクタを選択するためのボタン４０２とを含む。画面１４１には、操作者の操作位置を示すカーソルアイコン４０３が表示されている。図９は、ボタン４０１を選択した場合のボタン４０１の画像の変化及び音声の出力タイミングを示し、図１０は、ボタン４０２を選択した場合のボタン４０２の画像の変化及び音声の出力タイミングを示す。

【0067】

図９に示す例では、カーソルアイコン４０３の操作によって選択されたボタン４０１について、触覚提示装置２の変位部２０２における変位量に対応してアイコン画像が変化し、音声が出力される工程を示す。図９に示すように、変位部２０２の押し込み量に応じて、アイコン画像が拡縮するように、揺れるように変化する。変位量（角度）が７５［°］で、操作完了と判断される変位量に至っているときには、大きく潰れたように変化している。触覚提示装置２では、変位部２０２の押し込み量に応じて、ふんわりとしたゼリーのような触覚を提示する。押し込むほど弾力が強くなってもよい。

【0068】

図１０に示す例では、カーソルアイコン４０３の操作によって選択されたボタン４０２について、触覚提示装置２の変位部２０２における変位量に対応してアイコン画像が変化し、音声が出力される工程を示す。図１０に示すように、変位部２０２の押し込み量に応じて、アイコン画像に含まれるトゲの大きさが変化する。変位量（角度）が２５［°］であるときには一部のトゲは大きくなり、他の一部のトゲは小さくなっている。変位量（角度）が５０［°］であるときには全てのトゲが大きくなっている。変位量（角度）が７５［°］で、操作完了と判断される変位量に至っているときにはトゲが消えている。触覚提示装置２では、変位部２０２の押し込み量に応じて、チクチクとしたカクカクとした凹凸の激しい物体に対する触覚を提示する。

【0069】

図９及び図１０では、触覚データのみならず、これに応じてＧＵＩ部品のボタン４０１及びボタン４０２のいずれも、アイコン画像が変化する構成とした。なお本開示の触覚提示システム１００では、ＧＵＩ部品によって触覚提示装置２にて提示される触覚が変わるところを必須とするが、アイコン画像及び音声の変化・出力は必須ではない。また、図９及び図１０に示したボタン４０１及びボタン４０２のいずれも、同一の角丸の矩形状のボタン画像であって、ＧＵＩ部品（機能）によって触覚のみが異なってもよい。ボタン４０１が「はい」の選択肢、ボタン４０２が「いいえ」の選択肢であって、「はい」を操作対象としている間、触覚提示装置２から「ぷにぷに」とした柔らかい触覚（肯定的だと感じる触覚）が提示され、「いいえ」を操作対象としている間、触覚提示装置２から「とげとげ」としたチクチクした触覚（否定的だと感じる触覚）が提示されてもよい。柔らかい触覚は、ＭＲＦデバイス２４であれば電流がなだらかに変化すると再現され、チクチクした触覚は、電流が急激に上下動（高周波）すると再現される。

【0070】

また、上述したように、情報処理装置１は、サーバ装置３から触覚データを逐次受信せず、予め触覚ＤＢ１１０に記憶されている触覚データの指定を受けて触覚提示装置２へ送信する処理を実行してもよい。図１１は、触覚提示システム１００における提示処理の他の一例を示すフローチャートである。図１１に示す処理手順のうち、図７に示した処理手順と共通する手順には同一のステップ番号を付して詳細な説明を省略する。

【0071】

図１１に示す処理手順では、サーバ装置３は、受信した要求に応じて、情報処理装置１で表示される画面に含まれるＧＵＩ部品のデータのうち、触覚データについてはパターンＩＤを配信データ３１１から読み出す（ステップＳ３２２）。処理部３０は、視覚データ及び聴覚データについても画像ＩＤ及び音声ＩＤを読み出してもよい。

【0072】

サーバ装置３の処理部３０は、触覚データのパターンＩＤを含む画面のデータを、情報処理装置１へ通信部３２から送信する（ステップＳ３２３）。

【0073】

情報処理装置１では、第２通信部１３からパターンＩＤを含む画面のデータを受信し（ステップＳ１２２）、受信したパターンＩＤを含む画面のデータを記憶する（ステップＳ１２３）。

【0074】

ＧＵＩ部品の選択を受け付けると（Ｓ１０５）、処理部１０は、ステップＳ１０６では、選択されたＧＵＩ部品の触覚データのパターンＩＤを用いて、記憶部１１に記憶されている触覚ＤＢ１１０から触覚データを取得する（ステップＳ１２６）。ステップＳ１２６において処理部１０は、ステップＳ１２３で記憶した視覚データ及び聴覚データを取得する。記憶部１１に予め、視覚データ及び聴覚データも記憶している場合には、処理部１０は、画像ＩＤ及び音声ＩＤに基づき、記憶部１１の視覚データ及び聴覚データを読み出して取得してもよい。

【0075】

図７及び図１１に示した処理手順では、処理部１０は、アプリＸの画面が変わる都度、画面に含まれるＷｅｂベースのコンテンツをサーバ装置３へ要求した。しかしながら、画面を表示部１４に表示するためのＧＵＩのデータについても全て、記憶部１１に記憶されており、サーバ装置３からその都度配信データを取得しない構成としてもよい。

【0076】

触覚提示装置２に、三軸の加速度センサを付加して、触覚データを更に複雑化させてもよい。例えば、触覚データを、変位量毎の電流値を、触覚提示装置２の水平方向の動き別に記憶しておき、操作者が、変位部２０２の押し込みと同時に、触覚提示装置２を略水平方向に動かすと触覚がそれに応じて変化するように制御されてもよい。

【0077】

（変形例）
変形例では、情報処理装置１が、触覚データが予め対応付けられていないＧＵＩの一般的アプリケーションプログラムＰ２２に基づく画面を表示する場合の処理について説明する。

【0078】

図１２及び図１３は、変形例の触覚提示システム１００における提示処理の他の一例を示すフローチャートである。図１２及び図１３に示す処理手順のうち、図７に示した処理手順と共通する手順には同一のステップ番号を付して詳細な説明を省略する。

【0079】

処理部１０は、操作者の操作に応じて、サーバ装置３から提示される画面のデータをサーバ装置３へ要求する（Ｓ１０１）。変形例では、ステップＳ１０１において処理部１０は、不特定のＷｅｂページをサーバ装置３へ要求する。

【0080】

サーバ装置３は、情報処理装置１からの要求を受信し（Ｓ３０１）、処理部３０は、触覚データを含まないがＧＵＩ部品の視覚データを少なくとも含む画面のデータを配信データ３１１から読み出す（ステップＳ３３２）。処理部３０は、読み出したＧＵＩ部品のデータ（視覚データ）を含む画面のデータを、要求元の情報処理装置１へ通信部３２から送信する（ステップＳ３３３）。

【0081】

情報処理装置１は、第２通信部１３から画面のデータを受信し（ステップＳ１０２）、受信した画面のデータを一時的に記憶する（ステップＳ１３３）。処理部１０は、記憶した画面のデータから、ＧＵＩ部品の有無、数を特定し（ステップＳ１３４）、画面に含まれるＧＵＩ部品に、触覚データのパターンＩＤを付与する（ステップＳ１３５）。

【0082】

処理部１０は、受信したデータに基づいて画面を表示し（Ｓ１０４）、操作部１６により、画面に含まれるＧＵＩ部品のうちのいずれかの選択を受け付ける（Ｓ１０５）。処理部１０は、選択されたＧＵＩ部品に対して付与したパターンＩＤの触覚データ、選択されたＧＵＩ部品の視覚データを取得する（ステップＳ１３６）。処理部１０は、選択されたＧＵＩ部品に対応する触覚データを触覚提示装置２へ送信する（Ｓ１０７）。以後の処理は、図７に示した処理手順と同様である。

【0083】

このように、特定のアプリＸに基づき表示部１４に表示されるＧＵＩのみならず、上述のサーバ装置３以外から提供されるアプリケーションプログラムＰ２２であっても、情報処理プログラムＰ１に基づいて触覚データを割り当ててインタフェースを区別させることも可能である。

【0084】

スマートフォンやタブレット端末のタッチパネルにユーザが触れた場合、その触れた箇所に存在するボタンやアイコン等タップ可能なインタフェースの名称（機能名）を自動的に読み上げるプログラムが従前から存在している。これにより視力の弱い人物はスマートフォンやタブレット端末を使用可能である。変形例で示した触覚提示システム１００により更に、汎用的なアプリケーションプログラムＰ２２で表示される画面内の選択可能なインタフェースについても触覚を変え、視力の弱い人物がインタフェースを適切に選択するように使用することも可能となる。

【0085】

触覚提示装置２は、上述したように、表示部１４に内蔵されるタッチパネルである操作部１６に対して触覚を提示するものを利用してもよい。例えば触覚提示装置２は、処理部１０から与えられる触覚データに基づき、操作部１６（タッチパネル）を振動させるか、摩擦抵抗を変えて凹凸の触覚を提示させる。図１４は、触覚提示システム１００における触覚提示の他の例を示す概要図である。図１４は、図９同様に、表示部１４に表示される画面１４１の例を示し、画面１４１は、ボタン４０１及びボタン４０２と、操作者の操作位置を示すカーソルアイコン４０３とを含む。

【0086】

図１４に示す例では、カーソルアイコン４０３の位置がボタン４０１とボタン４０２とのいずれの操作範囲に重複するかによって、いずれのボタンに対する操作なのかを処理部１０が決定し、触覚データを取得し、操作部１６を振動させる触覚提示装置２へ出力する。図１４では、図１４Ａから図１４Ｄに向けて、カーソルアイコン４０３の移動を示す。図１４Ｂでは、カーソルアイコン４０３はボタン４０１の操作範囲内に位置している。カーソルアイコン４０３がボタン４０１の操作範囲内にある場合、処理部１０は、ボタン４０１用の振動（例えば振幅が緩やかに変動する）を生じさせる。操作者の指が、ボタン４０１の操作範囲内の位置でタッチパネルに触れている間のみ振動が生じてもよいし、触れ始めてから所定時間経過すると振動が停止するように制御されてもよい。図１４Ａ及び図１４Ｃでは、カーソルアイコン４０３はボタン４０１の操作範囲外に位置しているので、例えばゼロテーブルが触覚提示装置２へ出力されており、振動は生じない。図１４Ｄでは、カーソルアイコン４０３はボタン４０２の操作範囲内に位置している。カーソルアイコン４０３がボタン４０２の操作範囲内にある場合、処理部１０は、ボタン４０２用の振動（例えばパルス的な振動）を生じさせる。

【0087】

このような触覚提示装置２内蔵の情報処理装置１の制御により、操作者は、ボタン４０１及びボタン４０２を含むＧＵＩを表示している表示部１４の上をなぞると、視認せずとも、いずれのボタンを操作しているかを触覚によって認識できる。操作が確定したと判断されるような操作、例えばダブルタップ、又はＭＲＦデバイス２４を持つ本開示の触覚提示装置２のような別装置でのクリック操作がなされるまでは、ボタン４０１及びボタン４０２に触れるような操作をしてもよい。タッチパネルに圧力を検出する機能が備わっている場合、所定値以上の圧力の加わるような操作があったときに、処理部１０が操作が確定したと判断できる。この例では、操作が確定したと判断するまでは圧力に応じて触覚を提示する。

【0088】

なお、上記の実施形態では、それぞれ異なる機能を有するボタン４０１及びボタン４０２が同一画面内に同時に表示されているが、それぞれ別の画面に表示されている場合であっても、情報処理装置１が異なる触覚を提示させる制御を行なってもよい。

【0089】

上述のように開示された実施の形態は全ての点で例示であって、制限的なものではない。本発明の範囲は、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれる。

【符号の説明】

【0090】

１００ 触覚提示システム
１ 情報処理装置
１０ 処理部
１１ 記憶部
１４ 表示部
１４１ 画面
４０１，４０２ ボタン（ＧＵＩ部品）
１５ 音声出力部
Ｐ１ 情報処理プログラム（コンピュータプログラム）
２ 触覚提示装置
２０ 制御部
２０２ 変位部
２１ 記憶部
２２ 通信部
２４ ＭＲＦデバイス
２５ センサ
３ サーバ装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】