特許 7404584 入力デバイス制御システムおよび入力デバイス制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2023-12-15

(45)【発行日】2023-12-25

(54)【発明の名称】入力デバイス制御システムおよび入力デバイス制御方法

(51)【国際特許分類】

   G06F 3/041 20060101AFI20231218BHJP

   G06F 3/03 20060101ALI20231218BHJP

   G06F 3/01 20060101ALI20231218BHJP

【ＦＩ】

G06F3/041 480

G06F3/03 400

G06F3/01 560

【請求項の数】 4

(21)【出願番号】P 2023115125

(22)【出願日】2023-07-13

【審査請求日】2023-07-13

(73)【特許権者】

【識別番号】505205731

【氏名又は名称】レノボ・シンガポール・プライベート・リミテッド

(74)【代理人】

【識別番号】100161207

【弁理士】

【氏名又は名称】西澤 和純

(74)【代理人】

【識別番号】100169764

【弁理士】

【氏名又は名称】清水 雄一郎

(74)【代理人】

【識別番号】100175824

【弁理士】

【氏名又は名称】小林 淳一

(74)【代理人】

【識別番号】100206081

【弁理士】

【氏名又は名称】片岡 央

(72)【発明者】

【氏名】吉冨 圭一

(72)【発明者】

【氏名】山▲ざき▼ 充弘

【審査官】石川 亮

(56)【参考文献】

【文献】特開２０２２－６７６１８（ＪＰ，Ａ）

【文献】特許第７２９３４６２（ＪＰ，Ｂ１）

【文献】特開平５－１８４０００（ＪＰ，Ａ）

【文献】特表２０１３－５０７０５９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０４１

Ｇ０６Ｆ ３／０３

Ｇ０６Ｆ ３／０１

(57)【特許請求の範囲】

【請求項1】

ペン型入力デバイスが操作対象面に接触している状態が検出されていることに応じて、筆記音が発せられるように筆記音データを用いて前記ペン型入力デバイスを振動させる振動制御部と、
前記振動制御部による前記ペン型入力デバイスの振動に応じて発せられる実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する補正部と
を備える入力デバイス制御システム。

【請求項2】

前記ペン型入力デバイスの振動に応じて発せられる実筆記音を検出する検出部をさらに備え、
前記補正部は、前記検出部により検出された実筆記音の周波数特性が前記理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する
請求項１に記載の入力デバイス制御システム。

【請求項3】

実筆記音の周波数特性を理想筆記音の周波数特性に補正する補正データを前記ペン型入力デバイスと操作対象面との組み合わせごとに記憶する記憶部をさらに備え、
前記補正部は、記憶部が記憶する補正データのうち、使用対象のペン型入力デバイスと操作対象面との組み合わせに対応する補正データに基づいて、筆記音データの周波数特性の変更に関する処理を実行する
請求項１に記載の入力デバイス制御システム。

【請求項4】

入力デバイス制御システムにおける入力デバイス制御方法であって、
振動制御部が、ペン型入力デバイスが操作対象面に接触している状態が検出されていることに応じて、筆記音が発せられるように筆記音データを用いて前記ペン型入力デバイスを振動させる振動制御ステップと、
補正部が、前記振動制御ステップによる前記ペン型入力デバイスの振動に応じて発せられる実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する補正ステップと
を備える入力デバイス制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、入力デバイス制御システムおよび入力デバイス制御方法に関する。

【背景技術】

【0002】

対話型ディスプレイシステムに対する入力にあたり、触覚アクチュエータを駆動した振動を発生させることで触覚フィードバックが可能とされたペン状のスタイラス（ペン型入力デバイス）を入力装置として用いることが知られている。

【先行技術文献】

【特許文献】

【0003】

【文献】特表２０１７－５３７３９５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ペン型入力デバイスにて振動が発せられることで、例えば紙等の筆記媒体にペン先を滑らせているときの触感が疑似的に得られることから、ペン型入力デバイスを用いて入力しているユーザは、筆記媒体に筆記しているときに近い感覚を得ることができる。

【0005】

ペン型入力デバイスを用いた入力にあたっては、できるだけ実物の筆記媒体に筆記しているときの感覚に近いことが好ましいという側面がある。
そこで、本発明は、上記した課題を考慮して、ペン型入力デバイスを用いた入力にあたり、現実に筆記媒体に筆記しているときの感覚に近づくようにすることを目的とする。

【課題を解決するための手段】

【0006】

上述した課題を解決する本発明の一態様は、ペン型入力デバイスが操作対象面に接触している状態が検出されていることに応じて、筆記音が発せられるように筆記音データを用いて前記ペン型入力デバイスを振動させる振動制御部と、前記振動制御部による前記ペン型入力デバイスの振動に応じて発せられる実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する補正部とを備える入力デバイス制御システムである。

【0007】

本発明の一態様は、入力デバイス制御システムにおける入力デバイス制御方法であって、振動制御部が、ペン型入力デバイスが操作対象面に接触している状態が検出されていることに応じて、筆記音が発せられるように筆記音データを用いて前記ペン型入力デバイスを振動させる振動制御ステップと、補正部が、前記振動制御ステップによる前記ペン型入力デバイスの振動に応じて発せられる実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する補正ステップとを備える入力デバイス制御方法である。

【発明の効果】

【0008】

本発明によれば、ペン型入力デバイスを用いた入力にあたり、現実に筆記媒体に筆記しているときの感覚に近づけることができるとの効果が得られる。

【図面の簡単な説明】

【0009】

【図1】第１実施形態における情報処理システムの外観構成例を示す図である。

【図2】第１実施形態における情報処理装置とペン型入力デバイスとの筆記音フィードバックに応じた機能構成例を示す図である。

【図3】第１実施形態における情報処理装置とペン型入力デバイスとが筆記音フィードバックに対応して実行する処理手順例を示すフローチャートである。

【図4】第２実施形態における情報処理装置とペン型入力デバイスとの筆記音フィードバックに応じた機能構成例を示す図である。

【図5】第２実施形態における補正データの一例を示す図である。

【図6】第２実施形態における情報処理装置とペン型入力デバイスとが筆記音フィードバックに対応して実行する処理手順例を示すフローチャートである。

【図7】第３実施形態における情報処理装置とペン型入力デバイスとの筆記音フィードバックに応じた機能構成例を示す図である。

【図8】第３実施形態における情報処理装置とペン型入力デバイスとが筆記音フィードバックに対応して実行する処理手順例を示すフローチャートである。

【図9】第４実施形態における情報処理装置とペン型入力デバイスとの筆記音フィードバックに応じた機能構成例を示す図である。

【図10】第４実施形態における情報処理装置とペン型入力デバイスとがペンＩＤの授受に対応して実行する処理手順例を示すフローチャートである。

【発明を実施するための形態】

【0010】

＜第１実施形態＞
図１は、本実施形態の情報処理システムの外観構成例を示している。同図に示されるように、本実施形態の情報処理システムは、情報処理装置１００とペン型入力デバイス２００とを有する。

【0011】

情報処理装置１００は、ペン型入力デバイス２００による入力操作に応じて情報処理を実行可能とされる。同図の情報処理装置１００は、タブレット端末あるいはノート型パーソナルコンピュータ等とされた例を示している。

【0012】

情報処理装置１００は、タッチパネル表示部１０２を備える。タッチパネル表示部１０２は、タッチパネルと表示部とが組み合わされた部位である。タッチパネル表示部１０２は、表示面に画像を表示するとともに、表示面に対してペン型入力デバイスや指等の操作体を接触させることによる操作が可能とされる。なお、本実施形態において「接触」は、タッチパネル表示部１０２に対して物理的に操作体が接触していなくとも一定以内の距離に操作体が存在していることで、タッチパネル表示部１０２が操作体を検出可能とされている状態も含まれてよい。

【0013】

ペン型入力デバイス２００は、ユーザが情報処理装置１００のタッチパネル表示部１０２におけるタッチパネルに対して操作を行うのに用いるペン型の入力デバイスである。
ユーザは、ペン型入力デバイス２００を把持し、ペン先をタッチパネル表示部１０２の表示面に接触させるようにして移動させることで、文字、絵、図形等の手書き入力の操作を行うようにされる。

【0014】

なお、ペン型入力デバイス２００を用いた操作として、タッチパネル表示部１０２に表示されているユーザインターフェース画像に対するポインティング操作なども可能とされてよい。

【0015】

なお、本実施形態のタッチパネル表示部１０２におけるタッチパネルによるペン型入力デバイス２００の検出方式については特に限定されるものではないが、例えば静電容量方式や電磁誘導方式等を挙げることができる。以下の説明においては、静電容量方式が用いられる場合を例に挙げる。

【0016】

情報処理装置１００には、ペン型入力デバイス２００による入力操作に対応するアプリケーション（ペン操作対応アプリケーション）がインストールされている。
ペン操作対応アプリケーションは、例えばペン型入力デバイス２００のペン先をタッチパネル表示部１０２に対して接触させて行う文字入力、絵描き等の手書き入力操作に応じて描画した文字や絵をタッチパネル表示部１０２に表示したり、操作により描画された文字や絵をデータ化する処理などを実行可能とされてよい。

【0017】

また、本実施形態の情報処理システムにおいて、ペン型入力デバイス２００は、筆記に応じた操作（筆記操作）が行われているときに対応して、ペン型入力デバイス２００が筆記音を発するように振動する。このようにペン型入力デバイス２００から筆記音が発せられることにより、ユーザは、例えば紙等の筆記媒体に筆記しているときに近い感覚を覚えることができる。

【0018】

以降の説明において、ペン型入力デバイス２００を用いての筆記操作が行われていることに応じた筆記音の発生については、「筆記音フィードバック」とも呼ぶ。

【0019】

図２は、本実施形態の筆記音フィードバックに応じた情報処理装置１００とペン型入力デバイス２００との機能構成例を示している。
まず、情報処理装置１００の機能構成例について説明する。同図に示される情報処理装置１００としての機能は、情報処理装置１００としてのハードウェアが備えるＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）等がプログラムを実行することにより実現される。
同図の情報処理装置１００は、通信部１０１、タッチパネル表示部１０２、制御部１０３、および記憶部１０４を備える。

【0020】

通信部１０１は、ペン型入力デバイス２００と無線通信を行う。通信部１０１が対応する無線通信の方式については特に限定されない。なお、通信部１０１は、有線によるペン型入力デバイス２００との通信に対応可能とされてもよい。

【0021】

タッチパネル表示部１０２は、表示部１２１とタッチパネル１２２（センサ部の一例）とが組み合わされたデバイスである。
表示部１２１は、制御部１０３の制御に応じて画像を表示する。
タッチパネル１２２は、表示部１２１の表示面に対応して設けられ、ペン型入力デバイス２００のペン先の位置を検出し、検出した位置の座標をペン位置情報として出力する。具体的に、静電容量方式のタッチパネル１２２は、パネル面（操作対象面の一例）に対するペン型入力デバイス２００のペン先の接触により発生する静電容量を電極で検出することにより、パネル面におけるペン先の位置（座標）を検出してよい。

【0022】

制御部１０３は、情報処理装置１００における各種の制御を実行する。制御部１０３は、ペン操作対応アプリケーションに対応する処理を実行するアプリケーション対応処理部１３１を備える。
ペン操作対応アプリケーションに対する操作としてペン型入力デバイス２００による筆記操作が行われているとき、タッチパネル１２２からアプリケーション対応処理部１３１にペン位置情報が入力される。アプリケーション対応処理部１３１は、入力されたペン位置情報が入力されたことに応じて、例えば描画などの処理を行う。

【0023】

記憶部１０４は、情報処理装置１００に対応する各種の情報を記憶する。

【0024】

次に、ペン型入力デバイス２００の機能構成例について説明する。同図に示されるペン型入力デバイス２００の機能は、例えばハードウェアとしてのペン型入力デバイス２００が備えるＭＣＵ（Micro Controller Unit）等のマイクロプロセッサにプログラムを実行させることにより実現されてよい。

【0025】

同図のペン型入力デバイス２００は、通信部２０１、振動部２０２、音検出部２０３、制御部２０４、および記憶部２０５を備える。

【0026】

通信部２０１は、情報処理装置１００の通信部１０１と通信可能に接続する。

【0027】

振動部２０２（アクチュエータ）は、ペン型入力デバイス２００を把持するユーザが筆記操作を行っているときに筆記音が発せられるように振動する部位である。振動部２０２は、振動制御部２４１により振動が制御される。

【0028】

音検出部２０３は、ペン型入力デバイス２００から発せられる筆記音を検出（収音）する。音検出部２０３により検出された筆記音は周波数解析が行われる。音検出部２０３の構造等は特に限定されないが、例えばマイクロフォンや圧電センサ等により構成されてよい。

【0029】

制御部２０４は、ペン型入力デバイス２００における各種の制御を実行する。制御部２０４は、振動制御部２４１と補正部２４２とを備える。

【0030】

振動制御部２４１は、筆記音データ記憶部２５１が記憶する筆記音データが示す波形に基づいて振動部２０２を振動させる。

【0031】

補正部２４２は、実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する。実筆記音は、振動制御部２４１によるペン型入力デバイス２００の振動に応じて現実に発せられる筆記音である。理想筆記音は、本来発せられるべき筆記音である。

【0032】

例えば、筆記音データ記憶部２５１が記憶する筆記音データは、理想筆記音に対応する周波数特性を有している。しかしながら、実際にペン型入力デバイス２００が発せられる実筆記音は、例えばペン型入力デバイス２００が接触するタッチパネル１２２の材質、構造、重量等の条件やペン型入力デバイス２００自体の材質、構造、重量等の条件により理想筆記音から乖離する場合がある。このように実筆記音が理想筆記音と相違することによっては、ユーザが現実に筆記媒体に筆記している感覚を覚えにくくなる。
そこで、本実施形態における補正部２４２は、音検出部２０３が検出した実筆記音の周波数特性が理想筆記音に近づくように、振動制御部２４１が利用する筆記音データを補正する。このように補正が行われることにより、ユーザは、ペン型入力デバイス２００により筆記操作を行っているときに理想に近い筆記音を聞くことができ、現実に筆記媒体に筆記しているときに近い感覚を覚えることができる。

【0033】

記憶部２０５は、ペン型入力デバイス２００が対応する各種の情報を記憶する。記憶部２０５は、筆記音データ記憶部２５１を備える。筆記音データ記憶部２５１は、筆記音データを記憶する。筆記音データは、ペン型入力デバイス２００が筆記音を発するように振動させるための波形を示すデータである。

【0034】

図３のフローチャートを参照して、本実施形態の情報処理装置１００とペン型入力デバイス２００とが筆記音フィードバックに対応して実行する処理手順例について説明する。

【0035】

まず、情報処理装置１００が実行する処理手順例から説明する。
ステップＳ１００：情報処理装置１００においてアプリケーション対応処理部１３１は、筆記操作が開始されるのを待機する。
アプリケーション対応処理部１３１は、例えばタッチパネル１２２からのペン先位置を示すペン位置情報の入力が開始されたことに応じて、筆記操作が開始されたと検出してよい。

【0036】

ステップＳ１０２：筆記操作が開始されたことに応じて、アプリケーション対応処理部１３１は、ペン型入力デバイス２００への筆記操作情報の送信を開始する。筆記操作情報は、現在においてペン型入力デバイス２００を用いたタッチパネル１２２への筆記操作が行われていることを通知する情報である。

【0037】

ステップＳ１０４：ステップＳ１０２にて筆記操作情報の送信を開始させた後において、アプリケーション対応処理部１３１は、ステップＳ１００に対応して開始された筆記操作が終了するのを待機する。アプリケーション対応処理部１３１は、これまで入力されていたペン位置情報が入力されなくなったことに応じて筆記操作が終了したと判定してよい。

【0038】

ステップＳ１０６：ステップＳ１０４にて筆記操作が終了したと判定されると、アプリケーション対応処理部１３１は、ステップＳ１０２により開始させた筆記操作情報の送信を停止させる。

【0039】

次に、ペン型入力デバイス２００が実行する処理手順例について説明する。
ステップＳ２００：ペン型入力デバイス２００において振動制御部２４１は、ステップＳ１０２により情報処理装置１００から送信される筆記操作情報の受信が開始されるのを待機している。

【0040】

ステップＳ２０２：ステップＳ１００にて筆記操作情報の受信が開始されたことに応じて、音検出部２０３は実筆記音を検出する。補正部２４２は、音検出部２０３が検出した実筆記音のデータ（実筆記音データ）を取得する。補正部２４２は、音検出部２０３が所定時間（所定サンプル数）により検出した実筆記音の実筆記音データを取得してよい。

【0041】

ステップＳ２０４：補正部２４２は、実筆記音が理想筆記音に近づくように補正するための補正データを生成する。補正データの生成にあたり、補正部２４２は、例えば、ステップＳ２０２に対応して取得した実筆記音データについて周波数解析を行うことで、実筆記音の周波数特性を算出する。補正部２４２は、実筆記音の周波数特性と、筆記音データ記憶部２５１が記憶する筆記音データの周波数特性（すなわち、理想筆記音の周波数特性）との差分を算出する。補正部２４２は、算出した差分に基づいて、実筆記音の周波数特性を筆記音データの周波数特性とする補正データを生成する。
補正データは、例えば筆記音データ記憶部２５１が記憶する筆記音データの周波数特性を変化させるフィルタ、イコライザ等のパラメータであってよい。あるいは補正データは、フィルタ、イコライザ等としての機能モジュールであってもよい。あるいは、補正データは、実筆記音として発生られた際に理想筆記音となるようにされた周波数特性を有する筆記音データ（補正筆記音データ）であってよい。また、このようなフィルタ、イコライザのパラメータあるいは機能モジュールとしての補正データは、例えば予め複数の異なるものが記憶部２０５にて記憶されるなどして用意されたうえで、補正部２４２が、算出した差分に基づいて複数の補正データのうちから選択するようにしてよい。
以下の説明においては、補正データがフィルタのモジュールとしての補正データが生成される場合を例に挙げる。

【0042】

ステップＳ２０６：補正部２４２は、筆記音データ記憶部２５１から読み出した筆記音データの周波数特性を、ステップＳ２０４により生成した補正データにより補正する。つまり、この場合の補正部２４２は、ステップＳ２０４により生成された補正データとしてのフィルタのモジュールを生成し、生成したフィルタに筆記音データ記憶部２５１から読み出した筆記音データを通過させる。補正部２４２は、フィルタを通過したことにより補正された筆記音データ（補正筆記音データ）を振動制御部２４１に入力させる。

【0043】

ステップＳ２０８：振動制御部２４１は、ステップＳ２０６により入力された筆記音データ（補正筆記音データ）により振動部２０２を駆動させる。このように補正筆記音データにより振動部２０２が駆動されることで、筆記操作が行われているペン型入力デバイス２００が振動し、理想筆記音に近づけられた実筆記音が発せられる。

【0044】

ステップＳ２１０：ステップＳ２０８により振動部２０２を振動させているとき、振動制御部２４１は、情報処理装置１００から送信される筆記操作情報の受信が停止したか否かを判定する。筆記操作情報の受信が停止していないと判定される場合には、ステップＳ２０８に処理が戻される。ステップＳ２０８に処理が戻されることで、筆記操作情報が受信されている状態では、補正筆記音データによりペン型入力デバイス２００が振動している状態が継続される。
当該ステップＳ２１０にて筆記操作情報の受信が停止したと判定されると、同図の処理が終了される。このように処理が終了されることに応じて、ペン型入力デバイス２００の振動も停止される。

【0045】

なお、補正部２４２が補正データとして補正筆記音データを生成するようにされている場合には、振動制御部２４１は、ステップＳ２０６の処理をスキップし、ステップＳ２０８において、補正データとして生成された補正筆記音データを利用して振動部２０２を駆動してよい。

【0046】

なお、本実施形態において、筆記操作が行われている間においては、継続して実筆記音を検出して補正データを生成し、生成した補正データによりを補正した筆記音データにより振動部２０２を振動させるというように、フィードバック制御が行われてよい。

【0047】

＜第２実施形態＞
続いて、第２実施形態について説明する。先の第１実施形態の情報処理システムは、音検出部２０３により検出した実筆記音と理想筆記音との差分に基づいて補正した補正筆記音データを利用してペン型入力デバイス２００を振動させるようにされていた。
これに対して、本実施形態の情報処理システムにおいて、ペン型入力デバイス２００は、操作対象のタッチパネル１２２の種別（例えば、型番、機種等）との組み合わせに応じて、実筆記音を理想筆記音とすることのできる特性を有するフィルタ等としての補正データをあらかじめ記憶しておくようにされる。ペン型入力デバイス２００は、操作対象のタッチパネル１２２の種別に対応付けられた補正データを用いて筆記音データを補正し、補正した筆記音データを利用して振動部２０２を振動させる。このようにして本実施形態においては、ペン型入力デバイス２００の振動により発せられる実筆記音を理想筆記音に近づけるようにされる。

【0048】

図４は、本実施形態の筆記音フィードバックに応じた情報処理装置１００とペン型入力デバイス２００との機能構成例を示している。同図において、図２と同一部分には同一符号を付して適宜説明を省略する。
同図のペン型入力デバイス２００において、記憶部２０５は補正データ記憶部２５２を備える。補正データ記憶部２５２は、タッチパネル１２２の種別ごとに対応する補正データを記憶する。
また、本実施形態において、音検出部２０３は省略されてよい。

【0049】

図５は、補正データ記憶部２５２が記憶する補正データの一例を示している。同図に示されるように補正データ記憶部２５２は、タッチパネル種別ごとに対応付けて補正データを記憶する。１つのタッチパネル種別に対応する補正データは、対応のタッチパネル種別よるタッチパネルに対してペン型入力デバイス２００を用いた筆記操作が行われる場合に対応して実筆記音が理想筆記音に近づくように、筆記音データ記憶部２５１が記憶する筆記音データの周波数特性を補正するのに用いられるデータである。つまり、補正データ記憶部２５２は、ペン型入力デバイス２００に対する各種タッチパネル種別の組み合わせごとに対応する補正データを記憶する。
本実施形態における補正データは、フィルタ、イコライザ等のパラメータであってよい。あるいは補正データは、フィルタ、イコライザ等としての機能モジュールであってもよい。また、このようなフィルタ、イコライザのパラメータあるいは機能モジュールとしての補正データは、例えば予め複数の異なるものが記憶部２０５にて記憶されるなどして用意されたうえで、補正部２４２が、算出した差分に基づいて複数の補正データのうちから選択するようにしてよい。

【0050】

図６のフローチャートを参照して、本実施形態の情報処理装置１００とペン型入力デバイス２００とが筆記音フィードバックに対応して実行する処理手順例について説明する。

【0051】

まず、情報処理装置１００が実行する処理手順例について説明する。
ステップＳ３００：情報処理装置１００においてアプリケーション対応処理部１３１は、筆記操作が開始されるのを待機する。

【0052】

ステップＳ３０２：筆記操作が開始されたことに応じて、アプリケーション対応処理部１３１は、ペン型入力デバイス２００への筆記操作情報の送信を開始する。本実施形態の筆記操作情報には、情報処理装置１００が備えるタッチパネル１２２の種別（タッチパネル種別）を示す種別情報が含まれる。例えば、記憶部１０４にはタッチパネル１２２の種別を示す種別情報が記憶されている。アプリケーション対応処理部１３１は、記憶部１０４から取得した種別情報を筆記操作情報に含めるようにされてよい。

【0053】

ステップＳ３０４：ステップＳ３０２にて筆記操作情報の送信を開始させた後において、アプリケーション対応処理部１３１は、ステップＳ３００に対応して開始された筆記操作が終了するのを待機する。

【0054】

ステップＳ３０６：ステップＳ３０４にて筆記操作が終了したと判定されると、アプリケーション対応処理部１３１は、ステップＳ３０２により開始させた筆記操作情報の送信を停止させる。

【0055】

次に、ペン型入力デバイス２００が実行する処理手順例について説明する。
ステップＳ４００：ペン型入力デバイス２００において振動制御部２４１は、ステップＳ３０２により情報処理装置１００から送信される筆記操作情報の受信が開始されるのを待機している。

【0056】

ステップＳ４０２：ステップＳ４００にて筆記操作情報の受信が開始されたことに応じて、補正部２４２は、受信された筆記操作情報に含まれる種別情報を取得する。

【0057】

ステップＳ４０４：補正部２４２は、ステップＳ４０２により取得した種別情報が示すのと同じタッチパネル種別に対応付けられている補正データを補正データ記憶部２５２から取得する。

【0058】

ステップＳ４０６：補正部２４２は、筆記音データ記憶部２５１から読み出した筆記音データの周波数特性を、ステップＳ４０４により取得した補正データにより補正する。補正部２４２は、補正した筆記音データ（補正筆記音データ）を振動制御部２４１に入力させる。

【0059】

ステップＳ４０８：振動制御部２４１は、ステップＳ４０６により入力された筆記音データ（補正筆記音データ）により振動部２０２を駆動させる。

【0060】

ステップＳ４１０：ステップＳ４０８により振動部２０２を振動させているとき、振動制御部２４１は、情報処理装置１００から送信される筆記操作情報の受信が停止したか否かを判定する。筆記操作情報の受信が停止していないと判定される場合には、ステップＳ４０８に処理が戻される。
当該ステップＳ４１０にて筆記操作情報の受信が停止したと判定されると、同図の処理が終了される。同図の処理が終了されることに応じて、ペン型入力デバイス２００の振動も停止される。

【0061】

なお、本実施形態において、補正データ記憶部２５２が記憶する補正データのそれぞれが、対応のタッチパネル種別に対する筆記操作に応じて実筆記音が理想筆記音となる週数特性を有するようにされた筆記音データであってよい。この場合、振動制御部２４１は、補正部２４２が取得した補正データとしての筆記音データにより振動部２０２を振動させてよい。また、この場合には、筆記音データ記憶部２５１は省略されてよい。

【0062】

＜第３実施形態＞
次に、第３実施形態について説明する。先の第１実施形態は、ペン型入力デバイス２００が、実筆記音を検出し、検出した実筆記音に基づいて筆記音データを補正するようにされていた。これに対して、本実施形態においては、情報処理装置１００が実筆記音を検出し、検出した実筆記音に基づいて筆記音データの補正に関する処理を実行するようにされる。ペン型入力デバイス２００は、情報処理装置１００により補正された筆記音データを用いて、理想筆記音に近づけられた実筆記音を発するようにされる。

【0063】

図７は、本実施形態の筆記音フィードバックに応じた情報処理装置１００とペン型入力デバイス２００との機能構成例を示している。同図において、図１と同一部分には同一符号を付し、ここでは主に図１との相違点について説明する。
情報処理装置１００は、音検出部１０５と補正部１３２とを備える。
音検出部１０５は、ユーザがタッチパネル１２２に対してペン型入力デバイス２００のペン先を接触させて筆記操作を行っているときにペン型入力デバイス２００から発せられる筆記音を検出可能なようにして設けられる。

【0064】

また、図７においては、図１においてペン型入力デバイス２００に備えられていた音検出部２０３と補正部２４２とが省略されている。本実施形態における補正部１３２は、例えばペン操作対応アプリケーションが有する機能の１つとされてもよいし、ＯＳ（Operating System）の機能として備えられるものであってもよい。

【0065】

また、情報処理装置１００の記憶部１０４は、理想筆記音データ記憶部１４１を備える。理想筆記音データ記憶部１４１は、理想筆記音データを記憶する。理想筆記音データは、例えば情報処理装置１００が備えるタッチパネル１２２に対応して発せられるべき筆記音に対応する筆記音データである。理想筆記音データ記憶部１４１が記憶する理想筆記音データは、対応の理想筆記音の周波数特性を示すものであってよい。また、理想筆記音データ記憶部１４１は、例えばペン操作対応アプリケーションのもとで選択される筆記具の種別ごとに対応して理想筆記音データを記憶してよい。

【0066】

図８のフローチャートを参照して、本実施形態の情報処理装置１００とペン型入力デバイス２００とが筆記音フィードバックに対応して実行する処理手順例について説明する。

【0067】

ステップＳ５００：情報処理装置１００においてアプリケーション対応処理部１３１は、筆記操作が開始されるのを待機する。

【0068】

ステップＳ５０２：筆記操作が開始されたことに応じて、音検出部１０５は実筆記音を検出する。

【0069】

ステップＳ５０４：補正部１３２は、補正データを生成する。例えば、補正部１３２は、ステップＳ５０２に対応して検出された実筆記音（実筆記音データ）について周波数解析を行うことで、実筆記音の周波数特性を算出する。補正部１３２は、実筆記音の周波数特性と、理想筆記音データ記憶部１４１が記憶する理想筆記音データの周波数特性との差分に基づいて、実筆記音の周波数特性を理想筆記音データの周波数特性とする補正データを生成する。本実施形態における補正データは、フィルタ、イコライザ等のパラメータであってよい。あるいは補正データは、フィルタ、イコライザ等としての機能モジュールであってもよい。また、このようなフィルタ、イコライザのパラメータあるいは機能モジュールとしての補正データは、例えば予め複数の異なるものが記憶部２０５にて記憶されるなどして用意されたうえで、補正部２４２が、算出した差分に基づいて複数の補正データのうちから選択するようにしてよい。

【0070】

ステップＳ５０６：補正部１３２は、筆記操作情報の送信を開始させるとともに、筆記操作情報の送信開始のタイミングで、ステップＳ５０４により生成された補正データを送信する。

【0071】

ステップＳ５０８：ステップＳ５０６にて筆記操作情報の送信を開始させた後において、アプリケーション対応処理部１３１は、ステップＳ５００に対応して開始された筆記操作が終了するのを待機する。

【0072】

ステップＳ５１０：ステップＳ５０８にて筆記操作が終了したと判定されると、アプリケーション対応処理部１３１は、ステップＳ５０６により開始させた筆記操作情報の送信を停止させる。

【0073】

次に、ペン型入力デバイス２００が実行する処理手順例について説明する。
ステップＳ６００：ペン型入力デバイス２００において振動制御部２４１は、ステップＳ５０６により情報処理装置１００から送信される筆記操作情報の受信が開始されるのを待機している。

【0074】

ステップＳ６０２：振動制御部２４１は、筆記操作情報の受信が開始されたのと同じタイミングで受信された補正データに基づくフィルタを設定する。

【0075】

ステップＳ６０４：振動制御部２４１は、筆記音データ記憶部２５１が記憶する筆記音データを、ステップＳ６０２により設定したフィルタに通過させることで補正筆記音データを得たうえで、補正筆記音データにより振動部２０２を駆動させる。

【0076】

ステップＳ６０６：ステップＳ６０４により振動部２０２を振動させているとき、振動制御部２４１は、情報処理装置１００から送信される筆記操作情報の受信が停止したか否かを判定する。筆記操作情報の受信が停止していないと判定される場合には、ステップＳ６０４に処理が戻される。
当該ステップＳ６０６にて筆記操作情報の受信が停止したと判定されると、同図の処理が終了され、ペン型入力デバイス２００の振動も停止される。

【0077】

なお、本実施形態において、情報処理装置１００の補正部１３２は、理想筆記音データ記憶部１４１が記憶する理想筆記音データを補正データとしてペン型入力デバイス２００に送信してもよい。この場合、ペン型入力デバイス２００の振動制御部２４１は、受信した補正データとしての理想筆記音データにより振動部２０２を駆動するようにされてよい。また、この場合には、ペン型入力デバイス２００における筆記音データ記憶部２５１は省略されてよい。

【0078】

＜第４実施形態＞
続いて、第４実施形態について説明する。先の第２実施形態においては、ペン型入力デバイス２００が、タッチパネル１２２の種別に応じた補正データにより筆記音データを補正し、補正された筆記音データにより振動部２０２を振動させるようにされていた。
これに対して、本実施形態においては、情報処理装置１００が、ペン型入力デバイス２００の種別（ペン種別）ごとに対応付けた補正データを記憶するようにされる。情報処理装置１００は、記憶する補正データのうちで、タッチパネル１２２に対する筆記操作に使用されているペン型入力デバイス２００のペン種別に対応する補正データをペン型入力デバイス２００に送信する。ペン種別は、ペン型入力デバイス２００としての型式等に対応する。
ペン型入力デバイス２００は、受信した補正データにより補正した筆記音データ（補正筆記音データ）を用いて振動部２０２を振動させることで、理想筆記音に近づけられた実筆記音を発するようにされる。

【0079】

図９は、本実施形態の筆記音フィードバックに応じた情報処理装置１００とペン型入力デバイス２００との機能構成例を示している。同図において、図４と同一部分には同一符号を付して適宜説明を省略する。

【0080】

図９の情報処理装置１００は、制御部１０３において補正部１３２を備える。また、同図の情報処理装置１００は、記憶部１０４において補正データ記憶部１４２とペン種別記憶部１４３とを備える。
また、図９のペン型入力デバイス２００においては、図４における補正部２４２と補正データ記憶部２５２とが省略されている。

【0081】

補正データ記憶部１４２は、ペン種別ごとに対応付けて補正データを記憶する。１つのペン種別に対応する補正データは、対応のペン種別のペン型入力デバイス２００によりタッチパネル１２２に対して筆記操作が行われているときの理想筆記音が得られるように筆記音データを補正するデータである。つまり、補正データ記憶部１４２は、情報処理装置１００が備えるタッチパネル１２２に対する各種ペン型入力デバイスの組み合わせごとに対応する補正データを記憶する。
また、本実施形態においても、補正データは、フィルタ、イコライザ等のパラメータであってよい。あるいは補正データは、フィルタ、イコライザ等としての機能モジュールであってもよい。以下の説明では、補正データは、フィルタ等としての機能モジュールである場合を例に挙げる。

【0082】

ペン種別記憶部１４３は、通信可能に接続されているペン型入力デバイス２００のペン種別を記憶する。
ペン型入力デバイス２００は、情報処理装置１００と通信を確立するにあたって実行するネゴシエーションに際して、自己のペン種別を情報処理装置１００に通知するようにされる。ペン種別記憶部１４３は、このように通知されたペン種別を記憶する。

【0083】

図１０のフローチャートを参照して、本実施形態の情報処理装置１００とペン型入力デバイス２００とが筆記音フィードバックに対応して実行する処理手順例について説明する。同図の処理手順は、既に情報処理装置１００とペン型入力デバイス２００との通信が確立されており、ペン種別記憶部１４３において接続先のペン型入力デバイス２００のペン種別が記憶されている状態のもとで実行される。

【0084】

ステップＳ７００：情報処理装置１００においてアプリケーション対応処理部１３１は、筆記操作が開始されるのを待機する。

【0085】

ステップＳ７０２：筆記操作が開始されたことに応じて、補正部１３２は、現在においてペン種別記憶部１４３が記憶するのと同じペン種別に対応付けられた補正データを、補正データ記憶部１４２から取得する。

【0086】

ステップＳ７０４：補正部１３２は、筆記操作情報の送信を開始させるとともに、筆記操作情報の送信開始のタイミングで、ステップＳ７０２により取得された補正データを送信する。

【0087】

ステップＳ７０６：ステップＳ７０４にて筆記操作情報の送信を開始させた後において、アプリケーション対応処理部１３１は、ステップＳ７００に対応して開始された筆記操作が終了するのを待機する。

【0088】

ステップＳ７０８：ステップＳ７０６にて筆記操作が終了したと判定されると、アプリケーション対応処理部１３１は、ステップＳ７０４により開始させた筆記操作情報の送信を停止させる。

【0089】

ペン型入力デバイス２００が実行するステップＳ８００～Ｓ８０６による処理は、図８のステップＳ６００～Ｓ６０６と同様でよい。

【0090】

なお、本実施形態において、補正データ記憶部１４２が記憶する補正データは、対応のペン型入力デバイス２００のペン種別に対応する理想筆記音に実筆記音が同等となるように作成された筆記音データであってよい。この場合、ペン型入力デバイス２００の振動制御部２４１は、受信した補正データとしての筆記音データにより振動部２０２を駆動するようにされてよい。

【0091】

なお、上述の情報処理装置１００、ペン型入力デバイス２００等としての機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述の情報処理装置１００、ペン型入力デバイス２００等としての処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるＨＤＤ、ＳＳＤ等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部または外部に設けられた記録媒体も含まれる。配信サーバの記録媒体に記憶されるプログラムのコードは、端末装置で実行可能な形式のプログラムのコードと異なるものでもよい。すなわち、配信サーバからダウンロードされて端末装置で実行可能な形でインストールができるものであれば、配信サーバで記憶される形式は問わない。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に端末装置で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

【符号の説明】

【0092】

１００ 情報処理装置、１０１ 通信部、１０２ タッチパネル表示部、１０３ 制御部、１０４ 記憶部、１０５ 音検出部、１２１ 表示部、１２２ タッチパネル、１３１ アプリケーション対応処理部、１３２ 補正部、１４１ 理想筆記音データ記憶部、１４２ 補正データ記憶部、１４３ ペン種別記憶部、２００ ペン型入力デバイス、２０１ 通信部、２０２ 振動部、２０３ 音検出部、２０４ 制御部、２０５ 記憶部、２４１ 振動制御部、２４２ 補正部、２５１ 筆記音データ記憶部、２５２ 補正データ記憶部

【要約】

【課題】ペン型入力デバイスを用いた入力にあたり、現実に筆記媒体に筆記しているときの感覚に近づけることができるようにする。
【解決手段】ペン型入力デバイスが操作対象面に接触している状態が検出されていることに応じて、筆記音が発せられるように筆記音データを用いて前記ペン型入力デバイスを振動させる振動制御部と、前記振動制御部による前記ペン型入力デバイスの振動に応じて発せられる実筆記音の周波数特性が理想筆記音の周波数特性に補正されるように、筆記音データの周波数特性の変更に関する処理を実行する補正部とを備えて入力デバイス制御システムを構成する。
【選択図】図３

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】