特許 5929572 操作表示装置およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5929572

(24)【登録日】2016年5月13日

(45)【発行日】2016年6月8日

(54)【発明の名称】操作表示装置およびプログラム

(51)【国際特許分類】

   G06F 3/0484 20130101AFI20160526BHJP

   G06F 3/0488 20130101ALI20160526BHJP

   G06F 3/01 20060101ALI20160526BHJP

   G06F 3/041 20060101ALI20160526BHJP

【ＦＩ】

   G06F3/0484 150

   G06F3/0488 130

   G06F3/01 510

   G06F3/041 560

   G06F3/041 595

【請求項の数】34

【全頁数】36

(21)【出願番号】特願2012-153711(P2012-153711)

(22)【出願日】2012年7月9日

(65)【公開番号】特開2014-16795(P2014-16795A)

(43)【公開日】2014年1月30日

【審査請求日】2014年6月24日

【前置審査】

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】100121599

【弁理士】

【氏名又は名称】長石 富夫

(72)【発明者】

【氏名】杉本 泰明

【審査官】 松田 岳士

(56)【参考文献】

【文献】 特開２００９−２８２６３４（ＪＰ，Ａ）

【文献】 国際公開第２０１１／０３６７１０（ＷＯ，Ａ１）

【文献】 特表２０１０−５４１０７３（ＪＰ，Ａ）

【文献】 特開２０１０−１１８０１６（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１１／０２３１７９５（ＵＳ，Ａ１）

【文献】 特開２００５−２２７４８７（ＪＰ，Ａ）

【文献】 特開２０１０−０２０６１６（ＪＰ，Ａ）

【文献】 特開２０１２−２３４２３０（ＪＰ，Ａ）

【文献】 Chi Tai Dang, et al.，Hand Distinction for Multi-Touch Tabletop Interaction，ITS '09 Proceedings of the ACM International Conference on Interactive Tabletops and Surfaces，２００９年１１月２３日，pp.101-108

【文献】 古市 昌一，ユーザ認識機能を備えたタッチパネル，画像ラボ，日本工業出版株式会社，２００９年１２月１０日，第２０巻, 第１２号，ｐｐ．６４−６９

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０３−３／０４８９

ＴＨＥ ＡＣＭ ＤＩＧＩＴＡＬ ＬＩＢＲＡＲＹ

(57)【特許請求の範囲】

【請求項1】

表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記複数の入力操作のそれぞれについて前記人体通信部が前記操作者識別情報を取得した場合は、前記操作者識別情報に基づいて、前記複数の指による入力操作が同一人によるものである否かを判定する
ことを特徴とする操作表示装置。

【請求項2】

前記制御部は、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定する
ことを特徴とする請求項１に記載の操作表示装置。

【請求項3】

前記制御部は、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする請求項１または２に記載の操作表示装置。

【請求項4】

表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定する
ことを特徴とする操作表示装置。

【請求項5】

前記制御部は、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする請求項４に記載の操作表示装置。

【請求項6】

表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。

【請求項7】

前記制御部は、前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする請求項１乃至６のいずれか１つに記載の操作表示装置。

【請求項8】

表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。

【請求項9】

表示部と、
前記表示部の表示面への指のタッチ操作を同時に複数検出可能なタッチパネルと、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を移動させる入力操作が同時に複数検出された場合に、各入力操作を行っている指を通じて前記人体通信部が取得した複数の操作者識別情報から、前記複数の入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。

【請求項10】

前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記第１入力操作及び前記第２入力操作を、一組のピンチイン操作、ピンチアウト操作又はローテーション操作であると判断する
ことを特徴とする請求項７乃至９のいずれか１つに記載の操作表示装置。

【請求項11】

前記制御部は、前記複数の指のタッチによる入力操作が同一人による操作であると判定した場合は、前記複数の指のタッチによる入力操作を一組の操作と認識し、その一組の操作の内容に応じて前記表示内容を変更し、前記複数の指のタッチによる入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付ける
ことを特徴とする請求項１乃至１０のいずれか１つに記載の操作表示装置。

【請求項12】

前記制御部は、前記複数の指のタッチによる入力操作が複数の操作者による操作であると判定した場合は、前記指形状検出部によって検出された各指の形状からそれぞれの指に対応する操作者の向きを判定し、前記複数の操作者のそれぞれに前記領域を割り当てると共に、各操作者に割り当てた領域に表示する画面を、その操作者の向きに応じた向きにする
ことを特徴とする請求項７または８を引用する請求項１０を引用する請求項１１、または、請求項１乃至８のいずれか１つを引用する請求項１１に記載の操作表示装置。

【請求項13】

前記制御部は、前記表示面を複数に分割する際の分割方向を、前記複数の指のタッチによる入力操作に係る指の接触位置の前記表示面内での分散状況に応じて変更する
ことを特徴とする請求項１１または１２に記載の操作表示装置。

【請求項14】

前記制御部は、予め用意された複数の分割パターンの中から、前記表示面を前記複数の操作者の人数に対応する複数の領域に分割する分割パターンであってそれぞれの領域に一人分ずつ指のタッチによる入力操作が分散される分割パターンを優先的に選択し、その選択した分割パターンに従って前記表示面を分割する
ことを特徴とする請求項１１乃至１３のいずれか１つに記載の操作表示装置。

【請求項15】

前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記表示部の表示内容を拡大又は縮小する
ことを特徴とする請求項１乃至１０のいずれか１つに記載の操作表示装置。

【請求項16】

前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作でないと判定する場合、前記第１入力操作及び前記第２入力操作をそれぞれ第１操作者及び第２操作者によるフリック操作と判断する
ことを特徴とする請求項７乃至１０のいずれか１つに記載の操作表示装置。

【請求項17】

前記制御部は、前記複数の入力操作が同一人による操作であると判定した場合は、前記複数の入力操作を一組の操作と認識し、その一組の入力操作の内容に応じて前記表示内容を変更し、前記複数の入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付ける
ことを特徴とする請求項９に記載の操作表示装置。

【請求項18】

前記制御部は、前記領域に表示する画面内に操作者情報の入力欄がある場合は、前記人体通信部によって取得した操作者識別情報に基づいて前記入力欄に操作者情報を自動設定する
ことを特徴とする請求項１７に記載の操作表示装置。

【請求項19】

前記制御部は、分割直前に前記表示部に表示されていた画面と同じ内容の画面を分割後の各領域に表示する
ことを特徴とする請求項１１乃至１４、１７、１８のいずれか１つに記載の操作表示装置。

【請求項20】

前記制御部は、セキュリティ情報の入力に使用される入力釦のある画面を分割後の各領域に表示する場合は、各領域に表示する画面のレイアウトを互いに相違させる
ことを特徴とする請求項１９に記載の操作表示装置。

【請求項21】

前記制御部は、セキュリティ情報の入力に使用される複数の入力釦のある画面を分割後の各領域に表示する場合は、各領域に表示する画面における前記複数の入力釦の配置を互いに相違させる
ことを特徴とする請求項１９または２０に記載の操作表示装置。

【請求項22】

表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記複数の入力操作のそれぞれについて前記人体通信部が前記操作者識別情報を取得した場合は、前記操作者識別情報に基づいて、前記複数の指による入力操作が同一人によるものである否かを判定するように動作させる
ことを特徴とするプログラム。

【請求項23】

前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定するように動作させる
ことを特徴とする請求項２２に記載のプログラム。

【請求項24】

前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とする請求項２２または２３に記載のプログラム。

【請求項25】

表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定するように動作させる
ことを特徴とするプログラム。

【請求項26】

前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とする請求項２５に記載のプログラム。

【請求項27】

表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。

【請求項28】

前記情報処理装置を、前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とする請求項２２乃至２７のいずれか１つに記載のプログラム。

【請求項29】

表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。

【請求項30】

表示部と、前記表示部の表示面への指のタッチ操作を同時に複数検出可能なタッチパネルと、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を移動させる入力操作が同時に複数検出された場合に、各入力操作を行っている指を通じて前記人体通信部が取得した複数の操作者識別情報から、前記複数の入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。

【請求項31】

前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記第１入力操作及び前記第２入力操作を、一組のピンチイン操作、ピンチアウト操作又はローテーション操作であると判断するように動作させる
ことを特徴とする請求項２８乃至３０のいずれか１つに記載のプログラム。

【請求項32】

前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記表示部の表示内容を拡大又は縮小するように動作させる
ことを特徴とする請求項２２乃至３１のいずれか１つに記載のプログラム。

【請求項33】

前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作でないと判定する場合、前記第１入力操作及び前記第２入力操作をそれぞれ第１操作者及び第２操作者によるフリック操作と判断するように動作させる
ことを特徴とする請求項２８乃至３１のいずれか１つに記載のプログラム。

【請求項34】

前記情報処理装置を、
前記複数の入力操作が同一人による操作であると判定した場合は、前記複数の入力操作を一組の操作と認識し、その一組の入力操作の内容に応じて前記表示内容を変更し、前記複数の入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付けるように機能させる
ことを特徴とする請求項２２乃至３１のいずれか１つに記載のプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、複数箇所へのタッチ操作を同時に検出可能なタッチパネルを備えた操作表示装置およびプログラムに関する。

【背景技術】

【0002】

複数箇所へのタッチ操作を同時に検出可能なタッチパネルをディスプレイ上に備えた端末装置などの操作表示装置では、複数本の指による複数箇所へのタッチ操作を一組の操作（マルチタッチ操作）として認識することで、ピンチインやピンチアウトなどの多様な操作を受け付ける。

【0003】

ところで、比較的大きなディスプレイを備えた端末装置や会議システムにおける大型の操作表示装置などでは、１台の操作表示装置を複数人で利用することがある。この場合、同時に検出された複数箇所へのタッチ操作が、一人の操作者によるマルチタッチ操作であるか、複数人の操作者による個別の操作（シングルタッチ操作）であるかを識別しなければ、複数人による同時利用とマルチタッチ操作の受け付けとを両立させることができない。

【0004】

上記の問題に対応する技術として、たとえば、大型の操作表示装置の近傍に居る複数のユーザを検出し、検出されたそれぞれのユーザに対して領域を割り当て、各領域で独立した操作を受け付けるようにした操作表示装置が提案されている（特許文献１）。

【0005】

また、タッチパネル上に同時に存在している複数のタッチ入力位置の位置関係（一定以上離れているか否か）により、その同時に存在している複数のタッチ入力位置に係る操作が一人の操作者によるマルチタッチ操作か否かを判定するようにしたマルチタッチパネルが提案されている（特許文献２）。

【0006】

なお、操作者を特定する技術として、たとえば、タッチパネルに指で触れている操作者の人体を通じてその操作者が携帯している端末装置と通信して、該端末装置からユーザの認証情報を取得する技術がある（特許文献３、４）。

【先行技術文献】

【特許文献】

【0007】

【特許文献1】特開２０１１−１５４５４６号公報

【特許文献2】特開２００９−２８２６３４号公報

【特許文献3】特開２０１０−２２６２４８号公報

【特許文献4】特開２００２−２２２１６９号公報

【発明の概要】

【発明が解決しようとする課題】

【0008】

特許文献１、２に開示された技術では、各ユーザが相互にある程度以上離れた位置に居なければ、同時に検出された複数箇所へのタッチ操作が、一人の操作者によるマルチタッチ操作であるか、複数人の操作者による個別のシングルタッチ操作であるかを的確に判定することはできない。

【0009】

本発明は、上記の問題を解決しようとするものであり、同時に検出された複数箇所へのタッチ操作が一人の操作者によるマルチタッチ操作であるか複数人の操作者による個別のシングルタッチ操作であるかを的確に判定可能な操作表示装置を提供することを目的としている。

【課題を解決するための手段】

【0010】

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。

【0011】

［１］表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記複数の入力操作のそれぞれについて前記人体通信部が前記操作者識別情報を取得した場合は、前記操作者識別情報に基づいて、前記複数の指による入力操作が同一人によるものである否かを判定する
ことを特徴とする操作表示装置。

【0012】

上記発明では、複数の指のタッチによる入力操作が同時に検出された場合に、各入力操作に係る指の形状からこの複数の入力操作が同一人による操作か、複数の操作者による操作かを判定し、その判定結果に応じて表示内容を変更する。
［２］前記制御部は、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定する
ことを特徴とする［１］に記載の操作表示装置。
［３］前記制御部は、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする［１］または［２］に記載の操作表示装置。
［４］表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定する
ことを特徴とする操作表示装置。
［５］前記制御部は、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする［４］に記載の操作表示装置。
［６］表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。
［７］前記制御部は、前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする［１］乃至［６］のいずれか１つに記載の操作表示装置。
［８］表示部と、
前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、
前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時に検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。
［９］表示部と、
前記表示部の表示面への指のタッチ操作を同時に複数検出可能なタッチパネルと、
前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部と、
前記表示部の表示内容を制御する制御部と、
を備え、
前記制御部は、前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を移動させる入力操作が同時に複数検出された場合に、各入力操作を行っている指を通じて前記人体通信部が取得した複数の操作者識別情報から、前記複数の入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更し、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定する
ことを特徴とする操作表示装置。
上記発明では、複数のタッチ操作が同時に検出された場合に、各タッチ操作を行っている指を通じた人体通信によって取得した複数の操作者識別情報から、複数のタッチ操作が一人の操作者による操作か、複数の操作者による操作かを判定する。
［１０］前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記第１入力操作及び前記第２入力操作を、一組のピンチイン操作、ピンチアウト操作又はローテーション操作であると判断する
ことを特徴とする［７］乃至［９］のいずれか１つに記載の操作表示装置。

【0013】

［１１］前記制御部は、前記複数の指のタッチによる入力操作が同一人による操作であると判定した場合は、前記複数の指のタッチによる入力操作を一組の操作と認識し、その一組の操作の内容に応じて前記表示内容を変更し、前記複数の指のタッチによる入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付ける
ことを特徴とする［１］乃至［１０］のいずれか１つに記載の操作表示装置。

【0014】

上記発明では、複数の指のタッチによる入力操作が同一人による入力操作であると判定した場合は、その複数の入力操作を一人の操作者から受けたマルチタッチ操作として扱う。複数の指のタッチによる入力操作が複数の操作者による操作であると判定した場合は、表示面を複数に分割し、それぞれの領域に個別の画面を表示して、各画面で独立した操作を受け付ける。

【0015】

［１２］前記制御部は、前記複数の指のタッチによる入力操作が複数の操作者による操作であると判定した場合は、前記指形状検出部によって検出された各指の形状からそれぞれの指に対応する操作者の向きを判定し、前記複数の操作者のそれぞれに前記領域を割り当てると共に、各操作者に割り当てた領域に表示する画面を、その操作者の向きに応じた向きにする
ことを特徴とする［７］または［８］を引用する［１０］を引用する［１１］、または、［１］乃至［８］のいずれか１つを引用する［１１］に記載の操作表示装置。

【0016】

上記発明では、分割後の各領域に表示する画面は、その領域に割り当てた操作者の向きに合わせた向きになる。なお、タッチ操作に対してそのタッチ操作が含まれる領域を優先的に割り当てるとよい。

【0017】

［１３］前記制御部は、前記表示面を複数に分割する際の分割方向を、前記複数の指のタッチによる入力操作に係る指の接触位置の前記表示面内での分散状況に応じて変更する
ことを特徴とする［１１］または［１２］に記載の操作表示装置。

【0018】

上記発明では、たとえば、複数のタッチ操作が左右に分散している場合は左右に表示面を分割し、上下に分散している場合は上下に表示面を分割する。

【0019】

［１４］前記制御部は、予め用意された複数の分割パターンの中から、前記表示面を前記複数の操作者の人数に対応する複数の領域に分割する分割パターンであってそれぞれの領域に一人分ずつ指のタッチによる入力操作が分散される分割パターンを優先的に選択し、その選択した分割パターンに従って前記表示面を分割する
ことを特徴とする［１１］乃至［１３］のいずれか１つに記載の操作表示装置。

【0020】

上記発明では、分割後の各領域に１つずつタッチ操作が含まれるような分割パターンが選択される。

【0022】

［１５］前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記表示部の表示内容を拡大又は縮小する
ことを特徴とする［１］乃至［１０］のいずれか１つに記載の操作表示装置。
［１６］前記制御部は、前記タッチパネルによって検出された複数の入力操作が同一人による操作でないと判定する場合、前記第１入力操作及び前記第２入力操作をそれぞれ第１操作者及び第２操作者によるフリック操作と判断する
ことを特徴とする［７］乃至［１０］のいずれか１つに記載の操作表示装置。

【0023】

［１７］前記制御部は、前記複数の入力操作が同一人による操作であると判定した場合は、前記複数の入力操作を一組の操作と認識し、その一組の入力操作の内容に応じて前記表示内容を変更し、前記複数の入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付ける
ことを特徴とする［９］に記載の操作表示装置。

【0024】

上記発明では、複数の指のタッチによる入力操作が同一人による操作であると判定した場合は、その複数の入力操作を一人の操作者から受けたマルチタッチ操作として扱う。複数の入力操作が複数の操作者による操作であると判定した場合は、表示面を複数に分割し、それぞれの領域に個別の画面を表示して、各画面で独立した操作を受け付ける。

【0025】

［１８］前記制御部は、前記領域に表示する画面内に操作者情報の入力欄がある場合は、前記人体通信部によって取得した操作者識別情報に基づいて前記入力欄に操作者情報を自動設定する
ことを特徴とする［１７］に記載の操作表示装置。

【0026】

上記発明では、人体通信部によって取得した操作者識別情報に基づく操作者情報が該当する入力欄に自動設定される。

【0027】

［１９］前記制御部は、分割直前に前記表示部に表示されていた画面と同じ内容の画面を分割後の各領域に表示する
ことを特徴とする［１１］乃至［１４］、［１７］、［１８］のいずれか１つに記載の操作表示装置。

【0028】

上記発明では、分割前に表示していた画面と同じ内容の画面（レイアウトやサイズは異なっても良い）が分割後の各領域に表示される。

【0029】

［２０］前記制御部は、セキュリティ情報の入力に使用される入力釦のある画面を分割後の各領域に表示する場合は、各領域に表示する画面のレイアウトを互いに相違させる
ことを特徴とする［１９］に記載の操作表示装置。

【0030】

上記発明では、レイアウトを相違させることで、隣の操作者から覗き見されても、操作内容が推測され難くなる。

【0031】

［２１］前記制御部は、セキュリティ情報の入力に使用される複数の入力釦のある画面を分割後の各領域に表示する場合は、各領域に表示する画面における前記複数の入力釦の配置を互いに相違させる
ことを特徴とする［１９］または［２０］に記載の操作表示装置。

【0032】

上記発明では、入力釦のキー配置を相違させることで、隣の操作者から覗き見されても、操作内容が推測され難くなる。

【0033】

［２２］表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、
前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記複数の入力操作のそれぞれについて前記人体通信部が前記操作者識別情報を取得した場合は、前記操作者識別情報に基づいて、前記複数の指による入力操作が同一人によるものである否かを判定するように動作させる
ことを特徴とするプログラム。
［２３］前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定するように動作させる
ことを特徴とする［２２］に記載のプログラム。
［２４］前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とする［２２］または［２３］に記載のプログラム。
［２５］表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記人体通信部が、前記複数の入力操作の一部についてのみ前記操作者識別情報を取得する場合は、前記複数の入力操作が同一人による操作でないと判定するように動作させる
ことを特徴とするプログラム。
［２６］前記情報処理装置を、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とする［２５］に記載のプログラム。
［２７］表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部と、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記人体通信部が、前記複数の入力操作の全てについて前記操作者識別情報を取得できない場合は、前記指の形状に基づいて、前記複数の入力操作が同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。
［２８］前記情報処理装置を、前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とする請求項２２乃至２７のいずれか１つに記載のプログラム。
［２９］表示部と、前記表示部の表示面への指のタッチによる入力操作を同時に複数検出可能なタッチパネルと、前記入力操作において前記表示面に接触している部分の指の形状を検出する指形状検出部とを備えた情報処理装置を、
前記タッチパネルによって前記表示面上への複数の指のタッチによる入力操作が同時検出された場合に、前記指形状検出部によって検出された各入力操作に係る指の形状から前記複数の指のタッチによる入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。

【0034】

［３０］表示部と、前記表示部の表示面への指のタッチ操作を同時に複数検出可能なタッチパネルと、前記表示面に指が接触している操作者の体を通じて端末装置と通信して前記操作者を一意に特定する操作者識別情報を前記端末装置から取得する人体通信部とを備えた情報処理装置を、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を移動させる入力操作が同時に複数検出された場合に、各入力操作を行っている指を通じて前記人体通信部が取得した複数の操作者識別情報から、前記複数の入力操作が同一人による操作であるか否かを判定し、その同一人による操作であるか否かの判定結果に応じて前記表示部の表示内容を変更するように動作させ、
前記タッチパネルによって、前記表示面上に対する、所定の箇所への指によるタッチ後タッチされた箇所を第１方向に移動させる第１入力操作と、所定の箇所への指によるタッチ後タッチされた箇所を前記第１方向とは逆の第２方向に移動させる第２入力操作とが同時に検出された場合に、前記第１入力操作と前記第２入力操作とが同一人による操作であるか否かを判定するように動作させる
ことを特徴とするプログラム。
［３１］前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記第１入力操作及び前記第２入力操作を、一組のピンチイン操作、ピンチアウト操作又はローテーション操作であると判断するように動作させる
ことを特徴とする［２８］乃至［３０］のいずれか１つに記載のプログラム。
［３２］前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作であると判定する場合、前記表示部の表示内容を拡大又は縮小するように動作させる
ことを特徴とする［２２］乃至［３１］のいずれか１つに記載のプログラム。
［３３］前記情報処理装置を、前記タッチパネルによって検出された複数の入力操作が同一人による操作でないと判定する場合、前記第１入力操作及び前記第２入力操作をそれぞれ第１操作者及び第２操作者によるフリック操作と判断するように動作させる
ことを特徴とする［２８］乃至［３１］のいずれか１つに記載のプログラム。

【0035】

［３４］前記情報処理装置を、
前記複数の入力操作が同一人による操作であると判定した場合は、前記複数の入力操作を一組の操作と認識し、その一組の入力操作の内容に応じて前記表示内容を変更し、前記複数の入力操作が複数の操作者による操作であると判定した場合は、前記複数の操作者の人数に対応する複数の領域に前記表示面を分割し、それぞれの領域に個別の画面を表示して、それぞれの画面で独立した操作を受け付けるように機能させる
ことを特徴とする［２２］乃至［３１］のいずれか１つに記載のプログラム。

【発明の効果】

【0036】

本発明に係る操作表示装置およびプログラムによれば、同時に検出された複数箇所へのタッチ操作が一人の操作者によるマルチタッチ操作であるか複数人の操作者による個別のシングルタッチ操作であるかを的確に判定することができる。

【図面の簡単な説明】

【0037】

【図1】本発明の実施の形態に係る操作表示装置を一人の操作者が操作する様子を示す説明図である。

【図2】本発明の実施の形態に係る操作表示装置を二人の操作者が同時に操作する様子を示す説明図である。

【図3】本発明の実施の形態に係る操作表示装置の電気的概略構成を示すブロック図である。

【図4】一人の操作者からピンチアウト操作を受けた場合における表示の変化例を示す説明図である。

【図5】同時に検出された複数の操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合における分割表示の例を示す説明図である。

【図6】同時に検出された複数の操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合における分割表示の他の一例を示す説明図である。

【図7】上下に表示面を分割する場合の一例を示す説明図である。

【図8】接触位置の分散状況と分割方向との関係を示す説明図である。

【図9】分割方向を決定する別の判断基準を示す説明図である。

【図10】３人の操作者によるシングルタッチ操作を同時に検出して表示面Ｓを３つの領域に分割する場合の表示例を示す説明図である。

【図11】複数の操作を同時に検出する際に操作表示装置のＣＰＵが行う処理の流れを示す流れ図である。

【図12】複数操作処理（図１１のステップＳ１１１）の詳細を示す流れ図である。

【図13】表示面Ｓに対する指のタッチ操作を受けて人体通信を行う様子を示す説明図である。

【図14】本発明の第２の実施の形態に係る操作表示装置の電気的概略構成を示すブロック図である。

【図15】人体通信を行う端末装置の電気的概略構成を示すブロック図である。

【図16】同時に検出された複数の操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合の表示の変化例を示す説明図である。

【図17】複数の操作を同時に検出する際に第２の実施の形態に係る操作表示装置が行う処理の流れを示す流れ図である。

【図18】第２の複数操作処理（図１７のステップＳ３１３）の詳細を示す流れ図である。

【図19】操作表示装置の機能を組み込んだ複合機の構成例を示すブロック図である。

【図20】複合機、操作表示装置、端末装置などがネットワークを通じて通信可能に接続されたシステム構成例を示す図である。

【発明を実施するための形態】

【0038】

以下、図面に基づき本発明の各種の実施の形態を説明する。

【0039】

図１は、本発明の第１の実施の形態に係る操作表示装置１０を一人の操作者Ａが操作する様子を示し、図２は、操作表示装置１０を二人の操作者Ａ、Ｂが同時に操作する様子を示している。

【0040】

操作表示装置１０は、Ｂ５サイズほどの平板形状を成した携帯端末である。なお、各図では、操作表示装置１０に比べて操作者のサイズを十分小さく描いてある。

【0041】

操作表示装置１０の表面のほぼ全域は各種の操作画面を表示する表示部の表示面Ｓになっている。また、表示面Ｓ上のほぼ全面に渡り、操作者の指の接触による各種の操作（タッチ操作）を検出するタッチパネル部１７（図３参照）が設けてある。

【0042】

タッチパネル部１７は、複数のタッチ操作を同時に検出する機能を有する。詳細には、表示面Ｓに指が接触している接触位置３１を、同時に複数検出可能に構成されている。また、操作表示装置１０は、表示面Ｓに接触している部分における指の形状（以後、単に、指の形状とも呼ぶ）を検出する指形状検出部２４（図３参照）を備えている。

【0043】

図１では、各接触位置３１において表示面Ｓに接触している部分の指の輪郭を描いてある。操作表示装置１０は、表示面Ｓ上に複数の接触位置３１が同時に存在することを検出した場合に、各接触位置３１に対応する指の形状からその複数の接触位置３１に係る複数のタッチ操作が一人の操作者による操作であるか、複数の操作者による操作であるかを判定し、その判定結果に応じて表示内容を変更するようになっている。

【0044】

たとえば、図１に示すように、２つの接触位置３１ａ、３１ｂが表示面Ｓ上に同時に存在することが検出されたとき、それらの接触位置３１ａ、３１ｂに接触している部分の指の形状から、それら２箇所の接触位置３１ａ、３１ｂに係るタッチ操作を行った操作者が同一人であるか否かを判断する。同一人と判断した場合は、その２箇所の接触位置３１ａ、３１ｂに係る２つのタッチ操作を一人の操作者によるマルチタッチ操作と認識する。同図では、２箇所の接触位置３１ａ、３１ｂが、図中の矢印３３、３４に示すように、表示面Ｓに接触した後、互いに次第に離れるマルチタッチ操作、すなわち、一人の操作者によるピンチアウト操作を受けたと認識する。

【0045】

一方、図２に示すように、２箇所の接触位置３１ａ、３１ｂに係る２つのタッチ操作を行った操作者が同一人でないと判断した場合は、その２箇所の接触位置３１ａ、３１ｂに係る２つのタッチ操作を二人の操作者による個別のシングルタッチ操作と認識する。図２では、接触位置３１ａに係るタッチ操作を左方向へのフリック操作と認識し、接触位置３１ｂに係るタッチ操作を別の操作者による右方向へのフリック操作と認識する。

【0046】

なお、同時に検出される複数のタッチ操作は、同時にタッチが開始される必要はなく、操作者Ａがタッチした後、そのタッチが続いている間に操作者Ｂがタッチするというような場合も含まれる。すなわち、タッチ開始のタイミングが異なっていても、双方ともタッチしている状態がある時点で検出されればよい。

【0047】

図３は、操作表示装置１０の電気的概略構成を示している。操作表示装置１０は、当該操作表示装置１０の動作を統括制御する制御部としてのＣＰＵ１１にバスを通じて、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、不揮発メモリ１４、表示部１５、操作部１６、ネットワーク通信部２１、画像処理部２２、ハードディスク装置２３、指形状検出部２４などを接続して構成される。

【0048】

ＲＯＭ１２には、各種プログラムやデータが格納され、これらのプログラムに従ってＣＰＵ１１が各種の処理を実行することで操作表示装置１０としての各機能が実現される。ＲＡＭ１３はＣＰＵ１１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリや表示データを一時記憶するメモリとして使用される。

【0049】

不揮発メモリ１４は、電源がオフになっても記憶内容が保持されるメモリである。不揮発メモリ１４には、各種の設定内容、ユーザ情報、通信情報（ネットワークアドレスなど）などが記憶される。また、検出された指の接触位置３１毎に、その接触位置の位置情報および指の形状に関する情報、当該接触位置に係る操作を行った操作者の識別情報などを関連付けて記憶する管理テーブル１４ａが記憶される。

【0050】

ハードディスク装置２３は、大容量、不揮発の記憶装置である。管理テーブル１４ａはハードディスク装置２３に記憶されてもよいし、ＲＡＭ１３に記憶されてもよい。

【0051】

表示部１５は、液晶ディスプレイなどで構成され、各種の操作画面を表示する。表示部１５はＲＡＭ１３の所定領域に格納された表示データに対応する画面を表示する。ＣＰＵ１１は表示データの作成や加工を行う。操作部１６は、タッチパネル部１７および少数の操作スイッチ１８を備えている。タッチパネル部１７は、複数のタッチ操作を同時に検出する。すなわち、指が接触している接触位置を同時に複数箇所検出可能になっている。タッチパネル部１７の検出方式は、静電容量、アナログ/デジタル抵抗膜、赤外線、超音波、電磁誘導等、任意でよい。

【0052】

指形状検出部２４は、表示部１５の表示面Ｓに接触している部分の指の形状を検出する。ここでは、表示面Ｓに接触している複数の指の接触部分の形状を同時に検出することができる。指の形状を検出する方法は、接触部分の形状を光学的に読み取る方法など、任意でよい。

【0053】

ネットワーク通信部２１は、無線通信によりネットワークと接続して各種の外部装置と通信する機能を果たす。たとえば、印刷や原稿のコピー、ファックス送信などの機能を備えた複合機を当該操作表示装置１０から遠隔操作する場合、操作の対象となる複合機との間の通信に使用される。なお、操作表示装置１０は外部装置とBluetooth（登録商標）などの近距離通信で接続される構成でもよい。

【0054】

画像処理部２２は、表示部１５に表示される表示データを加工する機能を果たす。たとえば、表示データを加工して画面の拡大縮小、回転などを行う。

【0055】

ＣＰＵ１１は、タッチパネル部１７が複数のタッチ操作を同時に検出したとき、タッチパネル部１７からタッチ操作毎にその接触位置を示す情報を取得する。また各タッチ操作において表示面Ｓに接触している部分の指の形状を示す情報を指形状検出部２４から取得して解析する。この解析により、たとえば、接触部分における指の輪郭形状（もしくは輪郭の特徴）、接触面積、指の向きなどの情報を指属性として求め、これを接触位置と関連付けて管理テーブル１４ａに登録する。ＣＰＵ１１は、各接触位置に対応する指属性を対比して操作者の同一性を判定する。たとえば、複数のタッチ操作に係る指の向き（指先の向き）の差が４５度未満ならば、それらは同一人によるタッチ操作とし、４５度以上ならば別人によるタッチ操作と判定する。そして、その判定結果に応じて表示部１５への表示内容を変更する。

【0056】

以下、その具体例を各種示す。

【0057】

図４は、一人の操作者からピンチアウト操作を受けた場合を示している。同図（ａ）に示すように、左矢印４１の根元の位置をタッチされた後、左矢印４１の向きに払う第１タッチ操作と、右矢印４２の根元の位置をタッチされた後、右矢印４２の向きに払う第２タッチ操作とを同時に検出すると、第１タッチ操作の操作者と第２タッチ操作の操作者が同一人か否かを判定する。すなわち、第１タッチ操作に係る指の接触部分の形状から得た指属性と、第２タッチ操作に係る指の接触部分の形状から得た指属性とを対比して第１タッチ操作の操作者と第２タッチ操作の操作者が同一人か否かを判定する。

【0058】

同一人と判定した場合は、第１タッチ操作と第２タッチ操作とを一人の操作者によるマルチタッチ操作と認識する。この例の場合、ピンチアウト操作と認識する。その結果、同図（ｂ）に示すように、ピンチアウト操作を受けた箇所を中心に画面を拡大表示する。

【0059】

図５は、同時に検出された複数のタッチ操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合を示している。同図（ａ）に示すように、左矢印４３の根元の位置をタッチされた後、左矢印４３の向きに払う第１タッチ操作と、右矢印４４の根元の位置をタッチされた後、右矢印４４の向きに払う第２タッチ操作とを同時に検出すると、第１タッチ操作に係る指の接触部分の形状から得た指属性と、第２タッチ操作に係る指の接触部分の形状から得た指属性とを対比して第１タッチ操作の操作者と第２タッチ操作の操作者が同一人か否かを判定する。

【0060】

別人と判定した場合は、第１タッチ操作を第１の操作者によるシングルタッチ操作、第２タッチ操作を第２の操作者によるシングルタッチ操作と認識する。この例の場合、第１タッチ操作を第１の操作者による左方向へのフリック操作、第２タッチ操作を第２の操作者による右方向へのフリック操作と認識する。その結果、同図（ｂ）に示すように、表示部１５の表示面Ｓを２つの領域Ｓ１、Ｓ２に分割し、それぞれの領域Ｓ１、Ｓ２に個別の画面を表示し、それぞれの画面で独立した操作を受け付ける。この例では、表示面Ｓを左右に分割し、各領域Ｓ１、Ｓ２に、分割前の画面と同じ内容（項目）をレイアウトを変えて表示している。

【0061】

図５の例では、パスワードの入力を受け付けるパスワード入力画面を表示している。パスワード入力画面には、画面のタイトル５１と、ユーザ情報入力欄５２、パスワード入力欄５３、パスワード（セキュリティ情報）の入力を受けるためのテンキー５４が表示されている。

【0062】

左側の領域Ｓ１に表示したパスワード入力画面ではテンキー５４を画面の左端に寄せてあり、右側の領域Ｓ２に表示したパスワード入力画面ではテンキー５４を画面の右端に寄せてある。また、各領域Ｓ１、Ｓ２に表示したパスワード入力画面におけるテンキー５４のキー配列を相違させてある。テンキー５４はパスワード（セキュリティ情報）の入力に係る入力釦なので、操作内容が隣の操作者に分からないようにすることが重要になる。

【0063】

そこで、各領域Ｓ１、Ｓ２に表示したパスワード入力画面においてテンキー５４が互いに離れるようにレイアウトすることで、テンキー５４に対する操作が隣の操作者から見え難くなるようにしている。また、テンキー５４のキー配列を相違させることで指の動きから操作内容を想定できなくしている。

【0064】

図６は、同時に検出された複数のタッチ操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合における分割表示の他の例を示している。図６では、指形状検出部２４によって検出された各指の形状から、それぞれの指に対応する操作者の向きを認識し、各操作者に割り当てた領域Ｓ１、Ｓ２に表示する画面をそれぞれの操作者の向きに応じた向きに表示する。

【0065】

図６の例では、タッチ操作６１に係る指の形状からタッチ操作６１を行った操作者Ａの向きを矢印６３方向と判定し、タッチ操作６２に係る指の形状からタッチ操作６２を行った操作者Ｂの向きを矢印６４方向と判定した例を示している。

【0066】

すなわち、タッチ操作６１を行った操作者Ａは、頂点ＯＰＱＲ有する矩形の表示面Ｓの辺ＯＰ側に立ち、辺ＱＲ側を向いて操作していると判定する。また、タッチ操作６２を行った操作者Ｂは、表示面Ｓの辺ＱＲ側に立ち、辺ＯＰ側を向いて操作していると判定する。

【0067】

この判定結果より、同図（ｂ）に示すように、領域Ｓ１には矢印６３方向から見た場合に天地が正しく見える方向のパスワード入力画面を表示し、領域Ｓ２には矢印６４方向から見た場合に天地が正しく見える方向のパスワード入力画面を表示する。

【0068】

次に、表示面Ｓを複数に分割する際の分割方向を、複数のタッチ操作に係る指の接触位置の表示面Ｓ内での分散状況に応じて変更する場合について説明する。

【0069】

図６に示すように、タッチ操作６１の接触位置が表示面Ｓを左右に２等分した場合の左側のエリアに属し、タッチ操作６２の接触位置が右側のエリアに属している場合には、表示面Ｓを左右に分割する。一方、図７に示すように、タッチ操作７１の接触位置が表示面Ｓを上下に２等分した場合の上側のエリアに属し、タッチ操作７２の接触位置が下側のエリアに属している場合は、表示面Ｓを上下に分割する。

【0070】

なお、図７の例では、タッチ操作７１に係る指の形状からタッチ操作７１を行った操作者Ａは、頂点ＯＰＱＲ有する矩形の表示面Ｓの辺ＯＰ側に立ち、辺ＲＱ側を向いて操作していると判定され、タッチ操作７２に係る指の形状からタッチ操作７２を行った操作者Ｂは、表示面Ｓの辺ＱＲ側に立ち、辺ＯＰ側を向いて操作していると判定される。そして、この判定結果より、図７（ｂ）に示すように、領域Ｓ１には矢印７３方向から見た場合に天地が正しく見える方向のパスワード入力画面を表示し、領域Ｓ２には矢印７４方向から見た場合に天地が正しく見える方向のパスワード入力画面を表示している。

【0071】

なお、分割後の領域Ｓ１、Ｓ２に表示する画面の向きはその領域に存在するタッチ操作に係る操作者の向きに合わせてある。たとえば、図６では、左側の領域Ｓ１に存在するタッチ操作６１に対応する操作者Ａの向きに合わせて左側の領域Ｓ１に表示する画面の向きを設定し、右側の領域Ｓ２に存在するタッチ操作６２に対応する操作者Ｂの向きに合わせて右側の領域Ｓ２に表示する画面の向きを設定してある。

【0072】

分割数が２の場合には、表示面Ｓを左右に均等に分割する分割パターンと上下に均等に分割する分割パターンとを予め用意しておき、２つのタッチ操作の接触位置が各領域に１つずつ分散する方の分割パターンを選択する。

【0073】

図８は、タッチ操作に係る指の接触位置の分散状況と分割方向との関係を示している。上記分割パターンの選択を行うために、頂点ＯＰＱＲを有する矩形の表示面Ｓを縦横にそれぞれ等分割した４つのエリアＤ１〜Ｄ４を設定する。頂点Ｏを左下、頂点Ｐを右下、頂点Ｑを右上、頂点Ｒを左上とする。エリアＤ１は頂点Ｏを有する左下エリア、エリアＤ２は頂点Ｐを有する右下エリア、エリアＤ３は頂点Ｒを有する左上エリア、エリアＤ４は頂点Ｑを有する右上エリアとする。

【0074】

図８（ａ）に示すように、第１タッチ操作８１と第２タッチ操作８２が左下エリアＤ１と右下エリアＤ２に分散しているような場合は左右に分割する分割パターンを選択する。すなわち、左右方向に分散し、上下方向には上下の一方に偏っている場合は、左右に分割する。図８（ｂ）に示すように、第１タッチ操作８１と第２タッチ操作８２が右下エリアＤ２と右上エリアＤ４に分散しているような場合は上下に分割する分割パターンを選択する。すなわち、上下方向に分散し、左右方向には左右の一方に偏っている場合は、上下に分割する。

【0075】

図８（ｃ）に示すように、第１タッチ操作８１と第２タッチ操作８２が共に右下エリアＤ２（１つのエリア）に存在するような場合、すなわち、左右方向は左右の一方に偏り、かつ上下方向についても上下の一方に偏っている場合は、別途の条件で分割方向を決定する。たとえば、予め定めた方向に分割する。

【0076】

図８（ｄ）に示すように、第１タッチ操作８１が左下エリアＤ１に存在し第２タッチ操作８２が右上エリアＤ４に存在するような場合、すなわち、左右方向に分散しかつ上下方向にも分散している場合は、別途の条件で分割方向を決定する。たとえば、予め定めた方向に分割する。

【0077】

分割数がＮの場合には、表示面Ｓを左右方向に均等にＮ個に分割する場合の分割パターンと上下方向に均等にＮ個に分割する場合の分割パターンとを予め用意しておき、Ｎ個のタッチ操作の接触位置が各領域に１つずつ分散する方の分割パターンを選択する。

【0078】

図９は、分割方向を決定する別の判断基準を示している。本例では、隣り合うタッチ操作間の距離（表示面Ｓの一端に最も近いタッチ操作についてはその一端からの距離）に関して、上下方向の分散と、左右方向への分散を求め、分散の小さい方向に分割する。

【0079】

図９の例では、上下方向については、辺ＯＰから第１タッチ操作の接触位置までの距離Ｙ１と、第１タッチ操作の接触位置から第２タッチ操作の接触位置までの距離Ｙ２と、第２タッチ操作の接触位置から辺ＱＲまでの距離Ｙ３に対する分散ｋ１を求める。

【0080】

Ｙ１とＹ２とＹ３の平均値をＹａとすると、
ｋ１＝（（Ｙ１−Ｙａ）^２＋（Ｙ２−Ｙａ）^２＋（Ｙ３−Ｙａ）^２）÷３）
となる。

【0081】

左右方向については、辺ＯＲから第１タッチ操作の接触位置までの距離Ｘ１と、第１タッチ操作の接触位置から第２タッチ操作の接触位置までの距離Ｘ２と、第２タッチ操作の接触位置から辺ＰＱまでの距離Ｘ３とにおける分散ｋ２を求める。

【0082】

Ｘ１とＸ２とＸ３の平均値をＸａとすると、
ｋ２＝（（Ｘ１―Ｘａ）^２＋（Ｘ２―Ｘａ）^２＋（Ｘ３―Ｘａ）^２）÷３
となる。

【0083】

Ｋ１＞ｋ２ならば左右方向に分割し、ｋ１＜ｋ２ならば上下方向に分割する。ｋ１＝ｋ２の場合は、予め定めた方向（たとえば、横方向）に分割する。

【0084】

タッチ操作が３箇所以上の場合も同様にして分割方向を定めることができる。なお、図８に示すエリアに基づく方法を優先的に使用して分割方向を定め、この方法で分割方向を決定できない場合（図８（ｃ）、（ｄ）の場合）に、図９に示す分散に基づく方法で分割方向を決定するようにしてもよい。

【0085】

また、指の形状から求めた操作者の向きが同方向（図６（ａ）における矢印６３または矢印６４のいずれか一方に揃っている）ならば左右に分割し、操作者の向きが異なる場合にのみ上下に分割するか左右に分割するかを前述したエリアや分散に基づいて決定するようにしてもよい。

【0086】

図１０は、３人の操作者によるシングルタッチ操作を同時に検出して表示面Ｓを３つの領域Ｓ１、Ｓ２、Ｓ３に分割した場合を示している。タッチ操作６１に係る指の形状からタッチ操作６１を行った操作者Ａの向きを矢印６３方向と判定し、タッチ操作６２に係る指の形状からタッチ操作６２を行った操作者Ｂの向きを矢印６４方向と判定し、タッチ操作６５に係る指の形状からタッチ操作６５に対する操作を行った操作者Ｃの向きを矢印６６方向と判定した例を示している。

【0087】

すなわち、タッチ操作６１を行った操作者Ａは、頂点ＯＰＱＲ有する矩形の表示面Ｓの辺ＯＰ側に立ち、辺ＱＲ側を向いて操作していると判定する。また、タッチ操作６２を行った操作者Ｂは、表示面Ｓの辺ＱＲ側に立ち、辺ＯＰ側を向いて操作していると判定する。タッチ操作６５を行った操作者Ｃは、表示面Ｓの辺ＯＰ側に立ち、辺ＱＲ側を向いて操作していると判定する。

【0088】

この例では、３つのタッチ操作の接触位置が左右方向に分散しているので、表示面Ｓを左右方向に３等分する。そして、分割後の各領域Ｓ１、Ｓ２、Ｓ３内に接触位置のあるタッチ操作を優先的にその領域に割り当てると共に、各領域Ｓ１、Ｓ２、Ｓ３に割り当てたタッチ操作に係る操作者の向きに合わせてその領域Ｓ１、Ｓ２、Ｓ３に表示する画面の向きを設定して表示している。

【0089】

その結果、同図（ｂ）に示すように、領域Ｓ１には矢印６３方向から見た場合に天地が正しく見える方向のパスワード入力画面が表示され、領域Ｓ２には矢印６４方向から見た場合に天地が正しく見える方向のパスワード入力画面が表示され、領域Ｓ３には矢印６６方向から見た場合に天地が正しく見える方向のパスワード入力画面が表示される。

【0090】

図１１は、タッチ操作を検出した際に操作表示装置１０のＣＰＵ１１が行う処理の流れを示している。ＣＰＵ１１は、表示面Ｓ上へのタッチ操作（接触）の有無を監視する（ステップＳ１０１）。タッチパネル部１７が新たなタッチ操作を検出すると（ステップＳ１０１；Ｙｅｓ）、このタッチ操作の接触位置をタッチパネル部１７から取得すると共にこのタッチ操作を行った指の形状を示す情報を指形状検出部２４から取得し、これらの情報を関連付けて管理テーブル１４ａに登録する（ステップＳ１０２）。ここでは、前述した指属性と接触位置とを関連付けて管理テーブル１４ａに登録する。

【0091】

次に、同一画面に対して累計で複数箇所へのタッチ操作を検出したか否かを判断し（ステップＳ１０３）、１箇所のみの場合は（ステップＳ１０３；Ｎｏ）、当該タッチ操作がリリース（指が離された）か否かを調べる（ステップＳ１０４）。リリースされた場合は（ステップＳ１０４；Ｙｅｓ）、一人の操作者によるシングルタッチ操作であると判定し（ステップＳ１０５）、そのシングルタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ１０６）本処理を終了する。

【0092】

リリースされない場合は（ステップＳ１０４；Ｎｏ）、ステップＳ１０１に戻って新たなタッチ操作の有無を調べる。新たなタッチ操作を受けない場合は（ステップＳ１０１；Ｎｏ）、ステップＳ１０４に戻ってリリースの有無を再び調べる。

【0093】

累計で複数箇所へのタッチ操作が検出された場合は（ステップＳ１０３；Ｙｅｓ）、管理テーブル１４ａに登録されている情報から複数箇所へのタッチ操作が一人の操作者によるマルチタッチ操作か否かを判定する（ステップＳ１０７）。ここでは、各タッチ操作（管理テーブル１４ａに登録されている各接触位置）に対応する指の形、面積、向きなどの情報を対比して、同一人によるマルチタッチ操作か否かを判定する。たとえば、複数のタッチ操作のそれぞれに係る指の向きが異なる場合は、別人の操作と判定する。指の向きが同一の場合には、さらに指の形の特徴や面積の違いが所定の許容範囲内か否かを判定する。許容範囲内ならば一人の操作と判定し、許容範囲を超える場合は別人の操作と判定する。

【0094】

判定結果が「一人の操作」である場合は（ステップＳ１０８；Ｙｅｓ）、管理テーブル１４ａに登録されている複数の接触位置に対応する複数のタッチ操作を一人の操作者によるマルチタッチ操作と認識し（ステップＳ１０９）、そのマルチタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ１１１）本処理を終了する。

【0095】

判定結果が「一人の操作」でない場合は（ステップＳ１０８；Ｎｏ）、管理テーブル１４ａに登録されている複数の接触位置に対応する複数のタッチ操作を複数人の操作者による個別のシングルタッチ操作と認識し（ステップＳ１１０）、その操作に対応する処理（たとえば、前述した分割表示）を行って（ステップＳ１１１）本処理を終了する。

【0096】

図１２は、複数操作処理（図１１のステップＳ１１１）の詳細を示している。複数のタッチ操作が一人の操作者によるマルチタッチ操作の場合は（ステップＳ２０１；Ｙｅｓ）、そのマルチタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ２０２）、本処理を終了する。マルチタッチ操作には、ピンチイン、ピンチアウト、ローテーションなどがある。

【0097】

複数のタッチ操作が一人の操作者によるマルチタッチ操作でない場合は（ステップＳ２０１；Ｎｏ）、各タッチ操作に対応する指の形状（主に指の向き）からそれぞれのタッチ操作を行った操作者の顔の向きを判定する（ステップＳ２０３）。次に、前述した方法で分割方向を決定する（ステップＳ２０４）。ここでは、上下または左右のいずれかに決定する。

【0098】

次に、表示面Ｓを、操作者の数に相当する個数に、かつステップＳ２０４で決定した方向に分割する（ステップＳ２０５）。次に、分割後の各領域に表示する画面の向きを決定する（ステップＳ２０６）。詳細には、各タッチ操作に対応する操作者に分割後の領域を１つずつ割り当てる。ここでは、操作者に割り当てる領域にその操作者の指の接触位置が優先的に含まれるようにして、領域を割り当てる。そして、それぞれの領域に表示する画面の向きを、その領域が割り当てられた操作者の向きに応じた向きに設定する。

【0099】

次に、各領域に表示する画面のレイアウトを決定する。図５で説明したように、他の操作者からの覗き見による情報漏えいを防止するために、セキュリティ情報を入力するための操作釦（テンキー５４など）やセキュリティ情報の入力欄５３の配置やキー配列を決定する。また、領域のサイズや形状に合わせて画面のレイアウト、各表示オブジェクトのサイズ、文字サイズなどを決定する。

【0100】

そして、上記決定した内容に従って各領域に個別の画面を表示し、それぞれの画面で独立に操作を受け付ける状態に移行して（ステップＳ２０８）本処理を終了する。

【0101】

以上のように、本発明の第１の実施の形態に係る操作表示装置１０では、表示面Ｓへの複数のタッチ操作が同時に検出された場合に、それぞれのタッチ操作に係る指の形状から、複数のタッチ操作が一人の操作者によるマルチタッチ操作であるか、複数人の操作者による個別のシングルタッチ操作であるかを判定することができる。

【0102】

次に、本発明の第２の実施の形態について説明する。

【0103】

第２の実施の形態では、図１３に示すように、表示面Ｓに対する指によるタッチ操作を受けたとき、その指を含む操作者の体を通じてこの操作者が身につけている端末装置１１０と通信（人体通信）を行って、この端末装置１１０から操作者を一意に特定する操作者識別情報を取得し、このタッチ操作を行った操作者を特定する。複数のタッチ操作が同時に検出された場合には、各タッチ操作に対応する操作者識別情報を取得し、これらを比較することで、複数のタッチ操作が一人の操作者によるマルチタッチ操作か否かを判定するようになっている。

【0104】

図１４は、第２の実施の形態に係る操作表示装置１０Ｂの電気的概略構成を示している。図３に示す第１の実施の形態に係る操作表示装置１０と同一構成の部分には同一の符号を付してあり、それらの説明は適宜省略する。操作表示装置１０Ｂは、当該操作表示装置１０Ｂの動作を統括制御する制御部としてのＣＰＵ１１にバスを通じて、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、不揮発メモリ１４、表示部１５、操作部１６、ネットワーク通信部２１、画像処理部２２、ハードディスク装置２３、外部端末通信部２５などを接続して構成される。

【0105】

外部端末通信部２５は人体通信により外部の端末装置１１０と通信する機能を果たす。人体を通信路とする人体通信には、電流方式や電界方式などがある。ここでは、表示面Ｓ上に多数の電極を配置しておき、操作者の指が表示面Ｓ上のいずれかの電極に触れると、その電極から操作者の指および体に微弱な電流を流して、該操作者が身に着けている端末装置１１０と通信するようになっている。複数の操作者が同時に表示面Ｓにタッチしている状態であっても、それぞれのタッチ位置（接触位置）に対応する電極を通じて個別に人体通信することが可能になっている。

【0106】

不揮発メモリ１４に記憶される管理テーブル１４ａには、検出された指の接触位置毎に、その接触位置の位置情報とその接触位置に対応する電極を通じた人体通信によって取得できた操作者識別情報とが関連付けて登録される。

【0107】

ＣＰＵ１１は、タッチパネル部１７が新たなタッチ操作を検出する毎に、そのタッチ操作の接触位置にある電極を通じた人体通信により、該接触位置へのタッチ操作を行った操作者の操作者識別情報を取得する。詳細には、端末装置１１０に対して操作者識別情報の取得要求を送信し、該取得要求に対する応答として端末装置１１０から操作者識別情報を受信する。そして、接触位置の情報と受信した操作者識別情報とを関連付けて管理テーブル１４ａに登録する。複数のタッチ操作が同時に検出された場合には、管理テーブル１４ａに登録されている複数の接触位置に対応する操作者識別情報を比較することで、操作者の同一性を判定し、その判定結果に応じて表示部１５への表示内容を変更する。

【0108】

図１５は、端末装置１１０の電気的概略構成を示している。端末装置１１０は、当該端末装置１１０の動作を統括制御する制御部としてのＣＰＵ１１１にバスを通じて、ＲＯＭ１１２、ＲＡＭ１１３、記憶部１１４、データ入力部１１５、本体通信部１１６などを接続して構成される。端末装置１１０は、たとえば、カード型(例えば従業員証に埋め込む)、腕時計型、鍵型などの形態とすることができる。

【0109】

ＲＯＭ１１２には、プログラムやデータが格納され、このプログラムに従ってＣＰＵ１１１が処理を実行することで端末装置１１０としての機能が実現される。ＲＡＭ１１３はＣＰＵ１１１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリとして使用される。

【0110】

記憶部１１４には、操作者識別情報（認証情報）が記憶される。記憶部１１４は不揮発メモリである。データ入力部１１５は、記憶部１１４に記憶される操作者識別情報を外部から入力するインターフェイス部としての機能を果たす。本体通信部１１６は、人体通信により、操作表示装置１０Ｂと各種の情報を送受信する機能を果たす。

【0111】

端末装置１１０は、人体通信により操作表示装置１０Ｂから操作者識別情報の取得要求を受けると、記憶部１１４から操作者識別情報を読み出し、これを該取得要求に対する応答として、本体通信部１１６から操作表示装置１０Ｂへ人体通信によって送信するように動作する。

【0112】

図１６は、同時に検出された複数のタッチ操作が二人の操作者からの個別のシングルタッチ操作であると判定した場合を示している。同図（ａ）に示すように、左矢印４３の根元の位置をタッチされた後、左矢印４３の向きに払う第１タッチ操作と、右矢印４４の根元の位置をタッチされた後、右矢印４４の向きに払う第２タッチ操作とを同時に検出すると、第１タッチ操作に係る指を通じた人体通信によって第１タッチ操作の操作者の端末装置１１０から取得した操作者識別情報と、第２タッチ操作に係る指を通じた人体通信によって第２タッチ操作の操作者の端末装置１１０から取得した操作者識別情報とを対比して、第１タッチ操作の操作者と第２タッチ操作の操作者が同一人か否かを判定する。

【0113】

別人と判定した場合は、第１タッチ操作を第１の操作者によるシングルタッチ操作、第２タッチ操作を第２の操作者によるシングルタッチ操作と認識する。この例の場合、第１タッチ操作を第１の操作者による左方向へのフリック操作、第２タッチ操作を第２の操作者による右方向へのフリック操作と認識する。その結果、同図（ｂ）に示すように、表示部１５の表示面Ｓを２つの領域Ｓ１、Ｓ２に分割し、それぞれの領域Ｓ１、Ｓ２に個別の画面を表示し、それぞれの画面で独立した操作を受け付ける。この例では、表示面Ｓを左右に分割し、各領域Ｓ１、Ｓ２に、分割前の画面と同じ内容（項目）をレイアウトを変えて表示している。

【0114】

図１６において表示している画面は、図５と同様のパスワード入力画面であり、隣の操作者の覗き見によるセキュリティ情報の漏洩を防止するために、分割後の左側の領域Ｓ１に表示したテンキー５４と右側の領域Ｓ２に表示したテンキー５４とが互いに離れるように表示面Ｓの左端と右端に分けて配置してある。また、各領域Ｓ１、Ｓ２に表示したパスワード入力画面におけるテンキー５４のキー配列を相違させてある。

【0115】

さらに、第２の実施の形態に係る操作表示装置１０Ｂは、人体通信によって端末装置１１０から操作者識別情報を取得するので、この取得した操作者識別情報から特定される操作者の名前などをユーザ情報入力欄５２に自動で設定している。

【0116】

この例では、表示面Ｓを左右に分割し、左矢印４３の向きに払う第１タッチ操作の操作者に左側の領域Ｓ１を割り当て、第１タッチ操作の操作者の端末装置１１０から取得した操作者識別情報（操作者名：鈴木）を、左側の領域Ｓ１のユーザ情報入力欄５２に設定している。また、右矢印４４の向きに払う第２タッチ操作の操作者に右側の領域Ｓ２を割り当て、第２タッチ操作の操作者の端末装置１１０から取得した操作者識別情報（操作者名：佐藤）を、右側の領域Ｓ２のユーザ情報入力欄５２に設定している。

【0117】

第２の実施の形態に係る操作表示装置１０Ｂにおいても、第１の実施の形態の場合と同様に表示面Ｓを分割する際の分割方向を、複数のタッチ操作の接触位置の分散状況から判定するようになっている。なお、第２の実施の形態に係る操作表示装置１０Ｂでは、操作者の向きを判定できないため、画面の向きは、分割前と同じ方向にする。

【0118】

図１７は、複数のタッチ操作を同時に検出する際に操作表示装置１０ＢのＣＰＵ１１が行う処理の流れを示している。ＣＰＵ１１は、タッチパネル部１７がタッチ操作（接触）を検出したか否かを監視する（ステップＳ３０１）。タッチパネル部１７が新たなタッチ操作を検出すると（ステップＳ３０１；Ｙｅｓ）、このタッチ操作を行った指を通じた人体通信により操作者識別情報の取得を試みる。操作者識別情報を取得できた場合は（ステップＳ３０２；Ｙｅｓ）、その取得した操作者識別情報とタッチパネル部１７から取得した接触位置を示す情報とを関連付けて管理テーブル１４ａに登録し（ステップＳ３０３）、ステップＳ３０５へ移行する。

【0119】

人体通信による操作者識別情報を取得できなかった場合は（ステップＳ３０２；Ｎｏ）、不特定を示す操作者識別情報（たとえば、ビジターとして登録する）と、タッチパネル部１７から取得した接触位置を示す情報とを関連付けて管理テーブル１４ａに登録し（ステップＳ３０４）、ステップＳ３０５へ移行する。

【0120】

次に、同一画面に対して累計で複数箇所へのタッチ操作を検出したか否かを判断し（ステップＳ３０５）、１箇所のみの場合は（ステップＳ３０５；Ｎｏ）、当該タッチ操作がリリース（指が離された）か否かを調べる（ステップＳ３０６）。リリースされた場合は（ステップＳ３０６；Ｙｅｓ）、一人の操作者によるシングルタッチ操作であると判定し（ステップＳ３０７）、そのシングルタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ３０８）本処理を終了する。

【0121】

リリースされない場合は（ステップＳ３０６；Ｎｏ）、ステップＳ３０１に戻って新たなタッチ操作の有無を調べる。新たなタッチ操作を受けない場合は（ステップＳ３０１；Ｎｏ）、ステップＳ３０６に戻ってリリースの有無を再び調べる。

【0122】

累計で複数箇所へのタッチ操作が検出された場合は（ステップＳ３０５；Ｙｅｓ）、管理テーブル１４ａに登録されている情報から複数箇所へのタッチ操作が一人の操作者によるマルチタッチ操作か否かを判定する（ステップＳ３０９）。管理テーブル１４ａに登録されている操作者識別情報が不特定以外であってすべて同一の場合は一人の操作者による操作と判定する。管理テーブル１４ａに登録されている操作者識別情報が同一でない場合、およびすべて不特定の場合は、複数人の操作者による操作であると判定する。たとえば、管理テーブル１４ａに２個の登録がある場合、それらの操作者識別情報が、操作者Ａと操作者Ｂの場合、操作者Ａと不特定の場合、不特定と不特定の場合はいずれも複数人の操作者による操作であると判定する。

【0123】

判定結果が「一人の操作」である場合は（ステップＳ３１０；Ｙｅｓ）、管理テーブル１４ａに登録されている複数の接触位置に対応する複数のタッチ操作を一人の操作者によるマルチタッチ操作と認識し（ステップＳ３１１）、そのマルチタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ３１３）本処理を終了する。

【0124】

判定結果が「一人の操作」でない場合は（ステップＳ３１０；Ｎｏ）、管理テーブル１４ａに登録されている複数の接触位置に係る複数のタッチ操作を複数人の操作者による個別のシングルタッチ操作と認識し（ステップＳ３１２）、その操作に対応する処理（たとえば、前述した分割表示）を行って（ステップＳ３１３）本処理を終了する。

【0125】

図１８は、第２の複数操作処理（図１７のステップＳ３１３）の詳細を示している。複数のタッチ操作が一人の操作者によるマルチタッチ操作の場合は（ステップＳ４０１；Ｙｅｓ）、そのマルチタッチ操作に対応する処理（表示の変更や操作の内容を複合機本体などへ出力する処理）を行って（ステップＳ４０２）、本処理を終了する。

【0126】

複数のタッチ操作が一人の操作者によるマルチタッチ操作でない場合は（ステップＳ４０１；Ｎｏ）、接触位置の分散状況から表示面Ｓの分割方向を決定する（ステップＳ４０３）。そして、表示面ＳをステップＳ４０３で決定した分割方向でかつ操作者の数に相当する個数に分割する（ステップＳ４０４）。

【0127】

次に、各領域に表示する画面のレイアウトを決定する（ステップＳ４０５）。図５で説明したように、他の操作者からの覗き見による情報漏えいを防止するために、セキュリティ情報を入力するための操作釦（テンキー５４など）やセキュリティ情報の入力欄５３の配置やキー配列を決定する。また、領域のサイズや形状に合わせて画面のレイアウト、各表示オブジェクトのサイズ、文字サイズなどを決定する。

【0128】

次に、表示対象の画面に、操作者識別情報から自動設定可能な入力欄が存在する場合は、その入力欄に、操作者名など操作者識別情報から特定される操作者情報を自動設定する（ステップＳ４０６）。

【0129】

そして、上記決定した内容に従って各領域に個別の画面を表示し、それぞれの画面で独立に操作を受け付ける状態に移行して（ステップＳ４０７）本処理を終了する。

【0130】

以上のように、本発明の第２の実施の形態に係る操作表示装置１０Ｂでは、タッチ操作を受ける度に、そのタッチ操作を行った指を含む操作者の体を通じた人体通信によってこの操作者が身につけている端末装置から操作者識別情報を取得し、この操作者識別情報とタッチ操作を受けた接触位置とを関連付けて登録するので、複数のタッチ操作が同時に検出された場合には、各接触位置に対応する操作者識別情報を比較することで、複数のタッチ操作が一人の操作者によるマルチタッチ操作か否かを判定することができる。

【0131】

また、操作者識別情報から設定可能な入力欄に対する入力を自動的に行うので、操作者の操作負担が軽減される。また、操作者情報を入力欄に自動設定することで、分割後の複数の中のどの画面を操作すべきかを操作者に容易に認識させることができる。

【0132】

＜変形例＞
第１、第２の実施の形態に示す操作表示装置１０、１０Ｂは、操作対象とする装置本体と一体に構成されてもよい。図１９は、複合機２００に操作表示装置１０、１０Ｂを組み込んだ場合の構成例を示している。図１９に示す複合機２００は、第１の実施の形態で示した指の形状に基づく判定機能と、第２の実施の形態で示した人体通信により取得した操作者識別情報に基づく判定機能の双方を備えた装置として構成されている。

【0133】

複合機２００は、原稿画像を光学的に読み取ってその複製画像を記録紙に印刷するコピー機能、読み取った原稿の画像データをファイルにして保存したり外部端末へ送信したりするスキャン機能、パーソナルコンピュータなどの外部端末から受信した印刷ジョブに係る画像を記録紙上に形成して出力するＰＣプリント機能、画像データを送受信するファクシミリ機能などを備えた装置である。

【0134】

図１９は複合機２００の概略構成を示すブロック図である。第１、第２の実施の形態に係る操作表示装置１０、１０Ｂと同一の構成要素には同一の符号を付してあり、それらの説明は適宜省略する。

【0135】

複合機２００は、当該複合機２００の動作を制御するＣＰＵ１１にバスを介して、ＲＯＭ１２と、ＲＡＭ１３と、不揮発メモリ１４、表示部１５、操作部１６、ネットワーク通信部２１、画像処理部２２、ハードディスク装置２３、指形状検出部２４、外部端末通信部２５などが接続されて構成されている。これらは、第１、第２の実施の形態で示した操作表示装置１０、１０Ｂとしての機能を果たす構成要素である。

【0136】

さらに複合機２００は、ＣＰＵ１１にバスを通じて、スキャナ部２３１、プリンタ部２３２、ファクシミリ通信部２３３を接続して備えている。

【0137】

スキャナ部２３１は、原稿画像を光学的に読み取って画像データを取得する。スキャナ部２３１は、たとえば、原稿に光を照射する光源と、その反射光を受けて原稿を幅方向に１ライン分読み取るラインイメージセンサと、原稿からの反射光をラインイメージセンサに導いて結像させるレンズやミラーなどからなる光学系のほか、ミラーや光源を移動させてライン単位の読取位置を原稿の長さ方向に順次移動させる移動機構などを備えて構成されている。

【0138】

プリンタ部２３２は、画像データに基づく画像を電子写真プロセスによって記録紙上に形成して出力する。プリンタ部２３２は、たとえば、記録紙の搬送装置と、感光体ドラムと、帯電装置と、入力される画像データに応じて点灯制御されるＬＤ（Laser Diode）と、ＬＤから射出されたレーザ光を感光体ドラム上で走査させる走査ユニットと、現像装置と、転写分離装置と、クリーニング装置と、定着装置とを有する、いわゆるレーザープリンタとして構成されている。レーザ光に代えてＬＥＤ（Light Emitting Diode）で感光体ドラムを照射するＬＥＤプリンタのほか他の方式のプリンタであってもかまわない。

【0139】

ファクシミリ通信部２３３は、ファクシミリ通信に係るプロトコル制御を行って、ファクシミリ送受信を行う。

【0140】

ＲＯＭ１２には、各種プログラムやデータが格納され、これらのプログラムに従ってＣＰＵ１１が各種の処理を実行することで操作表示装置１０、１０Ｂとしての各機能および複合機２００としての各機能が実現される。ＲＡＭ１３は、複合機２００が扱う画像データを一時的に保存するエリアとしても使用される。

【0141】

ハードディスク装置２３には、スキャナ部２３１で読み取られた原稿の画像データや、外部ＰＣ（パーソナルコンピュータ）などから受信した印刷データや、ファクシミリ受信した画像データなどの保存に使用される。

【0142】

表示部１５は、当該複合機２００を操作するための各種の操作画面や設定画面を表示し、操作部１６は複合機２００を動作させるための各種の操作を操作者から受け付ける。表示部１５および操作部１６は、複合機２００の操作パネル２４０を構成する。

【0143】

画像処理部２２は、画像データに対して、画像補正、回転、拡大／縮小、圧縮／伸張など各種の画像処理を施す。

【0144】

複合機２００では、指の形状に基づく判定機能と、人体通信によって取得した操作者識別情報に基づく判定機能の双方を備えている。両判定機能を備えている複合機２００における操作表示装置は次のように動作する。

【0145】

表示面Ｓ上へのタッチ操作を受ける毎に、そのタッチ操作を受けた指の形状に関する情報（指属性）と接触位置とを関連付けて管理テーブル１４ａに登録する。さらに、人体通信によって操作者の操作者識別情報を取得できた場合は、この取得した操作者識別情報を接触位置に関連付けて管理テーブル１４ａに登録する。

【0146】

複数のタッチ操作が同時に検出された場合の処理は以下のようになる。複数のタッチ操作のそれぞれについて操作者識別情報を取得できた場合は、操作者識別情報に基づいてその複数のタッチ操作が一人の操作者によるマルチタッチ操作であるか否かを判定する。一部のタッチ操作に関してのみ操作者識別情報を取得でき、他のタッチ操作に係る操作者識別情報を取得できない場合は、複数人の操作者による操作であると認識する。すべてのタッチ操作について操作者識別情報を取得できない場合は、指の形状に基づいて、その複数のタッチ操作が一人の操作者によるマルチタッチ操作であるか否かを判定する。

【0147】

また、指の形状に基づいて各操作者の向きを判定し、分割後の各領域に表示する画面の向きを、その領域に割り当てた操作者の向きに応じた向きに設定する。さらに、操作者識別情報を取得できた場合は、その操作者識別情報から特定される操作者の情報を該当する入力欄に自動設定する。

【0148】

以上のように、指の形状に基づく判定機能と人体通信によって取得される操作者識別情報に基づく判定機能の双方を備える場合、一方のみを備える場合に比べて、同時に検出された複数のタッチ操作が一人の操作者によるマルチタッチ操作か複数人の操作者による操作かをより的確に判定することができる。

【0149】

図２０は、複合機２００、操作表示装置１０、１０Ｂ、端末装置１１０などがネットワークを通じて通信可能に接続されたシステム構成例を示している。たとえば、操作表示装置１０、１０Ｂは、複合機２００をリモート操作するために使用される。なお、操作表示装置１０，１０Ｂ、複合機２００はBluetooth（登録商標）などの近距離通信で接続される構成でもよい。

【0150】

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

【0151】

実施の形態では、同時に検出された複数のタッチ操作が複数人による操作であると判定したとき、その複数のタッチ操作を、個別のシングルタッチ操作と認識するようにしたが、複数のタッチ操作の中の一部に同一人による複数のタッチ操作が含まれる場合は、その複数のタッチ操作を同一人による一組の操作として扱うようにしてもよい。たとえば、同時に３箇所のタッチ操作が検出された場合に、その中の２つは同一の操作者によるタッチ操作で、他の１つは別の操作者によるタッチ操作であると判定したとき、表示面Ｓの分割数を「２」とするように制御する。

【0152】

実施の形態では、同時に検出された複数のタッチ操作が複数人の操作者によるタッチ操作であると判定したときの処理として、表示面Ｓを複数の領域に分割してそれぞれの領域に個別の画面を表示し、それぞれの画面で独立に操作を受けるようにしたが、他の処理を行うようにしてもよい。たとえば、１つの画面で同時に複数の操作を受け付け可能であれば、それぞれの操作に対応した複数の処理を実行するようにしてもよい。

【符号の説明】

【0153】

１０、１０Ｂ…操作表示装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１４ａ…管理テーブル
１５…表示部
１６…操作部
１７…タッチパネル部
１８…操作スイッチ
２１…ネットワーク通信部
２２…画像処理部
２３…ハードディスク装置
２４…指形状検出部
２５…外部端末通信部
３１、３１ａ、３１ｂ…接触位置
３３、３４、４１、４２、４３、４４…タッチ操作の方向（矢印）
５１…画面のタイトル
５２…ユーザ情報入力欄
５３…パスワード入力欄
５４…テンキー
６１、６２、６５…タッチ操作
６３、６４、６６…タッチ操作の方向（矢印）
７１、７２…タッチ操作
７３、７４…タッチ操作の方向（矢印）
８１…第１タッチ操作
８２…第２タッチ操作
１１０…端末装置
１１１…ＣＰＵ
１１２…ＲＯＭ
１１３…ＲＡＭ
１１４…記憶部
１１５…データ入力部
１１６…本体通信部
２００…複合機
２３１…スキャナ部
２３２…プリンタ部
２３３…ファクシミリ通信部
２４０…操作パネル
Ａ、Ｂ、Ｃ…操作者
Ｄ１〜Ｄ４…分割基準となるエリア
Ｓ…表示面
Ｓ１〜Ｓ３…分割後の領域

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】