特許 6443224 画像処理連携システムと連携方法、画像処理装置および画像処理連携プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6443224

(24)【登録日】2018年12月7日

(45)【発行日】2018年12月26日

(54)【発明の名称】画像処理連携システムと連携方法、画像処理装置および画像処理連携プログラム

(51)【国際特許分類】

   H04N 1/00 20060101AFI20181217BHJP

   G06F 3/048 20130101ALI20181217BHJP

   B41J 29/38 20060101ALI20181217BHJP

【ＦＩ】

   H04N1/00 127Z

   H04N1/00 C

   G06F3/048

   B41J29/38 Z

【請求項の数】18

【全頁数】24

(21)【出願番号】特願2015-107646(P2015-107646)

(22)【出願日】2015年5月27日

(65)【公開番号】特開2016-225709(P2016-225709A)

(43)【公開日】2016年12月28日

【審査請求日】2018年4月19日

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】100099885

【弁理士】

【氏名又は名称】高田 健市

(72)【発明者】

【氏名】篠崎 佑介

(72)【発明者】

【氏名】武貞 義和

(72)【発明者】

【氏名】杉本 洋彰

(72)【発明者】

【氏名】山畑 武敏

(72)【発明者】

【氏名】大野 博之

【審査官】 豊田 好一

(56)【参考文献】

【文献】 特開２０１３−００８２７９（ＪＰ，Ａ）

【文献】 特開２０００−２９８６４７（ＪＰ，Ａ）

【文献】 特開２０１５−０５３０１８（ＪＰ，Ａ）

【文献】 特開平０９−１２０３５２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ １／００

Ｂ４１Ｊ ２９／３８

Ｇ０６Ｆ ３／０４８

(57)【特許請求の範囲】

【請求項1】

相互に接続可能な画像処理装置と携帯端末装置とを備えた画像処理連携システムであって、
前記画像処理装置は、
表示手段と、
前記表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記携帯端末装置に送信する送信手段と、
前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得手段と、
前記画面サイズ取得手段により取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定手段と、
前記判定手段により、前記パーツの操作が容易でないと判定された場合には、前記送信手段により前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成手段と、
前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信手段と、
前記受信手段により受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成手段により作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行手段と、
を備え、
前記携帯端末装置は、
タッチパネルを有する表示手段と、
前記画像処理装置からの前記画面データに基づいて前記リモート画面を前記表示手段に表示させる表示制御手段と、
前記表示制御手段により前記表示手段に表示される画像処理装置の操作画面に対してユーザーの操作があったときは、前記操作に対応する操作データを前記画像処理装置に送信する送信手段と、
を備えたことを特徴とする画像処理連携システム。

【請求項2】

前記グループ領域作成手段は、パーツを同一機能に関する設定を行うためのパーツ毎にグループ分けする請求項１に記載の画像処理連携システム。

【請求項3】

前記判定手段は、前記画面サイズ取得手段により取得された前記携帯端末装置の画面サイズ、または該画面サイズを基に算出され前記携帯端末装置に表示される前記パーツの物理的サイズが、予め設定された閾値以下である場合に、前記パーツの操作が容易でないと判定する請求項１または２に記載の画像処理連携システム。

【請求項4】

前記グループ領域作成手段により作成されるグループ領域の物理的サイズが、予め設定された閾値以下であるときは、前記グループ領域作成手段は、前記閾値以下であるグループ領域内に１個または複数個のサブ領域を作成する請求項１〜３の何れかに記載の画像処理連携システム。

【請求項5】

前記携帯端末装置の表示手段に表示された前記第１の操作画面におけるグループ領域のパーツがタップ操作された場合は、画像処理装置の処理実行手段はそのグループ領域が選択されたと判定する請求項１〜４の何れかに記載の画像処理連携システム。

【請求項6】

前記携帯端末装置の表示手段に表示された前記第２の操作画面における操作可能なパーツに対しては、タップ操作、フリック操作及び携帯端末装置固有の入力手段による操作の少なくとも何れかによって操作が可能である請求項１〜５の何れかに記載の画像処理連携システム。

【請求項7】

前記処理実行手段は、前記受信手段により受信した操作データが、前記サブ領域のパーツに対する操作データである場合は、そのサブ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記サブ領域のパーツのみを操作可能とする前記第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する請求項４に記載の画像処理連携システム。

【請求項8】

前記グループ領域作成手段によるグループ領域の作成を実施するか否かをユーザー操作に基づいて設定する設定手段を備え、
前記設定手段により前記グループ領域作成手段によるグループ領域の作成を実施する設定がなされている場合にのみ、前記グループ領域作成手段は前記グループ領域を作成する請求項１〜７の何れかに記載の画像処理連携システム。

【請求項9】

相互に接続可能な画像処理装置と携帯端末装置とを備えた連携システムで実行される画像処理連携方法あって、
前記画像処理装置は、
自装置の表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記携帯端末装置に送信する送信ステップと、
前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得ステップと、
前記画面サイズ取得ステップにより取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定ステップと、
前記判定ステップにより、前記パーツの操作が容易でないと判定された場合には、前記送信ステップにより前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成ステップと、
前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信ステップと、
前記受信ステップにより受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成ステップにより作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行ステップと、
を実行し、
前記携帯端末装置は、
タッチパネルを有する表示手段に、前記画像処理装置からの前記画面データに基づいて前記リモート画面を表示させる表示制御ステップと、
前記表示制御ステップにより前記表示手段に表示される画像処理装置の操作画面に対してユーザーの操作があったときは、前記操作に対応する操作データを前記画像処理装置に送信する送信ステップと、
を実行することを特徴とする画像処理連携方法。

【請求項10】

携帯端末装置と接続するための接続手段と、
表示手段と、
前記表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記接続手段を介して接続された携帯端末装置に送信する送信手段と、
前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得手段と、
前記画面サイズ取得手段により取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定手段と、
前記判定手段により、前記パーツの操作が容易でないと判定された場合には、前記送信手段により前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成手段と、
前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信手段と、
前記受信手段により受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成手段により作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行手段と、
を備えたことを特徴とする画像処理装置。

【請求項11】

前記グループ領域作成手段は、パーツを同一機能に関する設定を行うためのパーツ毎にグループ分けする請求項１０に記載の画像処理装置。

【請求項12】

前記判定手段は、前記画面サイズ取得手段により取得された前記携帯端末装置の画面サイズ、または該画面サイズを基に算出され前記携帯端末装置に表示される前記パーツの物理的サイズが、予め設定された閾値以下である場合に、前記パーツの操作が容易でないと判定する請求項１０または１１に記載の画像処理装置。

【請求項13】

前記グループ領域作成手段により作成されるグループ領域の物理的サイズが、予め設定された閾値以下であるときは、前記グループ領域作成手段は、前記閾値以下であるグループ領域内に１個または複数個のサブ領域を作成する請求項１０〜１２の何れかに記載の画像処理装置。

【請求項14】

前記携帯端末装置の表示手段に表示された前記第１の操作画面におけるグループ領域のパーツがタップ操作された場合は、画像処理装置の処理実行手段はそのグループ領域が選択されたと判定する請求項１０〜１３の何れかに記載の画像処理装置。

【請求項15】

前記携帯端末装置の表示手段に表示された前記第２の操作画面における操作可能なパーツに対しては、タップ操作、フリック操作及び携帯端末装置固有の入力手段による操作の少なくとも何れかによって操作が可能である請求項１０〜１４の何れかに記載の画像処理装置。

【請求項16】

前記処理実行手段は、前記受信手段により受信した操作データが、前記サブ領域のパーツに対する操作データである場合は、そのサブ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記サブ領域のパーツのみを操作可能とする前記第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する請求項１３に記載の画像処理装置。

【請求項17】

前記グループ領域作成手段によるグループ領域の作成を実施するか否かをユーザー操作に基づいて設定する設定手段を備え、
前記設定手段により前記グループ領域作成手段によるグループ領域の作成を実施する設定がなされている場合にのみ、前記グループ領域作成手段は前記グループ領域を作成する請求項１０〜１６の何れかに記載の画像処理装置。

【請求項18】

表示手段を有する画像処理装置のコンピュータに、
携帯端末装置と接続する接続ステップと、
前記表示手段に表示される画像処理装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記接続ステップにより接続された前記携帯端末装置に送信する送信ステップと、
前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得ステップと、
前記画面サイズ取得ステップにより取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定ステップと、
前記判定ステップにより、前記パーツの操作が容易でないと判定された場合には、前記送信ステップにより前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成ステップと、
前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信ステップと、
前記受信ステップにより受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成ステップにより作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行ステップと、
を実行させるための画像処理連携プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、プリンタ機能、コピー機能、ファクシミリ機能、スキャン機能等の機能を備えた多機能デジタル画像処理装置であるＭＦＰ（Multi Function Peripherals）等の画像処理装置と、スマートフォンやタブレット端末等の携帯端末装置とを備えた画像処理連携システム、同システムで実行される画像処理連携方法、画像処理装置及び画像処理連携プログラムに関する。

【背景技術】

【0002】

近年、スマートフォン、タブレット端末等の携帯端末装置は、電子化された文書を記憶可能であり、時と場所を選ばず、文書を閲覧したり編集したりできる。また、携帯端末装置で編集等したファイルを前記ＭＦＰ等の画像処理装置に送信し、画像処理装置で印刷または保存等の処理を実行させることができる。さらに、画像処理装置のスキャナ部で読み取った原稿の画像データ等からなるファイルを携帯端末装置に送信し、携帯端末装置で編集等を行うこともできる。

【0003】

しかし、携帯端末装置と画像処理装置とをそれぞれ別個に操作する必要があり、操作が煩雑になるといった問題がある。

【0004】

そこで、最近、画像処理装置の機能を使用するための画像処理装置側の操作画面を、携帯端末装置の表示部にリモート画面として表示し、携帯端末装置から画像処理装置を連携操作できるようにした、画像処理装置と携帯端末装置との連携システムが提案されている（例えば特許文献１）。この連携システムでは、携帯端末装置の表示部に表示される画像処理装置側のリモート画面は、画像処理装置から送信される画面データに基づいて表示される。

【0005】

つまり、操作が行われたことを示す操作データが携帯端末装置から画像処理装置に送信され、画像処理装置はこの情報に基づいて次の画面データを作成し、この画面データを携帯端末装置に送信し、携帯端末装置はこの画面データに基づいてリモート画面を更新表示する。

【0006】

ところで、近年、画像処理装置の操作パネルは、表示画面に対してユーザーがジェスチャ操作を行うことにより入力が可能となっており、従来のボタン操作から複数の指を使用したマルチタッチ操作やフリック、ピンチといった複雑な操作が多く利用されている。また、これに伴い、操作パネルの画面サイズも大型化してきており、画面に表示されるボタン等のパーツも増加している。

【0007】

一方、携帯端末装置も表示画面に対してユーザーがジェスチャ操作を行うことで入力が可能な機種が一般的になっているが、画面サイズは画像処理装置の画面サイズよりも小さいものが多い。

【先行技術文献】

【特許文献】

【0008】

【特許文献1】特開２００２−２８１１９５号公報

【特許文献2】特開２００４−２０６３６８号公報

【発明の概要】

【発明が解決しようとする課題】

【0009】

しかしながら、携帯端末装置の画面サイズが小さくなると、画像処理装置の操作画面も縮小されて携帯端末装置に表示されるため、ユーザーが指でタップ等のジェスチャ操作を行う場合、操作画面に含まれる操作ボタンのうち、画面に接触する指の面積よりもサイズの小さい操作ボタン等が発生し、そのような操作ボタンが隣接していると誤って隣の操作ボタンを操作してしまうというような誤操作の問題がある。

【0010】

なお、特許文献２には、操作に必要な個々のキーを機能種類でグループ領域作成するとともに、グループを選択するとグループに対応するカテゴリに属するキーの一覧を拡大表示する技術が提案されている。

【0011】

この技術を表示部の画面サイズの小さい携帯端末装置に応用し、何れかのグループが選択されるとそのグループに属するボタンのみを拡大して表示し、拡大表示されたボタンの中から所望のボタンを選択させることも考えられる。

【0012】

しかし、ＭＦＰ等の画像処理装置の機能種類は多く、１つの画面内に多数のグループが存在する。例えば、図８の操作画面に示すように、ユーザーは濃度、下地調整、裏写り／黄ばみ除去、用紙選択、倍率、原稿出力、ページ集約などをそれぞれ設定する必要がある。このため、各グループが選択されるたびにそのグループに属するボタンの一覧を拡大表示してボタンを選択させるのでは、拡大、選択に伴う多数の画面遷移が発生し、ユーザーにとって操作が分かり辛くなるという問題がある。

【0013】

この発明は、このような実情に鑑みてなされたものであり、携帯端末装置の表示手段に画像処理装置の操作画面をリモート画面として表示したときに、携帯端末装置の表示画面が小さくても、ユーザーが容易にかつ的確に所望の設定を行うことができる画像処理連携システムと連携方法及び画像処理装置を提供し、さらには前記画像処理装置のコンピュータに処理を実行させるための画像処理連携プログラムを提供することを課題とする。

【課題を解決するための手段】

【0014】

上記課題は、以下の手段によって解決される。
（１）相互に接続可能な画像処理装置と携帯端末装置とを備えた画像処理連携システムであって、前記画像処理装置は、表示手段と、前記表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記携帯端末装置に送信する送信手段と、前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得手段と、前記画面サイズ取得手段により取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定手段と、前記判定手段により、前記パーツの操作が容易でないと判定された場合には、前記送信手段により前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成手段と、前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信手段と、前記受信手段により受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成手段により作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行手段と、を備え、前記携帯端末装置は、タッチパネルを有する表示手段と、前記画像処理装置からの前記画面データに基づいて前記リモート画面を前記表示手段に表示させる表示制御手段と、前記表示制御手段により前記表示手段に表示される画像処理装置の操作画面に対してユーザーの操作があったときは、前記操作に対応する操作データを前記画像処理装置に送信する送信手段と、を備えたことを特徴とする画像処理連携システム。
（２）前記グループ領域作成手段は、パーツを同一機能に関する設定を行うためのパーツ毎にグループ分けする前項１に記載の画像処理連携システム。
（３）前記判定手段は、前記画面サイズ取得手段により取得された前記携帯端末装置の画面サイズ、または該画面サイズを基に算出され前記携帯端末装置に表示される前記パーツの物理的サイズが、予め設定された閾値以下である場合に、前記パーツの操作が容易でないと判定する前項１または２に記載の画像処理連携システム。
（４）前記グループ領域作成手段により作成されるグループ領域の物理的サイズが、予め設定された閾値以下であるときは、前記グループ領域作成手段は、前記閾値以下であるグループ領域内に１個または複数個のサブ領域を作成する前項１〜３の何れかに記載の画像処理連携システム。
（５）前記携帯端末装置の表示手段に表示された前記第１の操作画面におけるグループ領域のパーツがタップ操作された場合は、画像処理装置の処理実行手段はそのグループ領域が選択されたと判定する前項１〜４の何れかに記載の画像処理連携システム。
（６）前記携帯端末装置の表示手段に表示された前記第２の操作画面における操作可能なパーツに対しては、タップ操作、フリック操作及び携帯端末装置固有の入力手段による操作の少なくとも何れかによって操作が可能である前項１〜５の何れかに記載の画像処理連携システム。
（７）前記処理実行手段は、前記受信手段により受信した操作データが、前記サブ領域のパーツに対する操作データである場合は、そのサブ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記サブ領域のパーツのみを操作可能とする前記第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する前項４に記載の画像処理連携システム。
（８）前記グループ領域作成手段によるグループ領域の作成を実施するか否かをユーザー操作に基づいて設定する設定手段を備え、前記設定手段により前記グループ領域作成手段によるグループ領域の作成を実施する設定がなされている場合にのみ、前記グループ領域作成手段は前記グループ領域を作成する前項１〜７の何れかに記載の画像処理連携システム。
（９）相互に接続可能な画像処理装置と携帯端末装置とを備えた連携システムで実行される画像処理連携方法あって、前記画像処理装置は、自装置の表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記携帯端末装置に送信する送信ステップと、前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得ステップと、前記画面サイズ取得ステップにより取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定ステップと、前記判定ステップにより、前記パーツの操作が容易でないと判定された場合には、前記送信ステップにより前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成ステップと、前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信ステップと、前記受信ステップにより受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成ステップにより作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行ステップと、を実行し、前記携帯端末装置は、タッチパネルを有する表示手段に、前記画像処理装置からの前記画面データに基づいて前記リモート画面を表示させる表示制御ステップと、前記表示制御ステップにより前記表示手段に表示される画像処理装置の操作画面に対してユーザーの操作があったときは、前記操作に対応する操作データを前記画像処理装置に送信する送信ステップと、を実行することを特徴とする画像処理連携方法。
（１０）携帯端末装置と接続するための接続手段と、表示手段と、前記表示手段に表示される自装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記接続手段を介して接続された携帯端末装置に送信する送信手段と、前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得手段と、前記画面サイズ取得手段により取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定手段と、前記判定手段により、前記パーツの操作が容易でないと判定された場合には、前記送信手段により前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成手段と、前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信手段と、前記受信手段により受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成手段により作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行手段と、を備えたことを特徴とする画像処理装置。
（１１）前記グループ領域作成手段は、パーツを同一機能に関する設定を行うためのパーツ毎にグループ分けする前項１０に記載の画像処理装置。
（１２）前記判定手段は、前記画面サイズ取得手段により取得された前記携帯端末装置の画面サイズ、または該画面サイズを基に算出され前記携帯端末装置に表示される前記パーツの物理的サイズが、予め設定された閾値以下である場合に、前記パーツの操作が容易でないと判定する前項１０または１１に記載の画像処理装置。
（１３）前記グループ領域作成手段により作成されるグループ領域の物理的サイズが、予め設定された閾値以下であるときは、前記グループ領域作成手段は、前記閾値以下であるグループ領域内に１個または複数個のサブ領域を作成する前項１０〜１２の何れかに記載の画像処理装置。
（１４）前記携帯端末装置の表示手段に表示された前記第１の操作画面におけるグループ領域のパーツがタップ操作された場合は、画像処理装置の処理実行手段はそのグループ領域が選択されたと判定する前項１０〜１３の何れかに記載の画像処理装置。
（１５）前記携帯端末装置の表示手段に表示された前記第２の操作画面における操作可能なパーツに対しては、タップ操作、フリック操作及び携帯端末装置固有の入力手段による操作の少なくとも何れかによって操作が可能である前項１０〜１４の何れかに記載の画像処理装置。
（１６）前記処理実行手段は、前記受信手段により受信した操作データが、前記サブ領域のパーツに対する操作データである場合は、そのサブ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記サブ領域のパーツのみを操作可能とする前記第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する前項１３に記載の画像処理装置。
（１７）前記グループ領域作成手段によるグループ領域の作成を実施するか否かをユーザー操作に基づいて設定する設定手段を備え、前記設定手段により前記グループ領域作成手段によるグループ領域の作成を実施する設定がなされている場合にのみ、前記グループ領域作成手段は前記グループ領域を作成する前項１０〜１６の何れかに記載の画像処理装置。
（１８）表示手段を有する画像処理装置のコンピュータに、携帯端末装置と接続する接続ステップと、前記表示手段に表示される画像処理装置の操作画面であって、１個または複数個の操作用パーツを含む操作画面の画面データを、前記接続ステップにより接続された前記携帯端末装置に送信する送信ステップと、前記携帯端末装置の表示手段の画面サイズを取得する画面サイズ取得ステップと、前記画面サイズ取得ステップにより取得された携帯端末装置の画面サイズに基づいて、前記携帯端末装置の表示手段に表示される前記操作画面内のパーツの操作が容易か否かを判定する判定ステップと、前記判定ステップにより、前記パーツの操作が容易でないと判定された場合には、前記送信ステップにより前記携帯端末装置に第１の操作画面の画面データを送信する前に、前記パーツをグループ分けした１個または複数個のグループ領域を作成するグループ領域作成ステップと、前記画面データを受信した携帯端末装置でリモート画面として再生された前記第１の操作画面をユーザーが操作したときに、前記携帯端末装置から操作データを受信する受信ステップと、前記受信ステップにより受信した操作データが、前記グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行し、前記操作データが、前記グループ領域作成ステップにより作成されたグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、前記パーツのレイアウトを変更することなく前記グループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置から前記第２の操作画面における前記操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する処理実行ステップと、を実行させるための画像処理連携プログラム。

【発明の効果】

【0015】

前項（１）（９）（１０）に記載の発明によれば、画像処理装置は、携帯端末装置の表示手段の画面サイズを取得するとともに、取得された携帯端末装置の画面サイズに基づいて、携帯端末装置の表示手段に表示される操作画面内の操作用パーツの操作が容易か否かを判定する。容易でないと判定した場合は、第１の操作画面に含まれるパーツをグループ分けして１個または複数個のグループ領域を作成する。この画面データに基づいて、携帯端末装置に表示された第１の操作画面に対して、ユーザーが操作を行うと、操作データが画像処理装置に送信される。操作データを受信した画像処理装置は、受信した操作データが、グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行する。一方、操作データがグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、パーツのレイアウトを変更することなくグループ領域のパーツのみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置からの第２の操作画面における操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する。

【0016】

つまり、携帯端末装置には、グループ領域の選択後は選択されたグループ領域のパーツのみを操作可能とする第２の操作画面が表示され、第２の操作画面における操作可能なパーツに対する操作のみが検出されるから、画面サイズが小さく表示されるパーツが小さいために、操作可能なパーツ以外のパーツに指が接触して誤操作する恐れを低減でき、所望のパーツを的確に選択操作することができる。しかも、パーツのレイアウトは変更されていないから、グループ領域が選択されるたびにその領域に属するパーツの一覧を拡大表示してパーツを選択させる場合のような、拡大、選択に伴う多数の画面遷移もなく、ユーザーはどのような設定を行ったかを容易に理解することができる。

【0017】

前項（２）（１１）に記載の発明によれば、パーツは同一機能に関する設定を行うためのパーツ毎にグループ分けされるから、１つのグループ領域には同一機能に関する設定を行うためのパーツのみが含まれた状態となる。

【0018】

前項（３）（１２）に記載の発明によれば、携帯端末装置の画面サイズ、または該画面サイズを基に算出されるパーツの物理的サイズが、予め設定された閾値以下である場合に、パーツの操作が容易でないと判定されるから、判定作業が容易となる。

【0019】

前項（４）（１３）に記載の発明によれば、グループ領域の物理的サイズが、予め設定された閾値以下であるときは、閾値以下であるグループ領域内に１個または複数個のサブ領域が作成される。

【0020】

前項（５）（１４）に記載の発明によれば、グループ領域のパーツがタップ操作された場合は、画像処理装置はそのグループ領域が選択されたと判定する。

【0021】

前項（６）（１５）に記載の発明によれば、携帯端末装置の表示手段に表示された第２の操作画面における操作可能なパーツに対しては、ユーザーは、タップ操作、フリック操作及び携帯端末装置固有の入力手段による操作の少なくとも何れかによって、操作を行うことができる。

【0022】

前項（７）（１６）に記載の発明によれば、画像処理装置は、操作データがサブ領域のパーツに対する操作データである場合は、そのサブ領域が選択されたと判定する。そして、パーツのレイアウトを変更することなくサブ領域のみを操作可能とする第２の操作画面の画面データを携帯端末装置へ送信し、携帯端末装置からの操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する。

【0023】

前項（８）（１７）に記載の発明によれば、ユーザー操作によってグループ領域の作成を実施する設定がなされている場合にのみ、パーツの操作が容易でないと判定されると、グループ領域が作成される。

【0024】

前項（１８）に記載の発明によれば、携帯端末装置の画面サイズが小さい場合であっても、ユーザーが容易にかつ的確に操作画面から所望の設定を行うことができる処理を、画像処理装置のコンピュータに実行させることができる。

【図面の簡単な説明】

【0025】

【図1】この発明の一実施形態に係る画像処理連携システムの構成図である。

【図2】画像処理装置の内部構成を示す図である。

【図3】携帯端末装置の構成を示すブロック図である。

【図4】画像処理装置の操作画面を携帯端末装置にリモート画面として表示し、このリモート画面をユーザーが操作することにより携帯端末装置から画像処理装置をリモート操作する場合の動作の概要を説明するための図である。

【図5】画像処理装置と携帯端末装置との接続から、画像処理装置の操作画面の画面データが携帯端末装置へ送信されるまでのシーケンスを示す図である。

【図6】画像処理装置で行われる図５で示した動作のうち、携帯端末装置の画面サイズの取得以降の詳細な動作を示すフローチャートである。

【図7】各パーツについての情報を示すテーブルである。

【図8】グループ領域が作成された操作画面を示す。

【図9】携帯端末装置に表示されるパーツの物理的サイズに基づいてグループ領域を作成する場合の画像処理装置の動作を示すフローチャートである。

【図10】サブ領域を作成する場合の画像処理装置の処理を示すフローチャートである。

【図11】図６及び図９のステップＳ５０における操作データ受信処理を示すフローチャートである。

【図12】図１１のステップＳ５８で送信された画面データに基づいて、携帯端末装置に表示された操作画面を示す図である。

【図13】同じく他の操作画面を示す図である。

【図14】（Ａ）〜（Ｃ）はこの発明の他の実施形態を説明するための図である。

【発明を実施するための形態】

【0026】

以下、この発明の実施形態を図面に基づいて説明する。

【0027】

図１は、この発明の一実施形態に係る画像処理連携システムの構成図である。

【0028】

本システムは、それぞれ複数の画像処理装置１と携帯端末装置２と情報処理装置３から構成される。画像処理装置１、携帯端末装置２、情報処理装置３は、いずれもネットワーク４を介して接続されている。

【0029】

ここで、ネットワーク４は、ＬＡＮ（Local Area Network）などの専用回線を用いたネットワーク、一般回線を用いたネットワーク、無線通信によるネットワーク、のいずれであっても構わない。また、ネットワーク４は、外部ネットワークを介して、他のネットワークと接続されている。

【0030】

画像処理装置１は、走査した原稿画像、および情報処理装置３から送信されたプリントデータから生成した画像の複写画像を用紙上に形成する装置であり、この実施形態では、プリンタ機能、コピー機能、ファクシミリ機能、スキャン機能等の機能を備えた多機能デジタル画像処理装置である前述したＭＦＰが用いられている。以下、画像処理装置をＭＦＰともいう。ここで、プリントデータとは、情報処理装置３のオペレーティングシステムやアプリケーションプログラムが発行する描画命令を、プリンタドライバによって画像形成装置１が処理可能なページ記述言語に変換したページ記述言語による描画命令、もしくは、ＰＤＦ、ＴＩＦＦ、ＪＰＥＧ、ＸＰＳ等のファイルフォーマットで記述された文書データである。

【0031】

また、走査した原稿画像は、ネットワーク４を介して、情報処理装置３、さらにはその他のＭＦＰに送信することもできる。さらには、外部ネットワークを介して、別のネットワークに接続された他のＭＦＰや情報処理装置に原稿画像を送信することもできる。さらに、操作した原稿画像や情報処理装置から受信した文書データを固定記憶装置に蓄積することもできる。

【0032】

携帯端末装置２は、ＣＰＵ、ＲＡＭ、固定記憶装置（ハードディスク装置など）、モニタ、タッチ操作可能な液晶パネル等を有する携帯型のコンピュータ装置である。電子化された文書を蓄積して持ち運び、どこでも閲覧、編集を行うことができる。また、無線通信する手段を有し、ＭＦＰ１や情報処理装置３との間で文書の送受信を行うことができるほか、ＭＦＰ１を遠隔操作する手段を有する。以下の説明では携帯端末装置を単に携帯端末とも言う。

【0033】

情報処理装置３は、ＣＰＵ、ＲＡＭ、固定記憶装置（ハードディスク装置など）、モニタ、キーボード、マウス等の接続された一般的なコンピュータ装置である。情報処理装置３は、ユーザの指示によリプリントデータを生成し、生成したプリントデータをＭＦＰ１に送信する。

【0034】

図２は、ＭＦＰ１の内部構成を示す図である。ＭＦＰ１のＣＰＵ１０１には、制御プログラムの格納されたＲＯＭ１０２、作業用のＳ−ＲＡＭ（Static Random Access Memory）１０３、画像形成に関わる各種の設定を記憶するバッテリバックアップされたＮＶ−ＲＡＭ（不揮発性メモリ）１０４、時計ＩＣ１０５がバスを介して接続され、ＭＦＰ１の全体を統括的に制御する制御部１００を構成している。

【0035】

制御部１００には、原稿画像を読み取る画像読取装置１２０、各種の入力を行うテンキー、プリントキー、ログアウトキーなどの各種キーや表示部１３１を備えた操作パネル１３０、ネットワーク４を介して接続された情報処理装置３をはじめとする外部の装置との間で各種の情報を送受信する為のネットワークインターフェース（ネットワークＩ／Ｆ）１６０、該ネットワークインターフェース１６０により受信したプリントデータから複写画像を生成するプリンタコントローラ１５０、複写画像を用紙上に形成する画像出力装置１４０がそれぞれバスを介して接続されている。

【0036】

また、制御部１００には、固定記憶装置１１０がバスを介して接続されている。固定記憶装置１１０とは例えばハードディスク装置である。この固定記憶装置１１０には、各種のデータが記憶されている。

【0037】

また、ワイヤレスインターフェース（WirelessＩ／Ｆ）１７０と短距離無線インターフェース（短距離無線Ｉ／Ｆ）１８０が、バスを介して制御部１００に接続されている。ワイヤレスインターフェース１７０は、ネットワークとの通信や携帯端末装置２との通信に利用され、短距離無線インターフェース１８０は例えばブルートゥースや赤外線通信（ＩｒＤＡ：Infrared Data Association）等の短距離無線通信を行うためのインターフェースである。

【0038】

図３は携帯端末２の構成を示すブロック図である。携帯端末２は、例えばタブレット端末やスマートフォンなどからなり、ＣＰＵ２０１、制御プログラムの格納されたＲＯＭ２０２、作業用のＲＡＭ２０３を備え、ＲＯＭ２０２及びＲＡＭ２０３はそれぞれバスを介してＣＰＵ２０１に接続されている。また、ＣＰＵ２０１、ＲＯＭ２０２及びＲＡＭ２０３により、携帯端末２の全体を統括的に制御する制御部２００を形成している。

【0039】

制御部２００には、各種の情報を表示する液晶等からなる表示部２０５、表示部２０５の表面に設けられ、表示部の画面を直接タッチして操作入力を行うタッチパネル２０６、ワイヤレスランインターフェース２０７、短距離無線インターフェース２０８が、バスを介してそれぞれ接続されている。ワイヤレスランインターフェース２０７は、ネットワークとの通信やＭＦＰ１との通信に利用され、短距離無線インターフェース２０８は例えばブルートゥースや赤外線通信等の短距離無線通信を行うためのインターフェースである。

【0040】

さらに、制御部２００には固定記憶装置２０４がバスを介して接続されている。固定記憶装置２０４とは例えばハードディスク装置である。この固定記憶装置２０４には、各種のデータが記憶されている。

【0041】

図４は、ＭＦＰ１の操作画面を携帯端末２にリモート画面として表示し、このリモート画面をユーザーが操作することにより携帯端末２からＭＦＰ１をリモート操作する場合の動作の概要を説明するための図である。

【0042】

ＭＦＰ１の表示部１３１に初期画面が表示されている状態で、携帯端末２とＭＦＰ１を無線接続すると、ＭＦＰ１から携帯端末２へ初期画面の画面データが送信される（ステップＳ１０５）。携帯端末２は画面データを受信すると（ステップＳ２０１）、画面データに基づいて画像を展開したのち（ステップＳ２０２）、表示部２０５にリモート画面として描画する（ステップＳ２０３）。

【0043】

ユーザーが表示されたリモート画面に対してタッチパネル２０６上でタッチ操作すると（ステップＳ２０４）、携帯端末２はタッチ位置の座標を検出・特定したのち（ステップＳ２０５）、ジャスチャーの種類判定を行うとともに座標をＭＦＰ１側の表示部１３１の座標に変換し（ステップＳ２０６）、座標データを含む操作データ（タッチイベント）をＭＦＰ１に送信する（ステップＳ２０７）。

【0044】

ＭＦＰ１はタッチイベントの受信処理を行ったのち（ステップＳ１０６）、タッチイベント処理によりタッチイベントの内容を解析し（ステップＳ１０７）、解析されたタッチイベントに応じた次の表示画面を内部処理により特定する（ステップＳ１０１）。そして、特定された画面を構成するために必要な例えばボタン等のパーツを画面作成処理（ステップＳ１０２）により合成して画面データを作成した後、この画面データを圧縮して（ステップＳ１０３）、携帯端末２に送信する（ステップＳ１０４）。

【0045】

携帯端末２は、初期画面の場合と同様にして、受信した画面データに基づいてリモート画面を表示する。ユーザーがリモート画面にタッチ操作すると、タッチイベントがＭＦＰ１に送信され、ＭＦＰ１は対応する次の画面を作成し、あるいは対応する処理を実行する。以下、必要に応じて、ＭＦＰ１でのタッチイベントに基づく画面データの作成や処理の実行と、携帯端末２でのリモート画面の表示及びタッチイベントの送信等が繰り返されることにより、携帯端末２からＭＦＰ１が操作される。

【0046】

この実施形態では、ＭＦＰ１は携帯端末２との連携に際して、携帯端末２の表示部２０５の画面サイズを取得する。画面サイズは、表示部２０５の物理的サイズを携帯端末２から直接に取得しても良いし、携帯端末２から機種情報を取得し、自装置内の固定記憶装置１１０や外部の管理サーバー等に等に予め保持されている携帯端末２の機種情報と画面サイズとが紐付けられたテーブルから、取得した機種情報に対応する画面サイズを取得しても良い。

【0047】

そして、取得した画面サイズに基づいて、携帯端末２のタッチパネル２０５にリモート画面として表示される操作画面内のパーツの操作が容易か否かを判定する。つまり、画面サイズが小さいために、操作画面内のボタン等のパーツの表示が小さく、ユーザーが指でタップ等による操作を行うのが容易でない場合があることから、これを判定する。

【0048】

具体的には、携帯端末２のタッチパネル２０５の画面サイズが、予め設定されている閾値以下であるか否かを判定し、閾値以下の場合は表示されるパーツも小さく操作が容易でないと判定する。閾値は、操作画面に含まれるパーツの大きさを考慮して各操作画面毎に設定されていても良いし、操作画面にかかわらず一律に設定されていても良い。

【0049】

ＭＦＰ１は画面サイズが閾値以下であると判定した場合、操作画面の画面データを携帯端末２に送信する前に、操作画面を複数の領域に分割してグループ領域を作成したのち、画面データを携帯端末２に送信する。

【0050】

図５は、ＭＦＰ１と携帯端末２との接続から、ＭＦＰ１の操作画面の画面データが携帯端末２へ送信されるまでのシーケンスを示す図である。

【0051】

図５において、ユーザー操作に基づいて携帯端末２がＭＦＰ１へ接続要求を送信すると(ステップＳ０１)、ＭＦＰ１は要求を受け付けたのち(ステップＳ０２)、接続可能であることを携帯端末２に通知するとともに(ステップＳ０３)、携帯端末２に表示部２０５の画面サイズを要求する(ステップＳ０４)。

【0052】

携帯端末２がＭＦＰ１に画面サイズを通知すると(ステップＳ０５)、ＭＦＰ１は画面サイズが閾値以下かどうかを判定する(ステップＳ０６)。閾値よりも大きい場合は通常の処理と同様にステップＳ０９に進む。閾値以下の場合は操作画面に含まれる操作ボタン等の操作用パーツをグループ分けした１個または複数個のグループ領域を作成したのち(ステップＳ０７）、各領域を検知領域として設定する(ステップＳ０８)。つまり、各領域に属するパーツがタップされたときは、その領域が選択されたと判定する設定を行ったのち、ステップＳ０９に進む。

【0053】

ステップＳ０９で背景画像にパーツを合成して操作画面を生成したのち、生成した操作画面の画面データを携帯端末２に送信する(ステップＳ１０)。

【0054】

図６は、ＭＦＰ１で行われる図５で示した動作のうち、携帯端末２の画面サイズの取得以降の詳細な動作を示すフローチャートである。図６及びそれ以降のフローチャートで示される動作は、ＭＦＰ１のＣＰＵ１０１がＲＯＭ１０２等に格納された動作プログラムに従って動作することにより実行される。

【0055】

携帯端末２との接続後、ステップＳ２１では携帯端末２の表示部２０５の画面サイズを取得し、ステップＳ２２で、画面サイズは閾値以下かどうかを判定する。閾値以下でなければ(ステップＳ２２でＮＯ)、ステップＳ２９に進む。閾値以下であれば(ステップＳ２２でＹＥＳ)、ステップＳ２３で、最初の操作画面に含まれる全ての操作用パーツのグループ分けが完了したかどうかを判断する。全てのパーツのグループ分けが完了していなければ(ステップＳ２３でＮＯ)、ステップＳ２４で、先頭のパーツの属性、表示座標及びサイズを取得する。

【0056】

パーツの属性、表示座標及びサイズは予め固定記憶装置１１０等に、図７に示すような各パーツの識別情報であるパーツＩＤと共に記憶されている。図７では、パーツＩＤ毎に表示座標、サイズ、属性が紐付けられている。「備考」欄はパーツに表示される文字を示している。例えばパーツＩＤ１０は「うすく」という文字が付された属性「濃度」のパーツであり、表示座標は（１，１）、サイズは（１０，１５）となっており、パーツＩＤ２０は「こく」という文字が付された属性「濃度」のパーツであり、表示座標は（１，２）、サイズは（１０，１５）となっている。

【0057】

図６に戻って、ステップＳ２５では、対象パーツはグループ分けの必要があるかどうかを判定する。必要がなければ(ステップＳ２５でＮＯ)、ステップＳ２３に戻って次のパーツについて処理を繰り返す。ステップＳ２５でグループ分けの必要があれば(ステップＳ２５でＹＥＳ)、ステップＳ２６でグループ分けを行ったのち、ステップＳ２３に戻る。

【0058】

ステップＳ２３において、全てのパーツのグループ分けが完了した場合は(ステップＳ２３でＹＥＳ)、ステップＳ２７で、グループ分けされたパーツ毎にグループ領域を作成したのち、ステップＳ２８に進む。

【0059】

この実施形態では、限定はされないが同一機能に関する設定を行うためのパーツを同じグループとしてグループ分けを行っている。同一機能に関する設定を行うパーツかどうかは、パーツの属性から判断される。つまり、濃度、下地処理等の属性毎にパーツがグループ分けされる。

【0060】

なお、図８の操作画面に示すように、例えば濃度を示す「こく」と「うすく」というパーツや、用紙選択を示す「自動」と「Ａ４」等のように、同一属性のパーツは一定の領域内に一纏めに集約表示されている。

【0061】

そこで、図６のステップＳ２７で、グループ毎のパーツが表示される領域を１つのグループ領域として作成する。なお、一度作成したグループ領域については、そのＩＤ、位置、サイズ、グループの属性等を保存しておき、次にグループ領域を作成する必要のある場合は、保存した情報を用いてグループ領域を作成しても良い。また、このようなグループ領域の情報をデフォルトで記憶させておき、グループ領域を作成する必要のある場合は、デフォルトの情報を用いてグループ領域を作成しても良い。例えば、図７のテーブルでは、Ｇ１０というＩＤのグループ領域が、濃度のグループ領域であり、表示座標は（１，１）、サイズは（３０，６０）であることが示されている。

【0062】

ステップＳ２８では、作成したグループ領域を検知領域に設定したのち、ステップＳ２９に進む。検知領域の設定とは、何れかのパーツがユーザーによりタップ操作等されたときは、そのパーツが選択されたのではなく、そのパーツが属するグループ領域が選択されたと判定する領域であると定義することをいう。

【0063】

ステップＳ２９では、各パーツを背景画像に合成して操作画面を生成し、ステップＳ３０で、生成した操作画面の画面データを携帯端末２に送信したのち、ステップＳ５０の操作データ受信処理に進む。操作データ受信処理については後述する。

【0064】

図８に、グループ領域が作成された操作画面を示す。太枠で囲まれた領域がそれぞれグループ領域である。図８の例では、濃度に関するグループ領域Ｄ１、下地処理に関するグループ領域Ｄ２、Ｄ３、用紙選択に関するグループ領域Ｄ４，倍率に関するグループ領域Ｄ５、原稿出力に関するグループ領域Ｄ６、ページ集約に関するグループ領域Ｄ７、その他のグループ領域Ｄ８の合計８個のグループ領域が作成されている。なお、下地処理に関するグループ領域については、「裏写り除去」ボタン及び「黄ばみ除去」ボタンが比較的大きいため、これらを他のボタン(パーツ）の領域Ｄ２とは別の領域Ｄ３に纏めたものであるが、領域Ｄ２とＤ３を纏めて１つのグループ領域としても良い。

【0065】

図６に示した例では、携帯端末２の画面サイズが閾値以下のときに、グループ領域を作成する構成としたが、携帯端末２に表示されるパーツの物理的サイズ（つまり実際の表示サイズ)をＭＦＰ１が算出し、その値が閾値以下のときにグループ領域を作成する構成としても良い。

【0066】

図９は、携帯端末２に表示されるパーツの物理的サイズに基づいてグループ領域を作成する場合のＭＦＰ１の動作を示すフローチャートである。

【0067】

携帯端末２との接続後、ステップＳ３１では携帯端末２の表示部２０５の画面サイズを取得し、ステップＳ３２で、操作画面に含まれる全てのパーツの物理的サイズの算出処理が完了したかどうかを判断する。

【0068】

完了していなければ(ステップＳ３２でＮＯ)、ステップＳ３３でそのパーツの属性、表示座標及びサイズを取得したのち、ステップＳ３４で、パーツの物理的サイズを算出する。この算出は、パーツの物理的サイズ（ｉｎｃｈ）＝パーツのサイズ（ｄｏｔ）÷画面解像度（ｄｐｉ）の式により行うことができる。

【0069】

ステップＳ３５では、算出した物理的サイズが閾値以下かどうかを判定する。閾値は例えばタップする指のサイズを考慮して予め設定されている。閾値以下でなければ(ステップＳ３５でＮＯ)、ステップＳ３２に戻る。閾値以下であれば(ステップＳ３５でＹＥＳ)、ステップＳ３６で、対象パーツはグループ分けの必要があるかどうかを判定する。必要がなければ(ステップＳ３６でＮＯ)、ステップＳ３２に戻る。ステップＳ３６でグループ分けの必要があれば(ステップＳ３６でＹＥＳ)、ステップＳ３７でグループ分けを行ったのち、ステップＳ３２に戻り、全てのパーツについて物理的サイズの算出処理が完了したかどうかを判断する。

【0070】

なお、ステップＳ３６で既にグループ分けされたパーツと同一の属性のパーツについしては、物理的サイズを算出することなく、既にグループ分けされたパーツと同一のグループに組み込まれる。

【0071】

ステップＳ３２で、全てのパーツについて物理的サイズの算出処理が完了した場合は(ステップＳ３２でＹＥＳ)、ステップＳ３８で、グループ分けされたパーツ毎にグループ領域を作成し、ステップＳ３９で、作成したグループ領域を検知領域に設定したのち、ステップＳ４０で、各パーツを背景画像に合成して操作画面を生成する。そして、ステップＳ４１で、生成した操作画面の画面データを携帯端末２に送信したのち、ステップＳ５０の操作データ受信処理に進む。操作データ受信処理については後述する。

【0072】

また、ＭＦＰ１は、作成したグループ領域が小さい場合、グループ領域内に１個または複数個のサブ領域を作成しても良い。

【0073】

図１０はこのようなサブ領域を作成する場合のＭＦＰ１の処理を示すフローチャートである。

【0074】

ステップＳ２６１では、全てのグループ領域について、物理的サイズの算出が終了したかどうかを判断し、終了していなければ(ステップＳ２６１でＮＯ)、ステップＳ２６２で、算出対象のグループ領域の物理的サイズを算出する。

【0075】

次いでステップＳ２６３では、算出したサイズが予め設定された閾値以下かどうかを判定し、閾値以下であれば(ステップＳ２６３でＹＥＳ)、ステップＳ２６４で、そのグループ領域に含まれるパーツを複数のグループに分割して、グループ領域内に１個または複数個のサブ領域を作成したのち、ステップＳ２６１に戻る。なお、作成されたサブ領域は検知領域として設定される。

【0076】

ステップＳ２６１で、全てのグループ領域について、物理的サイズの算出が終了した場合は(ステップＳ２６１でＹＥＳ)、処理を終了する。

【0077】

図１１は、図６及び図９のステップＳ５０における操作データ受信処理を示すフローチャートである。

【0078】

ステップＳ５１で、携帯端末２から操作データを受信したかどうかを判断する。受信していなければ(ステップＳ５１でＮＯ)、受信するまで待つ。ユーザーが携帯端末２の表示部２０５のタッチパネル２０６をジェスチャ操作例えばタップ操作すると、携帯端末２からＭＦＰ１へ操作データが送信される。ＭＦＰ１は操作データを受信すると(ステップＳ５１でＹＥＳ)、ステップＳ５２で、グループ領域またはサブ領域のパーツの操作か否かを判定する。グループ領域またはサブ領域のパーツの操作であれば(ステップＳ５２でＹＥＳ)、ステップＳ５３に進む。

【0079】

ステップＳ５３では、図６のステップＳ２８、または図９のステップＳ３９で設定された検知領域の操作か否かを判断する。検知領域の操作であれば（ステップＳ５３でＹＥＳ）、そのグループ領域またはサブ領域が選択されたと判定して、ステップＳ５４で、そのグループ領域またはサブ領域に所属するパーツの一覧を検索し、ステップＳ５５で、該当するパーツを操作可能に設定する。

【0080】

次いで、ステップＳ５６で、そのグループ領域またはサブ領域に所属する全てのパーツを検索したかどうかを判断し、検索していなければ（ステップＳ５６でＮＯ）、ステップＳ５４に戻る。全てのパーツを検索していれば（ステップＳ５６でＹＥＳ）、ステップＳ５７で、ユーザーによって選択されたグループ領域またはサブ領域内のパーツのみが操作可能に設定された操作画面を作成する。この操作画面における各パーツのレイアウトやパーツサイズは、図６や図９の処理で作成された操作画面と全く同じである。ただし、携帯端末２のユーザーが操作可能なパーツであることを認識できるように、操作可能なパーツが含まれるグループ領域またはサブ領域の色等を他の領域とは異なる態様にしても良い。

【0081】

ステップＳ５８では、上記作成された操作画面の画面データを送信したのち、ステップＳ５１に戻り、次の操作データの受信を待つ。

【0082】

ステップＳ５２において、グループ領域またはサブ領域のパーツの操作でなければ(ステップＳ５２でＮＯ)、この場合は、グループ領域またはサブ領域が作成されていない通常の操作画面に対する操作と同じであるから、ステップＳ５９に進む。

【0083】

ステップＳ５９では、終了操作かどうかを判断し、終了操作であれば（ステップＳ５９でＹＥＳ）、処理を終了する。終了操作でなければ（ステップＳ５９でＮＯ）、ステップＳ６０で操作に応じた処理を実行した後、ステップＳ６１で、処理が終了したか否かを判定する。処理終了であれば（ステップＳ６１でＹＥＳ）、処理を終了する。処理終了でなければ（ステップＳ６１でＮＯ）、図６のステップＳ２２に進む。

【0084】

ステップＳ５３において、検知領域の操作でない場合は（ステップＳ５３でＮＯ）、グループ領域またはサブ領域内でのパーツの操作であるから、ステップＳ６２で、グループ領域またはサブ領域内のパーツ操作による設定値が決定されたかどうかを判定する。設定値が決定されると（ステップＳ６２でＹＥＳ）、図６のステップＳ２２に進む。設定値が決定されなければ（ステップＳ６２でＮＯ）、ステップＳ５７に進み、操作が行われているグループ領域またはサブ領域内の表示のみが更新された操作画面を作成した後、ステップＳ５８で画面データを携帯端末２に送信する。

【0085】

図１２に、図１１のステップＳ５８で送信された画面データに基づいて、携帯端末２の表示部２０５に表示された操作画面を示す。この画面では、ハッチングを施したグループ領域Ｄ５に属する、「倍率」属性のパーツのみが操作可能となっている。

【0086】

携帯端末２のユーザーは、フリック操作により倍率の設定が可能となっている。すなわち、携帯端末２のユーザーが、図１２の矢印で示すようにグループ領域Ｄ５内の画面上で上下にフリック操作を行うと、パーツの選択が変更されるようになっている。例えば、画面下向きにフリック操作を行うと、「自動」「等倍」「Ｂ４→Ａ３ Ｂ５→Ａ４」・・・とパーツ（ボタン）の選択が切り替わり、下向きにフリック操作を行うと、この逆にパーツの選択が切り替わる。フリック操作の継続中は、設定値はまだ決定されないので、図１１のステップＳ６２の判断がＮＯとなり、ＭＦＰ１はステップＳ５７で、グループ領域Ｄ５以外の表示は変更なく、グループ領域Ｄ５内のパーツの選択のみが指の移動先の座標データに応じて切り替わった状態の操作画面を作成し、その画面データを携帯端末２に送信する。

【0087】

携帯端末２のユーザーが何れかのパーツを選択してタッチパネル２０６から指を離すと、設定値が決定されたと判定してステップＳ６２の判断がＹＥＳとなり、ステップＳ２２に進んで、次の画面を作成する。

【0088】

また、図１３に示す例では、ハッチングを施したグループ領域Ｄ１に属する、「濃度」属性のパーツのみが操作可能となっている。この例では、図１３の矢印で示すようにグループ領域Ｄ１内の画面上で左右にフリック操作を行うと、濃度設定用パーツによる設定濃度が変更され、「うすい」「こい」ボタンが連続で押される操作と同様の操作を実現するようになっている。例えば、画面左向きにフリック操作した場合は濃度が薄くなり、画面右向きにフリック操作した場合は濃度が濃くなる。この場合もタッチパネル２０６から指を離すと、設定値が決定されたと判定される。

【0089】

なお、グループ領域またはサブ領域の選択後の各パーツの操作は、フリック操作に限定されることはなくタップ操作でも良い。また携帯端末２が竜頭等の携帯端末２の固有の入力手段を備えた例えば腕時計タイプのウェアラブル端末であるような場合は、前記竜頭等の携帯端末２の固有の入力手段の操作により行われても良い。

【0090】

図１４は、この発明の他の実施形態を示すものである。この実施形態では、ＭＦＰ１は、画面サイズが小さい場合にグループ領域を作成するか否かを、管理者等が予め設定できるようになっている。

【0091】

図１４（Ａ）に示すように、「カラー」「濃度」「原稿画質」「用紙」等の複数の設定用パーツ（ボタン）が左右方向に並んで配置されている画面において、矢印のように左右方向にフリック操作すると、通常の画面では各パーツがスクロールされるものとする。グループ領域を作成する設定がなされていない状態で、左右方向にフリック操作すると、携帯端末５の表示部２０５の画面サイズが小さくても、同図（Ｂ）に示すように、同図（Ａ）と同様のパーツのスクロールとなる。

【0092】

これに対し、グループ領域を作成する設定がなされている場合は、携帯端末５の表示部２０５の画面サイズが小さいと、パーツ群のグループ領域が作成され、このグループ領域が選択されたとすると、左右方向にフリック操作したときに、各パーツの選択が切り替わる動作となる。

【0093】

以上説明したように、本実施形態では、ＭＦＰ１は、携帯端末２の表示部２０５の画面サイズを取得するとともに、取得された画面サイズに基づいて、携帯端末２に表示される操作画面内の操作用パーツの操作が容易か否かを判定し、容易でないと判定した場合は、操作画面に含まれるパーツをグループ分けして１個または複数個のグループ領域を作成する。この画面データに基づいて、携帯端末２に表示された操作画面に対して、ユーザーが操作を行うと、操作データがＭＦＰ１に送信される。操作データを受信したＭＦＰ１は、受信した操作データが、グループ領域以外の領域のパーツに対する操作データである場合は、操作されたパーツに対応する処理を実行する。一方、操作データがグループ領域のパーツに対する操作データである場合は、該グループ領域が選択されたと判定するとともに、パーツのレイアウトを変更することなくグループ領域のパーツのみを操作可能とする操作画面の画面データを携帯端末２へ送信し、携帯端末２から操作画面における操作可能なパーツに対する操作データを受信すると、操作されたパーツに対応する処理を実行する。

【0094】

つまり、携帯端末装置には、グループ領域の選択後は選択されたグループ領域のパーツのみを操作可能とする操作画面が表示され、この操作画面における操作可能なパーツに対する操作のみが検出されるから、画面サイズが小さく表示されるパーツが小さいために、操作可能なパーツ以外のパーツに指が接触して誤操作する恐れを低減でき、所望のパーツを的確に選択操作することができる。しかも、パーツのレイアウトは変更されていないから、グループ領域が選択されるたびにその領域に属するパーツの一覧を拡大表示してパーツを選択させる場合のような、拡大、選択に伴う多数の画面遷移もなく、ユーザーはどのような設定を行ったかを容易に理解することができる。

【符号の説明】

【0095】

１ 画像処理装置
１００ 制御部
１０１ ＣＰＵ
１０２ ＲＯＭ
１０３ ＲＡＭ
１３１ 表示部
１６０ ネットワークインターフェース
１７０ ワイヤレスインターフェース
１８０ 短距離無線インターフェース
２ 携帯端末装置
２０１ ＣＰＵ
２０５ 表示部
２０６ タッチパネル

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】