特許 7604795 画像形成装置、画像形成システム、応答通知方法及び応答通知プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-16

(45)【発行日】2024-12-24

(54)【発明の名称】画像形成装置、画像形成システム、応答通知方法及び応答通知プログラム

(51)【国際特許分類】

   G10L 15/28 20130101AFI20241217BHJP

   G10L 15/00 20130101ALI20241217BHJP

   B41J 29/38 20060101ALI20241217BHJP

   B41J 29/42 20060101ALI20241217BHJP

   G03G 21/00 20060101ALI20241217BHJP

   H04N 1/00 20060101ALI20241217BHJP

【ＦＩ】

G10L15/28 230K

G10L15/00 200Z

B41J29/38 202

B41J29/42 F

B41J29/38 301

G03G21/00 388

H04N1/00 350

H04N1/00 127Z

【請求項の数】 11

(21)【出願番号】P 2020111551

(22)【出願日】2020-06-29

(65)【公開番号】P2022010808

(43)【公開日】2022-01-17

【審査請求日】2023-03-17

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】110002952

【氏名又は名称】弁理士法人鷲田国際特許事務所

(72)【発明者】

【氏名】勝田 長生

(72)【発明者】

【氏名】御子柴 祐介

【審査官】菊池 智紀

(56)【参考文献】

【文献】特開２００３－２５６１７８（ＪＰ，Ａ）

【文献】特開２０２０－０８７３８３（ＪＰ，Ａ）

【文献】特開２０２０－０９６３１１（ＪＰ，Ａ）

【文献】特開２０１４－２３２９６９（ＪＰ，Ａ）

【文献】特開２００８－１５８８０８（ＪＰ，Ａ）

【文献】特開２００８－０２６９４５（ＪＰ，Ａ）

【文献】特開２００６－３５２８４５（ＪＰ，Ａ）

【文献】米国特許出願公開第２００７／０１１５８４５（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１０Ｌ １５／００－１５／３４

Ｇ０６Ｆ １／００－ ３／１６，

１３／００－１５／８２

Ｂ４１Ｊ ２／００－ ３／６０，

２９／００－２９／７０

Ｇ０３Ｇ １３／００－２１／２０

Ｈ０４Ｑ ９／００－ ９／１６

Ｈ０４Ｎ １／００

(57)【特許請求の範囲】

【請求項1】

外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行する処理実行部と、
前記設定処理の実行終了に応じた第１通知を前記外部装置に行う第１通知部と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知部と、
を備える画像形成装置。

【請求項2】

前記処理実行部は、前記設定処理を実行する際に、前記設定指示の内容を前記画像形成装置の表示部に表示する処理を実行する、
請求項１に記載の画像形成装置。

【請求項3】

前記処理実行部は、前記設定処理を実行する際に、前記設定指示の内容に禁止された内容があるかどうかを判定する禁則処理を実行する、
請求項１又は２に記載の画像形成装置。

【請求項4】

前記第２通知部は、前記第２通知として、処理中である旨の通知を前記外部装置に行う、
請求項１から３のいずれか一項に記載の画像形成装置。

【請求項5】

前記第２通知部は、前記設定処理の実行開始からの処理時間を計測し、前記処理時間が前記タイムアウト時間より所定時間短く設定された待ち時間を超えるとき、前記第２通知を前記外部装置に行う、
請求項１から４のいずれか一項に記載の画像形成装置。

【請求項6】

前記第２通知部は、前記第２通知を前記外部装置に行った後、前記処理時間を０にリセットし、前記リセットからの前記設定処理の処理時間を計測し、計測された前記処理時間が前記待ち時間を超えるとき、前記第２通知を前記外部装置に行う、
請求項５に記載の画像形成装置。

【請求項7】

前記第１通知部は、前記設定処理の実行終了後、前記第１通知を前記外部装置に行う、
請求項１から６のいずれか一項に記載の画像形成装置。

【請求項8】

請求項１から７のいずれか一項に記載の画像形成装置と、前記外部装置と、を備える画像形成システムにおいて、
前記外部装置は、ユーザーからの音声指示を入力するスマートスピーカーを有する、
画像形成システム。

【請求項9】

請求項１から７のいずれか一項に記載の画像形成装置と、前記外部装置と、を備える画像形成システムにおいて、
前記外部装置は、
ユーザーからの音声指示を入力するスマートスピーカーと、
前記スマートスピーカーに入力された前記音声指示を前記画像形成装置に出力し、前記画像形成装置から通知された前記第１及び第２通知を前記スマートスピーカーに送信するサーバーと、
を有する、
画像形成システム。

【請求項10】

画像形成装置における応答通知方法であって、
外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行するとき、前記設定処理の実行終了に応じた第１通知を前記外部装置に行い、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う、
応答通知方法。

【請求項11】

コンピューターに、
外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行するとき、前記設定処理の実行終了に応じた第１通知を前記外部装置に行う第１通知処理と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知処理と、
を実行させる応答通知プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像形成装置、画像形成システム、応答通知方法及び応答通知プログラムに関する。

【背景技術】

【0002】

ユーザーが音声を入力して指示することにより、コピー、スキャン、プリント、ＦＡＸなどの複数の機能を音声で操作することができるＭＦＰ（Multi-Function Peripheral）などの画像形成装置が知られている（特許文献１を参照）。

【0003】

また、現在、多くの種類のスマートスピーカーが実用化されている。スマートスピーカーは、ユーザーの音声を取得し、取得した音声に対応する応答を音声として出力したり、取得した音声に対応する動作を、クラウドサーバーを介して、外部の機器などへ指示したりすることができる。

【0004】

上述した画像形成装置とスマートスピーカーとを接続する場合には、クラウドサーバーを介して、画像形成装置にユーザーの音声指示を送信して、画像形成装置を音声で操作することが可能となる。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２００６－０２３６３６号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

ところで、クラウドサーバーは、その応答動作のため、ユーザーの音声指示を画像形成装置に送信した後、画像形成装置からクラウドサーバーへ一定時間（例えば、５～７秒）応答がないと、タイムアウトになる仕様となっている場合あった。

【0007】

このような仕様の場合、ユーザーの音声指示を画像形成装置に送信したとき、画像形成装置で音声指示に対する処理に時間がかかり、画像形成装置からクラウドサーバーへ一定時間内に応答できないと、クラウドサーバーはタイムアウトとなってしまう。

【0008】

例えば、画像形成装置に画像形成の設定（例えば、用紙の選択など）を入力する場合、ユーザーが操作画面から直接入力する場合も、ユーザーがスマートスピーカーから音声入力する場合も、操作画面上で入力処理を行っている。そのため、スマートスピーカーから音声入力する場合は、操作画面上での設定の入力処理が終わるまで、画像形成装置からクラウドサーバーへの応答が遅れることになる。特に、入力された設定により、エラー（選択できない用紙を選択するなど）が発生したり、禁則処理（選択できない入力値かどうかの確認）が必要だったりする場合、その処理時間が長くなるため、画像形成装置からクラウドサーバーへの応答が遅れることになる。

【0009】

このように、スマートスピーカーから画像形成装置を音声操作する場合、音声操作により入力する設定の内容によっては、クラウドサーバーがタイムアウトとなってしまうことがある。このような場合、例えば、クラウドサーバーのタイムアウトにより、音声操作が中断して、その後の音声操作を継続できなくなるおそれがある。また、例えば、クラウドサーバーのタイムアウトにより、最初から操作し直すことになり、音声操作による操作性が悪化するおそれがある。

【0010】

本発明の目的は、外部装置から音声操作する場合において、外部装置のタイムアウトを回避可能な画像形成装置、画像形成システム、応答通知方法及び応答通知プログラムを提供することにある。

【課題を解決するための手段】

【0011】

本発明に係る画像形成装置は、
外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行する処理実行部と、
前記設定処理の実行終了に応じた第１通知を前記外部装置に行う第１通知部と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知部と、
を備える。
本発明に係る画像形成システムは、
上記の画像形成装置と、前記外部装置と、を備える画像形成システムにおいて、
前記外部装置は、ユーザーからの音声指示を入力するスマートスピーカーを有する、
画像形成システム。
本発明に係る画像形成システムは、
上記の画像形成装置と、前記外部装置と、を備える画像形成システムにおいて、
前記外部装置は、
ユーザーからの音声指示を入力するスマートスピーカーと、
前記スマートスピーカーに入力された前記音声指示を前記画像形成装置に出力し、前記画像形成装置から通知された前記第１及び第２通知を前記スマートスピーカーに送信するサーバーと、
を有する、
画像形成システム。

【0012】

本発明に係る応答通知方法は、
画像形成装置における応答通知方法であって、
外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行するとき、前記設定処理の実行終了に応じた第１通知を前記外部装置に行い、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う。

【0013】

本発明に係る応答通知プログラムは、
コンピューターに、
外部装置を介して入力された画像形成条件の設定指示の受信後、前記設定指示に応じた設定処理を実行するとき、前記設定処理の実行終了に応じた第１通知を前記外部装置に行う第１通知処理と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記設定処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知処理と、
を実行させる。

【発明の効果】

【0014】

本発明によれば、外部装置から音声操作する場合において、外部装置のタイムアウトを回避することができる。

【図面の簡単な説明】

【0015】

【図1】本発明の実施の形態に係る画像形成システムの概略構成を説明するブロック図である。

【図2】図１に示した画像形成システムにおいて、操作パネルから直接指示する場合の手順を説明するシーケンス図である。

【図3】図１に示した画像形成システムにおいて、音声指示に対する応答遅れはないが、エラーがある場合の手順を説明するシーケンス図である。

【図4】図１に示した画像形成システムにおいて、音声指示に対する応答遅れがあり、エラーがある場合の手順を説明するシーケンス図である。

【図5】図１に示した画像形成システムにおいて、音声指示に対する応答遅れがあり、エラーがない場合の手順を説明するシーケンス図である。

【図6】画像形成装置における制御手順を説明するフローチャートである。

【発明を実施するための形態】

【0016】

以下、本発明の実施の形態について、図面を参照して詳細に説明する。

【0017】

図１は、本実施の形態の画像形成システム１の概略構成を説明するブロック図である。画像形成システム１は、画像形成装置１０と、ネットワーク２０と、音声入出力装置３０と、サーバー４０とを備えている。画像形成装置１０は、ネットワーク２０を介して、音声入出力装置３０やサーバー４０と接続されている。

【0018】

画像形成装置１０は、コピー、スキャン、プリント、ＦＡＸなどの複数の処理機能を備えたＭＦＰであり、ネットワーク部１１、スキャナ部１２、プリンタ部１３、ＦＡＸ部１４を備える。

【0019】

ネットワーク部１１は、ＬＡＮ（Local Area Network）や電話回線などのネットワーク２０を介して、音声入出力装置３０やサーバー４０との間で各種の情報を送受信する通信処理を行う。ネットワーク２０は、ＬＡＮや電話回線に限らず、ＷＡＮ（Wide Area Network）などでもよく、また、無線、有線を問わない。

【0020】

スキャナ部１２は、原稿を光学的に読み取って画像データを作成し、画像のスキャン処理を行う。スキャナ部１２は、ＡＤＦ（Auto Document Feeder）と称される自動原稿給紙装置を備えていてもよい。その場合、ユーザーがＡＤＦの原稿トレイに多数枚の原稿をセットすると、原稿を１枚ずつ自動搬送し、原稿の画像を連続して一挙にスキャン処理することができる。

【0021】

プリンタ部１３は、スキャナ部１２で読み取った画像データや外部装置からの印刷用の画像データに基づいて、印刷用紙などのシート材に印刷し、画像のプリント処理を行う。例えば、コピーを行う場合には、スキャナ部１２を用いて原稿をスキャンし、プリンタ部１３を用いてシート材に印刷を行う。印刷方式としては、レーザー方式やインクジェット方式などの公知のどのような印刷方式も適用可能である。

【0022】

ＦＡＸ部１４は、電話回線などのネットワーク２０を介して、スキャナ部１２で読み取った画像データの送信や外部から送信された画像データの受信を行い、画像のＦＡＸ処理を行う。

【0023】

また、画像形成装置１０は、制御部１５（コンピューター）、操作パネル１６（表示部）などを備える。

【0024】

制御部１５は、詳細な図示は省略するが、ＣＰＵ（Central Processing Unit）などのプロセッサーと、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）などのメモリなどを備えている。この制御部１５が、操作パネル１６からの入力や音声入出力装置３０及びサーバー４０からの入力に基づいて、上述したネットワーク部１１、スキャナ部１２、プリンタ部１３、ＦＡＸ部１４を制御する。また、この制御部１５は、操作パネル１６の制御も行っている。

【0025】

操作パネル１６も、詳細な図示は省略するが、例えば、ＬＣＤ（Liquid Crystal Display）などの表示装置と表示装置の前面に取り付けられた透明なタッチパッドや入力ボタンなどを有する入力装置とから構成されている。タッチパッドや入力ボタンを用いて、操作パネル１６に入力された操作指示情報（コマンド）が制御部１５に入力される。

【0026】

音声入出力装置３０は、音声を入出力する装置である。音声入出力装置３０も、詳細な図示は省略するが、マイク、スピーカー、ネットワーク部、制御部などを有する。

【0027】

マイクは、外部から音声が入力されると、音声を電気信号として制御部へ出力する。スピーカーは、制御部から入力された電気信号を音声として外部に出力する。ネットワーク部は、ネットワーク２０を介して、画像形成装置１０やサーバー４０との間で各種の情報を送受信する通信処理を行う。制御部は、マイクから入力された音声の電気信号を符号化して音声データとし、ネットワーク部を介して、サーバー４０へ音声データを送信する。また、制御部は、ネットワーク部を介して、サーバー４０から送信された音声データを受信し、音声データを電気信号に変換して、スピーカーへ出力する。

【0028】

サーバー４０は、詳細な図示は省略するが、ＣＰＵなどのプロセッサーと、ＲＡＭ、ＲＯＭなどのメモリなどを備えている。サーバー４０は、ネットワーク部４１、制御部４２などを有する。

【0029】

ネットワーク部４１は、ネットワーク２０を介して、画像形成装置１０や音声入出力装置３０との間で各種の情報を送受信する通信処理を行う。

【0030】

制御部４２は、音声入出力装置３０から送信された音声データを操作指示情報（コマンド）に変換する音声認識処理を行う。制御部４２における音声認識処理は、公知のどのような方法も適用可能である。また、制御部４２は、音声認識処理により得られたコマンドに対応する処理、例えば、音声入出力装置３０への応答処理や画像形成装置１０へのコマンドの送信を行う。例えば、音声入出力装置３０に画像形成装置１０での処理を指示する音声が入力されると、その音声の音声データをコマンドに変換し、コマンドを画像形成装置１０へ送信する。このような制御部４２における処理は、例えば、サーバー４０上のアプリケーションとして提供される。

【0031】

上述した音声入出力装置３０は、所謂、スマートスピーカーとして機能し、また、サーバー４０は、ユーザーが音声入出力装置３０から入力した音声に応答したり、画像形成装置１０への指示を行ったりするクラウドサーバーとして機能する。

【0032】

従って、ユーザーが音声による操作指示（音声指示）を音声入出力装置３０から入力すると、サーバー４０は、音声指示の音声データをコマンドに変換して、画像形成装置１０へ送信する。そして、画像形成装置１０は、サーバー４０から送信されたコマンドに対応する処理を行うことになる。つまり、画像形成システム１においては、音声操作により、画像形成装置１０を操作することができる。

【0033】

ところで、サーバー４０は、その応答動作のため、ユーザーの音声指示を画像形成装置１０に送信した後、画像形成装置１０からサーバー４０へ一定時間応答がないと、タイムアウトになる仕様となっている場合ある。

【0034】

このような仕様の場合、ユーザーの音声指示を画像形成装置１０に送信したとき、画像形成装置１０で音声指示に対する処理に時間がかかり、画像形成装置１０からサーバー４０へ一定時間内に応答できないと、サーバー４０はタイムアウトとなってしまう。

【0035】

そこで、本実施の形態において、画像形成装置１０は、外部装置を介して入力した指示（音声指示）に応じて処理を実行する処理実行部と、処理の実行終了に応じた第１通知を外部装置に行う第１通知部とを備えるようにしている。また、画像形成装置１０は、第１通知に関して外部装置に設定されるタイムアウト時間前に、処理の実行が終了しないと推測される場合、第１通知とは異なる第２通知を外部装置に行う第２通知部を備えるようにしている。

【0036】

本実施の形態において、外部装置は、音声入出力装置３０及びサーバー４０である。なお、音声入出力装置３０がサーバー４０の機能を有する構成であれば、外部装置は、音声入出力装置３０であってもよい。

【0037】

処理実行部、第１通知部及び第２通知部は、各々、制御部１５の１つの機能として備えられている。例えば、処理実行部、第１通知部及び第２通知部は、制御部１５で実行されるプログラムとして備えられている。

【0038】

処理実行部は、音声入出力装置３０及びサーバー４０を介して入力した音声指示に応じて画像形成装置１０での処理を実行する。例えば、画像形成装置１０に画像形成の設定（例えば、用紙の選択など）を音声指示により入力した場合、処理実行部は、操作パネル１６の操作画面上で画像形成の設定の入力処理を実行する。

【0039】

また、第１通知部は、画像形成装置１０での処理の実行終了に応じた第１通知を音声入出力装置３０及びサーバー４０に行う（第１通知処理）。例えば、上述したように、処理実行部が画像形成の設定の入力処理を実行し、その入力処理がエラーなく終了した場合には、その実行終了に応じて、「設定しました」との旨の第１通知を音声入出力装置３０及びサーバー４０に行う。

【0040】

また、第２通知部は、第１通知に関して音声入出力装置３０及びサーバー４０に設定されるタイムアウト時間前に、画像形成装置１０での処理が終了するかどうかを推測する。そして、第２通知部は、画像形成装置１０での処理がタイムアウト時間前に終了しないと推測される場合、第１通知とは異なる第２通知を音声入出力装置３０及びサーバー４０に行う（第２通知処理）。例えば、上述したように、処理実行部が画像形成の設定の入力処理を実行し、その入力処理がタイムアウト時間前に終了しないと推測される場合、「設定できません」との旨の第２通知を音声入出力装置３０及びサーバー４０に行う。

【0041】

ここで、まず、図２を参照して、ユーザーが操作パネル１６から直接指示する場合の応答の手順について説明する。図２は、画像形成システム１において、操作パネル１６から直接指示する場合の手順を説明するシーケンス図である。その後、上述した構成を有する画像形成装置１０において、音声指示に対する応答の手順（応答通知方法及び応答通知プログラム）を図３～図５を参照して説明する。

【0042】

（ステップＳ１）
ユーザーは、操作パネル１６において、操作画面から直接入力することにより、画像形成の設定として、「カラーモード」を選択する。

【0043】

（ステップＳ２）
操作パネル１６は、ステップＳ１で「カラーモード」が選択されているので、「カラーモード」のコマンドを制御部１５に入力する。

【0044】

（ステップＳ３）
制御部１５は、画像形成装置１０において、「カラーモード」を設定する処理を行う。

【0045】

（ステップＳ４）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、操作パネル１６にエラーを出力する。例えば、画像形成装置１０が、「カラーモード」に対応せず、「モノクロモード」に対応する装置である場合、制御部１５は、画像形成装置１０で「カラーモード」を設定できないと判定し、操作パネル１６にエラーを出力する。

【0046】

（ステップＳ５）
操作パネル１６は、制御部１５から入力されたエラーを操作画面に表示する。例えば、操作画面に「設定できません」と表示する。

【0047】

（ステップＳ６）
操作パネル１６は、操作画面に「設定できませんと」表示することで、この旨をユーザーに通知する。

【0048】

以上のように、ユーザーが画像形成の設定を操作パネル１６の操作画面から直接入力する場合は、画像形成装置１０での処理となるため、もし、設定処理に時間がかかる場合でも、操作が中断する訳ではない。

【0049】

次に、音声指示に対する応答の手順であって、応答遅れはないが、エラーがある場合の手順を、図３を参照して説明する。図３は、画像形成システム１において、音声指示に対する応答遅れはないが、エラーがある場合の手順を説明するシーケンス図である。

【0050】

（ステップＳ１１）
ユーザーは、音声入出力装置３０に向かって、「カラーモード」と音声で指示をする。このように、音声で指示する音声指示は、例えば、画像形成を行う条件の設定指示である。

【0051】

（ステップＳ１２）
音声入出力装置３０は、入力された音声を音声データに符号化して、サーバー４０に送信する。

【0052】

（ステップＳ１３）
サーバー４０（制御部４２）は、音声入出力装置３０から送信された音声データの音声認識処理を行い、ステップＳ１１で「カラーモード」と音声で指示されているので、「カラーモード」のコマンドを画像形成装置１０の制御部１５へ送信する。以降、サーバー４０は、画像形成装置１０と音声入出力装置３０との間の応答制御を行うことになる。

【0053】

（ステップＳ１４）
制御部１５は、画像形成装置１０において、「カラーモード」を設定する処理を行う。このとき、制御部１５は、後述の図６（ステップＳ６４を参照）で説明するように、処理時間のタイマーＴ１の計測を開始する。また、制御部１５は、この計測を開始するより前に、図６（ステップＳ６２を参照）で説明するように、サーバー４０のタイムアウト時間に応じた応答待ち時間Ｔ０を設定している。応答待ち時間Ｔ０は、サーバー４０のタイムアウト時間に応じて適宜に変更されるが、タイムアウト時間より短い時間が設定される。

【0054】

（ステップＳ１５）
制御部１５は、処理が終了し、画像形成装置１０で「カラーモード」を設定できない場合、サーバー４０にエラー（第１通知）を通知する。このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０にエラーを通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでは、下記のステップＳ１６よりも前に、つまり、処理終了の直後に、サーバー４０にエラーを通知しており、処理開始からサーバー４０にエラーを通知するまでの時間を短くして、タイムアウトにならないようにしている。

【0055】

（ステップＳ１６）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、操作パネル１６にエラーを出力する。

【0056】

（ステップＳ１７）
操作パネル１６は、制御部１５から入力されたエラーを操作画面に表示する。例えば、操作画面に「設定できません」と表示する。

【0057】

（ステップＳ１８）
サーバー４０は、制御部１５からのエラーの通知を受けて、「設定できません」との音声データを音声入出力装置３０へ送信する。

【0058】

（ステップＳ１９）
音声入出力装置３０は、サーバー４０から送信された「設定できません」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「設定できません」との音声を出力させる。

【0059】

図３に示すように、サーバー４０のタイムアウト時間が、画像形成装置１０での処理時間より長ければ、タイムアウトの問題は起きない。しかしながら、タイムアウト時間は、サーバー４０により異なることがあるため、タイムアウト時間内に画像形成装置１０での処理が終わらない場合、後述の図４、図５で示すように、ダミーの応答を行って、タイムアウトを延長するようにする。

【0060】

次に、音声指示に対する応答の手順であって、応答遅れがあり、エラーがある場合の手順を、図４を参照して説明する。図４は、画像形成システム１において、音声指示に対する応答遅れがあり、エラーがある場合の手順を説明するシーケンス図である。

【0061】

（ステップＳ２１～Ｓ２４）
ステップＳ２１～Ｓ２４は、図３で示したステップＳ１１～Ｓ１４と同じであるので、ここでは、重複する説明は省略する。

【0062】

（ステップＳ２５）
制御部１５は、画像形成装置１０で「カラーモード」を設定する処理に時間がかかる場合、サーバー４０にダミー（第２通知）を通知する。例えば、「処理中です」との旨をダミーとして通知する。また、制御部１５は、処理にかかる時間を推測してもよいし、また、図６（ステップＳ６７を参照）で説明するように、計測している処理時間のタイマーＴ１が応答待ち時間Ｔ０を超えたら、処理に時間がかかると推測してもよい。つまり、制御部１５は、サーバー４０のタイムアウト時間の前に、サーバー４０にダミーを通知して、サーバー４０のタイムアウトを回避し、タイムアウトを延長するようにしている。

【0063】

また、このとき、制御部１５は、図６（ステップＳ６９を参照）で説明するように、処理時間のタイマーＴ１をリセットし、Ｔ１＝０とする。そして、タイマーＴ１の再計測を開始する。

【0064】

なお、制御部１５において、設定指示に応じた処理としては、設定指示の内容を画像形成装置１０の操作パネル１６に表示する処理、設定指示の内容に禁止された内容があるかどうかを判定する禁則処理などが含まれる。例えば、画像データを送信する場合、その宛先指定には、禁則処理が必要であり、そのような処理を行う場合、設定処理に時間がかかる場合がある。

【0065】

また、ダミーとして、「処理中です」に代えて、「作業中です」、「しばらく、お待ちください」などの定型文を用いてもよいし、処理の残時間を用いてもよい。

【0066】

（ステップＳ２６）
制御部１５は、画像形成装置１０で「カラーモード」を設定する処理に時間がかかる場合、操作パネル１６にダミーを出力する。例えば、「処理中です」との旨をダミーとして出力する。

【0067】

（ステップＳ２７）
操作パネル１６は、制御部１５から入力されたダミーを操作画面に表示する。例えば、操作画面に「処理中です」と表示する。

【0068】

（ステップＳ２８）
サーバー４０は、制御部１５からのダミーの通知を受けて、「処理中です」との音声データを音声入出力装置３０へ送信する。

【0069】

（ステップＳ２９）
音声入出力装置３０は、サーバー４０から送信された「処理中です」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「処理中です」との音声を出力させる。

【0070】

（ステップＳ３０）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、サーバー４０にエラー（第１通知）を通知する。ステップＳ２５で、タイマーＴ１をリセットし、Ｔ１＝０として、タイマーＴ１を再計測しており、このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、再計測後の応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０にエラーを通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでも、下記のステップＳ３１よりも前に、つまり、処理終了の直後に、サーバー４０にエラーを通知しており、再計測開始からサーバー４０にエラーを通知するまでの時間を短くして、タイムアウトにならないようにしている。

【0071】

（ステップＳ３１～Ｓ３４）
ステップＳ３１～Ｓ３４は、図３で示したステップＳ１６～Ｓ１９と同じであるので、ここでは、重複する説明は省略する。

【0072】

次に、音声指示に対する応答の手順であって、応答遅れがあり、エラーがない場合の手順を、図５を参照して説明する。図５は、画像形成システム１において、音声指示に対する応答遅れがあり、エラーがない場合の手順を説明するシーケンス図である。

【0073】

（ステップＳ４１～Ｓ４９）
ステップＳ４１～Ｓ４９は、図４で示したステップＳ２１～Ｓ２９と同じであるので、ここでは、重複する説明は省略する。

【0074】

（ステップＳ５０）
制御部１５は、画像形成装置１０で「カラーモード」を設定後、サーバー４０に設定完了（第１通知）を通知する。ステップＳ４５で、タイマーＴ１をリセットし、Ｔ１＝０として、タイマーＴ１を再計測しており、このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、再計測後の応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０に設定完了を通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでも、下記のステップＳ５１よりも前に、つまり、処理終了の直後に、サーバー４０に設定完了を通知しており、再計測開始からサーバー４０に設定完了を通知するまでの時間を短くして、タイムアウトにならないようにしている。

【0075】

（ステップＳ５１）
制御部１５は、画像形成装置１０で「カラーモード」を設定後、操作パネル１６に設定完了を出力する。

【0076】

（ステップＳ５２）
操作パネル１６は、制御部１５から入力された設定完了を操作画面に表示する。例えば、操作画面に「設定完了」と表示する。

【0077】

（ステップＳ５３）
サーバー４０は、制御部１５からの設定完了の通知を受けて、「設定しました」との音声データを音声入出力装置３０へ送信する。

【0078】

（ステップＳ５４）
音声入出力装置３０は、サーバー４０から送信された「設定しました」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「設定しました」との音声を出力させる。

【0079】

以上のように、サーバー４０のタイムアウト時間内に画像形成装置１０での処理が終わらない場合、ダミーの応答を行って、タイムアウトを延長するようにしている。これにより、音声操作の中断や再操作を防止することができ、音声操作の操作性の悪化を防止することができる。

【0080】

次に、上述した図３～図５のシーケンスにおける画像形成装置１０の制御部１５での制御手順を、図６を参照して説明する。図６は、画像形成装置１０における制御手順を説明するフローチャートである。

【0081】

（ステップＳ６１）
制御部１５は、音声操作サービスが選択されているかどうかを判断する。音声操作サービスが選択されている場合（ＹＥＳ）、ステップＳ６２へ進み、選択されていない場合（ＮＯ）、ステップＳ７０に進む。音声操作サービスが選択されていない場合、例えば、前述した図２でのシーケンスが実施されることになる。また、音声操作サービスの選択は、例えば、ユーザーが予め操作パネル１６を用いて設定する。

【0082】

（ステップＳ６２）
制御部１５は、サーバー４０のタイムアウト時間に応じた応答待ち時間Ｔ０を設定する。この応答待ち時間Ｔ０は、タイムアウト時間より所定時間短く設定され、例えば、タイムアウト時間を７秒とすると、応答待ち時間Ｔ０を６秒とする。

【0083】

（ステップＳ６３）
制御部１５は、サーバー４０からの音声指示があるかどうかを確認する。音声指示がある場合（ＹＥＳ）、ステップＳ６４へ進み、ない場合（ＮＯ）、ステップＳ６３を繰り返す。

【0084】

（ステップＳ６４）
制御部１５は、サーバー４０からの音声指示があれば、処理時間のタイマーＴ１の計測を開始する。このタイマーＴ１により、音声指示に応じて画像形成装置１０で実施される処理、例えば、上述した設定処理にかかる時間を計測する。

【0085】

（ステップＳ６５）
制御部１５は、音声指示に応じて画像形成装置１０で実施される処理、例えば、上述した設定処理の実行を開始する。

【0086】

（ステップＳ６６）
制御部１５は、画像形成装置１０で実施される処理が終了したかどうかを判断する。処理が終了した場合（ＹＥＳ）、ステップＳ７０へ進み、終了していない場合（ＮＯ）、ステップＳ６７に進む。つまり、制御部１５は、処理が終了するまで、後述のステップＳ６７～Ｓ６９を繰り返す。なお、処理が長引かないように、タイムアウトの延長回数の上限の設け、その上限の回数まで、後述のステップＳ６７～Ｓ６９を繰り返すようにしてもよい。

【0087】

（ステップＳ６７）
制御部１５は、処理時間のタイマーＴ１と応答待ち時間Ｔ０とを比較し、Ｔ１＞Ｔ０である場合（ＹＥＳ）、ステップＳ６８へ進み、Ｔ１＞Ｔ０でない場合（ＮＯ）、ステップＳ６６に戻る。

【0088】

（ステップＳ６８）
制御部１５は、Ｔ１＞Ｔ０である場合、つまり、処理時間のタイマーＴ１が応答待ち時間Ｔ０を超えたとき、ダミーをサーバー４０に通知し、また、操作パネル１６に画面表示する。例えば、「処理中です」との旨をダミーとしてサーバー４０に通知し、また、「処理中です」と操作パネル１６に画面表示する。これにより、サーバー４０は、タイムアウトとはならない。

【0089】

（ステップＳ６９）
制御部１５は、処理時間のタイマーＴ１をリセットし、Ｔ１＝０とする。そして、タイマーＴ１の再計測を開始し、ステップＳ６６へ戻る。

【0090】

制御部１５は、ステップＳ６７～Ｓ６９を繰り返す場合、ステップＳ６７で、Ｔ１＞Ｔ０である場合には、サーバー４０にダミーを再通知し、また、操作パネル１６にダミーを再表示することになる。

【0091】

（ステップＳ７０）
制御部１５は、処理が終了した場合、処理結果をサーバー４０に通知し、また、操作パネル１６に画面表示する。例えば、図５の場合は、「設定しました」との旨をサーバー４０に通知し、また、「設定しました」と操作パネル１６に画面表示する。

【0092】

このように、画像形成装置１０において、制御部１５は、音声指示に応じた処理の処理時間であるタイマーＴ１を計測し、タイマーＴ１が予め設定した応答待ち時間Ｔ０を超える場合、サーバー４０にダミーを通知している。応答待ち時間Ｔ０は、サーバー４０のタイムアウト時間より短く設定されているので、Ｔ１＞Ｔ０となったときに、サーバー４０にダミーを通知することで、サーバー４０のタイムアウトを確実に回避することができる。

【0093】

以上詳しく説明したように、本実施の形態の画像形成システム１において、画像形成装置１０は、外部装置を介して入力した指示（音声指示）に応じて処理を実行する処理実行部と、処理の実行終了に応じた第１通知を外部装置に行う第１通知部とを備える。また、画像形成装置１０は、第１通知に関して外部装置に設定されるタイムアウト時間前に、処理の実行が終了しないと推測される場合、第１通知とは異なる第２通知を外部装置に行う第２通知部を備える。

【0094】

このように構成した本実施の形態によれば、外部装置である音声入出力装置３０及びサーバー４０から音声操作する場合において、サーバー４０のタイムアウトを回避することができる。

【0095】

従って、サーバー４０のタイムアウトにより、音声操作が中断して、その後の音声操作を継続できなくなったり、最初から操作し直すことになったりすることがなくなり、音声操作の中断や音声操作の操作性の悪化を防止することができる。

【0096】

なお、上記実施の形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。

【符号の説明】

【0097】

１ 画像形成システム
１０ 画像形成装置
１１ ネットワーク部
１２ スキャナ部
１３ プリンタ部
１４ ＦＡＸ部
１５ 制御部
１６ 操作パネル
２０ ネットワーク
３０ 音声入出力装置
４０ サーバー
４１ ネットワーク部
４２ 制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】