特許 7392486 画像形成装置、表示制御方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-11-28

(45)【発行日】2023-12-06

(54)【発明の名称】画像形成装置、表示制御方法、およびプログラム

(51)【国際特許分類】

   G03G 21/00 20060101AFI20231129BHJP

   G06F 3/16 20060101ALI20231129BHJP

   B41J 29/42 20060101ALI20231129BHJP

   B41J 29/38 20060101ALI20231129BHJP

   H04N 1/00 20060101ALI20231129BHJP

【ＦＩ】

G03G21/00 386

G03G21/00 388

G06F3/16 650

G06F3/16 630

B41J29/42 F

B41J29/38

H04N1/00 350

【請求項の数】 19

(21)【出願番号】P 2020006161

(22)【出願日】2020-01-17

(65)【公開番号】P2021113886

(43)【公開日】2021-08-05

【審査請求日】2022-11-17

(73)【特許権者】

【識別番号】000001270

【氏名又は名称】コニカミノルタ株式会社

(74)【代理人】

【識別番号】110001195

【氏名又は名称】弁理士法人深見特許事務所

(72)【発明者】

【氏名】久野 高資

【審査官】中澤 俊彦

(56)【参考文献】

【文献】特開２０１０－０４９４３２（ＪＰ，Ａ）

【文献】特開２０１３－２２２２２９（ＪＰ，Ａ）

【文献】特開２０１９－１５３１４６（ＪＰ，Ａ）

【文献】特開２００２－１２３２３９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０３Ｇ ２１／００

Ｇ０６Ｆ ３／１６

Ｂ４１Ｊ ２９／４２

Ｂ４１Ｊ ２９／３８

Ｈ０４Ｎ １／００

(57)【特許請求の範囲】

【請求項1】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段とを備え、
前記表示制御手段は、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面である場合には、前記条件に関わらず、前記第１の画面を前記表示手段に表示させる、画像形成装置。

【請求項2】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段と、
タッチ操作に基づく入力を受け付けるタッチ入力受付手段とを備え、
前記表示制御手段は、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面でなく、かつ、前記第２の画面を表示した後に前記タッチ入力受付手段が入力を受け付けていない場合に、前記第１の画面が前記第２の画面の下位の階層の画面であるか否かを判定する、画像形成装置。

【請求項3】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段と、
タッチ操作に基づく入力を受け付けるタッチ入力受付手段とを備え、
前記表示制御手段は、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面でなく、かつ、前記第２の画面を表示した後に前記タッチ入力受付手段が入力を受け付けた場合、前記条件に関わらず、前記第１の画面を前記表示手段に表示させる、画像形成装置。

【請求項4】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段とを備え、
前記表示制御手段は、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記音声情報に基づいて複数の前記第１の画面が特定された場合、前記複数の第１の画面のうち、前記第２の画面よりも下位の階層の第１の画面を、前記表示手段に表示させる、画像形成装置。

【請求項5】

前記解析手段は、前記画像形成装置が前記音声情報として予め定められた用語の入力を受け付けると、前記複数の画面から、前記用語を含む第１の画面を複数抽出し、
前記表示制御手段は、抽出された前記複数の第１の画面のうち、前記第２の画面よりも下位の階層の第１の画面を、前記表示手段に表示させる、請求項４に記載の画像形成装置。

【請求項6】

前記用語は、両面またはとじ代である、請求項５に記載の画像形成装置。

【請求項7】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段とを備え、
前記表示制御手段は、前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記第２の画面は、設定値を段階的に変化させるソフトウェアキーを含み、
前記表示制御手段は、前記ソフトウェアキーが操作されたことを条件に、前記第１の画面が前記第２の画面の下位の階層の画面であるか否かを判定する、画像形成装置。

【請求項8】

前記表示制御手段は、前記第１の画面が前記第２の画面の下位の階層の画面でないと判断された場合、前記ソフトウェアキーが操作されてから予め定められた時間が経過すると、前記条件に関わらず、前記第１の画面を前記表示手段に表示させる、請求項７に記載の画像形成装置。

【請求項9】

前記ソフトウェアキーは、コピー時の濃度、明度、彩度、およびコントラストの少なくとも１つの設定値を変化させるためのキーである、請求項７または８に記載の画像形成装置。

【請求項10】

表示手段と、
各々が階層的に管理された複数の画面を選択的に前記表示手段に表示させる表示制御手段と、
入力された音声情報に基づいて前記表示手段に表示させる画面を特定する解析手段とを備え、
前記表示制御手段は、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記表示手段に表示させ、
前記複数の画面は、第１の設定を行う画面と、第２の設定を行う画面とを含み、
前記第２の設定を行う画面は、前記第１の設定を行う画面よりも下位の階層の画面であり、
前記表示制御手段は、前記表示手段に表示させる画面を、前記第１の設定を行う画面から前記第２の設定を行う画面に直接遷移させた直後に、前記第１の画面として前記第１の設定を行う画面が前記音声情報に基づいて特定された場合には、前記第１の設定を行う画面を前記表示手段に表示させない、画像形成装置。

【請求項11】

タッチ操作に基づく入力を受け付けるタッチ入力受付手段をさらに備え、
前記第２の設定を行う画面は、予め定められた機能を設定する画面を表示させるためのソフトウェアキーを含み、
前記表示制御手段は、
前記タッチ入力受付手段に対する入力によって前記ソフトウェアキーが選択されると、前記予め定められた機能を設定する画面を前記表示手段に表示させ、
前記表示手段に表示させる画面を、前記第１の設定を行う画面から前記第２の設定を行う画面に直接遷移させた直後に、前記第１の画面として前記予め定められた機能を設定する画面が前記音声情報に基づいて特定された場合には、前記予め定められた機能を設定する画面を前記表示手段に表示させる、請求項１０に記載の画像形成装置。

【請求項12】

前記予め定められた機能は、とじ代機能またはイレース機能である、請求項１１に記載の画像形成装置。

【請求項13】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面である場合には、前記条件に関わらず、前記第１の画面を前記ディスプレイに表示させる、表示制御方法。

【請求項14】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面でなく、かつ、前記第２の画面を表示した後に前記画像形成装置のコントローラがタッチ操作に基づく入力を受け付けていない場合に、前記第１の画面が前記第２の画面の下位の階層の画面であるか否かを判定するステップをさらに備える、表示制御方法。

【請求項15】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記第２の画面が表示される直前に表示されていた第３の画面が前記第２の画面の下位の階層の画面でなく、かつ、前記第２の画面を表示した後に前記画像形成装置のコントローラがタッチ操作に基づく入力を受け付けた場合、前記条件に関わらず、前記第１の画面を前記ディスプレイに表示させる、表示制御方法。

【請求項16】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、
前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記音声情報に基づいて複数の前記第１の画面が特定された場合、前記複数の第１の画面のうち、前記第２の画面よりも下位の階層の第１の画面を、前記ディスプレイに表示させる、表示制御方法。

【請求項17】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記第２の画面は、設定値を段階的に変化させるソフトウェアキーを含み、
前記ソフトウェアキーが操作されたことを条件に、前記第１の画面が前記第２の画面の下位の階層の画面であるか否かを判定するステップをさらに備える、表示制御方法。

【請求項18】

画像形成装置の表示制御方法であって、
各々が階層的に管理された複数の画面を選択的に前記画像形成装置のディスプレイに表示させるステップと、
入力された音声情報に基づいて前記ディスプレイに表示させる画面を特定するステップとを備え、
前記ディスプレイに表示させるステップでは、前記複数の画面のうち前記音声情報に基づいて特定された第１の画面が、前記ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、前記第１の画面を前記ディスプレイに表示させ、
前記複数の画面は、第１の設定を行う画面と、第２の設定を行う画面とを含み、
前記第２の設定を行う画面は、前記第１の設定を行う画面よりも下位の階層の画面であり、
前記ディスプレイに表示させる画面を、前記第１の設定を行う画面から前記第２の設定を行う画面に直接遷移させた直後に、前記第１の画面として前記第１の設定を行う画面が前記音声情報に基づいて特定された場合には、前記第１の設定を行う画面を前記ディスプレイに表示させないように制御するステップをさらに備える、表示制御方法。

【請求項19】

請求項１３から１８のいずれか１項に記載の表示制御方法に含まれるステップを、画像形成装置のプロッセッサに実行させる、プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像形成装置、表示制御方法、およびプログラムに関する。

【背景技術】

【0002】

従来、プリンター、複写機、ファクシミリ、およびこれらの複合機（ＭＦＰ：Ｍｕｌｔｉｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）などの画像形成装置が知られている。このような画像形成装置は、ディスプレイを有する操作パネルを備える。

【0003】

また、このような画像形成装置に対して、ユーザーの音声によって操作パネルに表示させる画面を遷移させる技術も提案されている。

【0004】

たとえば特開２０１０－４９４３２号公報（特許文献１）には、このような技術が搭載された画像形成装置が開示されている。この画像形成装置は、音声認識を行う際に参照する辞書テーブルを、表示部に表示する階層構造の表示画面ごとに設定して記憶している。さらに、当該画像形成装置では、表示画面ごとの辞書テーブルには、階層構造に従って表示部の表示画面を順次下位層の画面に遷移させていくための第１の認識候補群と、階層構造に従わずに表示部の表示画面を特定の画面にダイレクトに遷移させるための第２の認識候補群とが含まれている。画像形成装置は、認識された音声が第２の認識候補群に含まれる音声である場合、表示部における表示画面を特定の画面に遷移させる。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２０１０－４９４３２号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

上記のような音声認識の技術を用いる場合、以下のような問題点が生じうる。たとえば、ユーザーが意図した画面（たとえば、濃度設定の画面）を表示させた後に、当該画面に対して操作をしていないにもかかわらず、音声を誤って発してしまう場合がある。このような場合、ユーザーが意図していない画面（たとえば、レイアウト設定の画面）に遷移してしまう場合がある。

【0007】

本開示は、上記の問題点に鑑みなされたものであって、その目的は、入力された音声情報によって画面がユーザーの意図しない画面に遷移してしまうことを低減することにある。

【課題を解決するための手段】

【0008】

本開示のある局面に従うと、画像形成装置は、表示手段と、各々が階層的に管理された複数の画面を選択的に表示手段に表示させる表示制御手段と、入力された音声情報に基づいて表示手段に表示させる画面を特定する解析手段とを備える。表示制御手段は、複数の画面のうち音声情報に基づいて特定された第１の画面が、表示手段に表示中の第２の画面の下位の階層の画面であることを条件に、第１の画面を表示手段に表示させる。

【0009】

好ましくは、表示制御手段は、第２の画面が表示される直前に表示されていた第３の画面が第２の画面の下位の階層の画面である場合には、条件に関わらず、第１の画面を表示手段に表示させる。

【0010】

好ましくは、画像形成装置は、タッチ操作に基づく入力を受け付けるタッチ入力受付手段をさらに備える。表示制御手段は、第２の画面が表示される直前に表示されていた第３の画面が第２の画面の下位の階層の画面でなく、かつ、第２の画面を表示した後にタッチ入力受付手段が入力を受け付けていない場合に、第１の画面が第２の画面の下位の階層の画面であるか否かを判定する。

【0011】

好ましくは、画像形成装置は、タッチ操作に基づく入力を受け付けるタッチ入力受付手段をさらに備える。表示制御手段は、第２の画面が表示される直前に表示されていた第３の画面が第２の画面の下位の階層の画面でなく、かつ、第２の画面を表示した後にタッチ入力受付手段が入力を受け付けた場合、条件に関わらず、第１の画面を表示手段に表示させる。

【0012】

好ましくは、表示制御手段は、音声情報に基づいて複数の第１の画面が特定された場合、複数の第１の画面のうち、第２の画面よりも下位の階層の第１の画面を、表示手段に表示させる。

【0013】

好ましくは、解析手段は、画像形成装置が音声情報として予め定められた用語の入力を受け付けると、複数の画面から、用語を含む第１の画面を複数抽出する。表示制御手段は、抽出された複数の第１の画面のうち、第２の画面よりも下位の階層の第１の画面を、表示手段に表示させる。

【0014】

好ましくは、用語は、両面またはとじ代である。
好ましくは、第２の画面は、設定値を段階的に変化させるソフトウェアキーを含む。表示制御手段は、ソフトウェアキーが操作されたことを条件に、第１の画面が第２の画面の下位の階層の画面であるか否かを判定する。

【0015】

好ましくは、表示制御手段は、第１の画面が第２の画面の下位の階層の画面でないと判断された場合、ソフトウェアキーが操作されてから予め定められた時間が経過すると、条件に関わらず、第１の画面を表示手段に表示させる。

【0016】

好ましくは、ソフトウェアキーは、コピー時の濃度、明度、彩度、およびコントラストの少なくとも１つの設定値を変化させるためのキーである。

【0017】

好ましくは、複数の画面は、第１の設定を行う画面と、第２の設定を行う画面とを含む。第２の設定を行う画面は、第１の設定を行う画面よりも下位の階層の画面である。表示制御手段は、表示手段に表示させる画面を、第１の設定を行う画面から第２の設定を行う画面に直接遷移させた直後に、第１の画面として第１の設定を行う画面が音声情報に基づいて特定された場合には、第１の設定を行う画面を表示手段に表示させない。

【0018】

好ましくは、画像形成装置は、タッチ操作に基づく入力を受け付けるタッチ入力受付手段をさらに備える。第２の設定を行う画面は、予め定められた機能を設定する画面を表示させるためのソフトウェアキーを含む。表示制御手段は、タッチ入力受付手段に対する入力によってソフトウェアキーが選択されると、予め定められた機能を設定する画面を表示手段に表示させる。表示制御手段は、表示手段に表示させる画面を、第１の設定を行う画面から第２の設定を行う画面に直接遷移させた直後に、第１の画面として予め定められた機能を設定する画面が音声情報に基づいて特定された場合には、予め定められた機能を設定する画面を表示手段に表示させる。

【0019】

好ましくは、予め定められた機能は、とじ代機能またはイレース機能である。
本開示のある他の局面に従うと、画像形成装置の表示制御方法は、各々が階層的に管理された複数の画面を選択的に画像形成装置のディスプレイに表示させるステップと、入力された音声情報に基づいてディスプレイに表示させる画面を特定するステップとを備える。ディスプレイに表示させるステップでは、複数の画面のうち音声情報に基づいて特定された第１の画面が、ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、第１の画面をディスプレイに表示させる。

【0020】

本開示のさらに他の局面に従うと、画像形成装置を制御するプログラムは、各々が階層的に管理された複数の画面を選択的にディスプレイに表示させるステップと、入力された音声情報に基づいてディスプレイに表示させる画面を特定するステップとを、画像形成装置のプロッセッサに実行させる。ディスプレイに表示させるステップでは、複数の画面のうち音声情報に基づいて特定された第１の画面が、ディスプレイに表示中の第２の画面の下位の階層の画面であることを条件に、第１の画面をディスプレイに表示させる。

【発明の効果】

【0021】

本開示によれば、入力された音声情報によって画面がユーザーの意図しない画面に遷移してしまうことを低減することが可能となる。

【図面の簡単な説明】

【0022】

【図1】画像形成装置の全体構成を示す図である。

【図2】画像形成装置のハードウェア構成の一例を説明するためのブロック図である。

【図3】画像形成装置の操作パネルを表した模式図である。

【図4】操作パネルのタッチスクリーンに表示される画面の画面遷移例を表した図である。

【図5】操作パネルのタッチスクリーンに表示される画面の他の画面遷移例を表した図である。

【図6】コントローラーにおいて管理されているデーターベースの概略構成を表した図である。

【図7】画像形成装置の機能的構成を説明するための機能ブロック図である。

【図8】画像形成装置で実行される処理のフローを表したフロー図である。

【図9】図８のステップＳ９の詳細を表したフロー図である。

【図10】図８のステップＳ６の詳細を表したフロー図である。

【図11】図８のステップＳ１１の詳細を表したフロー図である。

【図12】図８のステップＳ１１の他の詳細を表したフロー図である。

【図13】図８のステップＳ４の詳細を表したフロー図である。

【発明を実施するための形態】

【0023】

実施の形態における画像形成装置について、以下、図を参照しながら説明する。以下に説明する実施の形態において、個数、量などに言及する場合、特に記載がある場合を除き、本開示の範囲は必ずしもその個数、量などに限定されない。同一の部品、相当部品に対しては、同一の参照番号を付し、重複する説明は繰り返さない場合がある。

【0024】

図面においては、実際の寸法の比率に従って図示しておらず、構造の理解を容易にするために、構造が明確となるように比率を変更して図示している箇所がある。なお、以下で説明される変形例は、適宜選択的に組み合わされてもよい。

【0025】

なお、画像形成装置は、カラープリンターであってもよいし、モノクロプリンターであってもよいし、ＦＡＸであってもよいし、あるいは、モノクロプリンター、カラープリンターおよびＦＡＸの複合機（ＭＦＰ：Multi-Functional Peripheral）であってもよい。

【0026】

＜Ａ．画像形成装置の全体構成＞
図１は、画像形成装置の全体構成を示す図である。

【0027】

図１を参照して、画像形成装置１は、本体部１０と、後処理装置２０とを備える。本体部１０は、給紙ユニット１４と、コントローラー３１と、操作パネル３４とを備える。後処理装置２０は、複数の排紙トレイ２１，２２，２３を有する。

【0028】

＜Ｂ．画像形成装置のハードウェア構成＞
図２は、画像形成装置１のハードウェア構成の一例を説明するためのブロック図である。

【0029】

図２を参照して、本体部１０は、画像形成ユニット１１と、スキャナーユニット１２と、給紙ユニット１４と、メディアセンサー１６と、コントローラー３１と、固定記憶装置３２と、短距離無線ＩＦ（Inter Face）３３と、電源スイッチ３９と、操作パネル３４と、プリンタコントローラー３５と、ネットワークＩＦ３６と、ワイアレスＩＦ３７と、外部機器ＩＦ３８とを有する。コントローラー３１には、各部１１，１２，１４，１６，３２～３９がバス３０を介して接続されている。

【0030】

コントローラー３１は、画像形成装置１の動作を制御する。コントローラー３１は、ＣＰＵ（Central Processing Unit）３１１と、制御プログラムの格納されたＲＯＭ（Read Only Memory）３１２と、作業用のＳ－ＲＡＭ（Static Random Access Memory）３１３と、画像形成に関わる各種の設定を記憶するバッテリバックアップされたＮＶ－ＲＡＭ（Non-Volatile RAM：不揮発性メモリ）３１４と、時計ＩＣ（Integrated Circuit）３１５とを有する。各部３１１～３１５は、バス３０を介して接続されている。また、コントローラー３１は、典型的には、制御基盤として本体部１０に内蔵される。

【0031】

電源スイッチ３９は、画像形成装置１をオンおよびオフさせるためのスイッチである。電源スイッチ３９は、主電源のスイッチである。

【0032】

操作パネル３４は、典型的には、物理キー（ハードウェアキー）と、タッチスクリーンとで構成される。詳しくは、操作パネル３４は、物理キー群５０と、タッチスクリーン６０と、マイク７０とを備える。

【0033】

物理キー群５０は、物理キー（ハードウェアキー）として、スタートキー５１、ストップキー５２、リセットキー５３等を有する。タッチスクリーン６０は、ディスプレイ６１と、タッチパネル６２とを有する。典型的には、タッチスクリーン６０は、ディスプレイ６１の上にタッチパネル６２が重畳されたデバイスである。

【0034】

操作パネル３４のディスプレイ６１は、複数の画面（操作画面）を表示可能である。各画面は、１つ以上のソフトウェアキーを含み得る。ユーザーは、ソフトウェアキーを選択することにより、画像形成装置１に当該ソフトウェアキーに基づく処理を実行させることが可能となる。なお、ソフトウェアキーは、ソフトウェアボタンとも称される。

【0035】

マイク７０は、ユーザーの音声を集音する。集音した音声（詳しくは、音声データー）は、コントローラー３１に送られる。コントローラー３１では、音声認識が実行される。なお、マイク７０は、操作パネル３４以外に設けられていてもよい。

【0036】

ネットワークＩＦ３６は、ネットワークを介して接続されたサーバー（図示せず）、ＰＣ（図示せず）および他の画像形成装置（図示せず）をはじめとする外部装置との間で各種の情報を送受信する。

【0037】

プリンタコントローラー３５は、ネットワークＩＦ３６により受信したプリントデーターから複写画像を生成する。画像形成ユニット１１は、複写画像を用紙上に形成する。

【0038】

なお、固定記憶装置３２は、典型的には、ハードディスク装置である。固定記憶装置３２には、各種のデーターが記憶されている。なお、固定記憶装置３２は、フラッシュメモリであってもよい。

【0039】

外部機器ＩＦ３８は、典型的には、ＵＳＢ用の通信インターフェイスである。外部機器ＩＦ３８は、本例では、操作パネル３４の側面に設けられている。なお、外部機器ＩＦが設けられる場所は、操作パネル３４に限定されるものではない。

【0040】

コントローラー３１による一連の処理は、典型的には、画像形成装置１に予め記憶されたプログラム（インストールされたプログラム）をＣＰＵ３１１が実行することにより実現される。

【0041】

＜Ｃ．操作パネル３４の概要＞
図３は、画像形成装置１の操作パネル３４を表した模式図である。

【0042】

図３を参照して、操作パネル３４は、タッチスクリーン６０と、マイク７０と、複数の物理キー（スタートキー５１、ストップキー５２，リセットキー５３等）とを有する。

【0043】

タッチスクリーン６０には、コントローラー３１からの指示に基づき、デフォルトの画面Ｇ０が表示されている。当該画面Ｇ０は、複数のソフトウェアキー５３１～５３５を含む。

【0044】

ユーザー操作に基づいてソフトウェアキー５３１が選択されると、コントローラー３１は、タッチスクリーン６０の表示画面を、現在の画面Ｇ０から、コピーの設定を行う画面に遷移させる。

【0045】

ソフトウェアキー５３２が選択されると、コントローラー３１は、タッチスクリーン６０の表示画面を、現在の画面Ｇ０から、ファックスおよびスキャンの設定を行う画面に遷移させる。

【0046】

他のソフトウェアキー５３３～５３５が選択されると、コントローラー３１は、タッチスクリーン６０の表示画面を、現在の画面Ｇ０から、選択されたソフトキーに対応する画面に遷移する。

【0047】

＜Ｄ．操作パネル３４における画面遷移例＞
（ｄ１．タッチ操作による画面遷移例）
説明の便宜上、先ずタッチ操作に基づく画面遷移処理を説明する。なお、画面は、「操作画面」、「設定画面」とも称される。

【0048】

図４は、操作パネル３４のタッチスクリーン６０に表示される画面の画面遷移例を表した図である。

【0049】

コントローラー３１は、複数の画面を階層構造にて管理している。コントローラー３１は、このように各々が階層的に管理された複数の画面を選択的にタッチスクリーン６０（詳しくは、ディスプレイ６１）に表示させる。図４を参照して、図３においてソフトウェアキー５３１がユーザーのタッチ操作によって選択されると、コントローラー３１は、タッチスクリーン６０にコピーの基本設定を行う画面Ｇ１１を表示する。

【0050】

画面Ｇ１１は、原稿設定を行う画面を表示させるためのソフトウェアキー１１０１と、レイアウト定を行う画面を表示させるためのソフトウェアキー１１０２と、濃度設定を行う画面を表示させるためのソフトウェアキー１１０３と、コピー部数を設定するためのソフトウェアキー１１０４と、応用設定を行う画面を表示させるためのソフトウェアキー１１０５とを含む。なお、ソフトウェアキーは、「ソフトウェアボタン」とも称される。

【0051】

以下では、説明の便宜上、画面Ｇ１１の階層を「第１階層」と称し、画面Ｇ１１よりも１つ下位の階層を「第２階層」と称し、第２階層よりも１つ下位の階層を「第３階層」とも称する。また、以下では、図４に基づき、第１階層と第２階層との間の画面遷移例を説明する。次いで、図５に基づき、第２階層と第３階層との間の画面遷移例を説明する。

【0052】

（１）第１の例
画面Ｇ１１においてソフトウェアキー１１０５がタッチ操作によって選択されると、コントローラー３１は、画面Ｇ１１よりも１つ下位の階層（第２階層）の画面Ｇ２１をタッチスクリーン６０に表示させる。画面Ｇ２１は、とじ代設定を行う画面を表示させるためのソフトウェアキー２１０１と、イレース設定を行う画面を表示させるためのソフトウェアキー２１０２と、ネガポジ設定を行う画面を表示させるためのチェックボックス２１０３と、基本設定の画面Ｇ１１に戻るためのソフトウェアキー２１０４とを含む。

【0053】

このように、画面Ｇ１１から画面Ｇ１１よりも１つ下位の階層の画面Ｇ２１への遷移は、ソフトウェアキー１１０５の選択に基づき行われる。その一方、画面Ｇ２１から画面Ｇ２１よりも１つ上位の階層（第１階層）の画面Ｇ１１への遷移は、ソフトウェアキー２１０４の選択に基づき行われる。

【0054】

（２）第２の例
画面Ｇ１１においてソフトウェアキー１１０３がタッチ操作によって選択されると、コントローラー３１は、画面Ｇ１１よりも１つ下位の階層の画面Ｇ２２をタッチスクリーン６０に表示させる。

【0055】

画面Ｇ２２は、濃度を低下（ダウン）させるソフトウェアキー２２０１と、濃度を上昇（アップ）させるソフトウェアキー２２０２と、明度設定を行う画面を表示させるためのソフトウェアキー２２０３と、彩度設定を行う画面を表示させるためのソフトウェアキー２２０４と、コントラスト設定を行う画面を標示させるためのソフトウェアキー２２０５と、濃度設定を中止するためのソフトウェアキー２２０６と、濃度を確定させるためのソフトウェアキー２２０７とを含む。ソフトウェアキー２２０７が選択されると、コントローラー３１は、タッチスクリーン６０に表示させる画面を、画面Ｇ２２から画面Ｇ１１に遷移させる。

【0056】

このように、画面Ｇ１１から画面Ｇ１１よりも１つ下位の階層の画面Ｇ２２への遷移は、ソフトウェアキー１１０３の選択に基づき行われる。その一方、画面Ｇ２２から画面Ｇ２２よりも１つ上位の階層の画面Ｇ１１への遷移は、ソフトウェアキー２２０７の選択に基づき行われる。

【0057】

（３）第３の例
画面Ｇ１１においてソフトウェアキー１１０２がタッチ操作によって選択されると、コントローラー３１は、画面Ｇ１１よりも１つ下位の階層の画面Ｇ２３をタッチスクリーン６０に表示させる。

【0058】

画面Ｇ２３は、集約設定（たとえば、２ｉｎ１、４ｉｎ１）を行う画面を表示させるためのソフトウェアキー２３０１と、片面または両面印刷の設定を行う画面を表示させるためのソフトウェアキー２３０２と、レイアウト設定を中止するためのソフトウェアキー２３０３と、レイアウト設定を確定させるためのソフトウェアキー２３０４とを含む。ソフトウェアキー２３０４が選択されると、コントローラー３１は、タッチスクリーン６０に表示させる画面を、画面Ｇ２３から画面Ｇ１１に遷移させる。

【0059】

このように、画面Ｇ１１から画面Ｇ１１よりも１つ下位の階層の画面Ｇ２３への遷移は、ソフトウェアキー１１０２の選択に基づき行われる。その一方、画面Ｇ２３から画面Ｇ２３よりも１つ上位の階層の画面Ｇ１１への遷移は、ソフトウェアキー２３０４の選択に基づき行われる。

【0060】

（４）第４の例
図５は、操作パネル３４のタッチスクリーン６０に表示される画面の他の画面遷移例を表した図である。

【0061】

図５を参照して、画面Ｇ１１（図４参照）においてソフトウェアキー１１０１がタッチ操作によって選択されると、コントローラー３１は、画面Ｇ１１よりも１つ下位の階層（第２階層）の画面Ｇ２４をタッチスクリーン６０に表示させる。

【0062】

画面Ｇ２４は、原稿サイズ設定を行う画面を表示させるためのソフトウェアキー２４０１と、片面または両面印刷の設定を行う画面を表示させるためのソフトウェアキー２４０２と、とじ代設定を行う画面を表示させるためのソフトウェアキー２４０３と、混載原稿か否かを選択するチェックボックス２４０４と、白紙原稿を除去するか否かを選択するチェックボックス２４０５と、原稿設定を中止するためのソフトウェアキー２４０６と、原稿設定を確定させるためのソフトウェアキー２４０７とを含む。

【0063】

画面Ｇ２４においてソフトウェアキー２４０１がタッチ操作によって選択されると、コントローラー３１は、画面Ｇ２４よりも１つ下位の階層（第３階層）の画面Ｇ３１をタッチスクリーン６０に表示させる。画面Ｇ３１は、定型の原稿サイズを選択するための６つのソフトウェアキー３１０１～３１０６と、サイズを入力する画面を表示させるためのソフトウェアキー３１０７と、画面Ｇ２４に戻るためのソフトウェアキー３１０８とを含む。

【0064】

このように、画面Ｇ２４から画面Ｇ２４よりも１つ下位の階層（第３階層）の画面Ｇ３１への遷移は、ソフトウェアキー２４０１の選択に基づき行われる。その一方、画面Ｇ３１から画面Ｇ３１よりも１つ上位の階層（第２階層）の画面Ｇ２４への遷移は、ソフトウェアキー３１０８の選択に基づき行われる。

【0065】

（ｄ２．音声による画面遷移例）
コントローラー３１は、画像形成装置１に入力された音声情報に基づき、タッチスクリーン６０に表示させる画面を遷移させる。コントローラー３１は、音声情報としてのユーザーの音声による指示（音声入力）に基づき、タッチスクリーン６０に表示させる画面を遷移させる。

【0066】

詳しくは、コントローラー３１は、各々が階層的に管理された複数の画面を選択的にタッチスクリーン６０（詳しくは、ディスプレイ６１）に表示させる。コントローラー３１は、マイク７０を介して音声情報の入力を受け付ける。コントローラー３１は、入力された音声情報に基づいてタッチスクリーン６０に表示させる画面を特定する。

【0067】

コントローラー３１は、複数の画面のうち音声情報に基づいて特定された画面が、タッチスクリーン６０に表示中の画面の下位の階層の画面であることを条件に、音声情報に基づいて特定された画面をタッチスクリーン６０に表示させる。具体例を挙げて説明すると、以下のとおりである。

【0068】

再び図４を参照して、コントローラー３１は、画面Ｇ１１を表示中に音声情報に基づいて画面Ｇ２１が特定されると、画面Ｇ２１は画面Ｇ１１よりも下位の階層であるため、タッチスクリーン６０に表示させる画面を画面Ｇ１１から画面Ｇ２１に遷移させる。

【0069】

その一方、コントローラー３１は、画面Ｇ２１を表示中に音声情報に基づいて画面Ｇ１１が特定されると、画面Ｇ１１は画面Ｇ２１よりも上位の階層であるため、タッチスクリーン６０に表示させる画面を画面Ｇ２１から画面Ｇ１１に遷移させない。

【0070】

再び図５を参照して、同様に、コントローラー３１は、画面Ｇ２４を表示中に音声情報に基づいて画面Ｇ３１が特定されると、画面Ｇ３１は画面Ｇ２４よりも下位の階層であるため、タッチスクリーン６０に表示させる画面を画面Ｇ２４から画面Ｇ３１に遷移させる。

【0071】

その一方、コントローラー３１は、画面Ｇ３１を表示中に音声情報に基づいて画面Ｇ２４が特定されると、画面Ｇ２４は画面Ｇ３１よりも上位の階層であるため、タッチスクリーン６０に表示させる画面を画面Ｇ３１から画面Ｇ２４に遷移させない。

【0072】

このように、画像形成装置１は、音声情報に基づいて現在表示中の画面よりも下位の階層の画面が特定されたことを条件に、タッチスクリーン６０に表示させる画面を当該特定された画面に遷移させる。このような構成によれば、ユーザーが意図してない画面に遷移してしまうことを低減することができる。

【0073】

詳しくは、現在表示中の画面の上位の階層の画面は、通常、現在表示中の画面に関連しない設定項目を有する。たとえば図４の例では、画面Ｇ２１の上位の階層の画面Ｇ１１は、画面Ｇ２１に関連しない設定項目（たとえば、原稿設定、レイアウト設定、濃度設定等）を有する。その一方、現在表示中の画面の下位の階層の画面は、現在表示中の画面に関連する設定項目（典型的には、より詳細な設定項目）を有する。たとえば図５の例では、画面Ｇ２４の下位の階層の画面Ｇ３１は、画面Ｇ２４に関連する設定項目（たとえば、Ａ３設定、Ａ４設定、フリーサイズ設定等）を有する。このため、ユーザーが発話した場合、上位の階層の画面に遷移させることよりも、下位の階層の画面に遷移させることの方が、ユーザーの意図に沿っている場合が多い。

【0074】

それゆえ、画像形成装置１によれば、画面の階層に関係なく音声情報に基づき画面を遷移させる構成に比べて、ユーザーの意図に沿った画面遷移を行うことが可能となる。

【0075】

以下、このような処理を実現するための具体的構成について説明する。また、例外処理についても後述する。すなわち、音声情報に基づいて特定された画面がタッチスクリーン６０に表示中の画面の下位の階層の画面でない場合であっても、例外的に特定された画面に遷移させる処理についても後述する。

【0076】

＜Ｅ．データー＞
図６は、コントローラー３１において管理されているデーターベースＤ６の概略構成を表した図である。

【0077】

図６を参照して、データーベースＤ６は、複数のデーターＤ６１，Ｄ６２，Ｄ６３，…を含む。

【0078】

各データーＤ６１，Ｄ６２，Ｄ６３，…においては、機能が階層的に記載されている。また、各階層に対して、キーワードが予め対応付けられている。コントローラー３１は、ユーザーの音声に、これらのキーワードが含まれているか否かを判断する。データーＤ６１，Ｄ６２，Ｄ６３，…においては、キーワードとして、各階層の機能に関連した用語が予め設定されている。

【0079】

データーＤ６１は、コピー設定に関するデーターである。データーＤ６２は、ファックスおよびスキャン設定（図３参照）に関するデーターである。データーＤ６３は、ボックス設定（図３参照）に関するデーターである。以下、説明の簡略化のため、コピー設定に関するデーターＤ６１のみを参照して説明すると、以下のとおりである。

【0080】

「コピー」と「コピートップ」と「キホン」とが、第１階層の「コピー」に対応付けられている。また、「ゲンコウ」と「ゲンコウセッテイ」とが、第２階層の「原稿」に対応付けられている。さらに、「サイズ」と「ゲンコウサイズ」とが、第３階層の「原稿サイズ」に対応付けられている。

【0081】

たとえば「コピー」というキーワードが音声に含まれていれば、コントローラー３１は、コピー設定を行う画面Ｇ１１への遷移が指定されたものと判断する。詳しくは、コントローラー３１は、画面Ｇ０（図３参照）のコピー設定をするためのソフトウェアキー５３１がユーザーによって指定されたものと判断する。

【0082】

同様に、「ゲンコウ」というキーワードが音声に含まれていれば、コントローラー３１は、原稿設定を行う画面Ｇ２４への遷移が指定されたものと判断する。詳しくは、コントローラー３１は、第１階層の画面Ｇ１１（図４参照）の原稿設定を行うためのソフトウェアキー１１０１がユーザーによって指定されたものと判断する。

【0083】

なお、「リョウメン」、「カタメン」、「トジシロ」といったキーワードは、複数の異なる画面にて出現する。たとえば、画面Ｇ２１（図４参照）と画面Ｇ２４（図５参照）とにおいて、「とじ代」に関するソフトウェアキーが存在しいている。それゆえ、データーベースＤ６においては、これらのキーワードについては、複数個の表記がなされている。ユーザーの発話によって、このようなキーワードが指定（特定）された場合の処理については、後述する。

【0084】

なお、本例では、説明の便宜上、画面Ｇ０（図３参照）においてソフトウェキ－５３１が選択されたときに表示させる画面Ｇ１１（図４）を第１階層としている。このため、画面Ｇ０（図３参照）においてソフトウェキ－５３２等の他のキーが選択されたときに表示させる画面も、第１階層となる。換言すれば、画面Ｇ０が最上位階層（第１階層のさらに１つ上位の階層（第０階層））となっている。

【0085】

なお、図７においては、本例では音声認識に基づき認識結果をカタカナで表す観点から、便宜上キーワードをカタカナ表記している。しかしながら、これに限定されず、平仮名であっても漢字であってもよい。

【0086】

＜Ｆ．機能的構成＞
図７は、画像形成装置１の機能的構成を説明するための機能ブロック図である。

【0087】

図７を参照して、画像形成装置１は、操作パネル３４と、制御部１０１とを備える。操作パネル３４は、上述したように、タッチスクリーン６０と、マイク７０とを含む。タッチスクリーン６０は、表示部１０２と、入力部１０３とを有する。なお、表示部１０２は、タッチスクリーン６０のディスプレイ６１に対応する。入力部１０３は、タッチパネル６２に対応する。

【0088】

制御部１０１は、表示制御部１１１と、解析部１１２と、タッチ入力受付部１１３と、記憶部１１４とを備える。制御部１０１は、画像形成装置１の全体的な動作を制御する。制御部１０１は、コントローラー３１に対応する。

【0089】

記憶部１１４は、タッチスクリーン６０に表示される画面のデーターを、画面毎に記憶している。また、記憶部１１４は、データーベースＤ６（図６参照）を記憶している。

【0090】

解析部１１２は、マイク７０を介して入力された音声情報に基づいて、タッチスクリーン６０に表示させる画面を特定する。詳しくは、解析部１１２は、音声認識を行い、かつ、音声認識結果を利用して、タッチスクリーン６０に表示させる画面を特定する。解析部１１２は、特定結果（解析結果）を表示制御部１１１に通知する。

【0091】

タッチ入力受付部１１３は、入力部１０３を介して入力された信号（タッチ位置を示す信号）を受け付ける。タッチ入力受付部１１３は、タッチされた位置と、現在表示中の画面におけるソフトウェアキーの位置情報とに基づき、どのソフトウェアキーがタッチ操作によって選択されたかを判断する。

【0092】

表示制御部１１１は、表示部１０２に各種の画面を表示させる。表示制御部１１１は、たとえば入力部１０３に対するタッチ操作によって指定された画面を表示する。また、表示制御部１１１は、入力された音声情報に基づき、表示する画面を遷移させる。詳しくは、表示制御部１１１は、解析部１１２による特定結果に基づき、表示する画面を遷移させる。また、図４および図５に示した画面の遷移は、表示制御部１１１によって実現される。

【0093】

表示制御部１１１が実行するさらなる制御について、以下の制御構造に基づき説明する。

【0094】

なお、制御部１０１における各処理は、典型的には、コントローラー３１内のＣＰＵ３１１がプログラム（オペレーションプログラム、アプリケーションプログラム）を実行することにより実現される。なお、プログラムは、ＲＯＭ３１２、固定記憶装置３２等に予め格納されている。なお、制御部１０１が実行する一部の処理を、ソフトウェアではなく、ハードウェアによって実行してもよい。

【0095】

＜Ｇ．制御構造＞
以下では、音声情報が入力されたときに画像形成装置１で実行される処理（メインルーチン）の概要について説明する。その後、メインルーチンから呼び出されるサブルーチンについて説明する。

【0096】

（ｇ１．メインルーチン）
図８は、画像形成装置１で実行される処理のフローを表したフロー図である。詳しくは、図８は、メインルーチンを表した図である。図８に示す各ステップは、コントローラー３１によって実行される。詳しくは、各ステップは、プロセッサ（具体的には、ＣＰＵ３１１）によって実行される。

【0097】

図８を参照して、コントローラー３１は、ステップＳ１において、音声認識の結果に基づき、データーベースＤ６において、音声に該当するキーワードが存在するか否かを判断する。

【0098】

キーワードが存在しないと判断され場合（ステップＳ１においてＮＯ）、コントローラー３１は、当該音声に基づく処理を終了する。なお、この場合、コントローラー３１は、キーワードが存在しないことを、表示等によりユーザーに対して通知してもよい。

【0099】

キーワードが存在していると判断された場合（ステップＳ１においてＹＥＳ）、コントローラー３１は、ステップＳ２において、データーベースＤ６を参照して、当該キーワードが、現在表示中の画面に関連付けられたキーワードか否かを判断する。現在表示中の画面に関連付けられたキーワードであると判断された場合（ステップＳ２においてＹＥＳ）、コントローラー３１は、処理をステップＳ３に進める。現在表示中の画面に関連付けられたキーワードでないと判断された場合（ステップＳ２においてＮＯ）、コントローラー３１は、処理をステップＳ１０に進める。

【0100】

ステップＳ２に関して、具体例を挙げて説明すると以下のとおりである。再び図５の画面Ｇ２４を参照して、ステップＳ２においてＹＥＳと判定される場合は、音声認識により得られたキーワードが、データーＤ６１（図７参照）において、原稿サイズに関連付けられたキーワード（具体的には、サイズ、ゲンコウサイズ）である場合と、片面および両面に関連付けられたキーワード（リョウメン、リョウメンゲンコウ、カタメン、カタメンゲンコウ）である場合と、とじ代に関連付けられたキーワード（トジシロ）である場合と、混載原稿に関連付けられたキーワード（図６では記載せず）である場合と、白紙原稿除去に関連付けられたキーワード（図６では記載せず）である場合と、中止に関連付けられたキーワード（図６では記載せず）である場合と、ＯＫに関連付けられたキーワード（図６では記載せず）である場合である。それ以外のキーワードは、ステップＳ２においてＮＯと判定される。

【0101】

再び図８を参照して、ステップＳ３において、コントローラー３１は、音声認識により得られたキーワードが、現在表示されている画面において、画面遷移用のソフトウェアキーを示すキーワードか否かを判断する。画面遷移用のソフトウェアキーを示すキーワードであると判断された場合（ステップＳ３においてＹＥＳ）、コントローラー３１は、処理をステップＳ４に進める。画面遷移用のソフトウェアキーを示すキーワードでないと判断された場合（ステップＳ３においてＮＯ）、コントローラー３１は、処理をステップＳ８に進める。

【0102】

ステップＳ３に関して具体例を挙げて説明すると、以下のとおりである。図５の画面Ｇ２４の例では、ステップＳ３においてＹＥＳと判定される場合は、音声認識により得られたキーワードが、データーＤ６１（図７参照）において、原稿サイズに関連付けられたキーワード（具体的には、サイズ、ゲンコウサイズ）である場合と、片面および両面に関連付けられたキーワード（リョウメン、リョウメンゲンコウ、カタメン、カタメンゲンコウ）である場合と、とじ代に関連付けられたキーワード（トジシロ）である場合と、中止に関連付けられたキーワード（図６では記載せず）である場合と、ＯＫに関連付けられたキーワード（図６では記載せず）である場合である。ステップＳ３においてＮＯと判定される場合は、混載原稿に関連付けられたキーワード（図６では記載せず）である場合と、白紙原稿除去に関連付けられたキーワード（図６では記載せず）である場合とである。

【0103】

再び図８を参照して、ステップＳ８において、コントローラー３１は、動作モードを現在の動作モードから該当する動作モードに切り換える。たとえば、音声認識により得られたキーワードが混載原稿に関連付けられたキーワードである場合には、動作モードを混載原稿モードに設定する。コントローラー３１は、ステップＳ８の後は、処理を終了する。

【0104】

ステップＳ４において、コントローラー３１は、画面遷移可否判定Ａを実行する。つまり、コントローラー３１は、音声情報（音声入力）に基づく画面遷移を許可するか否かを判断する。なお、画面遷移可否判定Ａの詳細については、図１３に基づき説明する。

【0105】

画面遷移可否判定Ａにより画面遷移が可能と判断された場合（ステップＳ５においてＹＥＳ）、コントローラー３１は、ステップＳ６において、該当画面に画面を遷移させる。なお、ステップＳ６の詳細については、図１０に基づき説明する。

【0106】

画面遷移可否判定Ａにより画面遷移が不可能と判断された場合（ステップＳ５においてＮＯ）、コントローラー３１は、ステップＳ７において、画面遷移ができない旨を通知する。たとえば、コントローラー３１は、タッチスクリーン６０に警告表示を行わせる。なお、現在の画面に遷移したことが誤りである場合もあるため、ステップＳ７のように画面遷移できないことを通知する代わりに、本当に当該画面に遷移したいのかをユーザーに確認した後、画面遷移するように、コントローラー３１を構成してもよい。

【0107】

ステップＳ１０において、コントローラー３１は、現在表示中の画面にステップキーが存在するか否かを判断する。ステップキーとは、設定値を段階的に変化させるソフトウェアキーである。画面Ｇ２２（図４参照）の例では、ソフトウェアキー２２０１，２２０２が、ステップキーに対応する。ステップキーが存在すると判断された場合（ステップＳ１０においてＹＥＳ）、コントローラー３１は、処理をステップＳ１１に進める。ステップキーが存在しないと判断された場合（ステップＳ１０においてＮＯ）、コントローラー３１は、処理をステップＳ９に進める。

【0108】

ステップＳ９において、コントローラー３１は、画面遷移可否判定Ｂを実行する。つまり、コントローラー３１は、音声情報に基づく画面遷移を許可するか否かを判断する。なお、画面遷移可否判定Ｂの詳細については、図９に基づき説明する。その後、コントローラー３１は、処理をステップＳ５に進める。

【0109】

ステップＳ１０において、コントローラー３１は、画面遷移可否判定Ｃを実行する。つまり、コントローラー３１は、音声情報に基づく画面遷移を許可するか否かを判断する。なお、画面遷移可否判定Ｃの詳細については、図１１および図１２に基づき説明する。その後、コントローラー３１は、処理をステップＳ５に進める。

【0110】

（ｇ２．ステップＳ９）
図９は、図８のステップＳ９の詳細を表したフロー図である。すなわち、図９は、画面遷移可否判定Ｂを説明するためのサブルーチンを表した図である。

【0111】

図９を参照して、コントローラー３１は、ステップＳ９１において、現在表示中の画面が表示される直前に表示されていた画面が、現在表示中の画面の下位の階層の画面か否かを判断する。下位の階層の画面であると判断された場合（ステップＳ９１においてＹＥＳ）、コントローラー３１は、ステップＳ９２において、画面遷移可能と判定する。

【0112】

詳しくは、前の画面が下位の階層の画面であれば、現在表示中の画面および下位の階層の画面で必要な設定が全て完了している可能性が考えられるため(ステップＳ９１)、画面遷移可能と判定する（ステップＳ９２）。なお、ステップＳ９２の後は、コントローラー３１は、処理をステップＳ５（図８参照）に進める。

【0113】

下位の階層の画面ではないと判断された場合（ステップＳ９１においてＮＯ）、コントローラー３１は、ステップＳ９３において、画面遷移した後に何らかのユーザー操作を受け付けたか否かを判断する。詳しくは、コントローラー３１は、直前の画面から現在の画面に遷移した後に、操作に関連する入力を受け付けたか否かを判断する。受け付けたと判断された場合（ステップＳ９３においてＹＥＳ）、コントローラー３１は、処理をステップＳ９２に進める。

【0114】

下位の階層以外から遷移してきた場合には、その前画面は上位の階層あるは他から直接遷移してきたことが想定される。このような場合、既に画面遷移してきてから何等かのユーザー操作が実行された後であれば、この画面での操作が完了しているとも考えられるため(ステップＳ９３)、画面遷移可能と判定する（ステップＳ９２）。

【0115】

受け付けていないと判断された場合（ステップＳ９３においてＮＯ）、コントローラー３１は、ステップＳ９４において、音声情報により特定された画面（具体的には、解析部１１２によって特定された画面）が、現在表示中の画面の下位の階層の画面か否かを判断する。下位の階層の画面であると判断された場合（ステップＳ９４においてＹＥＳ）、コントローラー３１は、処理をステップＳ９２に進める。コントローラー３１は、下位の階層の画面ではないと判断した場合（ステップＳ９４においてＮＯ）、ステップＳ９５において、画面遷移不可能と判定する。なお、ステップＳ９５の後は、コントローラー３１は、処理をステップＳ５（図８参照）に進める。

【0116】

何のユーザー操作を受け付けていない場合（ステップＳ９３においてＮＯ）、指示された画面が現在表示中の画面の下位の階層の画面であれば、音声情報に基づくユーザーの画面遷移操作は、設定の流れで必然の操作であるため(ステップＳ９４)、コントローラー３１は画面遷移可能と判定する（ステップＳ９２）。その一方、全く関係のない画面が指示された場合は、この画面に遷移してきた目的を達成していない可能性があるため、コントローラー３１は画面遷移不可能と判定する(ステップＳ９５)。

【0117】

＜小括＞
（１）ステップＳ９４からステップＳ９２への流れに着目すると、以下のとおりである。

【0118】

コントローラー３１（詳しくは、図７の表示制御部１１１）は、複数の画面のうち音声情報に基づいて特定された画面（以下、「第１の画面」とも称する）が、ディスプレイ６１に表示中の画面（以下、「第２の画面」とも称する）の下位の階層の画面であることを条件に、第１の画面をディスプレイ６１に表示させる。

【0119】

このような構成によれば、画像形成装置１は、画面の階層に関係なく音声情報に基づき画面を遷移させる構成に比べて、ユーザーの意図に沿った画面遷移を行うことが可能となる。

【0120】

（２）ステップＳ９１からステップＳ９２への流れに着目すると、以下のとおりである。

【0121】

コントローラー３１（詳しくは表示制御部１１１）は、上記第２の画面が表示される直前に表示されていた画面（以下、「第３の画面」とも称する）が第２の画面の下位の階層の画面である場合には、上記の条件に関わらず、第１の画面をディスプレイ６１に表示させる。なお、上記の条件とは、「複数の画面のうち音声情報に基づいて特定された第１の画面が、ディスプレイ６１に表示中の第２の画面の下位の階層の画面であること」である。

【0122】

直前に表示されていた画面が下位の階層の画面（すなわち、第３の画面）であれば、現在表示中の第２の画面等で必要な設定が全て完了している可能性が考えられる。したがって、画像形成装置１は、画面遷移可能と判定することにより、ユーザーの意図に沿った画面遷移を行うことができる。

【0123】

（３）ステップＳ９３からステップＳ９４への流れに着目すると、以下のとおりである。

【0124】

コントローラー３１（詳しくは表示制御部１１１）は、上記第３の画面が上記第２の画面の下位の階層の画面でなく、かつ、上記第２の画面を表示した後にタッチ入力受付部１１３が入力を受け付けていない場合に、上記第１の画面が上記第２の画面の下位の階層の画面であるか否かを判定する。すなわち、コントローラー３１は、上記の条件が成立するか否かを判定する。

【0125】

タッチ入力受付部１１３が入力を受け付けていない場合には、音声情報に基づいて特定された第１の画面が現在表示中の第２の画面の下位の階層の画面であれば、音声情報に基づくユーザーの画面遷移操作は、設定の流れで必然の操作である。したがって、このような場合には、画像形成装置１は、画面遷移可能と判定することにより、ユーザーの意図に沿った画面遷移を行うことができる。

【0126】

（４）ステップＳ９３からステップＳ９２への流れに着目すると、以下のとおりである。

【0127】

コントローラー３１（詳しくは表示制御部１１１）は、上記第３の画面が上記第２の画面の下位の階層の画面でなく、かつ、上記第２の画面を表示した後にタッチ入力受付部１１３が入力を受け付けた場合、上記の条件に関わらず、上記第１の画面をディスプレイ６１に表示させる。

【0128】

既に画面遷移してきた後にタッチ入力受付部１１３が入力を受け付けた場合には、この画面での操作が完了しているとも考えられる。したがって、このような場合には、画像形成装置１は、画面遷移可能と判定することにより、ユーザーの意図に沿った画面遷移を行うことができる。

【0129】

（ｇ３．ステップＳ６）
図１０は、図８のステップＳ６の詳細を表したフロー図である。

【0130】

図１０を参照して、コントローラー３１は、ステップＳ６１において、キーワードに対応するソフトウェアキーを含む画面は１つか否かを判断する。画面が１つであると判断された場合（ステップＳ６１においてＹＥＳ）、コントローラー３１は、ステップＳ６２において、ディスプレイ６１に表させる画面を、現在表示中の画面からキーワードに対応するソフトウェアキーを含む画面に遷移させる。

【0131】

画面が１つでない（詳しくは、複数）と判断された場合（ステップＳ６１においてＮＯ）、コントローラー３１は、ステップＳ６３において、キーワードに対応するソフトウェアキーを含む複数の画面のうち、現在表示中の画面の下位の階層の画面が存在するか否かを判断する。なお、コントローラー３１は、画面が１つもない場合には、処理を終了する。

【0132】

存在すると判断された場合（ステップＳ６３においてＹＥＳ）、コントローラー３１は、ステップＳ６４において、ディスプレイ６１に表させる画面を、現在表示中の画面から、上記下位の階層の画面に遷移させる。

【0133】

存在しないと判断された場合（ステップＳ６３においてＮＯ）、コントローラー３１は、遷移する画面の候補をディスプレイ６１に表示し、その後、ディスプレイ６１に表させる画面を、現在表示中の画面から、複数の候補の中からユーザー操作に基づき選択された候補（画面）に遷移させる（ステップＳ６５）。なお、画面に対して内部的に優先順位をつけておき、優先順位に従って自動的に遷移先を決定するように、コントローラー３１を構成してもよい。

【0134】

なお、ステップＳ６２，Ｓ６４，Ｓ６５の後は、コントローラー３１は、図８に示した一連の処理を終了する。

【0135】

＜小括＞
ステップＳ６１からステップＳ６３、およびステップＳ６３からステップＳ６４への流れに着目すると、以下のとおりである。

【0136】

コントローラー３１（詳しくは表示制御部１１１）は、音声情報に基づいて複数の上記第１の画面（すなわち、複数の画面のうち音声情報に基づいて特定された画面）が特定された場合、複数の第１の画面のうち、上記第２の画面（すなわち、ディスプレイ６１に表示中の画面）よりも下位の階層の第１の画面を、ディスプレイ６１に表示させる。

【0137】

より詳しくは、コントローラー３１（詳しくは表示制御部１１１）は、マイク７０を介して上記音声情報として予め定められた用語（すなわち、キーワード）の入力を受け付けると、複数の画面から、当該用語を含む第１の画面を複数抽出する。コントローラー３１は、抽出された複数の第１の画面のうち、上記第２の画面よりも下位の階層の第１の画面を、ディスプレイ６１に表示させる。上記の用語は、たとえば、両面またはとじ代である。なお、上記抽出は、解析部１１２によって行われる。

【0138】

このような構成によれば、ユーザーの意図に沿った画面に遷移させることが可能となる。

【0139】

（ｇ４．ステップＳ１１）
図１１は、図８のステップＳ１１の詳細を表したフロー図である。すなわち、図１１は、画面遷移可否判定Ｃを説明するためのサブルーチンを表した図である。

【0140】

図１１を参照して、コントローラー３１は、ステップＳ１１１において、アップキーまたはダウンキーが選択済みか否かを判断する。なお、アップキーとダウンキーとは、ステップキーの１つである。たとえば、図４の画面Ｇ２２において、ソフトウェアキー２２０１がダウンキーの例であり、ソフトウェアキー２２０２がアップキーの例である。

【0141】

コントローラー３１は、選択済みでないと判断された場合（ステップＳ１１１においてＮＯ）、処理をステップＳ１１３に進める。コントローラー３１は、選択済みであると判断された場合（ステップＳ１１１においてＹＥＳ）、ステップＳ１１２において、音声情報により特定された画面が下位の階層の画面であるか否かを判断する。

【0142】

コントローラー３１は、下位の階層の画面であると判断された場合（ステップＳ１１２においてＹＥＳ）、ステップＳ１１３において、画面遷移可能と判定する。コントローラー３１は、下位の階層の画面でないと判断された場合（ステップＳ１１２においてＮＯ）、ユーザーが連続して設定（たとえば、濃度の設定）を変更する可能性が考えられるため、ステップＳ１１４において、画面遷移不可能と判定する。

【0143】

ステップＳ１１３およびステップＳ１１４の後、コントローラー３１は、処理をステップＳ５（図８）に進める。

【0144】

＜小括＞
（１）ステップＳ１１２からステップＳ１１３への流れに着目すると、以下のとおりである。

【0145】

コントローラー３１（詳しくは表示制御部１１１）は、複数の画面のうち音声情報に基づいて特定された画面（第１の画面）が、ディスプレイ６１に表示中の画面（第２の画面）の下位の階層の画面であることを条件に、第１の画面をディスプレイ６１に表示させる。

【0146】

このような構成によれば、画像形成装置１は、画面の階層に関係なく音声情報に基づき画面を遷移させる構成に比べて、ユーザーの意図に沿った画面遷移を行うことが可能となる。

【0147】

（２）ステップＳ１１１からステップＳ１１２への流れに着目すると、以下のとおりである。

【0148】

上記第２の画面は、設定値を段階的に変化させるソフトウェアキーを含む。コントローラー３１（詳しくは表示制御部１１１）は、当該ソフトウェアキーが操作されたことを条件に、上記第１の画面が上記第２の画面の下位の階層の画面であるか否かを判定する。

【0149】

なお、上記ソフトウェアキーとしては、たとえば、コピー時の濃度、明度、彩度、およびコントラストの少なくとも１つの設定値を変化させるキーが挙げられる。

【0150】

（ｇ５．ステップＳ１１の変形例）
図１２は、図８のステップＳ１１の他の詳細を表したフロー図である。すなわち、図１２は、画面遷移可否判定Ｃを説明するためのサブルーチンの変形例を表した図である。なお、本変形の場合には、最終的には、画面遷移可能と判定される。

【0151】

図１２を参照して、コントローラー３１は、ステップＳ１１１において、アップキーまたはダウンキーが選択済みか否かを判断する。コントローラー３１は、選択済みでないと判断された場合（ステップＳ１１１においてＮＯ）、処理をステップＳ１１３に進める。

【0152】

選択済みであると判断された場合（ステップＳ１１１においてＹＥＳ）、コントローラー３１は、ステップＳ１１２において、音声情報に基づいて特定された画面が下位の階層の画面であるか否かを判断する。

【0153】

下位の階層の画面であると判断された場合（ステップＳ１１２においてＹＥＳ）、コントローラー３１は、ステップＳ１１３において、画面遷移可能と判定する。下位の階層の画面でないと判断された場合（ステップＳ１１２においてＮＯ）、コントローラー３１は、ステップＳ１１５において、アップキーまたはダウンキーが選択された後、所定時間が経過したいか否かを判断する。

【0154】

所定時間以上経過したと判断された場合（ステップＳ１１５においてＹＥＳ）、コントローラー３１は、続けてアップキーまたはダウンキーが選択されることはないと判断し、処理をステップＳ１１３に進める。所定時間以上経過していないと判断された場合（ステップＳ１１５においてＮＯ）、コントローラー３１は、ステップＳ１１６において、ウェイト処理を実施する。具体的には、コントローラー３１は、上記所定時間が経過するまで、ステップＳ１１５とステップＳ１１６との処理を繰り返す。

【0155】

ステップＳ１１３の後、コントローラー３１は、処理をステップＳ５（図８）に進める。

【0156】

なお、ウェイト実施中にアップキーまたはダウンキーが再度選択された場合には、「音声情報による画面遷移をキャンセルし、かつアップキーまたはダウンキーに基づく処理を実行する」ように、コントローラー３１を構成してもよい。

【0157】

＜小括＞
ステップＳ１１５からステップＳ１１６への流れに着目すると、以下のとおりである。

【0158】

コントローラー３１（詳しくは表示制御部１１１）は、上記第１の画面が上記第２の画面の下位の階層の画面でないと判断された場合、ソフトウェアキー（詳しくは、ステップキー）が操作されてから予め定められた時間が経過すると、上記の条件に関わらず、上記第１の画面をディスプレイ６１に表示させる。

【0159】

予め定められた時間が経過した場合、ステップキー（具体的には、アップキーまたはダウンキー）が続いて操作される可能性が低い。このような場合には、画像形成装置１を上記条件に関わらず画面を遷移させる構成とすることにより、ユーザーにとっての利便性を高めることができる。

【0160】

（ｇ６．ステップＳ４）
図１３は、図８のステップＳ４の詳細を表したフロー図である。すなわち、図１３は、画面遷移可否判定Ａを説明するためのサブルーチンを表した図である。

【0161】

図１３を参照して、コントローラー３１は、ステップＳ４１において、応用設定画面において、とじ代キー（すなわち、図４の画面Ｇ１１のソフトウェアキー２１０１）が選択されたか否かを判断する。当該選択は、タッチ操作または音声情報の入力に基づき行われる。なお、応用設定画面は、基本設定画面よりも下位の階層の画面である。

【0162】

とじ代キーが選択されたと判断された場合（ステップＳ４１においてＹＥＳ）、コントローラー３１は、ステップＳ４２において、画面遷移可能と判定する。応用設定画面は、その画面内にある設定の変更、下位の階層にある画面への遷移の入り口となるため、コントローラー３１は、ここでは無条件に遷移させる。なお、コントローラー３１は、その後、処理をステップＳ５（図８）に処理を進める。

【0163】

とじ代キーが選択されていないと判断された場合（ステップＳ４１においてＮＯ）、コントローラー３１は、ステップＳ４３において、基本設定キー（すなわち、図４の画面Ｇ２１のソフトウェアキー２１０４）が選択された否かを判断する。

【0164】

基本設定キーが選択されたと判断された場合（ステップＳ４３においてＹＥＳ）、コントローラー３１は、ステップＳ４４において、基本設定画面から遷移した直後か否かを判断する。なお、当該判断は、時間に関する閾値に基づき行われる。基本設定キー選択されていないと判断された場合（ステップＳ４３においてＮＯ）、コントローラー３１は、処理をステップＳ５（図８）に処理を進める。

【0165】

遷移した直後であると判断された場合（ステップＳ４４においてＹＥＳ）、本来行うべき設定をユーザーが実施していない可能性が高いため、コントローラー３１は、ステップＳ４５において画面遷移が不可能と判定する。遷移した直後ではないと判断された場合には（ステップＳ４４においてＮＯ）、応用設定画面での設定が完了したと見なせるので、コントローラー３１は、ステップＳ４６において画面遷移が可能と判定する。

【0166】

コントローラー３１は、ステップＳ４５およびステップＳ４６の後は、処理をステップＳ５（図８）に処理を進める。

【0167】

なお、上記においては、ステップＳ４１においてとじ代キーが選択されたか否かを判断する場合を例に挙げて説明したが、これに限定されるものではない。たとえば、イレースキー等の応用設定画面において設定可能な他のキーであってもよい。

【0168】

＜小括＞
（１）ステップＳ４３からステップＳ４４およびステップＳ４４からステップＳ４５への流れに着目すると、以下のとおりである。

【0169】

コントローラー３１（詳しくは表示制御部１１１）は、ディスプレイ６１に表示させる画面を、基本設定画面（第１の設定を行う画面）から応用設定画面（第２の設定を行う画面）に直接遷移させた直後に、基本設定画面が音声情報に基づいて特定された場合には、基本設定画面をディスプレイ６１に表示させない。

【0170】

基本設定画面からの遷移直後であれば、本来行うべき設定を実施していない可能性が高い。それゆえ、基本設定画面をディスプレイ６１に表示させないようにすることで、ユーザーにとって意図しない画面に遷移してしまうことを防止できる。

【0171】

（２）ステップＳ４１からステップＳ４２への流れに着目すると、以下のとおりである。

【0172】

コントローラー３１（詳しくは表示制御部１１１）は、タッチ入力受付部１１３に対する入力によってソフトウェアキー２１０１（図４の画面Ｇ２１参照）が選択されると、とじ代機能（予め定められた機能）を設定する画面をディスプレイ６１に表示させる。また、コントローラー３１は、ディスプレイに表示させる画面を、基本設定画面から応用設定画面に直接遷移させた直後に、とじ代機能を設定する画面が音声情報に基づいて特定された場合には、とじ代機能を設定する画面をディスプレイ６１に表示させる。このような構成とすることにより、ユーザーの意図する画面に遷移させることができる。

【0173】

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

【符号の説明】

【0174】

１ 画像形成装置、１０ 本体部、１１ 画像形成ユニット、１２ スキャナーユニット、１４ 給紙ユニット、１６ メディアセンサー、２０ 後処理装置、２１，２２，２３ 排紙トレイ、３１ コントローラー、３２ 固定記憶装置、３４ 操作パネル、５１ スタートキー、５２ ストップキー、６０ タッチスクリーン、６１ ディスプレイ、６２ タッチパネル、７０ マイク、１０１ 制御部、１０２ 表示部、１０３ 入力部、１１１ 表示制御部、１１２ 解析部、１１３ タッチ入力受付部、１１４ 記憶部、５３１～５３５，１１０１～１１０５，２１０１，２０１２，２１０４，２２０１～２２０７，２３０１～２３０４，２４０１～２４０３，２４０６，２４０７，３１０１，３１０６，３１０７，３１０８ ソフトウェアキー、２１０３，２４０４，２４０５ チェックボックス、Ｄ６ データーベース、Ｄ６１，Ｄ６２，Ｄ６３ データー、Ｇ０，Ｇ１１，Ｇ２１，Ｇ２２，Ｇ２３，Ｇ２４，Ｇ３１ 画面。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】