特許 7429818 プログラム、情報処理装置及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-01-31

(45)【発行日】2024-02-08

(54)【発明の名称】プログラム、情報処理装置及び方法

(51)【国際特許分類】

   G06Q 10/00 20230101AFI20240201BHJP

   G06V 30/412 20220101ALI20240201BHJP

【ＦＩ】

G06Q10/00

G06V30/412

【請求項の数】 10

(21)【出願番号】P 2023101591

(22)【出願日】2023-06-21

【審査請求日】2023-12-11

【早期審査対象出願】

(73)【特許権者】

【識別番号】513056101

【氏名又は名称】フリー株式会社

(74)【代理人】

【識別番号】110002815

【氏名又は名称】ＩＰＴｅｃｈ弁理士法人

(72)【発明者】

【氏名】佐藤 顕範

(72)【発明者】

【氏名】田中 浩之

【審査官】小原 正信

(56)【参考文献】

【文献】特開２０１９－１９２０４４（ＪＰ，Ａ）

【文献】特開２０２１－００９４２８（ＪＰ，Ａ）

【文献】特開２０２２－１３３７３９（ＪＰ，Ａ）

【文献】特開２００６－２０９５８８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

Ｇ０６Ｖ ３０／４１２

(57)【特許請求の範囲】

【請求項1】

プロセッサと、メモリとを備えるコンピュータに実行させるためのプログラムであって、
前記メモリは、使用者であるユーザの情報と、
証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報とを記憶し、
前記プログラムは、前記プロセッサに、
前記ユーザから前記証憑画像の入力を受け付けるステップと、
前記証憑画像の入力に応じて、前記モデル情報に基づき、前記証憑画像の種類を判定するステップと、
前記証憑画像の種類に応じて、前記モデル情報に基づき、前記証憑画像の項目を判定するステップと、
前記ユーザの情報と、前記証憑画像の種類と、前記証憑画像の項目とに基づき、前記ユーザに対して、前記証憑画像における項目に対する入力情報を案内する付加情報を決定するステップと、
前記決定した付加情報を前記ユーザに提示するステップと、を実行させる、プログラム。

【請求項2】

前記メモリは、前記ユーザの情報として、前記ユーザから過去に受け付けた前記証憑画像の情報を記憶し、
前記付加情報を決定するステップにおいて、前記ユーザから過去に受け付けた前記証憑画像の情報に基づき、前記付加情報を決定する、請求項１に記載のプログラム。

【請求項3】

受け付けた前記証憑画像の項目は、空欄であり、
前記付加情報を決定するステップにおいて、前記付加情報として、前記証憑画像における空欄の項目に対する入力情報を決定し、
前記ユーザに提示するステップにおいて、前記ユーザに、前記付加情報として前記決定した入力情報が前記証憑画像の項目に記載された証憑画像を提示する、請求項１または請求項２に記載のプログラム。

【請求項4】

前記付加情報を決定するステップにおいて、前記付加情報として、前記ユーザの情報に基づき前記証憑画像における空欄の項目に対する入力情報を決定する、請求項３に記載のプログラム。

【請求項5】

前記付加情報を決定するステップにおいて、前記ユーザが使用している端末装置から取得した情報に基づき、前記付加情報を決定する、請求項１に記載のプログラム。

【請求項6】

前記ユーザが使用している端末装置から取得した、前記端末装置の位置情報に基づき、前記付加情報を決定する、請求項５に記載のプログラム。

【請求項7】

前記プログラムは、さらに、
前記ユーザに提示した前記付加情報に対する、前記ユーザからの入力情報を受け付けるステップを実行させる、請求項１に記載のプログラム。

【請求項8】

前記プログラムは、さらに、
前記ユーザからの入力情報に基づき、前記証憑画像の情報を送信するステップを実行させる、請求項７に記載のプログラム。

【請求項9】

制御部と、記憶部とを備える情報処理装置であって、
前記記憶部は、使用者であるユーザの情報と、
証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報とを記憶し、
前記制御部は、
前記ユーザから前記証憑画像の入力を受け付けるステップと、
前記証憑画像の入力に応じて、前記モデル情報に基づき、前記証憑画像の種類を判定するステップと、
前記証憑画像の種類に応じて、前記モデル情報に基づき、前記証憑画像の項目を判定するステップと、
前記ユーザの情報と、前記証憑画像の種類と、前記証憑画像の項目とに基づき、前記ユーザに対して、前記証憑画像における項目に対する入力情報を案内する付加情報を決定するステップと、
前記決定した付加情報を前記ユーザに提示するステップと、を実行する、情報処理装置。

【請求項10】

プロセッサと、メモリとを備えるコンピュータにより実行されるための方法であって、
前記メモリは、使用者であるユーザの情報と、
証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報とを記憶し、
前記方法は、前記プロセッサが、
前記ユーザから前記証憑画像の入力を受け付けるステップと、
前記証憑画像の入力に応じて、前記モデル情報に基づき、前記証憑画像の種類を判定するステップと、
前記証憑画像の種類に応じて、前記モデル情報に基づき、前記証憑画像の項目を判定するステップと、
前記ユーザの情報と、前記証憑画像の種類と、前記証憑画像の項目とに基づき、前記ユーザに対して、前記証憑画像における項目に対する入力情報を案内する付加情報を決定するステップと、
前記決定した付加情報を前記ユーザに提示するステップと、を実行する、方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、プログラム、情報処理装置及び方法に関する。

【背景技術】

【0002】

紙に出力された帳票などに記載された文書をカメラ、スキャナなどの光学読取装置を用いて認識する光学的文字認識技術（ＯＣＲ：Optical Character Recognition）が知られている。また、画像解析により、帳票画像を分類する技術も知られている。

【0003】

書類分類システムの技術として、特許文献１には、証憑類の画像情報を解析して証憑類を分類し、格納先を決定して証憑類の画像情報を格納する、書類分類システムについての技術が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】国際公開第２０２０／１３６７７８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところで、ＯＣＲ処理により読み取った証憑類について、画像情報をどのように処理するのか、その場ではすぐに判断できない場合がある。このような処理は、スマートフォン等の携帯端末でも可能となっているが、特に外出先等で取得した証憑類について読み取る場合、画像情報をどのように処理するのか、その場ではすぐに判断できないことが多い。そのため、証憑画像を読み取った場合に、その後の処理や必要な情報等について案内してくれる機能が求められていた。

【0006】

そこで、本開示では、受け付けた証憑画像について、読取を行い、当該証憑についての付加情報をユーザに提示する技術について説明する。

【課題を解決するための手段】

【0007】

本開示の一実施形態によると、プロセッサと、メモリとを備えるコンピュータに実行させるためのプログラムであって、メモリは、使用者であるユーザの情報と、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報とを記憶し、プログラムは、プロセッサに、ユーザから証憑画像の入力を受け付けるステップと、証憑画像の入力に応じて、モデル情報に基づき、証憑画像の種類を判定するステップと、証憑画像の種類に応じて、モデル情報に基づき、証憑画像の項目を判定するステップと、ユーザの情報と、証憑画像の種類と、証憑画像の項目とに基づき、ユーザに対して、証憑画像における項目に対する入力情報を案内する付加情報を決定するステップと、決定した付加情報を前記ユーザに提示するステップと、を実行させる。

【発明の効果】

【0008】

本開示によれば、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を記憶しておき、証憑画像から、その証憑画像の種類と項目とを判定し、ユーザに対して案内する付加情報を決定し、ユーザに提示する。これにより、当該証憑について案内する付加情報をユーザに提示することが可能になる。

【図面の簡単な説明】

【0009】

【図1】実施の形態１の証憑読取システム１の全体構成を示すブロック図である。

【図2】証憑読取システム１を構成する端末装置１０の機能的な構成を示すブロック図である。

【図3】証憑読取システム１を構成するサーバ２０の機能的な構成を示すブロック図である。

【図4】サーバ２０が記憶する、ユーザデータベース２０２１のデータ構造の例を示す図である。

【図5】サーバ２０が記憶する、証憑モデルデータベース２０２２のデータ構造の例を示す図である。

【図6】証憑読取システム１による付加情報案内処理を行う流れの一例を示すフローチャートである。

【図7】証憑読取システム１による証憑画像送信処理を行う流れの一例を示すフローチャートである。

【図8】端末装置１０に表示する証憑画像に案内情報を付加した画面例を示す図である。

【図9】端末装置１０に表示する証憑画像に入力情報を付加した画面例を示す図である。

【発明を実施するための形態】

【0010】

以下、図面を参照しつつ、本開示の実施の形態について説明する。以下の記載および図面は、本発明を説明するための例示であって、説明の明確化のため、適宜、省略および簡略化がなされている。本発明は、他の種々の形態でも実施する事が可能である。特に限定しない限り、各構成要素は単数でも複数でも構わない。以下の説明では、同一の部品には同一の符号を付してある。それらの名称及び機能も同じである。従って、それらについての詳細な説明は繰り返さない。

【0011】

＜概要＞
以下、本開示に係る証憑読取システムについて説明する。本開示に係る証憑読取システムは、見積書、請求書等の証憑を撮影した画像から、その証憑の種類と項目とを判定し、ユーザに対して各種の案内をする付加情報を決定し、ユーザに提示するためのシステムである。本開示に係る証憑読取システムは、例えば、ユーザが使用するスマートフォン等の携帯端末で証憑をかざすと、各種の案内をするように構成されている。また、本開示に係る証憑読取システムは、例えばスマートフォン等の携帯端末にインストールされたアプリケーションサービスとして、またはクラウドサーバ等によりＷｅｂサービスとして、いわゆるＳａａＳ（Ｓｏｆｔｗａｒｅ ａｓ ａ Ｓｅｒｖｉｃｅ）によって提供されるシステムである。

【0012】

ここで、証憑画像のもとになる証憑とは、取引に必要な各種書類、例えば見積書、請求書、領収書、受領書等を含む。また、証憑とは、企業等における各種申請に必要な書類、例えば交通費申請書、休暇申請書、経費申請書等を含む。さらに、証憑とは、公的機関等に対する各種申請書類または各種提出書類、例えば確定申告書、決算書、開業届、法人登記申請書等を含む。

【0013】

前述のように、外出先や、自席から離れているときに受け取った証憑類について、自己のスマートフォン等のカメラ機能で撮影し、ＯＣＲ処理により読み取ることが行われている。また、カメラ機能で撮影までは行わず、かざすだけでＯＣＲ処理により読み取ることも行われている。しかし、読み取った証憑類の証憑画像について、どのように処理するのか、その場ではすぐに判断できない場合がある。その証憑画像をスマートフォン等に保存したとしても、後にそのことを失念してしまうことや、どのような経緯でその証憑を取得したのか不明になることもある。そのため、読み取った証憑類の証憑画像について、その場で、その後の処理や必要な情報等について案内してくれる機能が求められていた。

【0014】

そこで、本開示に係る証憑読取システムは、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を記憶しておき、証憑画像の入力に応じて、モデル情報に基づいて証憑画像の種類と項目とを判定する。ユーザの情報と、証憑画像の種類と項目とに基づき、ユーザに対して案内する付加情報を決定し、ユーザに提示する。

【0015】

また、本開示に係る証憑読取システムは、付加情報として、証憑画像に係る証憑、または証憑画像の項目について案内する。ユーザに案内する付加情報とは、具体的には、その証憑がどういうものか、どのような後続の処理（納品、請求、支払、等）が必要か、どこに格納すべきか、等の情報である。

【0016】

また、本開示に係る証憑読取システムは、付加情報として、証憑画像に係る証憑の空白となっている項目に対して、ユーザの各種情報を入力する入力情報を案内する。ユーザの各種情報を入力する入力情報とは、具体的には、その証憑が各種申請書であり、ユーザが入力する必要がある項目について、入力すべきユーザの各種情報（ユーザ自身の属性情報、現在の位置情報、スケジュール情報、等）である。

【0017】

上記のような構成により、外出先や、自席から離れているときに受け取った証憑類について、読み取った証憑類の証憑画像をどのように処理するのか、等の案内を受けることが可能になる。これにより、当該証憑を受け取った後の処理をどうするか、どこに格納するか、等を把握することが可能になる。また、外出先等において、各種申請書についてユーザが入力する必要がある項目について、ユーザ自身で入力する手間を削減することが可能になる。

【0018】

＜実施の形態１＞
以下、証憑読取システム１について説明する。以下の説明では、例えば、端末装置１０がサーバ２０へアクセスすることにより、サーバ２０が、端末装置１０で画面を生成するための情報を応答する。端末装置１０は、サーバ２０から受信した情報に基づいて画面を生成し表示する。

【0019】

＜１ 証憑読取システム１の全体構成＞
図１は、実施の形態１の証憑読取システム１の全体構成を示すブロック図である。図１に示すように、証憑読取システム１は、複数の端末装置（図１では、端末装置１０Ａ及び端末装置１０Ｂを示している。以下、総称して「端末装置１０」ということもある）と、サーバ２０とを含む。端末装置１０とサーバ２０とは、ネットワーク８０を介して相互に通信可能に接続されている。ネットワーク８０は、有線または無線ネットワークにより構成される。本実施形態では、サーバ２０はＷｅｂサーバ（クラウドサーバを含む）であり、端末装置１０との間でＷｅｂページにより情報のやり取りを行う。また、端末装置１０にはＷｅｂページを閲覧するためのＷｅｂページブラウザがインストールされているが、サーバ２０のサービスを提供するための専用アプリケーションがインストールされ、専用アプリケーションにより閲覧可能に構成してもよい。

【0020】

端末装置１０は、各ユーザが操作する装置である。ここで、ユーザとは、端末装置１０を使用して証憑読取システム１の機能である証憑（紙に印刷されたものでもよく、電子データでもよい）画像の読取を行う者であり、例えば事業者である企業の従業員、または個人事業主等である。端末装置１０は、据え置き型のＰＣ（Personal Computer）、ラップトップＰＣ等により実現される。この他、端末装置１０は、例えば移動体通信システムに対応したタブレットや、スマートフォン等の携帯端末であるとしてもよい。

【0021】

端末装置１０は、ネットワーク８０を介してサーバ２０と通信可能に接続される。端末装置１０は、４Ｇ、５Ｇ、ＬＴＥ（Long Term Evolution）等の通信規格に対応した無線基地局８１、ＩＥＥＥ（Institute of Electrical and Electronics Engineers）８０２．１１等の無線ＬＡＮ（Local Area Network）規格に対応した無線ＬＡＮルータ８２等の通信機器と通信することにより、ネットワーク８０に接続される。図１に端末装置１０Ｂとして示すように、端末装置１０は、通信ＩＦ（Interface）１２と、入力装置１３と、出力装置１４と、メモリ１５と、記憶部１６と、プロセッサ１９とを備える。

【0022】

通信ＩＦ１２は、端末装置１０が外部の装置と通信するため、信号を入出力するためのインタフェースである。入力装置１３は、ユーザからの入力操作を受け付けるための入力装置（例えば、キーボードや、タッチパネル、タッチパッド、マウス等のポインティングデバイス等）である。出力装置１４は、ユーザに対し情報を提示するための出力装置（ディスプレイ、スピーカ等）である。メモリ１５は、プログラム、及び、プログラム等で処理されるデータ等を一時的に記憶するためのものであり、例えばＤＲＡＭ（Dynamic Random Access Memory）等の揮発性のメモリである。記憶部１６は、データを保存するための記憶装置であり、例えばフラッシュメモリ、ＨＤＤ（Hard Disc Drive）である。プロセッサ１９は、プログラムに記述された命令セットを実行するためのハードウェアであり、演算装置、レジスタ、周辺回路等により構成される。

【0023】

サーバ２０は、証憑読取システム１の機能である証憑画像から、その証憑の種類と項目とを判定し、ユーザに対して各種の案内をする付加情報を決定し、ユーザに提示する機能を提供する装置である。サーバ２０は、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を記憶する。サーバ２０は、証憑画像の入力に応じて、モデル情報に基づいて証憑画像の種類と項目とを判定する。また、サーバ２０は、ユーザの情報と、証憑画像の種類と項目とに基づき、ユーザに対して案内する付加情報を決定し、ユーザに提示する。

【0024】

サーバ２０は、ネットワーク８０に接続されたコンピュータである。サーバ２０は、通信ＩＦ２２と、入出力ＩＦ２３と、メモリ２５と、ストレージ２６と、プロセッサ２９とを備える。

【0025】

通信ＩＦ２２は、サーバ２０が外部の装置と通信するため、信号を入出力するためのインタフェースである。入出力ＩＦ２３は、ユーザからの入力操作を受け付けるための入力装置、及び、ユーザに対し情報を提示するための出力装置とのインタフェースとして機能する。メモリ２５は、プログラム、及び、プログラム等で処理されるデータ等を一時的に記憶するためのものであり、例えばＤＲＡＭ（Dynamic Random Access Memory）等の揮発性のメモリである。ストレージ２６は、データを保存するための記憶装置であり、例えばフラッシュメモリ、ＨＤＤ（Hard Disc Drive）である。プロセッサ２９は、プログラムに記述された命令セットを実行するためのハードウェアであり、演算装置、レジスタ、周辺回路等により構成される。

【0026】

＜１．１ 端末装置１０の構成＞
図２は、証憑読取システム１を構成する端末装置１０の機能的な構成を示すブロック図である。図２に示すように、端末装置１０は、複数のアンテナ（アンテナ１１１、アンテナ１１２）と、各アンテナに対応する無線通信部（第１無線通信部１２１、第２無線通信部１２２）と、操作受付部１３０（キーボード１３１及びマウス１３２を含む）と、音声処理部１４０と、マイク１４１と、スピーカ１４２と、ディスプレイ１５０と、記憶部１７０と、制御部１８０とを含む。端末装置１０は、図２では特に図示していない機能及び構成（例えば、電力を保持するためのバッテリー、バッテリーから各回路への電力の供給を制御する電力供給回路等）も有している。図２に示すように、端末装置１０に含まれる各ブロックは、バス等により電気的に接続される。図２に示す端末装置１０は、移動体通信システムに対応したタブレットや、スマートフォン等の携帯端末として説明するが、据え置き型のＰＣ（Personal Computer）、ラップトップＰＣであってもよい。

【0027】

アンテナ１１１は、端末装置１０が発する信号を電波として放射する。また、アンテナ１１１は、空間から電波を受信して受信信号を第１無線通信部１２１へ与える。

【0028】

アンテナ１１２は、端末装置１０が発する信号を電波として放射する。また、アンテナ１１２は、空間から電波を受信して受信信号を第２無線通信部１２２へ与える。

【0029】

第１無線通信部１２１は、端末装置１０が他の無線機器と通信するため、アンテナ１１１を介して信号を送受信するための変復調処理等を行う。第２無線通信部１２２は、端末装置１０が他の無線機器と通信するため、アンテナ１１２を介して信号を送受信するための変復調処理等を行う。第１無線通信部１２１と第２無線通信部１２２とは、チューナー、ＲＳＳＩ（Received Signal Strength Indicator）算出回路、ＣＲＣ（Cyclic Redundancy Check）算出回路、高周波回路等を含む通信モジュールである。第１無線通信部１２１と第２無線通信部１２２とは、端末装置１０が送受信する無線信号の変復調や周波数変換を行い、受信信号を制御部１８０へ与える。

【0030】

操作受付部１３０は、制御部１８０の制御に応じて、ユーザの入力操作を受け付けるための機構を有する。具体的には、操作受付部１３０は、キーボード１３１と、マウス１３２とを含む。なお、操作受付部１３０は、例えば静電容量方式のタッチパネルを用いることによって、タッチパネルに対するユーザの接触位置を検出する、タッチスクリーンとして構成してもよい。

【0031】

キーボード１３１は、端末装置１０のユーザの入力操作を受け付ける。キーボード１３１は、文字入力を行う装置であり、入力された文字情報を入力信号として制御部１８０へ出力する。

【0032】

マウス１３２は、端末装置１０のユーザの入力操作を受け付ける。マウス１３２は、ディスプレイ１５０に表示されている表示物を選択等するためのポインティングデバイスであり、画面上で選択された位置情報と、ボタン押下されていることを示す情報とを入力信号として制御部１８０へ出力する。

【0033】

音声処理部１４０は、制御部１８０の制御に応じて、音声信号の変復調を行う。音声処理部１４０は、マイク１４１から与えられる信号を変調して、変調後の信号を制御部１８０へ与える。また、音声処理部１４０は、音声信号をスピーカ１４２へ与える。音声処理部１４０は、例えば音声処理用のプロセッサによって実現される。マイク１４１は、音声入力を受け付けて、当該音声入力に対応する音声信号を音声処理部１４０へ与える。スピーカ１４２は、音声処理部１４０から与えられる音声信号を音声に変換して当該音声を端末装置１０の外部へ出力する。

【0034】

ディスプレイ１５０は、制御部１８０の制御に応じて、画像、動画、テキスト等のデータを表示する。ディスプレイ１５０は、例えばＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro-Luminescence）ディスプレイによって実現される。

【0035】

カメラ１６０は、制御部１８０の制御に応じて、受光素子により光を受光して、撮影画像として出力するためのデバイスである。カメラ１６０は、例えば、デジタルカメラ、ビデオカメラ等の撮像装置により構成されてもよい。

【0036】

記憶部１７０は、例えばフラッシュメモリ等のメモリ１５及び記憶部１６により構成され、端末装置１０が使用するデータ及びプログラムを記憶する。ある局面において、記憶部１７０は、ユーザ情報１７１と、証憑画像情報１７２とを記憶する。

【0037】

ユーザ情報１７１は、端末装置１０を使用して、証憑読取システム１の機能である証憑画像の読取を行うユーザの情報である。ユーザ情報としては、ユーザを識別する情報（ユーザＩＤ）、事業者または担当者の氏名または名称等の情報が含まれる。

【0038】

証憑画像情報１７２は、ユーザが端末装置１０を使用して、証憑読取システム１の機能である証憑画像の読取を行った対象である、証憑画像の情報である。証憑画像の情報は、ｊｐｅｇ、ｐｎｇ、ｂｍｐ、ｔｉｆｆ、ｇｉｆ、ｅｐｓ、ｓｖｇ等の任意のデータフォーマットでよい。

【0039】

制御部１８０は、例えばプロセッサ１９により構成され、記憶部１７０に記憶されるプログラムを読み込んで、プログラムに含まれる命令を実行することにより、端末装置１０の動作を制御する。制御部１８０は、例えば予め端末装置１０の記憶部１７０に格納され、インストールされているアプリケーションである図示しないプログラムに従って動作することにより、入力操作受付部１８１と、送受信部１８２と、通知制御部１８３と、データ処理部１８４としての機能を発揮する。

【0040】

入力操作受付部１８１は、キーボード１３１等の入力装置に対するユーザの入力操作を受け付ける処理を行う。

【0041】

送受信部１８２は、端末装置１０が、サーバ２０等の外部の装置と、通信プロトコルに従ってデータを送受信するための処理を行う。

【0042】

通知制御部１８３は、ユーザに対し情報を提示する処理を行う。通知制御部１８３は、表示画像をディスプレイ１５０に表示させる処理、音声をスピーカ１４２に出力させる処理等を行う。

【0043】

データ処理部１８４は、端末装置１０が入力を受け付けたデータに対し、プログラムに従って演算を行い、演算結果をメモリ等に出力する処理を行う。なお、データ処理部１８４は、後述するサーバ２０の機能である、証憑画像受付モジュール２０３３、証憑画像種類判定モジュール２０３４、証憑画像項目判定モジュール２０３５、付加情報決定モジュール２０３６、ユーザ提示モジュール２０３７、ユーザ入力受付モジュール２０３８、及び送信モジュール２０３９の一部またはすべての機能を発揮するように構成してもよく、例えば、端末装置１０にインストールされたアプリケーションにより実行されてもよい。すなわち、これらの機能は端末装置１０で実行されてもよく、サーバ２０で実行されてもよい。

【0044】

＜１．２ サーバ２０の機能的な構成＞
図３は、証憑読取システム１を構成するサーバ２０の機能的な構成を示すブロック図である。図３に示すように、サーバ２０は、通信部２０１と、記憶部２０２と、制御部２０３としての機能を発揮する。

【0045】

通信部２０１は、サーバ２０が外部の装置と通信するための処理を行う。

【0046】

記憶部２０２は、例えばメモリ２５、ストレージ２６から構成され、サーバ２０が使用するデータ及びプログラムを記憶する。記憶部２０２は、ユーザデータベース２０２１と、証憑モデルデータベース２０２２等を記憶する。

【0047】

ユーザデータベース２０２１は、証憑読取システム１の使用者であるユーザの情報、具体的には、証憑読取システム１を使用して証憑読取システム１の機能である証憑画像の読取を行うユーザの属性情報、過去に証憑読取システム１を使用して読み取った証憑画像の種類等の各種情報を保持するためのデータベースである。詳細は後述する。

【0048】

証憑モデルデータベース２０２２は、証憑読取システム１において読み取る証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を保持するためのデータベースである。証憑モデルデータベース２０２２は、具体例として、帳票等を撮影した画像データからその証憑画像の種類と、証憑画像の種類に応じた項目とを判定して出力する機械学習モデルでもよい。この機械学習モデルは、例えば、実装例として、ＯＣＲモデル、物体検出モデル（Object detection Model）、Ｒ?ＣＮＮ、Ｆａｓｔ Ｒ?ＣＮＮ、Ｆａｓｔｅｒ Ｒ?ＣＮＮ等が含まれてもよい。詳細は後述する。

【0049】

制御部２０３は、サーバ２０のプロセッサ２９がプログラムに従って処理を行うことにより、各種モジュールとして受信制御モジュール２０３１、送信制御モジュール２０３２、証憑画像受付モジュール２０３３、証憑画像種類判定モジュール２０３４、証憑画像項目判定モジュール２０３５、付加情報決定モジュール２０３６、ユーザ提示モジュール２０３７、ユーザ入力受付モジュール２０３８、及び送信モジュール２０３９に示す機能を発揮する。

【0050】

受信制御モジュール２０３１は、サーバ２０が外部の装置から通信プロトコルに従って信号を受信する処理を制御する。

【0051】

送信制御モジュール２０３２は、サーバ２０が外部の装置に対し通信プロトコルに従って信号を送信する処理を制御する。

【0052】

証憑画像受付モジュール２０３３は、証憑読取システム１のユーザから、証憑画像の入力を受け付ける処理を制御する。証憑画像受付モジュール２０３３は、ユーザによる端末装置１０の操作により、カメラ１６０が証憑類について撮影するので、撮影された証憑画像の入力を受け付ける。このとき、ユーザは、端末装置１０のカメラ１６０により証憑類を撮影して証憑画像の入力を受け付けてもよく、端末装置１０の専用アプリケーションによりカメラ１６０が制御された状態で証憑類をかざして、証憑画像の入力を受け付けてもよい。

【0053】

証憑画像受付モジュール２０３３が受け付ける証憑画像は、上記のように取引に必要な各種書類、例えば見積書、請求書、領収書、受領書等の撮影画像を含む。また、証憑画像は、企業等における各種申請に必要な書類、例えば交通費申請書、休暇申請書、経費申請書等を含む。さらに、証憑画像は、公的機関等に対する各種申請書類または各種提出書類、例えば確定申告書、決算書、開業届、法人登記申請書等を含む。また、証憑画像の情報は、ＰＤＦ（Portable Document Format）、Ｗｏｒｄ、ＸＭＬ（eXtensible Markup Language）、ｊｐｅｇ、ｐｎｇ、ｂｍｐ、ｔｉｆｆ、ｇｉｆ、ｅｐｓ、ｓｖｇ等の任意のデータフォーマットで受け付けてもよい。

【0054】

証憑画像種類判定モジュール２０３４は、証憑画像受付モジュール２０３３が受け付けた証憑画像の入力に応じて、証憑モデルデータベース２０２２に格納されているモデル情報に基づき、証憑画像の種類を判定する処理を制御する。証憑画像種類判定モジュール２０３４は、例えば、受け付けた証憑画像をＯＣＲ処理により読み取り、証憑画像の種類を判定する。証憑画像の種類とは、具体的には、上記の見積書、請求書、領収書、受領書、交通費申請書、休暇申請書、経費申請書、確定申告書、決算書、開業届、法人登記申請書等である。

【0055】

証憑画像種類判定モジュール２０３４は、例えば、証憑モデルデータベース２０２２に格納されているモデル情報であるＯＣＲモデル等により、証憑画像に記載されている文字列の内容を読み取り、文字列の意味の解釈を行う。また、証憑画像種類判定モジュール２０３４は、例えば、証憑モデルデータベース２０２２に格納されているモデル情報である物体検出モデル等により、証憑画像における文字列の位置情報を取得し、証憑画像において当該文字列が示す位置付け、例えばタイトルなのか、項目名なのか、本文なのか、等を判定する。証憑画像種類判定モジュール２０３４は、これらの処理により、証憑画像の種類を判定する。

【0056】

また、証憑画像種類判定モジュール２０３４は、ユーザデータベース２０２１に格納されている、当該ユーザが過去に証憑読取システム１を使用して読み取った証憑画像の種類に基づき、証憑画像の種類を判定してもよい。

【0057】

証憑画像種類判定モジュール２０３４は、判定結果を、ユーザデータベース２０２１に格納して記憶させる。

【0058】

証憑画像項目判定モジュール２０３５は、証憑画像種類判定モジュール２０３４が判定した証憑画像の種類に応じて、証憑モデルデータベース２０２２に格納されているモデル情報に基づき、証憑画像の項目を判定する処理を制御する。証憑画像項目判定モジュール２０３５は、例えば、証憑画像種類判定モジュール２０３４がＯＣＲ処理により読み取った証憑画像について、当該証憑に記載されている各項目の内容を判定する。証憑画像の項目とは、具体的には、上記の証憑画像におけるタイトル、発行者、氏名等を含み、見積書、請求書、領収書、受領書、交通費申請書等における品目、金額等を含む。

【0059】

証憑画像項目判定モジュール２０３５は、例えば、証憑画像種類判定モジュール２０３４がＯＣＲ処理により読み取った、証憑画像に記載されている文字列の内容から、文字列の意味の解釈を行う。また、証憑画像項目判定モジュール２０３５は、例えば、証憑モデルデータベース２０２２に格納されているモデル情報である物体検出モデル等により、証憑画像における文字列の位置情報を取得し、証憑画像において当該文字列が示す位置付け、例えばタイトルなのか、項目名なのか、本文なのか、等を判定する。証憑画像種類判定モジュール２０３４は、これらの処理により、証憑画像の項目を判定する。

【0060】

また、証憑画像項目判定モジュール２０３５は、ユーザデータベース２０２１に格納されている、当該ユーザが過去に証憑読取システム１を使用して読み取った証憑画像の種類及び項目に基づき、証憑画像の項目を判定してもよい。

【0061】

証憑画像項目判定モジュール２０３５は、判定結果を、ユーザデータベース２０２１に格納して記憶させる。

【0062】

付加情報決定モジュール２０３６は、ユーザデータベース２０２１に格納されているユーザの情報と、証憑画像種類判定モジュール２０３４の判定結果である証憑画像の種類と、証憑画像項目判定モジュール２０３５の判定結果である証憑画像の項目とに基づき、ユーザに対して案内する付加情報を決定する処理を制御する。付加情報決定モジュール２０３６は、例えば、証憑モデルデータベース２０２２に格納されているモデル情報に基づき、ユーザに対して案内する付加情報を決定してもよい。また、付加情報決定モジュール２０３６は、ユーザデータベース２０２１に格納されている、当該ユーザが過去に証憑読取システム１を使用して読み取った証憑画像の種類及び項目の情報に基づき、付加情報を決定してもよい。

【0063】

付加情報決定モジュール２０３６が決定する付加情報とは、例えば、当該証憑またはその証憑画像の項目について、ユーザに対して案内する情報を含む。ユーザに対して案内する情報とは、具体的には、当該証憑の取引や各種手続きにおける位置付け、どのようなタイミングで発行されるものか、各項目についての記載内容、当該証憑についてユーザがすべき確認内容、当該証憑に対してユーザがすべき後続処理、確認や後続処理の期限、等の情報を含む。

【0064】

このとき、付加情報決定モジュール２０３６が決定する付加情報は、例えば、当該証憑について案内するＷｅｂページへのリンク情報でもよい。また、付加情報決定モジュール２０３６が決定する付加情報は、例えば、当該証憑画像の情報の格納先を示す格納先情報でもよい。

【0065】

付加情報決定モジュール２０３６が決定する付加情報とは、例えば、受け付けた証憑画像の項目の一部またはすべてが空欄である場合において、当該証憑画像における空欄の項目に対する入力情報を含む。証憑画像における空欄の項目に対する入力情報とは、項目が「氏名」である場合における当該ユーザの氏名であり、項目が「交通機関」である場合における当該ユーザが使用した交通機関（路線名、出発地、到着地等）である。

【0066】

このとき、付加情報決定モジュール２０３６が決定する付加情報は、例えば、ユーザデータベース２０２１に格納されているユーザの情報（氏名等）でもよい。また、付加情報決定モジュール２０３６が決定する付加情報は、例えば、端末装置１０から取得した情報でもよく、端末装置１０から取得した位置情報（ユーザの位置情報に相当）でもよい。

【0067】

付加情報決定モジュール２０３６は、決定した付加情報を、ユーザデータベース２０２１に格納して記憶させる。

【0068】

ユーザ提示モジュール２０３７は、付加情報決定モジュール２０３６が決定した付加情報を、端末装置１０へ送信してユーザに提示する処理を制御する。ユーザ提示モジュール２０３７は、通信部２０１を介して、付加情報を端末装置１０へ送信する。

【0069】

なお、上記のように、当該機能が端末装置１０で実行されている場合、ユーザ提示モジュール２０３７は、付加情報の送受信は行わず、端末装置１０の通知制御部１８３による処理で、ディスプレイ１５０に表示させてユーザに提示してもよい。

【0070】

ユーザ入力受付モジュール２０３８は、ユーザによる端末装置１０の操作により、ユーザ提示モジュール２０３７によりユーザに提示した付加情報に対する、ユーザからの入力情報を受け付ける処理を制御する。付加情報に対する入力情報とは、例えば、当該証憑についてユーザがすべき確認結果の情報、当該証憑に対してユーザがすべき後続処理に関する情報、Ｗｅｂページへのリンク情報を選択する指示情報、当該証憑画像の情報の格納先への遷移指示情報を含む。また、付加情報に対する入力情報とは、例えば、証憑画像における空欄の項目に対する入力情報への修正の情報、当該証憑に対する処理（例えば、所定の宛先への送信）の指示情報を含む。

【0071】

送信モジュール２０３９は、ユーザ入力受付モジュール２０３８が受け付けた入力情報に基づき、証憑画像の情報を送信する処理を制御する。送信モジュール２０３９は、例えば、当該証憑画像の情報の格納先、所定の送信先へ、通信部２０１（または送受信部１８２）を介して、証憑画像の情報を送信する。

【0072】

＜２ データ構造＞
図４は、サーバ２０が記憶する、ユーザデータベース２０２１のデータ構造の例を示す図である。また、図５は、サーバ２０が記憶する、証憑モデルデータベース２０２２のデータ構造の例を示す図である。

【0073】

図４に示すように、ユーザデータベース２０２１のレコードのそれぞれは、項目「ユーザＩＤ」と、項目「ユーザ名」と、項目「ユーザ過去証憑情報」等を含む。

【0074】

項目「ユーザＩＤ」は、証憑読取システム１を使用して証憑画像の読取を行うユーザそれぞれを識別する情報である。

【0075】

項目「ユーザ名」は、証憑読取システム１を使用して証憑画像の読取を行うユーザの氏名または名称である。

【0076】

項目「ユーザ過去証憑情報」は、証憑読取システム１のユーザが過去に行った証憑画像の読取の情報であり、具体的には、項目「証憑ＩＤ」と、項目「証憑名」と、項目「項目情報」と、「付加情報」等を含む。項目「ユーザ過去証憑情報」には、項目「ユーザＩＤ」が識別するユーザの情報に紐づけて、当該ユーザが過去に行った証憑画像の読取の情報が、例えば時系列で格納されている。

【0077】

項目「証憑ＩＤ」は、証憑読取システム１において読み取る証憑画像の種類それぞれを識別する情報である。

【0078】

項目「証憑名」は、証憑読取システム１において読み取って判定する証憑画像の種類を示す名称である。項目「証憑名」には、証憑画像種類判定モジュール２０３４が判定する証憑画像の種類に応じて、例えば、「見積書」、「請求書」、「交通費申請書」等の情報が格納されている。

【0079】

項目「項目情報」は、証憑読取システム１において読み取って判定する証憑画像の項目を示す名称である。項目「項目情報」には、証憑画像項目判定モジュール２０３５が判定する証憑画像の項目に応じて、例えば、「品目」、「発行者」、「経路情報」等の情報が格納されている。

【0080】

項目「付加情報」は、証憑読取システム１において決定する付加情報であり、図４には例として付加情報の名称が示されている。項目「付加情報」には、証憑画像の種類または項目に応じて、付加情報決定モジュール２０３６が決定する付加情報、例えば、「経費精算」、「過去の金額」、「東京～品川」等の情報が格納されている。図４に示す付加情報の例として、付加情報「経費精算」とは、領収書の品目に対して経費精算の対象となることをユーザへ案内することを示しており、付加情報「東京～品川」とは、交通費申請書の経路情報に入力すべき内容をユーザへ案内することを示している。

【0081】

サーバ２０の証憑画像種類判定モジュール２０３４は、証憑画像の種類を判定することに伴って、項目「ユーザ過去証憑情報」のレコードを追加する（当該ユーザによる証憑読取システム１の使用が初めてである場合、ユーザデータベース２０２１のレコードを追加する。）。証憑画像項目判定モジュール２０３５は、証憑画像の項目を判定することに伴って、該当する項目「証憑ＩＤ」に対応する項目「項目情報」を更新し、または項目「ユーザ過去証憑情報」のレコードを追加する。付加情報決定モジュール２０３６は、付加情報を決定することに伴って、該当する項目「証憑ＩＤ」に対応する項目「付加情報」を更新する。

【0082】

図５に示すように、証憑モデルデータベース２０２２のレコードのそれぞれは、項目「証憑ＩＤ」と、項目「証憑名」と、項目「項目管理情報」等を含む。

【0083】

項目「証憑ＩＤ」は、証憑読取システム１において読み取る証憑画像の種類それぞれを識別する情報であり、ユーザデータベース２０２１の項目「証憑ＩＤ」に対応している。

【0084】

項目「証憑名」は、証憑読取システム１において読み取って判定する証憑画像の種類を示す名称であり、ユーザデータベース２０２１の項目「証憑名」に対応している。

【0085】

項目「項目管理情報」は、証憑読取システム１において、証憑画像の項目についてユーザに提示する付加情報であり、具体的には、項目「項目情報」と、項目「確認内容」と、項目「入力情報」と、「付加情報」等を含む。項目「項目管理情報」には、項目「証憑ＩＤ」が識別する証憑画像の情報に紐づけて、項目ごとにユーザへ提示する付加情報が格納されている。なお、項目「項目管理情報」には、当該証憑の特定の項目には紐づかず、「証憑ＩＤ」が識別する証憑画像の情報に紐づけて、当該証憑全体についてユーザへ提示する付加情報が格納されてもよい。

【0086】

項目「項目情報」は、証憑読取システム１において読み取って判定する証憑画像の項目を示す名称であり、ユーザデータベース２０２１の項目「項目情報」に対応している。

【0087】

項目「確認内容」は、項目「項目情報」に対して提示する付加情報のうち、当該証憑画像の項目について、ユーザに対して案内する情報である。項目「確認内容」には、証憑画像の種類または項目に応じて、付加情報決定モジュール２０３６が決定する付加情報として、ユーザに確認を促す案内の情報、例えば、「品目」、「金額」に対して、過去の取引や金額を確認することを案内する旨の情報が格納されている。

【0088】

項目「入力情報」は、項目「項目情報」に対して提示する付加情報のうち、当該証憑画像の項目が空欄の場合において、当該空欄の項目に対する入力情報である。項目「入力情報」には、証憑画像の種類または項目に応じて、付加情報決定モジュール２０３６が決定する付加情報として、空欄の項目に対する入力情報、例えば、「氏名」に対して、ユーザ名を入力する旨の情報が格納されている。

【0089】

項目「付加情報」は、証憑読取システム１において決定する付加情報であり、ユーザデータベース２０２１の項目「付加情報」に対応している。

【0090】

なお、図示は省略するが、証憑モデルデータベース２０２２には、読み取る証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報が格納されてもよい。証憑モデルデータベース２０２２には、例えば、モデル情報として証憑画像の証憑及び各項目の特徴量と、対応する証憑画像の種類及び項目とを推論して判定するための機械学習モデルが格納されてもよい。

【0091】

＜３ 動作＞
以下、図６及び図７を参照しながら、実施の形態１における証憑読取システム１による付加情報案内処理、及び証憑画像送信処理について説明する。なお、動作の説明では、端末装置１０がサーバ２０の各機能を実行する例について説明する。

【0092】

図６は、証憑読取システム１による付加情報案内処理を行う流れの一例を示すフローチャートである。

【0093】

ステップＳ１１１において、ユーザの操作により、端末装置１０のカメラ１６０は、証憑類を撮影、または証憑類をかざすことにより証憑画像を取得（撮影）するので、データ処理部１８４は、証憑画像受付モジュール２０３３の機能により証憑画像の入力を受け付ける。

【0094】

ステップＳ１１２において、端末装置１０のデータ処理部１８４は、証憑画像種類判定モジュール２０３４の機能により、ステップＳ１１１で受け付けた証憑画像の入力に応じて、モデル情報（サーバ２０との通信により証憑モデルデータベース２０２２に格納されているモデル情報を読み取ってもよく、端末装置１０に格納されたものでもよい）に基づき、証憑画像の種類を判定する。

【0095】

ステップＳ１１３において、端末装置１０のデータ処理部１８４は、証憑画像項目判定モジュール２０３５の機能により、ステップＳ１１２で判定した証憑画像の種類に応じて、モデル情報（サーバ２０との通信により証憑モデルデータベース２０２２に格納されているモデル情報を読み取ってもよく、端末装置１０に格納されたものでもよい）に基づき、証憑画像の項目を判定する。

【0096】

ステップＳ１１４において、端末装置１０のデータ処理部１８４は、付加情報決定モジュール２０３６の機能により、ステップＳ１１２で判定した判定結果である証憑画像の種類と、ステップＳ１１３で判定した判定結果である証憑画像の項目とに基づき、ユーザに対して案内する付加情報を決定する。ユーザに対して案内する付加情報とは、証憑またはその証憑画像の項目について、ユーザに対して案内する情報を含んでもよく、証憑画像における空欄の項目に対する入力情報を含んでもよい。

【0097】

ステップＳ１１５において、端末装置１０のデータ処理部１８４は、ユーザ提示モジュール２０３７の機能により、ステップＳ１１４で決定した付加情報をディスプレイ１５０に表示して、ユーザに提示する。

【0098】

以上のように、証憑読取システム１では、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を記憶しておき、証憑画像の入力に応じて、モデル情報に基づいて証憑画像の種類と項目とを判定する。ユーザの情報と、証憑画像の種類と項目とに基づき、ユーザに対して案内する付加情報を決定し、ユーザに提示する。これにより、ユーザは、当該証憑についての付加情報を取得することができるので、当該証憑を受け取った後の処理をどうするか、どこに格納するか、等を把握することが可能になる。また、外出先等において、各種申請書についてユーザが入力する必要がある項目について、ユーザ自身で入力する手間を削減することが可能になる。

【0099】

図７は、証憑読取システム１による証憑画像送信処理を行う流れの一例を示すフローチャートである。

【0100】

ステップＳ２１１において、ユーザの操作により、端末装置１０の入力操作受付部１８１は、ステップＳ１１５で提示された付加情報に対する入力情報の入力を受け付ける。端末装置１０のデータ処理部１８４は、ユーザ入力受付モジュール２０３８の機能により、ユーザに提示した付加情報に対する、ユーザからの入力情報を受け付ける。

【0101】

ステップＳ２１２において、端末装置１０のデータ処理部１８４は、送信モジュール２０３９の機能により、ステップＳ２１１で受け付けた入力情報に基づき、証憑画像の情報を送信する。ここでは、証憑画像の情報をサーバ２０へ送信し、所定の格納先へ格納させる例について説明する。ステップＳ２１２では、証憑画像の情報を、送受信部１８２を介してサーバ２０へ送信する。

【0102】

ステップＳ２２２において、サーバ２０は、ステップＳ２１２で送信された証憑画像の情報を、通信部２０１を介して受け付けるので、サーバ２０内の所定の格納先へ格納する。

【0103】

以上のように、証憑読取システム１では、付加情報に対するユーザからの入力情報を受け付け、証憑画像の情報を送信する。これにより、読み取った証憑類の証憑画像について、各種情報の入力を行い、その後の処理としてサーバ等へ送信することができるので、ユーザの入力の手間を削減することが可能になる。

【0104】

＜４ 画面例＞
以下、図８及び図９を参照しながら、証憑読取システム１による付加情報案内処理の画面例について説明する。

【0105】

図８は、端末装置１０に表示する証憑画像に案内情報を付加した画面例を示す図である。図８の画面例は、証憑画像受付モジュール２０３３の機能により受け付けた証憑画像に、付加情報決定モジュール２０３６の機能により決定された付加情報が、ユーザ提示モジュール２０３７の機能により証憑画像と共に提示された状態の画面例を示す。図６のステップＳ１１５に相当する。

【0106】

図８に示すように、端末装置１０のディスプレイ１５０には、証憑画像１５０１が表示されている。また、ディスプレイ１５０には、この証憑画像１５０１と共に、付加情報１５０２，１５０３が、証憑画像１５０１に重畳するように表示されている。

【0107】

証憑画像１５０１は、図８に示すように請求書であり、証憑画像種類判定モジュール２０３４の機能により、証憑モデルデータベース２０２２に格納されている項目「証憑名」が読み取られ、請求書であると判定される。また、証憑画像項目判定モジュール２０３５の機能により、証憑モデルデータベース２０２２に格納されている項目「項目管理情報」が読み取られ、当該項目に格納されている証憑画像の項目であると判定される。そして、付加情報決定モジュール２０３６の機能により、証憑モデルデータベース２０２２に格納されている項目「付加情報」がユーザに提示される。

【0108】

図８に示す例では、請求書の格納先を示す格納先情報として、格納先のリンク情報が付加情報１５０２に示されている。また、請求書内の合計金額について、ユーザに対して確認すべき内容を案内する情報が付加情報１５０３に示されている。これにより、ユーザは、当該証憑についての付加情報を取得することができるので、当該証憑について確認すべき内容、当該証憑を受け取った後の処理をどうするか、どこに格納するか、等を把握することが可能になる。

【0109】

図９は、端末装置１０に表示する証憑画像に入力情報を付加した画面例を示す図である。図９の画面例は、証憑画像受付モジュール２０３３の機能により受け付けた証憑画像に、付加情報決定モジュール２０３６の機能により決定された付加情報が、ユーザ提示モジュール２０３７の機能により証憑画像と共に提示された状態の画面例を示す。図６のステップＳ１１５に相当する。

【0110】

図９に示すように、端末装置１０のディスプレイ１５０には、証憑画像１６０１が表示されている。また、ディスプレイ１５０には、この証憑画像１６０１と共に、証憑画像１６０１の空欄の項目に対する入力情報１６０２，１６０３，１６０４，１６０５が、証憑画像１６０１の空欄を埋めるように表示されている。

【0111】

証憑画像１６０１は、図９に示すように交通費申請書であり、証憑画像種類判定モジュール２０３４の機能により、証憑モデルデータベース２０２２に格納されている項目「証憑名」が読み取られ、交通費申請書であると判定される。また、証憑画像項目判定モジュール２０３５の機能により、証憑モデルデータベース２０２２に格納されている項目「項目管理情報」が読み取られ、当該項目に格納されている証憑画像の項目であり、入力情報であると判定される。そして、付加情報決定モジュール２０３６の機能により、証憑モデルデータベース２０２２に格納されている項目「付加情報」が、入力情報としてユーザに提示される。

【0112】

図９に示す例では、部署名入力欄に対して、ユーザの部署名を入力する情報として入力情報１６０２に示されている。氏名入力欄に対して、ユーザの氏名を入力する情報として入力情報１６０３に示されている。交通機関入力欄に対して、ユーザが利用した交通機関（出発地、到着地）を入力する情報として入力情報１６０４に示されている。また、交通費金額入力欄に対して、ユーザが利用した交通機関の交通費を入力する情報として入力情報１６０５に示されている。これにより、ユーザは、当該証憑についての付加情報としての入力情報を取得することができるので、各種申請書についてユーザが入力する必要がある項目について、ユーザ自身で入力する手間を削減することが可能になる。

【0113】

＜小括＞
以上のように、本実施形態によると、証憑画像の入力に応じて、証憑画像の種類と、証憑画像の種類に応じた項目とを判定するモデル情報を記憶しておき、証憑画像の入力に応じて、モデル情報に基づいて証憑画像の種類と項目とを判定する。ユーザの情報と、証憑画像の種類と項目とに基づき、ユーザに対して案内する付加情報を決定し、ユーザに提示する。これにより、ユーザは、当該証憑についての付加情報を取得することができるので、当該証憑を受け取った後の処理をどうするか、どこに格納するか、等を把握することが可能になる。

【0114】

また、本実施形態によると、付加情報として、証憑画像に係る証憑、または証憑画像の項目について案内する。ユーザに案内する付加情報とは、具体的には、その証憑がどういうものか、どのような後続の処理（納品、請求、支払、等）が必要か、どこに格納すべきか、等の情報である。これにより、当該証憑を受け取った後の処理をどうするか、どこに格納するか、等を把握することが可能になる。

【0115】

さらに、本実施形態によると、付加情報として、証憑画像に係る証憑の空白となっている項目に対して、ユーザの各種情報を入力する入力情報を案内する。ユーザの各種情報を入力する入力情報とは、具体的には、その証憑が各種申請書であり、ユーザが入力する必要がある項目について、入力すべきユーザの各種情報（ユーザ自身の属性情報、現在の位置情報、スケジュール情報、等）である。これにより、各種申請書についてユーザが入力する必要がある項目について、ユーザ自身で入力する手間を削減することが可能になる。

【0116】

以上、開示に係る実施形態について説明したが、これらはその他の様々な形態で実施することが可能であり、種々の省略、置換及び変更を行なって実施することができる。これらの実施形態及び変形例ならびに省略、置換及び変更を行なったものは、特許請求の範囲の技術的範囲とその均等の範囲に含まれる。

【0117】

＜付記＞
以上の各実施形態で説明した事項を、以下に付記する。

【0118】

（付記１）プロセッサ２９と、メモリ２５とを備えるコンピュータに実行させるためのプログラムであって、メモリ２５は、使用者であるユーザの情報（２０２１）と、証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報（２０２２）とを記憶し、プログラムは、プロセッサ２９に、ユーザから証憑画像の入力を受け付けるステップ（Ｓ１１１）と、証憑画像の入力に応じて、モデル情報に基づき、証憑画像の種類を判定するステップ（Ｓ１１２）と、証憑画像の種類に応じて、モデル情報に基づき、証憑画像の項目を判定するステップ（Ｓ１１３）と、ユーザの情報と、証憑画像の種類と、証憑画像の項目とに基づき、ユーザに対して、証憑画像における項目に対する入力情報を案内する付加情報を決定するステップ（Ｓ１１４）と、決定した付加情報をユーザに提示するステップ（Ｓ１１５）と、を実行させる、プログラム。

【0119】

（付記２）メモリ２５は、ユーザの情報として、ユーザから過去に受け付けた証憑画像の情報を記憶し、付加情報を決定するステップにおいて、ユーザから過去に受け付けた証憑画像の情報に基づき、付加情報を決定する、（付記１）に記載のプログラム。

【0120】

（付記３）受け付けた証憑画像の項目は、空欄であり、付加情報を決定するステップにおいて、付加情報として、証憑画像における空欄の項目に対する入力情報を決定し、ユーザに提示するステップにおいて、ユーザに、付加情報として決定した入力情報が証憑画像の項目に記載された証憑画像を提示する、（付記１）または（付記２）に記載のプログラム。

【0121】

（付記４）付加情報を決定するステップにおいて、付加情報として、ユーザの情報に基づき証憑画像における空欄の項目に対する入力情報を決定する、（付記３）に記載のプログラム。

【0122】

（付記５）付加情報を決定するステップにおいて、ユーザが使用している端末装置から取得した情報に基づき、付加情報を決定する、（付記１）に記載のプログラム。

【0123】

（付記６）ユーザが使用している端末装置から取得した、端末装置の位置情報に基づき、付加情報を決定する、（付記５）に記載のプログラム。

【0124】

（付記７）プログラムは、さらに、ユーザに提示した付加情報に対する、ユーザからの入力情報を受け付けるステップ（Ｓ２１１）を実行させる、（付記１）に記載のプログラム。

【0125】

（付記８）プログラムは、さらに、ユーザからの入力情報に基づき、前記証憑画像の情報を送信するステップ（Ｓ２１２）を実行させる、（付記７）に記載のプログラム。

【0126】

（付記９）制御部２０３と、記憶部２０２とを備える情報処理装置であって、記憶部２０２は、使用者であるユーザの情報（２０２１）と、証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報（２０２２）とを記憶し、制御部２０３は、ユーザから証憑画像の入力を受け付けるステップ（Ｓ１１１）と、証憑画像の入力に応じて、モデル情報に基づき、証憑画像の種類を判定するステップ（Ｓ１１２）と、証憑画像の種類に応じて、モデル情報に基づき、証憑画像の項目を判定するステップ（Ｓ１１３）と、ユーザの情報と、証憑画像の種類と、証憑画像の項目とに基づき、ユーザに対して、証憑画像における項目に対する入力情報を案内する付加情報を決定するステップ（Ｓ１１４）と、決定した付加情報をユーザに提示するステップ（Ｓ１１５）と、を実行する、情報処理装置。

【0127】

（付記１０）プロセッサ２９と、メモリ２５とを備えるコンピュータにより実行されるための方法であって、メモリ２５は、使用者であるユーザの情報（２０２１）と、証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報（２０２２）とを記憶し、方法は、プロセッサ２９が、ユーザから証憑画像の入力を受け付けるステップ（Ｓ１１１）と、証憑画像の入力に応じて、モデル情報に基づき、証憑画像の種類を判定するステップ（Ｓ１１２）と、証憑画像の種類に応じて、モデル情報に基づき、証憑画像の項目を判定するステップ（Ｓ１１３）と、ユーザの情報と、証憑画像の種類と、証憑画像の項目とに基づき、ユーザに対して、証憑画像における項目に対する入力情報を案内する付加情報を決定するステップ（Ｓ１１４）と、決定した付加情報をユーザに提示するステップ（Ｓ１１５）と、を実行する、方法。

【符号の説明】

【0128】

１ ：証憑読取システム
１０ ：端末装置
１０Ａ ：端末装置
１０Ｂ ：端末装置
１３ ：入力装置
１４ ：出力装置
１５ ：メモリ
１６ ：記憶部
１９ ：プロセッサ
２０ ：サーバ
２５ ：メモリ
２６ ：ストレージ
２９ ：プロセッサ
８０ ：ネットワーク
８１ ：無線基地局
８２ ：無線ＬＡＮルータ
１１１ ：アンテナ
１１２ ：アンテナ
１２１ ：第１無線通信部
１２２ ：第２無線通信部
１３０ ：操作受付部
１３１ ：キーボード
１３２ ：マウス
１４０ ：音声処理部
１４１ ：マイク
１４２ ：スピーカ
１５０ ：ディスプレイ
１６０ ：カメラ
１７０ ：記憶部
１７１ ：ユーザ情報
１７２ ：証憑画像情報
１８０ ：制御部
１８１ ：入力操作受付部
１８２ ：送受信部
１８３ ：通知制御部
１８４ ：データ処理部
２０１ ：通信部
２０２ ：記憶部
２０３ ：制御部
２０２１ ：ユーザデータベース
２０２２ ：証憑モデルデータベース
２０３１ ：受信制御モジュール
２０３２ ：送信制御モジュール
２０３３ ：証憑画像受付モジュール
２０３４ ：証憑画像種類判定モジュール
２０３５ ：証憑画像項目判定モジュール
２０３６ ：付加情報決定モジュール
２０３７ ：ユーザ提示モジュール
２０３８ ：ユーザ入力受付モジュール
２０３９ ：送信モジュール

【要約】

【課題】受け付けた証憑画像について、読取を行い、当該証憑についての付加情報をユーザに提示する技術を提供する。
【解決手段】証憑読取システムのサーバは、使用者であるユーザの情報（２０２１）と、証憑画像の入力に応じて、前記証憑画像の種類と、前記証憑画像の種類に応じた項目とを判定するモデル情報（２０２２）とを記憶し、その機能として、ユーザから証憑画像の入力を受け付けるステップ（Ｓ１１１）と、証憑画像の入力に応じて、モデル情報に基づき、証憑画像の種類を判定するステップ（Ｓ１１２）と、証憑画像の種類に応じて、モデル情報に基づき、証憑画像の項目を判定するステップ（Ｓ１１３）と、ユーザの情報と、証憑画像の種類と、証憑画像の項目とに基づき、ユーザに対して、証憑画像における項目に対する入力情報を案内する付加情報を決定するステップ（Ｓ１１４）と、決定した付加情報をユーザに提示するステップ（Ｓ１１５）と、を実行させる。
【選択図】図６

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】