特許 6404979 支払支援システム、支払支援方法及び支払支援プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6404979

(24)【登録日】2018年9月21日

(45)【発行日】2018年10月17日

(54)【発明の名称】支払支援システム、支払支援方法及び支払支援プログラム

(51)【国際特許分類】

   G06Q 20/14 20120101AFI20181004BHJP

   G06T 1/00 20060101ALI20181004BHJP

【ＦＩ】

   G06Q20/14

   G06T1/00 310Z

【請求項の数】6

【全頁数】12

(21)【出願番号】特願2017-70518(P2017-70518)

(22)【出願日】2017年3月31日

【審査請求日】2017年3月31日

(73)【特許権者】

【識別番号】592052416

【氏名又は名称】株式会社 みずほ銀行

(74)【代理人】

【識別番号】100105957

【弁理士】

【氏名又は名称】恩田 誠

(74)【代理人】

【識別番号】100068755

【弁理士】

【氏名又は名称】恩田 博宣

(72)【発明者】

【氏名】安藤 邦浩

【審査官】 田川 泰宏

(56)【参考文献】

【文献】 特開２０１３−１０９７２６（ＪＰ，Ａ）

【文献】 特開２０１６−０７６０２１（ＪＰ，Ａ）

【文献】 特開２００６−２６８４４６（ＪＰ，Ａ）

【文献】 特開２０１６−１６７１５９（ＪＰ，Ａ）

【文献】 特開２０１６−０６２３６７（ＪＰ，Ａ）

【文献】 特開２０１２−２４７９９５（ＪＰ，Ａ）

【文献】 特開２０１６−０９１２５３（ＪＰ，Ａ）

【文献】 特開２０１６−０７１７７６（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００−９９／００

Ｇ０６Ｔ １／００

(57)【特許請求の範囲】

【請求項1】

出力部とカメラと、銀行システムの口座情報記憶部とに接続された制御部を備えた支払支援システムであって、
前記制御部が、
利用者認証された顧客コードを用いて、前記銀行システムにアクセスし、
前記カメラにより撮影された請求書の撮影画像を取得し、
前記撮影画像に含まれる振込先口座及び請求金額を特定し、
前記顧客コードに関連付けられた顧客口座を特定し、前記顧客口座の残高を取得し、
前記口座情報記憶部を用いて、前記顧客口座から前記振込先口座への送金履歴に関する情報を確認結果として取得し、
前記出力部に表示された撮影画像内の振込先口座画像に対応させて、前記振込先口座への送金履歴に関する確認結果を含む確認画像を重畳させて表示し、前記撮影画像内の請求金額画像に対応させて、前記顧客口座の残高から前記請求金額を差し引いた残高結果を含む確認画像を重畳させて表示することを特徴とする支払支援システム。

【請求項2】

前記請求書に含まれる請求書項目の撮影指示を順次出力し、
前記撮影画像に基づいて、前記請求書項目の内容についての文字認識を行なうことを特徴とする請求項１に記載の支払支援システム。

【請求項3】

前記撮影画像に含まれる請求書項目を特定し、
前記請求書項目に基づいて、前記確認画像を出力することを特徴とする請求項１又は２に記載の支払支援システム。

【請求項4】

前記撮影画像において、請求書項目の内容が表示された表示領域を特定し、
前記表示領域を避けて、前記請求書項目の確認画像を出力することを特徴とする請求項１〜３の何れか一項に記載の支払支援システム。

【請求項5】

出力部とカメラと、銀行システムの口座情報記憶部とに接続された制御部を備えた支払支援システムを用いて、支払支援を行なうための方法であって、
前記制御部が、
利用者認証された顧客コードを用いて、前記銀行システムにアクセスし、
前記カメラにより撮影された請求書の撮影画像を取得し、
前記撮影画像に含まれる振込先口座及び請求金額を特定し、
前記顧客コードに関連付けられた顧客口座を特定し、前記顧客口座の残高を取得し、
前記口座情報記憶部を用いて、前記顧客口座から前記振込先口座への送金履歴に関する情報を確認結果として取得し、
前記出力部に表示された撮影画像内の振込先口座画像に対応させて、前記振込先口座への送金履歴に関する確認結果を含む確認画像を重畳させて表示し、前記撮影画像内の請求金額画像に対応させて、前記顧客口座の残高から前記請求金額を差し引いた残高結果を含む確認画像を重畳させて表示することを特徴とする支払支援方法。

【請求項6】

出力部とカメラと、銀行システムの口座情報記憶部とに接続された制御部を備えた支払支援システムを用いて、支払支援を行なうためのプログラムであって、
前記制御部を、
利用者認証された顧客コードを用いて、前記銀行システムにアクセスし、
前記カメラにより撮影された請求書の撮影画像を取得し、
前記撮影画像に含まれる振込先口座及び請求金額を特定し、
前記顧客コードに関連付けられた顧客口座を特定し、前記顧客口座の残高を取得し、
前記口座情報記憶部を用いて、前記顧客口座から前記振込先口座への送金履歴に関する情報を確認結果として取得し、
前記出力部に表示された撮影画像内の振込先口座画像に対応させて、前記振込先口座への送金履歴に関する確認結果を含む確認画像を重畳させて表示し、前記撮影画像内の請求金額画像に対応させて、前記顧客口座の残高から前記請求金額を差し引いた残高結果を含む確認画像を重畳させて表示する手段として機能させることを特徴とする支払支援プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、請求書に基づく支払を支援するための支払支援システム、支払支援方法及び支払支援プログラムに関する。

【背景技術】

【0002】

請求書を取り扱う業務を支援するための業務支援装置が検討されている（例えば、特許文献１参照）。この文献に記載された業務支援装置は、請求書類イメージを取得し、請求書類イメージ及びコード入力画像を画面内に分割表示する。コード入力画像には、請求書類イメージから得た文字認識コードが表示される。コード入力画像から着目対象のコード入力項目を選択し、選択されたコード入力項目に関連づけられた書類拡大箇所を拡大する。

【0003】

また、光学式文字認識（ＯＣＲ）を用いて拡張現実（ＡＲ）を提供するための技術が検討されている（例えば、特許文献２参照）。この文献に記載された処理システムは、シーンのビデオに基づいて、そのシーンが所定のＡＲターゲットを含むかどうかを判断する。そのシーンがＡＲターゲットを含むとの判断に応じて、ＡＲターゲットに関連するＯＣＲゾーン記述を読み出す。そして、ＯＣＲを用いてＯＣＲゾーンからテキストを自動的に抽出し、ＯＣＲ結果を用いて、ＯＣＲゾーンから抽出されたテキストに対応するＡＲコンテンツを取得する。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００２−６３３７５号公報

【特許文献2】特表２０１６−５１５２３９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

請求書を撮影した画像の文字認識により、支払内容を入力できれば効率的である。しかしながら、振込先情報を的確に文字認識できているとは限らない。更に、請求書に記載された振込先口座が間違っている場合や、振込先口座に問題がある場合もある。このような支払情報の確認に手間がかかっていたのでは、効率的な作業を実現することができない。

【課題を解決するための手段】

【0006】

上記課題を解決する支払支援システムは、出力部とカメラと口座情報記憶部とに接続された制御部を備える。そして、前記制御部が、前記カメラにより撮影された請求書の撮影画像を取得し、前記撮影画像に含まれる振込先口座を特定し、前記口座情報記憶部を用いて、前記振込先口座に関する情報を確認し、前記出力部に表示された撮影画像上に、前記振込先口座の確認結果を含む確認画像を重畳させて表示する。

【発明の効果】

【0007】

本発明によれば、請求書に基づいて効率的かつ的確に支払を行なうことができる。

【図面の簡単な説明】

【0008】

【図1】本実施形態の支払支援システムの説明図。

【図2】本実施形態の処理手順の説明図。

【図3】本実施形態で用いる画面の説明図。

【図4】他の実施形態の処理手順の説明図。

【図5】他の実施形態の説明図であって、（ａ）は処理手順、（ｂ）は出力画面の説明図。

【発明を実施するための形態】

【0009】

以下、図１〜図３に従って、支払支援システム、支払支援方法及び支払支援プログラムを具体化した一実施形態を説明する。本実施形態では、請求者から取得した請求書に基づいて、企業が支払を行なう場合を想定する。

【0010】

ここでは、図１に示すように、ネットワークを介して接続された企業サーバ１０、ユーザ端末２０、銀行システム３０を用いる。
企業サーバ１０は、支払を行なう企業が管理するコンピュータシステムである。この企業サーバ１０は、支払情報記憶部１２を備える。

【0011】

この支払情報記憶部１２には、企業が行なった支払についての支払管理レコードが記録される。この支払管理レコードには、管理コード、請求日、支払日、振込先口座、振込金額に関するデータが記録される。

【0012】

管理コードデータ領域には、各支払を識別するための識別子に関するデータが記録される。
請求日データ領域には、請求書の発行年月日に関するデータが記録される。
支払日データ領域には、支払指示を行なった年月日及び時刻に関するデータが記録される。

【0013】

振込先口座データ領域には、支払のための振込先口座を特定するための識別子に関するデータが記録される。
振込金額データ領域には、振込先口座に送金した金額（請求金額）に関するデータが記録される。

【0014】

ユーザ端末２０は、企業において請求書を確認する担当者が用いるコンピュータ端末（クライアント端末）である。
このユーザ端末２０は、制御部２１、タッチパネルディスプレイ２２、カメラ２３、通信部２４を備える。

【0015】

制御部２１は、制御手段（ＣＰＵ、ＲＡＭ、ＲＯＭ等）を備え、後述する処理（支払管理段階、文字認識段階、表示制御段階等の各処理等）を行なう。そのための支払支援プログラム（アプリケーション）を実行することにより、制御部２１は、支払管理部２１１、文字認識部２１２、表示制御部２１３として機能する。

【0016】

支払管理部２１１は、請求書に基づいた支払を支援する処理を実行する。
文字認識部２１２は、撮影画像に含まれる文字を認識する処理を実行する。
表示制御部２１３は、タッチパネルディスプレイ２２に表示された撮影画像に対して、各種情報を重畳させて表示するＡＲ（拡張現実）処理を実行する。

【0017】

タッチパネルディスプレイ２２は、出力部及び入力部として機能し、カメラ２３によって撮影された画像や、銀行システム３０等から取得した情報を含めた画面を出力する。更に、画面に触れる操作（タッチ）により、画面上に表示された所望のアイコンを選択することができる。
カメラ２３は、被写体を撮影し、撮影画像を生成する撮影部である。
通信部２４は、企業サーバ１０、銀行システム３０と通信を行なう通信部である。

【0018】

銀行システム３０は、顧客の口座を管理するコンピュータシステムである。この銀行システム３０は、ＡＰＩサーバ３５を介して、各種情報をユーザ端末２０に提供する。この銀行システム３０は、顧客情報記憶部３２、口座情報記憶部３３を備えている。

【0019】

顧客情報記憶部３２には、支払支援サービスを利用する利用者に関する顧客管理レコードが記録される。この顧客管理レコードは、顧客登録が行なわれた場合に記録される。この顧客管理レコードには、顧客コード、本人認証情報、顧客口座、登録口座に関するデータが記録される。

【0020】

顧客コードデータ領域には、利用者を特定するための識別子に関するデータが記録される。
本人認証情報データ領域には、本人を確認するための情報（パスワードや生体認証情報）が記録される。
顧客口座データ領域には、この顧客が保有している口座に関するデータが記録される。
登録口座データ領域には、この顧客が支払先として、予め登録した支払先口座に関するデータが記録される。

【0021】

口座情報記憶部３３には、各顧客の口座を管理するための口座管理レコードが記録される。口座管理レコードは、口座が開設された場合に登録され、口座への入金や口座からの出金があった場合に入出金履歴が追加される。この口座管理レコードには、口座識別子に関連付けられた入出金履歴（取引種別、取引口座、金額、摘要）に関するデータが記録される。

【0022】

口座識別子データ領域には、各口座を特定するための識別子（金融機関名、本支店コード、預金種別、口座番号）に関するデータが記録される。
取引種別データ領域には、入金又は出金を特定するためのフラグが記録される。
取引口座データ領域には、取引先口座を特定するための識別子に関するデータが記録される。具体的には、入金の場合には送金元口座の口座識別子、出金の場合には送金先口座の口座識別子に関するデータが記録される。
金額データ領域には、入金額又は出金額に関するデータが記録される。
摘要データ領域には、この取引について補足事項に関するデータが記録される。

【0023】

ＡＰＩサーバ３５は、ユーザ端末２０のアプリケーションと、銀行システム３０のアプリケーションとの通信を管理するＡＰＩ（アプリケーションプログラミングインタフェース）となるコンピュータシステムである。このＡＰＩサーバ３５は、ユーザ端末２０からの要求に応じて、銀行システム３０において管理されている情報をユーザ端末２０に提供する。

【0024】

（支払支援処理）
次に、図２を用いて、支払支援処理の処理手順を説明する。
まず、ユーザ端末２０の制御部２１は、利用者認証処理を実行する（ステップＳ１−１）。具体的には、制御部２１の支払管理部２１１は、ログイン画面をタッチパネルディスプレイ２２に出力する。この場合、ユーザは、ログイン画面に本人認証情報を入力する。本人認証情報としては、ＩＤ及びパスワードや生体情報を利用することができる。本人認証情報が入力された場合、支払管理部２１１は、本人認証情報が登録本人情報と一致するかどうかを判定することにより、ログイン認証を行なう。ログイン認証できない場合には、利用を拒否する。

【0025】

利用者認証を完了した場合、ユーザ端末２０の制御部２１は、請求書の撮影処理を実行する（ステップＳ１−２）。具体的には、制御部２１の支払管理部２１１は、カメラを用いて、請求書を撮影する指示メッセージをタッチパネルディスプレイ２２に出力する。この場合、ユーザは、カメラ２３を用いて、請求書全体を撮影する。カメラ２３は、請求書の全体画像を生成する。

【0026】

次に、ユーザ端末２０の制御部２１は、ＯＣＲ処理を実行する（ステップＳ１−３）。具体的には、制御部２１の文字認識部２１２は、請求書の撮影画像に含まれる文字画像領域を特定し、文字画像領域毎に文字認識を行なう。そして、文字認識部２１２は、パターン認識により、請求書に含まれる各請求書項目を特定する。ここでは、請求書項目として、請求日、請求金額、振込先口座、請求者名等を特定する。更に、表示制御部２１３は、文字認識部２１２が文字認識を行なった各請求書項目が記載された領域の特徴量を算出する。そして、表示制御部２１３は、領域の特徴量に対して、請求書項目を関連付けてメモリに仮記憶する。

【0027】

次に、ユーザ端末２０の制御部２１は、口座確認処理を実行する（ステップＳ１−４）。具体的には、制御部２１の支払管理部２１１は、請求書画像に含まれる文字列において、振込先口座の口座識別子を特定する。そして、支払管理部２１１は、ＡＰＩサーバ３５を介して、銀行システム３０の顧客情報記憶部３２にアクセスし、利用者認証された顧客コードの顧客管理レコードを特定する。次に、支払管理部２１１は、請求書画像に含まれる振込先口座の口座識別子が、顧客管理レコードにおいて登録口座として登録されているかどうかを確認する。そして、支払管理部２１１は、振込先口座が登録口座かどうかについての確認結果を、メモリに仮記憶する。

【0028】

次に、ユーザ端末２０の制御部２１は、取引履歴の取得処理を実行する（ステップＳ１−５）。具体的には、制御部２１の支払管理部２１１は、顧客管理レコードに記録されている利用者が保有している顧客口座の口座識別子を取得する。次に、支払管理部２１１は、銀行システム３０の口座情報記憶部３３にアクセスし、顧客口座の口座識別子の口座管理レコードを特定する。次に、支払管理部２１１は、口座管理レコードにおいて、支払先口座の口座識別子に対する送金履歴を取得する。そして、支払管理部２１１は、取得した送金履歴（送金実績の有無、送金日、送金額等）を、メモリに仮記憶する。

【0029】

次に、ユーザ端末２０の制御部２１は、残高情報の取得処理を実行する（ステップＳ１−６）。具体的には、制御部２１の支払管理部２１１は、ＡＰＩサーバ３５を介して、銀行システム３０にアクセスし、顧客口座の現在残高を取得し、メモリに仮記憶する。更に、支払管理部２１１は、現在残高から請求金額を差し引いた決済後残高を算出し、メモリに仮記憶する。

【0030】

次に、ユーザ端末２０の制御部２１は、ＡＲ表示処理を実行する（ステップＳ１−７）。具体的には、制御部２１の表示制御部２１３は、撮影画像の各領域の特徴量に基づいて、画像に含まれる請求書項目を特定する。そして、表示制御部２１３は、特定した請求書項目に関する情報を、メモリから呼び出す。そして、表示制御部２１３は、請求書項目が表示されていない余白領域を特定し、メモリから呼び出した情報をタッチパネルディスプレイ２２に出力する。

【0031】

図３に示すように、請求書５００を撮影した場合、タッチパネルディスプレイ２２には、撮影画面５１０が出力される。この撮影画面５１０には、送金先関連情報５１１、金額関連情報５１２を含めた確認画像を重畳させる。送金先関連情報５１１には、振込先の口座情報、振込先登録の有無、取引履歴に関する情報を含める。金額関連情報５１２には、請求金額、現在残高、決済後残高に関する情報を含める。なお、送金先関連情報５１１、金額関連情報５１２が間違っている場合には、タッチパネルディスプレイ２２のタッチ操作により修正する。

【0032】

次に、ユーザ端末２０の制御部２１は、支払情報の登録処理を実行する（ステップＳ１−８）。具体的には、送金先関連情報５１１、金額関連情報５１２を確認したユーザは、確認入力を行なう。この場合、制御部２１の支払管理部２１１は、タッチパネルディスプレイ２２に支払確認画面を出力する。この支払確認画面には、送金先関連情報５１１、金額関連情報５１２の振込先口座、支払金額（請求金額）、顧客口座（引落口座）等に関する表示欄が含まれる。口座や金額を変更する場合には、支払確認画面の各表示欄に表示された文字を修正する。そして、支払確認画面を確認できたユーザは、支払実行ボタンを選択する。この場合、支払管理部２１１は、支払情報を企業サーバ１０に送信する。この支払情報には、請求日、振込先口座、請求金額に関するデータを含める。支払情報を受信した企業サーバ１０は、管理コードを付与し、請求日、支払日（現在日時）、振込先口座、振込金額（請求金額）を記録した支払管理レコードを生成し、支払情報記憶部１２に記録する。

【0033】

次に、ユーザ端末２０の制御部２１は、支払指示処理を実行する（ステップＳ１−９）。具体的には、制御部２１の支払管理部２１１は、銀行システム３０に対して、支払指示を送信する。この支払指示には、支払確認画面に設定された振込先口座、振込金額、顧客口座（引落口座）等に関する情報を含める。

【0034】

次に、銀行システム３０は、送金処理を実行する（ステップＳ１−１０）。具体的には、銀行システム３０は、ユーザ端末２０から受信した支払指示に基づいて、顧客口座から振込金額を引き落とし、振込先口座への送金処理を行なう。

【0035】

以上、本実施形態によれば、以下に示す効果を得ることができる。
（１）本実施形態では、ユーザ端末２０の制御部２１は、請求書の撮影処理（ステップＳ１−２）、ＯＣＲ処理（ステップＳ１−３）を実行する。これにより、請求書に対する支払を効率的に行なうことができる。

【0036】

（２）本実施形態では、ユーザ端末２０の制御部２１は、口座確認処理を実行する（ステップＳ１−４）。これにより、登録情報を用いて、振込先口座を確認することができる。
（３）本実施形態では、ユーザ端末２０の制御部２１は、取引履歴の取得処理を実行する（ステップＳ１−５）。これにより、振込実績がある取引履歴を確認して、振込先口座を確認することができる。

【0037】

（４）本実施形態では、ユーザ端末２０の制御部２１は、残高情報の取得処理を実行する（ステップＳ１−６）。これにより、自分の口座の残高状況を把握することができる。
（５）本実施形態では、ユーザ端末２０の制御部２１は、ＡＲ表示処理を実行する（ステップＳ１−７）。これにより、請求書画像と比較しながら、支払内容を確認することができる。更に、支払内容の確認画像を、請求書項目が表示されていない余白領域に出力する。表示領域を避けて、前記請求書項目の確認画像を出力することにより、請求書の項目内容との比較を容易にできる。

【0038】

また、上記実施形態は、以下の態様に変更してもよい。
・上記実施形態では、請求書の全体画像を撮影し、全体画像に含まれる各請求書項目の内容を読み取る。各請求書項目の内容を読み取る方法は、全体画像を用いる方法に限定されるものではない。例えば、請求書項目毎に、項目内容を読み取るようにしてもよい。

【0039】

図４を用いて、支払支援方法を説明する。
まず、ユーザ端末２０の制御部２１は、ステップＳ１−１と同様に、利用者認証処理を実行する（ステップＳ２−１）。

【0040】

次に、ユーザ端末２０の制御部２１は、請求書項目の撮影指示処理を実行する（ステップＳ２−２）。具体的には、制御部２１の支払管理部２１１は、タッチパネルディスプレイ２２に、支払指示に必要な請求書項目を順次、出力する。

【0041】

次に、ユーザ端末２０の制御部２１は、撮影画像の取得処理を実行する（ステップＳ２−３）。具体的には、ユーザは、請求書において、指示された請求書項目が記載された領域を、カメラ２３を用いて撮影する。この場合、制御部２１の支払管理部２１１は、請求書項目の項目内容を含む撮影画像を取得する。

【0042】

次に、ユーザ端末２０の制御部２１は、ＯＣＲ処理を実行する（ステップＳ２−４）。具体的には、制御部２１の文字認識部２１２は、撮影画像に含まれる文字画像領域を特定し、文字画像領域毎に文字認識を行なう。そして、文字認識部２１２は、請求書項目に関連付けて、文字認識した文字列をメモリに記憶する。

【0043】

次に、ユーザ端末２０の制御部２１は、すべての請求書項目を撮影済かどうかについての判定処理を実行する（ステップＳ２−５）。具体的には、制御部２１の支払管理部２１１は、すべての請求書項目についての文字列を記憶したかどうかを判定する。

【0044】

まだ、文字認識していない請求書項目があり、すべての項目を撮影済でないと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、ユーザ端末２０の制御部２１は、請求書項目の撮影指示処理（ステップＳ２−２）以降の処理を繰り返す。

【0045】

一方、すべての請求書項目を撮影済と判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、ユーザ端末２０の制御部２１は、ステップＳ１−４〜Ｓ１−６と同様に、口座確認処理（ステップＳ２−６）、取引履歴の取得処理（ステップＳ２−７）、残高情報の取得処理（ステップＳ２−８）を実行する。

【0046】

そして、ユーザ端末２０の制御部２１は、ステップＳ１−７〜Ｓ１−９と同様に、ＡＲ表示処理（ステップＳ２−９）、支払情報の登録処理（ステップＳ２−１０）、支払指示処理（ステップＳ２−１１）を実行する。

【0047】

この場合、銀行システム３０は、ステップＳ１−１０と同様に、送金処理を実行する（ステップＳ２−１２）。
これにより、請求書に含まれる項目を個別に文字認識し、的確に請求内容を特定することができる。

【0048】

・上記実施形態では、ユーザ端末２０の制御部２１は、ＡＲ表示処理を実行する（ステップＳ１−７）。この場合、請求書画像に重畳させて、送金先関連情報５１１、金額関連情報５１２を出力する。これに代えて、タッチパネルディスプレイ２２に出力されている領域に関連する情報のみを重畳して出力するようにしてもよい。この場合には、ユーザは、カメラ２３を用いて、請求書を部分的に撮影する。

【0049】

図５（ａ）を用いて、支払支援処理を説明する。
まず、ユーザ端末２０の制御部２１は、撮影画像の出力処理を実行する（ステップＳ３−１）。具体的には、制御部２１の表示制御部２１３は、カメラ２３で撮影された画像を、タッチパネルディスプレイ２２に出力する。

【0050】

次に、ユーザ端末２０の制御部２１は、表示領域に含まれる請求書項目の特定処理を実行する（ステップＳ３−２）。具体的には、制御部２１の文字認識部２１２は、タッチパネルディスプレイ２２に出力された領域において文字認識を行なう。次に、文字認識部２１２は、パターン認識により、文字認識された文字列の請求書項目を特定する。

【0051】

次に、ユーザ端末２０の制御部２１は、表示項目についての関連情報の取得処理を実行する（ステップＳ３−３）。具体的には、制御部２１の支払管理部２１１は、特定した請求書項目に関連した情報を特定する。例えば、請求書項目として振込先口座を初めて特定した場合には、ステップＳ１−４、ステップＳ１−５と同様に、口座確認処理、取引履歴の取得処理を実行する。また、請求書項目として支払金額を初めて特定した場合には、ステップＳ１−６と同様に、残高情報の取得処理を実行する。なお、この請求書において、既に口座確認処理、取引履歴の取得処理、残高情報の取得処理を行なっている場合には、メモリに仮記憶されている登録口座の確認結果や送金履歴、現在残高を呼び出す。

【0052】

次に、ユーザ端末２０の制御部２１は、表示項目についての関連情報の出力処理を実行する（ステップＳ３−４）。具体的には、制御部２１の表示制御部２１３は、タッチパネルディスプレイ２２に表示されている請求書項目の関連情報を余白領域に出力する。

【0053】

図５（ｂ）を用いて、請求書５００を撮影する場合を説明する。ここで、タッチパネルディスプレイ２２に振込先口座が表示されている場合には、表示制御部２１３は、送金先関連情報５５１を含めた確認画像を表示する。送金先関連情報５５１には、振込先の口座情報、振込先登録の有無、取引履歴に関する情報を含める。また、タッチパネルディスプレイ２２に請求金額が表示されている場合には、表示制御部２１３は、金額関連情報５５２を含めた確認画像を表示する。この金額関連情報５５２には、請求金額、現在残高、決済後残高に関する情報を含める。

【0054】

これにより、スマートフォンのようにディスプレイが小さく、表示できる範囲に制限があるユーザ端末２０を用いる場合、請求書を撮影している箇所の請求書項目を特定し、各種情報を含めた確認画像を出力することができる。

【0055】

・上記実施形態では、企業において請求書に対する支払を支援する。支援対象は企業に限定されるものではない。例えば、個人の支払を支援するようにしてもよい。
・上記実施形態では、タッチパネルディスプレイ２２に、送金先関連情報や金額関連情報を出力する。タッチパネルディスプレイ２２に出力する関連情報は、これらに限定されるものではない。例えば、振込先口座の名義人情報や評価情報を出力するようにしてもよい。評価情報においては、この口座を用いての取引量や、問題がある口座についての注意情報を出力する。この場合には、銀行システム３０に、振込先口座の評価情報を記憶しておく。そして、請求書から読み取った振込先口座や請求者情報に基づいて、振込先の評価情報をタッチパネルディスプレイ２２に出力する。

【符号の説明】

【0056】

１０…企業サーバ、１２…支払情報記憶部、２０…ユーザ端末、２１…制御部、２１１…支払管理部、２１２…文字認識部、２１３…表示制御部、２２…タッチパネルディスプレイ、２３…カメラ、２４…通信部、３０…銀行システム、３２…顧客情報記憶部、３３…口座情報記憶部、３５…ＡＰＩサーバ、５００…請求書。

【要約】

【課題】請求書に基づいて効率的かつ的確に支払を行なうための支払支援システム、支払支援方法及び支払支援プログラムを提供する。
【解決手段】ユーザ端末２０は、タッチパネルディスプレイ２２とカメラ２３と口座情報記憶部３３とに接続された制御部２１を備える。制御部２１が、カメラ２３により撮影された請求書の撮影画像を取得し、撮影画像に含まれる振込先口座を特定し、口座情報記憶部３３を用いて、振込先口座に関する情報を確認し、タッチパネルディスプレイ２２に表示された撮影画像上に、振込先口座の確認結果を含む確認画像を重畳させて表示する。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】