特開 2023-142686 テキスト情報認識装置および方法並びにプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023142686

(43)【公開日】2023-10-05

(54)【発明の名称】テキスト情報認識装置および方法並びにプログラム

(51)【国際特許分類】

   G06V 30/12 20220101AFI20230928BHJP

【ＦＩ】

G06V30/12 J

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2022049704

(22)【出願日】2022-03-25

(71)【出願人】

【識別番号】000250502

【氏名又は名称】理想科学工業株式会社

(74)【代理人】

【識別番号】100128451

【弁理士】

【氏名又は名称】安田 隆一

(72)【発明者】

【氏名】稲川 博敬

【テーマコード（参考）】

5B064

【Ｆターム（参考）】

5B064AA01

5B064AB03

5B064EA05

5B064EA11

(57)【要約】

【課題】テキスト情報の誤認識を即座に把握することができるテキスト情報認識装置および方法並びにプログラムを提供する。
【解決手段】テキスト情報を含む原稿を読み取った原稿データを受け付け、その原稿データに含まれるテキスト情報を認識するテキスト情報認識部２１と、認識したテキスト情報と、原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するテーブル生成部２２とを備える。
【選択図】図１

【特許請求の範囲】

【請求項1】

テキスト情報を含む原稿を読み取った原稿データを受け付け、該原稿データに含まれるテキスト情報を認識するテキスト情報認識部と、
前記認識したテキスト情報と、前記原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するテーブル生成部とを備えたテキスト情報認識装置。

【請求項2】

前記テーブルを表示させる表示制御部を備えた請求項１記載のテキスト情報認識装置。

【請求項3】

前記表示制御部が、前記読み取った原稿データと前記テーブルとを同時に表示させる請求項２記載のテキスト情報認識装置。

【請求項4】

前記表示制御部が、前記読み取った原稿データおよび前記テーブルのいずれか一方において特定のテキスト情報が指定された場合、前記特定のテキスト情報が指定されていない他方における前記特定のテキスト情報の部分を識別可能に表示させる請求項３記載のテキスト情報認識装置。

【請求項5】

前記表示制御部が、前記特定のテキスト情報が指定された場合、前記特定のテキスト情報の訂正画面を表示させる請求項４記載のテキスト情報認識装置。

【請求項6】

前記テーブル生成部が、前記テキスト情報の種類または前記原稿の種類を受け付け、該受け付けた前記テキスト情報の種類または前記原稿の種類に応じた前記正解テキスト情報に基づいて、前記テーブルを生成する請求項１から５いずれか１項記載のテキスト情報認識装置。

【請求項7】

テキスト情報を含む原稿を読み取った原稿データを受け付け、
該原稿データに含まれるテキスト情報を認識し、
該認識したテキスト情報と、前記原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するテキスト情報認識方法。

【請求項8】

テキスト情報を含む原稿を読み取った原稿データを受け付けるステップと、
該原稿データに含まれるテキスト情報を認識するステップと、
該認識したテキスト情報と、前記原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するステップとをコンピュータに実行させるテキスト情報認識プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、読み取られた原稿データに含まれるテキスト情報を認識するテキスト情報認識装置および方法並びにプログラムに関する。

【背景技術】

【0002】

従来、手書きのテキスト情報を含む原稿を光電的に読み取って原稿データを取得し、その原稿データに含まれるテキスト情報を自動的に認識することが行われている。

【0003】

たとえば百ます計算プリントやひっ算プリントなどに回答が手書きされた答案を読み取って原稿データを取得し、その原稿データに含まれる回答のテキスト情報を自動的に認識することによって、自動採点を行う試みが行われている。

【0004】

しかしながら、手書きのテキスト情報であるため、自動的に認識した場合、誤認識が生じる場合があり、その結果、誤採点となるため、最終的には人によって誤認識の確認を行うことが必要となる。

【0005】

たとえば特許文献１には、手書き文字の認識結果を目視で確認し、誤認識があった場合には、文字種を特定して再認識する方法が提案されている。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開平９－１０２０１２号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

しかしながら、特許文献１では、ユーザが認識結果を目視する際、誤認識された文字をそのまま表示するだけなので、どの文字が誤認識された文字であるのか即座に把握することが難しい場合がある。たとえば特許文献１では、「この商品は８３２０円です」という手書きのテキスト情報を認識した結果、「３」が「ろ」と誤認識され、「０」（ゼロ）が「ｏ」（オー）と誤認識された場合、「この商品は８ろ２ｏ円です」という誤認識された結果を表示するだけである。したがって、数字、平仮名、アルファベットが混在している中で、誤認識された文字を即座に把握することが難しい。

【0008】

本発明は、上記事情に鑑み、テキスト情報の誤認識を即座に把握することができるテキスト情報認識装置および方法並びにプログラムを提供することを目的とするものである。

【課題を解決するための手段】

【0009】

本発明のテキスト情報認識装置は、テキスト情報を含む原稿を読み取った原稿データを受け付け、その原稿データに含まれるテキスト情報を認識するテキスト情報認識部と、認識したテキスト情報と、原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するテーブル生成部とを備える。

【発明の効果】

【0010】

本発明のテキスト情報認識装置によれば、認識したテキスト情報と、原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するようにしたので、テキスト情報の誤認識を即座に把握することができる。

【図面の簡単な説明】

【0011】

【図1】本発明のテキスト情報認識装置の一実施形態を用いたテキスト情報認識システムの概略構成を示すブロック図

【図2】認識されたテキスト情報と、予め設定された正解テキスト情報とを対応づけたテーブルの一例を示す図

【図3】誤認識があった場合のテーブルの一例を示す図

【図4】原稿データとテーブルを同時に表示した画面の一例を示す図

【図5】訂正画面の一例を示す図

【図6】本発明のテキスト情報認識装置の一実施形態を用いたテキスト情報認識システムの処理の流れを説明するためのフローチャート

【発明を実施するための形態】

【0012】

以下、図面を参照して本発明のテキスト情報認識装置の一実施形態を用いたテキスト情報認識システムについて詳細に説明する。図１は、本実施形態のテキスト情報認識システム１の概略構成を示すブロック図である。

【0013】

本実施形態のテキスト情報認識システム１は、図１に示すように、原稿読取装置１０と、テキスト情報認識装置２０と、表示装置３０と、入力装置４０とを備える。

【0014】

原稿読取装置１０は、テキスト情報を含む原稿を光電的に読み取って原稿データを出力する。原稿としては、文字、数字および記号などのテキスト情報を含む原稿であれば如何なるものでもよいが、たとえば百ます計算プリントやひっ算プリントなどの数字が手書きされた原稿や、英語のテストプリントなど英語が手書きされた原稿や、＠を含むメールアドレスのリストが手書きされた原稿などがある。

【0015】

テキスト情報認識装置２０は、テキスト情報認識部２１と、テーブル生成部２２と、表示制御部２３とを備える。

【0016】

テキスト情報認識部２１は、原稿読取装置１０から出力された原稿データを受け付け、その原稿データに含まれるテキスト情報を認識する。テキスト情報とは、上述したように文字、数字および記号などであり、文字は言語に関わらず、全ての言語の文字を含む。テキスト情報認識部２１は、たとえばＯＣＲ（Optical Character Recognition）技術を用いてテキスト情報を認識するが、テキスト情報の認識方法としては、これに限らず公知な方法を用いることができる。たとえば畳み込みニューラルネットワーク (Convolutional Neural Network)を用いてテキスト情報を認識するようにしてもよい。

【0017】

テーブル生成部２２は、テキスト情報認識部２１によって認識されたテキスト情報と、予め設定された正解テキスト情報とを対応づけたテーブルを生成する。予め設定された正解テキスト情報とは、原稿読取装置１０によって読み取られる原稿に含まれうるテキスト情報である。たとえば原稿が上述した百ます計算プリントやひっ算プリントなどの場合には、正解テキスト情報は、その回答欄に手書きによって書き込まれる０～９までの数字である。また、原稿が、英語のテストプリントである場合には、正解テキスト情報は、ａ～ｚまでのアルファベットである。また、原稿が、メールアドレスのリストである場合には、正解テキスト情報は、メールアドレスに含まれる可能性のあるアルファベット、数字および記号などである。

【0018】

テーブル生成部２２は、たとえば数字の正解テキスト情報のみ、すなわち１種類の正解テキスト情報のみを記憶するようにしてもよいし、複数種類の正解テキスト情報を記憶するようにしてもよい。

【0019】

テーブル生成部２２が、複数種類の正解テキスト情報を記憶する場合には、たとえば文字、数字、または文字、数字および記号の組み合わせなどといった原稿のテキスト情報の種類を受け付け、その受け付けたテキスト情報の種類に応じて、予め設定された正解テキスト情報を選択するようにしてもよい。

【0020】

また、テキスト情報の種類を受け付けるのではなく、百ます計算プリント、ひっ算プリントおよび英語のテストプリントなどといった原稿の種類を受け付け、その原稿の種類に応じて、予め設定された正解テキスト情報を選択するようにしてもよい。なお、この場合、原稿の種類と正解テキスト情報とを対応づけた正解テキスト情報参照テーブルが予め設定されているものとする。

【0021】

上述したようにテキスト情報の種類または原稿の種類を受け付け、これに応じた正解テキスト情報を選択可能とすることによって、原稿のバリエーションを広げることができ、利便性を向上させることができる。

【0022】

次に、テーブル生成部２２によって生成されるテーブルについて説明する。図２は、テーブル生成部２２によって生成されるテーブルの一例を示す図である。図２に示すテーブルは、正解テキスト情報が０～９の場合のテーブルである。そして、図２に示すテーブルでは、一番上の行に、正解テキスト情報である０～９の数字が、インデックスとして配置されている。そして、０～９の各インデックスの下に、テキスト情報認識部２１によって認識されたテキスト情報が一列に配置される。具体的には、テーブル生成部２２は、テキスト情報認識部２１によって認識された各数字を、その認識情報に基づいて、各数字が属するインデックスの下に配置する。図２は、誤認識がなかった場合のテーブルの一例を示す図である。

【0023】

ここで、テキスト情報認識部２１は、上述したように手書きされた文字を認識した場合、その書き方によっては誤認識をする場合がある。すなわち、原稿データでは「２」であっても、テキスト情報認識部２１によって認識された結果、「１」と誤認識される場合がある。このように誤認識された場合、テーブル生成部２２は、原稿データの「２」の数字の認識情報として「１」を受け付けるので、「１」のインデックスの下に「２」の数字が配置されることになる。図３は、上述したような誤認識があった場合のテーブルの一例を示す図である。このようにテーブルを生成することによって、「１」のインデックスの下に配置された「２」の数字が誤認識された数字であると即座に把握することができる。

【0024】

なお、図２および図３のテーブルは正解テキスト情報が数字であり、０～９をインデックスとして生成したものであるが、正解テキスト情報が英語である場合には、ａ～ｚのアルファベットをインデックスとしたテーブルが生成される。

【0025】

表示制御部２３は、テーブル生成部２２によって生成されたテーブルを表示装置３０に表示させる。また、表示制御部２３は、テーブル生成部２２によって生成されたテーブルと原稿データを同時に表示装置３０に表示させる。図４は、テーブル生成部２２によって生成されたテーブルと原稿データとを同時に表示した画面の一例を示す図である。図４では、原稿データが百ます計算プリントを読み取った原稿データである場合の例を示している。このようにテーブルを表示させることによって、テーブルを目視することによって即座に誤認識を把握することができる。また、テーブルと原稿データとを同時に表示することによって、これらを比較することができ、原稿データにおける誤認識の箇所を把握することができる。なお、原稿データに含まれるテキスト情報を認識する際、回答欄に記載された数字のみを認識するように予め設定されているものとする。

【0026】

また、図４に示すように原稿データが百ます計算プリントを読み取った原稿データである場合、その採点結果も表示させるようにしてもよい。具体的には、原稿データに含まれる回答欄の数字の認識情報と、予め設定された回答の数字とを照合し、正解の回答については、その数字を丸印で囲むような表示を行ってもよい。

【0027】

また、表示制御部２３は、図４に示す原稿データおよびテーブルのいずれか一方において特定のテキスト情報が指定された場合、その特定のテキスト情報が指定されていない他方における特定のテキスト情報の部分を識別可能に表示させる。

【0028】

具体的には、たとえば図４に示すテーブルにおいて、インデックスが「１」の列の中に誤認識された「２」が含まれている場合、ユーザが入力装置４０を用いて、誤認識された「２」を指定する。このとき、表示制御部２３は、ユーザによって指定された「２」と、その指定された「２」に対応する原稿データおける「２」とを識別可能に表示させる。「２」を識別可能に表示させる方法としては、図４に示すように「２」を囲むような点線の四角の枠を表示させてもよいし、「２」の色をその他の数字の色とは異なるように表示させてもよいし、「２」を点滅表示させてもよく、「２」を識別可能な表示方法であれば、如何なる表示方法でもよい。

【0029】

このように、ユーザによって指定されたテーブルにおける「２」に対応する原稿データおける「２」を識別可能に表示させようにした場合には、誤認識した数字の対応関係を即座に把握することができる。

【0030】

また、上記説明では、テーブルにおいて特定のテキスト情報（「２」）が指定されたときに、原稿データにおいて対応するテキスト情報（「２」）を識別可能に表示する例について説明したが、逆に、原稿データにおいて特定のテキスト情報（「２」）が指定されたときに、テーブルにおいて対応するテキスト情報（「２」）を識別可能に表示するようにしてもよい。

【0031】

なお、表示制御部２３は、テキスト情報認識部２１による認識情報に基づいて、テーブルにおける特定のテキスト情報と原稿データにおける特定のテキスト情報との対応づけを行う。

【0032】

さらに、表示制御部２３は、図４に示す原稿データにおいて、誤認識された「２」が識別可能に表示されている状態において、その誤認識された「２」がクリックやタップなどによって指定された場合に、その誤認識された「２」の識別情報を訂正する訂正画面を表示させる。

【0033】

図５は、その訂正画面の一例を示す図である。図５に示す訂正画面においては、訂正前のテキスト情報の認識情報（「１」）が表示されるとともに、訂正後のテキスト情報の認識情報（「２」）を設定入力可能に表示される。図５に示すように、訂正画面には、０～９の数字を含むテンキーが表示され、ユーザが、テンキーの数字を選択することによって、訂正後の数字の表示欄に、その選択された数字が表示される。

【0034】

そして、図５に示す訂正画面の「終了」ボタンが選択された場合には、訂正後の数字の表示欄に表示された数字の認識情報が、訂正後の数字の認識情報として決定され、原稿データにおける誤認識された数字の認識情報が、訂正後の数字の認識情報に置き換えられる。このように訂正画面を表示させるようにした場合には、誤認識された数字の認識情報を即座に訂正することができる。

【0035】

また、誤認識された数字の訂正方法としては、上述したような訂正画面を用いた訂正に限らず、たとえば図４に示す画面のテーブルにおいて、「１」のインデックスの列に配置された誤認識されている「２」の数字を、「２」のインデックスの列にドラッグアンドドロップすることによって、誤認識されている「２」の数字の認識情報を「１」から「２」に訂正するようにしてもよい。

【0036】

なお、上述したように原稿データの数字の認識情報が訂正された後、その数字の認識情報と百ます計算の正解の数値とが照合されて、百ます計算の自動採点が行われる。

【0037】

テキスト情報認識装置２０は、コンピュータから構成されており、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）およびＲＡＭ（Random access memory）などの半導体メモリ、ハードディスクなどのストレージ、並びに通信Ｉ／Ｆを備えている。そして、テキスト情報認識装置２０の半導体メモリまたはストレージには、テキスト情報認識プログラムがインストールされており、このテキスト情報認識プログラムがＣＰＵによって実行されることにより、テキスト情報認識装置２０のテキスト情報認識部２１、テーブル生成部２２および表示制御部２３が機能する。

【0038】

なお、本実施形態においては、テキスト情報認識部２１、テーブル生成部２２および表示制御部２３の機能をテキスト情報認識プログラムにより実現するようにしたが、これに限らず、一部または全部の機能もしくは制御をＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field-Programmable Gate Array）、その他の電気回路などのハードウェアによって実現するようにしてもよい。

【0039】

表示装置３０は、たとえば液晶ディスプレイなどのディスプレイを有し、上述したように原稿データやテーブル生成部２２によって生成されたテーブルなどを表示する。

【0040】

入力装置４０は、たとえばキーボートやマウスなどのデバイスを有し、ユーザによる種々の設定入力を受け付ける。

【0041】

また、テキスト情報認識装置２０、表示装置３０および入力装置４０をタブレット端末によって実現するようにしてもよい。さらに、原稿読取装置１０も含めたテキスト情報認識システム１をカメラ機能付きのタブレット端末で実現し、カメラ機能によってテキスト情報を含む原稿を読み取るようにしてもよい。

【0042】

次に、本実施形態のテキスト情報認識システム１の処理の流れについて、図６に示すフローチャートを参照しながら説明する。

【0043】

まず、原稿読取装置１０において原稿が読み取られ、原稿データが取得される（Ｓ１０）。原稿読取装置１０からテキスト情報認識装置２０に原稿データが出力され、テキスト情報認識部２１は、入力された原稿データを受け付け、その原稿データに含まれるテキスト情報を認識する（Ｓ１２）。

【0044】

次いで、テーブル生成部２２は、テキスト情報認識部２１において認識されたテキスト情報に基づいて、上述したテーブルを生成する（Ｓ１４）。

【0045】

続いて、表示制御部２３は、テーブル生成部２２によって生成されたテーブルと原稿データとを表示装置３０において同時に表示させる（Ｓ１６）。

【0046】

そして、ユーザは、表示装置３０に表示されたテーブルを目視確認することによって、テキスト情報認識部２１において誤認識が生じていないか確認する（Ｓ１８）。具体的には、各インデックスの下に、そのインデックスとは異なるテキスト情報が含まれているか否かを確認することによって、誤認識が生じていないか確認する。

【0047】

そして、Ｓ１８において誤認識が生じていることが確認された場合には（Ｓ１８，ＹＥＳ）、ユーザは、その誤認識されたテキスト情報を指定することによって訂正画面を表示させ、その訂正画面上において正しい認識情報に訂正する（Ｓ２０）。訂正後の認識情報が、原稿データのテキスト情報に反映される（Ｓ２２）。誤認識されたテキスト情報が存在しなくなるまで、Ｓ１８～Ｓ２２までの処理が繰り返して行われる。

【0048】

そして、Ｓ１８において誤認識されたテキスト情報が無いことが確認された場合には（Ｓ１８，ＮＯ）、処理を終了する。

【0049】

なお、本発明は、上記実施形態に限定されるものではなく、実施段階でその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。たとえば実施形態に示される全構成要素を適宜組み合わせても良い。このような、発明の趣旨を逸脱しない範囲内において種々の変形や応用が可能であることはもちろんである。

【0050】

本発明のテキスト情報認識装置に関し、さらに以下の付記を開示する。
（付記）

【0051】

本発明のテキスト情報認識装置においては、上記テーブルを表示させる表示制御部を備えることができる。

【0052】

また、本発明のテキスト情報認識装置において、表示制御部は、読み取った原稿データとテーブルとを同時に表示させることができる。

【0053】

また、本発明のテキスト情報認識装置において、表示制御部は、読み取った原稿データおよびテーブルのいずれか一方において特定のテキスト情報が指定された場合、特定のテキスト情報が指定されていない他方における特定のテキスト情報の部分を識別可能に表示させることができる。

【0054】

また、本発明のテキスト情報認識装置において、表示制御部は、特定のテキスト情報が指定された場合、特定のテキスト情報の訂正画面を表示させることができる。

【0055】

また、本発明のテキスト情報認識装置において、テーブル生成部は、テキスト情報の種類または原稿の種類を受け付け、その受け付けたテキスト情報の種類または原稿の種類に応じた正解テキスト情報に基づいて、上記テーブルを生成することができる。

【0056】

本発明のテキスト情報認識方法は、テキスト情報を含む原稿を読み取った原稿データを受け付け、その原稿データに含まれるテキスト情報を認識し、その認識したテキスト情報と、原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成する。

【0057】

本発明のテキスト情報認識プログラムは、テキスト情報を含む原稿を読み取った原稿データを受け付けるステップと、その原稿データに含まれるテキスト情報を認識するステップと、その認識したテキスト情報と、原稿に含まれうる予め設定された正解テキスト情報とを対応づけたテーブルを生成するステップとをコンピュータに実行させる。

【符号の説明】

【0058】

１ テキスト情報認識システム
１０ 原稿読取装置
２０ テキスト情報認識装置
２１ テキスト情報認識部
２２ テーブル生成部
２３ 表示制御部
３０ 表示装置
４０ 入力装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】