知財求人 - 知財ポータルサイト「IP Force」
▶ 株式会社東芝の特許一覧 ▶ 東芝電機サービス株式会社の特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024179951
(43)【公開日】2024-12-26
(54)【発明の名称】コーディング装置およびコーディング処理プログラム
(51)【国際特許分類】
G06V 30/24 20220101AFI20241219BHJP
G06V 30/424 20220101ALI20241219BHJP
【ＦＩ】
G06V30/24 620D
G06V30/424
【審査請求】未請求
【請求項の数】9
【出願形態】ＯＬ
(21)【出願番号】P 2023099301
(22)【出願日】2023-06-16
(71)【出願人】
【識別番号】000003078
【氏名又は名称】株式会社東芝
(71)【出願人】
【識別番号】598076591
【氏名又は名称】東芝インフラシステムズ株式会社
(74)【代理人】
【識別番号】110003708
【氏名又は名称】弁理士法人鈴榮特許綜合事務所
(72)【発明者】
【氏名】石倉 雅也
(72)【発明者】
【氏名】堺 裕之
(72)【発明者】
【氏名】朝日 一隆
【テーマコード（参考）】
5B064
【Ｆターム（参考）】
5B064AA04
5B064EA07
5B064EA11
5B064EA27
5B064EA35
5B064EA36
5B064EA37
5B064EA39
(57)【要約】
【課題】文字列の認識率を向上できるコーディング装置およびコーディング処理プログラムを提供する。
【解決手段】実施形態によれば、コーディング装置は、通信部とプロセッサとを有する。通信部は、物品を撮影した複数の撮影画像から選出されたオリジナル画像と複数の撮影画像のサムネイル画像とを取得する。プロセッサは、オリジナル画像に対する宛先の文字列の認識に失敗した場合、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う。
【選択図】 図３
【解決手段】実施形態によれば、コーディング装置は、通信部とプロセッサとを有する。通信部は、物品を撮影した複数の撮影画像から選出されたオリジナル画像と複数の撮影画像のサムネイル画像とを取得する。プロセッサは、オリジナル画像に対する宛先の文字列の認識に失敗した場合、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う。
【選択図】 図３
【特許請求の範囲】
【請求項1】
物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを取得する通信部と、
前記オリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、
前記宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う、
プロセッサと、
を有するコーディング装置。
前記オリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、
前記宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う、
プロセッサと、
を有するコーディング装置。
【請求項2】
前記通信部は、前記物品を処理する物品処理システムの制御装置が宛先の文字列の認識に失敗した撮影画像をオリジナル画像として受信し、
前記プロセッサは、前記制御装置による宛先の文字列の認識とは異なる第２のアルゴリズムに従った文字認識処理によってオリジナル画像に対する宛先の文字列を認識する、
請求項１に記載のコーディング装置。
前記プロセッサは、前記制御装置による宛先の文字列の認識とは異なる第２のアルゴリズムに従った文字認識処理によってオリジナル画像に対する宛先の文字列を認識する、
請求項１に記載のコーディング装置。
【請求項3】
操作部に接続する操作インターフェースと、
表示部に接続する表示インターフェースと、を備え、
前記プロセッサは、オリジナル画像に対する宛先の文字列を認識に失敗した場合、前記オリジナル画像と前記複数の撮影画像のサムネイル画像とを前記表示部に表示し、前記操作部に入力された宛先情報を前記制御装置へ送信する、
請求項２に記載のコーディング装置。
表示部に接続する表示インターフェースと、を備え、
前記プロセッサは、オリジナル画像に対する宛先の文字列を認識に失敗した場合、前記オリジナル画像と前記複数の撮影画像のサムネイル画像とを前記表示部に表示し、前記操作部に入力された宛先情報を前記制御装置へ送信する、
請求項２に記載のコーディング装置。
【請求項4】
他のコーディング装置が表示する表示画面の画像データを取得する画像インターフェースと、
前記他のコーディング装置に入力する操作信号を生成するエミュレータに接続するエミュレータインターフェースと、
前記画像インターフェースにより物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを表示する前記他のコーディング装置の表示画面の画像データを取得し、
前記表示画面におけるオリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、
前記宛先領域が検出されたサムネイル画像の撮影画像を前記オリジナル画像に入れ替える入替操作を前記エミュレータインターフェースによりエミュレータに送信した後、前記他のコーディング装置が入替操作に応じてオリジナル画像となる撮影画像を入れ替えた表示画面の画像データを前記画像インターフェースにより取得し、
前記表示画面における入れ替え後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する、
プロセッサと、
を有するコーディング装置。
前記他のコーディング装置に入力する操作信号を生成するエミュレータに接続するエミュレータインターフェースと、
前記画像インターフェースにより物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを表示する前記他のコーディング装置の表示画面の画像データを取得し、
前記表示画面におけるオリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、
前記宛先領域が検出されたサムネイル画像の撮影画像を前記オリジナル画像に入れ替える入替操作を前記エミュレータインターフェースによりエミュレータに送信した後、前記他のコーディング装置が入替操作に応じてオリジナル画像となる撮影画像を入れ替えた表示画面の画像データを前記画像インターフェースにより取得し、
前記表示画面における入れ替え後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する、
プロセッサと、
を有するコーディング装置。
【請求項5】
前記プロセッサは、
前記表示画面における入れ替え後のオリジナル画像における宛先領域の状態に応じて前記オリジナル画像を変形する変形操作を前記エミュレータインターフェースによりエミュレータに送信し、
前記他のコーディング装置が前記変形操作に応じて変形したオリジナル画像を表示する表示画面の画像データを前記画像インターフェースにより取得し、
前記表示画面における変形後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する、
請求項４に記載のコーディング装置。
前記表示画面における入れ替え後のオリジナル画像における宛先領域の状態に応じて前記オリジナル画像を変形する変形操作を前記エミュレータインターフェースによりエミュレータに送信し、
前記他のコーディング装置が前記変形操作に応じて変形したオリジナル画像を表示する表示画面の画像データを前記画像インターフェースにより取得し、
前記表示画面における変形後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する、
請求項４に記載のコーディング装置。
【請求項6】
前記画像インターフェースは、前記物品を処理する物品処理システムの制御装置に接続する他のコーディング装置の表示インターフェースに接続され、
前記エミュレータインターフェースは、前記他のコーディング装置の操作インターフェースにエミュレータを介して接続され、
前記プロセッサは、前記制御装置による宛先の文字列の認識とは異なる第２のアルゴリズムに従った文字認識処理によってオリジナル画像に対する宛先の文字列を認識する、
請求項４又は５の何れか１項に記載のコーディング装置。
前記エミュレータインターフェースは、前記他のコーディング装置の操作インターフェースにエミュレータを介して接続され、
前記プロセッサは、前記制御装置による宛先の文字列の認識とは異なる第２のアルゴリズムに従った文字認識処理によってオリジナル画像に対する宛先の文字列を認識する、
請求項４又は５の何れか１項に記載のコーディング装置。
【請求項7】
操作部に接続する操作インターフェースと、
表示部に接続する表示インターフェースと、を備え、
前記プロセッサは、前記画像インターフェースにより取得する前記他のコーディング装置が生成する表示画面に対する宛先の文字列の認識に失敗した場合、前記表示画面を前記表示部に表示し、前記操作部に入力された宛先情報を前記エミュレータインターフェースによりエミュレータに送信する、
請求項６に記載のコーディング装置。
表示部に接続する表示インターフェースと、を備え、
前記プロセッサは、前記画像インターフェースにより取得する前記他のコーディング装置が生成する表示画面に対する宛先の文字列の認識に失敗した場合、前記表示画面を前記表示部に表示し、前記操作部に入力された宛先情報を前記エミュレータインターフェースによりエミュレータに送信する、
請求項６に記載のコーディング装置。
【請求項8】
コンピュータに、
物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを取得する機能と、
前記オリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出する機能と、
前記宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う機能と、
を実現させるコーディング処理プログラム。
物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを取得する機能と、
前記オリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出する機能と、
前記宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う機能と、
を実現させるコーディング処理プログラム。
【請求項9】
他のコーディング装置が表示する表示画面の画像データを取得する画像インターフェースと、前記他のコーディング装置に入力する操作信号を生成するエミュレータに接続するエミュレータインターフェースとを備えるコンピュータに、
前記画像インターフェースにより物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを表示する前記他のコーディング装置の表示画面の画像データを取得する機能と、
前記表示画面におけるオリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出する機能と、
前記宛先領域が検出されたサムネイル画像の撮影画像を前記オリジナル画像に入れ替える入替操作を前記エミュレータインターフェースによりエミュレータに送信した後、前記他のコーディング装置が入替操作に応じてオリジナル画像となる撮影画像を入れ替えた表示画面の画像データを前記画像インターフェースにより取得する機能と、
前記表示画面における入れ替え後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する機能と、
を実現させるコーディング処理プログラム。
前記画像インターフェースにより物品を撮影した複数の撮影画像から選出されたオリジナル画像と前記複数の撮影画像のサムネイル画像とを表示する前記他のコーディング装置の表示画面の画像データを取得する機能と、
前記表示画面におけるオリジナル画像に対する宛先の文字列の認識に失敗した場合、前記オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出する機能と、
前記宛先領域が検出されたサムネイル画像の撮影画像を前記オリジナル画像に入れ替える入替操作を前記エミュレータインターフェースによりエミュレータに送信した後、前記他のコーディング装置が入替操作に応じてオリジナル画像となる撮影画像を入れ替えた表示画面の画像データを前記画像インターフェースにより取得する機能と、
前記表示画面における入れ替え後のオリジナル画像に対する宛先の文字列を認識する文字認識を実行する機能と、
を実現させるコーディング処理プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明の実施形態は、コーディング装置およびコーディング処理プログラムに関する。
【背景技術】
【0002】
従来、物品処理システムで宛先の文字列が認識できなかった画像に対して、宛先を特定するためのビデオコーディングディスク（ＶＣＤ）と呼ばれるコーディング装置がある。また、近年では、処理対象とする物品を複数の方向から撮影し、複数の撮影画像から宛先の文字列が含まれる撮影画像（オリジナル画像）を検出して文字認識を行う物品処理システムがある。このような物品処理システムは、宛先の文字列が認識できなかった場合、宛先の文字列の認識対象としたオリジナル画像と共に、オリジナル画像以外の撮影画像をサムネイル画像としてＶＣＤへ供給する。
【0003】
従来のＶＣＤは、物品処理システムからのオリジナル画像に対して物品処理システムとは異なるアルゴリズムで文字認識を行うことで宛先の文字列の認識を行い、認識に失敗した場合にオペレータに宛先の入力を行わせる。しかしながら、物品処理システムが検出したオリジナル画像に宛先がなく、サムネイル画像とした撮影画像に宛先の記載があることが有り得る。従来のＶＣＤでは、オペレータが宛先の文字列があるサムネイル画像を発見すると、オペレータが宛先のあるサムネイル画像を指定できる。この場合、ＶＣＤは、指定されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて表示させた状態でオペレータによる宛先入力を受け付けるようになっている。すなわち、従来のＶＣＤは、オリジナル画像に宛先がなく、サムネイル画像に宛先がある場合にオペレータの作業負荷が大きくなるという問題がある。
【0004】
また、近年では、既存のＶＣＤに第２のコーディング装置を接続し、第２のコーディング装置での文字認識又はオペレータによる打鍵入力で宛先の文字列を特定するシステムも提案されている。第２のコーディング装置は、既存のＶＣＤが表示部に表示する画像をキャプチャし、キャプチャした画像に対して文字認識を行うため、オリジナル画像に宛先がなく、サムネイル画像に宛先がある場合にオペレータの作業負荷が大きくなるという問題がある。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開２０２１－１４０６３２号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
上記の課題を解決するために、文字列の認識率を向上できるコーディング装置およびコーディング処理プログラムを提供する。
【課題を解決するための手段】
【0007】
実施形態によれば、コーディング装置は、通信部とプロセッサとを有する。通信部は、物品を撮影した複数の撮影画像から選出されたオリジナル画像と複数の撮影画像のサムネイル画像とを取得する。プロセッサは、オリジナル画像に対する宛先の文字列の認識に失敗した場合、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出し、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う。
【図面の簡単な説明】
【0008】
【発明を実施するための形態】
【0009】
以下、各実施形態について、図面を参照して説明する。
（第１実施形態）
まず、第１実施形態について説明する。
図１は、第１実施形態に係るコーディング装置を含む認識システム１０１の構成例を示す図である。
第１実施形態に係る認識システム１０１は、物品処理システム１およびＶＣＳ（ビデオコーディングシステム）２を有する。物品処理システム１は、立体である物品に何れかの箇所に表示された宛先情報に基づいて物品を処理するシステムである。ＶＣＳ２は、物品処理システム１からの画像に含まれる宛先情報を特定し、特定した宛先情報を物品処理システム１へ返すシステムである。
（第１実施形態）
まず、第１実施形態について説明する。
図１は、第１実施形態に係るコーディング装置を含む認識システム１０１の構成例を示す図である。
第１実施形態に係る認識システム１０１は、物品処理システム１およびＶＣＳ（ビデオコーディングシステム）２を有する。物品処理システム１は、立体である物品に何れかの箇所に表示された宛先情報に基づいて物品を処理するシステムである。ＶＣＳ２は、物品処理システム１からの画像に含まれる宛先情報を特定し、特定した宛先情報を物品処理システム１へ返すシステムである。
【0010】
図１に示す構成例において、物品処理システム１は、ソータ６、カメラ７および制御装置８を有する。制御装置８は、ソータ６およびカメラ７に接続され、ＶＣＳ２と通信可能に接続される。制御装置８は、宛先情報となる文字列を認識する文字認識処理を行う機能を有する。制御装置８は、カメラ７が撮影した撮影画像に対して文字認識おける宛先情報としての認識装置を
ソータ６は、物品を処理する処理装置の一例である。ソータ６は、制御装置８からの制御信号に基づいて処理対象とする物品を仕分先に区分する処理を行う。例えば、ソータ６は、制御装置８による制御信号に基づいて所定位置に供給された物品を当該物品に記載された宛先情報に応じた仕分先に仕分けする。ソータ６は、制御装置８が指定する仕分け先に各物品を仕分けする。例えば、ソータ６は、物品を特定するＩＤと当該物品の仕分先を示す情報（例えば、シュートの番号など）とを示す仕分情報を制御装置８から取得する。ソータ６は、制御装置８から取得する仕分情報に基づいて物品を仕分け処理する。
ソータ６は、物品を処理する処理装置の一例である。ソータ６は、制御装置８からの制御信号に基づいて処理対象とする物品を仕分先に区分する処理を行う。例えば、ソータ６は、制御装置８による制御信号に基づいて所定位置に供給された物品を当該物品に記載された宛先情報に応じた仕分先に仕分けする。ソータ６は、制御装置８が指定する仕分け先に各物品を仕分けする。例えば、ソータ６は、物品を特定するＩＤと当該物品の仕分先を示す情報（例えば、シュートの番号など）とを示す仕分情報を制御装置８から取得する。ソータ６は、制御装置８から取得する仕分情報に基づいて物品を仕分け処理する。
【0011】
カメラ７は、ソータ６が処理対象とする物品を撮影する。本実施形態において、処理対象とする物品が立体であるものとし、物品を形成する立体の何れか１面に宛先情報の文字列が記載（表示）されているものとする。カメラ７は、立体である物品を複数の方向から撮影するものとする。カメラ７は、ソータ６が処理対象とする物品を複数の方向から物品を撮影した複数の撮影画像を取得する設置される。カメラ７は、複数のカメラで複数方向からの撮影画像を取得するようにしても良いし、１つのカメラを移動させて複数方向から撮影した複数の撮影画像を取得するようにしても良い。カメラ７は、撮影した複数の撮影画像を制御装置８に送信する。
【0012】
なお、本実施形態において、処理対象とする物品としては、宛先情報が所定フォーマットの帳票に記載されて物品の表面に貼り付けられたものを想定して説明する。ただし、処理対象とする物品は、宛先情報としての文字が表面に何れかの箇所に表示されるものであれば良く、宛先情報が記載された任意の形式の帳票が貼付けられたものであっても良いし、宛先表示が物品の表面に記載又は印刷されたものであっても良い。
【0013】
制御装置８は、物品処理システム１を制御する。制御装置８は、カメラ７が処理対象の物品を複数の方向から撮影した複数の撮影画像を取得する。制御装置８は、複数の撮影画像から宛先情報の文字列を含む撮影画像をオリジナル画像として検出する。制御装置８は、複数の撮影画像から検出したオリジナル画像に対して宛先情報の文字列を認識する文字認識処理を行う。
【0014】
制御装置８は、宛先情報の認識に失敗した場合、当該物品のオリジナル画像とオリジナル画像以外の撮影画像のサムネイル画像とをＶＣＳ２へ送信し、ＶＣＳ２から当該物品の宛先情報を取得する。制御装置８は、認識した宛先情報又はＶＣＳ２から取得した宛先情報に基づいてソータ６における当該物品の仕分先を設定する。例えば、制御装置８は、物品を識別するＩＤと当該物品の仕分先を示す情報とを含む仕分情報をソータ６に送信する。これにより、制御装置８は、宛先情報に基づいて物品を処理することを制御する。
【0015】
また、ＶＣＳ２は、図１に示す構成例において、複数のＶＣＤ２０（２０ａ、２０ｂ、２０ｃ、２０ｄ）を有する。各ＶＣＤ２０（２０ａ、２０ｂ、２０ｃ、２０ｄ）は、それぞれ操作部３０（３０ａ、３０ｂ、３０ｃ、３０ｄ）および表示部４０（４０ａ、４０ｂ、４０ｃ、４０ｄ）が接続される。操作部３０は、オペレータが宛先情報などを入力する操作キーを操作装置である。表示部４０は、操作部３０による宛先情報の入力対象となる物品の画像を表示する表示装置である。
【0016】
各ＶＣＤ２０は、物品処理システム１から供給される撮影画像に対して文字認識処理（ＯＣＲ処理）を行う。本実施形態において、各ＶＣＤ２０は、物品処理システム１の制御装置８から物品を撮影した複数の撮影画像の１つであるオリジナル画像とオリジナル画像以外の撮影画像のサムネイル画像とを取得する。オリジナル画像は、制御装置８が宛先の文字列が含まれると判定した画像（制御装置８が文字認識の対象とした画像）であり、サムネイル画像は、オリジナル画像以外の撮影画像である。
【0017】
ＶＣＤ２０は、制御装置８から取得したオリジナル画像に対して制御装置８とは別のアルゴリズムによる文字認識（第２の文字認識）を実行する。ＶＣＤ２０は、オリジナル画像に対する第２の文字認識で宛先の文字列が認識できた場合、第２の文字認識の認識結果である宛先情報を制御装置８へ送信する。
【0018】
また、ＶＣＤ２０は、第２の文字認識による宛先の文字列の認識に失敗した場合、サムネイル画像に対して宛先の文字列の領域（宛先領域）を検出する処理を行う。ＶＣＤ２０は、サムネイル画像から宛先領域が検出できた場合、宛先領域が検出されたサムネイル画像をオリジナル画像に入れ替える処理を行い、宛先領域が検出された画像をオリジナル画像として文字認識を実行する。ＶＣＤ２０は、入れ替えたオリジナル画像に対する文字認識で宛先の文字列が認識できた場合、文字認識の認識結果である宛先情報を制御装置８へ送信する。
【0019】
ＶＣＤ２０は、オリジナル画像を入れ替えても宛先の文字列が認識できなかった場合、サムネイル画像から宛先領域が検出できなかった場合、表示部４０に制御装置８から取得した画像を表示し、オペレータによる操作部３０を用いた宛先情報のキー入力を実行させる。ＶＣＤ２０は、オペレータが操作部３０を用いて宛先情報をキー入力した場合、オペレータにより入力された宛先情報を制御装置８へ送信する。
【0020】
次に、第１実施形態に係る認識システム１０１における物品処理システム１の制御装置８における制御系の構成について説明する。
図２は、第１実施形態に係る認識システム１０１における物品処理システム１の制御装置８における制御系の構成例を示すブロック図である。
図２に示すように、制御装置８は、プロセッサ１１、ＲＯＭ１２、ＲＡＭ１３、ＮＶＭ１４、カメラインターフェース（Ｉ／Ｆ）１５、通信部１６、操作部１７及び表示部１８、ソータインターフェース（Ｉ／Ｆ）１９などを備える。
図２は、第１実施形態に係る認識システム１０１における物品処理システム１の制御装置８における制御系の構成例を示すブロック図である。
図２に示すように、制御装置８は、プロセッサ１１、ＲＯＭ１２、ＲＡＭ１３、ＮＶＭ１４、カメラインターフェース（Ｉ／Ｆ）１５、通信部１６、操作部１７及び表示部１８、ソータインターフェース（Ｉ／Ｆ）１９などを備える。
【0021】
プロセッサ１１は、データバスおよびインターフェースなどを介して、ＲＯＭ１２、ＲＡＭ１３、ＮＶＭ１４、カメラインターフェース１５、通信部１６、操作部１７、表示部１８、ソータインターフェース１９と通信可能に接続する。なお、制御装置８は、図２が示すような構成の他に必要に応じた構成をさらに具備したり、制御装置８から特定の構成が除外されたりしてもよい。
【0022】
プロセッサ１１は、制御装置８全体の動作を制御する機能を有する。プロセッサ１１は、内部キャッシュ及び各種のインターフェースなどを備えてもよい。プロセッサ１１は、内部メモリ、ＲＯＭ１２又はＮＶＭ１４が予め記憶するプログラムを実行することにより種々の処理を実現する。
なお、プロセッサ１１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ１１は、ハードウエア回路により実行される機能を制御する。
なお、プロセッサ１１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ１１は、ハードウエア回路により実行される機能を制御する。
【0023】
ＲＯＭ１２は、制御プログラム及び制御データなどが予め記憶された不揮発性のメモリである。ＲＯＭ１２に記憶される制御プログラム及び制御データは、制御装置８の仕様に応じて予め組み込まれる。
【0024】
ＲＡＭ１３は、揮発性のメモリである。ＲＡＭ１３は、プロセッサ１１の処理中のデータなどを一時的に格納する。ＲＡＭ１３は、プロセッサ１１からの命令に基づき種々のアプリケーションプログラムを格納する。また、ＲＡＭ１３は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。
【0025】
ＮＶＭ１４は、データの書き込み及び書き換えが可能な不揮発性のメモリである。例えば、ＮＶＭ１４は、例えば、ＨＤＤ、ＳＳＤ又はフラッシュメモリなどから構成される。ＮＶＭ１４は、制御装置８の運用用途に応じて制御プログラム、アプリケーション及び種々のデータなどを格納する。
【0026】
カメラインターフェース１５は、カメラ７とデータを送受信するためのインターフェースである。カメラインターフェース１５は、有線又は無線でカメラ７と通信接続するインターフェースである。カメラインターフェース１５は、カメラ７からカメラ７が撮影した撮影画像を受信する。カメラインターフェース１５は、受信した撮影画像をプロセッサ１１に送信する。また、カメラインターフェース１５は、カメラ７に電力を供給するものであっても良い。
【0027】
本実施形態において、カメラ７は、ソータ６が処理対象とする物品を複数の方向から撮影するものである。このため、カメラ７は、複数の方向から所定位置の物品を撮影する複数のカメラ機器（撮像部）で構成されるものであっても良い。カメラ７が複数のカメラ機器である場合、カメラインターフェース１５は、カメラ７としての複数のカメラ機器に通信接続するためのインターフェースを含むものとする。
【0028】
通信部１６は、ＶＣＳ２における各ＶＣＤ２０とデータを送受信するためのインターフェースである。例えば、通信部１６は、ＬＡＮ（Local Area Network）接続をサポートするものである。また、通信部１６は、ＵＳＢ（Universal Serial Bus）接続をサポートするものであっても良い。なお、通信部１６は、制御装置８とデータを送受信するためのインターフェースを備えるものであれば良く、複数のＶＣＤ２０に接続するためのルータやスイッチングハブなどの通信制御機器に接続するインターフェースであっても良い。
【0029】
操作部１７は、オペレータから種々の操作の入力を受け付ける。操作部１７は、入力された操作を示す信号をプロセッサ１１へ送信する。操作部１７は、キーボード、ボタン又はタッチパネルなどから構成される。
【0030】
表示部１８は、プロセッサ１１からの制御に基づいて情報を表示する。例えば、表示部１８は、液晶モニタから構成される。操作部１７がタッチパネルから構成される場合、表示部１８は、操作部１７と一体的に形成された液晶モニタから構成される。
【0031】
ソータインターフェース１９は、ソータ６とデータを送受信するためのインターフェースである。例えば、ソータインターフェース１９は、有線又は無線でソータ６と通信接続する。ソータインターフェース１９は、ソータ６が処理対象とする物品に対する宛先情報に基づく仕分情報をソータ６へ供給する。また、ソータインターフェース１９は、ソータ６における処理状況などを示す情報をソータ６から受信するようにしても良い。なお、ソータインターフェース１９は、通信部１６に含まれる構成としても良い。
【0032】
次に、第１実施形態に係るコーディング装置としてのＶＣＤ２におけるＶＣＤ２０の構成について説明する。
図３は、第１実施形態に係るコーディング装置としてのＶＣＤ２０における制御系の構成例を示すブロック図である。以下、ＶＣＤ２０ａ乃至２０ｄは、同様の構成で実現できるため、ＶＣＤ２０として説明するものとする。
図３は、第１実施形態に係るコーディング装置としてのＶＣＤ２０における制御系の構成例を示すブロック図である。以下、ＶＣＤ２０ａ乃至２０ｄは、同様の構成で実現できるため、ＶＣＤ２０として説明するものとする。
【0033】
図３に示すように、ＶＣＤ２０は、プロセッサ２１、ＲＯＭ２２、ＲＡＭ２３、ＮＶＭ２４、通信部２５、操作インターフェース（Ｉ／Ｆ）２６及び表示インターフェース（Ｉ／Ｆ）２７などを備える。プロセッサ２１は、ＲＯＭ２２、ＲＡＭ２３、ＮＶＭ２４、通信部２５、操作インターフェース２６及び表示インターフェース２７にデータバスなどを介して接続する。なお、ＶＣＤ２０は、図３が示すような構成の他に必要に応じた構成を具備したり、図３が示すような構成から特定の構成が除外されたりしてもよい。
【0034】
プロセッサ２１は、ＶＣＤ２０全体の動作を制御する。また、プロセッサ２１は、プログラムを実行する演算子以外に、内部キャッシュ及び各種のインターフェースなどを備えても良い。プロセッサ２１は、内部メモリ、ＲＯＭ２２又はＮＶＭ２４が記憶するプログラムを実行することにより種々の処理を実現する。
なお、プロセッサ２１がプログラムを実行することにより実現する各種の機能のうち一部の機能は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ２１は、ハードウエア回路により実行される機能を制御する。
なお、プロセッサ２１がプログラムを実行することにより実現する各種の機能のうち一部の機能は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ２１は、ハードウエア回路により実行される機能を制御する。
【0035】
ＲＯＭ２２は、制御プログラム及び制御データなどが記憶された不揮発性のメモリである。ＲＯＭ２２に記憶される制御プログラム及び制御データは、ＶＣＤ２０の仕様に応じて組み込まれる。
【0036】
ＲＡＭ２３は、揮発性のメモリである。ＲＡＭ２３は、プロセッサ２１の処理中のデータなどを一時的に格納する。ＲＡＭ２３は、プロセッサ２１からの命令に基づき種々のアプリケーションプログラムを格納する。また、ＲＡＭ２３は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。また、ＲＡＭ２３は、送受信用のデータを一時記憶するバッファメモリとして使用しても良い。
【0037】
ＮＶＭ２４は、データの書き込み及び書き換えが可能な不揮発性のメモリである。例えば、ＮＶＭ２４は、例えば、ＨＤＤ、ＳＳＤ又はフラッシュメモリなどから構成される。ＮＶＭ２４は、ＶＣＤ２０の運用用途に応じて制御プログラム、アプリケーション及び種々のデータなどを格納する。
【0038】
通信部２５は、制御装置８などとデータを送受信するための通信インターフェースである。例えば、通信部２５は、有線又は無線の通信によるＬＡＮ（Local Area Network）接続をサポートするものである。また、通信部２５は、ＵＳＢ（Universal Serial Bus）接続をサポートするものであっても良い。
【0039】
操作インターフェース２６は、操作部３０に接続するためのインターフェースである。例えば、操作インターフェース２６は、オペレータが操作するキーボード又はマウスなどで構成される操作部３０に入力される操作を示す操作信号を受信する。また、操作インターフェース２６は、操作部３０から受信した操作信号をプロセッサ２１に供給する。
【0040】
表示インターフェース２７は、オペレータが視認する表示画面を表示する表示部４０に接続するためのインターフェースである。表示インターフェース２７は、プロセッサ２１による制御に応じて表示部４０に表示させる表示画面を示す画像データを出力するインターフェースである。
【0041】
次に、第１実施形態に係る認識システム１０１における物品処理システム１の制御装置８の動作について説明する。
制御装置８は、プロセッサ１１がＲＯＭ１２又はＮＶＭ１４などに格納されるプログラムを実行することにより、物品処理システム１としての動作を制御するための種々の処理を行う。本実施形態において、制御装置８のプロセッサ１１は、カメラ７が撮影する撮影画像における宛先の文字列を認識する文字認識機能を有するものとする。
制御装置８は、プロセッサ１１がＲＯＭ１２又はＮＶＭ１４などに格納されるプログラムを実行することにより、物品処理システム１としての動作を制御するための種々の処理を行う。本実施形態において、制御装置８のプロセッサ１１は、カメラ７が撮影する撮影画像における宛先の文字列を認識する文字認識機能を有するものとする。
【0042】
物品処理システム１が１つの物品を処理する場合、制御装置８のプロセッサ１１は、カメラ７が処理対象とする物品を複数の方向から撮影した複数の撮影画像を取得する。ここで、カメラ７は、所定の撮影位置（撮影領域）にある物品を複数の方向から撮影する。
【0043】
例えば、カメラ７は、所定の撮影位置にある物品を複数の方向から撮影できるように複数の位置に設置した複数のカメラ機器で構成されるものとする。また、カメラ７は、所定の撮影領域にある物品に対する相対的な位置を移動しながら複数の方向から物品を撮影する１又は複数のカメラ機器で構成されるものであっても良い。本第１実施形態に係る制御装置８のプロセッサ１１は、カメラインターフェース１５によりカメラ７が処理対象とする１つの物品を複数方向から撮影した複数の撮影画像を取得する。
【0044】
プロセッサ１１は、カメラ７が撮影した複数の撮影画像を取得すると、所定のアルゴリズム（第１のアルゴリズム）による文字認識処理によって撮影画像から宛先を認識する認識処理（第１の認識処理）を行う。プロセッサ１１は、第１の認証処理において、複数の撮影画像から宛先の文字列の領域が含まれる撮影画像を検出する宛先領域の検出処理を行う。プロセッサ１１は、宛先領域が検出された１つの撮影画像をオリジナル画像として選出し、オリジナル画像に対して宛先の文字列を認識する処理を行う。プロセッサ１１は、第１の認識処理によって宛先の文字列の認識に成功した場合、文字認識の結果として得られた文字列を当該物品の宛先情報として特定する。
【0045】
また、プロセッサ１１は、第１の認識処理による宛先の文字列の認識に失敗した場合、ＶＣＳ２によって宛先情報を特定する処理を行う。すなわち、第１の認識処理で宛先の文字列が認識できなかった場合、プロセッサ１１は、通信部１６によりオリジナル画像と各撮影画像のサムネイル画像とを含むコーディング情報をＶＣＳ２に送信する。コーディング情報は、ＶＣＳ２におけるＶＣＤ２０に宛先情報の特定（コーディング）を要求する情報であり、処理対象とする物品の宛先を認識又は打鍵入力するためのコーディング処理用の画像を含む。
【0046】
コーディング処理用の画像は、処理対象とする物品の複数の撮影画像から選出した１つの撮影画像（オリジナル画像）と各撮影画像のサムネイル画像と含む。オリジナル画像は、文字認識処理に用いるフルサイズ（例えば、撮影サイズ）の画像データであり、サムネイル画像は、縮小表示用のフルサイズよりも小さいサイズの画像データであるものとする。ただし、制御装置８は、ＶＣＤ２０に対して、複数の撮影画像をフルサイズの画像データと複数の撮影画像におけるオリジナル画像を示す情報とをコーディング処理用の画像として送信するようにしても良い。この場合、複数の撮影画像のサムネイル画像はＶＣＤ２０のプロセッサ２１が生成するようにすれば良い。
【0047】
制御装置８のプロセッサ１１は、物品の撮影画像から宛先情報が認識できなかった場合、ＶＣＤ２０ａ乃至２０ｄから１つのＶＣＤ２０を選択し、選択したＶＣＤ２０にコーディング処理用の画像を含むコーディング情報を送信する。これに対して、ＶＣＤ２０は、コーディング情報に含まれるコーディング処理用の画像から宛先情報を特定し、特定した宛先情報を制御装置８に返信する。この結果として、制御装置８のプロセッサ１１は、通信部１６を通じてＶＣＤ２０が特定する宛先情報を取得する。
【0048】
プロセッサ１１は、第１の認識処理によって特定した宛先情報又はＶＣＤ２０から取得した宛先情報に基づいて当該物品の仕分先を設定する。例えば、プロセッサ１１は、宛先情報に基づいてソータ６において仕分先とする区分場所を設定する。例えば、プロセッサ１１は、ソータ６における物品が投入される複数のシュート（区分場所）から処理対象とする物品の宛先情報の行政区画（都道府県又は市町村など）に対応するシュートを選択し、そのシュートを示す情報（シュートの番号など）を仕分先として設定する。プロセッサ１１は、物品を特定するＩＤとＩＤで特定される物品の仕分先を示す情報とを含む仕分情報をソータインターフェース１９によりソータ６に送信する。これにより、ソータ６は、制御装置８から供給される仕分情報に基づいて物品を仕分ける仕分処理を行う。
【0049】
次に、第１実施形態に係る認識システム１０１のＶＣＳ２におけるＶＣＤ２０の動作について説明する。
ＶＣＤ２０は、プロセッサ２１がＲＯＭ２２又はＮＶＭ２４などに格納されるプログラムを実行することにより、物品処理システム１の制御装置８からの複数の撮影画像に対する宛先情報のコーディング処理を行う。前述の通り、制御装置８のプロセッサ１１は、第１の認識処理に失敗した場合、当該物品のコーディング処理用の画像を含むコーディング情報をＶＣＤ２０へ送信する。
ＶＣＤ２０は、プロセッサ２１がＲＯＭ２２又はＮＶＭ２４などに格納されるプログラムを実行することにより、物品処理システム１の制御装置８からの複数の撮影画像に対する宛先情報のコーディング処理を行う。前述の通り、制御装置８のプロセッサ１１は、第１の認識処理に失敗した場合、当該物品のコーディング処理用の画像を含むコーディング情報をＶＣＤ２０へ送信する。
【0050】
図４は、第１実施形態に係るコーディング装置としてのＶＤＤ２０の第１の動作例を説明するためのフローチャートである。
ＶＣＤ２０は、通信部２５により制御装置８から１つの物品を複数方向から撮影した複数の画像を含むコーディング情報を受信する（ステップＳ１１）。プロセッサ２１は、通信部２５により制御装置８からの受信したコーディング情報をＲＡＭ２３又はＮＶＭ２４などのメモリに保持する。コーディング情報は、物品の識別情報（ＩＤ）に対応づけたコーディング処理用の画像を含む。コーディング処理用の画像は、フルサイズの画像データであるオリジナル画像と複数の撮影画像のサムネイル画像とを含むものとする。
ＶＣＤ２０は、通信部２５により制御装置８から１つの物品を複数方向から撮影した複数の画像を含むコーディング情報を受信する（ステップＳ１１）。プロセッサ２１は、通信部２５により制御装置８からの受信したコーディング情報をＲＡＭ２３又はＮＶＭ２４などのメモリに保持する。コーディング情報は、物品の識別情報（ＩＤ）に対応づけたコーディング処理用の画像を含む。コーディング処理用の画像は、フルサイズの画像データであるオリジナル画像と複数の撮影画像のサムネイル画像とを含むものとする。
【0051】
プロセッサ２１は、コーディング情報から抽出したオリジナル画像に対して制御装置８での文字認識とは異なる第２のアルゴリズムの文字認識で宛先の文字列を認識する第２の認識処理を実行する（ステップＳ１２）。プロセッサ２１は、第２の認識処理によって宛先の文字列の認識に成功した場合（ステップＳ１３、ＹＥＳ）、認識した宛先の文字列に基づいて生成する宛先情報を制御装置８へ送信し（ステップＳ１４）、コーディング情報に対する処理（コーディング処理）を終了する。
【0052】
また、プロセッサ２１は、オリジナル画像に対する第２の認識処理と並行して、コーディング情報に含まれるオリジナル画像以外の撮影画像から宛先情報を認識するサムネイル処理を実行する（ステップＳ２１－Ｓ２４）。ここで、ＶＣＤ２０は、制御装置８からコーディング情報に含まれるコーディング処理用の画像として制御装置８が指定するオリジナル画像（フルサイズの画像データ）と複数の撮影画像のサムネイル画像（サムネイルサイズの画像データ）とを受信しているものとする。
【0053】
プロセッサ２１は、サムネイル処理として、オリジナル画像以外の撮影画像のサムネイル画像に対して宛先の文字列の領域（宛先領域）を検出する検出処理を行う（ステップＳ２１）。例えば、宛先が所定フォーマットの帳票に記載されることを前提する場合、プロセッサ２１は、各撮影画像のサムネイル画像において所定フォーマットの帳票らしい画像の領域を宛先領域として検出する。また、任意のフォーマットで物品の表面に宛先が記載されることを前提とする場合、プロセッサ２１は、宛先らしい文字群（文字列群）の画像の領域を宛先領域として検出するようにしても良い。
【0054】
プロセッサ２１は、どの撮影画像のサムネイル画像からも宛先領域が検出できなかった場合（ステップＳ２２、ＮＯ）、制御装置８が指定するオリジナル画像以外からは宛先領域が検出できなかった旨をサムネイル処理の処理結果として保持する。
【0055】
また、プロセッサ２１は、オリジナル画像以外の撮影画像から宛先領域が検出できた場合（ステップＳ２２、ＹＥＳ）、宛先領域が検出された撮影画像をオリジナル画像に入れ替える入替処理を行う（ステップＳ２３）。例えば、制御装置８が第１撮影画像をオリジナル画像に指定した場合、サムネイル画像の第２撮影画像から宛先領域が検出されると、プロセッサ２１は、第２撮影画像のフルサイズの画像データを制御装置８から取得し、フルサイズの第２撮影画像をオリジナル画像に入れ替える。
【0056】
なお、ＶＣＤ２０は、制御装置８からコーディング情報に含まれるコーディング処理用の画像として複数の撮影画像をフルサイズの画像データを受信し、ＲＡＭ２３などのメモリに保持しておくようにしても良い。この場合、プロセッサ２１は、オリジナル画像以外の撮影画像から宛先領域を検出し、オリジナル画像以外の撮影画像から宛先領域が検出できた場合に宛先情報が検出された第２撮影画像のフルサイズの画像をオリジナル画像とすれば良い。
【0057】
プロセッサ２１は、オリジナル画像を入れ替えた場合、入れ替えたオリジナル画像に対して制御装置８とは異なる第２のアルゴリズムの文字認識処理によって宛先の文字列を認識する（ステップＳ２４）。プロセッサ２１は、入れ替えたオリジナル画像に対する第２のアルゴリズムによる文字認識処理による宛先の文字列の認識結果をサムネイル処理の処理結果として保持する。
【0058】
例えば、プロセッサ２１は、入れ替えたオリジナル画像から宛先の文字列が認識できなかった場合、制御装置８が指定するオリジナル画像以外からは宛先情報が認識できなかった旨をサムネイル処理の処理結果として保持する。また、プロセッサ２１は、入れ替えたオリジナル画像から宛先の文字列が認識できた場合、認識した宛先の文字列を含む宛先情報をサムネイル処理の処理結果として保持する。
【0059】
一方、プロセッサ２１は、制御装置８が指定するオリジナル画像に対する宛先の文字列の認識に失敗した場合（ステップＳ１３、ＮＯ）、上述したようなサムネイル処理を終了したか否かを判断する（ステップＳ１５）。プロセッサ２１は、サムネイル処理が終了していなければ（ステップＳ１５、ＮＯ）、サムネイル処理の終了待ちとなる。
【0060】
第１の認識処理に失敗し、サムネイル処理が終了した場合（ステップＳ１５、ＹＥＳ）、プロセッサ２１は、サムネイル処理の結果として宛先情報の認識に成功したか否かを判断する（ステップＳ１６）。サムネイル処理による宛先情報の認識に成功した場合（ステップＳ１６、ＹＥＳ）、プロセッサ２１は、サムネイル処理により認識した宛先情報を制御装置８へ送信し（ステップＳ１４）、コーディング情報に対するコーディング処理を終了する。
【0061】
また、サムネイル処理による宛先情報の認識に失敗した場合（ステップＳ１６、ＮＯ）、プロセッサ２１は、コーディング情報のコーディング処理用の画像を表示部４０に表示し、オペレータに操作部３０を用いて宛先情報をキー入力させる打鍵入力処理を行う（ステップＳ１７）。ここで、プロセッサ２１は、オリジナル画像をメイン画像として表示し、サムネイル画像をサブ画像として表示部４０の表示画面に表示する。
【0062】
図５は、ＶＣＤ２０がオリジナル画像とサムネイル画像とを含む表示画面を表示部４０に表示した第１表示例である。図６は、表示画面における所定のサブ表示領域４２にサムネイル画像として表示する複数の撮影画像の配置例を説明するための図である。図７は、図５に示すような表示画面のオリジナル画像を入替えた場合にＶＣＤ２０が表示部４０に表示する表示画面の第２表示例である。
【0063】
図５および図７に示す表示例において、表示部４０は、メイン表示領域４１、サブ表示領域４２、および、入力表示領域４３を含む表示画面（コーディング画面）を表示する。
メイン表示領域４１は、処理対象とする物品に対する複数の撮影画像から選出された文字認識処理の対象とする１つの撮影画像をオリジナル画像として表示する。サブ表示領域４２は、複数の表示領域４２１－４２５を有し、各表示領域４２１－４２５に複数の撮影画像のサムネイル画像（縮小画像）を表示する。入力表示領域４３は、オペレータが入力した情報などを表示する。
メイン表示領域４１は、処理対象とする物品に対する複数の撮影画像から選出された文字認識処理の対象とする１つの撮影画像をオリジナル画像として表示する。サブ表示領域４２は、複数の表示領域４２１－４２５を有し、各表示領域４２１－４２５に複数の撮影画像のサムネイル画像（縮小画像）を表示する。入力表示領域４３は、オペレータが入力した情報などを表示する。
【0064】
ここで、制御装置８は、図６に例示するように、カメラ７が処理対象とする立体の物品を５方向から撮影した５つの撮影画像を取得する。この場合、制御装置８は、コーディング処理用の画像として、５つの撮影画像から選出した１つの撮影画像であるオリジナル画像と５つの撮影画像のサムネイル画像とをＶＣＤ２０へ供給する。ＶＣＤ２０は、制御装置８からのオリジナル画像をメイン表示領域４１に表示し、５つの撮影画像のサムネイル画像をサブ表示領域４２の各表示領域に表示する。
【0065】
図５乃至７に示す表示例において、サブ表示領域４２は、５方向から撮影した５つの撮影画像に対応する５つの表示領域４２１、４２２、４２３、４２４、４２５を有する。図６に示すように、第１表示領域４２１には、物品の第１面（第１の方向から撮影される面）Ｍ１を撮影した撮影画像のサムネイル画像が表示される。第２表示領域４２２には、物品の第２面（第２の方向から撮影される面）Ｍ２を撮影した撮影画像のサムネイル画像が表示される。第３表示領域４２３には、物品の第３面（第３の方向から撮影される面）Ｍ３を撮影した撮影画像のサムネイル画像が表示される。第４表示領域４２４には、物品の第４面（第４の方向から撮影される面）Ｍ４を撮影した撮影画像のサムネイル画像が表示される。第５表示領域４２５には、物品の第５面（第５の方向から撮影される面）Ｍ５を撮影した撮影画像のサムネイル画像が表示される。
【0066】
メイン表示領域４１に表示されるオリジナル画像４１１は、例えば、制御装置８が指定したオリジナル画像である。また、メイン表示領域４１に表示されるオリジナル画像４１１は、サムネイル処理によって入れ替えたオリジナル画像（宛先領域が検出された撮影画像）であっても良い。
【0067】
メイン表示領域４１に表示するオリジナル画像は、操作部３０によるオペレータの指示に応じて切り替えられる。例えば、図５に示す第１表示例では、第５表示領域４２５を選択状態とし、第５表示領域４２５にサムネイル画像を表示している撮影画像のフルサイズの画像をオリジナル画像４１１としてメイン表示領域４１に表示している。図５に示す表示状態において、オペレータが第１表示領域４２１に表示されているサムネイル画像を選択指示すると、プロセッサ２１は、図７に示す第２表示例のように、第１表示領域４２１を選択状態とし、第１表示領域４２１にサムネイル画像を表示している撮影画像のフルサイズの画像をオリジナル画像４１２としてメイン表示領域４１に表示する。
【0068】
オペレータは、図５又は図７に示す表示画面を目視（参照）しながら宛先情報を操作部３０によりキー入力する。ＶＣＤ２０のプロセッサ２１は、オペレータが操作部３０を用いてキー入力する情報を取得することにより、オペレータがキー入力する宛先情報を取得する。プロセッサ２１は、オペレータが操作部３０を用いて宛先情報をキー入力すると、操作部３０を用いて入力された宛先情報を制御装置８へ送信し（ステップＳ１４）、コーディング情報に対するコーディング処理を終了する。
【0069】
次に、第１実施形態に係るコーディング装置としてのＶＤＤ２０の第２の動作例について説明する。第２の動作例では、第１の動作例で並列処理として実行したサムネイル処理を制御装置８が指定するオリジナル画像に対する宛先の文字列の認識が失敗した場合に実行する。
図８は、第１実施形態に係るコーディング装置としてのＶＤＤ２０の第２の動作例を説明するためのフローチャートである。
図８は、第１実施形態に係るコーディング装置としてのＶＤＤ２０の第２の動作例を説明するためのフローチャートである。
【0070】
ＶＣＤ２０は、通信部２５により制御装置８から１つの物品を複数方向から撮影した複数の画像を含むコーディング情報を受信する（ステップＳ３１）。プロセッサ２１は、通信部２５により制御装置８からの受信したオリジナル画像と複数の撮影画像のサムネイル画像とを含むコーディング情報をＲＡＭ２３又はＮＶＭ２４などのメモリに保持する。
【0071】
プロセッサ２１は、コーディング情報から抽出するオリジナル画像に対して制御装置８での文字認識とは異なる第２のアルゴリズムの文字認識によって宛先の文字列を認識する第２の認識処理を行う（ステップＳ３２）。プロセッサ２１は、第２の認識処理によって宛先の文字列の認識に成功した場合（ステップＳ３３、ＹＥＳ）、認識した宛先の文字列に基づいて生成する宛先情報を制御装置８へ送信し（ステップＳ３４）、コーディング情報に対する処理（コーディング処理）を終了する。
【0072】
プロセッサ２１は、制御装置８が指定するオリジナル画像に対する宛先の文字列の認識に失敗した場合（ステップＳ３３、ＮＯ）、第１の動作例で説明したようなサムネイル処理を実行する（ステップＳ４１－Ｓ４４）。プロセッサ２１は、サムネイル処理として、まず、オリジナル画像以外の撮影画像のサムネイル画像に対して宛先領域の検出処理を行う（ステップＳ４１）。プロセッサ２１は、サムネイル画像から宛先領域が検出できなかった場合（ステップＳ４２、ＮＯ）、オリジナル画像以外からは宛先領域が検出できなかった旨をサムネイル処理の処理結果とし、ステップＳ４６へ進む。
【0073】
プロセッサ２１は、オリジナル画像以外の撮影画像から宛先領域が検出できた場合（ステップＳ４２、ＹＥＳ）、宛先領域が検出された撮影画像をオリジナル画像に入れ替える入替処理を行う（ステップＳ４３）。プロセッサ２１は、オリジナル画像を入れ替えた場合、入れ替えたオリジナル画像に対して制御装置８での文字認識とは異なる第２のアルゴリズムの文字認識処理によって宛先の文字列を認識する（ステップＳ４４）。プロセッサ２１は、入れ替えたオリジナル画像に対する認識処理による宛先の文字列の認識結果をサムネイル処理の処理結果として保持する。
【0074】
サムネイル処理が終了すると、プロセッサ２１は、サムネイル処理の結果として宛先情報の認識に成功したか否かを判断する（ステップＳ４６）。サムネイル処理による宛先情報の認識に成功した場合（ステップＳ４６、ＹＥＳ）、プロセッサ２１は、サムネイル処理により認識した宛先情報を制御装置８へ送信し（ステップＳ３４）、コーディング情報に対するコーディング処理を終了する。
【0075】
また、サムネイル処理による宛先情報の認識に失敗した場合（ステップＳ４６、ＮＯ）、プロセッサ２１は、オリジナル画像と複数の撮影画像のサムネイル画像とを表示部４０に表示し、オペレータに操作部３０を用いて宛先情報をキー入力させる打鍵入力処理を行う（ステップＳ４７）。プロセッサ２１は、オペレータが操作部３０を用いて宛先情報をキー入力すると、操作部３０を用いて入力された宛先情報を制御装置８へ送信し（ステップＳ３４）、コーディング情報に対するコーディング処理を終了する。
【0076】
以上のように、第１実施形態に係るコーディング装置としてのＶＣＤは、処理対象とする物品を複数方向から撮影した複数の撮影画像から物品処理システムの制御装置が選出されたオリジナル画像と複数の撮影画像のサムネイル画像とを含むコーディング情報を取得し、オリジナル画像に対する宛先の文字列の認識に失敗した場合にサムネイル画像から宛先領域を検出し、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替えて宛先の文字列を認識する処理を行う。
【0077】
これにより、第１実施形態によれば、物品処理システムが選出するオリジナル画像に対する文字認識に失敗しても、宛先領域が検出できたサムネイル画像の撮影画像をオリジナル画像に入れ替えて文字認識を行うことができ、最終的な文字認識率を向上させることができる。この結果、コーディング装置による宛先情報の入力作業（コーディング処理）の生産性を向上させることができる。
（第２実施形態）
次に、第２実施形態について説明する。
図９は、第２実施形態に係るコーディング装置を含む認識システム１０２の構成例を示す図である。
第２実施形態に係る認識システム１０２は、物品処理システム１、ＶＣＳ２、および、第２のコーディングシステム５（５Ａ、５Ｂ、５Ｃ、５Ｄ）を有する。物品処理システム１およびＶＣＳ２は、上述した第１実施形態で説明したものと同様のハードウエア構成を有するものであっても良い。このため、物品処理システム１およびＶＣＳ２の構成については詳細な説明を省略する。
（第２実施形態）
次に、第２実施形態について説明する。
図９は、第２実施形態に係るコーディング装置を含む認識システム１０２の構成例を示す図である。
第２実施形態に係る認識システム１０２は、物品処理システム１、ＶＣＳ２、および、第２のコーディングシステム５（５Ａ、５Ｂ、５Ｃ、５Ｄ）を有する。物品処理システム１およびＶＣＳ２は、上述した第１実施形態で説明したものと同様のハードウエア構成を有するものであっても良い。このため、物品処理システム１およびＶＣＳ２の構成については詳細な説明を省略する。
【0078】
ただし、第２実施形態において、ＶＣＳ２を構成する各ＶＣＤ２０は、第２のアルゴリズムによる文字認識処理を行わないものとし、操作インターフェース２６および表示インターフェース２７に第２のコーディングシステム５を接続する。ＶＣＤ２０の操作インターフェース２６は、後述する第２のコーディングシステム５のキーボード（ＫＢ）／マウスエミュレータ（単に、エミュレータとも称する）６０に接続し、キーボード／マウスエミュレータ６０からの操作信号を受信する。また、ＶＣＤ２０の表示インターフェース２７は、後述する第２のコーディングシステム５のキャプチャボード７０に接続し、ＶＣＤ２０が表示する表示画面を表示するための画像データ（表示装置に表示画面を表示させるための表示データ）をキャプチャボード７０に送信する。
【0079】
第２実施形態において、各ＶＣＤ２０は、物品処理システム１からコーディング情報を受信した場合、コーディング情報に含まれるオリジナル画像とサムネイル画像とを表示する表示画面を表示インターフェース２７により第２のコーディングシステム５へ供給し、表示画面に対する宛先情報を操作インターフェース２６により第２のコーディングシステム５からキー入力情報として取得し、第２のコーディングシステム５から取得するキー入力情報に基づく宛先情報を物品処理システム１へ送信するように動作する。
【0080】
次に、第２実施形態に係るコーディング装置の一例である第２のコーディング装置５０を有する第２のコーディングシステム５の構成について説明する。
なお、第２のコーディングシステム５Ａ乃至５Ｄは、同様の構成であるため、第２のコーディングシステム５として説明し、第２のコーディング装置５０ａ乃至５０ｄは、同様の構成であるため、第２のコーディング装置５として説明する。
なお、第２のコーディングシステム５Ａ乃至５Ｄは、同様の構成であるため、第２のコーディングシステム５として説明し、第２のコーディング装置５０ａ乃至５０ｄは、同様の構成であるため、第２のコーディング装置５として説明する。
【0081】
図９に示すように、第２実施形態に係る第２のコーディングシステム５は、第２のコーディング装置５０、キーボード／マウスエミュレータ（エミュレータ）６０、キャプチャボード７０、操作部８０および表示部９０を有する。第２のコーディング装置５０とＶＣＤ２０とは、キーボード（ＫＢ）／マウスエミュレータ６０およびキャプチャボード７０を介して接続される。操作部８０および表示部９０は、第２のコーディング装置５０に接続される。
【0082】
図１０は、第２実施形態に係るコーディング装置の一例である第２のコーディング装置５０の構成例を示すブロック図である。
図１０に示すように、第２のコーディング装置５０は、プロセッサ５１、ＲＯＭ５２、ＲＡＭ５３、ＮＶＭ５４、通信部５５、エミュレータインターフェース５６、画像インターフェース５７、操作インターフェース５８、および、表示インターフェース５９などを備える。
図１０に示すように、第２のコーディング装置５０は、プロセッサ５１、ＲＯＭ５２、ＲＡＭ５３、ＮＶＭ５４、通信部５５、エミュレータインターフェース５６、画像インターフェース５７、操作インターフェース５８、および、表示インターフェース５９などを備える。
【0083】
プロセッサ５１は、ＲＯＭ５２、ＲＡＭ５３、ＮＶＭ５４、通信部５５、エミュレータインターフェース５６、画像インターフェース５７、操作インターフェース５８および表示インターフェース５９にデータバスなどを介して接続される。なお、第２のコーディング装置５０は、図１０に示すような構成の他に必要に応じた構成を具備したり、図１０に示す構成から特定の構成が除外されたりしてもよい。
【0084】
プロセッサ５１は、第２のコーディング装置５０全体の動作を制御する。プロセッサ５１は、プログラムを実行する処理回路だけでなく、内部キャッシュ及び各種のインターフェースなどを備えてもよい。プロセッサ５１は、内部メモリ、ＲＯＭ５２又はＮＶＭ５４が予め記憶するプログラムを実行することにより種々の処理を実現する。
なお、プロセッサ５１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ５１は、ハードウエア回路により実行される機能を制御する。
なお、プロセッサ５１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ５１は、ハードウエア回路により実行される機能を制御する。
【0085】
ＲＯＭ５２は、制御プログラム及び制御データなどが予め記憶された不揮発性のメモリである。ＲＯＭ５２に記憶される制御プログラム及び制御データは、第２のコーディング装置５０の仕様に応じて予め組み込まれる。
【0086】
ＲＡＭ５３は、揮発性のメモリである。ＲＡＭ５３は、プロセッサ５１の処理中のデータなどを一時的に格納する。ＲＡＭ５３は、プロセッサ５１からの命令に基づき種々のアプリケーションプログラムを格納する。また、ＲＡＭ５３は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。
【0087】
ＮＶＭ５４は、データの書き込み及び書き換えが可能な不揮発性のメモリである。例えば、ＮＶＭ５４は、例えば、ＨＤＤ、ＳＳＤ又はフラッシュメモリなどから構成される。ＮＶＭ５４は、第２のコーディング装置５０の運用用途に応じた制御プログラム、アプリケーションプログラム、および、種々のデータなどを格納する。
【0088】
通信部５５は、データを送受信するためのインターフェースである。例えば、通信部５５は、他の第２のコーディング装置５０などとデータを送受信するためのインターフェースを含むようにしても良い。
【0089】
エミュレータインターフェース５６は、キーボード／マウスエミュレータ６０に接続する。エミュレータインターフェース５６は、キーボード／マウスエミュレータ６０とデータを送受信するインターフェースである。エミュレータインターフェース５６は、プロセッサ５１からの制御信号をキーボード／マウスエミュレータ６０によりキー入力による操作信号としてＶＣＤ２０へ出力させる。すなわち、エミュレータインターフェース５６は、キーボード／マウスエミュレータ６０を通じて操作信号をＶＣＤ２０に入力する。
【0090】
画像インターフェース５７は、キャプチャボード７０とデータを送受信するインターフェースである。画像インターフェース５７は、キャプチャボード７０がキャプチャするＶＣＤ２０による表示画面の画像を取得する。キャプチャボード７０は、ＶＣＤ２０が表示装置に表示する表示画面（ＶＣＤ２０が表示装置に供給する表示用の画像データ）の画像を取得する。画像インターフェース５７は、キャプチャボード７０がキャプチャするＶＣＤ２０の表示画面の画像をプロセッサ５１に供給する。
【0091】
操作インターフェース５８は、操作部８０とデータを送受信するためのインターフェースである。例えば、操作インターフェース５８は、操作部８０に入力された操作を示す操作信号を操作部８０から受信する。操作インターフェース５８は、受信した操作信号をプロセッサ５１に送信する。また、操作インターフェース５８は、操作部８０に電力を供給するものであってもよい。
【0092】
表示インターフェース５９は、表示部９０とデータを送受信するためのインターフェースである。表示インターフェース５９は、プロセッサ５１からの画像データを表示部９０に出力する。
【0093】
なお、エミュレータインターフェース５６、画像インターフェース５７、操作インターフェース５８および表示インターフェース５９（又はこれらの一部）は、第２のコーディング装置５０の本体に一体的に形成されるものであってもよい。また、第２のコーディング装置５０は、第２の認識処理を行い、オペレータによる打鍵入力をしないものを含んでも良い。オペレータによる打鍵入力を行わない第２のコーディング装置５０は、操作インターフェース５８及び表示インターフェース５９を備えない構成であっても良い。
【0094】
次に、第２実施形態に係るコーディング装置の例である第２のコーディング装置５０が実行する処理について概略的に説明する。
第２のコーディング装置５０のプロセッサ５１は、ＲＯＭ５２又はＮＶＭ５４などに格納されるプログラムを実行することで種々の処理機能を実現する。
第２のコーディング装置５０のプロセッサ５１は、ＲＯＭ５２又はＮＶＭ５４などに格納されるプログラムを実行することで種々の処理機能を実現する。
【0095】
まず、プロセッサ５１は、画像インターフェース５７を通じてＶＣＤ２０から表示画面の画像を取得する。第１実施形態で説明したように、ＶＣＤ２０は、制御装置８からのコーディング情報に含まれるオリジナル画像と複数の撮影画像のサムネイル画像とを含む表示画面を表示するための表示（画像）データを生成する。例えば、ＶＣＤ２０は、図５又は図７に示すように、メイン表示領域４１にオリジナル画像を表示し、サブ表示領域４２に複数の撮影画像のサムネイル画像を表示する表示画面（コーディング画面）を表示装置に表示するための表示データを生成する。
【0096】
キャプチャボード７０は、ＶＣＤ２０から表示画面（コーディング画面）の表示データを取得し、表示データにより表示される表示画面の画像をキャプチャし、キャプチャした表示画面の画像データを第２のコーディング装置５０に供給する。すなわち、第２のコーディング装置５０のプロセッサ５１は、画像インターフェース５７によりキャプチャボード７０がキャプチャしたＶＣＤ２０の表示画面の画像データを取得する。
【0097】
また、プロセッサ５１は、ＶＣＤ３０の表示画面におけるメイン表示領域４１に表示されるオリジナル画像の宛先領域について、表示位置、向き及びサイズを取得する機能を有する。さらに、プロセッサ５１は、宛先領域の位置、向き及びサイズに基づいて、オリジナル画像に対する変形操作をＶＣＤ２０に入力するかを判定し、変形操作を指示する操作信号をＶＣＤ２０に入力する機能を有する。
【0098】
ここで、プロセッサ５１は、オリジナル画像において宛先領域を検出し、宛先領域の位置、向きおよびサイズを取得するものとする。プロセッサ５１は、ＶＣＤ２０の表示画面からオリジナル画像を抽出し、抽出したオリジナル画像において宛先領域を検出する。プロセッサ５１は、所定のアルゴリズムに従って、オリジナル画像における宛先領域の位置、向き及びサイズを取得する。例えば、ＮＶＭ５４は、宛先領域の位置、向き及びサイズを出力するモデル（例えば、ニューラルネットワーク）を予め格納する。プロセッサ５１は、ＮＶＭ５４に格納したモデルに基づいてオリジナル画像における宛先領域の位置、向き及びサイズを取得する。
【0099】
なお、ＮＶＭ５４は、撮影画像を入力すると宛先領域の位置を出力するモデル、撮影画像を入力すると宛先領域の向きを出力するモデル、及び、撮影画像を入力すると宛先領域のサイズを出力するモデルを予め格納するようにしても良い。この場合、プロセッサ５１は、表示画面から抽出したオリジナル画像を各モデルに入力して宛先領域の位置、向き及びサイズを取得する。
【0100】
また、プロセッサ５１は、宛先領域の位置、向き及びサイズに基づいて、オリジナル画像に対する変形操作をＶＣＤ２０に入力するかを判定する。プロセッサ５１は、ＶＣＤ２０の表示画面のメイン表示領域４１に表示されるオリジナル画像の宛先領域に対して文字認識処理を適切に行うことができるかを判定する。
【0101】
例えば、プロセッサ５１は、オリジナル画像における宛先領域のサイズが所定のサイズ以上であるかを判定する。宛先領域のサイズが所定のサイズより小さい場合、プロセッサ５１は、宛先領域のサイズが所定のサイズ以上となるような変形操作を入力すると判定する。例えば、プロセッサ５１は、宛先領域のサイズが所定のサイズより小さい場合、メイン表示領域４１内のオリジナル画像を拡大する変形操作を入力すると判定する。
【0102】
また、プロセッサ５１は、オリジナル画像における宛先領域の向きが正対であるかを判定する。宛先領域の向きが正対でないと判定すると、プロセッサ５１は、オリジナル画像における宛先領域の向きが正対するような変形操作を入力すると判定する。例えば、宛先領域の向きが左に９０度傾いている場合、プロセッサ５１は、メイン表示領域４１内のオリジナル画像を右に９０度回転させる変形操作を入力すると判定する。
【0103】
また、プロセッサ５１は、ＶＣＤ２０の表示画面のメイン表示領域４１においてオリジナル画像の宛先領域が見切れているかを判定する。宛先領域が見切れていると判定すると、プロセッサ５１は、オリジナル画像の宛先領域がメイン表示領域４１に収まるような変形操作を入力すると判定する。例えば、宛先領域の右端が見切れている場合、プロセッサ５１は、メイン表示領域４１内のオリジナル画像を左に移動する変形操作を入力すると判定する。また、オリジナル画像の宛先領域がメイン表示領域４１に収まらない場合、プロセッサ５１は、メイン表示領域４１内のオリジナル画像を縮小する変形操作を入力すると判定する。
【0104】
また、プロセッサ５１は、ＶＣＤ２０にオリジナル画像に対する変形操作を入力すると判定した場合、変形操作を指示する操作信号をＶＣＤ２０に入力する機能を有する。変形操作を入力すると判定すると、プロセッサ５１は、キーボード／マウスエミュレータ２６を用いて、入力すると判定された変形操作を指示する操作信号をＶＣＤ２０の操作インターフェース２６に送信する。プロセッサ５１は、エミュレータインターフェース５６を通じてキーボード／マウスエミュレータ６０に変形操作を指示する操作信号を生成させ、キーボード／マウスエミュレータ６０が生成した変形操作を指示する操作信号をＶＣＤ２０の操作インターフェース２６に出力させる。これにより、ＶＣＤ２０は、変形操作に応じてメイン表示領域４１のオリジナル画像を更新（変形）した表示画面を表示インターフェース２７により出力する。
【0105】
また、プロセッサ５１は、ＶＣＤ３０の表示画面におけるメイン表示領域４１に表示されるオリジナル画像を他の撮影画像に入れ替える入替処理を行う機能を有する。プロセッサ５１は、制御装置８が指定するオリジナル画像に対する後述する第２の認識処理による宛先の文字列の認識に失敗した場合、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域を検出する。サムネイル画像から宛先領域が検出できた場合、プロセッサ５１は、メイン表示領域４１に表示するオリジナル画像を宛先領域が検出できた撮影画像に入れ替えることを指示する入替操作の操作信号をＶＣＤ２０に入力する。
【0106】
プロセッサ５１は、キーボード／マウスエミュレータ６０を用いて、オリジナル画像の入れ替えを指示する入替操作の操作信号をエミュレータインターフェース５６によりＶＣＤ２０の操作インターフェース２６に送信する。プロセッサ５１は、エミュレータインターフェース５６により接続するキーボード／マウスエミュレータ６０に入替操作を指示する操作信号を生成させ、キーボード／マウスエミュレータ６０が生成した入替操作の操作信号をＶＣＤ２０の操作インターフェース２６に出力させる。これにより、ＶＣＤ２０は、入替操作に応じてメイン表示領域４１のオリジナル画像を指定された撮影画像に入替（更新）した表示画面を表示インターフェース２７により出力する。
【0107】
また、プロセッサ５１は、オリジナル画像の宛先領域に対して第２の認識処理により宛先の文字列を認識する機能を有する。プロセッサ５１は、ＶＣＤ２０の表示画面におけるオリジナル画像から検出する宛先領域に対して、第１のアルゴリズムとは異なる所定のアルゴリズム（第２のアルゴリズム）に従って宛先の文字列を認識する文字認識処理（第２の認識処理）を行う。第２のアルゴリズムは、第１のアルゴリズムが認識できない文字の少なくとも一部を認識できるように構成される。プロセッサ５１は、第２の認識処理の結果に基づいて物品の宛先情報を特定する。
【0108】
プロセッサ５１は、文字認識処理（第２の認識処理）によって宛先情報が特定できた場合、特定した宛先情報をＶＣＤ２０に入力する。プロセッサ５１は、キーボード／マウスエミュレータ６０により特定した宛先情報をキー入力による操作信号に変換してＶＣＤ２０の操作インターフェース２６に供給する。つまり、プロセッサ５１は、エミュレータインターフェース５６を通じてキーボード／マウスエミュレータ４に宛先情報を入力する操作信号を生成させ、生成させた宛先情報をキー入力する操作信号をＶＣＤ２０の操作インターフェース２６に出力させる。
【0109】
また、プロセッサ５１は、第２の認識処理による宛先の文字列の認識に失敗した場合、操作部８０によりオペレータに宛先情報をキー入力される打鍵入力処理を行う。第２の認識処理による宛先の文字列の認識に失敗した場合、プロセッサ５１は、ＶＣＤ２０からの表示画面を表示部９０に表示し、操作部８０による宛先情報のキー入力を受け付ける。プロセッサ５１は、操作部８０を用いて入力された宛先情報をエミュレータインターフェース５６に接続するエミュレータ６０によりキー入力された情報を示す操作信号としてＶＣＤ２０に入力する。
【0110】
また、プロセッサ５１は、表示インターフェース２７によりキャプチャボード７０がキャプチャするＶＣＤの表示画面をリアルタイムで取得し、取得した表示画面を表示部９０に表示する。オペレータは、表示部９０に表示されるＶＣＤ２０の表示画面のメイン表示領域４１に表示するオリジナル画像を視認して宛先情報を操作部８０により入力する。宛先の入力が完了すると、オペレータは、操作部８０に宛先情報の入力を完了する操作を入力する。
【0111】
なお、第２のコーディングシステム５は、第２のコーディング装置５０に操作部８０及び表示部９０を接続しないものを含んでも良い。この場合、操作部８０及び表示部９０が接続されていない第２のコーディング装置５０のプロセッサ５１は、他の第２のコーディング装置５０に接続されている表示部９０にＶＣＤ２０の表示画面を表示し、当該他の第２のコーディング装置５０に接続されている操作部８０に入力された操作を示す操作信号をＶＣＤ２０に入力するようにしても良い。また、主たる第２のコーディング装置５０（例えば、第２のコーディング装置５０ａ）又は外部の制御装置は、宛先の入力に用いる操作部８０及びＶＣＤ２０の表示画面を表示する表示部９０を管理するようにしてもよい。
【0112】
次に、第２実施形態に係る認識システム１０２の第２のコーディングシステム５における第２のコーディング装置５０の動作について説明する。
図１１は、第２実施形態に係るコーディング装置としての第２のコーディング装置５０の第１の動作例を説明するためのフローチャートである。
図１１は、第２実施形態に係るコーディング装置としての第２のコーディング装置５０の第１の動作例を説明するためのフローチャートである。
【0113】
第２のコーディング装置５０は、画像インターフェース５７によりＶＣＤ２０が出力する表示画面をキャプチャボード７０でキャプチャした表示画面の画像データとして取得する（ステップＳ５１）。第２のコーディング装置５０のプロセッサ２１は、画像インターフェース５７により取得した表示画面の画像データをＲＡＭ５３又はＮＶＭ５４などのメモリに保持する。ここでは、図５に示す第１表示例の表示画面の画像データを取得したことを想定して説明する。
【0114】
プロセッサ５１は、ＶＣＤ２０の表示画面の画像データから表示画面のメイン表示領域４１に表示されるオリジナル画像を抽出する。プロセッサ５１は、抽出したオリジナル画像に対して制御装置８での文字認識とは異なる第２のアルゴリズムの文字認識によって宛先の文字列を認識する第２の認識処理を行う（ステップＳ５２）。
【0115】
プロセッサ５１は、第２の認識処理によって宛先の文字列の認識に成功した場合（ステップＳ５３、ＹＥＳ）、第２の認識処理によって得られた宛先の文字列に基づく宛先情報をエミュレータインターフェース５６によりエミュレータ６０に出力する（ステップＳ５４）。エミュレータ６０は、エミュレータインターフェース５６から出力された宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0116】
また、プロセッサ５１は、オリジナル画像に対する第２の認識処理と並行して、コーディング情報に含まれるオリジナル画像以外の撮影画像から宛先情報を認識するサムネイル処理を実行する（ステップＳ６１－Ｓ６４）。
【0117】
プロセッサ５１は、サムネイル処理として、まず、オリジナル画像以外の撮影画像のサムネイル画像に対して宛先領域を検出する検出処理を行う（ステップＳ６１）。プロセッサ５１は、どの撮影画像のサムネイル画像からも宛先領域が検出できなかった場合（ステップＳ６２、ＮＯ）、サムネイル画像からは宛先領域が検出できなかった旨をサムネイル処理の処理結果として保持する。
【0118】
また、プロセッサ５１は、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域が検出できた場合（ステップＳ６２、ＹＥＳ）、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替える入替処理を行う。プロセッサ５１は、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替える入替操作をエミュレータインターフェース５６によりキーボード／マウスエミュレータ６０へ送信する（ステップＳ６３）。
【0119】
キーボード／マウスエミュレータ６０は、入替操作を指示する操作信号を生成し、生成した入替操作の操作信号をＶＣＤ２０の操作インターフェース２６へ送信する。これにより、ＶＣＤ２０のプロセッサ２１は、操作インターフェース２６により入替操作の操作信号を受信すると、操作信号に応じてメイン表示領域４１のオリジナル画像を指定された撮影画像に入れ替えた表示画面を生成（更新）し、生成した表示画面の画像データを表示インターフェース２７により出力する。
【0120】
キャプチャボード７０は、表示インターフェース２７が出力するオリジナル画像を入れ替えた表示画面をキャプチャし、キャプチャした表示画面の画像データを第２のコーディング装置５０の画像インターフェース５７へ送信する。第２のコーディング装置５０のプロセッサ５１は、画像インターフェース５７により受信したオリジナル画像が入れ替えられた表示画面を取得する（ステップＳ６４）。
【0121】
例えば、図５に示す第１表示例の表示画面では、サブ表示領域４２の第５領域４２５に表示している撮影画像をメイン表示領域４１でオリジナル画像として表示している。図５に示す第１表示例の表示画面においてサブ表示領域４２の第１表示領域４２１に表示しているサムネイル画像に宛先領域が検出された場合、プロセッサ５１は、第１表示領域４２１に表示しているサムネイル画像の撮影画像をオリジナル画像に入れ替える入替操作の操作信号をエミュレータインターフェース５６によりキーボード／マウスエミュレータ６０へ送信する。キーボード／マウスエミュレータ６０が第１表示領域４２１のサムネイル画像の撮影画像をオリジナル画像に入れ替えることを指示する操作信号を生成し、生成した操作信号をＶＣＤ２０の操作インターフェース２６へ送信する。
【0122】
ＶＣＤ２０のプロセッサ２１は、操作インターフェース２６により第１表示領域４２１の撮影画像をオリジナル画像に入れ替えることを指示する操作信号を受信する。ＶＣＤ２０のプロセッサ２１と、第１表示領域４２１に表示しているサムネイル画像（入れ替えが指定されたサムネイル画像）のフルサイズの撮影画像を制御装置８から取得する。
【0123】
なお、サブ表示領域４２にサムネイル画像として表示する複数の撮影画像をフルサイズの画像データは制御装置８からコーディング情報として受信してＲＡＭ２３などのメモリに保持するようにしても良い。この場合、ＶＣＤ２０のプロセッサ２１は、メモリから第１表示領域４２１に表示しているサムネイル画像のフルサイズの撮影画像を取得するようにしても良い。
【0124】
ＶＣＤ２０のプロセッサ２１は、入れ替えが指定されたサムネイル画像のフルサイズの撮影画像を取得すると、取得したフルサイズの撮影画像をオリジナル画像としてメイン表示領域４１に表示させることにより図７に示すような表示画面を生成（更新）する。ＶＣＤのプロセッサ２１は、メイン表示領域４１のオリジナル画像を第１表示領域４２１の撮影画像に入れ替えた表示画面を生成（更新）すると、生成した表示画面の表示データを表示インターフェース２７により出力する。
【0125】
キャプチャボード７０は、ＶＣＤ２０が出力するオリジナル画像を第１表示領域４２１の画像に入れ替えた表示画面の画像をキャプチャし、キャプチャした表示画面の画像データを第２のコーディング装置５０の画像インターフェース５７へ送信する。この結果、第２のコーディング装置５０のプロセッサ５１は、画像インターフェース５７により受信したオリジナル画像が入れ替えられた図７に示すような表示画面を取得する。
【0126】
プロセッサ２１は、オリジナル画像を入れ替えた表示画面を取得すると、入替処理で得られた表示画面に対してオリジナル画像の拡大回転操作（変形操作）を行う（ステップＳ６５）。プロセッサ２１は、上述したように、オリジナル画像における宛先領域を検出し、その宛先領域の位置、向き、および、サイズに基づいて、オリジナル画像に対する変形操作をＶＣＤ２０に入力するかを判定する。
【0127】
プロセッサ５１は、変形操作を入力しない（変形操作が不要である）と判定した場合、ステップＳ６６へ進む。また、変形操作を入力すると判定した場合、プロセッサ５１は、オリジナル画像に対する位置の移動、拡大、回転などを指示する変形指示を生成し、変形操作の操作信号をエミュレータインターフェース５６およびエミュレータ６０を介してＶＣＤ２０へ供給する。
【0128】
ＶＣＤ２０は、操作インターフェース２６に入力される変形操作の操作信号に応じて変形（更新）したオリジナル画像をメイン表示領域４１に表示する表示画面を生成し、表示インターフェース２７から出力する。変形したオリジナル画像を表示する表示画面は、キャプチャボード７０によりキャプチャされ、キャプチャされた表示画面の画像データが第２のコーディング装置５０の画像インターフェース５７へ供給される。これにより、第２のコーディング装置５０のプロセッサ５１は、変形操作に応じて変形されたオリジナル画像を表示する表示画面を取得する。
【0129】
プロセッサ５１は、オリジナル画像を入れ替えた表示画面又は入れ替えたオリジナル画像を変形した画像を表示した表示画面を取得すると、取得した表示画面のオリジナル画像に対して制御装置８の文字認識とは異なる第２のアルゴリズムの文字認識処理によって宛先の文字列を認識する（ステップＳ６６）。プロセッサ５１は、入れ替えたオリジナル画像に対する第２のアルゴリズムによる文字認識による宛先の文字列の認識結果をサムネイル処理の処理結果として保持する。
【0130】
プロセッサ５１は、入れ替えたオリジナル画像から宛先の文字列が認識できなかった場合、サムネイル画像の撮影画像からは宛先情報が認識できなかった旨をサムネイル処理の処理結果として保持する。また、プロセッサ５１は、入れ替えたオリジナル画像から宛先の文字列が認識できた場合、認識した宛先の文字列を含む宛先情報をサムネイル処理の処理結果として保持する。
【0131】
一方、プロセッサ５１は、制御装置８が指定するオリジナル画像に対する宛先の文字列の認識に失敗した場合（ステップＳ５３、ＮＯ）、上述したようなサムネイル処理を終了したか否かを判断する（ステップＳ５５）。プロセッサ５１は、サムネイル処理が終了していなければ（ステップＳ５５、ＮＯ）、サムネイル処理の終了待ちとなる。
【0132】
サムネイル処理が終了した場合（ステップＳ５５、ＹＥＳ）、プロセッサ５１は、サムネイル処理の結果として宛先情報の認識に成功したか否かを判断する（ステップＳ５６）。サムネイル処理による宛先情報の認識に成功した場合（ステップＳ５６、ＹＥＳ）、プロセッサ５１は、サムネイル処理により認識した宛先情報をエミュレータインターフェース５６によりエミュレータ６０へ供給する（ステップＳ５４）。エミュレータ６０は、第２のコーディング装置５０のエミュレータインターフェース５６から受信する宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0133】
また、サムネイル処理による宛先情報の認識に失敗した場合（ステップＳ５６、ＮＯ）、プロセッサ５１は、画像インターフェース５７により取得する図５又は図７に示すような表示画面を表示部９０に表示し、オペレータに操作部８０を用いて宛先情報をキー入力させる打鍵入力処理を行う（ステップＳ５７）。
【0134】
オペレータは、表示部９０に表示される図５又は図７に示す表示画面を目視（参照）しながら宛先情報を操作部８０によりキー入力する。第２のコーディング装置５０のプロセッサ５１は、オペレータが操作部８０を用いてキー入力する宛先情報を取得する。プロセッサ２１は、オペレータが操作部８０を用いてキー入力した宛先情報を取得すると、取得した宛先情報をエミュレータインターフェース５６によりエミュレータ６０へ供給する（ステップＳ５４）。エミュレータ６０は、第２のコーディング装置５０のエミュレータインターフェース５６から受信する宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0135】
次に、第２実施形態に係るコーディング装置としての第２のコーディング装置５０の第２の動作例について説明する。第２の動作例では、第１の動作例で並列処理として実行したサムネイル処理を制御装置８が指定するオリジナル画像に対する宛先の文字列の認識が失敗した場合に実行する。
図１２は、第２実施形態に係るコーディング装置としての第２のコーディング装置５０の第２の動作例を説明するためのフローチャートである。
図１２は、第２実施形態に係るコーディング装置としての第２のコーディング装置５０の第２の動作例を説明するためのフローチャートである。
【0136】
第２のコーディング装置５０は、画像インターフェース５７によりＶＣＤ２０が出力する表示画面をキャプチャボード７０でキャプチャした表示画面の画像データとして取得する（ステップＳ７１）。第２のコーディング装置５０のプロセッサ２１は、画像インターフェース５７により取得した表示画面の画像データをＲＡＭ５３又はＮＶＭ５４などのメモリに保持する。ここでは、図５に示す第１表示例の表示画面の画像データを取得したことを想定して説明する。
【0137】
プロセッサ５１は、ＶＣＤ２０の表示画面の画像データから表示画面のメイン表示領域４１に表示されるオリジナル画像を抽出する。プロセッサ５１は、抽出したオリジナル画像に対して制御装置８での文字認識とは異なる第２のアルゴリズムの文字認識によって宛先の文字列を認識する第２の認識処理を行う（ステップＳ７２）。
【0138】
プロセッサ５１は、第２の認識処理によって宛先の文字列の認識に成功した場合（ステップＳ７３、ＹＥＳ）、第２の認識処理によって得られた宛先の文字列に基づく宛先情報をエミュレータインターフェース５６によりエミュレータ６０に出力する（ステップＳ７４）。エミュレータ６０は、エミュレータインターフェース５６から受信した宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0139】
また、プロセッサ５１は、制御装置８が指定するオリジナル画像に対する第２の認識処理による宛先の文字列の認識に失敗した場合（ステップＳ７３、ＮＯ）、サムネイル画像として表示されるオリジナル画像以外の撮影画像から宛先情報を認識するサムネイル処理を実行する（ステップＳ８１－Ｓ８６）。
【0140】
プロセッサ５１は、サムネイル処理として、オリジナル画像以外の撮影画像のサムネイル画像に対して宛先領域を検出する検出処理を行う（ステップＳ８１）。プロセッサ５１は、どの撮影画像のサムネイル画像からも宛先領域が検出できなかった場合（ステップＳ８２、ＮＯ）、サムネイル画像からは宛先領域が検出できなかった旨をサムネイル処理の処理結果として保持する。
【0141】
また、プロセッサ５１は、オリジナル画像以外の撮影画像のサムネイル画像から宛先領域が検出できた場合（ステップＳ８２、ＹＥＳ）、宛先領域が検出されたサムネイル画像の撮影画像をオリジナル画像に入れ替える入替操作をエミュレータインターフェース５６によりキーボード／マウスエミュレータ６０へ送信する（ステップＳ８３）。これにより、キーボード／マウスエミュレータ６０は、入替操作を指示する操作信号をＶＣＤ２０の操作インターフェース２６へ送信する。ＶＣＤ２０のプロセッサ２１は、操作インターフェース２６により受信する入替操作の操作信号に応じてメイン表示領域４１のオリジナル画像を指定された撮影画像に入れ替えた表示画面を生成（更新）し、生成した表示画面の画像データを表示インターフェース２７により出力する。
【0142】
キャプチャボード７０は、表示インターフェース２７が出力するオリジナル画像を入れ替えた表示画面をキャプチャし、キャプチャした表示画面の画像データを第２のコーディング装置５０の画像インターフェース５７へ送信する。これにより、第２のコーディング装置５０のプロセッサ５１は、画像インターフェース５７により受信したオリジナル画像が入れ替えられた表示画面を取得する（ステップＳ８４）。
【0143】
さらに、プロセッサ２１は、オリジナル画像を入れ替えた表示画面を取得すると、入替処理で得られた表示画面に対してオリジナル画像の拡大回転操作（変形操作）を行う（ステップＳ８５）。プロセッサ５１は、変形操作を入力しない（変形操作が不要である）と判定した場合、ステップＳ６６へ進む。また、変形操作を入力すると判定した場合、プロセッサ５１は、オリジナル画像に対する位置の移動、拡大、回転などを指示する変形指示を生成し、変形操作の操作信号をエミュレータインターフェース５６およびエミュレータ６０を介してＶＣＤ２０へ供給する。
【0144】
ＶＣＤ２０は、操作インターフェース２６に入力される変形操作の操作信号に応じて変形（更新）したオリジナル画像をメイン表示領域４１に表示する表示画面を生成し、表示インターフェース２７から出力する。変形したオリジナル画像を表示する表示画面は、キャプチャボード７０によりキャプチャされ、キャプチャされた表示画面の画像データが第２のコーディング装置５０の画像インターフェース５７へ供給される。この結果、第２のコーディング装置５０のプロセッサ５１は、変形操作に応じて変形されたオリジナル画像を表示する表示画面を取得する。
【0145】
プロセッサ５１は、オリジナル画像を入れ替えた表示画面又は入れ替えたオリジナル画像を変形した画像を表示した表示画面を取得すると、取得した表示画面のオリジナル画像に対して制御装置８の文字認識とは異なる第２のアルゴリズムの文字認識処理によって宛先の文字列を認識する（ステップＳ８６）。プロセッサ５１は、入れ替えたオリジナル画像に対する第２のアルゴリズムによる文字認識による宛先の文字列の認識結果をサムネイル処理の処理結果として保持する。
【0146】
プロセッサ５１は、入れ替えたオリジナル画像から宛先の文字列が認識できなかった場合、サムネイル画像の撮影画像からは宛先情報が認識できなかった旨をサムネイル処理の処理結果として保持する。また、プロセッサ５１は、入れ替えたオリジナル画像から宛先の文字列が認識できた場合、認識した宛先の文字列を含む宛先情報をサムネイル処理の処理結果として保持する。
【0147】
プロセッサ５１は、サムネイル処理の結果として宛先情報の認識に成功したか否かを判断する（ステップＳ８７）。サムネイル処理による宛先情報の認識に成功した場合（ステップＳ８７、ＹＥＳ）、プロセッサ５１は、サムネイル処理により認識した宛先情報をエミュレータインターフェース５６によりエミュレータ６０へ供給する（ステップＳ７４）。エミュレータ６０は、第２のコーディング装置５０のエミュレータインターフェース５６から受信する宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0148】
また、サムネイル処理による宛先情報の認識に失敗した場合（ステップＳ８７、ＮＯ）、プロセッサ５１は、画像インターフェース５７により取得する図５又は図７に示すような表示画面を表示部９０に表示し、オペレータに操作部８０を用いて宛先情報をキー入力させる打鍵入力処理を行う（ステップＳ８９）。
【0149】
プロセッサ５１は、オペレータが操作部８０を用いてキー入力した宛先情報を取得すると、取得した宛先情報をエミュレータインターフェース５６によりエミュレータ６０へ供給する（ステップＳ７４）。エミュレータ６０は、第２のコーディング装置５０のエミュレータインターフェース５６から受信する宛先情報をキー入力する操作信号を生成し、生成した操作信号をＶＣＤ２０へ供給する。この結果、ＶＣＤ２０は、操作インターフェース２６に入力された操作信号が示す宛先情報を制御装置８へ送信し、コーディング情報に対するコーディング処理を終了する。
【0150】
以上のように、第２実施形態に係るコーディング装置としての第２のコーディング装置は、既存のＶＣＳにおけるＶＣＤの表示インターフェースと操作インターフェースとに接続される。第２のコーディング装置は、処理対象とする物品の複数の撮影画像から選出されたオリジナル画像と複数の撮影画像のサムネイル画像とを含む既存のＶＣＤの表示画面の画像を取得する。第２のコーディング装置は、既存のＶＣＤから取得した表示画面から抽出するオリジナル画像に対する宛先の文字列の認識に失敗した場合に宛先領域が検出できたサムネイル画像の撮影画像をオリジナル画像に入れ替える入替操作の操作信号を既存のＶＣＤに供給する。第２のコーディング装置は、オリジナル画像を入れ替えた表示画面を既存のＶＣＤから取得して入れ替えたオリジナル画像に対して宛先の文字列を認識する処理を行う。
【0151】
これにより、ＶＣＤから取得する表示画面におけるオリジナル画像に対する文字認識に失敗しても、当該表示画面のサムネイル画像から宛先領域が検出できれば、宛先領域が検出できたサムネイル画像の撮影画像をオリジナル画像に入れ替えて文字認識を行うことができ、最終的な文字認識率を向上させることができる。この結果、既存のＶＣＤの構成を変更することなく、第２のコーディング装置による宛先情報の認識率を向上させてコーディング処理の生産性を向上させることができる。
【0152】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【0153】
１…物品処理システム、２…ＶＣＳ、５（５Ａ、５Ｂ、５Ｃ、５Ｄ）…第２のコーディングシステム、６…ソータ、７…カメラ、８…制御装置、１１…プロセッサ、１２…ＲＯＭ、１３…ＲＡＭ、１４…ＮＶＭ、１５…カメラインターフェース、１６…通信部、１９…ソータインターフェース、２０（２０ａ、２０ｂ、２０ｃ、２０ｄ）…ＶＣＤ（コーディング装置）、２１…プロセッサ、２２…ＲＯＭ、２３…ＲＡＭ、２４…ＮＶＭ、２５…通信部、２６…操作インターフェース、２７…表示インターフェース、３０…操作部、４０…表示部、５０（５０ａ、５０ｂ、５０ｃ、５０ｄ）…第２のコーディング装置（コーディング装置）、５１…プロセッサ、５２…ＲＯＭ、５３…ＲＡＭ、５４…ＮＶＭ、５５…通信部、５６…エミュレータインターフェース、５７…画像インターフェース、５８…操作インターフェース、５９…表示インターフェース、６０（６０ａ、６０ｂ、６０ｃ、６０ｄ）…キーボード（ＫＢ）／マウスエミュレータ、７０（７０ａ、７０ｂ、７０ｃ、７０ｄ）…キャプチャボード、８０（８０ａ、８０ｂ、８０ｃ、８０ｄ）…操作部、９０（９０ａ、９０ｂ、９０ｃ、９０ｄ）…表示部。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
