特開 2024-146211 端末装置、サーバ、検査システムおよび検査方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024146211

(43)【公開日】2024-10-15

(54)【発明の名称】端末装置、サーバ、検査システムおよび検査方法

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20241004BHJP

【ＦＩ】

G06Q50/10

【審査請求】未請求

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2023058982

(22)【出願日】2023-03-31

(71)【出願人】

【識別番号】000003078

【氏名又は名称】株式会社東芝

(71)【出願人】

【識別番号】598076591

【氏名又は名称】東芝インフラシステムズ株式会社

(74)【代理人】

【識別番号】110003708

【氏名又は名称】弁理士法人鈴榮特許綜合事務所

(72)【発明者】

【氏名】北田 絢子

(72)【発明者】

【氏名】前田 匡哉

【テーマコード（参考）】

5L049

5L050

【Ｆターム（参考）】

5L049CC12

5L050CC12

(57)【要約】

【課題】 検査対象物品と特定物品との照合を容易に行える検査システム、端末装置、管理サーバ、および、検査方法を提供する。
【解決手段】 実施形態によれば、端末装置は、表示部と、操作部と、画像取得部と、通信部と、プロセッサと、を有する。表示部は、画像を表示する。操作部は、操作指示が入力される。画像取得部は、指定物品と照合する検査対象物品を撮影した撮影画像を取得する。通信部は、指定物品に関する情報を管理する。プロセッサは、操作部に入力された照合の指示に応じて検査対象物品の画像を含む撮影画像と照合要求とをサーバへ送信し、サーバから取得する検査対象物品の画像と指定物品との照合結果を表示部に表示する。
【選択図】図３

【特許請求の範囲】

【請求項1】

画像を表示する表示部と、
操作指示が入力される操作部と、
指定物品と照合する検査対象物品を撮影した撮影画像を取得する画像取得部と、
指定物品に関する情報を管理するサーバと通信する通信部と、
前記操作部に入力された照合の指示に応じて前記検査対象物品の画像を含む前記撮影画像と照合要求とを前記サーバへ送信し、前記サーバから取得する前記検査対象物品の画像と指定物品との照合結果を前記表示部に表示するプロセッサと、
を有する端末装置。

【請求項2】

前記プロセッサは、さらに、前記表示部に表示した照合結果に対して前記操作部により入力される前記検査対象物品に合致する指定物品の判定結果を前記サーバへ送信する、
請求項１に記載の端末装置。

【請求項3】

前記プロセッサは、さらに、前記判定結果に応じて前記サーバから提供される詳細情報を前記表示部に表示し、前記操作部により入力される前記詳細情報に基づく検査結果の登録が指示された場合に前記検査結果を前記サーバに送信する、
請求項２に記載の端末装置。

【請求項4】

前記プロセッサは、さらに、前記検査結果を示すレポートを作成する、
請求項３に記載の端末装置。

【請求項5】

さらに、プリンタに接続するインターフェースを有し、
前記プロセッサは、前記検査結果を示すレポートの印刷を前記プリンタに要求する、
請求項４に記載の端末装置。

【請求項6】

指定物品に関する情報を記憶する記憶部と、
端末装置と通信する通信部と、
前記端末装置から検査対象物品の画像を含む撮影画像と照合要求とを受信した場合、前記検査対象物品の画像に対する前記記憶部に情報を記憶した指定物品との照合を実行し、照合結果を前記端末装置へ送信するプロセッサと、
を有するサーバ。

【請求項7】

前記プロセッサは、前記端末装置から検査対象物品に合致する指定物品の判定結果を受信した場合に前記判定結果に関連する詳細情報を前記端末装置へ送信する、
請求項６に記載のサーバ。

【請求項8】

前記プロセッサは、前記詳細情報を送信した前記端末装置から受信する検査対象物品に対する検査結果を記憶装置に保存する、
請求項７に記載のサーバ。

【請求項9】

前記プロセッサは、前記検査対象物品に対する検査結果を受信した場合、前記検査結果と前記検査対象物品の画像とに基づいて前記記憶部が記憶する情報を更新する、
請求項８に記載のサーバ。

【請求項10】

端末装置とサーバとを有する検査システムにおいて、
前記端末装置は、
画像を表示する表示部と、
操作指示が入力される操作部と、
指定物品と照合する検査対象物品を撮影した撮影画像を取得する画像取得部と、
前記サーバと通信する第１の通信部と、
前記操作部に入力された照合の指示に応じて前記検査対象物品の画像を含む前記撮影画像と照合要求とを前記サーバへ送信し、前記サーバから取得する前記検査対象物品の画像と指定物品との照合結果を前記表示部に表示する第１のプロセッサと、を有し、
前記サーバは、
複数の指定物品に関する情報を記憶する記憶部と、
前記端末装置と通信する第１の通信部と、
前記端末装置から前記撮影画像と前記照合要求とを受信した場合、前記撮影画像に含まれる前記検査対象物品の画像に対する前記記憶部に情報を記憶した指定物品との照合を実行し、照合結果を前記端末装置へ送信する第２のプロセッサと、を有する、
検査システム。

【請求項11】

端末装置とサーバとを有する検査システムにおける検査方法であって、
前記端末装置は、
指定物品と照合する検査対象物品を撮影した撮影画像を取得し、
前記検査対象物品の画像を含む前記撮影画像と照合要求とを前記サーバへ送信し、
前記サーバから取得する前記検査対象物品の画像と指定物品との照合結果を表示装置に表示し、
前記サーバは、
複数の指定物品に関する情報を記憶部に記憶し、
前記端末装置からの前記撮影画像と前記照合要求とを受信した場合、前記撮影画像に含まれる前記検査対象物品の画像に対する前記記憶部に情報を記憶した指定物品との照合を実行し、
前記照合による照合結果を前記端末装置へ送信する、
検査方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、端末装置、サーバ、検査システムおよび検査方法に関する。

【背景技術】

【0002】

従来、物品を検査する検査場において、検査対象物品と指定物品とを照合する検査を行う検査システムがある。この種の検査システムは、検査対象物品に付されたマーク又はタグに記載された文字などが指定物品のものと合致するか否かを検査員が判定する。

【0003】

しかしながら、指定物品が多数存在していたり指定物品が更新されたりすると、検査員が全ての指定物品を把握しておくことが難しい。また、全ての検査員が熟練者であるとは限らず、検査作業に不慣れな人物が検査員となることもある。検査作業に不慣れな人物が検査員となる場合、検査作業に手間と時間とがかかってしまうという問題もある。

【0004】

さらに、指定物品と合致する検査対象物品を発見した検査員は、当該物品に関するレポートを作成する場合もある。指定物品と合致する検査対象物品に関するレポートには、種々の情報を載せる必要があり、レポートに載せる種々の情報を収集するのには多くの手間と時間とがかかる。さらに、人手によってレポートを作成すると、人手による入力ミスなどを無くして正確な報告書を作成するのが容易ではないという問題もある。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特表２０１４／１６３０１４号

【発明の概要】

【発明が解決しようとする課題】

【0006】

本発明が解決しようとする課題は、検査対象物品と特定物品との照合を容易に行える端末装置、サーバ、検査システムおよび検査方法を提供することである。

【課題を解決するための手段】

【0007】

実施形態によれば、端末装置は、表示部と、操作部と、画像取得部と、通信部と、プロセッサと、を有する。表示部は、画像を表示する。操作部は、操作指示が入力される。画像取得部は、指定物品と照合する検査対象物品を撮影した撮影画像を取得する。通信部は、指定物品に関する情報を管理する。プロセッサは、操作部に入力された照合の指示に応じて検査対象物品の画像を含む撮影画像と照合要求とをサーバへ送信し、サーバから取得する前記検査対象物品の画像と指定物品との照合結果を表示部に表示する。

【図面の簡単な説明】

【0008】

【図1】図１は、実施形態に係る端末装置とサーバとによる検査システムにおける処理の概要を説明するための図である。

【図2】図２は、実施形態に係る端末装置およびサーバを含む検査システムの構成例を示すブロック図である。

【図3】図３は、実施形態に係る検査システムの端末装置における制御系の構成例を示すブロック図である。

【図4】図４は、実施形態に係る検査システムのサーバにおける制御系の構成例を示すブロック図である。

【図5】図５は、実施形態に係る検査システムによる検査対象物品に対する検査処理の流れを説明するためのシーケンスである。

【図6】図６は、実施形態に係る検査システムによる検査対象物品に対する検査処理の流れを説明するためのシーケンスである。

【図7】図７は、実施形態に係る検査システムにおける端末装置が表示する表示例を示す図である。

【図8】図８は、実施形態に係る検査システムにおける端末装置が表示する表示例を示す図である。

【図9】図９は、実施形態に係る検査システムにおける端末装置が表示する表示例を示す図である。

【発明を実施するための形態】

【0009】

以下、実施形態について、図面を参照して説明する。
まず、実施形態に係る検査システム１の構成について説明する。
図１は、実施形態に係る検査システム１における処理の流れを概略的に説明するための図である。
検査システム１は、検査対象とする物品（検査対象物品）Ｐが予め指定物品リストＬに登録されている指定物品と合致するかを検査するシステムである。

【0010】

端末装置３は、検査対象物品を含む撮影画像を取得し、撮影画像と照合要求とをサーバ２へ送信する。サーバ２は、撮影画像に含まれる検査対象物品の画像と指定物品との照合を実行する。例えば、サーバ２は、検査対象物品に付されたロゴマーク（ロゴ）又は検査対象物品に添付されるタグの記載内容に類似する指定物品の候補を照合結果として端末装置３に提供する。端末装置３は、サーバ２による照合結果を表示し、検査対象物品に合致する指定物品の判定入力を受け付ける。

【0011】

さらに、サーバ２は、端末装置３で入力される検査対象物品に合致する指定物品の判定結果を取得する。サーバ２は、判定結果に対応する指定物品に関する詳細情報や検査対象物品に関する詳細情報などを収集し、収集した詳細情報を端末装置３へ提供する。端末装置３は、サーバ２が収集する判定結果に関する詳細情報を参照して検査結果を確定する。サーバ２は、端末装置３で確定された検査結果を取得し、検査対象物品に対する検査結果として記憶部に保存する。また、端末装置３は、検査結果が確定された場合、検査対象物品に関する検査結果を示すレポートを作成する。

【0012】

ここで、検査システム１が検査対象とする検査対象物品Ｐは、特定の物品に限定されるものではない。例えば、検査対象物品Ｐは、他国から輸入される輸入品であっても良いし、指定される宛先へ送られる流通過程の物品であっても良いし、倉庫などに格納されている物品であっても良い。

【0013】

また、検査システム１において、検査対象物品Ｐと照合される指定物品は、ロゴマークなどの画像あるいは物品の商品名やブランド名等の文字情報などにより特定される。指定物品は、例えば、輸入差し止め品であって良いし、不良品などであっても良い。検査システム１は、複数の指定物品に関するロゴマークあるいは物品の商品名やブランド名などの特定情報を指定物品リストＬに登録する。指定物品リストＬは、随時更新されるようにしても良く、新たに登録される指定物品に関する情報が新規に登録されても良いし、登録済みの指定物品に関する情報が更新されても良い。

【0014】

図１に示すように、検査システム１は、サーバ２と端末装置３とを有する。端末装置３は、サーバ２と通信接続される情報処理装置である。端末装置３は、カメラを備えるタブレットＰＣやスマートフォンであっても良いし、カメラを接続したコンピュータであっても良いし、カメラおよび表示部として機能するヘッドマウントディスプレイ（スマートグラスなど）に情報入力端末を接続したものであっても良い。サーバ２は、指定物品リストＬを有し、種々の情報処理を実行するコンピュータである。

【0015】

端末装置３は、カメラによって撮影した検査対象物品Ｐの画像（撮影画像）を取得し、検査対象物品Ｐの画像を含む撮影画像をサーバ２へ送信する。サーバ２は、端末装置３から受信する検査対象物品Ｐを撮影した撮影画像に基づいて検査対象物品Ｐと指定物品リストに登録されている指定物品とを照合する。サーバ２は、照合結果として、検査対象物品Ｐと合致する候補となる指定物品を示す情報を照合結果として端末装置３へ提供する。

【0016】

端末装置３は、サーバ２からの照合結果を表示部に表示し、検査員による検査対象物品Ｐと指定物品との照合の判定結果を受け付ける。検査員は、表示部に表示されたサーバ２による照合結果を参照しつつ、端末装置３の操作部により検査対象物品Ｐと合致する指定物品又は検査対象物品Ｐと合致する指定物品がないことなどを判定した判定結果を入力する。端末装置３は、検査員による判定結果をサーバ２に登録したり、判定結果に基づく検査対象物品に関するレポートを作成（印刷）したりする。

【0017】

次に、実施形態に係る検査システム１の構成について説明する。
図２は、実施形態に係る検査システム１の構成例を説明するための図である。
検査システム１は、サーバ２、端末装置３およびプリンタ４を有する。検査システム１において、サーバ２は、ネットワークを介して、各地の検査場に存在する端末装置３が通信接続される。各検査場には、複数又は単数の端末装置３が配置される。各端末装置３は、ネットワークを介してサーバ２に通信接続する。また、検査場において、各端末装置３は、レポートなどを印刷するためのプリンタ４に接続される。

【0018】

端末装置３は、上述したように、カメラおよびタッチパネル付きのディスプレイを備えるタブレットＰＣやスマートフォンであっても良いし、カメラを接続したコンピュータ（例えば、ディスクトップ型のＰＣ）であっても良い。また、端末装置３は、カメラおよび表示部を有するスマートグラスなどのウエアラブルデバイスに情報入力端末としてコンピュータを接続したものであっても良い。

【0019】

サーバ２は、後述する各種の処理を実行するコンピュータにより構成される。また、サーバ２は、指定物品リストＬなどを格納する記憶部とネットワークを介して各端末装置３と通信するための通信インターフェースとを有する。なお、サーバ２は、１つのサーバコンピュータで構成しても良いし、複数のサーバコンピュータで構成しても良い。

【0020】

次に、実施形態に係る検査システム１のサーバ２における制御系の構成について説明する。
図３は、実施形態に係る検査システム１のサーバ２における制御系の構成例を示すブロック図である。
図３に示す構成例において、サーバ２は、プロセッサ２１、記憶部２２、および、通信部２３を有する。
プロセッサ２１は、演算処理を実行する。プロセッサ２１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）である。プロセッサ２１は、記憶部２２に記憶したプログラムを実行することにより種々の処理を実行する処理部として機能する。

【0021】

記憶部２２は、ＲＯＭ、ＲＡＭ、書き換え可能な不揮発メモリなどの記憶デバイスにより構成される。記憶部２２のＲＯＭは、読み出し専用の不揮発性メモリである。記憶部２２のＲＯＭは、プログラムのデータおよび制御データなどを記憶する。記憶部２２のＲＡＭは、ワーキングメモリとして機能する揮発性のメモリであり、データを一時的に記憶する。

【0022】

記憶部２２の書き換え可能な不揮発性メモリは、例えば、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＳＤ）などにより構成される。記憶部２２における書き換え可能な不揮発性メモリは、プログラム、設定データ、検査結果などの種々の情報を記憶する。

【0023】

また、記憶部２２の不揮発性メモリは、指定物品リストＬ、および、物品管理データベース（ＤＢ）２５を記憶する。指定物品リストＬは、照合処理において参照する指定物品に関する情報を格納したリストである。物品管理データベース２５は、指定物品を含む種々の物品に関する情報を格納するデータベースである。例えば、物品管理データベース２５には、指定物品に関する詳細情報および物品番号で特定される物品に関する詳細情報などが格納される。また、物品管理データベース２５は、検査対象物品に対する検査結果を示す情報を格納するようにしても良い。

【0024】

通信部２３は、各検査システム１における端末装置３と通信するための通信インターフェースである。プロセッサ２１は、通信部２３を介して端末装置３と通信する。プロセッサ２１は、通信部２３を介して端末装置３から検査対象物品の画像を含む撮影画像を取得したり、端末装置３へ照合結果や判定結果に対する詳細情報を送信したり、端末装置３から判定結果や検査結果を取得したりする。

【0025】

次に、実施形態に係る検査システム１の端末装置３における制御系の構成について説明する。
図４は、実施形態に係る検査システム１の端末装置３における制御系の構成例を示すブロック図である。
図４に示すように、端末装置３は、プロセッサ３１、記憶部３２、通信部３３、プリンタインターフェース（Ｉ／Ｆ）３４、カメラ３５、表示部３６、および、操作部３７を有する。
プロセッサ３１は、端末装置３全体の制御および演算処理などを実行する。プロセッサ３１は、例えば、ＣＰＵである。プロセッサ３１は、記憶部３２に記憶したプログラムを実行することにより種々の処理を実行する処理部として機能する。

【0026】

記憶部３２は、ＲＯＭ、ＲＡＭ、書き換え可能な不揮発メモリなどの種々の記憶デバイスにより構成される。記憶部３２のＲＯＭは、読み出し専用の不揮発性メモリである。記憶部３２のＲＯＭは、プログラムのデータおよび制御データなどを記憶する。記憶部３２のＲＡＭは、ワーキングメモリとして機能する揮発性のメモリである。記憶部３２のＲＡＭは、データを一時的に記憶する。

【0027】

記憶部３２の書き換え可能な不揮発性メモリは、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＳＤ）などにより構成される。記憶部３２の書き換え可能な不揮発性メモリは、プログラム、および、各種の設定情報などの情報を記憶する。

【0028】

通信部３３は、サーバ２と通信するための通信インターフェースである。プロセッサ３１は、通信部３３によりネットワークを介してサーバ２と通信する。プロセッサ３１は、通信部３３により撮影画像又は検査員による判定結果などのデータをサーバ２へ送信したり、サーバ２から照合結果などのデータを受信したりする。

【0029】

プリンタインターフェース３４は、プリンタ４に接続するためのインターフェースである。プリンタインターフェース３４は、ローカルにプリンタ４に接続するインターフェースであっても良いし、有線又は無線によるネットワーク通信によりプリンタ４に接続するインターフェースであっても良い。プロセッサ３１は、プリンタインターフェース３４により後述するレポートをプリンタ４に印刷させる。

【0030】

カメラ３５は、画像を撮影する。カメラ３５は、検査員の操作によって検査対象物品Ｐの画像を撮影する。カメラ３５は、タブレットＰＣ或いはスマートフォンなどの端末装置３本体の筐体に設けられたものであっても良いし、インターフェースにより端末装置３本体に接続されるものであっても良い。なお、端末装置３は、カメラ３５の代わりに、外部の撮影装置（カメラ）が撮影する画像を取得するインターフェースを備えるものであっても良い。

【0031】

表示部３６は、情報を表示するためのデバイスである。表示部３６は、液晶又は有機ＥＬなどの表示デバイスにより表示画面を構成する。プロセッサ３１は、表示部３６が表示画面に表示する表示内容を制御する。なお、端末装置３は、表示部３６を接続するインターフェースを有し、外部装置としての表示部３６がインターフェースに接続される構成としても良い。

【0032】

操作部３７は、検査員などの操作者からの操作指示を入力するためのデバイスである。操作部３７は、例えば、表示部３６の表示画面上に設けたタッチパネルである。操作部３７としてのタッチパネルは、表示画面においてタッチされた位置を検知し、検知結果をプロセッサ３１へ供給する。プロセッサ３１は、タッチパネルで検知したタッチ位置と表示画面における表示内容とに基づいて操作指示の内容を特定する。例えば、プロセッサ３１は、表示部３６に表示した操作ボタンへの入力を操作部としてのタッチパネルにより検知する。なお、実施形態において、端末装置３は、表示部３６および操作部３７として機能するタッチパネル付きの表示装置を備えるものとして説明する。

【0033】

次に、実施形態に係る検査システム１における検査対象物品Ｐに対する検査処理について説明する。
図５および図６は、実施形態に係る検査システム１における検査対象物品Ｐに対する検査処理の流れを説明するためのシーケンスである。
まず、検査員は、検査対象物品Ｐを選定する。例えば、検査員は、宛先が指定されている箱（梱包部材）内にある複数の物品から取り出す１つの物品を検査対象物品Ｐとして選定する。また、検査員は、物流貨物などが集積される検査場において複数の物品から選定する１つの物品を検査対象物品Ｐとするようにしても良い。検査員は、検査対象物品Ｐに対する検査を実施する場合、端末装置３において操作部２７などを操作することにより検査（照合）開始を指示する。

【0034】

端末装置３のプロセッサ３１は、検査開始の指示に応じて、通信部３３によりネットワークを介してサーバ２にアクセスし、検査開始を要求する（ステップＳＴ１１）。例えば、プロセッサ３１は、ブラウザを起動してサーバ２にアクセスし、サーバ２に対して検査開始要求を送信する。

【0035】

サーバ２は、通信部２３により端末装置３からアクセスを受信し、当該端末装置３からの検査開始要求を受け付ける。サーバ２のプロセッサ２１は、端末装置３からの検査開始要求を受け付けると、検査処理を実行するための応答を端末装置３へ出力する（ステップＳＴ１２）。例えば、サーバ２のプロセッサ２１は、端末装置３からの検査開始要求に対する応答として、ネットワーク上で提供する検査処理（リモート検査）用のＵＲＬを端末装置３へ送信する。

【0036】

端末装置３は、通信部３３によりサーバ２からの応答を受信する。端末装置３のプロセッサ２１は、サーバ２からの応答に基づいて照合の対象となる検査対象物品Ｐの撮影画像を登録するための登録画面を表示部３６に表示する（ステップＳＴ１３）。例えば、プロセッサ３１は、ブラウザによりサーバ２が指定するＵＲＬにアクセスし、サーバ２が提供する検査対象物品Ｐの撮影画像を登録するための登録画面を表示部３６に表示する。

【0037】

端末装置３のプロセッサ３１は、登録画面を表示部３６に表示すると、検査員の操作に応じてカメラ３５により検査対象物品Ｐの画像を撮影する（ステップＳＴ１４）。例えば、検査員は、検査対象物品Ｐ全体の画像を撮影するだけでなく、検査対象物品Ｐにおいて指定物品と照合するためのロゴマークの表示部分又は検査対象物品Ｐに添付されるタグなどの画像を撮影する。

【0038】

なお、端末装置３がカメラ又はカメラを備えるスマートグラスなどのウエアラブルデバイスに接続したコンピュータとして構成される場合、検査員は、カメラ又はウエアラブルデバイスのカメラにより撮影した検査対象物品Ｐの画像を含む撮影画像を端末装置３としてのコンピュータに入力する。これにより、端末装置３としてのコンピュータは、外部装置としてのカメラ又はウエアラブルデバイスのカメラが撮影した検査対象物品Ｐの画像を取得するようにしても良い。

【0039】

プロセッサ３１は、カメラ３５が撮影した撮影画像を取得すると、撮影画像を表示部３６に表示し、検査員による操作に応じてカメラ３５が撮影した撮影画像を検査対象物品Ｐの画像として登録する（ステップＳＴ１５）。プロセッサ３１は、検査対象物品Ｐの画像を登録した場合、検査員による指示に応じて登録した検査対象物品Ｐの画像に対する指定物品との照合をサーバ２に要求する（ステップＳＴ１６）。例えば、プロセッサ３１は、通信部３３により登録が指示された画像をサーバ２へアップロードすると共に、指定物品との照合処理をサーバ２に要求する。

【0040】

図７は、端末装置３の表示部３６が表示する検査対象物品Ｐの画像を登録するための登録画面の表示例を示す図である。
端末装置３のプロセッサ３１は、サーバ２から提供される図７に示すような登録画面を表示部３６に表示する。図７に示す登録画面は、第１表示欄６１、第２表示欄６２、画像登録ボタン６３、宛先登録ボタン６４、照合ボタン６５および終了ボタン６６を有する。

【0041】

第１表示欄６１は、検査対象物品Ｐの画像を表示する。例えば、プロセッサ３１は、検査員が検査対象物品の撮影を選択した状態（例えば、第１表示欄６１を選択した状態）でカメラ３５が撮影した撮影画像を第１表示欄６１に表示する。画像登録ボタン６３は、第１表示欄６１に対応する位置に表示される。検査員が画像登録ボタン６３を選択（タッチ）すると、第１表示欄６１に表示している画像が検査対象物品Ｐの画像として登録される。

【0042】

第２表示欄６２は、検査対象物品Ｐに対する宛名情報を表示する。図７に示す例では、検査対象物品Ｐ又は検査対象物品Ｐを梱包する部材に添付されている宛名の記載面の画像が宛先情報として表示されている。例えば、プロセッサ３１は、検査員が第２表示欄６２を選択した状態でカメラ３５により検査対象物品の宛名記載面を撮影した撮影画像を第２表示欄６２に表示する。宛先登録ボタン６４は、第２表示欄６２に対応する位置に表示される。検査員が宛先登録ボタン６４を選択（タッチ）すると、第２表示欄６２に表示している情報が検査対象物品Ｐに対する宛先情報として登録される。

【0043】

例えば、プロセッサ３１は、第２表示欄６２に表示する宛名情報の画像から宛先情報を認識するようにしても良い。例えば、プロセッサ３１は、第２表示欄６２に表示する宛名情報の画像に宛先を示すバーコードが含まれる場合、バーコードを認識することにより宛先情報を認識する。また、プロセッサ３１は、第２表示欄６２に表示する宛名情報の画像に対する文字認識によって文字で表示されている宛先情報を認識するようにしても良い。また、プロセッサ３１は、照合ボタン６５で照合が指示された場合に検査対象物品の画像と共に宛先情報の認識結果をサーバ２へ送信（登録）するようにしても良い。

【0044】

照合ボタン６５は、第１表示欄６１に表示する登録された検査対象物品の画像に対する指定物品との照合処理を指示するボタンである。検査員は、第１表示欄６１に表示した検査対象物品の画像に対する指定物品との照合処理を指示する場合に照合ボタン６５を選択（タッチ）する。プロセッサ３１は、照合ボタン６５が選択された場合、第１表示欄６１に表示する検査対象物品の画像に対する照合をサーバ２へ要求する。

【0045】

また、終了ボタン６６は、検査の終了を指示するためのボタンである。検査員は、検査を終了する場合に終了ボタン６６を選択（タッチ）する。プロセッサ３１は、終了ボタン６６が選択された場合、検査処理を終了する。

【0046】

なお、端末装置３のプロセッサ３１は、第１表示欄６１に表示する検査対象物品の画像が登録されていれば、第２表示欄６２に表示する宛名情報が登録されてなくても、照合ボタン６５への入力に応じてサーバ２に照合を要求する。また、照合ボタン６５が選択された場合に第２表示欄６２に表示する宛名情報の画像を取得すると、サーバ２は、検査対象物品の画像に対する指定物品との照合だけでなく、宛名情報の画像に対する宛先情報の認識処理なども実行するようにしても良い。

【0047】

サーバ２は、通信部２３により端末装置３からの照合要求を受信する。サーバ２のプロセッサ２１は、端末装置３からの撮影画像と照合要求とを受信すると、端末装置３からの撮影画像を保存し、撮影画像に含まれる検査対象物品Ｐの画像と指定物品リストＬの各指定物品とを照合する処理を含む照合処理を実行する（ステップＳＴ１７）。また、プロセッサ２１は、端末装置３から撮影画像と共に宛先情報を取得した場合、撮影画像と共に宛先情報を保存する。

【0048】

サーバ２のプロセッサ２１は、端末装置３から受信した撮影画像から指定物品と照合する検査対象物品Ｐの画像部分を抽出する。例えば、プロセッサ２１は、撮影画像に含まれる検査対象物品Ｐの画像におけるロゴマークの部分の画像又は検査対象物品Ｐに添付されるタグの画像を撮影画像から抽出し、撮影画像から抽出した画像と指定物品リストＬに登録されている指定物品に関する情報とを照合する。このような照合処理によって、プロセッサ２１は、撮影された検査対象物品Ｐと類似する指定物品の候補を選出し、選出した候補を照合結果とする。

【0049】

具体例として、プロセッサ２１は、検査対象物品Ｐのロゴマークの画像と類似する指定物品のロゴマークの画像との照合し、検査対象物品Ｐのロゴマークの画像と類似するロゴマークの指定物品を候補として選出する。プロセッサ２１は、検査対象物品Ｐのロゴマークと類似する指定物品のロゴマークを複数選出しても良い。例えば、プロセッサ２１は、検査対象物品Ｐのロゴマークとの類似度が所定値以上となる指定物品のロゴマークを候補として選出する。

【0050】

また、プロセッサ２１は、撮影画像から抽出するロゴマーク又はタグの画像に対する文字認識によって得られる文字情報と指定物品の文字情報とを照合しても良い。この場合、プロセッサ２１は、照合結果として、検査対象物品Ｐのロゴマーク又はタグの画像に対する文字認識の結果と類似する指定物品の文字情報を候補として選出する。例えば、プロセッサ２１は、検査対象物品Ｐの画像に対する文字認識結果としての文字情報との一致度が所定値以上となる指定物品の文字情報を候補として選出する。

【0051】

さらに、プロセッサ２１は、検査対象物品Ｐの画像に対する類似度によって選出する指定物品の候補と検査対象物品Ｐの画像に対する文字認識結果との一致度によって選出する指定物品の候補とを合わせて検査対象物品Ｐに類似する指定物品の候補として選出するようにしても良い。

【0052】

サーバ２のプロセッサ２１は、上述したような照合処理が終了すると、照合処理の結果（照合結果）を端末装置３へ送信する（ステップＳＴ１８）。例えば、プロセッサ２１は、照合結果として、撮影画像に含まれる検査対象物品Ｐの画像と合致する候補となる指定物品の一覧を端末装置３へ送信する。プロセッサ２１は、検査対象物品Ｐの画像と指定物品との照合によって複数の候補が得られた場合、それらの候補となる各指定物品の画像を照合結果として端末装置３へ送信する。また、プロセッサ２１は、照合によって得られた指定物品の候補と共に、撮影画像から抽出した検査対象物品Ｐの画像に対する文字認識結果を照合結果として端末装置３へ送信しても良い。

【0053】

端末装置３は、サーバ２へ照合要求した後、通信部３３によりサーバ２からの照合結果を受信する。端末装置３のプロセッサ３１は、サーバ２からの照合結果を受信すると、照合結果を表示部３６に表示する（ステップＳＴ１９）。例えば、プロセッサ３１は、照合結果として取得する検査対象物品Ｐと合致する指定物品の候補の一覧を表示部３６に表示する。

【0054】

図８は、端末装置３の表示部３６が表示する撮影した検査対象物品Ｐの画像に対するサーバ２による照合結果の表示例を示す図である。
端末装置３のプロセッサ３１は、サーバ２から提供される照合結果に基づいて図８に示すような照合結果を表示部３６に表示する。図８に示す照合結果の画面は、第１表示欄７１、第２表示欄７２、ＯＣＲ表示欄７４、検索ボタン７５、検索欄７６、検索ボタン７７、宛先表示欄７８、および、除外ボタン７９を有する。

【0055】

第１表示欄７１は、照合処理の対象とした検査対象物品Ｐの画像を表示する。例えば、プロセッサ３１は、サーバ２へ送信した検査対象物品を含む撮影画像を第１表示欄７１に表示する。また、プロセッサ３１は、サーバ２が指定物品の照合した撮影画像から抽出したロゴマーク又はタグの画像を第１表示欄に表示するようにしても良い。

【0056】

第２表示欄７２は、照合結果として得られた検査対象物品Ｐと合致する指定物品の候補を一覧７２ａ、７２ｂ、７２ｃ、７２ｄで表示する。図８に示す例では、検査対象物品Ｐと合致する候補となる指定物品のロゴマーク部分の画像７２ａ、７２ｂ、７２ｃ、７２ｄを一覧で表示している。例えば、プロセッサ３１は、サーバ２から照合結果として候補となる複数の指定物品の画像を取得し、それらの画像を第２表示欄７２に並べて表示する。

【0057】

第２表示欄７２に表示する指定物品の候補７２ａ、７２ｂ、７２ｃ、７２ｄは、操作部３７としてのタッチパネルで選択可能に表示される。検査員は、第２表示欄７２に表示する候補から検査対象物品Ｐと合致する指定物品を決定すると、その表示部分をタッチすることで検査対象物品Ｐと合致する指定物品の判定結果を指示入力する。すなわち、プロセッサ３１は、第２表示欄７２に表示された候補から何れか１つが指定されると、指定された指定物品を検査対象物品Ｐと合致する指定物品の判定結果として取得する。

【0058】

ＯＣＲ表示欄７４は、検査対象物品の画像に対する文字認識結果を表示する。プロセッサ３１は、サーバから取得する照合結果に検査対象物品の画像に対する文字認識結果が含まれる場合、ＯＣＲ表示欄７２に文字認識結果を表示する。

【0059】

検索ボタン７５は、ＯＣＲ表示欄７４に対応して表示される。検索ボタン７５が指示された場合、プロセッサ３１は、ＯＣＲ表示欄７４に表示されている文字認識結果に基づいて指定物品の候補を選出することをサーバ２に要求（検索要求）する。プロセッサ３１は、ＯＣＲ表示欄７４に文字認識結果を表示した場合に検索ボタン７５を有効（選択可能）にするようにしても良い。

【0060】

検索欄７６は、検査員が指定する検索対象の文字情報を表示する。検索欄７６には検査員が操作部３７を用いて検索する文字情報が入力される。プロセッサ３１は。検索欄７６が選択した状態において検索欄７６への文字情報の入力を受け付け、操作部３７を用いて入力される文字情報を検索欄７６に表示する。

【0061】

検索ボタン７７は、検索欄７６に対応して表示される。プロセッサ３１は、検索ボタン７７が指示された場合、検索欄７６に表示している文字情報に基づいて指定物品の候補を選出することをサーバ２に要求（検索要求）する。プロセッサ３１は、検索欄７６に文字情報を表示した場合に検索ボタン７７を有効（選択可能）にするようにしても良い。

【0062】

宛先表示欄７８は、検査対象物品に対する宛先情報を表示する。プロセッサ３１は、当該検査対象物品の宛先情報の認識結果が得られている場合に、宛先表示欄７８に宛先情報を表示する。プロセッサ３１は、図８に示す画面を表示した状態において検査対象物品に対する宛先を示すバーコード又は文字情報を認識し、その認識結果としての宛先情報を宛先表示欄７８に表示するようにしても良い。

【0063】

また、宛先表示欄７８には、詳細ボタン７８ａを表示するようにしても良い。詳細ボタン７８ａが指示された場合、プロセッサ３１は、宛先表示欄７８に表示している宛先情報に対する詳細情報をサーバ２から取得し、表示するようにしても良い。例えば、宛先情報の物品番号が含まれる場合、プロセッサ３１は、物品番号に対応する物品に関する詳細情報をサーバ２から取得して表示するようにしても良い。

【0064】

除外ボタン７９は、検査対象物品に合致する指定物品がないことを指示するためのボタンである。検査員は、検査対象物品に合致する指定物品がないと判定した場合に除外ボタン７９を選択（タッチ）する。プロセッサ３１は、除外ボタン７９が選択された場合、検査対象物品Ｐが指定物品ではないとすることを検査員による判定結果とする。

【0065】

端末装置３のプロセッサ３１は、図８に示すような照合結果を表示部３６に表示すると、検査員による操作部３７への入力を受け付ける。プロセッサ３１は、照合結果を表示した場合に文字情報による指定物品の検索が指示された場合（ステップＳＴ２０、ＹＥＳ）、指定された文字情報による指定物品の検索をサーバ２に要求する（ステップＳＴ２１）。

【0066】

例えば、図８に示す表示画面において検索ボタン７５が指示された場合、プロセッサ３１は、ＯＣＲ表示欄７４に表示されている文字情報に基づく指定物品の検索をサーバ２に要求する。また、プロセッサ３１は、図８に示す表示画面において検索ボタン７７が指示された場合、プロセッサ３１は、検索欄７６に表示されている文字情報に基づく指定物品の検索をサーバ２に要求する。

【0067】

サーバ２は、端末装置３からの文字情報に基づく指定物品の検索要求を通信部３３による受信する。サーバ２のプロセッサ２１は、検索要求を受信すると、指定された文字情報に基づいて指定物品リストＬを検索する（ステップＳＴ２２）。サーバ２のプロセッサ２１は、端末装置３から検索が指定された文字情報による検索結果が得られると、通信部３３により検索結果を検索要求元の端末装置３へ送信する（ステップＳＴ２３）。

【0068】

ここで、指定物品リストＬには、指定物品のロゴマークなどの画像だけでなく、ロゴマークが示す文字列又はブランド名などの文字情報が指定物品の文字情報として登録されているものとする。例えば、プロセッサ２１は、端末装置３から検索要求された文字情報と指定物品の文字情報との一致度が所定値以上となる指定物品の候補を選出し、選出した候補を検索結果とする。具体例としては、プロセッサ３１は、検索要求された文字情報が「ＡＢ Ｄ」である場合、指定物品リストＬに登録されている文字情報が「ＡＢＢＤ」又は「ＡＢＣＤ」である指定物品を候補した検索結果を得るようにしても良い。

【0069】

検索要求を送信した端末装置３は、通信部３３によりサーバ２からの検索結果を受信する。端末装置３のプロセッサ３１は、サーバ２からの検索結果として得られた指定物品の候補を表示部３６に表示する（ステップＳＴ２４）。これにより、端末装置３のプロセッサ３１は、指定した文字情報に基づいて検索した指定物品も検索対象物品に合致する指定物品の候補として検査員に提示することができる。

【0070】

プロセッサ３１は、表示部３６に照合結果および検索結果を表示した状態において、検索員による操作部３７への判定結果の入力を受け付ける（ステップＳＴ２５）。すなわち、検査員は、サーバ２から取得する照合結果又は検索画面を表示部３６に表示した状態において、操作部３７による検査対象物品と合致する指定物品、又は、合致する指定物品なしの指示を入力する。例えば、図８に示す照合画面において、検査員は、検査対象物品に合致する指定物品の判定結果として、第２表示欄７２に表示した指定物品の何れか、又は、除外ボタン７９を指示する。

【0071】

プロセッサ３１は、操作部３７により検査対象物品Ｐに合致する指定物品の判定結果が入力されると、入力（指定）された判定結果をサーバ２へ送信する（ステップＳＴ２６）。
サーバ２は、照合結果又は検索結果を送信した後、端末装置３からの判定結果を通信部３３により受信する。サーバ２のプロセッサ２１は、端末装置３からの判定結果を受信すると、端末装置３からの判定結果に対する詳細情報を収集する（ステップＳＴ２７）。例えば、プロセッサ２１は、判定結果において検索対象物品に合致すると判定された指定物品に関する詳細情報を物品管理データベース２５から収集する。また、プロセッサ２１は、外部装置などから判定結果としての指定物品に関する詳細情報を収集しても良い。

【0072】

なお、サーバ２のプロセッサ２１は、端末装置３からの判定結果として検査対象物品Ｐに合致する指定物品がなしであった場合、当該判定結果を記憶部３２に保存して一連の検査処理を終了するようにしても良い。

【0073】

サーバ２のプロセッサ２１は、端末装置３からの判定結果に応じた詳細情報を収集すると、収集した詳細情報を端末装置３へ送信する（ステップＳＴ２８）。
端末装置３は、検索対象物品に合致すると判定した指定物品を示す判定結果を送信した後、サーバ２から判定結果の指定物品に関する詳細情報を受信する。端末装置３のプロセッサ３１は、サーバ２が収集した判定結果の指定物品に関する詳細情報を受信すると、サーバ２から受信した情報を検査対象物品に合致する指定物品に関する詳細情報として表示部３６に表示する（ステップＳＴ２９）。プロセッサ３１は、表示部３６に表示した詳細情報について、検査結果に含める情報の追加および変更、又は、検査結果の確定の入力を受け付ける。

【0074】

図９は、端末装置３の表示部３６が表示する検査対象物品に合致する指定物品の詳細情報を表示した表示例を示す図である。
端末装置３のプロセッサ３１は、サーバ２から提供される詳細情報に基づいて図９に示すような詳細画面を表示部３６に表示する。図９に示す詳細画面は、第１表示欄８１、第２表示欄８２、指定物品情報欄８３、宛先情報欄８４、変更追加ボタン８５、および、確定ボタン８６を有する。

【0075】

第１表示欄８１は、検査対象物品Ｐの画像を表示する。例えば、プロセッサ３１は、指定物品と合致したロゴマーク又はタグの画像を第１表示欄８１に表示するようにしても良い。
第２表示欄８２は、検査対象物品Ｐに合致すると判定された指定物品の画像を表示する。例えば、プロセッサ３１は、第１表示欄８１に表示した画像と対応する指定物品の画像を第２表示欄８２に表示するようにしても良い。

【0076】

指定物品情報欄８３は、検査対象物品Ｐに合致すると判定された指定物品に関する詳細情報を表示する。例えば、指定物品情報欄８３に表示する詳細情報は、サーバ２が端末装置３での判定結果に応じて収集した情報である。

【0077】

宛先情報欄８４は、検査対象物品Ｐに対する宛先情報に関する詳細情報を表示する。例えば、宛先情報欄８４に表示する詳細情報は、サーバ２が端末装置３での判定結果に応じて収集する情報である。ただし、検査対象物品Ｐが宛先を付与されていない物品である場合には宛先情報欄８４は表示しないようにしても良い。

【0078】

変更追加ボタン８５は、指定物品情報欄８３又は宛先情報欄８４に検査員が追記する情報がある場合、又は、指定物品情報欄８３又は宛先情報欄８４に表示した情報に対して検査員が変更する情報が有る場合に指示される。プロセッサ３１は、変更追加ボタン８５が指示された場合、操作部３７を用いた操作による指定物品情報欄８３又は宛先情報欄８４への情報の入力および修正を受け付ける。

【0079】

確定ボタン８６は、詳細画面の表示内容で検査結果を確定する場合に指示されるボタンである。プロセッサ３１は、確定ボタン８６が指示された場合に詳細画面において表示している内容を検査結果としてサーバ２に送信する。これにより、サーバ２は、端末装置３で確定が指示された詳細情報を検査対象物品に対する検査結果として記憶部３２などに登録する。

【0080】

また、確定ボタン８６は、詳細画面の表示内容でレポートを作成するボタン（レポート作成ボタン）としても機能する。プロセッサ３１は、確定ボタン８６が指示された場合に詳細画面において表示している内容に基づく検査結果のレポートを作成する。プロセッサ３１は、作成したレポートの印刷をプリンタ４に要求するようにしても良い。これにより、端末装置３は、検査結果が確定した場合に検査結果の詳細情報を示すレポートを作成することができる。

【0081】

なお、確定ボタンとレポートボタンとは、それぞれ設けても良い。例えば、検査結果を確定した場合のレポート作成が任意であれば、確定ボタンとレポートボタンとを設け、検査結果の登録とレポート作成とをそれぞれ指示するようにしても良い。

【0082】

プロセッサ３１は、表示部３６に詳細情報を表示した状態において情報の追加および変更が指示されると、操作部３７を用いて検査員が入力する追加の情報又は変更する情報を詳細情報として反映させる（ステップＳＴ３０）。

【0083】

プロセッサ３１は、表示部３６に詳細情報を表示した状態において詳細情報の確定が指示されると、表示部３６に表示している詳細情報を検査対象物品Ｐに対する検査結果として確定する（ステップＳＴ３１）。プロセッサ３１は、検査結果を確定すると、表示部３６に表示している詳細情報を検査結果として確定し、確定した検査結果の登録をサーバ２に要求する（ステップＳＴ３２）。

【0084】

サーバ２は、詳細情報を送信した後、端末装置３からの確定した詳細情報としての検査結果を通信部３３により受信する。サーバ２のプロセッサ２１は、端末装置３からの検査結果を受信すると、受信した検査結果を記憶部３２に登録する（ステップＳＴ３３）。例えば、プロセッサ２１は、検査対象物品の画像に対応づけて確定した詳細情報としての検査結果を記憶部３２に保存する。

【0085】

また、プロセッサ２１は、検査対象物品の検査結果を受信すると、検査結果と検査対象物品の画像とに基づいて指定物品との照合を行うための指定物品に関する情報を学習する学習処理を実行する（ステップＳＴ３５）。プロセッサ２１は、学習処理によって得られた情報によって指定物品リストＬおよび物品管理データベース２５に登録されている当該検査対象物品に合致した指定物品に関する情報を更新する。これにより、サーバ２は、端末装置３から取得する検査対象物品の画像と指定物品の画像との照合による候補選出の精度を高めることができる。

【0086】

また、プロセッサ３１は、表示部３６に詳細情報を表示した状態においてレポート作成が指示されると、表示部３６に表示している詳細情報の内容に基づいてレポートを作成する（ステップＳＴ３３）。例えば、プロセッサ３１は、作成したレポートの印刷データを生成し、プリンタインターフェース３４を介して接続されるプリンタ４にレポートの印刷データを送信する。これにより、プリンタ４は、端末装置３からの印刷データに基づいてレポートを印刷できる。

【0087】

以上のように、実施形態に係る検査システムによれば、検査作業に不慣れな検査員であっても、指定物品を特定するためのロゴマークや品名などを覚えることなく、指定物品に該当する検査対象物品（例えば、特定のブランドの物品又は類似品など）を容易に特定することができる。

【0088】

また、実施形態に係る検査システムによれば、指定物品を特定するためのロゴマークや品名などを登録するリストを適宜更新することができるため、指定物品が追加されたり指定物品を特定するための情報が更新されたりしても、指定物品の候補として選出することができ、指定物品に該当する検査対象物品を確実に検出することができる。

【0089】

また、実施形態に係る検査システムによれば、検査対象物品を指定物品として判定した場合に当該指定物品や検査対象物品に関する詳細情報を簡単にサーバから取得することでき、指定物品と判定した検査対象物品に関する詳細情報を収集するための手間が掛からないようにできる。

【0090】

また、実施形態に係る検査システムによれば、指定物品と判定された検査対象物品に関する報告書（レポート）をサーバが収集した詳細情報に基づいて人手によらず迅速に正確な作成することができ、作業員による検査作業や報告書作成に要する時間などを削減するとこもできる。

【0091】

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0092】

１…検査システム、Ｐ…検査対象物品、２…サーバ、Ｌ…指定物品リスト、３…端末装置、４…プリンタ、２１…プロセッサ（第２のプロセッサ）、２２…記憶部、２３…通信部（第２の通信部）、２５…物品管理データベース、３１…プロセッサ（第１のプロセッサ）、３２…記憶部、３３…通信部（第２の通信部）、３４…プリンタインターフェース、３５…カメラ、３６…表示部（表示装置）、３７…操作部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】