特開 2024-113739 自動取引装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024113739

(43)【公開日】2024-08-23

(54)【発明の名称】自動取引装置

(51)【国際特許分類】

   G06T 7/00 20170101AFI20240816BHJP

   G08B 13/196 20060101ALI20240816BHJP

【ＦＩ】

G06T7/00 300F

G08B13/196

【審査請求】未請求

【請求項の数】4

【出願形態】ＯＬ

(21)【出願番号】P 2023018881

(22)【出願日】2023-02-10

(71)【出願人】

【識別番号】000237639

【氏名又は名称】富士通フロンテック株式会社

(74)【代理人】

【識別番号】110002918

【氏名又は名称】弁理士法人扶桑国際特許事務所

(72)【発明者】

【氏名】小原 勝利

(72)【発明者】

【氏名】金元 浩一

(72)【発明者】

【氏名】内木 一義

【テーマコード（参考）】

5C084

5L096

【Ｆターム（参考）】

5C084AA02

5C084AA13

5C084BB33

5C084CC14

5C084DD11

5C084EE09

5C084GG78

5C084HH12

5C084HH13

5L096DA03

5L096EA06

5L096FA02

5L096FA59

5L096GA51

(57)【要約】      （修正有）

【課題】防犯効果を向上させる自動取引装置を提供する。
【解決手段】カメラ１１が、操作者を撮影可能なように設置される自動取引装置１０において、制御部１２は、カメラ１１が撮影した撮影画像２から明るさが所定値以下の画素が連続した領域２ａを抽出し、領域２ａが撮影画像２の端の画素を含んでいるか否かおよび領域２ａが閾値より大きいか否かに基づいて、カメラ１１が塞がれているか否かを判定してカメラ１１が塞がれていることを端末１に通知する。これにより、自動取引装置１０は、カメラ１１が正常に操作者を撮影できていないことを端末１の操作者に通知することができる。
【選択図】図１

【特許請求の範囲】

【請求項1】

操作者を撮影可能なように設置されたカメラと、
前記カメラが撮影した撮影画像から明るさが所定値以下の画素が連続した領域を抽出し、前記領域が前記撮影画像の端の画素を含んでいるか否かおよび前記領域が閾値より大きいか否かに基づいて、前記カメラが塞がれているか否かを判定する制御部と、
を有する自動取引装置。

【請求項2】

前記制御部は、前記領域が前記撮影画像の四辺のうちのいずれかの辺上の画素を全て含んでいるか否かに基づいて、前記カメラが塞がれているか否かを判定する、
請求項１記載の自動取引装置。

【請求項3】

前記制御部は、前記撮影画像を平滑化し、前記撮影画像から明るさが所定値以下の画素が連続した領域を抽出する、
請求項１記載の自動取引装置。

【請求項4】

前記制御部は、前記カメラが塞がれていると判定した場合、前記カメラが塞がれていることを端末に通知する、
請求項１記載の自動取引装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、自動取引装置に関する。

【背景技術】

【0002】

銀行口座の利用者は、現金自動預払機（ＡＴＭ：Automated Teller Machine）を用いて自身の銀行口座についての取引をすることがある。ＡＴＭは、不正な取引をする利用者の画像を保存する等、防犯のためにＡＴＭの操作者を撮影するカメラを設置することがある。

【0003】

ＡＴＭの操作者の撮影に関する技術としては、例えば、不正取引の証拠として常に顧客の画像を正しく撮影する自動取引装置が提案されている。また、例えば、両手による操作を誘導し取引処理を中断しないでカメラの窓の遮蔽状態を解除する機能を有する自動取引装置が提案されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００４－１３９４４７号公報

【特許文献2】特開２０１０－８６３８６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ＡＴＭのカメラが塞がれてしまうと、操作者を撮影できず防犯効果が低下するため、カメラが塞がれたことを検知し、管理者等に通知することが考えられる。カメラが塞がれたことを検知する方法としては、例えば、撮影した画像全体が黒くなっていた場合、カメラが塞がれたことを検知することが考えられる。しかし、画像全体が黒くなっていた場合にカメラが塞がれたと検知すると、カメラの一部を塞がれた場合等にカメラが塞がれたことを検知できないことがある。

【0006】

１つの側面では、本件は、防犯効果を向上させることを目的とする。

【課題を解決するための手段】

【0007】

１つの案では、カメラと制御部とを有する自動取引装置が提供される。カメラは、操作者を撮影可能なように設置される。制御部は、カメラが撮影した撮影画像から明るさが所定値以下の画素が連続した領域を抽出し、領域が撮影画像の端の画素を含んでいるか否かおよび領域が閾値より大きいか否かに基づいて、カメラが塞がれているか否かを判定する。

【発明の効果】

【0008】

１態様によれば、防犯効果を向上させることができる。

【図面の簡単な説明】

【0009】

【図1】第１の実施の形態に係る情報処理システムの一例を示す図である。

【図2】第２の実施の形態に係る情報処理システムの一例を示す図である。

【図3】ＡＴＭのハードウェアの一構成例を示す図である。

【図4】ＡＴＭの外観の一例を示す図である。

【図5】ＡＴＭの機能例を示すブロック図である。

【図6】第２の実施の形態の画像処理の一例を示す図である。

【図7】カメラ塞ぎ判定処理の手順の一例を示すフローチャートである。

【発明を実施するための形態】

【0010】

以下、本実施の形態について図面を参照して説明する。なお各実施の形態は、矛盾のない範囲で複数の実施の形態を組み合わせて実施することができる。
〔第１の実施の形態〕
まず第１の実施の形態について説明する。

【0011】

図１は、第１の実施の形態に係る情報処理システムの一例を示す図である。第１の実施の形態は、自動取引装置１０の操作者を撮影するカメラ１１が塞がれていることを自動取引装置１０が検知するものである。第１の実施の形態の情報処理システムは、端末１および自動取引装置１０を有する。

【0012】

端末１は、自動取引装置に接続されたコンピュータである。例えば、端末１は、ネットワークを介して自動取引装置１０に接続され、自動取引装置１０の管理者によって操作されるコンピュータである。自動取引装置１０は、操作者の操作に従って金融取引を実行する装置である。自動取引装置１０は、例えば、金融機関等に設置されたＡＴＭである。自動取引装置１０は、カメラ１１および制御部１２を有する。

【0013】

カメラ１１は、自動取引装置１０の操作者を撮影可能なように設置されたカメラである。例えば、カメラ１１は、自動取引装置１０を操作する操作者が立つ位置にレンズが向くよう自動取引装置１０に設置される。制御部１２は、自動取引装置１０を制御し、所要の処理を実行可能である。制御部１２は、例えば、自動取引装置１０が有するプロセッサまたは演算回路である。

【0014】

まず、制御部１２は、カメラ１１が撮影した撮影画像２を取得する。例えば、制御部１２は、自動取引装置１０を操作する操作者を人感センサ等が検知すると、カメラ１１を起動させ、操作者が自動取引装置１０から離れるまでの操作中の映像を撮影させる。制御部１２は、操作中の映像として撮影された撮影画像２を取得する。

【0015】

制御部１２は、撮影画像２から明るさが所定値以下の画素が連続した領域２ａを抽出する。制御部１２は、撮影画像２の各画素について、明るさの度合いを示す数値が所定値以下であるか否かを判定し、明るさの度合いを示す数値が所定値以下であると判定された画素が連続した領域２ａを抽出する。明るさの度合いを示す数値は、例えば、画素値、階調値、輝度値等である。例えば、制御部１２は、撮影画像２をグレースケール化し、平滑化する。制御部１２は、平滑化した撮影画像２に対して、明るさの度合いを示す数値が所定値以下の画素を黒、明るさの度合いを示す数値が所定値より大きい画素を白とする二値化処理をする。そして、制御部１２は、二値化した撮影画像２の黒の画素が連続した領域２ａを抽出する。

【0016】

そして、制御部１２は、領域２ａが撮影画像２の端の画素を含んでいるか否かおよび領域２ａが閾値より大きいか否かに基づいて、カメラ１１が塞がれているか否かを判定する。ここで、制御部１２は、領域２ａが撮影画像２の四辺のうちのいずれかの辺上の画素を全て含んでいるか否かに基づいて、カメラ１１が塞がれているか否かを判定する。例えば、制御部１２は、領域２ａが撮影画像２の四辺のうちのいずれかの辺上の画素を全て含んでいる場合、領域２ａが撮影画像２の端の画素を含んでいると判定する。そして、制御部１２は、領域２ａが撮影画像２の四辺のうちのいずれかの辺上の画素を全て含んでいるかつ、領域２ａが閾値より大きい場合、カメラ１１が塞がれていると判定する。

【0017】

制御部１２は、カメラ１１が塞がれていると判定した場合、カメラ１１が塞がれていることを端末１に通知する。例えば、制御部１２は、カメラ１１が塞がれていることを示すメッセージを端末１に送信する。

【0018】

第１の実施の形態によれば、自動取引装置１０のカメラ１１は、操作者を撮影可能なように設置される。自動取引装置１０の制御部１２は、カメラ１１が撮影した撮影画像２から明るさが所定値以下の画素が連続した領域２ａを抽出する。そして、制御部１２は、領域２ａが撮影画像２の端の画素を含んでいるか否かおよび領域２ａが閾値より大きいか否かに基づいて、カメラ１１が塞がれているか否かを判定する。

【0019】

ここで、カメラ１１が操作者の手や所持品等の遮蔽物で塞がれる場合、遮蔽物をカメラ１１に近づけた方向から遮蔽物が撮影画像２に写りこむ。これにより、撮影画像２の端は遮蔽物が写ることによって暗くなる。そこで、自動取引装置１０は、端から始まる暗い画素の領域が閾値より大きいか否かに基づいて、カメラ１１が塞がれているか否かを判定することで、カメラ１１が塞がれているか否かを適切に判定できる。よって、自動取引装置１０は、防犯効果を向上させることができる。

【0020】

また、制御部１２は、領域２ａが撮影画像２の四辺のうちのいずれかの辺上の画素を全て含んでいるか否かに基づいて、カメラ１１が塞がれているか否かを判定する。ここで、カメラ１１を塞ぐ遮蔽物は、カメラ１１に近い位置に配置されることが多いため、遮蔽物が撮影画像２に写りこんだ方向の端の全体が暗くなることが多い。よって、自動取引装置１０は、領域２ａが辺上の画素を全て含んでいるか否かに基づいて、カメラ１１が塞がれているか否かを判定することで、カメラ１１が塞がれたか否かの判定精度を向上させることができる。

【0021】

また、制御部１２は、撮影画像２を平滑化し、撮影画像２から明るさが所定値以下の画素が連続した領域２ａを抽出する。これにより、自動取引装置１０は、撮影画像２からノイズを除去し、カメラ１１が塞がれたか否かの判定精度を向上させることができる。

【0022】

また、制御部１２は、カメラ１１が塞がれていると判定した場合、カメラ１１が塞がれていることを端末１に通知する。これにより、自動取引装置１０は、カメラ１１が正常に操作者を撮影できていないことを端末１の操作者に通知することができる。

【0023】

〔第２の実施の形態〕
次に、第２の実施の形態について説明する。第２の実施の形態は、ＡＴＭに設置されたカメラが塞がれたことを検知するものである。

【0024】

図２は、第２の実施の形態に係る情報処理システムの一例を示す図である。第２の実施の形態の情報処理システムは、ＡＴＭ１００および端末３１を有する。ＡＴＭ１００は、顧客による入力操作を受け付け、受け付けた入力に基づいて金融取引を実行する装置である。ＡＴＭ１００は、ネットワーク２０を介して端末３１に接続されている。ネットワーク２０は、例えば、ＡＴＭ１００が設置された銀行のＬＡＮ（Local Area Network）である。端末３１は、ＡＴＭ１００の管理者が操作するコンピュータである。

【0025】

ＡＴＭ１００は、ＡＴＭ１００が操作者によって操作されているとき、ＡＴＭ１００が有するカメラによって操作者を撮影する。ここで、ＡＴＭ１００は、ＡＴＭ１００のカメラが操作者を撮影した撮影画像に基づいて、カメラが塞がれているか否かを判定する。そして、ＡＴＭ１００は、カメラが塞がれていると検知した場合、端末３１にカメラが塞がれていることを通知する。

【0026】

図３は、ＡＴＭのハードウェアの一構成例を示す図である。ＡＴＭ１００は、プロセッサ１０１によって装置全体が制御されている。プロセッサ１０１には、バス１０８を介してメモリ１０２と複数の周辺機器が接続されている。プロセッサ１０１は、マルチプロセッサであってもよい。プロセッサ１０１は、例えばＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、またはＤＳＰ（Digital Signal Processor）である。プロセッサ１０１がプログラムを実行することで実現する機能の少なくとも一部を、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）等の電子回路で実現してもよい。

【0027】

メモリ１０２は、ＡＴＭ１００の主記憶装置として使用される。メモリ１０２には、プロセッサ１０１に実行させるＯＳ（Operating System）のプログラムやアプリケーションプログラムの少なくとも一部が一時的に格納される。また、メモリ１０２には、プロセッサ１０１による処理に利用する各種データが格納される。メモリ１０２としては、例えばＲＡＭ（Random Access Memory）等の揮発性の半導体記憶装置が使用される。

【0028】

バス１０８に接続されている周辺機器としては、ストレージ装置１０３、ネットワークインタフェース１０４、表示処理ユニット１０５、タッチパネル処理ユニット１０６およびＩ／Ｏ（Input／Output）インタフェース１０７がある。

【0029】

ストレージ装置１０３は、内蔵した記録媒体に対して、電気的または磁気的にデータの書き込みおよび読み出しを行う。ストレージ装置１０３は、ＡＴＭ１００の補助記憶装置として使用される。ストレージ装置１０３には、ＯＳのプログラム、アプリケーションプログラム、および取引履歴情報等を含む各種データが格納される。なお、ストレージ装置１０３としては、例えばＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）を使用することができる。

【0030】

ネットワークインタフェース１０４は、ネットワーク２０に接続されている。ネットワークインタフェース１０４は、ネットワーク２０を介して、端末３１との間でデータの送受信を行う。

【0031】

表示処理ユニット１０５には、ディスプレイ１１１が接続される。表示処理ユニット１０５は、プロセッサ１０１からの命令に従って、操作案内等の各種情報をディスプレイ１１１の画面に表示させる。ディスプレイ１１１としては、有機ＥＬ（Electro Luminescence）を用いた表示装置や液晶表示装置等がある。

【0032】

タッチパネル処理ユニット１０６には、タッチパネル１１２が接続される。タッチパネル１１２は、例えば、ディスプレイ１１１の前面に配置される。タッチパネル処理ユニット１０６は、利用者の指がタッチパネル１１２に接触あるいは接近した画面上の位置を検出し、プロセッサ１０１に通知する。

【0033】

Ｉ／Ｏインタフェース１０７には、カード処理ユニット１１３、通帳処理ユニット１１４、硬貨処理ユニット１１５、紙幣処理ユニット１１６、人感センサ１１７およびカメラ１１８が接続される。Ｉ／Ｏインタフェース１０７は、プロセッサ１０１の命令に従って、接続する各部にプロセッサ１０１からの指示を通知する。また、Ｉ／Ｏインタフェース１０７は、各部から取得した情報をバス１０８経由でプロセッサ１０１に通知する。

【0034】

カード処理ユニット１１３は、カードの取り込みおよび放出を制御する。カード処理ユニット１１３は、取り込んだカードに付された磁気で記録された情報（口座番号等）を読み込む。

【0035】

通帳処理ユニット１１４は、通帳の取り込みと放出を制御する。また、通帳処理ユニット１１４は、取り込んだ通帳に付された磁気で記録された情報（口座番号等）を読み込む。また、通帳処理ユニット１１４は、通帳に印字を行う機能も備えており、通帳の記帳が可能である。

【0036】

硬貨処理ユニット１１５は、プロセッサ１０１の指示に従って硬貨の放出および取込みと、硬貨の出入口の扉の開閉とを制御する。紙幣処理ユニット１１６は、プロセッサ１０１の指示に従って紙幣の放出および取込みと、紙幣の出入口の扉の開閉とを制御する。紙幣処理ユニット１１６は、紙幣の種別および記番号を読み取る機能を備える。紙幣処理ユニット１１６は、入出金の際に出し入れした紙幣の記番号を読み取り、プロセッサ１０１に出力する。

【0037】

人感センサ１１７は、人物を検出し、検出結果をプロセッサ１０１に出力する。人感センサ１１７は、例えば、所定の範囲にある人体から発せられる赤外線を受光部から受光すると、人体を検出したことをプロセッサ１０１に通知する。人感センサ１１７は、例えば、赤外線センサである。

【0038】

カメラ１１８は、プロセッサ１０１からの命令に従って、カメラ１１８のレンズを向けた先の光景の静止画または動画のデータを生成し、メモリ１０２に格納する。カメラ１１８は、ＡＴＭ１００の操作者を撮影できるよう設置される。

【0039】

また、Ｉ／Ｏインタフェース１０７は、可搬型記録媒体２５からデータを読み込みまたは、可搬型記録媒体２５にデータを書き込むことができる。可搬型記録媒体２５は、例えば、ＤＶＤ（Digital Versatile Disc）やＣＤ（Compact Disc）等の記録媒体である。可搬型記録媒体２５は、取引履歴情報等を格納できる。

【0040】

なお、第１の実施の形態に示した自動取引装置１０も、図３に示したＡＴＭ１００と同様のハードウェアにより実現することができる。また、プロセッサ１０１は、第１の実施の形態に示した制御部１２の一例である。

【0041】

ＡＴＭ１００は、例えばコンピュータ読み取り可能な記録媒体に記録されたプログラムを実行することにより、第２の実施の形態の処理機能を実現する。ＡＴＭ１００に実行させる処理内容を記述したプログラムは、様々な記録媒体に記録しておくことができる。例えば、ＡＴＭ１００に実行させるプログラムを、ストレージ装置１０３に格納しておくことができる。プロセッサ１０１は、ストレージ装置１０３内のプログラムの少なくとも一部をメモリ１０２にロードし、プログラムを実行する。またＡＴＭ１００に実行させるプログラムを、可搬型記録媒体２５に記録しておくこともできる。可搬型記録媒体２５に格納されたプログラムは、例えばプロセッサ１０１からの制御により、ストレージ装置１０３にインストールされた後、実行可能となる。またプロセッサ１０１が、可搬型記録媒体２５から直接プログラムを読み出して実行することもできる。

【0042】

次に、ＡＴＭ１００の外観について説明する。
図４は、ＡＴＭの外観の一例を示す図である。ＡＴＭ１００は、水平な第１面と操作者の正面に配置される第２面とを有する。第１面には、ディスプレイ１１１およびタッチパネル１１２が配置される。ディスプレイ１１１は、ＡＴＭ１００の操作画面を表示する。タッチパネル１１２は、ディスプレイ１１１の前面に配置される。タッチパネル１１２は、ディスプレイ１１１が表示した画面に対する操作者のタッチ操作を検知する。これにより、ディスプレイ１１１およびタッチパネル１１２は、ＡＴＭ１００による取引操作の案内と操作者からの指示の受付とを行う。

【0043】

第２面には、カード出入口２１、通帳出入口２２、紙幣出入口２３、硬貨出入口２４、人感センサ１１７およびカメラ１１８が配置される。カード出入口２１は、操作者によるキャッシュカードの挿入とカード処理ユニット１１３によるキャッシュカードの放出とに用いられる出入口である。カード処理ユニット１１３は、カード出入口２１に挿入されたキャッシュカードから口座番号等の情報を読み取る。また、カード処理ユニット１１３は、取引終了後にキャッシュカードをカード出入口２１から放出する。

【0044】

通帳出入口２２は、操作者による通帳の挿入と通帳処理ユニット１１４による通帳の放出とに用いられる出入口である。通帳処理ユニット１１４は、通帳出入口２２に挿入された通帳から口座番号等の情報を読み取る。また、通帳処理ユニット１１４は、通帳出入口２２から挿入された通帳に印字を行う。また、通帳処理ユニット１１４は、取引終了後に通帳を通帳出入口２２から放出する。

【0045】

紙幣出入口２３は、操作者による紙幣の投入と紙幣処理ユニット１１６による紙幣の放出とに用いられる出入口である。紙幣処理ユニット１１６は、紙幣出入口２３に投入された紙幣の読み取りを行う。また、紙幣処理ユニット１１６は、出金される紙幣を紙幣出入口２３から放出する。硬貨出入口２４は、操作者による硬貨の投入と硬貨処理ユニット１１５による硬貨の放出とに用いられる出入口である。硬貨処理ユニット１１５は、硬貨出入口２４に投入された硬貨の読み取りを行う。また、硬貨処理ユニット１１５は、出金される硬貨を硬貨出入口２４から放出する。

【0046】

人感センサ１１７は、受光部が第２面の正面に向くように設置される。人感センサ１１７は、タッチパネル１１２を操作可能な操作位置に操作者が来ると、操作者が発する赤外線を受光し、操作者を検知できる。

【0047】

カメラ１１８は、レンズが第２面の正面に向くように設置される。カメラ１１８は、人感センサ１１７が操作者を検知している間、操作位置の操作者を撮影する。そして、ＡＴＭ１００は、カメラ１１８が撮影した映像をストレージ装置１０３に格納する。

【0048】

このようにして、ＡＴＭ１００は、カメラ１１８によってＡＴＭ１００を操作中の操作者を撮影することができる。例えば、ＡＴＭ１００は、撮影した映像を保存しておき、不正な取引が行われた場合に当該取引時の映像を提供することで、不正な取引をした操作者を特定できるようにする。しかし、カメラ１１８が塞がれてしまうと、ＡＴＭ１００は、操作者を適切に撮影することができない。そこで、ＡＴＭ１００は、カメラ１１８が撮影した画像に基づいて、カメラ１１８が塞がれたことを検知し、管理者が操作する端末３１に通知する。次に、ＡＴＭ１００の機能について詳細に説明する。

【0049】

図５は、ＡＴＭの機能例を示すブロック図である。ＡＴＭ１００は、撮影処理部１２０、判定部１３０および通知部１４０を有する。撮影処理部１２０、判定部１３０および通知部１４０は、メモリ１０２に記憶されたプログラムをプロセッサ１０１が実行することで実現される。

【0050】

撮影処理部１２０は、カメラ１１８を制御して、ＡＴＭ１００の操作者を撮影した画像を取得する。撮影処理部１２０は、人感センサ１１７がＡＴＭ１００の操作者を検知した場合、カメラ１１８に撮影を開始させる。そして、撮影処理部１２０は、人感センサ１１７がＡＴＭ１００の操作者を検知しなくなるまで、撮影を継続するようカメラ１１８を制御する。撮影処理部１２０は、カメラ１１８が撮影した撮影画像を取得する。

【0051】

判定部１３０は、撮影処理部１２０が取得した撮影画像を画像処理し、カメラ１１８が塞がれているか否かを判定する。判定部１３０は、カメラ１１８から取得した撮影画像をグレースケールに変換する。判定部１３０は、グレースケールに変換した撮影画像を平滑化する。判定部１３０は、平滑化した画像を二値化する。例えば、判定部１３０は、平滑化した画像の階調値が所定値以下の画素を黒、階調値が所定値より大きい画素を白とした画像を生成する。判定部１３０は、二値化した画像の黒の画素が連続した領域を抽出する。

【0052】

そして、判定部１３０は、抽出した領域が画像のいずれかの辺上の画素を全て含むか否かおよび抽出した領域の面積が閾値より大きいか否かに基づいて、カメラ１１８が塞がれているか否かを判定する。判定部１３０は、抽出した領域が画像のいずれかの辺上の画素を全て含むかつ、抽出した領域の面積が閾値より大きい場合、カメラ１１８が塞がれていると判定する。

【0053】

通知部１４０は、判定部１３０がカメラ１１８が塞がれていると判定した場合、カメラ１１８が塞がれていることを端末３１に通知する。例えば、通知部１４０は、カメラ１１８が塞がれていることを示すメッセージを端末３１に送信する。

【0054】

なお、図５に示した各要素間を接続する線は通信経路の一部を示すものであり、図示した通信経路以外の通信経路も設定可能である。次に、カメラ１１８が塞がれているか否かを判定するための画像処理について詳細に説明する。

【0055】

図６は、第２の実施の形態の画像処理の一例を示す図である。判定部１３０は、カメラ１１８がＡＴＭ１００の操作者を撮影した撮影画像に対する画像処理をし、カメラ１１８が塞がれているか否かを判定する。

【0056】

まず、判定部１３０は、カメラ１１８から取得した撮影画像をグレースケール化して画像４１を生成する。画像４１は、撮影画像の各画素のＲＧＢ値が、階調値に変換された画像である。なお、階調値は、高いほど画素が明るいことを示す。次に、判定部１３０は、画像４１を平滑化し、二値化して画像４２を生成する。平滑化では、判定部１３０は、所定数の画素を１画素に集約し、階調値の範囲である階調数の低減をして、濃淡のばらつきを低減する。例えば、判定部１３０は、画像４１の８×８画素を１画素に集約し、階調数を２５６から８へ低減する。二値化では、判定部１３０は、平滑化した画像４１の階調値が所定値以下の画素を黒、階調値が所定値より大きい画素を白とする。

【0057】

画像４２は、判定部１３０によって撮影画像を変換した、各画素が黒または白である画像である。判定部１３０は、画像４２における黒の画素の分布からカメラ１１８が塞がれているか否かを判定する。判定部１３０は、画像４２から黒の画素が連続した領域を抽出する。判定部１３０は、抽出した領域に画像４２のいずれかの辺上の画素が全て含まれるか否かおよび抽出した領域が閾値より大きいか否かを判定する。なお、いずれかの辺上の画素は、左右上下いずれかの最も端の画素である。

【0058】

判定部１３０は、抽出した領域に画像４２のいずれかの辺上の画素が全て含まれるかつ、抽出した領域が閾値より大きい場合、カメラ１１８が塞がれていると判定する。また、判定部１３０は、抽出した領域が画像４２のいずれの辺上についても、含んでいない画素があるまたは、抽出した領域が閾値以下である場合、カメラ１１８が塞がれていないと判定する。なお、判定部１３０は、黒の画素が連続した領域が複数ある場合、例えば、複数の領域全てに対して上記の判定をし、いずれかの領域に対する判定においてカメラ１１８が塞がれていると判定された場合、カメラ１１８が塞がれていると判定する。

【0059】

このようにして、判定部１３０は、カメラ１１８が塞がれているか否かを判定する。ここで、カメラ１１８が操作者の手や所持品等の遮蔽物で塞がれる場合、遮蔽物をカメラ１１８に近づけた方向から遮蔽物が撮影画像に写りこむ。また、カメラ１１８を塞ぐ遮蔽物は、カメラ１１８に近い位置に配置されることが多いため、遮蔽物が撮影画像に写りこんだ方向の端の全体が暗くなることが多い。そこで、判定部１３０は、暗い画素が連続した領域を抽出し、抽出した領域に撮影画像のいずれかの辺上の画素が全て含まれるかつ、抽出した領域が閾値より大きい場合にカメラ１１８が塞がれていると判定する。これにより、判定部１３０は、カメラ１１８が塞がれているか否かを適切に判定できる。

【0060】

ここで、カメラ１１８が塞がれているか否かを判定する方法として、撮影画像全体が暗くなっている場合にカメラ１１８が塞がれていると判定する方法も考えられる。しかし、カメラ１１８の一部が塞がれた場合、撮影画像全体が暗くなっている場合にカメラ１１８が塞がれていると判定する方法では、カメラ１１８が塞がれていると判定できない。一方、第２の実施の形態では、判定部１３０は、端から始まる暗い画素の領域が閾値より大きいか否かに基づいて、カメラ１１８が塞がれているか否かを判定しているため、カメラ１１８の一部が塞がれた場合でも適切に判定できる。よって、判定部１３０は、防犯効果を向上させることができる。

【0061】

また、判定部１３０は、グレースケール化した撮影画像を平滑化してから、二値化して黒の画素が連続した領域を抽出する。判定部１３０は、平滑化することによって、撮影画像の濃淡のばらつきを低減し、ノイズを除去できる。これにより、判定部１３０は、遮蔽物が写りこんだ端の辺上の画素がノイズによって明るくなってしまっていても、ノイズを除去してから領域を抽出でき、抽出した領域に当該辺上の画素が全て含まれると判定できる。よって、判定部１３０は、平滑化により、カメラ１１８が塞がれたか否かの判定精度を向上させることができる。

【0062】

次に、ＡＴＭ１００が実行するカメラ塞ぎ判定処理について詳細に説明する。
図７は、カメラ塞ぎ判定処理の手順の一例を示すフローチャートである。以下、図７に示す処理をステップ番号に沿って説明する。

【0063】

［ステップＳ１１］撮影処理部１２０は、人感センサ１１７がＡＴＭ１００の操作者を検知したか否かを判定する。撮影処理部１２０は、人感センサ１１７がＡＴＭ１００の操作者を検知したと判定した場合、処理をステップＳ１２に進める。また、撮影処理部１２０は、人感センサ１１７がＡＴＭ１００の操作者を検知していないと判定した場合、処理をステップＳ１１に進める。

【0064】

［ステップＳ１２］撮影処理部１２０は、カメラ１１８に撮影を開始させ、人感センサ１１７がＡＴＭ１００の操作者を検知しなくなるまで、撮影を継続するようカメラ１１８を制御する。撮影処理部１２０は、カメラ１１８が撮影した撮影画像を取得する。

【0065】

［ステップＳ１３］判定部１３０は、カメラ１１８から取得した撮影画像をグレースケールに変換する。例えば、判定部１３０は、ステップＳ１２で取得した撮影画像の各画素のＲＧＢ値を、階調値に変換した画像４１を生成する。

【0066】

［ステップＳ１４］判定部１３０は、ステップＳ１３でグレースケールに変換した撮影画像を平滑化する。例えば、判定部１３０は、画像４１の所定数の画素を１画素に集約し、階調値の範囲である階調数を低減させる。

【0067】

［ステップＳ１５］判定部１３０は、ステップＳ１４で平滑化した画像を二値化する。例えば、判定部１３０は、平滑化した画像４１の階調値が所定値以下の画素を黒、階調値が所定値より大きい画素を白とした画像４２を生成する。

【0068】

［ステップＳ１６］判定部１３０は、ステップＳ１５で二値化した画像の黒の画素が連続した領域を抽出する。
［ステップＳ１７］判定部１３０は、ステップＳ１６で抽出した領域が画像のいずれかの辺上の画素を全て含むか否かを判定する。判定部１３０は、抽出した領域が画像のいずれかの辺上の画素を全て含むと判定した場合、処理をステップＳ１８に進める。また、判定部１３０は、抽出した領域が画像のいずれの辺上についても、含んでいない画素があると判定した場合、処理をステップＳ１１に進める。

【0069】

［ステップＳ１８］判定部１３０は、ステップＳ１６で抽出した領域の面積が閾値より大きいか否かを判定する。判定部１３０は、抽出した領域の面積が閾値より大きいと判定した場合、処理をステップＳ１９に進める。また、判定部１３０は、抽出した領域の面積が閾値以下と判定した場合、処理をステップＳ１１に進める。

【0070】

［ステップＳ１９］通知部１４０は、カメラ１１８が塞がれていることを端末３１に通知する。例えば、通知部１４０は、カメラ１１８が塞がれていることを示すメッセージを端末３１に送信する。そして、処理がステップＳ１１に進む。

【0071】

このように、ＡＴＭ１００は、カメラ１１８が撮影した撮影画像から明るさが所定値以下の画素が連続した領域を抽出し、抽出した領域が撮影画像の端の画素を含んでいるか否かおよび閾値より大きいか否かに基づいて、カメラ１１８が塞がれているか否かを判定する。これにより、ＡＴＭ１００は、カメラ１１８が塞がれているか否かを適切に判定できる。よって、ＡＴＭ１００は、防犯効果を向上させることができる。

【0072】

また、ＡＴＭ１００は、抽出した領域が撮影画像の四辺のうちのいずれかの辺上の画素を全て含んでいるか否かに基づいて、カメラ１１８が塞がれているか否かを判定する。ここで、カメラ１１８を塞ぐ遮蔽物は、カメラ１１８に近い位置に配置されることが多いため、遮蔽物が撮影画像に写りこんだ方向の端の全体が暗くなることが多い。よって、ＡＴＭ１００は、抽出した領域が辺上の画素を全て含んでいるか否かに基づいて、カメラ１１８が塞がれているか否かを判定することで、判定精度を向上させることができる。また、ＡＴＭ１００は、撮影画像を平滑化し、平滑化した画像を二値化した画像から黒の画素が連続した領域を抽出する。これにより、ＡＴＭ１００は、撮影画像からノイズを除去することで、判定精度を向上させることができる。

【0073】

そして、ＡＴＭ１００は、カメラ１１８が塞がれていると判定した場合、カメラ１１８が塞がれていることを端末３１に通知する。これにより、ＡＴＭ１００は、カメラ１１８が正常に操作者を撮影できていないことをＡＴＭ１００の管理者に通知することができる。

【0074】

以上、実施の形態を例示したが、実施の形態で示した各部の構成は同様の機能を有する他のものに置換することができる。また、他の任意の構成物や工程が付加されてもよい。さらに、前述した実施の形態のうちの任意の２以上の構成（特徴）を組み合わせたものであってもよい。

【符号の説明】

【0075】

１ 端末
２ 撮影画像
２ａ 領域
１０ 自動取引装置
１１ カメラ
１２ 制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】