特許 7420215 撮影制御装置、システム、方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-15

(45)【発行日】2024-01-23

(54)【発明の名称】撮影制御装置、システム、方法及びプログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20240116BHJP

【ＦＩ】

G06Q50/10

【請求項の数】 13

(21)【出願番号】P 2022507130

(86)(22)【出願日】2020-03-12

(86)【国際出願番号】 JP2020010897

(87)【国際公開番号】W WO2021181623

(87)【国際公開日】2021-09-16

【審査請求日】2022-08-12

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】森 祐輔

(72)【発明者】

【氏名】山口 雄司

(72)【発明者】

【氏名】幸 ほなみ

(72)【発明者】

【氏名】菊地 秀治

【審査官】塩田 徳彦

(56)【参考文献】

【文献】特開２０１８－０３８０２９（ＪＰ，Ａ）

【文献】特開２０１３－０４１４１６（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

(57)【特許請求の範囲】

【請求項1】

所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる第１の認証制御手段と、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる第２の認証制御手段と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力手段と、
を備える撮影制御装置。

【請求項2】

前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する登録手段
をさらに備える請求項１に記載の撮影制御装置。

【請求項3】

前記登録手段は、
前記第１の顔認証又は前記第２の顔認証のいずれか一方に成功した場合、前記所定の地点を前記識別情報及び前記第２の撮影画像に対応付けて前記記憶装置へさらに登録する
請求項２に記載の撮影制御装置。

【請求項4】

前記撮影制御装置は、
前記第２の顔認証に失敗した場合、前記第１の撮影画像及び前記第２の撮影画像を合成した第１の合成画像を生成する第１の合成手段
をさらに備え、
前記登録手段は、
前記第２の顔認証に失敗した場合、前記第１の合成画像を前記識別情報と対応付けて前記記憶装置にさらに登録し、
前記出力手段は、前記第１の合成画像を出力する
請求項２または３のいずれかに記載の撮影制御装置。

【請求項5】

前記第１の撮影装置及び前記第２の撮影装置の組が異なる複数の地点に設置され、
前記撮影制御装置は、
前記記憶装置内の前記識別情報に２以上の地点が対応づけられている場合、当該識別情報と対応づけられた２以上の画像を前記記憶装置から取得し、各画像を含めた第２の合成画像を生成する第２の合成手段
をさらに備え、
前記出力手段は、前記第２の合成画像を出力する
請求項２乃至４のいずれか１項に記載の撮影制御装置。

【請求項6】

所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う第１の認証手段と、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う第２の認証手段と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力部と、
を備える撮影制御装置。

【請求項7】

前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する登録手段
をさらに備える請求項６に記載の撮影制御装置。

【請求項8】

所定の地点に設置された第１の撮影装置と、
前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、前記顔特徴情報を用いた顔認証を行う認証手段と、を備える認証装置と、
撮影制御装置と、
を備え、
前記撮影制御装置は、
前記第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御システム。

【請求項9】

前記撮影制御装置は、
前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する、
請求項８に記載の撮影制御システム。

【請求項10】

コンピュータが、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御方法。

【請求項11】

所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータが、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行い、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行い、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御方法。

【請求項12】

コンピュータに
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる処理と、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる処理と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラム。

【請求項13】

所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータに、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う処理と、
前記第１の顔認証に成功し、かつ、当該第１の撮影画像内に占める当該第１の顔認証に成功した顔領域の割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う処理と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮影制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体に関する。

【背景技術】

【0002】

特許文献１には、顔認証技術を用いて記念撮影を行う技術が開示されている。特許文献１に記載された顔認証システムは、娯楽施設で撮影されたエリア内画像に含まれる顔画像と、宿泊施設で登録した登録画像との顔照合を行う。特許文献１に記載された顔認証システムによると、宿泊客は、自身が写ったエリア内画像を入手することが可能となる。

【0003】

また、特許文献２には、複数の地点を訪問することで目的を達成するいわゆるスタンプラリーにおいて、各地点に設置されたカメラで顔認証を行うことにより各地点での訪問の確証とする技術が開示されている。なお、スタンプラリーは、ポイントラリーともいう。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１６－１２６４１４号公報

【文献】特開２０１３－４１４１６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

顔認証のために設置されたカメラによる撮影画像は、顔認証を目的とするものであるため、背景が適切に映っていない可能性がある。したがって、そのような撮影画像は、記念撮影用の画像としては不十分であるという問題があった。

【0006】

本開示は、このような問題点を解決するためになされたものであり、顔認証と記念撮影とを両立させる撮影画像を提供するための撮影制御装置、システム、方法、及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0007】

本開示にかかる撮影制御装置は、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる第１の認証制御手段と、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する算出手段と、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べ広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる第２の認証制御手段と、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力手段と、を備える。

【0008】

本開示にかかる撮影制御装置は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う第１の認証手段と、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する算出手段と、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う第２の認証手段と、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力部と、を備える。

【0009】

本開示にかかる撮影制御システムは、所定の地点に設置された第１の撮影装置と、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置と、所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、前記顔特徴情報を用いた顔認証を行う認証手段と、を備える認証装置と、撮影制御装置と、を備え、前記撮影制御装置は、前記第１の撮影装置により人物が撮影された第１の撮影画像を取得し、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、前記割合が所定値以上の場合、前記第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する、ものである。

【0010】

本開示にかかる撮影制御方法は、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べ広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、ものである。

【0011】

本開示にかかる撮影制御方法は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータが、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行い、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行い、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、ものである。

【0012】

本開示にかかる非一時的なコンピュータ可読媒体は、コンピュータに、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、所定の人物の識別情報と顔特区長情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる処理と、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する処理と、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べ広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる処理と、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラムが記録される。

【0013】

本開示にかかる非一時的なコンピュータ可読媒体は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータに、所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う処理と、前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する処理と、前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う処理と、前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラムが記録される。

【発明の効果】

【0014】

本開示により、顔認証と記念撮影とを両立させる撮影画像を提供するための撮影制御装置、システム、方法、及びプログラムを提供することができる。

【図面の簡単な説明】

【0015】

【図1】本実施形態１にかかる撮影制御装置の構成を示すブロック図である。

【図2】本実施形態１にかか撮影制御方法の流れを示すフローチャートである。

【図3】本実施形態２にかかる撮影制御装置の構成を示すブロック図である。

【図4】本実施形態３にかかる撮影制御システムの構成を示すブロック図である。

【図5】本実施形態３にかかる認証装置の構成を示すブロック図である。

【図6】本実施形態３にかかる顔認証端末の構成を示すブロック図である。

【図7】本実施形態３にかかるユーザ端末の構成を示すブロック図である。

【図8】本実施形態３にかかる顔情報登録処理の流れを示すフローチャートである。

【図9】本実施形態３にかかる顔認証処理の流れを示すフローチャートである。

【図10】本実施形態３にかかる撮影制御処理の流れを示すフローチャートである。

【図11】本実施形態３にかかる撮影画像Ｘの第１の例を示す図である。

【図12】本実施形態３にかかる撮影画像Ｘの第２の例を示す図である

【図13】本実施形態３にかかる第１の合成画像の例を示す図である。

【図14】本実施形態４にかかる撮影制御システムの構成を示すブロック図である。

【図15】本実施形態４にかかる第２の合成画像を生成する処理の流れを示すフローチャートである。

【図16】本実施形態４にかかる第２の合成画像の例を示す図である。

【発明を実施するための形態】

【0016】

以下では、本開示の実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。

【0017】

＜実施形態１＞
図１は、本実施形態１にかかる撮影制御装置１００の構成を示すブロック図である。撮影制御装置１００は、第１取得部１１１と、第１認証制御部１２１と、算出部１３０と、第２取得部１１２と、第２認証制御部１２２と、出力部１４０とを備える。撮影制御装置１００は、ネットワーク５００（不図示）に接続される。ネットワーク５００は、有線であっても無線であってもよい。ネットワーク５００には、図示しない認証装置２００と、図示しない第１の撮影装置７００と、図示しない第２の撮影装置８００とが接続される。

【0018】

第１取得部１１１は、第１の撮影装置７００により人物が撮影された第１の撮影画像を取得する。第１の撮影装置７００は、所定の地点Ｘに設置される。例えば、第１の撮影装置７００は、ポイントラリー等の訪問地点に設置される。第１認証制御部１２１は、認証装置２００に対して、第１の撮影画像について顔特徴情報を用いた第１の顔認証を行わせる。ここで、認証装置２００は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶しているものとする。

【0019】

算出部１３０は、第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する。第２取得部１１２は、当該割合が所定値以上の場合、第２の撮影装置８００により当該人物が撮影された第２の撮影画像を取得する。所定の割合は、任意であり、例えば３０％である。第２の撮影装置８００は、所定の地点Ｘで第１の撮影装置７００から所定範囲内に設置される。第２の撮影装置８００は、第１の撮影装置７００と比べ広角である。

【0020】

第２認証制御部１２２は、認証装置２００に対して、第２の撮影画像について顔特徴情報を用いた第２の顔認証を行わせる。出力部１４０は、第２の顔認証に成功した場合、第２の撮影画像を外部へ出力する。

【0021】

図２は、本実施形態１にかかる撮影制御方法の流れを示すフローチャートである。尚、認証装置２００は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶しているものとする。

【0022】

まず、第１取得部１１１は、第１の撮影装置７００により人物が撮影された第１の撮影画像を取得する（ステップＳ１０１）。次に、第１認証制御部１２１は、認証装置２００に対して、第１の撮影画像について第１の顔認証を行わせる（ステップＳ１０２）。

【0023】

次に、算出部１３０は、第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する（ステップＳ１０３）。次に、第２取得部１１２は、ステップＳ１０３で算出した割合が所定値以上の場合、第２の撮影装置８００により当該人物が撮影された第２の撮影画像を取得する（ステップＳ１０４）。次に、第２認証制御部１２２は、認証装置２００に対して第２の撮影画像について第２の顔認証を行わせる（ステップＳ１０５）。最後に、出力部１４０は、ステップＳ１０５の第２の顔認証に成功した場合、第２の撮影画像を外部に出力する。

【0024】

上述したようにこれまでは、顔認証と記念撮影とを両立することは難しかった。これに対し、本実施形態にかかる撮影制御システム６００は、第１の撮影画像内に背景が十分に写っていない場合、より広角のカメラで撮影された第２の撮影画像を取得して、顔認証を行う。したがって、本実施形態にかかる撮影制御システム６００は、顔認証と記念撮影とを両立させる撮影画像を提供することができる。

【0025】

尚、撮影制御装置１００は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態にかかる撮影制御方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、第１取得部１１１、第１認証制御部１２１、算出部１３０、第２取得部１１２、第２認証制御部１２２、出力部１４０の機能を実現する。

【0026】

または、第１取得部１１１、第１認証制御部１２１、算出部１３０、第２取得部１１２、第２認証制御部１２２、出力部１４０は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用または専用の回路（circuitry）、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）等を用いることができる。

【0027】

また、撮影制御装置１００の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、撮影制御装置１００の機能がＳａａＳ（Software as a Service）形式で提供されてもよい。

【0028】

＜実施形態２＞
本実施形態２は、上述した実施形態１の変形例である。実施形態１にかかる撮影制御装置１００は、外部の認証装置２００で個人認証を行っていた。一方、本実施形態２にかかる撮影制御装置１００は、装置内部で個人認証を行う。

【0029】

図３は、本実施形態２にかかる撮影制御装置１００の構成を示すブロック図である。撮影制御装置１００は、記憶部１５０と、第１取得部１１１と、第１認証部１２１ａと、算出部１３０と、第２取得部１１２と、第２認証部１２２ａと、出力部１４０とを備える。第１取得部１１１、算出部１３０、第２取得部１１２、及び出力部１４０の機能は、実施の形態１と同様であるため説明を省略する。

【0030】

本実施形態２にかかる記憶部１５０は、所定の人物の識別情報と顔特徴情報とを対応付けて記憶する。本実施形態２にかかる第１認証部１２１ａは、第１の撮影画像について当該顔特徴情報を用いた第１の顔認証を行う。本実施形態２にかかる第２認証部１２２ａは、第２の撮影画像について当該顔特徴情報を用いた第２の顔認証を行う。

【0031】

本実施形態２にかかる撮影制御方法の流れは、図２と同様である。但し、ステップＳ１０２において、第１認証部１２１ａは、第１の撮影画像について記憶部１５０が記憶する顔特徴情報を用いて顔認証を行う。ステップＳ１０５において、第２認証部１２２ａは、第２の撮影画像について記憶部１５０が記憶する顔特徴情報を用いて顔認証を行う。

【0032】

このように本実施形態２によっても、上述した実施形態１と同様の効果を奏することができる。

【0033】

＜実施形態３＞
本実施形態３は、上述した実施形態１の具体例である。図４は、本実施形態３にかかる撮影制御システム６００ａの構成を示すブロック図である。撮影制御システム６００ａは、撮影制御装置１００ａ、認証装置２００、顔認証端末３００、カメラ７００ｘ、カメラ８００ｙ、デジタルサイネージ９００、及びユーザ端末４００を備える。カメラ７００ｘは、カメラＸともいう。カメラ８００ｙは、カメラＹともいう。なお、ユーザ端末４００は、必須ではない。

【0034】

撮影制御装置１００ａ、認証装置２００、顔認証端末３００、カメラ７００ｘ、カメラ８００ｙ、デジタルサイネージ９００、及びユーザ端末４００のそれぞれは、ネットワーク５００を介して接続されている。なお、本実施形態３では、ユーザＵの顔特徴情報が予め認証装置２００に登録されているものとする。

【0035】

撮影制御装置１００ａは、履歴ＤＢ１８０と、取得部１１０と、認証制御部１２０と、算出部１３０と、出力部１４０と、登録部１６０と、合成部１７０とを備える。撮影制御装置１００ａは、ユーザＵを顔認証し、記念撮影するための制御を行う。なお、撮影制御装置１００ａの各機能については後述する。

【0036】

認証装置２００は、顔特徴ＤＢ２１０を有する。顔特徴ＤＢ２１０は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する。顔特徴ＤＢ２１０は、記憶部ともいう。また、認証装置２００は、外部から受信した顔認証要求に応じて、当該要求に含まれる顔画像又は顔特徴情報について、各ユーザの顔特徴情報と照合を行い、照合結果を要求元へ返信する。

【0037】

顔認証端末３００は、ユーザＵの顔認証に用いる登録画像を撮影する。顔認証端末３００は、登録画像を認証装置２００に送信し、顔情報登録要求を行う。顔認証端末３００は、記念撮影を行う前に、ユーザの顔画像から抽出した顔特徴情報を顔情報ＤＢ２１０に登録する装置である。ユーザＵは、顔認証端末３００が設置された地点Ａ０において登録画像を撮影することとなる。なお、ユーザＵは、ユーザ端末４００を用いて登録画像を撮影してもよい。

【0038】

地点Ａ１には、カメラ７００ｘ、カメラ８００ｙ、及びデジタルサイネージ９００が設置されている。また、地点Ａ１には、ユーザＵが所持するユーザ端末４００も存在するものとする。

【0039】

カメラ７００ｘ及びカメラ８００ｙは、少なくともユーザＵが存在する領域を撮影し、撮影画像と地点ＩＤとを、ネットワーク５００を介して撮影制御装置１００ａへ出力するデジタルカメラである。地点ＩＤは、地点Ａ１を識別する識別情報であり、カメラの識別情報であってもよい。カメラ７００ｘ及びカメラ８００ｙは、撮影制御装置１００ａにより遠隔制御される。

【0040】

カメラ８００ｙは、地点Ａ１において、カメラ７００ｘから所定範囲内に設置されている。カメラ８００ｙは、カメラ７００ｘよりも広角である。つまり、カメラ８００ｙは、カメラ７００ｘの撮影対象領域より広い範囲を撮影可能であるとする。例えば、カメラ７００ｘはデジタルサイネージ９００に取り付けられていており、カメラ８００ｙはデジタルサイネージ９００と離れたところに設置される。尚、カメラ８００ｙは、カメラ７００ｘと近接して設置されても構わない。

【0041】

カメラ７００ｘによる撮影画像を、第１の撮影画像と呼ぶ。カメラ８００ｙによる撮影画像を、第２の撮影画像と呼ぶ。第２の撮影画像は、上述の通り、第１の撮影画像よりも広い範囲を撮影した画像である。なお、カメラ７００ｘではなく、ユーザ端末４００が、第１の撮影画像を撮影してもよい。以下では、第１の撮影画像を、撮影画像Ｘとも呼ぶ。また、第２の撮影画像を、撮影画像Ｙとも呼ぶ。

【0042】

デジタルサイネージ９００は、撮影制御装置１００ａにより遠隔制御され、撮影制御装置１００ａからネットワーク５００を介して受信した情報を画面に表示する。表示する情報とは、撮影画像、後述する合成画像、及びメッセージである。メッセージは、例えば、「カメラ８００ｙに顔を向けてください」等の案内情報である。なお、デジタルサイネージ９００ではなく、ユーザ端末４００が、撮影画像等の情報を受信し、表示してもよい。

【0043】

尚、カメラ７００ｘ及び８００ｙは、必ずしも共通する領域を撮影する必要がない。ユーザＵがカメラ７００ｘの撮影対象領域ＡＸに存在する場合、例えば、以下の手順によりユーザＵをカメラ８００ｙで撮影することができる。まず、カメラ７００ｘは、ユーザＵを撮影する。次に、デジタルサイネージ９００は、「領域ＡＹへ移動してカメラ８００ｙに顔を向けてください。」というメッセージを表示する。ユーザＵが領域ＡＹへ移動後、カメラ８００ｙは、ユーザＵを撮影する。

【0044】

ユーザ端末４００は、ユーザＵが所持する情報処理端末である。ユーザ端末４００は、例えば、携帯電話端末、スマートフォン、タブレット端末、カメラを搭載又は接続したＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等である。

【0045】

ユーザ端末４００は、ユーザＵの顔認証に用いる登録画像を認証装置２００に送信し、顔情報登録要求を行う。なお、撮影制御システム６００ａは、顔情報登録要求を行う装置として、顔認証端末３００とユーザ端末４００のいずれかのみを有していればよい。

【0046】

ユーザ端末４００は、第１の撮影画像を撮影し、撮影制御装置１００ａに送信する。なお、撮影制御システム６００ａは、第１の撮影画像を撮影する装置として、カメラ７００ｘとユーザ端末４００のいずれかのみを有していればよい。

【0047】

ユーザ端末４００は、撮影制御装置１００ａから、撮影画像等の情報を受信する。なお、撮影制御システム６００ａは、情報を受信して表示する表示装置として、デジタルサイネージ９００とユーザ端末４００のいずれかのみを有していればよい。

【0048】

さらに、ユーザ端末４００は、デジタルサイネージ９００の代わりに、顔認証の成否や、「カメラＹに顔を向けて下さい」等のメッセージを表示してもよい。特に、カメラ７００ｘの代わりにユーザ端末４００を使用する場合、撮影制御システム６００ａは、ユーザ端末４００にメッセージ等を表示することができる。尚、カメラ７００ｘを使用して第１の撮影画像を撮影する場合にも、撮影制御システム６００ａは、メッセージ等をユーザ端末４００に表示してよい。

【0049】

次に、認証装置２００の機能について詳細に説明する。図５は、認証装置２００の構成を示すブロック図である。認証装置２００は、上述した顔情報ＤＢ２１０と、顔検出部２２０と、特徴点抽出部２３０と、登録部２４０と、認証部２５０とを備える。

【0050】

顔検出部２２０は、顔情報を登録するための登録画像に含まれる顔領域を検出し、特徴点抽出部２３０に出力する。特徴点抽出部２３０は、顔検出部２２０が検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する。ここで、顔特徴情報は、抽出した特徴点の集合である。また、特徴点抽出部２３０は、撮影制御装置１００ａから受信した顔画像に含まれる特徴点を抽出し、認証部２５０に顔特徴情報を出力する。

【0051】

登録部２４０は、顔特徴情報の登録に際して、ユーザＩＤを新規に発行する。登録部２４０は、発行したユーザＩＤと、登録画像から抽出した顔特徴情報とを対応付けて顔情報ＤＢ２１０へ登録する。認証部２５０は、顔画像から抽出された顔特徴情報と、顔情報ＤＢ２１０内の顔特徴情報との照合を行う。認証部２５０は、顔特徴情報の一致の有無を撮影制御装置１００ａに返信する。顔特徴情報の一致の有無は、認証の成否に対応する。

【0052】

図８は、認証装置２００による顔情報登録処理の流れを示すフローチャートである。まず、認証装置２００は、顔情報登録要求に含まれる登録画像を取得する（ステップＳ２０１）。例えば、認証装置２００は、顔情報登録要求を、顔認証端末３００またはユーザ端末４００からネットワーク５００を介して受け付ける。次に、顔検出部２２０は、登録画像に含まれる顔領域を検出する（ステップＳ２０２）。次に、特徴点抽出部２３０は、ステップＳ２０２で検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する（ステップＳ２０３）。最後に、登録部２４０は、ユーザＩＤを発行し、当該ユーザＩＤと顔特徴情報とを対応付けて顔情報ＤＢ２１０に登録する（ステップＳ２０４）。その後、認証装置２００は、登録結果を要求元へ返信してもよい。

【0053】

図９は、認証装置２００による顔認証処理の流れを示すフローチャートである。まず、特徴点抽出部２３０は、撮影制御装置１００ａから受信した顔画像から顔特徴情報を取得する（ステップＳ３０１）。例えば、認証装置２００は、撮影制御装置１００ａから顔画像を受信し、ステップＳ２０１からＳ２０３のように顔特徴情報を抽出する。または、認証装置２００は、撮影制御装置１００ａから顔特徴情報を受信してもよい。

【0054】

次に、認証部２５０は、取得した顔特徴情報を、顔情報ＤＢ２１０と照合する（ステップＳ３０２）。顔特徴情報が一致した場合（ステップＳ３０３のＹｅｓ）、認証部２５０は、顔特徴情報が一致したユーザのユーザＩＤを特定し（ステップＳ３０４）、顔認証に成功した旨と特定したユーザＩＤとを撮影制御装置１００ａに返信する（ステップＳ３０５）。一致する顔特徴情報が存在しない場合（ステップＳ３０３のＮｏ）、認証部２５０は、顔認証に失敗した旨を撮影制御装置１００ａに返信する（ステップＳ３０６）。

【0055】

次に、顔認証端末３００について詳細に説明する。顔認証端末３００は、顔情報の登録処理を行う情報処理装置である。なお、顔認証端末３００は、カメラ７００ｘ又はカメラ８００ｙが撮影した撮影画像について顔認証がされた場合に、当該撮影画像を取得し、表示する機能を備えていてもよい。顔認証端末３００は、ハードウェア構成として、カメラ等の撮影装置と、表示装置と、コンピュータとを備える。図６は、顔認証端末３００の構成を示すブロック図である。

【0056】

顔認証端末３００は、上述したカメラ３１０を備え、記憶部３２０と、通信部３３０と、表示部３４０と、制御部３５０とを備える。記憶部３２０は、顔認証端末３００の各機能を実現するためのプログラムが格納される記憶装置である。通信部３３０は、ネットワーク５００との通信インタフェースである。表示部３４０は、上述した表示装置であり、ユーザＵの撮影画像を表示する。制御部３５０は、顔認証端末３００が有するハードウェアの制御を行う。制御部３５０は、撮影部３５１と、登録部３５２と、認証部３５３と、画像取得部３５４とを備える。

【0057】

撮影部３５１は、カメラ３１０を制御しユーザの登録画像を撮影する。登録画像は、少なくとも当該ユーザの顔の画像を含む画像である。登録部３５２は、登録画像を含む顔情報登録要求を、ネットワーク５００を介して認証装置２００へ送信する。顔認証を行う認証部３５３は、本実施形態では不要である。画像取得部３５４は、撮影画像又は後述する合成画像を、撮影制御装置１００ａから取得する。顔認証端末３００は、表示部３４０の画面に取得した画像を表示可能であってもよい。尚、画像取得部３５４は、本実施形態では不要である。

【0058】

次に、ユーザ端末４００について説明する。ユーザ端末４００は、ユーザが所持する携帯電話端末等である。図７は、ユーザ端末４００の構成を示すブロック図である。ユーザ端末４００は、顔認証端末３００と同様に、カメラ４１０と、記憶部４２０と、通信部４３０と、表示部４４０とを備える。また、ユーザ端末４００は、上述したハードウェアを制御する制御部４５０を備える。制御部４５０は、顔認証端末３００の制御部３５０と同様に、撮影部４５１と、登録部４５２と、認証部４５３と、画像取得部４５４とを備える。但し、撮影部４５１は、カメラ７００ｘの代わりに撮影画像Ｘを撮影してもよい。画像取得部４５４は、撮影制御装置１００ａから受信した情報を表示してもよい。

【0059】

顔認証端末３００及びユーザ端末４００は、顔情報登録要求を行う機能を有する。以下では、顔情報登録処理の流れを説明する。なお、ユーザ端末４００を使用する場合について説明するが、同様の処理が顔認証端末３００によって行われてもよい。

【0060】

撮影部４５１は、まず、カメラ４１０を制御し、ユーザの登録画像を撮影する。登録画像は、少なくともユーザの顔を含む画像であればよい。次に、登録部４５２は、登録画像を含めた顔情報登録要求を、ネットワーク５００を介して認証装置２００へ送信する。最後に、登録部４５２は、認証の結果を、認証装置２００から受信する。

【0061】

なお、カメラ７００ｘが、顔情報登録要求を行う機能を有していてもよい。このような場合、カメラ７００ｘは、上述した登録部４５２と同様の機能を備えている必要がある。ユーザは、地点Ａ１でカメラ７００ｘを見つけた場合、その場で登録画像を撮影することが可能となる。

【0062】

次に、ユーザ端末４００が行う認証処理について説明する。顔情報が登録された後、カメラ７００ｘの代わりに、ユーザ端末４００が、ユーザＵを撮影してもよい。このような場合、ユーザ端末４００の認証部４５３は、撮影画像Ｘを取得し、撮影制御装置１００ａに対して認証要求を行う。なお、カメラ７００ｘを使用する場合、ユーザ端末４００は、認証部４５３を備えなくてもよい。画像取得部４５４は、撮影制御装置１００ａから、ネットワーク５００を介して撮影画像又は後述する合成画像を取得する。ユーザ端末４００は、表示部４４０の画面に取得した画像を表示する。

【0063】

次に、図４に戻って撮影制御装置１００ａの機能について説明する。撮影制御装置１００ａは、カメラ７００ｘ及びカメラ８００ｙによる撮影を制御し、合成画像を生成する情報処理装置であり、例えば、コンピュータにより実現されるサーバ装置である。図４に示すように、撮影制御装置１００ａは、履歴ＤＢ１８０と、取得部１１０と、認証制御部１２０と、算出部１３０と、出力部１４０と、登録部１６０と、合成部１７０とを備える。

【0064】

履歴ＤＢ１８０は、ユーザが実際に訪問した地点と、その際に撮影された撮影画像との履歴を管理するデータベースである。履歴ＤＢ１８０は、例えば、ユーザＩＤと、撮影画像と、地点ＩＤとが対応付けられている。

【0065】

撮影画像は、例えば、カメラ７００ｘ又はカメラ８００ｙにより撮影された画像であり、少なくともユーザＵを含む画像である。または、撮影画像は、カメラ７００ｘおよびカメラ８００ｙにより撮影された画像の合成画像である。地点ＩＤは、ユーザＵが顔認証に成功したカメラ７００ｘ等の設置位置を識別する情報である。なお、地点ＩＤには、顔認証端末３００の設置位置を識別する情報が含まれていてもよい。地点ＩＤは、例えば、地点Ａ０、Ａ１等を識別する識別情報である。なお、カメラ７００ｘの代わりにユーザ端末４００を使用する場合、履歴ＤＢ１８０は、地点ＩＤを記録しなくてもよい。撮影制御システム６００ａは、ユーザ端末４００のＧＰＳを利用して、位置情報から地点ＩＤを記録してもよい。以下では、カメラ７００ｘが撮影画像Ｘを撮影する場合について説明する。

【0066】

取得部１１０は、カメラ７００ｘ及びカメラ８００ｙから、ネットワーク５００を介して、撮影画像及びカメラの設置位置（地点ＩＤ）を取得する。なお、取得部１１０は、カメラ７００ｘ及びカメラ８００ｙからカメラの識別情報を取得してもよい。

【0067】

認証制御部１２０は、撮影画像の受信に応じて、当該撮影画像を認証装置２００へ送信して顔認証を行わせる。ここで、認証制御部１２０は、撮影画像の代わりに、顔画像又はその顔特徴情報を認証装置２００へ送信してもよい。顔画像とは、撮影画像内の顔領域の画像である。

【0068】

また、認証制御部１２０は、認証装置２００から、認証結果を受信する。認証結果は、認証の成功又は失敗を表す。認証に成功した場合、認証装置２００は、認証に成功したユーザのユーザＩＤを送信する。ここで、カメラ７００ｘによる撮影画像Ｘについての顔認証を、第１の顔認証という。カメラ８００ｙによる撮影画像Ｙについての顔認証を第２の顔認証という。

【0069】

算出部１３０は、第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が撮影画像Ｘ内に占める割合を算出する。そして、算出部１３０は、算出した割合が所定値以上か否かを判定する。所定値とは、例えば、３０％等であるがこれに限定されない。出力部１４０は、第１の顔認証の成否、第２の顔認証の成否、及び算出した割合の判定結果に応じたメッセージ又は撮影画像を、ネットワーク５００を介して、デジタルサイネージ９００に出力する。

【0070】

登録部１６０は、算出部１３０が算出した割合が所定値未満の場合、ユーザＩＤと、撮影画像Ｘと、地点ＩＤとを対応付けて、履歴ＤＢ１８０に登録する。また、登録部１６０は、第２の顔認証に成功した場合、ユーザＩＤと、撮影画像Ｙと、地点ＩＤとを対応付けて履歴ＤＢ１８０に登録する。また、登録部１６０は、第２の顔認証に失敗した場合、ユーザＩＤと、後述する合成画像と、地点ＩＤとを対応付けて履歴ＤＢ１８０に登録する。合成部１７０は、第２の顔認証に失敗した場合、撮影画像Ｘ及び撮影画像Ｙを合成した第１の合成画像を生成する。

【0071】

尚、カメラ７００ｘ及びデジタルサイネージ９００の代わりに、ユーザ端末４００を使用してもよい。カメラ７００ｘの代わりにユーザ端末４００を使用する場合、取得部１１０は、ユーザ端末４００から撮影画像Ｘを取得する。そして、出力部１４０は、ユーザ端末４００に撮影画像を出力する。

【0072】

図１０は、撮影制御処理の流れを示すフローチャートである。認証装置２００の顔情報ＤＢ２１０に、ユーザＵのユーザＩＤと顔特徴情報とが関連付けて登録されているものとする。

【0073】

まず、撮影制御装置１００ａの取得部１１０は、カメラ７００ｘから撮影画像Ｘを取得する（ステップＳ４０１）。次に、認証制御部１２０は、認証装置２００に対して、撮影画像Ｘについて顔認証を行わせ（ステップＳ４０２）、顔認証の結果を受信する（ステップＳ４０３）。

【0074】

次に、認証制御部１２０は、顔認証に成功したか否かを判定する（ステップＳ４０４）。例えば、認証制御部１２０は、認証結果としてユーザＩＤを受信した場合に成功と判定し、認証に失敗した旨を受信した場合に失敗と判定する。

【0075】

顔認証に失敗した場合（ステップＳ４０４のＮｏ）、出力部１４０は、顔認証に失敗した旨を返信する（ステップＳ４０５）。出力部１４０は、顔認証に失敗した旨を、デジタルサイネージ９００に送信してもよい。このような場合、デジタルサイネージ９００は、ユーザＵが再度撮影を行うことを促すメッセージを表示する。

【0076】

顔認証に成功した場合（ステップＳ４０４のＹｅｓ）、算出部１３０は、撮影画像ＸにおいてユーザＵの顔領域が占める割合を算出し（ステップＳ４０６）、算出した割合が所定値を超えるか否かを判定する（ステップＳ４０７）。算出した割合が所定値を超えない場合（ステップＳ４０７のＮｏ）、登録部１６０は、ユーザＩＤと、撮影画像Ｘと、地点ＩＤとを対応付けて履歴ＤＢ１８０に登録する（ステップＳ４０８）。そして、出力部１４０は撮影画像Ｘを出力する（ステップＳ４０８）。算出した割合が所定以上の場合（ステップＳ４０７のＹｅｓ）、出力部１４０は、カメラＹに顔を向けることを促すメッセージを、デジタルサイネージ９００に出力する（ステップＳ４１０）。そして、取得部１１０は、カメラＹによる撮影画像Ｙを取得する（ステップＳ４１１）。

【0077】

上述したステップＳ４０７～Ｓ４１１について、具体例を用いて説明する。図１１及び図１２は、撮影画像Ｘの例である。いずれの画像にも、ユーザＵが写っている。ステップＳ４０７において、算出部１３０は、撮影画像ＸにおいてユーザＵの顔領域１２が占める割合を算出する。例えば、算出部１３０は、図１１の撮影画像Ｘについて、顔領域１２が占める割合を５％として算出する。例えば、算出部１３０は、図１２の撮影画像Ｘについて、顔領域１２が占める割合を３３％として算出する。

【0078】

ステップＳ４０７の判定で使用する所定値が、３０％であるとする。図１１の撮影画像Ｘを取得した場合、撮影制御装置１００ａは、顔領域の割合が所定値を超えてないため、ステップＳ４０９で撮影画像Ｘを出力する。図１２の撮影画像Ｘを取得した場合、撮影制御装置１００ａは、顔領域の割合が所定値を超えているため、ステップＳ４１１でカメラＹによる撮影画像Ｙを取得する。

【0079】

図１０に戻って、撮影制御装置１００ａは、ステップＳ４１１で取得した撮影画像Ｙについて、認証装置２００に対して顔認証を要求する（ステップＳ４１２）。次に、撮影制御装置１００ａは、顔認証結果を受信し（ステップＳ４１３）、顔認証に成功したか否かを判定する（ステップＳ４１４）。

【0080】

顔認証に成功した場合（ステップＳ４１４のＹｅｓ）、出力部１４０は、撮影画像Ｙをデジタルサイネージ９００等に出力する（ステップＳ４１５）。なお、出力先は、例えば、ユーザＵのユーザＩＤを用いてログイン済みのユーザ端末４００であってもよく、デジタルサイネージ９００であってもよい。また、登録部１６０は、ユーザＩＤと、撮影画像Ｙと、地点ＩＤとを対応付けて履歴ＤＢ１８０に登録する（ステップＳ４１６）。

【0081】

顔認証に失敗した場合（ステップＳ４１４のＮｏ）、撮影制御装置１００ａの合成部１７０は、周知の画像合成技術により、撮影画像Ｘと撮影画像Ｙとを合成した合成画像を生成する（ステップＳ４１７）。撮影画像Ｘと撮影画像Ｙとの合成画像を、第１の合成画像という。

【0082】

なお、撮影制御装置１００ａの合成部１７０は、ステップＳ４１４で顔認証に成功した場合にも第１の合成画像を生成してよい。例えば、合成部１７０は、撮影画像Ｙにおいて顔領域が占める割合が所定値未満の場合に、第１の合成画像を生成してもよい。このような場合、撮影制御装置１００ａは、顔領域が占める割合が十分に大きい画像のみを出力することができる。ここで使用する所定値を、第２の割合と呼び、ステップＳ４０７で使用する所定値を、第１の割合と呼ぶ。第２の割合は、第１の割合よりも小さい。例えば、第１の割合は３０％であり、第２の割合は、５％である。算出部１３０は、第１の割合と同様に、第２の割合を算出することができる。

【0083】

出力部１４０は、生成した合成画像をデジタルサイネージ９００等に出力する（ステップＳ４１８）。ここで、登録部１６０は、ユーザＩＤと、合成画像と、地点ＩＤとを対応付けて履歴ＤＢ１８０に登録する（ステップＳ４１９）。

【0084】

図１３は、合成画像の例を示す概略図である。図１３に示す合成画像は、撮影画像Ｙと、ユーザＵを含む画像１５Ｘとを組み合わせた画像である。画像１５Ｘは、カメラＸによる撮影画像Ｘ、又は撮影画像Ｘの一部を切り抜いた画像である。画像１５Ｘは、ユーザＵの輪郭に沿って切り抜かれた画像であってもよい。合成画像は、ユーザＵと、撮影画像Ｙ内の背景とが写っているため、記念撮影用の画像として利用することができる。

【0085】

本実施形態３にかかる撮影制御装置１００ａは、撮影画像Ｘ内のユーザＵの顔領域の割合が所定値以上の場合、撮影画像Ｙまたは第１の合成画像を出力する。したがって、撮影制御装置１００ａは、ユーザＵと地点Ａ１の背景とが写った記念撮影用の画像を出力することができる。

【0086】

＜実施形態４＞
実施形態４にかかる撮影制御システム６００ｂは、実施の形態３にかかるカメラＸ及びＹの組を、複数の地点に設置したものである。撮影制御システム６００ｂは、複数の地点に関連付けられた画像を合成し、合成画像を出力する。このような合成画像を、第２の合成画像と呼ぶ。

【0087】

図１４は、撮影制御システム６００ｂの構成を示すブロック図である。撮影制御装置１００ｂ、認証装置２００、顔認証端末３００、ユーザ端末４００、カメラ７００ｘ、カメラ８００ｙ、及びデジタルサイネージ９００のそれぞれは、実施形態３と同様に、ネットワーク５００を介して接続されている。

【0088】

カメラ７００ｘ、カメラ８００ｙ、及びデジタルサイネージ９００は、地点Ａ１、地点Ａ２のそれぞれに設置されている。例えば、地点Ａ１、及び地点Ａ２は、ポイントラリーの目的地である。なお、カメラ７００ｘ、カメラ８００ｙ、及びデジタルサイネージ９００は、３以上の地点に設置されてもよい。

【0089】

本実施形態５において、カメラ７００ｘが、撮影画像Ｘを撮影する。また、デジタルサイネージ９００またはユーザ端末４００のいずれかは、出力画像を表示するものとする。そのため、本実施形態４においてユーザ端末４００は、存在しなくてもよい。認証装置２００、顔認証端末３００、ユーザ端末４００、カメラ７００ｘ、カメラ８００ｙ、及びデジタルサイネージ９００の機能については、実施形態３と同様であるため説明を省略する。

【0090】

撮影制御装置１００ｂは、取得部１１０と、認証制御部１２０と、算出部１３０と、出力部１４０と、登録部１６０と、合成部１７０と、履歴ＤＢ１８０とを備える。取得部１１０、認証制御部１２０、算出部１３０、及び登録部１６０の機能は、実施の形態３と同様であるため、説明を省略する。

【0091】

履歴ＤＢ１８０は、ユーザＵが訪問した複数の地点と、訪問した際に撮影された画像との履歴を管理するデータベースである。訪問した地点は、カメラ７００ｘ及びカメラ８００ｙの組が設置された地点Ａ１及び地点Ａ２である。なお、履歴ＤＢ１８０は、地点Ａ０と、地点Ａ０で撮影された画像とを記憶していてもよい。地点Ａ０で撮影された画像とは、顔認証端末３００で撮影された認証用の登録画像である。

【0092】

合成部１７０は、認証制御部１２０がユーザＵの顔認証に成功した場合、履歴ＤＢ１８０を参照し、顔認証に成功したユーザＩＤに２以上の地点が対応づけられているか否かを判定する。２以上の地点が対応づけられていた場合、合成部１７０は、履歴ＤＢ１８０からユーザＩＤに対応付けられた画像を取得し、各画像を合成した第２の合成画像を生成する。例えば、合成部１７０は、地点Ａ２における第１の顔認証に成功した場合に第２の合成画像を生成してもよい。

【0093】

図１６は、第２の合成画像の例を示す概略図である。図１６は、ポイントラリーの訪問地点がＡ１、Ａ２、Ａ３及びＡ４の４箇所である場合の合成画像である。このような場合、第２の合成画像は、例えば、４箇所目として訪問した地点Ａ４における第１の顔認証に成功したときに生成される。

【0094】

図１６に示す合成画像は、画像１３Ａ１、１３Ａ２、１３Ａ３、１３Ａ４、及び１３Ａ０を合成した画像である。画像１３Ａ１、１３Ａ２、１３Ａ３、１３Ａ４、及び１３Ａ０は、履歴ＤＢ１８０において、ユーザＵと関連付けられる画像である。画像１３Ａ１は、ユーザＵと関連付けられる画像のうち、地点Ａ１と関連付けられる画像である。実施形態３において説明したように、画像１３Ａ１は、撮影時の認証結果に応じて、カメラ７００ｘによる撮影画像Ｘである場合と、カメラ８００ｙによる撮影画像Ｙである場合と、撮影画像Ｘ及びＹの第１の合成画像である場合とがある。

【0095】

同様に画像１３Ａ２は、履歴ＤＢ１８０において地点Ａ２と関連付けられる画像である。画像１３Ａ３及び１３Ａ４は、図１４では図示しない地点Ａ３、及びＡ４と関連付けられる画像である。画像１３Ａ０は、地点Ａ０で撮影された顔認証用の登録画像である。なお、第２の合成画像は、顔認証用の画像１３Ａ０を含んでいなくてもよい。

【0096】

なお、第２の合成画像における画像１３Ａ０～１３Ａ４の位置は、撮影地点だけでなく、顔領域が画像１３Ａ０～１３Ａ４内に占める割合に応じて定められてもよい。顔領域の占める割合に応じて画像１３Ａ０～１３Ａ４を配置する方法として、例えば、以下のＡ、Ｂに示す方法のいずれかを使用することができる。Ａ．顔領域の占める割合が大きい画像ほど、第２の合成画像の中心に近い位置に配置する。Ｂ．顔領域の占める割合が小さい画像ほど、第２の合成画像の中心に近い位置に配置する。

【0097】

複数の画像を並べて配置する際、複数の画像のうちの一部をメイン画像として中央に配置する場合がある。このとき、メイン画像のサイズを、メイン画像以外のサブ画像のサイズよりも大きくすることがある。図１６の場合、画像１３Ａ０はメイン画像であり、画像１３Ａ１～１３Ａ４はサブ画像である。画像１３Ａ０のサイズは、画像１３Ａ１～１３Ａ４のサイズよりも大きくてもよい。

【0098】

Ａの方法を使用した場合、顔領域の割合の最も大きい画像を、第２の合成画像におけるメイン画像とすることができる。一方、Ｂの方法を使用した場合、顔領域の割合の最も小さい画像を、メイン画像とすることとなる。メイン画像のサイズがサブ画像のサイズよりも大きい十分大きい場合は、顔領域の割合が小さい画像であっても顔を確認できるため、Ｂの方法が有効であると考えられる。

【0099】

図１５は、合成部１７０における合成画像生成処理の流れを例示するフローチャートである。図１５は、図１０の画像登録処理に続く処理である。図１５は、例えば、地点Ａ３における画像の登録処理を行った後、地点Ａ４の撮影画像Ｘについて顔認証を行った後の処理を表す。

【0100】

認証制御部１２０は、撮影画像Ｘについての第１の顔認証に成功した場合（ステップＳ５０１のＹｅｓ）、合成部１７０は、ユーザＩＤに２以上の地点ＩＤが対応付けられているか否かを判定する（ステップＳ５０２）。

【0101】

２以上の地点ＩＤが対応付けられている場合（ステップＳ５０２のＹｅｓ）、合成部１７０は、ユーザＩＤと対応付けられる画像を取得する（ステップＳ５０３）。図１６の場合、合成部１７０は、画像１３Ａ１、１３Ａ２、１３Ａ３及び１３Ａ４を取得する。合成部１７０は、さらに画像１３Ａ０を取得してもよい。

【0102】

次に、合成部１７０は、ステップＳ５０３で取得した複数の画像を合成し、第２の合成画像を生成する（ステップＳ５０４）。ここで、第２の合成画像は、訪問地点に関する情報、訪問した時刻の情報、ユーザ情報を含んでもよい。訪問地点に関する情報は、例えば訪問地点の地名であり、ユーザ情報は、例えばユーザの名前である。ここで、地名等の情報は、地点ＩＤ等と関連付けて記憶されている必要がある。また、訪問した時刻の情報は、例えば、撮影画像の撮影時刻である。履歴ＤＢ１８０は、ユーザＩＤ、撮影画像、地点ＩＤ、及び訪問した時刻の情報を関連付けて記憶していてもよい。最後に、出力部１４０は、生成した第２の合成画像を、デジタルサイネージ９００又はユーザ端末４００に出力する（ステップＳ５０５）。

【0103】

なお、第１の顔認証に成功した場合に第２の合成画像を生成する例について説明したが、合成部１７０は、第２の顔認証に成功した場合に第２の合成画像を生成してもよい。また、合成部１７０は、ポイントラリーの終了後、ユーザ端末４００等によるユーザＵの顔認証に成功した場合に第２の合成画像を生成してもよい。

【0104】

本実施の形態によると、ユーザは、複数の地点を訪問したことを保証する合成画像を取得できる。各地点の撮影画像には背景とユーザとが写っているため、ユーザは、合成画像を記念写真として利用できる。

【0105】

尚、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、ＣＰＵにコンピュータプログラムを実行させることにより実現することも可能である。

【0106】

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、ＤＶＤ（Digital Versatile Disc）、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

【0107】

なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。

【0108】

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる第１の認証制御手段と、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する算出手段と、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる第２の認証制御手段と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力手段と、
を備える撮影制御装置。
（付記２）
前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する登録手段
をさらに備える付記１に記載の撮影制御装置。
（付記３）
前記登録手段は、
前記第１の顔認証又は前記第２の顔認証のいずれか一方に成功した場合、前記所定の地点を前記識別情報及び前記第２の撮影画像に対応付けて前記記憶装置へさらに登録する
付記２に記載の撮影制御装置。
（付記４）
前記撮影制御装置は、
前記第２の顔認証に失敗した場合、前記第１の撮影画像及び前記第２の撮影画像を合成した第１の合成画像を生成する第１の合成手段
をさらに備え、
前記登録手段は、
前記第２の顔認証に失敗した場合、前記第１の合成画像を前記識別情報と対応付けて前記記憶装置にさらに登録し、
前記出力手段は、前記第１の合成画像を出力する
付記２または３のいずれかに記載の撮影制御装置。
（付記５）
前記第１の撮影装置及び前記第２の撮影装置の組が異なる複数の地点に設置され、
前記撮影制御装置は、
前記記憶装置内に前記識別情報に２以上の地点が対応づけられている場合、当該識別情報と対応づけられた２以上の画像を前記記憶装置から取得し、各画像を含めた第２の合成画像を生成する第２の合成手段
をさらに備え、
前記出力手段は、前記第２の合成画像を出力する
付記２乃至４のいずれか１項に記載の撮影制御装置。
（付記６）
所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する第１の取得手段と、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う第１の認証手段と、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する算出手段と、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する第２の取得手段と、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う第２の認証手段と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する出力部と、
を備える撮影制御装置。
（付記７）
前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する登録手段
をさらに備える付記６に記載の撮影制御装置。
（付記８）
所定の地点に設置された第１の撮影装置と、
前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶する記憶手段と、前記顔特徴情報を用いた顔認証を行う認証手段と、を備える認証装置と、
撮影制御装置と、
を備え、
前記撮影制御装置は、
前記第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、
前記割合が所定値以上の場合、前記第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御システム。
（付記９）
前記撮影制御装置は、
前記第２の顔認証に成功した場合、前記第２の撮影画像を前記識別情報と対応付けて所定の記憶装置に登録する、
付記８に記載の撮影制御システム。
（付記１０）
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせ、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせ、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御方法。
（付記１１）
所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータが、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得し、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行い、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出し、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得し、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行い、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する、
撮影制御方法。
（付記１２）
コンピュータに
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、
所定の人物の識別情報と顔特徴情報とを対応付けて記憶した認証装置に対して、前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行わせる処理と、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する処理と、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、
前記認証装置に対して、前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行わせる処理と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラムが格納された非一時的なコンピュータ可読媒体。
（付記１３）
所定の人物の識別情報と顔特徴情報とを対応付けて記憶するコンピュータに、
所定の地点に設置された第１の撮影装置により人物が撮影された第１の撮影画像を取得する処理と、
前記第１の撮影画像について前記顔特徴情報を用いた第１の顔認証を行う処理と、
前記第１の顔認証に成功した場合、当該第１の顔認証に成功した顔領域が当該第１の撮影画像内に占める割合を算出する処理と、
前記割合が所定値以上の場合、前記所定の地点で前記第１の撮影装置から所定範囲内に設置され、かつ、当該第１の撮影装置と比べて広角である第２の撮影装置により前記人物が撮影された第２の撮影画像を取得する処理と、
前記第２の撮影画像について前記顔特徴情報を用いた第２の顔認証を行う処理と、
前記第２の顔認証に成功した場合、前記第２の撮影画像を出力する処理と、を実行させる撮影制御プログラムが格納された非一時的なコンピュータ可読媒体。

【符号の説明】

【0109】

１００、１００ａ、１００ｂ 撮影制御装置
１１０ 取得部
１１１ 第１取得部
１１２ 第２取得部
１２０ 認証制御部
１２１ 第１認証制御部
１２１ａ 第１認証部
１２２ 第２認証制御部
１２２ａ 第２認証部
１３０ 算出部
１４０ 出力部
１５０ 記憶部
１６０ 登録部
１７０ 合成部
１８０ 履歴ＤＢ
２００ 認証装置
２１０ 顔情報ＤＢ
２２０ 顔検出部
２３０ 特徴点抽出部
２４０ 登録部
２５０ 認証部
３００ 顔認証端末
３１０ カメラ
３２０ 記憶部
３３０ 通信部
３４０ 表示部
３５０ 制御部
３５１ 撮影部
３５２ 登録部
３５３ 認証部
３５４ 画像取得部
４００ ユーザ端末
４１０ カメラ
４２０ 記憶部
４３０ 通信部
４４０ 表示部
４５０ 制御部
４５１ 撮影部
４５２ 登録部
４５３ 認証部
４５４ 画像取得部
５００ ネットワーク
６００、６００ａ、６００ｂ 撮影制御システム
７００ 第１の撮影装置
７００ｘ カメラ
８００ 第２の撮影装置
８００ｙ カメラ
９００ デジタルサイネージ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】