特許 7556782 情報処理装置および情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-09-17

(45)【発行日】2024-09-26

(54)【発明の名称】情報処理装置および情報処理方法

(51)【国際特許分類】

   G07C 9/30 20200101AFI20240918BHJP

【ＦＩ】

G07C9/30

【請求項の数】 6

(21)【出願番号】P 2020217599

(22)【出願日】2020-12-25

(65)【公開番号】P2022102710

(43)【公開日】2022-07-07

【審査請求日】2023-09-29

(73)【特許権者】

【識別番号】000237592

【氏名又は名称】株式会社デンソーテン

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】片岡 智春

(72)【発明者】

【氏名】加茂 麻由

(72)【発明者】

【氏名】▲濱▼上 斉

【審査官】永安 真

(56)【参考文献】

【文献】特開２０１４－２１９９１３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０７Ｃ ９／００ － ９／３８

(57)【特許請求の範囲】

【請求項1】

制御部を備える情報処理装置であって、
前記制御部は、
乗り物の乗り口に設けられた第１カメラによって撮像された撮像画像に基づいて前記乗り物の乗客に関する乗客情報を検出し、
前記乗り物の降り口に設けられた第２カメラによって撮像された撮像画像に基づいて前記乗客に関する前記乗客情報を検出し、
前記乗客情報がそれぞれ検出された場合、前記第１カメラおよび前記第２カメラのうち撮像条件が有利な一方のカメラの撮像画像に基づいて検出された前記乗客情報を記憶部に記憶させる、
情報処理装置。

【請求項2】

前記制御部は、
前記第１カメラおよび前記第２カメラのうち前記一方のカメラとは異なる他方のカメラの撮像画像に基づいて検出された前記乗客情報を記憶した前記記憶部に対して、前記一方のカメラの撮像画像に基づいて検出された前記乗客情報を記憶させて更新した場合、更新前の前記乗客情報を履歴情報として前記記憶部に記憶させる、
請求項１に記載の情報処理装置。

【請求項3】

前記第２カメラが、前記一方のカメラである、
請求項１または２に記載の情報処理装置。

【請求項4】

前記制御部は、
前記第１カメラの撮像画像に基づいて検出された前記乗客情報の確度を示す第１確度を算出し、
前記第２カメラの撮像画像に基づいて検出された前記乗客情報の確度を示す第２確度を算出し、
前記第１確度と前記第２確度とを比較し、比較結果が所定条件を満たす場合、前記一方のカメラとは異なる他方のカメラの撮像画像に基づいて検出された前記乗客情報を前記記憶部に記憶させる、
請求項１～３のいずれか一つに記載の情報処理装置。

【請求項5】

乗り物の乗り口に設けられたカメラによって撮像された乗客の第１撮像画像に基づく第１の乗客情報と、前記乗り物の降り口に設けられたカメラによって撮像された同一乗客の第２撮像画像に基づく第２の乗客情報のうち、撮像条件が有利な方の撮像画像に基づく乗客情報を記憶部に記憶させる制御部を有する情報処理装置。

【請求項6】

情報処理装置が行う情報処理方法であって、
乗り物の乗り口に設けられた第１カメラによって撮像された撮像画像に基づいて前記乗り物の乗客に関する乗客情報を検出し、
前記乗り物の降り口に設けられた第２カメラによって撮像された撮像画像に基づいて前記乗客に関する前記乗客情報を検出し、
前記乗客情報がそれぞれ検出された場合、前記第１カメラおよび前記第２カメラのうち撮像条件が有利な一方のカメラの撮像画像に基づいて検出された前記乗客情報を記憶部に記憶させる、
情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置および情報処理方法に関する。

【背景技術】

【0002】

従来、例えばバスなどの乗り物において、乗降した乗客の人数を算出する技術が種々提案されている（例えば、特許文献１参照）。従来技術にあっては、乗り口および降り口にそれぞれカメラが設置され、かかるカメラによって撮像された乗客の撮像画像を用いて乗客の人数（乗客数）を算出するようにしている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１４－２１９９１３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで、上記した乗客の撮像画像に基づいて、例えば乗客の年齢や性別など乗客に関する乗客情報を検出する技術がある。しかしながら、従来技術には、かかる乗客情報の精度を向上させるという点で、改善の余地があった。

【0005】

本発明は、上記に鑑みてなされたものであって、乗客情報の精度を向上させることができる情報処理装置および情報処理方法を提供することを目的とする。

【課題を解決するための手段】

【0006】

上記課題を解決し、目的を達成するために、本発明は、情報処理装置において、第１検出部と、第２検出部と、記憶処理部とを備える。第１検出部は、乗り物の乗り口に設けられた第１カメラによって撮像された撮像画像に基づいて前記乗り物の乗客に関する乗客情報を検出可能に構成される。第２検出部は、前記乗り物の降り口に設けられた第２カメラによって撮像された撮像画像に基づいて前記乗客に関する前記乗客情報を検出可能に構成される。記憶処理部は、前記第１検出部および前記第２検出部によってそれぞれ前記乗客情報が検出された場合、前記第１カメラおよび前記第２カメラのうち撮像条件が有利な一方のカメラの撮像画像に基づいて検出された前記乗客情報を記憶部に記憶させる。

【発明の効果】

【0007】

本発明によれば、乗客情報の精度を向上させることができる。

【図面の簡単な説明】

【0008】

【図1A】図１Ａは、実施形態に係る情報処理方法の概要を示す図である。

【図1B】図１Ｂは、記憶部に記憶される乗客情報を説明するための図である。

【図2】図２は、バス端末装置を備えた情報処理システムの構成例を示すブロック図である。

【図3】図３は、乗り口端末装置の構成例を示すブロック図である。

【図4】図４は、乗客情報の一例を示す図である。

【図5】図５は、撮像状況情報の一例を示す図である。

【図6】図６は、降り口端末装置の構成例を示すブロック図である。

【図7】図７は、乗客情報の一例を示す図である。

【図8】図８は、撮像状況情報の一例を示す図である。

【図9】図９は、管理サーバの構成例を示すブロック図である。

【図10】図１０は、情報処理システムが実行する処理シーケンスの一例を示す図である。

【図11】図１１は、変形例に係るバス端末装置が実行する処理手順を示すフローチャートである。

【0009】

以下、添付図面を参照して、本願の開示する情報処理装置および情報処理方法の実施形態を詳細に説明する。なお、以下に示す実施形態によりこの発明が限定されるものではない。

【0010】

（実施形態）
＜情報処理装置による情報処理方法の概要＞
以下では先ず、実施形態に係る情報処理装置による情報処理方法の概要について図１Ａ等を参照して説明する。図１Ａは、実施形態に係る情報処理方法の概要を示す図である。

【0011】

実施形態に係る情報処理方法は、例えば乗り物の乗客に関する乗客情報を検出して記憶部に記憶させる処理や乗客数を算出する処理などを行うことができる。なお、以下では乗り物の一例としてバス１を挙げて説明するが、乗り物の種類はこれに限定されるものではない。すなわち、乗り物は、例えば鉄道車両や航空機、船舶などその他の種類の乗り物であってもよい。

【0012】

図１Ａに示すように、バス１には、バス端末装置１０が搭載され、かかるバス端末装置１０が情報処理装置として機能する。具体的に説明すると、バス端末装置１０は、乗り口端末装置１０ａと、降り口端末装置１０ｂとを備える。

【0013】

乗り口端末装置１０ａは、バス１の乗り口２ａに設置される。乗り口端末装置１０ａは、第１カメラ１１ａを備える。例えば、第１カメラ１１ａは、バス１の乗り口２ａであって、かつ、バス１の中（バス車内）に設けられ、バス１に乗車する乗客である乗車者の乗車者撮像画像を撮像する。乗り口端末装置１０ａは、かかる乗車者撮像画像から顔情報が検出されることで乗車者を検知することができる。

【0014】

降り口端末装置１０ｂは、バス１の降り口２ｂに設置される。降り口端末装置１０ｂは、第２カメラ１１ｂを備える。例えば、第２カメラ１１ｂは、バス１の降り口２ｂであって、かつ、バス１の中（バス車内）に設けられ、バス１から降車する乗客である降車者の降車者撮像画像を撮像する。降り口端末装置１０ｂは、かかる降車者撮像画像から顔情報が検出されることで降車者を検知することができる。

【0015】

そして、バス端末装置１０は、乗り口端末装置１０ａによって検知された乗車者に関する乗客情報と降り口端末装置１０ｂによって検知された降車者に関する乗客情報とに基づき、乗客数の算出を行うことができる。なお、乗客数の算出については後述する。

【0016】

ところで、上記した乗客情報には、例えば乗客の年齢や性別、乗車した停留所、降車した停留所など乗客に関する種々の情報が含まれる。そのため、バス端末装置１０は、かかる乗客情報を記憶しておき、バス事業者は、バス端末装置１０に記憶された乗客情報を分析することで、バス１に関する各種の適切な対応を行うことができる。例えば、バス事業者は、乗客情報に応じて車内広告の内容や車内アナウンスの内容を変更したり、乗客情報に応じて運行計画を調整してバス１を効率的に運行させたりするなどの対応を行うことができる。

【0017】

しかしながら、従来技術には、乗客情報の精度を向上させるという点で、改善の余地があった。具体的に説明すると、従来技術において、乗り口端末装置１０ａは、第１カメラ１１ａの乗車者撮像画像に基づいて乗客情報（以下「第１乗客情報」と記載する場合がある）を検出する。降り口端末装置１０ｂは、第２カメラ１１ｂの降車者撮像画像に基づいて乗客情報（以下「第２乗客情報」と記載する場合がある）を検出する。従来技術にあっては、上記した第１乗客情報を記憶部３０ｂに記憶させ、その後第１乗客情報において不足している情報（例えば降車した停留所の情報）を第２乗客情報で補完するようにしていた。

【0018】

ここで、上記した第１カメラ１１ａと第２カメラ１１ｂとでは、撮像条件が異なるが、従来技術では、かかる撮像条件の差異が考慮されておらず、結果として乗客情報の精度の低下を招くおそれがあった。

【0019】

そこで、本実施形態に係るバス端末装置（情報処理装置）１０にあっては、乗客情報の精度を向上させることができるような構成とした。

【0020】

具体的には、バス端末装置１０の乗り口端末装置１０ａは、先ず、第１カメラ１１ａから、バス１に乗車する乗客（乗車者）が撮像された乗車者撮像画像を取得する（ステップＳ１）。

【0021】

次いで、乗り口端末装置１０ａは、第１カメラ１１ａによって撮像された乗車者撮像画像に基づいて第１乗客情報を検出する（ステップＳ２）。次いで、乗り口端末装置１０ａは、検出された第１乗客情報を降り口端末装置１０ｂへ出力する（ステップＳ３）。

【0022】

降り口端末装置１０ｂは、乗り口端末装置１０ａから出力された第１乗客情報を記憶部３０ｂに記憶させる（ステップＳ４）。

【0023】

次いで、降り口端末装置１０ｂは、第２カメラ１１ｂから、バス１から降車する乗客（降車者）の降車者撮像画像を取得する（ステップＳ５）。次いで、第２カメラ１１ｂによって撮像された降車者撮像画像に基づいて第２乗客情報を検出する（ステップＳ６）。

【0024】

ここで、降り口端末装置１０ｂは、検出された第２乗客情報を記憶部３０ｂに記憶させるが、その際、本実施形態においては、第１カメラ１１ａと第２カメラ１１ｂとの撮像条件の差異に応じて記憶させるようにした。

【0025】

先ず、各カメラ１１ａ，１１ｂの撮像条件について具体的に説明すると、第１カメラ１１ａは、乗り口２ａにおいて乗車の妨げにならないような位置、例えば乗り口２ａの手すりにおいて利用されない下方の位置等に設置される。また、乗客は、例えば乗り口２ａの階段を上って乗車するため、頭部が上下方向や左右方向に動きやすい。そのため、第１カメラ１１ａは、乗客の顔などを正面から撮像しにくく、顔情報が得られにくいことがある。また、第１カメラ１１ａは、車内から車外に向けて撮像するため、例えば逆光などにより、乗車者撮像画像の乗客の顔が暗くなって顔情報が得られにくくなるなど、外部環境による影響も受けやすい。このような各種の要因により、第１カメラ１１ａの撮像条件は、比較的に不利なものといえる。

【0026】

他方、第２カメラ１１ｂは、降り口２ｂへ移動する乗客を撮像できればよいため、例えば降り口２ｂから車内へ向くようにし、乗客の顔の高さ付近に設置可能である。また、乗客は、例えば降り口２ｂへ向けて車内を移動するだけであるため、頭部は上下方向や左右方向にあまり動かないことが多い。そのため、第２カメラ１１ｂは、乗客の顔などを正面から撮像しやすく、顔情報が得られやすい。また、第２カメラ１１ｂは、車内に設置されて車内に向けて撮像するため、上記した外部環境による影響を受けにくい。従って、第２カメラ１１ｂの撮像条件は、第１カメラ１１ａの撮像条件と比べて有利であるといえる。

【0027】

そのため、撮像条件が有利な第２カメラ１１ｂの撮像画像に基づいて検出された第２乗客情報の精度は、撮像条件が不利な第１カメラ１１ａの撮像画像に基づいて検出された第１乗客情報の精度より高くなる可能性が高い。

【0028】

従って、本実施形態に係る降り口端末装置１０ｂは、第１乗客情報に比べて精度が高い第２乗客情報を記憶部３０ｂに優先的に記憶させるようにした。詳しくは、降り口端末装置１０ｂは、第１乗客情報および第２乗客情報が検出された場合、第１カメラ１１ａおよび第２カメラ１１ｂのうち撮像条件が有利な一方のカメラ（ここでは第２カメラ１１ｂ）の撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させる（ステップＳ７）。

【0029】

このステップＳ７の処理等について、図１Ｂを参照しつつ詳説する。図１Ｂは、記憶部３０ｂに記憶される乗客情報を説明するための図である。図１Ｂにおいては、乗客情報に含まれるデータ項目と、対応するデータ項目のデータ（情報）を検出した端末装置との関係を示している。なお、図１Ｂに示す乗客情報に含まれるデータ項目の内容は、あくまでも例示であって限定されるものではない。

【0030】

また、図１Ｂでは、左図は第２乗客情報が検出される前であって、ステップＳ４の処理で第１乗客情報が記憶された記憶部３０ｂの乗客情報を示し、右図は第２乗客情報が検出され、ステップＳ７の処理で第２乗客情報が記憶された記憶部３０ｂの乗客情報を示している。

【0031】

図１Ｂの左図に示すように、降り口端末装置１０ｂは、先ず、乗り口端末装置１０ａによって検出された第１乗客情報を記憶部３０ｂに記憶させる。なお、第１乗客情報は、バス１に乗る乗客（乗車者）に関する情報であるため、降車した停留所の情報を含んでいない。

【0032】

その後、降り口端末装置１０ｂは、第２乗客情報が検出され、第１、第２乗客情報の両方が検出された場合、撮像条件が有利な一方のカメラ（ここでは第２カメラ１１ｂ）の撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させる、言い換えると、第２乗客情報を用いて更新する。なお、上記した撮像条件および撮像条件が有利な一方のカメラは、予め設定されるが、これに限定されるものではない。

【0033】

一例としては、図１Ｂの右図に示すように、降り口端末装置１０ｂは、乗り口端末装置１０ａによって検出された第１乗客情報であったデータ項目「年齢」および「性別」について、降り口端末装置１０ｂによって検出された第２乗客情報に上書きする。

【0034】

なお、第２乗客情報は、バス１から降りる乗客（降車者）に関する情報であるため、乗車した停留所の情報を含まず、降車した停留所の情報を含む。そのため、データ項目「乗車した停留所」は、第１乗客情報のままであり、データ項目「降車した停留所」には、第２乗客情報が記憶される。

【0035】

このように、本実施形態にあっては、撮像条件が有利な第２カメラ１１ｂの撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させることで、乗客情報の精度を向上させることができる。

【0036】

すなわち、例えば仮に、第２乗客情報が検出された後、データ項目「年齢」および「性別」について第１乗客情報のままとした場合、乗客情報の精度が低下するおそれがあるが、上記したように第１乗客情報より精度の高い第２乗客情報に上書きすることで、乗客情報（例えばデータ項目「年齢」および「性別」など）の精度を向上させることができる。

【0037】

＜情報処理システムの構成＞
次に、実施形態に係るバス端末装置（情報処理装置）１０を備えた情報処理システムの構成について、図２を用いて説明する。図２は、バス端末装置１０を備えた情報処理システム１００の構成例を示すブロック図である。

【0038】

図２に示すように、情報処理システム１００は、上記したバス端末装置１０と、管理サーバ２００と、バス事業者端末装置３００と、ユーザ端末装置４００とを含み、これらはインターネット網などの通信ネットワークＮを介して通信可能に接続される。

【0039】

バス端末装置１０は、上記したように、乗り口端末装置１０ａおよび降り口端末装置１０ｂを備える。乗り口端末装置１０ａと降り口端末装置１０ｂとは、例えばＷｉ－Ｆｉ（登録商標）などの近距離無線通信を介して通信可能に接続されるが、これに限られず、近距離無線通信に加えて、あるいは代えて通信ネットワークＮなどを介して通信可能に接続されてもよい。なお、乗り口端末装置１０ａの詳細な構成については、図３等を用いて後述する。また、降り口端末装置１０ｂの詳細な構成については、図６等を用いて後述する。

【0040】

管理サーバ２００は、バス端末装置１０から送信される、バス１の乗客数の情報を含む乗客情報などを管理するサーバ装置である。管理サーバ２００は、乗客情報などをバス事業者端末装置３００へ提供することができる。また、管理サーバ２００は、バス１の乗客数の情報に基づいてバス１の混雑度を算出し、算出された混雑度を示す混雑度情報をユーザ端末装置４００へ提供することができる。なお、管理サーバ２００の詳細な構成については、図９を用いて後述する。

【0041】

バス事業者端末装置３００は、バス１を運行するバス事業者が使用する端末装置である。バス事業者端末装置３００としては、例えばＰＣ（Personal Computer）、スマートフォンやタブレット端末などを用いることができるが、これに限定されるものではない。かかるバス事業者端末装置３００には、管理サーバ２００から乗客情報などが送信されて表示される。これにより、バス事業者は、例えば乗客情報などに応じた車内広告の内容や車内アナウンスの内容を変更したり、乗客情報などに応じたバス１の運行計画を立てたりすることが可能になる。

【0042】

ユーザ端末装置４００は、バス１を利用するユーザ、正確にはバス１をこれから利用するユーザが使用する端末装置である。なお、ユーザ端末装置４００としては、例えばスマートフォンやタブレット端末、ＰＣなどを用いることができるが、これに限定されるものではない。かかるユーザ端末装置４００には、管理サーバ２００からバス１の混雑度情報が送信されて表示される。これにより、ユーザは、例えばバス１の混雑度を乗車前に確認することが可能になる。なお、図２では、図示の簡略化のため、ユーザ端末装置４００を２つ示したが、これに限られず、１つであっても３つ以上であってもよい。

【0043】

＜乗り口端末装置の構成＞
次いで、乗り口端末装置１０ａの構成について図３等を参照して説明する。図３は、乗り口端末装置１０ａの構成例を示すブロック図である。なお、図３を含む各ブロック図では、本実施形態の特徴を説明するために必要な構成要素のみを機能ブロックで表しており、一般的な構成要素についての記載を省略している。

【0044】

換言すれば、図３等のブロック図に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各機能ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。

【0045】

図３に示すように、乗り口端末装置１０ａは、第１カメラ１１ａと、測位部１２ａと、制御部２０ａと、記憶部３０ａとを備える。なお、乗り口端末装置１０ａとしては、スマートフォンやタブレット端末などを用いることができるが、これに限定されるものではない。

【0046】

第１カメラ１１ａは、例えばレンズと、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子とを備えるカメラである。第１カメラ１１ａは、バス１の乗り口２ａ（図１Ａ参照）であって、かつ、バス１の中（バス車内）に設けられる。詳しくは、第１カメラ１１ａは、少なくとも乗り口２ａから乗車する乗車者（乗客）の顔を含む範囲をバス車内から撮像可能な位置に設けられる。第１カメラ１１ａは、乗車者の乗車者撮像画像を撮像し、撮像された乗車者撮像画像を制御部２０ａへ出力する。

【0047】

測位部１２ａは、バス１の位置情報（例えば、緯度および経度）を取得する。例えば、測位部１２ａは、ＧＰＳ（Global Positioning System）衛星から送出される電波を受信し、受信した電波に基づいてバス１の位置情報を取得し、取得された位置情報を制御部２０ａへ出力する。なお、測位部１２ａは、バス１が停留所に停止しているときに取得されたバス１の位置情報を、バス１が停止している停留所の位置情報として出力してもよい。

【0048】

制御部２０ａは、取得部２１ａと、検出部２２ａと、登録部２３ａと、出力部２４ａとを備え、例えば、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、入出力ポートなどを有するコンピュータや各種の回路を含む。

【0049】

コンピュータのＣＰＵは、例えば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部２０ａの取得部２１ａ、検出部２２ａ、登録部２３ａおよび出力部２４ａとして機能する。

【0050】

また、制御部２０ａの取得部２１ａ、検出部２２ａ、登録部２３ａおよび出力部２４ａの少なくともいずれか一部または全部をＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアで構成することもできる。

【0051】

また、記憶部３０ａは、例えば、不揮発性メモリやデータフラッシュといった記憶デバイスで構成される記憶部である。かかる記憶部３０ａには、乗客情報３１ａ、撮像状況情報３２ａおよび各種プログラムなどが記憶される。

【0052】

乗客情報３１ａは、バス１に乗る乗客（乗車者）に関する情報である。ここで、図４を用いて、乗客情報３１ａについて説明する。図４は、乗客情報３１ａの一例を示す図である。図４に示すように、乗客情報３１ａには、「乗客ＩＤ」、「乗車者画像」、「特徴点」、「性別」、「年齢」、「年齢層」、「マスクの有無」、「乗車した停留所」および「降車した停留所」等の項目が含まれ、各項目は互いに関連付けられている。

【0053】

「乗客ＩＤ」は、乗客を識別する識別情報である。「乗車者画像」は、乗車者撮像画像の情報である。なお、図４に示す例では、便宜上、「乗車者画像」を「画像Ｅ０１」といったように抽象的な記載とするが、「画像Ｅ０１」には具体的な情報が記憶されるものとする。以下、他の情報についても抽象的に記載する場合がある。

【0054】

「特徴点」は、乗車者撮像画像に写った乗車者の顔の特徴点情報であり、顔情報の一例である。特徴点情報には、例えば乗車者撮像画像に写った乗車者の顔における目（目頭、目尻など）、鼻や口などの特徴点の位置などが含まれるが、これに限定されるものではない。

【0055】

「性別」は、乗車者撮像画像に写った乗車者の性別を示す情報である。「年齢」は、乗車者撮像画像に写った乗車者の年齢を示す情報であり、「年齢層」は、かかる乗車者の年齢層を示す情報である。「マスクの有無」は、乗車者撮像画像に写った乗車者がマスクを着用しているか否かを示す情報である。なお、上記した性別や年齢、年齢層およびマスクの有無などの情報は、乗車者の属性情報の一例である。

【0056】

「乗車した停留所」は、乗客（乗車者）が乗車した停留所を示す情報である。「降車した停留所」は、乗客が降車した停留所を示す情報である。なお、乗り口端末装置１０ａの記憶部３０ａには、バス１に乗る乗客（乗車者）に関する情報が記憶されるため、降車した停留所の情報は記憶されていない。

【0057】

「第１確度」は、乗車者撮像画像に基づいて検出された、属性情報を含む乗客情報の確度を示す情報である。「第１確度」は、例えば検出部２２ａによって算出されるが、これについては後述する。

【0058】

図４に示す例では、乗客ＩＤ「Ｐ０１」で識別される乗客のデータは、乗車者画像が「画像Ｅ０１」、特徴点が「特徴点Ｆ０１」、性別が「男性」、年齢が「年齢Ｇ０１」、年齢層が「大人」、マスクの有無が「無し」、乗車した停留所が「停留所Ｈ０１」、第１確度が「確度Ｉ０１」であることを示している。

【0059】

図３の説明に戻ると、撮像状況情報３２ａは、第１カメラ１１ａの撮像条件や第１カメラ１１ａで乗車者撮像画像を撮像したときの状況などを示す情報である。

【0060】

ここで、図５を用いて、撮像状況情報３２ａについて説明する。図５は、撮像状況情報３２ａの一例を示す図である。図５に示すように、撮像状況情報３２ａには、「状況ＩＤ」、「第１カメラの設置位置」、「第１カメラの設置角度」、「停留所」、「日時」および「天候」等の項目が含まれ、各項目は互いに関連付けられている。

【0061】

「状況ＩＤ」は、撮像状況情報を識別する識別情報である。「第１カメラの設置位置」は、乗り口２ａにおいて第１カメラ１１ａが設置される位置を示す情報である。「第１カメラの設置位置」には、例えば第１カメラ１１ａが設置される場所（例えば車内の手すり、座席など）、第１カメラ１１ａが設置される高さなどの情報が含まれるが、これらに限定されるものではない。

【0062】

「第１カメラの設置角度」は、第１カメラ１１ａが設置される角度を示す情報である。「第１カメラの設置角度」には、例えば乗り口２ａに対する第１カメラ１１ａの取り付け角度であるが、これに限られず、第１カメラ１１ａの画角などその他の情報が含まれてもよい。

【0063】

「停留所」は、乗車者撮像画像が撮像された停留所を示す情報である。「日時」および「天候」はそれぞれ、乗車者撮像画像が撮像されたときの日時を示す情報、および、天候を示す情報である。

【0064】

図５に示す例では、状況ＩＤ「Ｊ０１」で識別される撮像状況のデータは、第１カメラ１１ａの設置位置が「位置Ｋ０１」、第１カメラ１１ａの設置角度が「角度Ｌ０１」、停留所が「停留所Ｍ０１」、日時が「日時Ｎ０１」、天候が「晴れ」であることを示している。

【0065】

なお、第１カメラ１１ａの撮像条件は、上記した各項目のうち、「第１カメラの設置位置」および「第１カメラの設置角度」であり、記憶部３０ａに予め設定（登録）されているものとするが、これに限られない。すなわち、第１カメラ１１ａの撮像条件は、「第１カメラの設置位置」および「第１カメラの設置角度」の一方であってもよいし、「停留所」、「日時」および「天候」などその他の情報が含まれてもよく、任意に設定可能である。

【0066】

図３の説明に戻ると、制御部２０ａの取得部２１ａは、第１カメラ１１ａから、バス１に乗車する乗客（乗車者）が撮像された乗車者撮像画像を取得する。例えば、取得部２１ａは、バス１が停留所で停止しているときに乗車者撮像画像を取得するが、取得のタイミングはこれに限定されるものではない。取得部２１ａは、取得された乗車者撮像画像を検出部２２ａへ出力する。

【0067】

検出部２２ａは、乗車者撮像画像に基づいて乗客（乗車者）に関する乗客情報を検出することができる。なお、検出部２２ａは、第１検出部の一例である。

【0068】

例えば、検出部２２ａは、乗車者撮像画像から乗客（乗車者）の顔情報（詳しくは顔の特徴点情報）を検出する。例えば、検出部２２ａは、乗車者撮像画像から、目（目頭、目尻など）、鼻や口、輪郭などの特徴点を抽出し、抽出された特徴点の位置を特徴点情報として検出する。検出部２２ａは、検出された特徴点情報を乗車者撮像画像とともに、登録部２３ａへ出力する。

【0069】

検出部２２ａは、乗車者撮像画像から乗車者の属性情報を検出する。例えば、検出部２２ａは、乗車者撮像画像における特徴点情報に基づいて性別や年齢、年齢層、マスクの有無などの属性情報を検出する。そして、検出部２２ａは、検出された属性情報を登録部２３ａへ出力する。

【0070】

また、検出部２２ａは、乗車者撮像画像に基づいて検出された、属性情報を含む乗客情報の確度を示す第１確度を算出することができる。例えば、検出部２２ａは、乗車者撮像画像に基づいて検出された特徴点の多寡や、撮像画像の鮮明度合いなど種々の情報に基づいて、乗客情報の確からしさを示す確度（ここでは第１確度）を算出することができる。例えば検出部２２ａは、検出された特徴点が多くなるにつれて、第１確度が高くなるようにして算出する。検出部２２ａは、算出された第１確度を示す情報を登録部２３ａへ出力する。

【0071】

なお、上記した特徴点情報および属性情報の検出手法、乗客情報の確度の算出手法は、任意に設定可能である。

【0072】

登録部２３ａは、検出部２２ａによって検出された特徴点情報および属性情報、算出された第１確度を示す情報を乗車者撮像画像とともに、記憶部３０ａに乗客情報３１ａ（図４参照）として登録する（記憶させる）。このとき、登録部２３ａは、測位部１２ａのバス１の位置情報に基づいて、乗車者撮像画像が撮像された停留所、すなわち、乗車者が乗車した停留所の情報を乗客情報３１ａに付加してもよい。

【0073】

また、登録部２３ａは、乗車者撮像画像が撮像された停留所、日時および天候などの撮像状況を示す情報を、記憶部３０ａに撮像状況情報３２ａ（図５参照）として登録してもよい。なお、天候などを示す情報は、図示しない外部サーバなどから取得されて登録されるが、これに限定されるものではない。

【0074】

出力部２４ａは、記憶部３０ａにアクセスし、乗客情報３１ａを降り口端末装置１０ｂへ出力する。なお、出力部２４ａは、バス１が停留所を出発して登録部２３ａでの登録処理等が完了してから次の停留所に到着するまでの間に出力処理を実行するが、出力のタイミングはこれに限定されるものではない。

【0075】

＜降り口端末装置の構成＞
次いで、降り口端末装置１０ｂの構成について図６等を参照して説明する。図６は、降り口端末装置１０ｂの構成例を示すブロック図である。

【0076】

図６に示すように、降り口端末装置１０ｂは、第２カメラ１１ｂと、測位部１２ｂと、制御部２０ｂと、記憶部３０ｂとを備える。なお、降り口端末装置１０ｂとしては、スマートフォンやタブレット端末などを用いることができるが、これに限定されるものではない。

【0077】

第２カメラ１１ｂは、例えばレンズと、ＣＣＤやＣＭＯＳなどの撮像素子とを備えるカメラである。第２カメラ１１ｂは、バス１の降り口２ｂ（図１Ａ参照）であって、かつ、バス１の中（バス車内）に設けられる。詳しくは、第２カメラ１１ｂは、少なくとも降り口２ｂから降車する降車者（乗客）の顔を含む範囲をバス車内から撮像可能な位置に設けられる。第２カメラ１１ｂは、降車者の降車者撮像画像を撮像し、撮像された降車者撮像画像を制御部２０ｂへ出力する。

【0078】

測位部１２ｂは、例えばＧＰＳ衛星から送出される電波に基づいてバス１の位置情報を取得し、取得された位置情報を制御部２０ｂへ出力する。なお、測位部１２ｂは、バス１が停留所に停止しているときに取得されたバス１の位置情報を、バス１が停止している停留所の位置情報として出力してもよい。

【0079】

制御部２０ｂは、取得部２１ｂと、検出部２２ｂと、照合部２３ｂと、登録部２４ｂと、算出部２５ｂと、送信部２６ｂとを備え、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、入出力ポートなどを有するコンピュータや各種の回路を含む。

【0080】

コンピュータのＣＰＵは、例えば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部２０ｂの取得部２１ｂ、検出部２２ｂ、照合部２３ｂ、登録部２４ｂ、算出部２５ｂおよび送信部２６ｂとして機能する。

【0081】

また、制御部２０ｂの取得部２１ｂ、検出部２２ｂ、照合部２３ｂ、登録部２４ｂ、算出部２５ｂおよび送信部２６ｂの少なくともいずれか一部または全部をＡＳＩＣやＦＰＧＡ等のハードウェアで構成することもできる。

【0082】

また、記憶部３０ｂは、例えば、不揮発性メモリやデータフラッシュといった記憶デバイスで構成される記憶部である。かかる記憶部３０ｂには、乗客情報３１ｂ、撮像状況情報３２ｂ、乗降カウンタ３３ｂおよび各種プログラムなどが記憶される。

【0083】

乗客情報３１ｂは、バス１に乗る乗客（乗車者および降車者を含む）に関する情報である。ここで、図７を用いて、乗客情報３１ｂについて説明する。図７は、乗客情報３１ｂの一例を示す図である。図７に示すように、乗客情報３１ｂには、「乗客ＩＤ」、「降車者画像」、「特徴点」、「性別」、「年齢」、「年齢層」、「マスクの有無」、「乗車した停留所」、「降車した停留所」、「履歴情報」および「第２確度」等の項目が含まれ、各項目は互いに関連付けられている。

【0084】

「乗客ＩＤ」は、乗客を識別する識別情報である。なお、図７において、乗客ＩＤが「Ｐ０１」の乗客は、図４に示す乗客情報３１ａにおける乗客ＩＤが「Ｐ０１」の乗客と同じ人物（同じ乗客）であることを示している。

【0085】

「降車者画像」は、降車者撮像画像の情報である。「特徴点」は、顔の特徴点情報である。かかる特徴点情報には、例えば降車者撮像画像に写った降車者の顔における目、鼻や口などの特徴点の位置などが含まれるが、これに限定されるものではない。

【0086】

「性別」は、降車者撮像画像に写った降車者の性別を示す情報である。「年齢」は、降車者撮像画像に写った降車者の年齢を示す情報であり、「年齢層」は、かかる降車者の年齢層を示す情報である。「マスクの有無」は、降車者撮像画像に写った降車者がマスクを着用しているか否かを示す情報である。

【0087】

「乗車した停留所」は、乗客が乗車した停留所を示す情報である。「降車した停留所」は、乗客（降車者）が降車した停留所を示す情報である。

【0088】

「履歴情報」は、更新前の乗客情報を示す履歴情報である。詳しくは、上記したように、降り口端末装置１０ｂの記憶部３０ｂには、乗車者撮像画像に基づいて検出される第１乗客情報が記憶され、その後、降車者撮像画像に基づいて第２乗客情報が検出されると、第２乗客情報が優先的に記憶される、すなわち乗客情報３１ｂが更新される（図１Ｂ参照）。上記した「履歴情報」は、更新前の乗客情報を示す情報であり、詳しくは上書きされた第１乗客情報を示す情報（更新履歴情報）である。

【0089】

なお、履歴情報には、上書きされた第１乗客情報の全てあるいは一部が含まれているものとする。すなわち、例えば履歴情報の「履歴Ｑ０１」には、特徴点が「特徴点Ｆ０１」、性別が「男性」、年齢が「年齢Ｇ０１」、年齢層が「大人」、マスクの有無が「無し」などの属性情報を含む第１乗客情報が含まれるものとする。

【0090】

「第２確度」は、降車者撮像画像に基づいて検出された、属性情報を含む乗客情報の確度を示す情報である。「第２確度」は、例えば検出部２２ｂによって算出されるが、これについては後述する。

【0091】

図７に示す例では、降車者ＩＤ「Ｑ０１」で識別される降車者のデータは、降車者画像が「画像Ｅ１１」、特徴点が「特徴点Ｆ１１」、性別が「男性」、年齢が「年齢Ｇ１１」、年齢層が「大人」、マスクの有無が「無し」、乗車した停留所が「停留所Ｈ０１」、降車した停留所が「停留所Ｈ１１」、履歴情報が「履歴Ｑ０１」、第２確度が「確度Ｒ０１」であることを示している。

【0092】

図６の説明に戻ると、撮像状況情報３２ｂは、第２カメラ１１ｂの撮像条件や第２カメラ１１ｂで降車者撮像画像を撮像したときの状況などを示す情報である。

【0093】

ここで、撮像状況情報３２ｂについて説明する。図８は、撮像状況情報３２ｂの一例を示す図である。図８に示すように、撮像状況情報３２ｂには、「状況ＩＤ」、「第２カメラの設置位置」、「第２カメラの設置角度」、「停留所」、「日時」および「天候」等の項目が含まれ、各項目は互いに関連付けられている。

【0094】

「状況ＩＤ」は、撮像状況情報を識別する識別情報である。「第２カメラの設置位置」は、降り口２ｂにおいて第２カメラ１１ｂが設置される位置を示す情報である。「第２カメラの設置位置」には、例えば第２カメラ１１ｂが設置される場所（例えば車内の手すり、座席など）、第２カメラ１１ｂが設置される高さなどの情報が含まれるが、これらに限定されるものではない。

【0095】

「第２カメラの設置角度」は、第２カメラ１１ｂが設置される角度を示す情報である。「第２カメラの設置角度」には、例えば降り口２ｂに対する第２カメラ１１ｂの取り付け角度であるが、これに限られず、第２カメラ１１ｂの画角などその他の情報が含まれてもよい。

【0096】

「停留所」は、降車者撮像画像が撮像された停留所を示す情報である。「日時」および「天候」はそれぞれ、降車者撮像画像が撮像されたときの日時を示す情報、および、天候を示す情報である。

【0097】

図８に示す例では、状況ＩＤ「Ｓ０１」で識別される撮像状況のデータは、第２カメラ１１ｂの設置位置が「位置Ｔ０１」、第２カメラ１１ｂの設置角度が「角度Ｕ０１」、停留所が「停留所Ｍ０１」、日時が「日時Ｎ０１」、天候が「晴れ」であることを示している。

【0098】

なお、第２カメラ１１ｂの撮像条件は、上記した各項目のうち、「第２カメラの設置位置」および「第２カメラの設置角度」であり、記憶部３０ａに予め設定（登録）されているものとするが、これに限られない。すなわち、第２カメラ１１ｂの撮像条件は、「第２カメラの設置位置」および「第２カメラの設置角度」の一方であってもよいし、「停留所」、「日時」および「天候」などその他の情報が含まれてもよく、任意に設定可能である。

【0099】

図６の説明に戻ると、乗降カウンタ３３ｂは、バス１の現在の乗客数をカウントするカウンタである。

【0100】

制御部２０ｂの取得部２１ｂは、乗り口端末装置１０ａから出力された乗客情報（第１乗客情報）を取得し、取得された第１乗客情報を登録部２４ｂへ出力する。なお、登録部２４ｂは、第１乗客情報を記憶部３０ｂに乗客情報３１ａ（図７参照）として登録する。なお、第１乗客情報の記憶部３０ｂへの登録は、取得部２１ｂが行ってもよい。

【0101】

また、取得部２１ｂは、第２カメラ１１ｂから、バス１から降車する乗客（降車者）が撮像された降車者撮像画像を取得する。例えば、取得部２１ｂは、バス１が停留所で停止しているときに降車者撮像画像を取得するが、取得のタイミングはこれに限定されるものではない。取得部２１ｂは、取得された降車者撮像画像を検出部２２ｂへ出力する。

【0102】

検出部２２ｂは、降車者撮像画像に基づいて乗客（降車者）に関する乗客情報を検出することができる。なお、検出部２２ｂは、第２検出部の一例である。

【0103】

例えば、検出部２２ｂは、降車者撮像画像から乗客（降車者）の顔情報（詳しくは顔の特徴点情報）を検出する。例えば、検出部２２ｂは、降車者撮像画像から、目、鼻や口、輪郭などの特徴点を抽出し、抽出された特徴点の位置を特徴点情報として検出する。検出部２２ａは、検出された特徴点情報を降車者撮像画像とともに、照合部２３ｂおよび登録部２４ｂへ出力する。

【0104】

検出部２２ｂは、降車者撮像画像から降車者の属性情報を検出する。例えば、検出部２２ａは、降車者撮像画像における特徴点情報に基づいて性別や年齢、年齢層、マスクの有無などの属性情報を検出する。そして、検出部２２ａは、検出された属性情報を照合部２３ｂおよび登録部２３ａへ出力する。

【0105】

また、検出部２２ｂは、降車者撮像画像に基づいて検出された、属性情報を含む乗客情報の確度を示す第２確度を算出することができる。例えば、検出部２２ｂは、降車者撮像画像に基づいて検出された特徴点の多寡など種々の情報に基づいて、乗客情報の第２確度を算出することができる。例えば検出部２２ｂは、検出された特徴点が多くなるにつれて、第２確度が高くなるようにして算出する。検出部２２ｂは、算出された第２確度を示す情報を登録部２４ｂへ出力する。

【0106】

照合部２３ｂは、記憶部３０ｂに記憶される第１乗客情報である乗客情報と、検出部２２ｂによって検出された第２乗客情報とを照合する。詳しくは、照合部２３ｂは、第１乗客情報で示される乗車者と、第２乗客情報で示される降車者とが同じ乗客であるか否かの照合を行う。

【0107】

例えば、照合部２３ｂは、第２乗客情報における降車者の特徴点情報や属性情報が、第１乗客情報における乗車者の特徴点情報や属性情報と一致あるいは略一致するか否かの照合を行う。照合部２３ｂは、降車者の特徴点情報等が乗車者の特徴点情報等と一致あるいは略一致する場合、第１乗客情報で示される乗車者と第２乗客情報で示される降車者とが同じ乗客である旨の照合結果を、登録部２４ｂへ出力する。

【0108】

登録部２４ｂは、第２乗客情報で示される降車者が第１乗客情報で示される乗車者と同じ乗客である旨の照合結果が入力された場合、第２乗客情報を記憶部３０ｂに乗客情報３１ｂ（図７参照）として登録する（記憶させる）。なお、登録部２４ｂは、記憶処理部の一例である。

【0109】

言い換えると、例えば登録部２４ｂは、同じ乗客について第１乗客情報および第２乗客情報が検出された場合、第１カメラ１１ａおよび第２カメラ１１ｂのうち撮像条件が有利な一方のカメラ（ここでは第２カメラ１１ｂ）の撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させる。別言すれば、登録部２４ｂは、撮像条件が有利な第２カメラ１１ｂの降車者撮像画像に基づいて検出された第２乗客情報で、記憶部３０ｂに記憶されていた第１乗客情報を更新する（上書きする）。

【0110】

このように、本実施形態にあっては、撮像条件が有利な第２カメラ１１ｂの撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させることで、乗客情報の精度を向上させることができる。すなわち、記憶部３０ｂの乗客情報を、上記したように第１乗客情報より精度の高い第２乗客情報で上書きすることで、記憶部３０ｂの乗客情報の精度を向上させることができる。

【0111】

また、登録部２４ｂは、特徴点情報および属性情報を含む第２乗客情報を記憶部３０ｂに記憶させる際、算出された第２確度を示す情報を降車者撮像画像とともに、記憶部３０ａに乗客情報３１ｂ（図７参照）として登録する。また、登録部２４ｂは、測位部１２ｂのバス１の位置情報に基づいて、降車者撮像画像が撮像された停留所、すなわち、降車者が降車した停留所の情報を乗客情報３１ｂに付加してもよい。

【0112】

また、登録部２４ｂは、更新前の乗客情報（第１乗客情報）を履歴情報として記憶部３０ｂに記憶させてもよい。詳しくは、登録部２４ｂは、第１カメラ１１ａおよび第２カメラ１１ｂのうち撮像条件が有利な一方のカメラ（ここでは第２カメラ１１ｂ）とは異なる他方のカメラ（ここでは第１カメラ１１ａ）の撮像画像（乗車者撮像画像）に基づいて検出された乗客情報（第１乗客情報）を記憶した記憶部３０ｂに対して、一方のカメラ（第２カメラ１１ｂ）の撮像画像（降車者撮像画像）に基づいて検出された乗客情報（第２乗客情報）を記憶させて更新した場合、更新前の乗客情報（第１乗客情報）を履歴情報として記憶部３０ｂに記憶させてもよい。

【0113】

このように、履歴情報を記憶部３０ｂに記憶させておくことで、例えば第１カメラ１１ａの撮像条件の向上を図ることができる。すなわち、例えば、登録部２４ｂは、記憶部３０ｂに記憶される乗客情報（第２乗客情報）と履歴情報（第１乗客情報）との差分を算出し、算出された差分が予め設定された所定値以上である場合、第１カメラ１１ａの設置位置などが適切ではない可能性がある旨の通知を出力してもよい。なお、上記した差分として用いる情報は、任意に設定可能であり、一例としては第１確度と第２確度との差分を用いることができる。また、所定値は、第１乗客情報と第２乗客情報とが比較的大きく乖離していることを示す値に設定されるが、これに限られず、任意の値に設定可能である。

【0114】

詳しくは、第１乗客情報と第２乗客情報との間に比較的大きな差異がある場合、言い換えると、精度が高い第２乗客情報に対して第１乗客情報が乖離しているような場合、第１カメラ１１ａの設置位置や設置角度などが適切ではない可能性がある。そこで、本実施にあっては、履歴情報を記憶部３０ｂに記憶させておくことで、上記した通知などを出力することが可能になる。そして、例えばバス事業者は、かかる通知に応じて、第１カメラ１１ａの設置位置や設置角度などを適切に変更することが可能となり、結果として第１カメラ１１ａの撮像条件の向上を図ることができる。

【0115】

逆に言えば、第１乗客情報と第２乗客情報との間に比較的大きな差異がない場合、言い換えると、精度が高い第２乗客情報に対して第１乗客情報が乖離していないような場合、第１カメラ１１ａの設置位置や設置角度などが適切であると推定することが可能になる。

【0116】

また、登録部２３ａは、降車者撮像画像が撮像された停留所、日時および天候などの撮像状況を示す情報を、記憶部３０ｂに撮像状況情報３２ｂ（図５参照）として登録してもよい。

【0117】

このように、第１カメラ１１ａの撮像状況情報３２ａや第２カメラ１１ｂの撮像状況情報３２ｂなどを記憶しておくことで、例えば第１乗客情報と第２乗客情報との間に比較的大きな差異がない場合、各カメラ１１ａ，１１ｂの現在の設置位置や設置角度、日時および天候などを含めた撮像状況が適切であると推定することが可能になる。

【0118】

また、履歴情報を記憶部３０ｂに記憶させておくことで、例えばマスク無しで乗車した乗客がマスクを着用して降車したなど、乗客の行動変化を確認することも可能となる。

【0119】

算出部２５ｂは、乗客情報３１ｂなどに基づいてバス１の乗客数を算出する。例えば、算出部２５ｂは、乗客情報３１ｂに乗車者の顔情報や属性情報を含む第１乗客情報が新たに登録されたときに乗車者の人数を１人加算する、詳しくは乗降カウンタ３３ｂをインクリメントする。

【0120】

また、算出部２５ｂは、乗客情報３１ｂに、乗車者の特徴点情報や属性情報と一致あるいは略一致する降車者の情報を含む第２乗客情報が登録された場合に、かかる特徴点情報等の乗客がバス１から降車したと推定し、乗車者の人数から降車者を１人減算して得た値をバス１の現在の乗客数として算出する、詳しくは乗降カウンタ３３ｂをデクリメントする。

【0121】

なお、算出部２５ｂは、バス１が停留所を出発して次の停留所に到着するまでの間に算出処理を実行するが、算出のタイミングはこれに限定されるものではない。

【0122】

送信部２６ｂは、乗客情報３１ｂの一部あるいは全部と、乗降カウンタ３３ｂの値であるバス１の乗客数の情報とを含む乗客情報を、管理サーバ２００へ送信する。

【0123】

なお、送信部２６ｂは、バス１が停留所を出発して算出部２５ｂでの算出処理等が完了してから次の停留所に到着するまでの間に送信処理を実行するが、送信のタイミングはこれに限定されるものではない。

【0124】

＜管理サーバの構成＞
次いで、管理サーバ２００の構成について図９を参照して説明する。図９は、管理サーバ２００の構成例を示すブロック図である。

【0125】

図９に示すように、管理サーバ２００は、通信部２０１と、制御部２１０と、記憶部２２０とを備える。通信部２０１は、通信ネットワークＮに双方向通信可能に接続する通信インターフェイスであり、バス端末装置１０やバス事業者端末装置３００、ユーザ端末装置４００等との間で情報の送受信を行う。

【0126】

制御部２１０は、取得部２１１と、混雑度算出部２１２と、提供部２１３とを備え、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、入出力ポートなどを有するコンピュータや各種の回路を含む。

【0127】

コンピュータのＣＰＵは、例えば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部２１０の取得部２１１、混雑度算出部２１２および提供部２１３として機能する。

【0128】

また、制御部２１０の取得部２１１、混雑度算出部２１２および提供部２１３の少なくともいずれか一部または全部をＡＳＩＣやＦＰＧＡ等のハードウェアで構成することもできる。

【0129】

また、記憶部２２０は、例えば、不揮発性メモリやデータフラッシュといった記憶デバイスで構成される記憶部である。かかる記憶部２２０には、乗客情報２２１、バス情報２２２および各種プログラムなどが記憶される。

【0130】

乗客情報２２１は、降り口端末装置１０ｂから送信された、バス１の乗客に関する情報である。乗客情報２２１には、上記したように、乗客情報３１ｂの一部あるいは全部と、乗降カウンタ３３ｂの値であるバス１の乗客数の情報とが含まれる。

【0131】

バス情報２２２は、バス１に関する情報である。バス情報２２２には、例えばバス１の定員を示す定員情報などが含まれるが、これに限られず、バス１の運行計画情報などその他の情報が含まれてもよい。なお、バス情報２２２は、予め記憶部２２０に記憶されるが、これに限定されるものではなく、例えばバス事業者端末装置３００など外部端末から送信されて記憶部２２０に記憶されてもよい。

【0132】

制御部２１０の取得部２１１は、降り口端末装置１０ｂから送信された情報を取得し、取得された情報を記憶部２２０に乗客情報２２１として記憶させる。

【0133】

混雑度算出部２１２は、バス１の混雑度、詳しくはバス１の現在の混雑度を算出する。混雑度は、バス１の混雑状況の度合いを示す指標値であり、例えばバス１の定員に対する乗客数等に応じた数段階のレベルで示される値である。

【0134】

例えば、混雑度算出部２１２は、乗客情報２２１に含まれるバス１の現在の乗客数の情報と、バス情報２２２に含まれるバス１の定員情報とに基づいて、バス１の現在の混雑度を算出する。混雑度算出部２１２は、算出された混雑度を示す混雑度情報を提供部２１３へ出力する。

【0135】

提供部２１３は、かかる混雑度情報を通信部２０１を介して、例えばユーザ端末装置４００やバス事業者端末装置３００へ提供することができる。また、提供部２１３は、乗客情報２２１を通信部２０１を介して、例えばバス事業者端末装置３００へ提供することができる。

【0136】

＜実施形態に係る情報処理システムの制御処理＞
次に、実施形態に係るバス端末装置１０を含む情報処理システム１００が実行する処理手順について、図１０を用いて説明する。図１０は、実施形態に係るバス端末装置１０を含む情報処理システム１００が実行する処理シーケンスの一例を示す図である。

【0137】

図１０に示すように、先ず乗り口端末装置１０ａは、第１カメラ１１ａから乗車者撮像画像を取得する（ステップＳ１０）。次いで、乗り口端末装置１０ａは、乗車者撮像画像に基づいて乗客情報（第１乗客情報）を検出する（ステップＳ１１）。次いで、乗り口端末装置１０ａは、検出された乗客情報を記憶部３０ａに登録する（ステップＳ１２）。

【0138】

そして、乗り口端末装置１０ａは、検出された乗客情報を降り口端末装置１０ｂへ出力する（ステップＳ１３）。

【0139】

降り口端末装置１０ｂは、乗り口端末装置１０ａから出力された乗客情報を記憶部３０ｂに登録する（ステップＳ１４）。次いで、降り口端末装置１０ｂは、第２カメラ１１ｂから降車者撮像画像を取得する（ステップＳ１５）。次いで、降り口端末装置１０ｂは、降車者撮像画像に基づいて乗客情報（第２乗客情報）を検出する（ステップＳ１６）。

【0140】

次いで、降り口端末装置１０ｂは、記憶部３０ａに記憶された乗客情報（第１乗客情報）と、降車者撮像画像に基づいて検出された乗客情報（第２乗客情報）とを照合する（ステップＳ１７）。例えば、降り口端末装置１０ｂは、降車者撮像画像に基づいて検出された第２乗客情報における降車者の特徴点情報や属性情報が、記憶部３０ａに記憶された第１乗客情報における乗車者の特徴点情報や属性情報と一致あるいは略一致するか否かの照合を行う。

【0141】

次いで、降り口端末装置１０ｂは、第２乗客情報で示される降車者が第１乗客情報で示される乗車者と同じ乗客である旨の照合結果である場合、第２乗客情報を記憶部３０ｂに乗客情報として登録（更新）する（ステップＳ１８）。

【0142】

次いで、降り口端末装置１０ｂは、乗客情報などに基づいて、バス１の乗客数を算出する（ステップＳ１９）。そして、降り口端末装置１０ｂは、乗客情報の一部または全部、バス１の乗客数などを含む乗客情報を管理サーバ２００へ送信する（ステップＳ２０）。

【0143】

管理サーバ２００は、バス１の乗客数の情報などに基づいてバス１の混雑度を算出する（ステップＳ２１）。そして、管理サーバ２００は、混雑度情報や乗客情報などを、バス事業者端末装置３００やユーザ端末装置４００へ提供する（ステップＳ２２）。

【0144】

上述してきたように、実施形態に係るバス端末装置１０（情報処理装置の一例）は、検出部２２ａ（第１検出部の一例）と、検出部２２ｂ（第２検出部の一例）と、登録部２４ｂ（記憶処理部の一例）とを備える。検出部２２ａは、バス１の乗り口２ａに設けられた第１カメラ１１ａによって撮像された乗車者撮像画像に基づいて乗り物の乗客に関する乗客情報（第１乗客情報）を検出可能に構成される。検出部２２ｂは、バス１の降り口２ｂに設けられた第２カメラ１１ｂによって撮像された降車者撮像画像に基づいて乗客に関する乗客情報（第２乗客情報）を検出可能に構成される。登録部２４ｂは、検出部２２ａおよび検出部２２ｂによってそれぞれ乗客情報（第１、第２乗客情報）が検出された場合、第１カメラ１１ａおよび第２カメラ１１ｂのうち撮像条件が有利な一方のカメラ（ここでは第２カメラ１１ｂ）の撮像画像に基づいて検出された乗客情報（第２乗客情報）を記憶部３０ｂに記憶させる。これにより、実施形態にあっては、乗客情報の精度を向上させることができる。

【0145】

また、第２カメラ１１ｂが、撮像条件が有利な一方のカメラである。このように、乗り口２ａと比較して、乗客の顔などを正面から撮像しやすい位置に設置可能な降り口２ｂに設置される第２カメラ１１ｂを、撮像条件が有利な一方のカメラとすることで、第２カメラ１１ｂの撮像画像によって検出される第２乗客情報を、確実に精度の高い情報にすることが可能になる。

【0146】

（変形例）
次に、変形例に係るバス端末装置１０について説明する。上記した実施形態においては、第１乗客情報および第２乗客情報が検出された場合、第２カメラ１１ｂの撮像画像に基づいて検出された第２乗客情報を記憶部３０ｂに記憶させるようにした。変形例では、これに限られず、所定の条件を満たした場合に、第２乗客情報ではなく、第１乗客情報を記憶部３０ｂに記憶させるようにした。

【0147】

具体的に説明すると、上記したように、第２カメラ１１ｂは撮像条件が有利であるため、第２カメラ１１ｂの撮像画像に基づいて検出された第２乗客情報の精度は高くなる可能性が高い。しかしながら、第２カメラ１１ｂにおいて、例えば天候などを含めて撮像条件に何らかの変化があったり、乗客の姿勢によって乗客を正面から撮像できなかったりする場合がある。かかる場合、第２乗客情報の精度が低下することがある。そこで、変形例にあっては、第２乗客情報の精度が低下するようなとき、第１乗客情報を記憶部３０ｂに記憶させるようにした、別言すれば、第２乗客情報を記憶部３０ｂに登録することを禁止するようにした。

【0148】

一例として、登録部２４ｂは、第２乗客情報を記憶部３０ｂに登録するか否かの判定を、第１確度および第２確度を用いて行うことができる。例えば、登録部２４ｂは、第１乗客情報の確度である第１確度と、第２乗客情報の確度である第２確度とを比較する。そして、登録部２４ｂは、第１確度と第２確度との比較結果が予め設定された所定条件を満たした場合、第１乗客情報を記憶部３０ｂに記憶させる。なお、所定条件は、任意に設定可能であるが、例えば、第２確度が第１確度未満であることなどの条件が設定可能である。

【0149】

これにより、例えば第２乗客情報の精度が低下した場合には、記憶部３０ｂに登録されないため、記憶部３０ｂの乗客情報の精度が低下することを抑制することが可能になる。

【0150】

次に、変形例に係るバス端末装置１０における具体的な処理手順について図１１を用いて説明する。図１１は、変形例に係るバス端末装置１０が実行する処理手順を示すフローチャートである。

【0151】

図１１に示すように、バス端末装置１０（乗り口端末装置１０ａ）の制御部２０ａは、第１カメラ１１ａの乗車者撮像画像に基づいて検出された第１乗客情報の確度を示す第１確度を算出する（ステップＳ１００）。

【0152】

次いで、バス端末装置１０（降り口端末装置１０ｂ）の制御部２０ｂは、第２カメラ１１ｂの降車者撮像画像に基づいて検出された第２乗客情報の確度を示す第２確度を算出する（ステップＳ１０１）。

【0153】

次いで、制御部２０ｂは、算出された第１確度と第２確度とを比較する（ステップＳ１０２）。次いで、制御部２０ｂは、比較結果が上記した所定条件を満たすか否かを判定する（ステップＳ１０３）。

【0154】

制御部２０ｂは、比較結果が所定条件を満たさないと判定された場合（ステップＳ１０３，Ｎｏ）、第２カメラ１１ｂの降車者撮像画像に基づいて検出された第２乗客情報を記憶部３０ｂに記憶させる（ステップＳ１０４）。

【0155】

他方、制御部２０ｂは、比較結果が所定条件を満たすと判定された場合（ステップＳ１０３，Ｙｅｓ）、第１カメラ１１ａの乗車者撮像画像に基づいて検出された第１乗客情報を記憶部３０ｂに記憶させる（ステップＳ１０５）。

【0156】

なお、上記では、第２カメラ１１ｂが、撮像条件が有利な一方のカメラであるようにしたが、これに限定されるものではない。すなわち、第１カメラ１１ａが、撮像条件が有利な一方のカメラであってもよい。

【0157】

また、上記では、乗り口端末装置１０ａ、降り口端末装置１０ｂおよび管理サーバ２００がそれぞれ、各種の処理を行うようにしたが、各種の処理が行われる装置は、上記に限定されるものではない。

【0158】

すなわち、乗り口端末装置１０ａで行われる処理の一部あるいは全部が、降り口端末装置１０ｂあるいは管理サーバ２００で行われるようにしてもよい。また、降り口端末装置１０ｂで行われる処理の一部あるいは全部が、乗り口端末装置１０ａあるいは管理サーバ２００で行われるようにしてもよい。また、管理サーバ２００で行われる処理の一部あるいは全部が、乗り口端末装置１０ａあるいは降り口端末装置１０ｂで行われるようにしてもよい。

【0159】

さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。

【符号の説明】

【0160】

１ バス
１０ バス端末装置
１０ａ 乗り口端末装置
１０ｂ 降り口端末装置
１１ａ 第１カメラ
１１ｂ 第２カメラ
２２ａ 検出部
２２ｂ 検出部
２４ｂ 登録部
１００ 情報処理システム
２００ 管理サーバ

【図1A】

【図1B】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】