ホーム > 特許ランキング > 株式会社日立国際電気
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-06-05
(45)【発行日】2023-06-13
(54)【発明の名称】業務支援システム
(51)【国際特許分類】
G06Q 50/30 20120101AFI20230606BHJP
B61L 23/00 20060101ALN20230606BHJP
【ＦＩ】
G06Q50/30
B61L23/00 Z
【請求項の数】
4
(21)【出願番号】P 2019143255
(22)【出願日】2019-08-02
(65)【公開番号】P2021026456
(43)【公開日】2021-02-22
【審査請求日】2022-03-22
(73)【特許権者】
【識別番号】000001122
【氏名又は名称】株式会社日立国際電気
(74)【代理人】
【識別番号】110000062
【氏名又は名称】弁理士法人第一国際特許事務所
(72)【発明者】
【氏名】竹林 康夫
(72)【発明者】
【氏名】住吉 正紀
【審査官】山崎 誠也
(56)【参考文献】
【文献】国際公開第２０２０／０４５５５６（ＷＯ，Ａ１）
【文献】特開２０１９－０１４３６８（ＪＰ，Ａ）
【文献】特開２０１９－１０４３８８（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００－９９／００
Ｂ６１Ｌ ２３／００
(57)【特許請求の範囲】
【請求項1】
乗車駅において来場者の映像から要介助者の映像を認識し、前記要介助者の映像を前記乗車駅の駅員端末に送信する要介助者画像処理部と、前記要介助者の映像を前記要介助者が降車予定の駅（以下「降車駅」という）の駅員端末へ送信し、前記乗車駅の駅員端末から送信される端末取得情報を取得すると、前記端末取得情報に基づいて前記要介助者の降車に関する降車情報を作成して前記降車駅の駅員端末に送信する情報処理部と
を備え、
前記要介助者画像処理部は、前記乗車駅で撮影される映像から前記要介助者の介助種別を認識すると、認識された前記介助種別に関する情報を前記乗車駅の駅員端末に送信し、
前記情報処理部は、前記介助種別に関する情報を、前記降車駅の駅員端末に送信する
ことを特徴とする業務支援システム。
【請求項2】
乗車駅において来場者の映像から要介助者の映像を認識し、前記要介助者の映像を前記乗車駅の駅員端末に送信する要介助者画像処理部と、
前記要介助者の映像を前記要介助者の降車駅の駅員端末へ送信し、前記乗車駅の駅員端末から送信される端末取得情報を取得すると、前記端末取得情報に基づいて前記要介助者の降車に関する降車情報を作成して前記降車駅の駅員端末に送信する情報処理部と
を備え、
前記要介助者画像処理部は、前記要介助者を認識した複数の映像を前記乗車駅の駅員端末に送信し、
前記情報処理部は、前記乗車駅の駅員端末において前記複数の映像から選択された映像を、前記要介助者の代表映像として前記降車駅の駅員端末へ送信する
ことを特徴とする業務支援システム。
【請求項3】
乗車駅において来場者の映像から要介助者の映像を認識し、前記要介助者の映像を前記乗車駅の駅員端末に送信する要介助者画像処理部と、
前記要介助者の映像を前記要介助者の降車駅の駅員端末へ送信し、前記乗車駅の駅員端末から送信される端末取得情報を取得すると、前記端末取得情報に基づいて前記要介助者の降車に関する降車情報を作成して前記降車駅の駅員端末に送信する情報処理部と
を備え、
前記要介助者画像処理部は、
認識された前記要介助者を映像上で追跡して、前記要介助者による券売機の操作、または前記要介助者による改札機の通過を検出し、
前記情報処理部は、
前記券売機および前記改札機の少なくとも一方の情報に基づいて、前記要介助者の前記降車駅を特定する
ことを特徴とする業務支援システム。
【請求項4】
乗車駅において来場者の映像から要介助者の映像を認識し、前記要介助者の映像を前記乗車駅の駅員端末に送信する要介助者画像処理部と、
前記要介助者の映像を前記要介助者の降車駅の駅員端末へ送信し、前記乗車駅の駅員端末から送信される端末取得情報を取得すると、前記端末取得情報に基づいて前記要介助者の降車に関する降車情報を作成して前記降車駅の駅員端末に送信する情報処理部と
を備え、
前記要介助者画像処理部は、
前記要介助者の映像を、前記乗車駅、車両内、および前記降車駅で撮影される映像の少なくとも一つと照合を行い、
前記情報処理部は、
前記照合の結果に基づいて、前記要介助者の搭乗列車、前記降車駅、降車ホーム、到着時刻、搭乗位置、搭乗ドアの少なくとも一つの情報を前記要介助者の降車出迎えに資する映像由来の降車情報として作成し、前記映像由来の降車情報を前記降車駅の駅員端末へ送信する
ことを特徴とする業務支援システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、業務支援システムに関する。
【背景技術】
【0002】
一般に、鉄道やバスや航空や船舶や道路などの交通機関の乗降施設（以下「駅」と総称する）では、車いす、白杖、松葉づえなどを使用するお客様に対して、経路誘導や乗降支援などのサービス（以下「介助業務」という）を行うことが望まれる。
【0003】
なお、特許文献１には、「旅客用か駅員用かを識別する識別情報を含んだＩＣと、ＩＣと通信可能な非接触センサと、非接触センサから旅客用か駅員用かを識別する識別情報を受信して、旅客用か駅員用かを判定するＩＣ判別システムと、識別情報が駅員用であれば、駅ホーム、駅に近い位置にいる列車内における監視カメラの映像を出力する防犯安全システムとを備える駅業務支援システム」が開示される。
【先行技術文献】
【特許文献】
【0004】
【文献】特開２０１２－００６５０３号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
一般的な交通機関では、不特定かつ多数のお客様が来場される。そのため、乗車駅では、行きかうお客様に注意を払いながら、その中から介助業務を必要とされるお客様（以下「要介助者」という）を適時に発見する必要があった。乗車駅の駅員にとっては、このような要介助者の発見業務をその他の駅業務と併せて行わなければならず、業務負担が軽減できないという問題があった。また、乗車駅において要介助者を見逃すおそれが高く、介助業務を確実に提供できないという問題もあった。
【0006】
一方、降車駅では、車両が到着してから限られた乗降時間の間に、車両内の要介助者を迅速に見つけ出し、降車のための介助業務を行わなければならない。しかしながら、降車駅の駅員には、乗車駅の駅員などから間接的な情報が電話やメールで伝えられるのみであった。そのため、降車駅の駅員は、要介助者の特徴を事前に十分把握できず、要介助者を見つけ出すまで時間がかかりやすいという問題があった。さらに、降車時の介助業務が遅れてしまった場合には、交通機関の運行スケジュールに支障が生じるという問題もあった。
【0007】
また、特許文献１には、介助業務についての具体的な改善策は開示されない。そのため、特許文献１の技術を採用しても、出力される監視カメラの映像を駅員が注視して要介助者を発見しなければならず、介助業務の点で改善の余地があった。
【0008】
そこで、本発明は、交通機関における要介助者に対する介助業務を支援する業務支援システムを提供することを目的とする。
【課題を解決するための手段】
【0009】
上記課題を解決するために、代表的な本発明の業務支援システムの一つは、要介助者画像処理部と、情報処理部とを備える。前記要介助者画像処理部は、乗車駅において来場者の映像から要介助者の映像を認識して要介助者の映像を乗車駅の駅員端末に送信する。前記情報処理部は、要介助者の映像を要介助者が降車予定の駅（以下「降車駅」という）の駅員端末へ送信して乗車駅の駅員端末から送信される端末取得情報を取得すると端末取得情報に基づいて要介助者の降車に関する降車情報を作成して降車駅の駅員端末に送信する。
【発明の効果】
【0010】
本発明により、交通機関における要介助者に対する介助業務を支援する業務支援システムが提供される。
【0011】
上記した以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【0012】
【発明を実施するための形態】
【0013】
以下、図面に基づいて、本発明の実施例を説明する。
【実施例1】
【0014】
《業務支援システムの構成》
図１は、実施例１の業務支援システムの構成を示す図である。
同図において、業務支援システムは、有線ないし無線のネットワークＮを介して、交通機関のカメラ群１００、要介助者画像処理部１１０、乗車駅の駅員端末１２０、情報処理部１３０、および降車駅の駅員端末１４０を通信接続して構成される。
図１は、実施例１の業務支援システムの構成を示す図である。
同図において、業務支援システムは、有線ないし無線のネットワークＮを介して、交通機関のカメラ群１００、要介助者画像処理部１１０、乗車駅の駅員端末１２０、情報処理部１３０、および降車駅の駅員端末１４０を通信接続して構成される。
【0015】
カメラ群１００は、交通機関の各所に設けられるカメラ群である。例えば、個々の駅において来場者を撮影する出入口カメラＣ００や、コンコースを通過する来場者を撮影するコンコースカメラＣ０１や、券売機の購入者を撮影する券売機カメラＣ０２や、改札の通過者を撮影する改札カメラＣ０３や、プラットホームを撮影するホームカメラＣ０４や、駅員が携帯する駅員端末にそれぞれ設けられる駅員端末カメラＣ０５などである。また、カメラ群１００には、列車の車両内を撮影する車両内カメラＣ１１なども含まれる。
【0016】
要介助者画像処理部１１０は、例えば、画像処理サーバなどにより構成される。この要介助者画像処理部１１０は、乗車駅のカメラ群１００で撮影される来場者の映像から要介助者の映像を認識する機能と、認識された要介助者の映像（静止画または動画）を乗車駅の駅員端末１２０にネットワークＮを介して送信する機能を有する。
【0017】
乗車駅の駅員端末１２０は、例えば、タブレットやスマホなどの携帯通信機器であって、要介助者の映像や情報を表示する機能や、ＧＰＳ，ＷＩＦＩまたは無線通信による時刻および位置の情報取得機能や、ユーザ入力を受け付けるＧＵＩ機能や、駅員端末カメラＣ０５などを備える。
【0018】
情報処理部１３０は、例えば、配信サーバなどにより構成される。この情報処理部１３０は、要介助者画像処理部１１０で認識された要介助者の映像を、要介助者が降車すると予定（推定も含む）される降車駅の駅員端末へ送信する。また、情報処理部１３０は、乗車駅の駅員端末から送信される端末取得情報を取得すると、端末取得情報に基づいて要介助者の降車時の介助業務に資する有益な情報（以下「降車情報」という）を作成し、降車情報を降車駅の駅員端末に送信する。
【0019】
降車駅の駅員端末１４０は、例えば、乗車駅の駅員端末１２０と同様のタブレットやスマホなどの携帯通信機器であって、要介助者の映像や情報を表示する機能や、ＧＰＳ，ＷＩＦＩまたは無線通信による時刻および位置の情報取得機能や、ユーザ入力を受け付けるＧＵＩ機能や、駅員端末カメラＣ０５などを備える。
【0020】
例えば、このような業務支援システムの全部または一部は、ハードウェアとしてＣＰＵ（Central Processing Unit）やメモリなどを備えたコンピュータシステムとして構成される。このハードウェアが業務支援用のプログラムを実行することにより、業務支援システムの後述する各種機能が実現する。このようなハードウェアの一部または全部については、専用の装置、汎用の機械学習マシン、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field-Programmable Gate Array）、ＧＰＵ（Graphics Processing Unit）、ＰＬＤ(programmable logic device）などで代替してもよい。また、全体の機能をネットワーク上の各種のサーバや各種の端末装置に機能分担させてもよい。
【0021】
このようなサーバについては、クラウド対応とすることにより、提携する複数の交通機関がネットワークを介して共同使用するようにしてもよい。このクラウド対応によれば、複数の交通機関にまたがって要介助者が移動する場合であっても、相互の交通機関の間で介助業務の円滑な連携が可能になる。
【0022】
【0023】
ステップＳ０１： カメラ群１００は、交通機関の各所について来場者を撮影し、来場者の映像データをネットワークＮで中継して要介助者画像処理部１１０に転送する。この場合に、来場者の写った映像データのみをカメラ側で識別して限定的に転送することにより、映像データの転送量や処理負荷を軽減することが好ましい。また、来場者の映像データについて背景除去処理を行って転送することにより、映像データの転送量や処理負荷をさらに軽減することも好ましい。
【0024】
ステップＳ０２： 要介助者画像処理部１１０は、カメラ群１００から転送される来場者の映像データを取得する。
【0025】
ステップＳ０３： 要介助者画像処理部１１０は、１つまたは複数の機械学習モデルを備える。このような機械学習モデルは、次に示す介助種別（１）～（ｎ）ごとに要介助者の映像に反応するように、予め機械学習が行われる。
介助種別（１）車椅子の利用者
介助種別（２）白杖の利用者
介助種別（３）松葉杖の利用者
介助種別（４）老人
介助種別（５）歩行障がいのある者
介助種別（６）意識混濁者（酔っ払いや睡眠を含む）
介助種別（７）うずくまって具合の悪い者
介助種別（８）転倒して動けない者
介助種別（９）単独の低年齢者（幼児など）
介護種別（１０）ベビーカーの利用者
・・・
介助種別（ｎ）その他の要介助者
介助種別（１）車椅子の利用者
介助種別（２）白杖の利用者
介助種別（３）松葉杖の利用者
介助種別（４）老人
介助種別（５）歩行障がいのある者
介助種別（６）意識混濁者（酔っ払いや睡眠を含む）
介助種別（７）うずくまって具合の悪い者
介助種別（８）転倒して動けない者
介助種別（９）単独の低年齢者（幼児など）
介護種別（１０）ベビーカーの利用者
・・・
介助種別（ｎ）その他の要介助者
【0026】
このような機械学習は、「介助種別（１）～（ｎ）ごとに収集される学習画像」と「介助種別を示す出力層の教師値」とを組み合わせた学習データセットの群を用いて、機械学習モデル内のニューラルネットワークの重み列やバイアス値を誤差逆伝搬法などに従って変更することによって行われる。
【0027】
要介助者画像処理部１１０は、学習済みの機械学習モデルの入力層に対して交通機関の各所で撮影された来場者の映像データを順次に与え、介助種別（１）～（ｎ）に応じた出力層の反応を取得する。
【0028】
この出力層の反応に基づいて、要介助者画像処理部１１０は、映像データ中に含まれる「要介助者の認識映像」および「介助種別の情報」を情報取得する。
【0029】
なお、要介助者画像処理部１１０は、要介助者の被写体が画面内に部分的に映っている場合は、畳み込みニューラルネットワークなどのように画像の領域別に出力層が反応する機械学習モデルを用いて、要介助者の被写体を示す部分領域を特定する。要介助者画像処理部１１０は、特定された部分領域に基づいて、カメラの映像データをトリミングして要介助者の映像を部分的に切り出し、要介助者の認識映像とする。
【0030】
カメラ群１００は交通機関の各所に設けられるため、要介助者画像処理部１１０は、同一人である要介助者が移動する経路に沿って複数の認識映像を順番に取得する可能性がある。そこで、要介助者画像処理部１１０は、複数の認識映像について、撮影時刻の時間差と、撮影場所の距離差と、認識映像間の類似性（顔、髪、服、色、歩き方、身長、シルエット、体型などの類似性）とを判定し、同一人の要介助者の認識映像か否かを判定する。これによって、同一人の要介助者について介助業務の指令が重複して発生する状況を防いでいる。なお、同一人ではなく複数人の要介助者が同一時間帯に認識された場合、次のステップ以降の処理は、個別の要介助者ごとに並行，逐次、または順番に実施される。
【0031】
ステップＳ０４：要介助者画像処理部１１０は、一つまたは複数の「要介助者の認識映像」に「介助種別の情報」を付与して、要介助者の映像を撮影した駅（以下「乗車駅」という）の駅員端末１２０に配信する。
【0032】
ステップＳ０５：乗車駅の駅員端末１２０は、駅員に対して警報音や振動などの注意喚起を行うと共に、「要介助者の認識映像（動画または静止画）」と「介助種別の情報」を表示する。
【0033】
ステップＳ０６：注意喚起に気付いた乗車駅の駅員は、駅員端末１２０に表示される「要介助者の認識映像」と「介助種別の情報」を確認する。このとき、「要介助者の認識映像」が複数配信されている場合、駅員端末１２０は、駅員による個別選択やスクロール選択などの操作に応じて、複数の認識映像を切り替えて表示する。このとき、駅員は、視認性の最も高い認識映像を複数の認識映像の中から選択する。また、駅員が意識的に選択しなくとも、視認性の高い認識映像については、「逐次表示を経たのちに最後に表示される」または「介助者の認識映像をじっくり視認するために表示時間が顕著に長くなる」といった一般傾向が生じる。駅員端末１２０は、駅員による映像選択の操作や、上記の一般傾向などに基づいて、複数の認識映像の中から「要介助者の特徴を把握するのに適した視認性のよい認識映像」を選択し、要介助者の代表映像とする。なお、一般傾向などに基づいて認識画像を選択することで駅員の作業負担を減らすことができる。
【0034】
なお、乗車駅の駅員が、駅員端末１２０の駅員端末カメラＣ０５を使用して、要介助者の同意のもと、要介助者の列車内の搭乗状況を撮影し、その搭乗状況の映像を要介助者の代表映像としてもよい。
【0035】
駅員端末１２０は、この要介助者の代表映像の決定結果を要介助者画像処理部１１０に情報伝達する。
【0036】
ステップＳ０７：乗車駅の駅員は、駅員端末１２０の「要介助者の認識映像」および「介助種別の情報」と合致する要介助者を、目視やカメラ群１００の映像によって探索する。
要介助者を駅構内で発見した駅員は、必要に応じて要介助者に対して降車駅を尋ねる。口頭や質問カードや筆談などにより要介助者の降車駅を確認する。また、要介助者が所持する端末装置（スマホ、携帯電話、無線タグ、定期券カード、ＩＣカードなど）に降車駅の情報を予め格納しておき、駅員端末１２０が端末装置と無線、非接触、接触または有線により通信接続を行うことで、端末装置から降車駅の情報を読み出すようにしてもよい。
駅員は、降車駅に向かう列車が到着するプラットホームへ要介助者を経路誘導し、搭乗列車への乗車支援などの一連の介助業務を完了する。
要介助者を駅構内で発見した駅員は、必要に応じて要介助者に対して降車駅を尋ねる。口頭や質問カードや筆談などにより要介助者の降車駅を確認する。また、要介助者が所持する端末装置（スマホ、携帯電話、無線タグ、定期券カード、ＩＣカードなど）に降車駅の情報を予め格納しておき、駅員端末１２０が端末装置と無線、非接触、接触または有線により通信接続を行うことで、端末装置から降車駅の情報を読み出すようにしてもよい。
駅員は、降車駅に向かう列車が到着するプラットホームへ要介助者を経路誘導し、搭乗列車への乗車支援などの一連の介助業務を完了する。
【0037】
ステップＳ０８：乗車駅の駅員は、降車駅、搭乗列車、搭乗ドア、要介助者の特徴などの情報を、駅員端末１２０に入力する。例えば、要介助者の特徴としては、性別、年代、さらには、車椅子利用者か白杖利用者かなどを特定する交通弱者種別情報を入力する。
駅員端末１２０は、入力された情報を端末取得情報として、要介助者画像処理部１１０に転送する。
駅員端末１２０は、入力された情報を端末取得情報として、要介助者画像処理部１１０に転送する。
【0038】
ステップＳ１１：要介助者画像処理部１１０は、情報処理部１３０に対して、代表映像、端末取得情報、特徴、および介助種別などを含む情報群を転送する。
【0039】
ステップＳ１２：情報処理部１３０は、降車駅、搭乗列車、搭乗ドアなどの端末取得情報を列車運行管理用のサーバなどの情報源に照会して、例えば次のような降車情報を生成する。
・搭乗列車が降車駅に到着する時刻
・要介助者の降車ホーム（何番線）
・要介助者が降車するドア位置（何号車何番ドア）など
・搭乗列車が降車駅に到着する時刻
・要介助者の降車ホーム（何番線）
・要介助者が降車するドア位置（何号車何番ドア）など
【0040】
ステップＳ１３：情報処理部１３０は、降車駅の駅員端末１４０に対して、代表映像、降車情報、特徴、および介助種別などを含む情報群を転送する。
【0041】
ステップＳ１４：降車駅の駅員端末１４０は、警報音や振動などの注意喚起を行うと共に、「要介助者の代表映像（動画または静止画）」や「介助種別の情報」などを表示する。
【0042】
ステップＳ１５：降車駅の駅員端末１４０は、さらに降車情報や特徴などを表示する。
【0043】
ステップＳ１６：降車駅の駅員は、駅員端末１４０が提供する降車情報および代表映像などに基づいて、要介助者の介助業務に余裕を持って備える。例えば、降車駅の駅員は、「搭乗列車が降車駅に到着する時刻」に間に合うように、「要介助者の降車ホーム（何番線）」に向かい、「要介助者が降車するドア位置（何号車何番ドア）」において要介助者の到着を待機する。この到着までに、降車駅の駅員は、駅員端末１４０が提供する代表映像に基づいて、要介助者の特徴を事前に把握する。要介助者の搭乗列車が到着すると、降車駅の駅員は、事前に把握しておいた要介助者の特徴に基づいて、要介助者を迅速に発見する。降車駅の駅員は、発見した要介助者に対して降車支援や経路誘導などの介助業務を行う。
【0044】
以上のような一連の動作により、交通機関における要介助者に対する介助業務の支援が完了する。
【0045】
《乗車駅の駅員端末１２０の画面例》
続いて、上述した業務支援システムにおいて、乗車駅の駅員端末１２０に表示される操作画面を説明する。
続いて、上述した業務支援システムにおいて、乗車駅の駅員端末１２０に表示される操作画面を説明する。
【0046】
図４は、乗車駅の駅員端末１２０の操作画面の一例を示す図である。
同図において、駅員端末１２０の画面は、介助種別の表示領域Ｇ１０、特徴入力メニューＧ１０ａ、認識映像のサムネイル選択領域Ｇ１１、選択中の認識映像の表示領域Ｇ１２、撮影情報の表示領域Ｇ１２ａ、搭乗列車の入力領域Ｇ１３、搭乗ドアの入力領域Ｇ１４、降車駅の入力領域Ｇ１５、および降車駅への連絡ボタンＧ１６を備える。
同図において、駅員端末１２０の画面は、介助種別の表示領域Ｇ１０、特徴入力メニューＧ１０ａ、認識映像のサムネイル選択領域Ｇ１１、選択中の認識映像の表示領域Ｇ１２、撮影情報の表示領域Ｇ１２ａ、搭乗列車の入力領域Ｇ１３、搭乗ドアの入力領域Ｇ１４、降車駅の入力領域Ｇ１５、および降車駅への連絡ボタンＧ１６を備える。
【0047】
この操作画面は、要介助者画像処理部１１０が要介助者を映像認識したタイミングに応じて、警報音や振動などの注意喚起と共に、駅員端末１２０に表示される。
【0048】
表示領域Ｇ１０には、要介助者画像処理部１１０において映像認識される介助種別（車椅子の利用者、白杖の利用者、松葉杖の利用者など）がテキストやイラストなどにより情報表示される。
【0049】
特徴入力メニューＧ１０ａは、要介助者の特徴項目を階層的にメニュー展開し、その中から要介助者に該当する特徴項目にチェックを付与することで、要介助者の特徴入力を行う操作手段である。
【0050】
サムネイル選択領域Ｇ１１には、要介助者として映像認識された複数の認識映像がサムネイルとして並べて表示される。このサムネイル選択領域Ｇ１１は、タップ操作やスワイプ操作やフリック操作によりサムネイルを順送りまたは逆送りすることができる。
【0051】
表示領域Ｇ１２には、サムネイル選択領域Ｇ１１の中央に位置する認識映像が、選択中の認識映像として拡大表示される。
【0052】
表示領域Ｇ１２ａには、選択中の認識映像について、撮影場所と撮影時刻などに関する撮影情報（例えばＥＸＩＦなど）が参考表示される。
【0053】
入力領域Ｇ１３は、要介助者の搭乗列車を端末入力するための操作領域である。例えば、入力領域Ｇ１３には、列車運行管理用のサーバなどの情報源にデータ照会した結果に基づいて、現在時刻に近い出発時刻の列車リストが自動的に表示される。乗車駅の駅員は、これらの列車リストをスクロールして選択することにより、要介助者の搭乗列車を迅速に端末入力することが可能になる。
【0054】
入力領域Ｇ１４は、要介助者の搭乗ドア（搭乗位置）を端末入力するための操作領域である。例えば、入力領域Ｇ１４には、駅員端末１２０の位置計測機能（ＧＰＳ・ＷＩＦＩ・無線基地局などによる位置計測）にデータ照会した現在位置の情報に基づいて、現在位置に近い順に搭乗ドアのリストが自動的に表示される。乗車駅の駅員は、これらの搭乗ドアのリストをスクロールして選択することにより、要介助者の搭乗ドアを迅速に端末入力することが可能になる。
【0055】
入力領域Ｇ１５は、要介助者の降車駅を端末入力するための操作領域である。例えば、入力領域Ｇ１５には、列車運行管理用のサーバなどの情報源にデータ照会した結果に基づいて、搭乗列車の経路先の停車駅リストが自動的に表示される。なお、急行列車のように通過駅が存在する場合、停車駅リストから通過駅は省かれる。乗車駅の駅員は、これらの停車駅リストをスクロールして選択することにより、要介助者の降車駅を迅速に端末入力することが可能になる。
【0056】
連絡ボタンＧ１６は、乗車駅の駅員端末１２０から、降車駅の駅員端末１４０に対して、要介助者の介助業務に資するその他参考情報を適時に伝達するための通話や通信の発呼ボタンである。
【0057】
以上のような駅員端末１２０の操作画面により、乗車駅の駅員は、要介助者の来場を適時に知り、認識映像に基づいて要介助者の特徴を迅速かつ直観的に把握できる。
【0058】
また、乗車駅の駅員は、駅員端末１２０の操作画面を用いて、要介助者に関する有益な情報を迅速かつ簡易に端末入力することも可能になる。
【0059】
《降車駅の駅員端末１４０の画面例》
続いて、上述した業務支援システムにおいて、降車駅の駅員端末１４０に表示される操作画面を説明する。
続いて、上述した業務支援システムにおいて、降車駅の駅員端末１４０に表示される操作画面を説明する。
【0060】
図５は、降車駅の駅員端末１４０の操作画面の一例を示す図である。
同図において、駅員端末１４０の画面は、介助種別の表示領域Ｇ３０、特徴表示メニューＧ３０ａ、代表映像の表示領域Ｇ３２、撮影情報の表示領域Ｇ３２ａ、搭乗列車の到着時刻・降車ホームの表示領域Ｇ３３、搭乗ドアの表示領域Ｇ３４、および乗車駅への連絡ボタンＧ３６を備える。
同図において、駅員端末１４０の画面は、介助種別の表示領域Ｇ３０、特徴表示メニューＧ３０ａ、代表映像の表示領域Ｇ３２、撮影情報の表示領域Ｇ３２ａ、搭乗列車の到着時刻・降車ホームの表示領域Ｇ３３、搭乗ドアの表示領域Ｇ３４、および乗車駅への連絡ボタンＧ３６を備える。
【0061】
この操作画面は、要介助者画像処理部１１０が要介助者の映像を認識したタイミングや、情報処理部１３０が降車情報などを生成したタイミングに応じて、警報音や振動などの注意喚起と共に、駅員端末１４０に表示される。
【0062】
表示領域Ｇ３０には、要介助者画像処理部１１０において映像認識された介助種別（車椅子の利用者、白杖の利用者、松葉杖の利用者など）がテキストやイラストなどにより情報表示される。
【0063】
特徴表示メニューＧ３０ａは、要介助者の特徴項目を一覧メニューとして展開して表示するための表示操作手段である。
【0064】
表示領域Ｇ３２には、乗車駅側で自動または手動で選択された要介助者の代表映像（静止画または動画）が表示される。
【0065】
表示領域Ｇ３２ａには、代表映像について、撮影場所と撮影時刻などに関する撮影情報（例えばＥＸＩＦなど）が参考表示される。
【0066】
表示領域Ｇ３３には、要介助者の搭乗列車について、降車駅に到着する時刻や、降車ホームが表示される。
【0067】
表示領域Ｇ３４には、要介助者の搭乗ドア（要介助者の搭乗している位置付近のドア）が表示される。
【0068】
連絡ボタンＧ３６は、降車駅の駅員端末１４０から、乗車駅の駅員端末１２０に対して、要介助者の介助業務に資するその他参考情報を適時に尋ねたり、介助業務の報告を行ったりするための通話や通信の発呼ボタンである。
【0069】
以上のように、駅員端末１４０の注意喚起と操作画面により、降車駅の駅員は要介助者の到着を前もって知り、代表映像に基づいて要介助者の特徴を迅速に把握し、要介助者の降車支援などの介助業務に資する有益な情報を迅速かつ簡易に把握することができる。
【0070】
《実施例１の効果》
以下、実施例１の効果について説明する。
以下、実施例１の効果について説明する。
【0071】
実施例１では、乗車駅における来場者の映像から要介助者の映像を認識し、要介助者の映像を乗車駅の駅員端末に送信する。
そのため、乗車駅側では、駅員が要介助者の不意の来場に備えて常に注意を払う必要がなくなり、乗車駅の駅員の業務負担を軽減することが可能になる。
そのため、乗車駅側では、駅員が要介助者の不意の来場に備えて常に注意を払う必要がなくなり、乗車駅の駅員の業務負担を軽減することが可能になる。
【0072】
さらに、実施例１では、要介助者の映像は機械的に認識される。そのため、要介助者を見逃すおそれは低くなり、介助業務をより確実に提供することが可能になる。
【0073】
また、実施例１では、乗車駅の駅員端末１２０に要介助者の映像が表示される。そのため、乗車駅の駅員は直観的に要介助者の特徴を把握することが可能になり、要介助者を迅速に発見できるようになる。
【0074】
さらに、実施例１では、降車駅の駅員端末１４０にも要介助者の映像が表示される。そのため、降車駅の駅員は、直観的に要介助者の特徴を把握することが可能になり、到着車両内の要介助者を迅速に発見することが可能になる。
その結果、要介助者の降車支援を迅速に開始できるため、『降車支援が間に合わずに要介助者が乗り越してしまう』や『降車支援が完了せずに列車の運行が遅延する』といった事態を回避することが可能になる。
その結果、要介助者の降車支援を迅速に開始できるため、『降車支援が間に合わずに要介助者が乗り越してしまう』や『降車支援が完了せずに列車の運行が遅延する』といった事態を回避することが可能になる。
【0075】
また、実施例１では、乗車駅の駅員端末から送信される端末取得情報に基づいて要介助者の降車に関する降車情報（例えば降車タイミングと降車位置など）を作成して降車駅の駅員端末に送信する。そのため、実施例１では、降車駅の駅員が、要介助者の映像に加えて、降車情報を参考にして、到着車両内の要介助者を適切な降車タイミングと降車位置で迎えることが可能になる。
【0076】
さらに、実施例１では、乗車駅で撮影される映像から要介助者の介助種別を認識すると、認識された介助種別に関する情報を乗車駅および降車駅それぞれの駅員端末に送信する。この介助種別は、要介助者の発見のための有益な情報となる。さらに、乗車駅および降車駅の双方において、介助種別に応じた適切な介助の事前準備および対応などが可能になるため、介助業務の質を向上させることが可能になる。
【0077】
このように、実施例１では、乗車駅と降車駅との間の連絡が大幅に自動化されるため、乗車駅と降車駅との間の連絡ミスを防ぐと共に、駅員の相互間の連絡にかかる業務負担を軽減することが可能になる。
【0078】
特に、実施例１では、乗車駅の駅員端末において複数の映像から選択された映像を、要介助者の代表映像として降車駅の駅員端末へ送信する。したがって、降車駅の駅員は、代表映像に的を絞って、効率よく要介助者の特徴を把握することが可能になる。その結果、要介助者の到着まで時間がない状況においても、無駄の少ない迅速な特徴把握が可能になる。
【0079】
さらに、実施例１では、カメラ映像から要介助者の認識映像（代表映像）を部分的に切り出して転送するため、転送データ量を節約し、通信帯域に余裕を持たせることができる。
【0080】
また、実施例１において、要介助者の認識映像（代表映像）を静止画として転送可能なため、転送データ量をさらに節約し、通信帯域にさらに余裕を持たせることができる。
【0081】
さらに、実施例１において、要介助者の認識映像（代表映像）では余計な背景を除去することも可能なため、転送データ量をさらに節約し、通信帯域にさらに余裕を持たせることもできる。
【実施例2】
【0082】
次に、降車情報を自動生成する実施例２について説明する。
なお、実施例２の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
なお、実施例２の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
【0083】
図６は、実施例２における降車情報の自動生成処理を示す図である。
以下、同図に示すステップ番号に沿って説明する。
以下、同図に示すステップ番号に沿って説明する。
【0084】
ステップＳ３１： 乗車駅の駅員端末１２０は、ＧＰＳ、ＷＩＦＩ、または基地局情報に基づいて、位置時刻情報をモニタリングする。モニタリングされる位置時刻情報は、端末取得情報として、情報処理部１３０まで伝達される。
【0085】
情報処理部１３０は、位置時刻情報に基づく駅員端末１２０の動線を解析することにより、駅員が要介助者の乗車支援を行っている時点の位置時刻情報を特定する。なお、情報処理部１３０は、駅員による駅員端末１２０の画面操作の内容やタイミングに基づいて、乗車支援時の位置時刻情報を特定してもよい。
【0086】
ステップＳ３２： 情報処理部１３０は、乗車支援時の位置を駅の地図情報と照合することにより、要介助者の乗車ホーム（何番線）と、要介助者が搭乗したホーム上の搭乗位置を算出する。
【0087】
ステップＳ３３： 情報処理部１３０は、「乗車支援時の時刻」および「乗車ホーム」を列車運行管理用のサーバなどの情報源に照会して、要介助者が搭乗した搭乗列車を特定する。
【0088】
ステップＳ３４： 情報処理部１３０は、「ホーム上の搭乗位置」を、搭乗列車の車両編成に照合することにより，要介助者の搭乗ドア（何号車何番ドア）を特定する。
【0089】
ステップＳ３５： 情報処理部１３０は、要介助者の「搭乗列車」および「降車駅」を、列車運行管理用のサーバなどの情報源に照会して、降車駅における「降車ホーム」および「到着時刻」を特定する。
【0090】
ステップＳ３６： 情報処理部１３０は、搭乗列車・降車ホーム・到着時刻・搭乗ドアなどのデータ群をまとめて、要介助者の降車に関する「降車情報」とする。
【0091】
以上の一連の動作により、実施例２における降車情報の自動生成処理が完了する。
なお、その他の動作については、実施例１の動作と同じため、ここでの動作説明は省略する。
なお、その他の動作については、実施例１の動作と同じため、ここでの動作説明は省略する。
【0092】
《実施例２の効果》
実施例２は、実施例１の効果に加えて、次の効果をさらに奏する。
実施例２は、実施例１の効果に加えて、次の効果をさらに奏する。
【0093】
実施例２では、乗車駅の駅員端末１２０の位置時刻情報に基づいて、要介助者の乗車支援時の位置時刻情報を特定する。この乗車支援時の位置時刻情報に基づけば、前述の処理動作に従って、搭乗列車・降車ホーム・到着時刻・搭乗ドアなどの降車情報を自動生成することができる。
【0094】
さらに、実施例２では、実施例１において必要であった「搭乗列車」や「搭乗ドア」などの端末入力を省略できるため、駅員の業務負担を軽減することが可能になる。
【実施例3】
【0095】
次に、要介助者の降車駅を自動的に決定する実施例３について説明する。
なお、実施例３の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
なお、実施例３の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
【0096】
図７は、実施例３における降車駅の自動決定処理を示す図である。
以下、同図に示すステップ番号に沿って説明する。
以下、同図に示すステップ番号に沿って説明する。
【0097】
ステップＳ４１： 要介助者画像処理部１１０は、要介助者の映像を認識すると、ステップＳ４２に動作を移行する。
【0098】
ステップＳ４２： 要介助者画像処理部１１０は、要介助者の認識映像を各所のカメラ群１００の映像と照合する。
【0099】
ステップＳ４３： 券売機カメラＣ０２の撮影映像において要介助者が認識されると、要介助者画像処理部１１０は、「要介助者は券売機の操作を行う」と判定し、ステップＳ４４に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ４５に動作を移行する。
【0100】
ステップＳ４４： 券売機に乗車区間が操作入力された場合、情報処理部１３０は、この乗車区間に基づいて、要介助者の降車駅を特定する。ここで、券売機を用いた降車駅の自動決定処理は完了する。
【0101】
ステップＳ４５： 改札カメラＣ０３の撮影映像において要介助者が認識されると、要介助者画像処理部１１０は、「要介助者は改札機を通過する」と判定して、ステップＳ４６に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ４２に動作を戻す。
【0102】
ステップＳ４６： 改札機が乗車区間を読み取った場合、情報処理部１３０は、この乗車区間に基づいて、要介助者の降車駅を特定する。また、改札機が、プリペイドカードやＩＣカードや電子端末などに記録された乗車区間の過去履歴または頻度を読み取った場合、情報処理部１３０は、この乗車区間の過去履歴または頻度に基づいて、要介助者の降車駅を特定（推定）する。
ここで、改札機を用いた降車駅の自動決定処理は完了する。
ここで、改札機を用いた降車駅の自動決定処理は完了する。
【0103】
以上の一連の動作により、実施例３における降車駅の自動決定処理が完了する。
なお、その他の動作については、実施例１または実施例２の動作と同じため、ここでの動作説明は省略する。
なお、その他の動作については、実施例１または実施例２の動作と同じため、ここでの動作説明は省略する。
【0104】
《実施例３の効果》
実施例３は、実施例１または実施例２の効果に加えて、次の効果をさらに奏する。
実施例３は、実施例１または実施例２の効果に加えて、次の効果をさらに奏する。
【0105】
実施例３では、券売機または改札機の情報に基づいて、要介助者の降車駅を特定する。したがって、実施例３では、実施例１または実施例２において必要であった降車駅の端末入力を省略できるため、駅員の作業負担を軽減することが可能になる。
【実施例4】
【0106】
次に、カメラ映像に基づいて降車情報を自動生成する実施例４について説明する。
なお、実施例４の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
なお、実施例４の業務支援システムの構成については、実施例１（図１参照）と同じため、ここでの重複説明を省略する。
【0107】
図８は、実施例４における降車情報の自動生成処理を示す図である。
以下、同図に示すステップ番号に沿って説明する。
以下、同図に示すステップ番号に沿って説明する。
【0108】
ステップＳ５１： 要介助者画像処理部１１０は、要介助者の映像を、各所のカメラ群１００の映像（現時点までの映像の内で未照合のもの）と照合する。
【0109】
ステップＳ５２： 要介助者画像処理部１１０は、照合の結果に基づいて、乗車駅のホームカメラＣ０４によるプラットホームの映像に要介助者を発見すると、ステップＳ５３に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ５４に動作を移行する。
【0110】
ステップＳ５３： 要介助者画像処理部１１０は、プラットホームの映像を解析してプラットホーム上の要介助者の位置および時刻を検出する。情報処理部１３０は、検出されたプラットホーム上の要介助者の位置および時刻に基づいて、「乗車ホーム（何番線）」、「ホーム上の搭乗位置」、「搭乗列車」、「搭乗ドア」などを求める。
【0111】
ステップＳ５４： 要介助者画像処理部１１０は、照合の結果に基づいて、列車の車両内カメラＣ１１による車両内映像に要介助者を発見すると、ステップＳ５５に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ５６に動作を移行する。
【0112】
ステップＳ５５： 要介助者画像処理部１１０は、車両内映像を解析して車両内の要介助者の位置および時刻を検出する。情報処理部１３０は、検出された車両内の要介助者の位置および時刻に基づいて、「搭乗列車」、「車両内の搭乗位置」、「搭乗位置付近の搭乗ドア」などを求める。また、要介助者画像処理部１１０は、車両内映像を解析して要介助者が降車行動に入るか否かを判定する。降車行動に入った場合、情報処理部１３０は、次の停車駅を「降車駅」として求める。
【0113】
ステップＳ５６： 要介助者画像処理部１１０は、照合の結果に基づいて、降車駅のホームカメラＣ０４によるプラットホームの映像に要介助者を発見すると、ステップＳ５７に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ５８に動作を移行する。
【0114】
ステップＳ５７： 要介助者画像処理部１１０は、プラットホームの映像を解析してプラットホームに降車した要介助者について位置および時刻を検出する。情報処理部１３０は、検出されたプラットホーム上の要介助者の位置および時刻に基づいて、「降車ホーム（何番線）」、「ホーム上の搭乗位置」、「搭乗列車」、「搭乗ドア」などを求める。
【0115】
ステップＳ５８： 要介助者画像処理部１１０は、照合の結果に基づいて、要介助者の映像と合致する過去の要介助者の映像を発見すると、ステップＳ５９に動作を移行する。それ以外の場合、要介助者画像処理部１１０は、ステップＳ５１に動作を戻す。
ステップＳ５９： 情報処理部１３０は、合致した過去の要介助者について降車駅の履歴または頻度を読み出し、降車駅の履歴または頻度に基づいて、「降車駅」を求める。
ステップＳ５９： 情報処理部１３０は、合致した過去の要介助者について降車駅の履歴または頻度を読み出し、降車駅の履歴または頻度に基づいて、「降車駅」を求める。
【0116】
以上の動作を繰り返すことにより、映像由来の降車情報が自動生成される。
なお、その他の動作については、実施例１～３の少なくとも一つと動作が同じため、ここでの動作説明は省略する。
なお、その他の動作については、実施例１～３の少なくとも一つと動作が同じため、ここでの動作説明は省略する。
【0117】
《実施例４の効果》
実施例４は、実施例１～３の効果に加えて、次の効果をさらに奏する。
実施例４は、実施例１～３の効果に加えて、次の効果をさらに奏する。
【0118】
実施例４では、要介助者の映像を、交通機関のカメラ群１００の映像と照合することにより、要介助者を映像上で継続的に見守ることが可能になる。実施例４では、この映像上の見守り（照合処理）の結果に基づいて、映像由来の降車情報を自動生成することができる。
【0119】
さらに、実施例４では、実施例１において必要であった「搭乗列車」や「搭乗ドア」や「降車駅」などの端末入力を省略できるため、駅員の作業負担を軽減することが可能になる。
【0120】
《実施例１～４の補足事項》
なお、上述した実施例１～４では、説明を分かりやすくするため、介助業務の専用システムとして説明した。しかしながら、本発明はこれに限定されない。例えば、本発明を交通機関の業務支援システムの一部機能や拡張機能として組み込むことも可能である。この場合、駅員による業務支援システムの従来運用を大幅に変更しないため、システムに習熟するまでの時間を短縮することができる。
なお、上述した実施例１～４では、説明を分かりやすくするため、介助業務の専用システムとして説明した。しかしながら、本発明はこれに限定されない。例えば、本発明を交通機関の業務支援システムの一部機能や拡張機能として組み込むことも可能である。この場合、駅員による業務支援システムの従来運用を大幅に変更しないため、システムに習熟するまでの時間を短縮することができる。
【0121】
さらに、上述した実施例１～４では、説明を分かりやすくするため、鉄道を前提として説明した。しかしながら、本発明は、これに限定されず、要介助者の介助業務が望ましい交通機関に適用することが可能である。例えば、本発明をバスや航空や船舶や道路などの交通機関に適用してもよい。その場合、駅と総称する乗降施設は、バス停留所やエアポートや港や駐車施設（例えばサービスエリア，道の駅、休憩施設）などに対応する。また、車両と総称する乗り物は、バスや飛行機や船舶や自動車などに対応する。さらに、駅員は交通機関の従業員のみに限定されず、駅において介助業務を行う、または手伝う人員（ボランティアやサポーター）なども含まれる。
【0122】
また、上述した実施例１～４では、要介助者画像処理部１１０の機械学習モデルとして、ニューラルネットワークを前提に説明した。しかしながら、本発明はこれに限定されない。例えば、機械学習モデルとしては、決定木学習、相関ルール学習、遺伝的プログラミング、帰納論理プログラミング、サポートベクターマシン、クラスタリング、ベイジアンネットワーク、強化学習、表現学習、主成分分析、エクストリーム・ラーニング・マシン、およびその他の機械学習技法の少なくとも一つの技法に基づく機械学習モデルを採用してもよい。
【0123】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。さらに、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
【符号の説明】
【0124】
１００…カメラ群、１１０…要介助者画像処理部、１２０…乗車駅の駅員端末、１３０…情報処理部、１４０…降車駅の駅員端末、Ｎ…ネットワーク、Ｇ１０…介助種別の表示領域、Ｇ１０ａ…特徴入力メニュー、Ｇ１１…認識映像のサムネイル選択領域、Ｇ１２…選択中の認識映像の表示領域、Ｇ１２ａ…撮影情報の表示領域、Ｇ１３…搭乗列車の入力領域、Ｇ１４…搭乗ドアの入力領域、Ｇ１５…降車駅の入力領域、Ｇ１６…降車駅への連絡ボタン、Ｇ３０…介助種別の表示領域、Ｇ３０ａ…特徴表示メニュー、Ｇ３２…代表映像の表示領域、Ｇ３２ａ…撮影情報の表示領域、Ｇ３３…到着時刻・降車ホームの表示領域、Ｇ３４…搭乗ドアの表示領域、Ｇ３６…乗車駅への連絡ボタン
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】