特許 7380633 監視装置、監視方法及び監視システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-11-07

(45)【発行日】2023-11-15

(54)【発明の名称】監視装置、監視方法及び監視システム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20231108BHJP

   G08B 25/00 20060101ALI20231108BHJP

【ＦＩ】

H04N7/18 D

G08B25/00 510M

【請求項の数】 10

(21)【出願番号】P 2021062781

(22)【出願日】2021-04-01

(65)【公開番号】P2022158104

(43)【公開日】2022-10-17

【審査請求日】2022-10-12

(73)【特許権者】

【識別番号】000003207

【氏名又は名称】トヨタ自動車株式会社

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋 真二

(74)【代理人】

【識別番号】100092624

【弁理士】

【氏名又は名称】鶴田 準一

(74)【代理人】

【識別番号】100147555

【弁理士】

【氏名又は名称】伊藤 公一

(74)【代理人】

【識別番号】100123593

【弁理士】

【氏名又は名称】関根 宣夫

(74)【代理人】

【識別番号】100133835

【弁理士】

【氏名又は名称】河野 努

(74)【代理人】

【識別番号】100180194

【弁理士】

【氏名又は名称】利根 勇基

(72)【発明者】

【氏名】石川 茉莉江

(72)【発明者】

【氏名】浜嶋 綾

(72)【発明者】

【氏名】堀田 大地

(72)【発明者】

【氏名】伊藤 隼人

(72)【発明者】

【氏名】佐々木 英一

(72)【発明者】

【氏名】小畠 康宏

(72)【発明者】

【氏名】楠本 光優

【審査官】益戸 宏

(56)【参考文献】

【文献】特開２０１８－１９０１９８（ＪＰ，Ａ）

【文献】特開２００８－１６０４９６（ＪＰ，Ａ）

【文献】国際公開第２０１３／１１１４７９（ＷＯ，Ａ１）

【文献】特開２００９－２７１６１２（ＪＰ，Ａ）

【文献】特開２００９－１６９８９８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｈ０４Ｎ ２１／００

Ｇ０８Ｂ ２５／００

(57)【特許請求の範囲】

【請求項1】

ユーザによって指定された監視対象の外観データを取得するように車両に指示する指示部と、
前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出する検出部と、
前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知する監視結果通知部と、
前記監視対象の監視に対する利用料金を決定する決済部と
を備え、
前記車両は、該車両の運行ルートが予め定められた路線バスであり、
前記決済部は、前記監視対象が前記運行ルート上に位置していない場合には、該監視対象が該運行ルート上に位置している場合と比べて、前記利用料金を高くする、監視装置。

【請求項2】

前記監視結果通知部は、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の状態が変化したことを前記ユーザに通知する、請求項１に記載の監視装置。

【請求項3】

前記検出部は、前記外観データに基づいて前記監視対象の異常の有無を検出し、
前記監視結果通知部は、前記検出部によって前記監視対象の異常が検出された場合に、該監視対象の監視結果を前記ユーザに通知する、請求項１に記載の監視装置。

【請求項4】

前記監視結果通知部は、前記検出部によって前記監視対象の異常が検出された場合に、該監視対象の異常が生じたことを前記ユーザに通知する、請求項３に記載の監視装置。

【請求項5】

前記監視対象の外観データは該監視対象の撮影画像を含む、請求項１から４のいずれか１項に記載の監視装置。

【請求項6】

前記監視結果通知部は、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の撮影画像を前記ユーザに送信することによって前記監視結果を該ユーザに通知する、請求項５に記載の監視装置。

【請求項7】

前記監視結果通知部は前記ユーザの要求に応じて前記監視対象の撮影画像を該ユーザに送信する、請求項５又は６に記載の監視装置。

【請求項8】

前記監視結果通知部は、前記監視対象のエリアの災害情報を取得した場合に、前記監視対象の撮影画像を該ユーザに送信する、請求項５から７のいずれか１項に記載の監視装置。

【請求項9】

ユーザによって指定された監視対象の外観データを取得するように車両に指示することと、
前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出することと、
前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知することと、
前記監視対象の監視に対する利用料金を決定することと
を含み、
前記車両は、該車両の運行ルートが予め定められた路線バスであり、
前記監視対象が前記運行ルート上に位置していない場合には、該監視対象が該運行ルート上に位置している場合と比べて、前記利用料金を高くする、監視方法。

【請求項10】

車両及びサーバを備える監視システムであって、
前記車両は、該車両の周辺情報を検出する周辺情報検出装置を備え、
前記サーバは、
ユーザによって指定された監視対象の外観データを取得するように前記車両に指示する指示部と、
前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出する検出部と、
前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知する監視結果通知部と、
前記監視対象の監視に対する利用料金を決定する決済部と
を備え、
前記車両は、該車両の運行ルートが予め定められた路線バスであり、
前記決済部は、前記監視対象が前記運行ルート上に位置していない場合には、該監視対象が該運行ルート上に位置している場合と比べて、前記利用料金を高くする、監視システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、監視装置、監視方法及び監視システムに関する。

【背景技術】

【0002】

従来、ユーザの要求に応じて、車両に搭載された撮像装置を用いて所望の撮像位置の画像を取得してユーザに提供することが知られている（例えば特許文献１）。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２００３－１９８９０５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１では単発的な画像の取得が想定されているが、車両を用いて所望の監視対象を継続的に監視することも可能である。この場合、車両によって監視対象の外観データが取得される度に監視結果がユーザに通知されると、ユーザがその都度監視結果を確認する手間が生じ、ユーザが煩わしさを感じるおそれがある。

【0005】

そこで、上記課題に鑑みて、本発明の目的は、車両を用いた監視サービスを提供する場合に、ユーザの利便性を高めることにある。

【課題を解決するための手段】

【0006】

本開示の要旨は以下のとおりである。

【0007】

（１）ユーザによって指定された監視対象の外観データを取得するように車両に指示する指示部と、前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出する検出部と、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知する監視結果通知部とを備える、監視装置。

【0008】

（２）前記監視結果通知部は、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の状態が変化したことを前記ユーザに通知する、上記（１）に記載の監視装置。

【0009】

（３）前記検出部は、前記外観データに基づいて前記監視対象の異常の有無を検出し、前記監視結果通知部は、前記検出部によって前記監視対象の異常が検出された場合に、該監視対象の監視結果を前記ユーザに通知する、上記（１）に記載の監視装置。

【0010】

（４）前記監視結果通知部は、前記検出部によって前記監視対象の異常が検出された場合に、該監視対象の異常が生じたことを前記ユーザに通知する、上記（３）に記載の監視装置。

【0011】

（５）前記監視対象の外観データは該監視対象の撮影画像を含む、上記（１）から（４）のいずれか１つに記載の監視装置。

【0012】

（６）前記監視結果通知部は、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の撮影画像を前記ユーザに送信することによって前記監視結果を該ユーザに通知する、上記（５）に記載の監視装置。

【0013】

（７）前記監視結果通知部は前記ユーザの要求に応じて前記監視対象の撮影画像を該ユーザに送信する、上記（５）又は（６）に記載の監視装置。

【0014】

（８）前記監視結果通知部は、前記監視対象のエリアの災害情報を取得した場合に、前記監視対象の撮影画像を該ユーザに送信する、上記（５）から（７）のいずれか１つに記載の監視装置。

【0015】

（９）前記車両は、該車両の運行ルートが予め定められた路線バスであり、前記監視対象は該運行ルート上に位置している、上記（１）から（８）のいずれか１つに記載の監視装置。

【0016】

（１０）前記監視対象の監視に対する利用料金を決定する決済部を更に備え、前記車両は、該車両の運行ルートが予め定められた路線バスであり、前記決済部は、前記監視対象が前記運行ルート上に位置していない場合には、該監視対象が該運行ルート上に位置している場合と比べて、前記利用料金を高くする、上記（１）から（８）のいずれか１つに記載の監視装置。

【0017】

（１１）ユーザによって指定された監視対象の外観データを取得するように車両に指示することと、前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出することと、前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知することとを含む、監視方法。

【0018】

（１２）車両及びサーバを備える監視システムであって、前記車両は、該車両の周辺情報を検出する周辺情報検出装置を備え、前記サーバは、ユーザによって指定された監視対象の外観データを取得するように前記車両に指示する指示部と、前記車両から前記外観データを受信し、該外観データに基づいて前記監視対象の状態変化の有無を検出する検出部と、前記検出部によって前記監視対象の状態変化が検出された場合に、該監視対象の監視結果を前記ユーザに通知する監視結果通知部とを備える、監視システム。

【発明の効果】

【0019】

本発明によれば、車両を用いた監視サービスを提供する場合に、ユーザの利便性を高めることができる。

【図面の簡単な説明】

【0020】

【図1】図１は、本発明の第一実施形態に係る監視システムの概略的な構成図である。

【図2】図２は、車両の構成を概略的に示す図である。

【図3】図３は、周辺情報検出装置の具体例を示す図である。

【図4】図４は、図１のサーバの構成を概略的に示す図である。

【図5】図５は、サーバのプロセッサの機能ブロック図である。

【図6】図６は、監視サービスが提供されるときに監視システムによって行われる処理の一例を示すシーケンス図である。

【図7】図７は、本発明の第一実施形態における監視結果通知処理の制御ルーチンを示すフローチャートである。

【図8】図８は、本発明の第二実施形態における監視結果通知処理の制御ルーチンを示すフローチャートである。

【図9】図９は、本発明の第三実施形態における利用料金設定処理の制御ルーチンを示すフローチャートである。

【発明を実施するための形態】

【0021】

以下、図面を参照して、本発明の実施形態について説明する。なお、以下の説明では、同様な構成要素には同一の参照番号を付す。

【0022】

＜第一実施形態＞
最初に、図１～図７を参照して、本発明の第一実施形態について説明する。

【0023】

図１は、本発明の第一実施形態に係る監視システム１の概略的な構成図である。図１に示されるように、監視システム１は、少なくとも一つの車両２と、サーバ３とを備える。監視システム１は、ユーザによるユーザ端末４への入力に応じて、車両２を用いた監視サービスを提供する。車両２及びユーザ端末４は、それぞれ、無線基地局５及び通信ネットワーク６を介してサーバ３と通信可能である。なお、車両２及びユーザ端末４は無線基地局５を介することなく通信ネットワーク６に直接接続されてもよい。

【0024】

ユーザ端末４は、例えば、スマートフォン、タブレット端末、パーソナルコンピュータ等であり、ユーザによって操作される。ユーザ端末４は、操作ボタン又はタッチパネルのような入力部と、ディスプレイのような出力部とを備える。ユーザ端末４には監視サービス用のアプリケーションがインストールされ、ユーザはそのアプリケーション上で監視サービスに関する操作を行う。

【0025】

監視サービスに用いられる車両２は自律走行を行うように構成されている。すなわち、車両２では、車両２の加速、操舵及び減速（制動）の全てが自動的に制御され、車両２を運転するドライバが必要とされない。なお、自律走行は自動運転とも称され、車両２はいわゆる自動運転車両である。本実施形態のように自動運転車両を監視サービスに用いることによって、ドライバを必要とすることなく監視サービスを提供することができる。

【0026】

また、車両２には複数の座席が設けられ、車両２は自律走行によって複数の乗客を輸送することができる。本実施形態では、車両２は、車両２の運行ルートが予め定められた路線バスである。すなわち、車両２は乗客の乗車及び降車のために運行ルート上の各バス停に停車する。乗客の輸送サービスを提供する路線バスによって監視サービスも提供することによって車両２を有効活用することができる。

【0027】

図２は、車両２の構成を概略的に示す図である。図２に示されるように、車両２は、周辺情報検出装置２１、車両状態検出装置２２、乗客状態検出装置２３、ＧＮＳＳ受信機２４、地図データベース２５、アクチュエータ２６、入出力装置２７、通信装置２８及び電子制御ユニット（Electronic Control Unit（ＥＣＵ））４０を備える。

【0028】

周辺情報検出装置２１は車両２の周辺情報を検出する。周辺情報には、道路の白線、他車両、歩行者、自転車、建物、標識、信号機、障害物等の情報が含まれる。周辺情報検出装置２１はＥＣＵ４０に電気的に接続され、周辺情報検出装置２１の出力、すなわち周辺情報検出装置２１によって検出された車両２の周辺情報はＥＣＵ４０に送信される。

【0029】

図３は、周辺情報検出装置２１の具体例を示す図である。図３の例では、周辺情報検出装置２１として、車外カメラ２１１、ライダ２１２及びミリ波レーダ２１３が車両２に設けられている。

【0030】

車外カメラ２１１は車両２の周囲を撮影して車両２の周囲の画像を生成する。例えば、車外カメラ２１１は車両２の前方を撮影するように車両２の前方（例えば、車内のルームミラーの背面、フロントバンパー等）に配置される。なお、車外カメラ２１１は測距可能なステレオカメラであってもよい。また、車外カメラ２１１の撮影方向は調整可能であってもよい。

【0031】

ライダ２１２は、車両２の周囲にレーザ光を照射し、レーザ光の反射光を受信する。このことによって、ライダ２１２は、車両２の周囲の地物を表す点群データを生成する。例えば、ライダ２１２は車両２の前部及び後部（例えば車両２のフロントバンパー及びリアバンパー）に配置される。

【0032】

ミリ波レーダ２１３は、車両２の周囲にミリ波を発信し、ミリ波の反射波を受信する。このことによって、ミリ波レーダ２１３は、車両２の周囲の地物を表す点群データを生成する。例えば、ミリ波レーダ２１３は車両２の前部及び後部（例えば車両２のフロントバンパー及びリアバンパー）に配置される。

【0033】

なお、車外カメラ２１１、ライダ２１２及びミリ波レーダ２１３の位置及び数は、上記に限定されない。また、これらの一部は省略されてもよい。

【0034】

車両状態検出装置２２は車両２の状態量を検出する。車両２の状態量には、車両２の速度（車速）、加速度、舵角、ヨーレート等が含まれる。車両状態検出装置２２は、例えば、車速センサ、加速度センサ、舵角センサ、ヨーレートセンサ等を含む。車両状態検出装置２２はＥＣＵ４０に電気的に接続され、車両状態検出装置２２の出力、すなわち車両状態検出装置２２によって検出された車両２の状態量はＥＣＵ４０に送信される。

【0035】

乗客状態検出装置２３は車両２の乗客の状態を検出する。乗客状態検出装置２３は、例えば、乗客の画像を生成する車内カメラ、シートベルトの着用の有無を検出するシートベルトセンサ、乗客の着座の有無を検出する着座センサ、乗客の乗車及び降車を検出する人感センサ等を含む。乗客状態検出装置２３はＥＣＵ４０に電気的に接続され、乗客状態検出装置２３の出力、すなわち乗客状態検出装置２３によって検出された車両２の乗客の状態はＥＣＵ４０に送信される。

【0036】

ＧＮＳＳ受信機２４は、複数（例えば３つ以上）の測位衛星から得られる測位情報に基づいて、車両２の現在位置（例えば車両２の緯度及び経度）を検出する。具体的には、ＧＮＳＳ受信機２４は、複数の測位衛星を捕捉し、測位衛星から発信された電波を受信する。そして、ＧＮＳＳ受信機２４は、電波の発信時刻と受信時刻との差に基づいて測位衛星までの距離を算出し、測位衛星までの距離及び測位衛星の位置（軌道情報）に基づいて車両２の現在位置を検出する。ＧＮＳＳ受信機２４はＥＣＵ４０に電気的に接続され、ＧＮＳＳ受信機２４の出力、すなわちＧＮＳＳ受信機２４によって検出された車両２の現在位置はＥＣＵ４０に送信される。

【0037】

なお、ＧＮＳＳ（Global Navigation Satellite System：全球測位衛星システム）は、米国のＧＰＳ、ロシアのＧＬＯＮＡＳＳ、欧州のＧａｌｉｌｅｏ、日本のＱＺＳＳ、中国のＢｅｉＤｏｕ、インドのＩＲＮＳＳ等の衛星測位システムの総称である。したがって、ＧＮＳＳ受信機２４にはＧＰＳ受信機が含まれる。

【0038】

地図データベース２５は、路面情報、車線情報及び建物の位置情報のような３次元の地図情報を記憶している。地図データベース２５に記憶された地図はいわゆる高精度地図である。地図データベース２５はＥＣＵ４０に電気的に接続され、ＥＣＵ４０は地図データベース２５から地図情報を取得する。なお、地図データベース２５に記憶された地図情報は、車両２の外部との通信、ＳＬＡＭ（Simultaneous Localization and Mapping）技術等を用いて定期的に更新されてもよい。また、地図データベースが車両２の外部（例えばサーバ３）に設けられ、ＥＣＵ４０は車両２の外部から地図情報を取得してもよい。

【0039】

アクチュエータ２６は車両２を動作させる。例えば、アクチュエータ２６は、車両２の加速のための駆動装置（エンジン及びモータの少なくとも一方）、車両２の減速（制動）のためのブレーキアクチュエータ、車両２の操舵のためのステアリングモータ、車両２のドアの開閉のためのドアアクチュエータ等を含む。アクチュエータ２６はＥＣＵ４０に電気的に接続され、ＥＣＵ４０はアクチュエータ２６を制御して車両２の自律走行を行う。

【0040】

入出力装置２７は車両２と乗客との間で情報の入出力を行う。入出力装置２７は、例えば、情報を表示するディスプレイ、音を発生させるスピーカー、乗客が入力操作を行うための操作ボタン又は操作スイッチ、乗客の音声を受信するマイクロフォン等を含む。入出力装置２７はＥＣＵ４０に電気的に接続される。したがって、ＥＣＵ４０の出力は入出力装置２７を介してドライバに伝達され、ドライバからの入力は入出力装置２７を介してＥＣＵ４０に送信される。入出力装置２７はヒューマン・マシン・インターフェース（Human Machine Interface（ＨＭＩ））とも称される。なお、乗客の携帯端末（例えば、スマートフォン、タブレット端末等）が、無線又は有線によって車両２の車内ネットワークを介してＥＣＵ４０に接続され、入出力装置として機能してもよい。

【0041】

通信装置２８は、車両２と車両２の外部との通信を可能とする機器（例えばデータ通信モジュール（ＤＣＭ（Data communication module)））である。通信装置２８は無線基地局５にアクセスすることによって無線基地局５を介して通信ネットワーク６に接続される。通信装置２８はＥＣＵ４０に電気的に接続され、ＥＣＵ４０は、通信装置２８、無線基地局５及び通信ネットワーク６を介してサーバ３と通信する。

【0042】

ＥＣＵ４０は車両２の各種制御を実行する。図２に示されるように、ＥＣＵ４０は、通信インターフェース４１、メモリ４２及びプロセッサ４３を備える。通信インターフェース４１及びメモリ４２は信号線を介してプロセッサ４３に接続されている。なお、本実施形態では、一つのＥＣＵ４０が設けられているが、機能毎に複数のＥＣＵが設けられていてもよい。

【0043】

通信インターフェース４１は、ＣＡＮ（Controller Area Network）等の規格に準拠した車内ネットワークにＥＣＵ４０を接続するためのインターフェース回路を有する。ＥＣＵ４０は、通信インターフェース４１及び車内ネットワークを介して、車内ネットワークに接続された車載機器（他のＥＣＵ等）と互いに通信する。通信インターフェース４１はＥＣＵ４０の通信部の一例である。

【0044】

メモリ４２は、例えば、揮発性の半導体メモリ（例えばＲＡＭ）及び不揮発性の半導体メモリ（例えばＲＯＭ）を有する。メモリ４２は、プロセッサ４３によって実行されるコンピュータプログラム、プロセッサ４３によって各種処理が実行されるときに使用される各種データ等を記憶する。メモリ４２はＥＣＵ４０の記憶部の一例である。

【0045】

プロセッサ４３は、一つ又は複数のＣＰＵ(Central Processing Unit)及びその周辺回路を有し、各種処理を実行する。なお、プロセッサ４３は、論理演算ユニット、数値演算ユニット又はグラフィック処理ユニットのような他の演算回路を更に有していてもよい。プロセッサ４３はＥＣＵ４０の制御部の一例である。

【0046】

図４は、サーバ３の構成を概略的に示す図である。サーバ３は、通信インターフェース３１、ストレージ装置３２、メモリ３３及びプロセッサ３４を備える。通信インターフェース３１、ストレージ装置３２及びメモリ３３は、信号線を介してプロセッサ３４に接続されている。なお、サーバ３は、キーボード及びマウスのような入力装置、ディスプレイのような出力装置等を更に備えていてもよい。また、サーバ３は複数のコンピュータから構成されていてもよい。サーバ３は監視装置の一例である。

【0047】

通信インターフェース３１は、サーバ３を通信ネットワーク６に接続するためのインターフェース回路を有し、サーバ３と車両２との通信を可能とする。サーバ３は通信ネットワーク６及び無線基地局５を介して車両２と通信する。通信インターフェース３１はサーバ３の通信部の一例である。

【0048】

ストレージ装置３２は、例えば、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＤＤ）又は光記録媒体及びそのアクセス装置を有する。ストレージ装置３２は、各種データを記憶し、例えば、車両２から送信された情報、地図情報、プロセッサ３４が各種処理を実行するためのコンピュータプログラム等を記憶する。ストレージ装置３２はサーバ３の記憶部の一例である。

【0049】

メモリ３３は不揮発性の半導体メモリ（例えばＲＡＭ）を有する。メモリ３３は、例えばプロセッサ３４によって各種処理が実行されるときに使用される各種データ等を一時的に記憶する。メモリ３３はサーバ３の記憶部の一例である。

【0050】

プロセッサ３４は、一つ又は複数のＣＰＵ及びその周辺回路を有し、各種処理を実行する。なお、プロセッサ３４は、論理演算ユニット、数値演算ユニット又はグラフィック処理ユニットのような他の演算回路を更に有していてもよい。

【0051】

図５は、サーバ３のプロセッサ３４の機能ブロック図である。本実施形態では、プロセッサ３４は、指示部３５、検出部３６、監視結果通知部３７及び決済部３８を有する。指示部３５、検出部３６、監視結果通知部３７及び決済部３８は、サーバ３のストレージ装置３２に記憶されたコンピュータプログラムをサーバ３のプロセッサ３４が実行することによって実現される機能モジュールである。なお、これら機能モジュールは、プロセッサ４３に設けられた専用の演算回路によって実現されてもよい。また、互いに通信可能な複数のサーバのプロセッサによってこれら機能モジュールが実現されてもよい。すなわち、複数のサーバが監視装置として機能してもよい。

【0052】

指示部３５、検出部３６、監視結果通知部３７及び決済部３８は、監視サービスに関する以下の処理を行う。指示部３５は、ユーザの要求に応じて、ユーザによって指定された監視対象の外観データを取得するように車両２に指示する。検出部３６は、車両２から外観データを受信し、外観データに基づいて監視対象の状態変化の有無を検出する。

【0053】

監視結果通知部３７は、検出部３６によって監視対象の状態変化が検出された場合に、監視対象の監視結果をユーザに通知する。このことによって、車両２が外観データを取得する度に監視結果がユーザに通知されることが回避され、監視結果を確認する必要性が高いときにのみ監視結果がユーザに通知されることとなる。したがって、ユーザが監視結果を確認する手間を低減することができ、ひいてはユーザの利便性を高めることができる。

【0054】

決済部３８は、監視サービスがユーザに提供されるときに、監視サービスに関する決済処理を行う。例えば、決済部３８は、監視サービスがユーザに提供されるときに、予め定められた利用料金をユーザに請求する。

【0055】

図６は、監視サービスが提供されるときに監視システム１によって行われる処理の一例を示すシーケンス図である。このシーケンス図において、ユーザ端末４とサーバ３との間の通信及びサーバ３と車両２との間の通信は通信ネットワーク６及び無線基地局５を介して行われる。また、サーバ３における処理はサーバ３のプロセッサ３４によって実施され、車両２における処理は車両２のＥＣＵ４０によって実施される。

【0056】

ユーザは、監視サービスの利用を要求する場合、ユーザ端末４を操作して監視依頼情報をユーザ端末４に入力する。監視依頼情報の入力は、ユーザ端末４にインストールされた監視サービス用のアプリケーション上で行われる。監視依頼情報の入力が完了すると、ユーザ端末４は監視依頼情報をサーバ３に送信する（ステップＳ１）。

【0057】

監視依頼情報には、監視対象の種類（家、植木、田畑等）、監視対象の位置情報、希望監視期間等が含まれる。監視対象の位置情報は、例えば、ユーザ端末４に表示された地図上の地点を指定することによってユーザ端末４に入力される。なお、監視依頼情報に、ユーザによって取得された監視対象のサンプル画像が含まれていてもよい。

【0058】

ユーザ端末４からサーバ３に監視依頼情報が送信されると、サーバ３の決済部３８は、監視サービスに関する決済処理を行う（ステップＳ２）。すなわち、決済部３８は監視サービスの利用料金をユーザに請求する。例えば、決済部３８は、予め登録されたユーザ情報に基づいて、口座振替又はクレジットカード決済によって利用料金を決済する。決済部３８は、決済処理の後、請求書等を含む決済情報をユーザ端末４に送信する（ステップＳ３）。なお、決済部３８による決済処理は希望監視期間の終了後に行われてもよい。

【0059】

次いで、サーバ３の指示部３５は、監視依頼情報に基づいて監視対象を特定し、監視を行う車両を選択する（ステップＳ４）。監視サービスに用いられる車両２が複数存在する場合、すなわち監視システム１が複数の車両２を備えている場合、指示部３５は、複数の車両２の中から、監視を行う車両を選択する。例えば、指示部３５は、監視を行う車両として、監視対象が運行ルート上に位置している車両２を選択する。このことによって、車両２の運行ルートを変更することなく監視対象の監視を行うことができる。なお、監視を行う車両として、複数の車両２が選択されてもよい。

【0060】

一方、特定の車両２のみを用い監視サービスが提供される場合、すなわち監視システム１が一つの車両２を備えている場合、指示部３５は、監視を行う車両として、この特定の車両２を選択する。監視対象が車両２の運行ルート上に位置していない場合には、例えば、車両２が乗客を輸送しない時間帯（例えば、夜間、早朝等）に車両２を用いて監視対象の監視が行われる。なお、乗客状態検出装置２３によって車両２内の乗客の有無が検出され、車両２に乗客が存在しないときに監視対象の監視が行われてもよい。また、ユーザが監視対象を設定するときに、特定の車両２の運行ルート上の地物のみが監視対象として設定可能であってもよい。この場合、車両２の運行ルートを変更することなく監視対象の監視を行うことができる。

【0061】

次いで、指示部３５は、監視を行う車両として選択された車両２に対して、ユーザによって指定された監視対象の外観データの取得を指示する。具体的には、指示部３５は車両２に監視指示を送信する（ステップＳ５）。監視指示には、監視対象の位置情報（運行ルート上の最寄り位置、最寄り位置における車両２に対する監視対象の方角等）、監視期間、監視に用いられる装置（周辺情報検出装置２１の車外カメラ２１１、ライダ２１２及びミリ波レーダ２１３の少なくとも一つ）等が含まれる。

【0062】

サーバ３から車両２に監視指示が送信されると、車両２は監視対象の監視を開始する。具体的には、車両２のＥＣＵ４０は、監視期間の間、車両２が監視対象付近を通過する度に、周辺情報検出装置２１を用いて監視対象の外観データを取得する（ステップＳ６）。

【0063】

車外カメラ２１１によって外観データが取得される場合には、外観データとして監視対象の撮影画像が取得される。一方、ライダ２１２又はミリ波レーダ２１３によって外観データが取得される場合には、外観データとして監視対象の点群データが取得される。なお、ＧＮＳＳ受信機２４等によって検出された車両２の位置情報が車両２からサーバ３に送信され、サーバ３の指示部３５が車両２の周辺情報検出装置２１を遠隔制御することによって監視対象の外観データを取得してもよい。

【0064】

車両２のＥＣＵ４０は、監視対象の外観データを取得した後、外観データをサーバ３に送信する（ステップＳ７）。車両２からサーバ３に外観データが送信されると、サーバ３の監視結果通知部３７は、外観データの受信日時又は取得日時と共に、外観データをサーバ３のストレージ装置３２若しくはメモリ３３又はサーバ３の外部の記憶装置に保存する。そして、監視結果通知部３７は、ユーザへの監視結果の通知の要否を判定し、必要に応じて監視対象の監視結果をユーザに通知する（ステップＳ８）。

【0065】

ユーザへの監視結果の通知の要否は、車両２からサーバ３に送信された外観データに基づいて、図７のフローチャートに従って判定される。図７は、本発明の第一実施形態における監視結果通知処理の制御ルーチンを示すフローチャートである。本制御ルーチンはサーバ３のプロセッサ３４によって所定の実行間隔で繰り返し実行される。

【0066】

最初に、ステップＳ１０１において、検出部３６は、車両２からサーバ３に監視対象の外観データが送信されたか否かを判定する。外観データが送信されていないと判定された場合、本制御ルーチンは終了する。一方、外観データが送信されたと判定された場合、本制御ルーチンはステップＳ１０２に進む。

【0067】

ステップＳ１０２では、検出部３６は監視対象の外観データを解析して監視対象の状態変化の有無を検出する。例えば、検出部３６は、車両２によって前回取得された外観データ及び車両２によって今回取得された外観データ、すなわち間欠的に取得された時系列の二つの外観データを比較することによって監視対象の状態変化の有無を検出する。この場合、検出部３６は、例えば、二つの外観データ（撮影画像又は点群データ）から特徴部を抽出し、特徴部の形状、輝度等を比較することによって外観データの変動率を算出する。そして、検出部３６は、外観データの変動率が所定値以上である場合には監視対象の状態が変化したと判定し、外観データの変動率が所定値未満である場合には監視対象の状態が変化していないと判定する。

【0068】

なお、検出部３６は、時系列の二つの外観データから二つの外観データの類似度を出力するように予め学習された識別器を用いて、監視対象の状態変化の有無を検出してもよい。この場合、検出部３６は、外観データの類似度が所定値未満である場合には監視対象の状態が変化したと判定し、外観データの類似度が所定値以上である場合には監視対象の状態が変化していないと判定する。また、検出部３６は、時系列の二つの外観データから監視対象の状態変化の有無を出力するように予め学習された識別器を用いて、監視対象の状態変化の有無を検出してもよい。外観データの類似度又は監視対象の状態変化の有無を出力する識別器の一例として、ニューラルネットワーク（例えば畳み込みニューラルネットワーク（Convolutional Neural Network（ＣＮＮ））等）、サポートベクターマシン、ランダムフォレスト等の機械学習モデルが挙げられる。

【0069】

次いで、ステップＳ１０３において、監視結果通知部３７は、検出部３６によって監視対象の状態変化が検出されたか否かを判定する。言い換えれば、監視結果通知部３７は、検出部３６によって監視対象の状態が変化したと判定されたか否かを判定する。監視対象が家である場合には、例えば、家のガラスが破損したことが外観データに表されたときに、検出部３６によって監視対象の状態変化が検出される。また、監視対象が植木である場合には、例えば植木が伸びたことが外観データに表されたときに、検出部３６によって監視対象の状態変化が検出される。

【0070】

ステップＳ１０３において監視対象の状態変化が検出されていないと判定された場合、本制御ルーチンは終了する。したがって、この場合、監視対象の監視結果をユーザに通知する必要性が低いため、監視結果通知部３７は監視対象の監視結果をユーザに通知しない。

【0071】

一方、ステップＳ１０３において監視対象の状態変化が検出されたと判定された場合、本制御ルーチンはステップＳ１０４に進む。ステップＳ１０４では、監視結果通知部３７は監視対象の監視結果をユーザ端末４を介してユーザに通知する。例えば、監視結果通知部３７は、監視対象の状態が変化したことをユーザに通知する。また、斯かる通知の代わりに又は斯かる通知に加えて、監視結果通知部３７は、監視対象の撮影画像をユーザ端末４を介してユーザに送信することによって監視結果をユーザに通知してもよい。このことによって、ユーザは撮影画像を介して監視対象の実際の状態を確認することができる。一方、監視結果がユーザに通知されるときに撮影画像がユーザに送信されない場合には、サーバ３からユーザ端末４に送信されるデータの量を低減することができ、通信負荷を低減することができる。ステップＳ１０４の後、本制御ルーチンは終了する。

【0072】

なお、検出部３６は、監視対象の状態変化の有無として、監視対象の異常の有無を検出してもよい。すなわち、ステップＳ１０２において、検出部３６は監視対象の外観データを解析して監視対象の異常の有無を検出してもよい。例えば、検出部３６は、外観データから監視対象の異常の有無を出力するように予め学習された識別器を用いて、監視対象の異常の有無を検出する。監視対象の異常の有無を出力する識別器の一例として、ニューラルネットワーク（例えば、畳み込みニューラルネットワーク（Convolutional Neural Network（ＣＮＮ））、オートエンコーダ、敵対的生成ネットワーク（Generative Adversarial Network（ＧＡＮ）等）、サポートベクターマシン、ランダムフォレスト等の機械学習モデルが挙げられる。

【0073】

また、監視対象の異常の有無が検出される変形例では、監視結果通知部３７は、検出部３６によって監視対象の異常が検出された場合に、監視対象の監視結果をユーザに通知する。このことによって、監視対象に異常が生じた可能性が高い場合にのみ監視結果がユーザに通知されるため、ユーザの利便性をより一層高めることができる。

【0074】

例えば、監視結果通知部３７は、検出部３６によって監視対象の異常が検出された場合に、監視対象の異常が生じたことをユーザに通知する。また、斯かる通知の代わりに又は斯かる通知に加えて、監視結果通知部３７は、監視対象の撮影画像をユーザ端末４を介してユーザに送信することによって監視結果をユーザに通知してもよい。

【0075】

また、監視対象の外観データとして監視対象の撮影画像のみが取得されてもよい。一方、監視結果として監視対象の撮影画像が送信されない場合には、監視対象の外観データとして監視対象の点群データのみが取得されてもよい。

【0076】

＜第二実施形態＞
第二実施形態に係る監視システム及び監視装置は、以下に説明する点を除いて、基本的に第一実施形態に係る監視システム及び監視装置の構成及び制御と同様である。このため、以下、本発明の第二実施形態について、第一実施形態と異なる部分を中心に説明する。

【0077】

第二実施形態では、監視対象の外観データとして監視対象の撮影画像が取得される。すなわち、車両２のＥＣＵ４０は周辺情報検出装置２１の車外カメラ２１１を用いて監視対象の外観データを取得する。

【0078】

上述したように、監視結果通知部３７は、監視対象の状態変化が検出された場合に、監視対象の監視結果をユーザに通知する。しかしながら、監視対象の状態変化が検出されていない場合であっても、ユーザが自発的に監視対象の撮影画像の取得を望むことが考えられる。また、監視対象のエリアにおいて災害が発生した場合には、監視対象の状態確認のためにユーザに監視対象の撮影画像を送付することが望ましい。

【0079】

そこで、第二実施形態では、監視結果通知部３７はユーザの要求に応じて監視対象の撮影画像をユーザに送信する。このことによって、監視結果が通知されないことによるユーザの不安を低減することができ、ユーザの満足度を高めることができる。また、監視結果通知部３７は、監視対象のエリアの災害情報を取得した場合に、監視対象の撮影画像をユーザに送信する。このことによって、災害発生時にユーザが監視対象の状態を迅速に確認することが可能となる。

【0080】

図８は、本発明の第二実施形態における監視結果通知処理の制御ルーチンを示すフローチャートである。本制御ルーチンはサーバ３のプロセッサ３４によって所定の実行間隔で繰り返し実行される。

【0081】

最初に、ステップＳ２０１において、図７のステップＳ１０１と同様に、検出部３６は、車両２からサーバ３に監視対象の外観データが送信されたか否かを判定する。外観データが送信されたと判定された場合、本制御ルーチンはステップＳ２０２に進む。

【0082】

ステップＳ２０２では、図７のステップＳ１０２と同様に、検出部３６は監視対象の外観データを解析して監視対象の状態変化の有無を検出する。

【0083】

次いで、ステップＳ２０３において、図７のステップＳ１０３と同様に、監視結果通知部３７は、検出部３６によって監視対象の状態変化が検出されたか否かを判定する。監視対象の状態変化が検出されたと判定された場合、本制御ルーチンはステップＳ２０４に進む。

【0084】

ステップＳ２０４では、監視結果通知部３７は監視対象の撮影画像をユーザ端末４を介してユーザに送信する。なお、ステップＳ２０３の後にステップＳ２０４が実行される場合、監視結果通知部３７は、撮影画像を送信する代わりに、監視対象の状態が変化したことをユーザに通知してもよい。ステップＳ２０４の後、本制御ルーチンは終了する。

【0085】

一方、ステップＳ２０１において監視対象の外観データが送信されていないと判定された場合、又はステップＳ２０３において監視対象の状態変化が検出されていないと判定された場合、本制御ルーチンはステップＳ２０５に進む。ステップＳ２０５では、監視結果通知部３７は、ユーザが監視対象の撮影画像の送信を要求したか否かを判定する。例えば、ユーザはユーザ端末４を操作して監視対象の撮影画像の取得を要求し、ユーザ端末４は撮影画像の送信要求をサーバ３に送信する。この場合、監視結果通知部３７は、ユーザ端末４からサーバ３に送信要求が送信された場合に、ユーザが監視対象の撮影画像の送信を要求したと判定する。

【0086】

ステップＳ２０５においてユーザが監視対象の撮影画像の送信を要求していないと判定された場合、本制御ルーチンはステップＳ２０６に進む。ステップＳ２０６では、監視結果通知部３７は、監視対象のエリアの災害情報を取得したか否かを判定する。災害情報には、天災（地震、台風、噴火、洪水等）及び人災（作業ミスによる停電等）に関する情報が含まれる。例えば、監視結果通知部３７は、サーバ３の外部（公的な機関（気象庁、国土交通省等）、電力会社等）から災害情報を受信することによって災害情報を取得する。また、災害情報はサーバ３のオペレータ等によってサーバ３に入力されてもよい。

【0087】

ステップＳ２０６において災害情報を取得していないと判定された場合、本制御ルーチンは終了する。この場合、監視対象の撮影画像をユーザに送信する必要性が低いため、監視結果通知部３７は監視対象の撮影画像をユーザに送信しない。

【0088】

一方、ステップＳ２０５においてユーザが撮影画像の送信を要求したと判定された場合、又はステップＳ２０６において災害情報を取得したと判定された場合、本制御ルーチンはステップＳ２０４に進む。

【0089】

ステップＳ２０４では、監視結果通知部３７は監視対象の撮影画像をユーザ端末４を介してユーザに送信する。この場合、監視結果通知部３７は、サーバ３のストレージ装置３２又はメモリ３３等に保存された最新の撮影画像をユーザに送信する。なお、災害情報が取得された場合には、監視結果通知部３７は、撮影画像に加えて、監視対象のエリアに災害が発生したことをユーザ端末４を介してユーザに通知してもよい。また、災害情報が取得された場合には、監視結果通知部３７は、災害の解消が通知されるまで、監視対象の撮影画像が車両２からサーバ３に送信される度に、監視対象の撮影画像をユーザに送信してもよい。ステップＳ２０４の後、本制御ルーチンは終了する。

【0090】

＜第三実施形態＞
第三実施形態に係る監視システム及び監視装置は、以下に説明する点を除いて、基本的に第一実施形態に係る監視システム及び監視装置の構成及び制御と同様である。このため、以下、本発明の第三実施形態について、第一実施形態と異なる部分を中心に説明する。

【0091】

上述したように、サーバ３の決済部３８は、監視サービスがユーザに提供されるときに、監視サービスに関する決済処理を行う。このとき、決済部３８は、監視サービスの利用料金、すなわち監視対象の監視に対する利用料金を決定する。

【0092】

監視を行う車両２として、運行ルートが予め定められた路線バスが用いられる場合、監視対象が運行ルート上に位置していれば、車両２は乗客の輸送のために運行ルートに沿って走行しているときに監視対象の監視を行うことができる。一方、監視対象が運行ルート上に位置していない場合には、監視対象の監視のために配車を行う必要がある。

【0093】

このため、第三実施形態では、決済部３８は、監視対象が車両２の運行ルート上に位置していない場合には、監視対象が車両２の運行ルート上に位置している場合と比べて、監視対象の監視に対する利用料金を高くする。このことによって、運行ルート上の地物が監視対象として設定されやすくなり、車両２の有効活用を促進することができる。

【0094】

図９は、本発明の第三実施形態における利用料金設定処理の制御ルーチンを示すフローチャートである。本制御ルーチンはサーバ３のプロセッサ３４によって所定の実行間隔で繰り返し実行される。

【0095】

最初に、ステップＳ３０１において、決済部３８は、ユーザによって監視サービスの利用が要求されたか否かを判定する。本実施形態では、決済部３８は、ユーザ端末４からサーバ３に監視依頼情報が送信されたときに、ユーザによって監視サービスの利用が要求されたと判定する。ステップＳ３０１において、監視サービスの利用が要求されていないと判定された場合、本制御ルーチンは終了する。

【0096】

一方、ステップＳ３０１において監視サービスの利用が要求されたと判定された場合、本制御ルーチンはステップＳ３０２に進む。ステップＳ３０２では、決済部３８は、ユーザによって指定された監視対象が車両２の運行ルート上に位置しているか否かを判定する。例えば、この判定は、監視対象の位置を運行ルートと照合することによって行われる。

【0097】

ステップＳ３０２において監視対象が車両２の運行ルート上に位置していると判定された場合、本制御ルーチンはステップＳ３０３に進む。ステップＳ３０３では、決済部３８は、監視サービスの利用料金として、監視期間等に基づいて予め定められた通常料金をユーザに請求する。ステップＳ３０３の後、本制御ルーチンは終了する。

【0098】

一方、ステップＳ３０２において監視対象が車両２の運行ルート上に位置していないと判定された場合、本制御ルーチンはステップＳ３０４に進む。ステップＳ３０４では、決済部３８は、監視サービスの利用料金として、通常料金よりも高い割増料金をユーザに請求する。ステップＳ３０４の後、本制御ルーチンは終了する。

【0099】

＜その他の実施形態＞
以上、本発明に係る好適な実施形態を説明したが、本発明はこれら実施形態に限定されるものではなく、特許請求の範囲の記載内で様々な修正及び変更を施すことができる。例えば、監視サービスに用いられる車両２は、路線バス以外の自動運転車両（例えば、ユーザの利用要求に応じて運行するデマンド型バス、自動運転タクシー、監視サービス専用の自動運転車両等）、又はドライバによって手動運転される車両（路線バス、タクシー、監視サービス専用の車両等）であってもよい。また、監視サービスが無償で提供される場合には、サーバ３の決済部３８は省略される。

【0100】

また、サーバ３のプロセッサ３４が有する各部の機能をコンピュータに実現させるコンピュータプログラムは、コンピュータによって読取り可能な記録媒体に記憶された形で提供されてもよい。コンピュータによって読取り可能な記録媒体は、例えば、磁気記録媒体、光記録媒体、又は半導体メモリである。

【0101】

また、上述した実施形態は、任意に組み合わせて実施可能である。例えば、第二実施形態において、第三実施形態に関する図９の制御ルーチンが実行されてもよい。

【符号の説明】

【0102】

１ 監視システム
２ 車両
３ サーバ
３４ プロセッサ
３５ 指示部
３６ 検出部
３７ 監視結果通知部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】