(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2025004086
(43)【公開日】2025-01-14
(54)【発明の名称】情報収集装置、情報収集サーバ及び情報収集システム
(51)【国際特許分類】
G08G 1/00 20060101AFI20250106BHJP
G16Y 10/40 20200101ALI20250106BHJP
G16Y 20/20 20200101ALI20250106BHJP
G16Y 40/20 20200101ALI20250106BHJP
G08G 1/13 20060101ALI20250106BHJP
G08G 1/01 20060101ALI20250106BHJP
【FI】
G08G1/00 J
G16Y10/40
G16Y20/20
G16Y40/20
G08G1/13
G08G1/01 A
【審査請求】有
【請求項の数】1
【出願形態】OL
(21)【出願番号】P 2024172409
(22)【出願日】2024-10-01
(62)【分割の表示】P 2023119669の分割
【原出願日】2015-07-15
(71)【出願人】
【識別番号】000005016
【氏名又は名称】パイオニア株式会社
(74)【代理人】
【識別番号】110001025
【氏名又は名称】弁理士法人レクスト国際特許事務所
(72)【発明者】
【氏名】菅谷 和実
(57)【要約】 (修正有)
【課題】移動体が移動する道路等の経路の不特定な場所で発生する事象に関する情報を収集し、当該情報を移動体に提供することを可能とする情報収集装置、情報収集サーバ及び情報収集システムを提供する。
【解決手段】情報収集装置であって、移動体の搭乗者の状態を搭乗者状態情報として収集する搭乗者状態情報収集部と、搭乗者状態情報に基づいて、搭乗者の状態変化を検知し、状態変化検知情報を生成する状態変化検知部と、移動体の外部を撮影して撮影画像を生成する外部撮影部と、状態変化検知情報に応じて撮影画像を含む外部状況情報を生成して外部状況情報を、通信路を介して送信する外部状況情報送信部と、を含むことを特徴とする。
【選択図】
図1
【特許請求の範囲】
【請求項1】
移動体の搭乗者の状態を搭乗者状態情報として収集する搭乗者状態情報収集部と、
前記搭乗者状態情報に基づいて、前記搭乗者の状態変化を検知し、状態変化検知情報を生成する状態変化検知部と、
前記移動体の外部を撮影して撮影画像を生成する外部撮影部と、
前記状態変化検知情報に応じて前記撮影画像を含む外部状況情報を生成して前記外部状況情報を、通信路を介して送信する外部状況情報送信部と、
を含むことを特徴とする情報収集装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報収集装置、情報収集サーバ及び情報収集システムに関する。
【背景技術】
【0002】
従来から、交差点に設置してあるカメラからの情報を収集して、交差点付近の状況を、当該交差点付近の自動車に送信する交通情報提供システムが検討されている(特許文献1)。
【先行技術文献】
【特許文献】
【0003】
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献1に開示されているような交通情報提供システムでは、カメラが設置されている交差点等の道路上の特定の場所の情報しか得ることができない。そのため、例えば、当該特定の場所以外の場所でなんらかの事象が発生しても、その情報を収集して、当該収集された情報に基いた情報提供を行うことができないという問題が一例として挙げられる。
【0005】
本発明は、上述した点に鑑みてなされたものであり、移動体が移動する道路等の経路の不特定の場所で発生する事象に関する情報を収集し、当該情報を移動体に提供することを可能とする情報収集装置、情報収集サーバ及び情報収集システムを提供することを課題の1つとする。
【課題を解決するための手段】
【0006】
本願請求項1に記載の発明は、情報収集装置であって、移動体の搭乗者の状態を搭乗者状態情報として収集する搭乗者状態情報収集部と、前記搭乗者状態情報に基づいて、前記搭乗者の状態変化を検知し、状態変化検知情報を生成する状態変化検知部と、前記移動体の外部を撮影して撮影画像を生成する外部撮影部と、前記状態変化検知情報に応じて前記撮影画像を含む外部状況情報を生成して前記外部状況情報を、通信路を介して送信する外部状況情報送信部と、を含むことを特徴とする。
【0007】
また、本願請求項7に記載の発明は、情報収集システムであって、移動体に設けられ、前記移動体の搭乗者の状態を搭乗者状態情報として収集する搭乗者状態情報収集部と、前記搭乗者状態情報に基づいて、前記搭乗者の状態変化を検知し、状態変化検知情報を生成する状態変化検知部と、前記移動体に設けられ前記移動体の外部を撮影して撮影画像を生成する外部撮影部と、前記状態変化検知情報に応じて前記撮影画像を含む外部状況情報を生成する外部状況情報生成部と、を含むことを特徴とする。
【0008】
また、本願請求項10に記載の発明は、情報収集サーバであって、移動体に搭乗している搭乗者の状態変化の検知に応じて生成された前記移動体の外部の撮影画像を含む外部状況情報を、通信路を介して受信する外部状況情報受信部と、前記外部状況情報に含まれる前記撮影画像を解析し、前記外部状況情報の有用度を判定する判定部と、有用であると判定された外部状況情報を、通信路を介して配信する外部状況情報配信部と、を含むことを特徴とする。
【図面の簡単な説明】
【0009】
【
図1】本発明の情報収集システムの全体構成図である。
【
図3】端末装置及びサーバの機能ブロック図である。
【
図7】コンテンツ選別部の動作ルーチンの一例である。
【
図9】コンテンツ選別部の動作ルーチンの一例である。
【
図10】端末装置及びサーバの機能ブロック図である。
【発明を実施するための形態】
【0010】
以下においては、本発明の好適な実施例について説明する。しかし、これらを適宜改変し、組み合わせてもよい。また、以下の説明及び添付図面において、実質的に同一又は等価な部分には同一の参照符を付して説明する。また、以下の説明において、画像とは動画及び静止画を含むものとして説明する。また、以下において、情報の送信または受信とは情報信号の送信または受信を含む表現である。
【実施例0011】
以下に、本発明の実施例1である情報収集システム100について、添付の図面を参照して説明する。
【0012】
図1は、実施例1の情報収集システムの100の全体構成図である。
図1に示すように、情報収集システム100は、移動体としての自動車Mに搭載された情報収集装置としての端末装置10とサーバ50とが、ネットワークNWを介して接続されて構成されている。なお、
図1において、移動体の一例として自動車Mが示されているが、移動体は、自転車、バイク、飛行機、船舶、移動する人等、自動車以外の移動体であっても良い。
【0013】
図2は、自動車Mへの端末装置10の取付例を示す図である。
図2では、取り付け例として、自動車Mの前席部分に取り付けられた端末装置10を示す。
【0014】
自動車Mの車外(周囲)の状況、すなわち自動車Mの外部(外界)を撮影する外部撮影部としての車外撮影カメラ11は、例えば、ダッシュボードDB上に配されている。車外撮影カメラ11は、例えば、フロントガラスを介して自動車Mの前方の広い領域を撮影可能である広角カメラであり得る。
【0015】
なお、車外撮影カメラ11は、車外の状況を撮影可能であればどこに設けられてもよい。例えば、車外撮影カメラ11は、ルームミラーRMの裏、すなわちフロントガラスFGに対向する面に設けられていてもよい。また、車外撮影カメラ11は、自動車Mの外側、例えばフロントバンパー等に設けられていてもよい。また、車外撮影カメラ11は、車外の多方向を撮影可能なように複数設けられていてもよい。
【0016】
搭乗者撮影部としての車内撮影カメラ13は、搭乗者の状態情報である搭乗者状態情報としての搭乗者の動作等の状況を撮影するカメラである。車内撮影カメラ13は、例えば
、フロントガラスFGの上端または当該上端付近の天井部に設けられている。なお、車内撮影カメラ13は、車内及び搭乗者の状況を撮影可能であれば、どこに設けられていてもよく、例えば、ダッシュボードDB上またはルームミラーRM等に設けられていてもよい。
【0017】
搭乗者状態情報としての車内の音を受音するマイク15は、例えば、ダッシュボードDB上に配されている。マイク15は、車内の音を受音可能であれば、ルームミラーRMまたはハンドル等、どこに設けられていてもよい。
【0018】
なお、車内撮影カメラ13及びマイク15を、搭乗者状態情報を収集する搭乗者状態情報収集部とする。
【0019】
GPS(Global Positioning System)衛星からの信号(GPS信号)を受信するGPS受信機17は、例えば、ダッシュボードDB上に配されている。なお、GPS受信機17は、GPS信号が受信できればどこに配されていてもよい。
【0020】
外部等から受信した情報を表示すなわち告知する告知手段としてのディスプレイ19は、例えば、ダッシュボードDB上に配されている。ディスプレイ19は、搭乗者から視認できる場所に配されていればよい。例えば、ディスプレイ19は、ダッシュボードDB内のセンターコンソールCCに取り付けられていてもよい。
【0021】
本体21は、車外撮影カメラ11、車内撮影カメラ13、マイク15、GPS受信機17及びディスプレイ19に接続されており、これらを制御する制御部(
図3参照)を含む。本体21は、例えば、ダッシュボードDB内センターコンソールCC部分に搭載されている。
【0022】
図3に、端末装置10の制御部23及びサーバ50内の機能ブロック図を示す。まず、制御部23について説明する。
【0023】
状態変化検知部としての搭乗者監視部25は、車内撮影カメラ13及びマイク15の情報を受信可能である。搭乗者監視部25は、車内撮影カメラ13及びマイク15から送信される画像または音声入力に基づいて、自動車Mに搭乗している搭乗者の状態、すなわち客室内を監視し、搭乗者の状態の変化を検知したか、例えば異常・異変が起きたか否かを判定する。搭乗者監視部25は、搭乗者の状態の変化を検知したと判定すると、画像抽出部27、自位置特定部29及び情報送信部31に状態変化検知情報を送信する。
【0024】
画像抽出部27は、車外撮影カメラ11に接続されており、車外撮影カメラ11が撮影した画像を受信する。画像抽出部27は、搭乗者監視部25からの状態変化検知情報に基づいて、車外撮影カメラ11から受信した画像の一部を抽出して抽出画像を生成する。画像抽出部27は、抽出画像を生成すると、当該抽出画像を、状態変化を検知した際の画像、すなわち、状態変化を検知した際に移動体の外部で発生している事象を撮影した事象画像として、情報送信部31に送信する。
【0025】
なお、車外撮影カメラ11が常時撮影をしておらず、搭乗者監視部25が状態変化検知情報を車外撮影カメラ11に送信し、車外撮影カメラ11が当該情報の受信に応じて撮影を行ってもよい。例えば、状態変化検知情報を受信した際に撮影を行うか、または状態変化検知情報を受信してから一定時間撮影を行うこととしてもよい。この場合、撮影された画像は画像抽出部によってさらにその一部が抽出されても良いし、画像抽出部を介さずに情報送信部31に事象画像として送信されてもよい。
【0026】
自位置特定部29は、GPS受信機17に接続されており、端末装置10が搭載されている自動車Mの現在位置を示す位置特定情報を出力可能である。自位置特定部29は、搭乗者監視部25から状態変化検知情報を受信すると、状態変化検知情報を受信した時刻における自動車Mの位置をGPS受信機17からのGPS信号によって特定し、当該位置の情報である位置特定情報を情報送信部31に送信する。また、自位置特定部29は、必要に応じて情報受信部33等の他の部分に、位置特定情報を送信可能である。
【0027】
なお、自位置特定部29は、ジャイロ装置(図示せず)からの自動車Mの姿勢情報または自動車Mの車速パルスにから得られた車速情報に基づいて自動車Mの位置を特定してもよい。また、自位置特定部29は、地図情報を保持するかまたは外部から取得可能であってもよい。すなわち、GPS受信機17からのGPS情報、ジャイロ装置からの自動車Mの姿勢情報及び自動車Mの車速情報のうちの少なくとも1つと当該地図情報を組み合わせて、自動車Mの位置を特定可能であってもよい。
【0028】
外部状況情報生成部または外部状況情報送信部としての情報送信部31は、ネットワークNW(
図1参照)を介してサーバ50へ情報信号を送信可能な送信機(図示せず)に接続されている。
【0029】
情報送信部31は、搭乗者監視部25から状態変化検知情報を受信すると、外部状況情報としての情報コンテンツを生成する。情報送信部31は、画像抽出部27もしくは車外撮影カメラ11から事象画像を受信し、かつ自位置特定部29からの位置特定情報を受信する。そして、これらの受信情報に基づいて、状態変化検知情報の受信時刻(例えば、事象画像の撮影時刻)の情報、事象画像及び位置特定情報を含む、外部状況情報としての情報コンテンツを生成する。すなわち、情報送信部31は、状態変化検知情報に応じて情報コンテンツを生成する。
【0030】
情報送信部31は、情報コンテンツを生成すると、当該情報コンテンツをサーバ50に送信する。なお、搭乗者監視部25から直接的に状態変化検知情報を受信せずとも、事象画像の受信または位置特定情報の受信をもって、搭乗者監視部25から情報送信部31に状態変化検知情報がもたらされたとすることとしてもよい。
【0031】
情報受信部33は、ネットワークNWを介してサーバ50等の外部から情報を受信可能な受信機(図示せず)に接続されている。情報受信部33は、サーバ50から情報を受信すると、当該情報に基づいてディスプレイ19に表示を行い、当該情報に基づく情報を搭乗者に告知することが可能である。
【0032】
次に、サーバ50について説明する。外部状況情報受信部としての情報受信部51は、ネットワークNWを介して情報送信部31から情報コンテンツを受信可能である。情報受信部51は、情報コンテンツを受信するとそれをコンテンツ選別部53に送信する。なお、図示していないが、情報受信部51は、他の自動車Mに各々搭載されている複数の端末装置10から、情報コンテンツを受信する。
【0033】
選別部または判定部としてのコンテンツ選別部53は、情報コンテンツを受信し、その中から自動車Mに送信すべき情報コンテンツを選別する機能部である。コンテンツ選別部53は、情報コンテンツの中から自動車Mの移動経路の選択に資する等の観点から当該情報コンテンツを有用または有意なコンテンツか否か判定するコンテンツ有用度判定部55を含む。
【0034】
コンテンツ有用度判定部55は、例えば、複数の情報コンテンツが受信されて蓄積された際に、当該蓄積された情報コンテンツうち、互いに同一または近傍の位置を示す位置特定情報を有する情報コンテンツ(以後、近傍コンテンツとも称する)が多数(または所定数以上)あるか否かを判定する。コンテンツ有用度判定部55は、近傍コンテンツが所定数以上ある場合、当該近傍コンテンツ群が有用もしくは有意であると判定して、これらを選別して代表コンテンツ選択部57に送信する。
【0035】
なお、近傍コンテンツは、情報コンテンツうち、互いに同一または近傍の位置を示す位置特定情報を有し、かつ同時間帯(例えば、撮影時刻が前後30分以内)に撮影された事象画像を有する情報コンテンツとしてもよい。
【0036】
コンテンツ選別部53は、近傍コンテンツ群の中から最も有用もしくは有意な、または良質な事象画像を保持する情報コンテンツを、代表コンテンツとして選別する代表コンテンツ選択部57を含む。代表コンテンツ選択部57は、例えば、近傍コンテンツ群が保持する事象画像を解析し、最も鮮明な事象画像を保持する情報コンテンツを代表コンテンツとして選別してもよい。また、近傍コンテンツ群のうち最近時に撮影された事象画像を保持する情報コンテンツを代表コンテンツとして選択してもよい。
【0037】
代表コンテンツ選択部57は、代表コンテンツを選択すると、それを情報送信部59に送信する。
【0038】
外部状況情報配信部としての情報送信部59は、ネットワークNWを介して端末装置10に情報信号を送信可能である。情報送信部59は、代表コンテンツ選択部57から代表コンテンツを受信すると、それを端末装置10に送信する。
【0039】
上述のように、端末装置10の情報受信部33は、サーバ50から情報を受信すると、当該情報に基づいてディスプレイ19に表示を行わせ、告知をすることが可能である。この表示は、例えば、地図上に自動車Mの位置と情報コンテンツに含まれる位置特定情報、すなわち事象が発生した位置を表示し、かつ情報コンテンツに含まれる事象画像を表示することで行われる。
【0040】
ここで、情報受信部33は、代表コンテンツを受信した後に、代表コンテンツの有する位置特定情報及び事象画像の撮影時刻に基づいて、ディスプレイ19に当該代表コンテンツに基づく情報を表示するかの判定をすることとしてもよい。
【0041】
この判定は、例えば、端末装置10を搭載している自動車Mの現在位置と当該代表コンテンツの有する位置特定情報によって示される位置とが所定の距離内にあるか否かで行われてもよい。
【0042】
また、自動車Mにナビゲーションシステムが搭載されている場合には、ナビゲーションシステムに設定されている経路が、当該代表コンテンツの位置特定情報によって示される位置を通過するかまたはその近傍を通過するかによって判定されてもよい。
【0043】
[各部の動作ルーチン]
以下に、上述した各部の動作ルーチンについて説明する。なお、以下に説明する動作ルーチンのうち、端末装置10の制御部23内の各部の動作ルーチンは、例えば、自動車Mのエンジン、モータ等の原動機の始動時に開始され、原動機の停止まで繰り返し実行される。また、端末装置10の個別のスイッチが設けられており、当該スイッチのオン時に動作ルーチンが開始され、当該スイッチがオフ時まで繰り返し実行されることとしてもよい。
【0044】
図4に、搭乗者監視部25の動作ルーチンの一例を示す。まず、搭乗者監視部25は、搭乗者に状態変化、例えば異変が発生しているか否かを判定する(ステップS1)。この判定においては、例えば、操縦者または搭乗者の注視状態の変化に応じて、具体的には当該注視状態の変化が発生しているか否かに基づいて、状態変化が発生しているか否かを判定してもよい。注視状態の変化とは、例えば、注視をしていない状態から注視している状態への変化、すなわち注視度の変化、または注視している方向の変化等を含む。
【0045】
例えば、操縦者が一方向を一定時間以上注視したことを車内撮影カメラ13から送信される画像を用いた視線解析等で検知した際に、状態変化が発生した(検知された)と判定することとしてもよい。
【0046】
また、操縦者を含む搭乗者の多数が一方向を一定時間以上注視したことを検知した際に、状態変化が発生したと判定することとしてもよい。なお、視線解析をせずとも、操縦者を含む搭乗者の顔の方向が一方向を一定時間以上向いた際に、操縦者または搭乗者が当該一方向を注視したと判定することとしてもよい。
【0047】
また、操縦者の注視方向(位置)または視線方向の移動が閾値を超えた移動量であることを検知した際に、または注視方向(位置)又は視線方向が閾値を超えた速度で移動した際に状態変化が発生したと判定してもよい。
【0048】
また、マイク15から送信される音声を音声認識し、「事故」、「工事」、「大変」、「なんだろう?」等の特定のキーワードが認識された際に、異変が起きたと判定することとしてもよい。なお、状態変化検知情報には、状態変化発生時の操縦者または搭乗者が注視した方向の情報である注視方向情報が含まれていてもよい。また、状態変化検知情報には音声認識の結果が含まれていてもよい。
【0049】
ステップS1において、状態変化が発生していると判定すると(ステップS1:YES)、搭乗者監視部25は状態変化検知情報を画像抽出部27、自位置特定部29及び情報送信部31に送信し(ステップS2)、動作ルーチンが終了する。ステップS1において、状態変化が発生していないと判定すると(ステップS1:NO)、その後動作ルーチンが終了する。
【0050】
図5に画像抽出部27の動作ルーチンの一例を示す。まず、画像抽出部27は、搭乗者監視部25から状態変化検知情報が到来したかを判定する(ステップS1)。ステップS1において、状態変化検知情報が到来していないと判定すると(ステップS1:NO)、その後動作ルーチンは終了する。
【0051】
ステップS1において、状態変化検知情報が到来したと判定すると、画像抽出部27は、車外撮影カメラ11の画像を抽出して抽出画像を生成する(ステップS2)。この抽出画像の生成は、車外撮影カメラ11の画像から、状態変化検知情報を受信した時刻の静止画を抽出することで行われてもよい。
【0052】
また、車外撮影カメラ11の画像から、状態変化検知情報を受信した時刻の前後の1または複数の静止画または当該時刻の前後所定の時間範囲の動画を抽出することで行われてもよい。また、上述のように状態変化検知情報に搭乗者の注視方向情報が含まれている場合には、当該注視方向情報に基づいて状態変化検知情報を受信した時刻に基づいて抽出された静止画または動画から、その一部領域をさらに切り出す(トリミングする)こととしてもよい。この際、画像抽出部は、画像切出部として機能する。
【0053】
この場合、状態変化検知情報を受信した時刻に基づいて抽出された画像または動画から、注視方向情報に基づいて、搭乗者の注視方向と一致する領域部分を切り出して抽出することとしてもよい。
【0054】
ステップS2の終了後、画像抽出部27は、抽出画像を、状態変化を検知した際の画像、すなわち、状態変化を検知した際に移動体の外部で発生している事象を撮影した事象画像として、情報送信部31に送信し(ステップS3)、その後動作ルーチンが終了する。
【0055】
なお、上述のように、車外撮影カメラが常時撮影をしておらず搭乗者監視部25が状態変化検知情報を車外撮影カメラ11に送信し、車外撮影カメラ11が当該情報の受信に応じて撮影を行ってもよい。例えば、状態変化検知情報を受信した際に撮影を行うか、または状態変化検知情報を受信してから一定時間撮影を行うこととしてもよい。
【0056】
この場合、撮影された画像は、画像抽出部27によってさらにその一部が時間的に抽出されて情報送信部31に事象画像として送信されてもよい。また、当該撮影された画像は画像切出部として機能する画像抽出部27によって当該画像の一部領域が切り出されて情報送信部31に事象画像として送信されてもよい。なお、当該撮影された画像は、画像抽出部27を介さずに情報送信部31に事象画像として直接送信されてもよい。
【0057】
図6に、自位置特定部29の動作ルーチンの一例を示す。まず自位置特定部29は、搭乗者監視部25から状態変化検知情報が到来したかを判定する(ステップS1)。ステップS1において、状態変化検知情報が到来していないと判定すると(ステップS1:NO)、その後動作ルーチンは終了する。
【0058】
ステップS1において、状態変化検知情報が到来したと判定すると、自位置特定部29は、端末装置10が搭載されている自動車Mの位置を特定する位置特定情報を生成する(ステップS2)。この位置特定情報は、GPS受信機17からのGPS信号によって特定された位置の情報であってもよい。なお、自位置特定部29は、ジャイロ装置(図示せず)からの自動車Mの姿勢情報または自動車Mの車速パルスに基づく車速情報自動車Mの位置を特定する位置特定情報を生成してもよい。
【0059】
また、自位置特定部29は、地図情報を保持するかまたは外部から取得可能であってもよい。すなわち、自位置特定部29は、GPS受信機17からのGPS信号、ジャイロ装置からの自動車Mの姿勢情報及び自動車Mの車速情報のうちの少なくとも1つと当該地図情報を組み合わせて、自動車Mの位置を特定する位置特定情報を生成してもよい。
【0060】
ステップS2の終了後、自位置特定部29は、生成した位置特定情報を情報送信部31に送信し(ステップS3)、その後動作ルーチンは終了する。
【0061】
情報送信部31に送信された事象画像及び位置特定情報は、これらを含む情報コンテンツとして情報送信部31によってサーバ50の情報受信部51に送信される。すなわち、情報送信部31において、事象画像及び位置特定情報を含む情報コンテンツが生成され、サーバ50の情報受信部51に送信される。情報受信部51は、情報コンテンツを受信すると、これをコンテンツ選別部53に送信する。
【0062】
図7に、コンテンツ有用度判定部55及び代表コンテンツ選択部57からなるコンテンツ選別部53の動作ルーチンの一例を示す。この例では、コンテンツ選別部53は、情報コンテンツが有意または有用であることを判定するために、一定範囲内の位置で撮影された事象画像を含む情報コンテンツが一定数以上到来したか否かを判定する。なお、上述のように、情報受信部51は、複数の自動車Mに各々搭載されている複数の端末装置10から、情報コンテンツを受信している。
【0063】
まず、コンテンツ選別部53は、情報受信部51から互いに同一または近傍の位置を示す位置特定情報を有する情報コンテンツ(以下、近傍コンテンツとも称する)が所定数以上到来したか否かを判定する(ステップS1)。ステップS1において、近傍コンテンツが所定数以上到来していないと判定すると(ステップS1:NO)、動作ルーチンはその後終了する。
【0064】
ステップS1において、近傍コンテンツが所定数以上到来していると判定すると(ステップS1:YES)、コンテンツ選別部53は、当該近傍コンテンツの中から1つの情報コンテンツを代表コンテンツとして選別する(ステップS2)。
【0065】
この代表コンテンツの選択は、例えば、近傍コンテンツの各々が保持する事象画像を解析し、最も鮮明な事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとして選別してもよい。また、近傍コンテンツ各々が保持する事象画像のうち最近時に撮影された事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとして選別してもよい。
【0066】
なお、情報コンテンツに事象画像の撮影時の自動車Mの車速パルスまたはそれに基づく車速の情報が含まれていてもよく、その場合には最も鮮明な事象画像の選別に当該車速パルスまたは車速の情報が用いられてもよい。例えば、事象画像の撮影時の車速パルスを解析し、最も低速で撮影された事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとしてもよい。
【0067】
また、情報コンテンツに、搭乗者監視部25からの状態変化検知情報の送信時(すなわち、事象画像の撮影時)の自動車Mの搭乗者が注視している方向(位置)または視線方向の情報が含まれていてもよい。この場合、例えば、自動車Mが事象画像の撮影時に走行していた道路上の、どの車線を走行(どの車線に停止)していたかを事象画像から判定し、代表画像を判定することとしてもよい。
【0068】
例えば、状態変化検知情報の送信時に搭乗者が自動車Mの左方向を注視していた場合には、最も左の車線で撮影された事象画像を代表画像としてもよい。また、搭乗者が自動車Mの右方向を注視していた場合には、最も右の車線で撮影された事象画像を代表画像としてもよい。
【0069】
ステップS2が終了すると、コンテンツ選別部53は、代表画像を含む情報コンテンツである代表コンテンツを情報送信部59に送信して(ステップS3)、その後動作ルーチンは終了する。情報送信部59は、コンテンツ選別部53から情報コンテンツを受信すると、それを端末装置10の情報受信部33に送信する。
【0070】
図8に、情報受信部33の動作ルーチンの一例を示す。まず、情報受信部33は、サーバから情報コンテンツが到来したかを判定する(ステップS1)。情報コンテンツが到来していないと判定した場合(ステップS1:NO)、その後動作ルーチンは終了する。
【0071】
ステップS1において、サーバから情報コンテンツが到来したと判定すると(ステップS1:YES)、情報受信部33は、到来した情報コンテンツが、端末装置10が搭載されている自動車Mの搭乗者にとって有用か否かを判定する(ステップS2)。
【0072】
この判定において、例えば、到来した情報コンテンツが有する位置特定情報によって示される位置が、自動車Mの現在位置の近傍である(所定の距離内にある)場合に、当該情報コンテンツが有用であると判定してもよい。
【0073】
また、例えば、自動車Mに搭載されているナビゲーションシステムにおいて経路が設定されている場合、当該経路に基づいて到来した情報コンテンツが有用か否かを判定してもよい。すなわち、例えば、到来した情報コンテンツが保持する位置特定情報によって示される位置が、当該設定されている経路上にあるかまたは当該経路の近傍にあることをして、当該情報コンテンツが有用であると判定することにしてもよい。
【0074】
ステップS2において、到来した情報コンテンツが有用であると判定すると(ステップS2:YES)、情報受信部は、ディスプレイ19に情報コンテンツに基づく情報を表示する(ステップS3)。この表示は、例えば、単に情報コンテンツが保持する事象画像及び位置特定情報を表示するものであってもよい。また、これに加えて、位置特定情報に基づいて地図上に事象画像が撮影された位置を表示することとしても良い。
【0075】
ステップS2において、到来した情報コンテンツが有用ではないと判定すると(ステップS2:NO)、その後動作ルーチンは終了する。また、ステップS3が終了すると、その後動作ルーチンは終了する。
【0076】
上述の情報システム100、端末装置10及びサーバ50によれば、移動体の移動経路上の不特定の位置、例えば、狭い道や交通量の少ない道等、情報収集装置の未設置の経路を含む場所において発生した事象に関する画像を含む情報を収集することが可能である。さらには、当該収集した情報を、他の移動体に配信することが可能である。
【0077】
また、情報システム100、端末装置10及びサーバ50によれば、移動体の搭乗者に異変等の状態変化に基づいて当該状態変化時に撮影された画像を含む情報を生成し、かつ当該画像を含む情報を解析して有用または有意な情報を選別して配信することで、必要な情報のみを効率よく配信することが可能である。
以下に、本発明の実施例2のシステム200について、図面を参照しつつ説明する。なお、実施例2のシステム200は、コンテンツ選別部53の動作ルーチンが異なる以外は、実施例1のシステム100と同一の構成を有している。そのため、コンテンツ選別部53の動作ルーチン以外の説明は省略する。
実施例2では、システム200のコンテンツ選別部53が、端末装置10から送信された情報コンテンツ内の事象画像を画像分析して、当該事象画像が何の事象を撮影したものかを解析し、個々の情報コンテンツの有意性または有用性を判定する場合を例に説明する。すなわち、コンテンツ選別部53が、事象画像の撮影時にどのような事象が発生しているかを解析して、有意性または有用性を判定する場合を例に説明する。
ステップS1において、情報コンテンツが到来していると判定すると(ステップS1:YES)、コンテンツ選別部53は、当該到来した情報コンテンツが有用または有意であるか否かを判定する(ステップS2)。
この判定は、例えば、情報コンテンツの各々に含まれる事象画像が何を撮影したものか、すなわちどのような事象が発生しているのかを解析することで行われる。例えば、事象画像が、「事故」、「工事現場」、「渋滞」、「人だかり」、「催事(イベント)」等、有用な画像であるとの画像であると解析された場合に、当該事象画像が含まれる情報コンテンツが有用または有意であると判定されてもよい。
具体的には、例えば、事象画像を画像解析し、多数の自動車が一定時間移動していないと解析された場合には渋滞と判定する。また、「工事」の文字が認識されたり、工事現場に見られる黄色と黒の斜線模様が認識された場合には「工事現場」と判定する。また、例えば、人が多数認識された場合には「人だかり」または「催事(イベント)」と判定される。ステップS2において、情報コンテンツが有用または有意ではないと判定された場合には(ステップS2:NO)、ルーチンはその後終了する。
ステップS2において、到来した情報コンテンツが有用または有意であると判定された場合には(ステップS2:YES)処理はステップS3に進む。ステップS3において、コンテンツ選別部53は、当該有用または有意と判定された情報コンテンツが保持する事象画像と同時間帯(例えば、撮影時刻が前後30分以内)及び同位置(または近傍位置)で撮影された事象画像を含む他の情報コンテンツが到来しているか否かを判定する(ステップS3)。
ステップS3において、同時間帯及び同位置で撮影された事象画像を含む他の情報コンテンツが到来していると判定した場合には(ステップS3:YES)、コンテンツ選別部53は、当該情報コンテンツの中から1つの情報コンテンツを代表コンテンツとして選択する(ステップS4)。
実施例1において説明したように、この代表コンテンツの選択は、例えば、情報コンテンツの各々が保持する事象画像を解析し、最も鮮明な事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとして選別してもよい。また、情報コンテンツの保持する事象画像のうち最近時に撮影された事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとして選別してもよい。
なお、情報コンテンツに事象画像の撮影時の自動車Mの車速パルスまたは車速の情報が含まれていてもよく、その場合には最も鮮明な事象画像の選別に当該車速パルスまたは車速の情報が用いられてもよい。例えば、事象画像の撮影時の車速パルスを解析し、最も低速で撮影された事象画像を代表画像とし、当該代表画像を保持する情報コンテンツを代表コンテンツとしてもよい。
また、情報コンテンツに、搭乗者監視部25からの状態変化検知情報の送信時(すなわち、事象画像の撮影時)の自動車Mの搭乗者が注視している方向(位置)または視線方向の情報が含まれていてもよい。この場合、例えば、事象画像から自動車Mがどの車線を走行(どの車線に停止)しているかを判定し、代表画像を判定することとしてもよい。
例えば、状態変化検知情報の送信時に搭乗者が自動車Mの左方向を注視していた場合には、最も左の車線で撮影された事象画像を代表画像としてもよい。また、搭乗者が自動車Mの左方向を注視していた場合には、最も右の車線で撮影された事象画像を代表画像としてもよい。
ステップS4の終了後、及びステップS3において、同時間帯及び同位置で撮影された事象画像を含む他の情報コンテンツが到来していないと判定した場合には(ステップS3:NO)、コンテンツ選別部53は、代表画像を含む情報コンテンツをそのまま端末装置10に送信する(ステップS5)。
なお、ステップS3において同時間帯及び同位置で撮影された事象画像を含む他の情報コンテンツが到来していない判定した場合には、ステップS2において有用または有意と判定された情報コンテンツを端末装置10に送信する。ステップS5の終了後、動作ルーチンは終了する。
なお、この場合、サーバ50から端末装置10に送信される情報コンテンツは、ステップS2において行われた事象画像の解析結果を追加したものでもよい。すなわち、当該送信される情報コンテンツに、当該事象画像に映されている事象(例えば、「事故」、「工事現場」、「渋滞」「人だかり」または「催事(イベント)」等)の情報を含ませることとしてもよい。
このような事象に関する情報が情報コンテンツに含まれて端末装置10に送信される場合、情報受信部は、当該事象に関する情報に基づいてディスプレイ19に当該情報コンテンツに基づく情報を表示させるか否かを判定してもよい。例えば、端末装置10を用いるユーザが、「事故」の情報のみを要求している場合には、「事故」に関する情報コンテンツに基づく情報のみをディスプレイ19に表示させてもよい。
また、自動車Mにナビゲーションシステムが搭載されている場合、ナビゲーションシステムに対して当該事象に関する情報を提供し、当該ナビゲーションシステムに経路変更を促すこととしてもよい。例えば、情報コンテンツに基づいて、ナビゲーションシステムの設定経路上に事故が発生しているとの情報を提供し、当該事故を避けるように設定経路を変更するように促すこととしてもよい。
また、例えば、情報コンテンツに基づいて、ナビゲーションシステムの設定経路の近傍において、例えば花火のような「イベント(催事)」が催されているとの情報を提供し、当該設定経路を当該「イベント(催事)」が行われている場所を通過するような変更を促すこととしてもよい。なお、「イベント(催事)」による混雑及び渋滞等を見込んで、当該「イベント(催事)」が行われている場所を回避するような設定経路の変更を促すこととしてもよい。
上述の情報システム200、端末装置10及びサーバ50によれば、移動体の移動経路上の不特定の位置、例えば、狭い道や交通量の少ない道等、情報収集装置の未設置の経路を含む場所において発生した事象に関する画像を含む情報を収集することが可能である。さらには、当該収集した情報を、他の移動体に配信することが可能である。
また、情報システム200、端末装置10及びサーバ50によれば、移動体の搭乗者に異変等の状態変化に基づいて当該状態変化時に撮影された画像を含む情報を生成し、かつ当該画像を含む情報を解析して有用または有意な情報を選別して配信することで、必要な情報のみを効率よく配信することが可能である。
また、情報システム200、端末装置10及びサーバ50によれば、移動体において撮影されて送信された事象に関する画像を解析し、どのような事象が発生しているかに関する情報を含む情報を配信可能である。これにより、発生している事象に関する詳細な情報を、自動車等の他の移動体に配信可能である。