特開 2016-186786 画像及びオーディオデータに基づいた危険の検出及び警告用のウェアラブルスマート装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2016-186786(P2016-186786A)

(43)【公開日】2016年10月27日

(54)【発明の名称】画像及びオーディオデータに基づいた危険の検出及び警告用のウェアラブルスマート装置

(51)【国際特許分類】

   G08B 21/02 20060101AFI20160930BHJP

   G08B 25/04 20060101ALI20160930BHJP

   G08B 25/00 20060101ALI20160930BHJP

   G06T 1/00 20060101ALI20160930BHJP

【ＦＩ】

   G08B21/02

   G08B25/04 K

   G08B25/00 510M

   G06T1/00 315

【審査請求】未請求

【請求項の数】20

【出願形態】ＯＬ

【外国語出願】

【全頁数】32

(21)【出願番号】特願2016-1519(P2016-1519)

(22)【出願日】2016年1月7日

(31)【優先権主張番号】14/601,506

(32)【優先日】2015年1月21日

(33)【優先権主張国】US

(71)【出願人】

【識別番号】507342261

【氏名又は名称】トヨタ モーター エンジニアリング アンド マニュファクチャリング ノース アメリカ，インコーポレイティド

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100092624

【弁理士】

【氏名又は名称】鶴田 準一

(74)【代理人】

【識別番号】100102819

【弁理士】

【氏名又は名称】島田 哲郎

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山 知広

(72)【発明者】

【氏名】ラジーブ ダヤル

【テーマコード（参考）】

5B057

5C086

5C087

【Ｆターム（参考）】

5B057CA08

5B057CA13

5B057CA16

5B057DA06

5B057DA12

5B057DA15

5B057DC01

5B057DC16

5C086AA22

5C086AA51

5C086BA20

5C086CA09

5C086CA28

5C086CB26

5C086CB36

5C086DA33

5C086EA45

5C086FA01

5C086FA11

5C086FA20

5C087AA02

5C087AA03

5C087AA07

5C087AA31

5C087AA51

5C087BB20

5C087DD03

5C087DD27

5C087EE18

5C087FF04

5C087FF23

5C087GG02

5C087GG08

5C087GG10

5C087GG66

(57)【要約】      （修正有）

【課題】オーディオデータ及び画像データに基づいてユーザーに危険警告情報を提供する。
【解決手段】ウェアラブルスマート装置１００は、潜在的危険に関係するオーディオデータを検出するように構成されたマイクロフォン１３１と、潜在的な危険に関係する画像データを検出するように構成されたカメラ１２２を含み、ウェアラブルスマート装置１００は潜在的危険が実際の危険を提示するかどうかを、検出されたオーディオデータ及び検出された画像データに基づいて決定する。
【選択図】図１

【特許請求の範囲】

【請求項1】

危険警告情報を提供するウェアラブルスマート装置であって、
潜在的危険に関係するオーディオデータを検出するように構成されたマイクロフォンと、
前記潜在的危険に関係する画像データを検出するように構成されたカメラと、
前記マイクロフォン及び前記カメラに結合されると共に前記潜在的危険が実際の危険を提示するかどうかを、前記検出されたオーディオデータ又は前記検出された画像データのうちの少なくとも１つに基づいて決定するように構成された、プロセッサと、
を有する装置。

【請求項2】

請求項１に記載の装置において、前記プロセッサに結合されると共に少なくとも１つの危険に関係するメモリオーディオデータ及びメモリ画像データを記憶するように構成された、メモリを更に有し、且つ、前記プロセッサは、前記検出されたオーディオデータ又は前記検出された画像データのうちの少なくとも１つを、前記メモリオーディオデータ又は前記メモリ画像データのうちの少なくとも１つと比較することにより、前記潜在的危険が前記実際の危険を示すか否かを決定するように構成されている、ウェアラブルスマート装置。

【請求項3】

請求項１に記載の装置において、ＩＭＵ及びＧＰＳを更に有し、且つ、前記プロセッサは、前記ＧＰＳ、前記ＩＭＵ、前記検出されたオーディオデータ、及び前記検出された画像データのうちの少なくとも２つに基づいて現在の場所を決定するように更に構成されている、ウェアラブルスマート装置。

【請求項4】

請求項３に記載の装置において、前記プロセッサに結合されると共に記憶されている場所及び前記記憶されている場所に関係する少なくとも１つの危険を記憶するように構成されたメモリを更に有し、且つ、前記プロセッサは、前記記憶されている場所に対する前記現在の場所の比較に基づいて、前記少なくとも１つの危険が危険を示すか否かを決定するように更に構成されている、ウェアラブルスマート装置。

【請求項5】

請求項１に記載の装置において、前記マイクロフォンは、離隔した２つのマイクロフォンを含み、且つ、前記プロセッサは、前記検出されたオーディオデータに基づいて前記潜在的危険の方向を決定するように更に構成されている、ウェアラブルスマート装置。

【請求項6】

請求項５に記載の装置において、前記プロセッサは、前記潜在的危険の前記方向の決定に応答して、前記潜在的危険の前記方向に向かって合焦するように前記カメラに対して指示するように更に構成されている、ウェアラブルスマート装置。

【請求項7】

請求項１に記載の装置において、前記プロセッサは、前記検出されたオーディオデータの音量に基づいて、前記潜在的危険までの距離を決定するように更に構成されている、ウェアラブルスマート装置。

【請求項8】

請求項１に記載の装置において、前記プロセッサは、少なくとも１つのファクタに基づいて前記潜在的危険の深刻さレベルを決定するように更に構成されている、ウェアラブルスマート装置。

【請求項9】

請求項８に記載の装置において、前記少なくとも１つのファクタは、前記潜在的危険までの距離、前記潜在的危険が接近しつつあるかどうか、前記潜在的危険のサイズ、又は前記潜在的危険の音量を含む、ウェアラブルスマート装置。

【請求項10】

危険警告を提供するスマートネックレスであって、
第１端部及び第２端部を有する上部部分と、
前記上部部分の前記第１端部に結合された第１下部部分と、
前記上部部分の前記第２端部に結合された第２下部部分と、
前記第１下部部分、前記第２下部部分、又は前記上部部分上において位置決めされると共に潜在的危険に関係するオーディオデータを検出するように構成された少なくとも１つのマイクロフォンと、
前記第１下部部分又は前記第２下部部分上において位置決めされると共に前記潜在的危険に関係する画像データを検出するように構成されたカメラと、
前記カメラ及び前記少なくとも１つのマイクロフォンに結合されると共に前記潜在的危険が実際の危険を提示するかどうかを前記検出されたオーディオデータ及び前記検出された画像データに基づいて決定するように構成された、プロセッサと、
を有するスマートネックレス。

【請求項11】

請求項１０に記載のスマートネックレスにおいて、前記プロセッサに結合されると共に少なくとも１つの危険に関係するメモリオーディオデータ及びメモリ画像データを記憶するように構成されたメモリを更に有し、且つ、前記プロセッサは、前記検出されたオーディオデータ及び前記検出された画像データを前記メモリオーディオデータ及び前記メモリ画像データと比較することにより、前記潜在的危険が前記実際の危険を示すか否かを決定するように構成されている、スマートネックレス。

【請求項12】

請求項１０に記載のスマートネックレスにおいて、前記少なくとも１つのマイクロフォンは、２つのマイクロフォンを含み、且つ、前記プロセッサは、前記検出されたオーディオデータに基づいて前記潜在的危険の方向を決定するように更に構成されている、スマートネックレス。

【請求項13】

請求項１２に記載のスマートネックレスにおいて、前記プロセッサは、前記潜在的危険の前記方向の決定に応答して、前記潜在的危険の前記方向に向かって前記カメラを合焦させるように更に構成されている、スマートネックレス。

【請求項14】

請求項１０に記載のスマートネックレスにおいて、前記プロセッサは、前記検出されたオーディオデータの音量に基づいて、前記潜在的危険までの距離を決定するように更に構成されている、スマートネックレス。

【請求項15】

請求項１０に記載のスマートネックレスにおいて、前記プロセッサは、前記潜在的危険までの距離、前記潜在的危険が接近しつつあるのかどうか、前記潜在的危険のサイズ、又は前記潜在的危険の音量のうちの少なくとも１つに基づいて、前記潜在的危険の深刻さレベルを決定するように更に構成されている、スマートネックレス。

【請求項16】

ウェアラブルスマート装置のユーザーに対して危険警告を提供する方法であって、
少なくとも２つのマイクロフォンにより、潜在的危険に関係すると共に音量情報を含むオーディオデータを検出するステップと、
カメラにより、前記潜在的危険に関係する画像データを検出するステップと、
プロセッサにより、前記潜在的危険が実際の危険を提示するかどうかを前記検出されたオーディオデータ及び前記検出された画像データに基づいて決定するステップと、
を有する方法。

【請求項17】

請求項１６に記載の方法において、プロセッサにより、前記検出された画像データ又は前記検出されたオーディオデータのいずれが相対的に高い品質を有しているのかを決定するステップを更に有し、且つ、前記潜在的危険が前記実際の危険を示すか否かを決定するステップは、相対的に高い品質を有する前記検出された画像データ及び前記検出されたオーディオデータのいずれかに対して相対的に大きな重みを提供することにより、実行される、方法。

【請求項18】

請求項１６に記載の方法において、メモリ内において、少なくとも１つの危険に関係する記憶されたオーディオデータ及び記憶された画像データを記憶するステップを更に有し、且つ、前記潜在的危険が前記実際の危険を示すか否かを決定するステップは、前記記憶されたオーディオデータ及び前記記憶された画像データに対する前記検出されたオーディオデータ及び前記検出された画像データの比較に基づいている、方法。

【請求項19】

ウェアラブルスマート装置のユーザーに対して危険警告を提供する方法であって、
メモリ内において、危険の場所を記憶するステップと、
ＧＰＳ、ＩＭＵ、カメラ、又はマイクロフォンのうちの少なくとも２つにより、場所データを検出するステップと、
プロセッサにより、前記ウェアラブルスマート装置の現在の場所を決定するステップと、
前記プロセッサにより、前記現在の場所が前記危険の前記場所の既定の距離以内にあると決定するステップと、
前記プロセッサにより、前記現在の場所が前記危険の前記場所の前記既定の距離以内にあることに応答し、前記ユーザーに提供されるフィードバックデータを決定するステップと、
を有する方法。

【請求項20】

請求項１９に記載の方法において、振動装置のペアにより、前記フィードバックデータに基づいて触覚フォードバックを生成するステップを更に有する、方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、画像データ及びオーディオデータに基づいて危険（ハザード）についてユーザーに警告するウェアラブルスマート装置に関する。

【背景技術】

【0002】

特定の人々、例えば盲目の又は聴覚障害を有する人は感覚能力の欠如に起因し、且つ／又は、例えば騒々しい工場内の労働者は極端な環境に起因し、特定の環境において特定の不利な状態におかれる場合がある。これらの人々は、自身の環境において、すべての感覚を有する又は静かな環境にある人と同じようにして特定の情報を検出することはできない。従って、これらの人々は、自身の失われた又は弱化した感覚に起因し、危険な状況が自身の環境において発生した場合にその危険な状況に気付かない場合があり、且つ、自身の周囲の危険或いは危険が近づいていることを検出できないことに起因して、相対的に高い危険のリスクを有する状態となる場合がある。失われた又は弱化した感覚には、多くの場合に、視覚及び聴覚が含まれる。

【0003】

ウェアラブルカメラは、多くの場合、ユーザーの同一又は類似の視点又は視界（Ｆｉｅｌｄ Ｏｆ Ｖｉｅｗ：ＦＯＶ）から、ユーザーの経験を記録し且つ文書化する。この経験は、視覚及び／又は聴覚を失った又は弱い人が検出できないデータを検出する、カメラ及び／又はマイクロフォンによって記録されてもよい。しかしながら、これらの装置は受動型の記録装置であり、且つ、一般に、ＦＯＶ内のシーンに関するリアルタイム処理及び情報を提供しない。従って、カメラ及びマイクロフォンによってキャプチャされたデータを、環境に関するユーザーの認識を補完するために使用することはできない。

【発明の概要】

【発明が解決しようとする課題】

【0004】

従って、ユーザーの環境に対応したデータを検出すると共に、そのデータを弱化した又は失われた感覚を有するユーザーが検出しうるフィードバックに変換する、ウェアラブル装置に対するニーズが存在している。

【課題を解決するための手段】

【0005】

本明細書には、危険警告情報を提供するウェアラブルスマート装置について記述されている。ウェアラブルスマート装置は、潜在的な危険に関係するオーディオデータを検出するように構成された、マイクロフォンを含む。ウェアラブルスマート装置は、更に、潜在的な危険に関係する画像データを検出するように構成された、カメラを含む。ウェアラブルスマート装置は更にプロセッサを含み、このプロセッサは、マイクロフォン及びカメラに結合されると共に、検出されたオーディオデータ又は検出された画像データのうちの少なくとも１つに基づいて、その潜在的な危険が実際の危険を示しているか否かを決定するように構成されている。

【0006】

又、本明細書には、危険警告を提供するスマートネックレスについても記述されている。スマートネックレスは、第１端部と、第２端部と、を有する上部部分を含む。又、スマートネックレスは、上部部分の第１端部に結合された第１下部部分をも含む。又、スマートネックレスは、上部部分の第２端部に結合された第２下部部分をも含む。又、スマートネックレスは、第１下部部分、第２下部部分、又は上部部分上において位置決めされると共に潜在的な危険に関係するーディオデータを検出するように構成された、少なくとも１つのマイクロフォンをも含む。又、スマートネックレスは、第１下部部分又は第２下部部分上において位置決めされると共に、潜在的な危険に関係する画像データを検出するように構成された、カメラをも含む。又、スマートネックレスは、カメラ及び少なくとも１つのマイクロフォンに結合されると共に、検出されたオーディデータ及び検出された画像データに基づいて潜在的な危険が実際の危険を示しているか否かを決定するように構成された、プロセッサをも含む。

【0007】

又、本明細書には、ウェアラブルスマート装置のユーザーに対して危険警告を提供する方法についても記述されている。この方法は、少なくとも２つのマイクロフォンにより、潜在的な危険に関係すると共に音量情報を含むオーディオデータを検出するステップを含む。又、この方法は、カメラにより、潜在的な危険に関係する画像データを検出するステップをも含む。又、この方法は、プロセッサにより、検出されたオーディオ及び検出された画像データに基づいて潜在的な危険が実際の危険を示すか否かを決定する、ステップをも含む。

【0008】

又、本明細書には、ウェアラブルスマート装置のユーザーに対して危険警告を提供する方法についても記述されている。この方法は、メモリ内に危険場所を記憶するステップを含む。又、この方法は、ＧＰＳ、ＩＭＵ、カメラ、又はマイクロフォンのうちの少なくとも２つにより、場所データを検出するステップをも含む。又、この方法は、プロセッサにより、ウェアラブルスマート装置の現在の場所を決定するステップをも含む。又、この方法は、プロセッサにより、現在の場所が危険場所から既定の距離内にあることを決定するステップをも含む。又、この方法は、プロセッサにより、現在の場所が危険場所から既定の距離内にあることに応答して、ユーザーに提供されるフィードバックデータを決定するステップをも含む。

【0009】

本発明のその他のシステム、方法、特徴、及び利点については、以下の図面及び詳細な説明を参照した際に、当業者に明らかとなろう。このようなすべての更なるシステム、方法、特徴、及び利点は、この説明に含まれるべく、本発明の範囲に含まれるべく、且つ、添付の請求項によって保護されるべく、意図されている。図面に示されているコンポーネント部品は、必ずしも縮尺が正確ではなく、且つ、本発明の重要な特徴を相対的に良好に示すべく、誇張されている場合がある。添付図面においては、異なる図面のすべてを通じて、同一の参照符号により、同一の部分を表記している。

【図面の簡単な説明】

【0010】

【図1】本発明の一実施形態に係るウェアラブルスマート装置のブロックダイアグラムである。

【図2】本発明の一実施形態に係るスマートネックレスの正面図を示す。

【図3】本発明の一実施形態に係る図２のスマートネックレスの背面図を示す。

【図4】本発明の一実施形態に係る、ユーザーを安全監視すると共に危険についてユーザーに警告するウェアラブルスマート装置によって実行される、例示用の方法を示す。

【図5】本発明の一実施形態に係る、危険に関係するコンフィデンス値及び危険に関係する深刻さレベルを含む特定の場所に関係する様々な危険情報を記憶する、例示用のデータベースを示す。

【図6】本発明の一実施形態に係る、画像データ、オーディオデータ、及びベース深刻さレベルを危険の様々なタイプと関連付ける、別の例示用のデータベースを示す。

【図7】本発明の一実施形態に係る、様々な深刻さレベルファクタをその深刻さレベルに対応した調節と関連付ける、例示用のデータベースを示す。

【図8】本発明の一実施形態に係る、既知の危険の検出音量を危険までの推定距離と関連付ける、例示用のデータベースを示す。

【図9】本発明の一実施形態に係る図４に示されている方法に類似した方法を使用する図１に示されているウェアラブルスマート装置に類似した、例示用のウェアラブルスマート装置を示す。

【図10】本発明の一実施形態に係る、図４に示されている方法に類似した方法を利用する図９のウェアラブルスマート装置の別の例を示す。

【図11】本発明の一実施形態に係る、発散データに基づいてユーザーを安全監視すると共に危険についてユーザーに警告するべくウェアラブルスマート装置によって実行されうる、別の例示用の方法を示す。

【図12】本発明の一実施形態に係る、図１１に示されている方法の例示用の使用法を示す。

【発明を実施するための形態】

【0011】

本明細書において記述されているウェアラブルスマート装置及び方法は、ユーザーの環境に対応したデータを検出し、危険が環境内に存在していることを決定し、且つ、ユーザーが危険を回避するか又はこれに関する対策を実行できるフィードバックを提供する。ウェアラブルスマート装置は、視覚及び／又は聴覚障害を有するユーザーにより、使用されうる。更には、ウェアラブルスマート装置は、騒々しい工場、薄暗い照明及び視認性を有する仕事場、混雑した仕事場、建設現場などのような極端な又は困難な環境において働くユーザーにより、使用されうる。又、それぞれの危険は、深刻さレベル及びコンフィデンスレベルに割り当てられてもよい。深刻さレベルは、危険によって提示される危険の尤度、危険によって提示される危険の程度、ユーザーに対する危険の近接性、又はこれらに類似したものに対応している。コンフィデンスレベルとは、危険がその場所において依然として存在していることに関する推定されたコンフィデンスである。

【0012】

環境に対応したデータには、ユーザーの弱化した又は失われた視覚及び／又は聴覚の感覚を補完しうる画像データ及びオーディオデータの両方が含まれうる。ウェアラブルスマート装置及び方法は、（１つのセンサが危険を検出できない際を含む）ユーザー環境における潜在的な危険の検出の安定性及び精度の向上、それぞれの危険の深刻さレベル及び／又はコンフィデンスレベルを決定する能力、及び識別されていない状況又は物体が危険を示すか否かを決定する能力などのいくつかの利益及び利点を提供する。ウェアラブル装置及び方法は、危険までの距離を決定する能力及び危険までの方向を決定する能力を含む更なる利益及び利点を提供する。

【0013】

例示用のウェアラブルスマート装置は、ユーザーの環境に対応したオーディオ及び画像データを検出する能力を有するマイクロフォン及びカメラの両方を含む。マイクロフォンは、危険までの方向及び／又は距離が検出されうるように、ステレオオーディオデータを検出する能力を有する複数のマイクロフォンを含んでもよい。カメラは、危険までの方向及び又は距離が検出されうるように、ステレオカメラペアを含んでもよい。又、ウェアラブルスマート装置は、カメラ及び／又はマイクロフォンとの関連において作動した際に、ユーザーの場所に対応した非常に正確な場所データを検出するべく使用されうるＧＰＳ及び／又はＩＭＵを含んでもよい。

【0014】

又、ウェアラブルスマート装置は、場所データ、オーディオデータ、及び画像データに対応した危険情報の複数のデータベースを記憶するメモリを含んでもよい。又は、メモリは、検出されたファクタを危険の深刻さレベルの調節に対して関連付けるデータベースと、距離情報に伴う識別されたオーディオ音響の対応した音量のデータベースと、を含んでもよい。又、ウェアラブルスマート装置は、検出されたオーディオ及び画像データをデータベースと比較することにより、危険データを検出された画像データ、オーディオデータ、及び場所データとマッチングさせる能力を有するプロセッサをも含む。又、プロセッサは、検出された危険の深刻さを決定する能力を有してもよい。

【0015】

一実装形態においては、且つ、図１を参照すれば、ウェアラブルスマート装置１００は、センサアレイ１２０、インターフェイスアレイ１３０、及びコンポーネントアレイ１４０と通信するオンボード処理アレイ１１０を含む。オンボード処理アレイ１１０、センサアレイ１２０、インターフェイスアレイ１３０、及びコンポーネントアレイ１４０は、図１のブロックダイアグラムにおいて、ウェアラブルスマート装置１００のコンポーネントを視覚的に組織化するための例示用のグループ分けであると共に限定を目的としたものはなく、従って、必ずしもなんらかの物理的なグループ分けを表すものではない。更には、特定の実装形態は、図１に示されているものよりも多くの又は少ない数のコンポーネントを有してもよい。

【0016】

オンボード処理アレイ１１０は、プロセッサ１１１と、メモリ１１２と、を含む。プロセッサ１１１は、例えばＡＲＭプロセッサ、ＤＳＰプロセッサ、分散プロセッサ、又は中央処理のその他の形態の、コンピュータプロセッサであってもよい。プロセッサ１１１は、ウェアラブルスマート装置１００上において位置決めされてもよく、リモートプロセッサであってもよく、或いは、ローカル及びリモートプロセッサのペアであってもよい。

【0017】

メモリ１１２は、ＲＡＭ又はその他の揮発性又は不揮発性メモリ、一時的ではないメモリ、或いは、ハードディスクドライブ、半導体ディスクドライブ、ハイブリッドディスクドライブなどのデータストレージ装置、或いは、その他の適切なデータストレージのうちの１つ又は任意の組合せであってもよい。メモリ１１２は、メモリ１１２内に読み込まれうると共にプロセッサ１１１によって実行されうる機械可読命令を更に記憶してもよい。プロセッサ１１１と同様に、メモリ１１２は、ウェアラブルスマート装置１００上において位置決めされてもよく、ウェアラブルスマート装置１００からリモート状態において位置決めされてもよく、或いは、ローカル及びリモートメモリのペアであってもよい。

【0018】

センサアレイ１２０は、ステレオカメラ１２１、カメラ１２２、慣性計測装置（Ｉｎｅｒｔｉａｌ Ｍｅａｓｕｒｅｍｅｎｔ Ｕｎｉｔ：ＩＭＵ）１２３、全地球測位システム（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ：ＧＰＳ）１２４、及びセンサ１２５を含む。ステレオカメラ１２１は、ステレオ距離だけオフセットされた２つのカメラを有するステレオカメラペアであってもよい。ステレオ距離は、２つのカメラについて最適化されてもよい。ウェアラブルスマート装置１００は、ステレオカメラ１２１の複数のペアを有してもよい。カメラ１２２は、ステレオカメラペアの一部ではないカメラ又はその他の光学センサであってもよい。いくつかの実施形態においては、カメラ１２２は、ステレオカメラのペア１２１とは反対のウェアラブルスマート装置１００の側において位置決めされてもよく、且つ／又は、ユーザーの背後のエリアのデータを提供するべくユーザーの首の背後などの必要とされる場所に配置されてもよい。

【0019】

いくつかの実施形態においては、プロセッサ１１１は、ステレオカメラ１２１及び／又はカメラ１２２の焦点を変更する能力を有してもよい。これは、ＦＯＶを変更するべく、回転やターンなどを実行するように、ステレオカメラ１２１及び／又はカメラ１２２に結合されているアクチュエータに対して命令するステップを含んでもよい。又、プロセッサ１１１は、ウェアラブルスマート装置１００から特定の距離における画像データを検出するべく、ステレオカメラ１２１及び／又はカメラ１２２の焦点を変更する能力を有してもよい。

【0020】

ＩＭＵ１２３は、加速度計、ジャイロスコープ、磁気計、又はこれらに類似したもののうちの１つ又は複数を更に有しうるＩＭＵであってもよい。ＧＰＳ１２４は、１つ又は複数のＧＰＳ装置であってもよい。センサ１２５は、センサアレイ１２０の残りの部分との関連において環境に関する更なる情報を提供する１つ又は複数のセンサであってもよい。センサ１２５は、カメラ、温度センサ、気圧センサ、水分又は湿度センサ、ガス検出器、又はその他の化学薬品センサ、音響センサ、ｐＨセンサ、煙検出器、金属検出器、光量計、高度計、深さゲージ、コンパス、放射線センサ、モーション検出器、光センサ、又はその他のセンサのうちの１つ又は複数であってもよい。

【0021】

インターフェイスアレイ１３０は、マイクロフォン１３１、スピーカ１３２、振動装置１３３、入力装置１３４、及びディスプレイ１３５を含む。マイクロフォン１３１は、音声起動／コマンド又はその他の音声動作などの音響をユーザーから検出する能力を有するマイクロフォン又はその他の装置であってもよく、且つ、ウェアラブルスマート装置１００と統合されてもよく、或いは、その外部にあってもよい。いくつかの実施形態においては、マイクロフォン１３１は、ウェアラブルスマート装置１００の環境のオーディオデータを検出する能力を有する、複数のマイクロフォンを含んでもよい。更には、マイクロフォン１３１は、特定の音響の音量を検出する能力を有してもよい。マイクロフォン１３１は、マイクロフォン１３１によって検出されたデータを使用して音響の発生源までの距離及び音響の発生源の方向を決定しうるように、所定の距離だけ、分離されていてもよい。

【0022】

スピーカ１３２は、音響及び／又は振動を生成する能力を有する１つ又は複数のスピーカ又はその他の装置であってもよい。振動装置１３３は、触覚及び接触出力を提供する能力を有する振動モーター又はアクチュエータであってもよい。又、特定の実装形態においては、振動装置１３３は、スピーカ１３２と振動装置１３３が同一のものとなりうるように又は統合されうるように、音響を生成する能力を有してもよい。

【0023】

振動装置１３３は、ステレオ触覚フィードバックをユーザーに対して提供するべく、ウェアラブルスマート装置１００の左側部分内において左側振動モーターを含んでもよく、且つ、ウェアラブルスマート装置１００の右側部分内において右側振動モーターを含んでもよい。左側部分上の振動パターンは、右側部分上の振動パターンと異なっていてもよい。この結果、左側／右側振動パターンの異なる組合せにより、（左側及び右側振動の両方において同一パターンを出力するのとは対照的に）更に多くの種類の有用な情報をユーザーに対して伝達することができる。例えば、右側には存在しない左側における特定の振動パターンを使用することにより、ユーザーが左に向く必要があることをユーザーに対して通知してもよい。この結果、有利には、右側振動とは異なりうる左側振動を使用することにより、触覚フィードバックの様々な組合せが可能となる。

【0024】

入力装置１３４は、タッチセンサ及び／又は１つ又は複数のボタンなどの入力装置であってもよい。例えば、入力装置１３４は、それぞれのボタンがウェアラブルスマート装置１００の異なる活動に対応するように、複数のボタンであってもよい。様々な実施形態においては、「入力装置」という用語が、マイクロフォン、１つ又は複数のボタン、タッチパッド、タッチスクリーン、又はこれらに類似したものを意味しうるように、マイクロフォン１３１は、入力装置と見なされてもよい。

【0025】

ディスプレイ１３５は、ウェアラブルスマート装置１００に統合された又はウェアラブルスマート装置１００に対して無線で接続されたディスプレイであってもよい。ディスプレイ１３５は、ステレオカメラ１２１及び／又はカメラ１２２からの視覚データを表示する能力を有してもよい。その他の実装形態においては、ディスプレイ１３５は、１つ又は複数のＬＥＤ又は類似の光源などの別の視覚警報装置であってもよい。様々な実施形態においては、入力装置１３４及びディスプレイ１３５は、タッチスクリーンなどのように、同一であってもよく、或いは、統合されてもよい。

【0026】

コンポーネントアレイ１４０は、電池１４１と、アンテナ１４２と、入出力ポート（Ｉ／Ｏポート）１４３と、を含む。電池１４１は、ウェアラブルスマート装置１００に電力供給する能力を有する電池又はその他の電源であってもよい。電池１４１は、充電用の接続ポートを有してもよく、或いは、誘導充電を通じたものなどのように、無線充電されてもよい。アンテナ１４２は、無線通信を送受信する能力を有する１つ又は複数のアンテナであってもよい。例えば、アンテナ１４２は、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷｉＦｉアンテアであってもよく、高周波識別（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ：ＲＦＩＤ）アンテナ又は読取器であってもよく、且つ／又は、近距離通信（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃｔｉｏｎ：ＮＦＣ）ユニットであってもよい。Ｉ／Ｏポート１４３は、更なる周辺装置を接続するための１つ又は複数のポートであってもよい。例えば、Ｉ／Ｏポート１４３は、ヘッドフォンジャック、データポート、又はこれらに類似したものであってもよい。

【0027】

アンテナ１４２及び／又はＩ／Ｏポート１４３により、ウェアラブルスマート装置１００は、スマートネックレスに対する更新、マップ情報、又は特定の用途用のその他の関連する情報などのデータダウンロードと、状態更新及び更新済みのマップ情報などのデータアップロートと、のために、別の装置又はネットワークに接続することができる。更には、アンテナ１４２及び／又はＩ／Ｏポート１４３により、ウェアラブルスマート装置１００は、演算の分散又はリソースの共有のために、その他のウェアラブルスマート装置と通信することもできる。

【0028】

本明細書において記述されているウェアラブルスマート装置１００は、一般に、スタンドアロン装置である。但し、その他の実装形態においては、ウェアラブルスマート装置１００は、その他の装置との関連において動作するように構成又は最適化されてもよい。例えば、スマートフォン、タブレット、又はその他のモバイル装置は、リソース及び処理の共有のために、ウェアラブルスマート装置１００に対して無線接続されてもよい。モバイル装置は、ウェアラブルスマート装置１００用のディスプレイユニットとして機能してもよい。ウェアラブルスマート装置１００は、モバイル装置又はその他のスマートネックレスとやり取りするための特定のプロトコルを更に有してもよい。更には、ウェアラブルスマート装置１００は、インターネット上において、クラウドなどのリモート処理及び／又はリモートストレージに接続してもよい。

【0029】

ウェアラブルスマート装置１００は、ユーザーによるウェアラブルスマート装置１００の装用を許容する１つ又は複数の特徴を含む。いくつかの実施形態においては、ウェアラブルスマート装置１００は、ネックレス、イヤフォン、眼鏡、スマートウォッチ、スマートクリップ、又はこれらに類似したものとして実装されてもよい。例えば、ネックレスは、ユーザーの首又は肩上において垂らして掛けるようにしてもよく、眼鏡は、ユーザーの鼻及び／又は耳上に置かれてもよく、スマートウォッチは、ユーザーの首又は手首の周りに装用されてもよく、スマートクリップは、ユーザー上に又はユーザーの衣類上にクリップ留めされてもよい。ウェアラブルスマート装置１００は、ユーザーに警告するべく、ユーザーの周りの物体を認識する能力を有する。例えば、ウェアラブルスマート装置１００は、環境の認識及び危険な状況の警告を支援するべく、盲目の人物によって使用されてもよい。ウェアラブルスマート装置１００は、ステレオカメラ１２１からの画像データ、カメラ１２２からの画像データ、及び／又はマイクロフォン１３１からのオーディオデータを含む入力に基づいて、ユーザーオーディオ及び／又は触覚フィードバックをスピーカ１３２及び／又は振動装置１３３を通じて提供してもよい。

【0030】

メモリ１１２は、危険の検出を支援すると共に危険警報をユーザーに対して提供するためのマップ情報又はデータを記憶してもよい。マップデータは、アンテナ１４２を通じて無線で予め読み込まれてもよく、ダウンロードされてもよく、或いは、建物の入口の近傍に掲示された又は以前の遭遇及び記録から構築された建物マップをキャプチャするなどにより、視覚的に決定されてもよい。マップデータは、エッジを有するネットワークダイアグラムなどのように、抽象的なものであってもよく、或いは、特徴を有する一連の座標であってもよい。マップデータは、ユーザーにとって関心のある地点を含んでもよく、且つ、ユーザーが場所を変更するのに伴って、ステレオカメラ１２１及び／又はカメラ１２２は、更なる関心の地点を受動的に認識すると共にマップデータを更新してもよい。いくつかの実施形態においては、マップデータは、オーディオ情報によって更新されてもよい。例えば、工場は、常に同一の雑音を同一の周波数及び音量において出力しうる。ウェアラブルスマート装置１００は、場所と関連し且つ雑音の周波数及び音量を含むオーディオデータにより、マップを更新してもよい。

【0031】

屋内場所などの特定の場所においては、スタンドアロンのＧＰＳユニットが、ユーザーの非常に正確な場所を決定するための十分な情報を提供しない場合がある。ウェアラブルスマート装置１００は、ウェアラブルスマート装置１００の正確な場所を決定するべく、ステレオカメラ１２１、カメラ１２２、ＩＭＵ１２３、ＧＰＳ１２４、センサ１２５、マイクロフォン１３１、及び／又はアンテナ１４２から検出されたデータを使用してもよい。ウェアラブルスマート装置１００は、例えば、階段、出口、及び洗面所を認識してもよく、且つ、これらの場所をメモリ１１２内において適切に記憶してもよい。その他の記憶されている場所データ又はその他のデータは、潜在的な危険、周辺構造物の説明、代替ルート、及びその他の場所を含んでもよい。更なるデータ及び関心地点は、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はその他の無線ネットワークを通じて、モバイル装置及びその他の装置、ソーシャルネットワーク、或いは、クラウドに、ダウンロード及び／又はアップロードすることができる。

【0032】

図２は、正面から（即ち、Ｚ軸に沿って）観察されたスマートネックレス２００（又は、盲人支援ネックレス）の一実施形態を示している。スマートネックレス２００内のコンポーネントの形状及び相対位置を示すべく、ＸＹＺ軸が示されている。図２に示されているウェアラブルスマート装置は、ウェアラブルスマート装置の一実施形態である。当業者は、ウェアラブルスマート装置がその他の形状及び構成を有しうることを理解するであろう。

【0033】

スマートネックレス２００は、上部部分２０１と、右側部分２０８と、左側部分２０９と、を含む。スマートネックレス２００は、ユーザーの首の周りにおいて装用されることを要する。装用された際に、上部部分２０１は、人物の首の背後に置かれてもよい。右側部分２０８は、スマートネックレス２００の右側端部２１５Ａがユーザーの右側胸部上又はその上方において位置決めされるように、ユーザーの右側肩部上において延在してもよい。同様に、左側部分２０９は、スマートネックレス２００の左側端部２１５Ｂがユーザーの胸部の左側上において又はその上方において位置決めされるように、ユーザーの左側肩部上において延在してもよい。

【0034】

右側部分２０８は、右側中間部分２０２Ａと、下部右側部分２０４Ａと、ボタン部分２０６と、を含んでもよい。いくつかの実施形態においては、右側部分２０８は、右側中間部分２０２Ａ、下部右側部分２０４Ａ、及び／又はボタン部分２０６に分離されていなくてもよい。

【0035】

上部部分は、中間部２７０と、左側端部２７２Ｂと、右側端部２７２Ａと、を有してもよい。上部部分２０１は、中間及び下部部分がユーザーの肩上において延在しうるように、中間部２７０において実質的にまっすぐであってもよく、且つ、中間部２７０と端部２７２の間において湾曲していてもよい。左側端部２７２Ｂ及び右側端部２７２Ａに向かう曲線は、ユーザーの首及び肩に実質的に似たようなものになっていてもよい。この設計により、上部部分２０１は、ユーザーの首上に快適に置かれる。上部部分２０１は、剛性を有してもよく、これは、上部部分２０１が通常の圧力下において屈曲したり又は曲がったりしないことを意味している。この結果、損傷の懸念を伴うことなしに、電池、プロセッサ、メモリ、又はこれらに類似したものなどの影響を受けやすいコンポーネントを上部部分２０１内に収容することができる。上部部分２０１は、コンポーネントが上部部分２０１内において収容されうるように、少なくとも部分的に中空であってもよい。

【0036】

ここで、コンポーネントがスマートネックレスの一部分上において位置決めされる場合には、コンポーネントは、その部分を基準として内部に位置してもよく、コンポーネントは、その部分を基準として部分的に内部に位置すると共に部分的に外部に位置してもよく、或いは、コンポーネントは、その部分の外部に位置すると共にその部分に対して結合されてもよい。

【0037】

右側中間部分２０２Ａは、上部部分２０１の右側端部２７２Ａに結合された上部端部２０３Ａと、下部端部２０５Ａと、を含む。左側中間部分２０２Ｂは、上部部分２０１の側左端部２７２Ｂに結合された上部端部２０３Ｂと、下部端部２０５Ｂと、を含む。中間部分２０２は、上部部分２０１に対して永久的に結合されてもよく、或いは、上部部分２０１に対して着脱自在に結合されてもよい。スマートネックレス２００の各部分が着脱自在に１つに結合される際には、接続は、各部分が通常の装用条件下において外れないようなものであってもよい。

【0038】

中間部分２０２は、湾曲していてもよい。この結果、中間部分２０２は、ユーザーの首及び／又は肩に圧接状態に置かれる。いくつかの実施形態においては、中間部分２０２は、ゴム、シリコーン、又はこれらに類似したものなどの半剛性材料から構築されてもよい。半剛性材料は、特定の力が印加された状態に屈曲するか又は曲がりうるが、力が除去された際には、そのオリジナルの形状に復帰することになる。半剛性材料により、中間部分２０２は、ユーザーの肩の輪郭に準拠することができる。従って、中間部分２０２の半剛性材料により、スマートネックレス２００は、異なるユーザーに対して快適にフィットすることができる。

【0039】

右側中間部分２０２Ａは、スピーカ２３２Ａと、振動装置２３３Ａと、を含んでもよい。左側中間部分２０２Ｂも、同様に、スピーカ２３２Ｂと、振動装置２３３Ｂと、を含んでもよい。スピーカ及び／又は振動装置をユーザーの両側に設けることにより、ステレオ情報をユーザーに対して提供することができる。例えば、振動装置２３３Ａによる振動は、ユーザーが右に曲がることを要することを通知してもよく、且つ、振動装置２３３Ｂによる振動は、ユーザーが左に曲がることを要することを通知してもよい。この代わりに、振動装置２３３Ａ上の振動は、ユーザーがユーザーの右側に過剰に遠くに移動しており、且つ、従って、左に曲がるべきであることを通知してもよく、且つ、振動装置２３３Ｂによる振動は、ユーザーが右に曲がるべきであることを通知してよい。

【0040】

下部右側部分２０４Ａは、右側中間部分２０２Ａの下部端部２０５Ａに結合された上部端部２０７Ａと、下部端部２１０Ａと、を含む。下部右側部分２０４Ａは、右側中間部分２０２Ａに対して永久的に結合されてもよく、或いは、右側中間部分２０２Ａに対して着脱自在に結合されてもよい。

【0041】

下部右側部分２０４Ａは、実質的にまっすぐであってもよい。右側端部２１５Ａに近接した状態において、下部右側部分２０４Ａは、Ｘ方向において、相対的に大きくなっていてもよい。この結果、スマートネックレスの右側端部２１５Ａに向かって位置決めされるべく、ボタンなどのコンポーネント用の更なる表面積が得られる。下部右側部分２０４Ａは、剛性材料から構築されてもよい。剛性材料は、コンポーネントが下部右側部分２０４Ａ内において収容されうるように、少なくとも部分的に中空であってもよく、或いは、空洞を含んでいてもよい。

【0042】

下部右側部分２０４Ａは、カメラ２２２Ａ及びマイクロフォン２３１Ａを含んでもよい。カメラ２２２Ａは、限定を伴うことなしに、可視光スペクトル、赤外スペクトル、近紫外スペクトルなどを含む任意の光スペクトルの画像データを検出する能力を有する単一のカメラであってもよい。マイクロフォン２３１Ａは、オーディオ情報を検出するように適合されてもよい。例えば、マイクロフォン２３１Ａは、ユーザーの発話、別の人物の発話、ユーザーの環境に関係するオーディオデータ、並びに、これらに類似したものを検出してもよい。更には、マイクロフォン２３１Ａは、様々な周波数の音響を検出すると共に／又は音量を検出するように適合されてもよい。

【0043】

下部左側部分２０４Ｂは、左側中間部分２０２Ｂの下部端部２０５Ｂに結合された上部端部２０７Ｂと、スマートネックレス２００の左側端部２１５Ｂと同一である下部端部２１０Ｂと、を含む。下部左側部分２０４Ｂは、左側中間部分２０２Ｂに対して永久的に結合されてもよく、或いは、左側中間部分２０２Ｂに対して着脱自在に結合されてもよい。

【0044】

下部左側部分２０４Ｂは、下部右側部分２０４Ａに類似したものであってもよい。下部左側部分２０４Ｂは、左側端部２１５Ｂに接近するのに伴って、Ｘ方向において、相対的に大きくなっていてもよい。この結果、更なる外部において取り付けられたコンポーネントのための相対的に大きな表面積及び／又は内部コンポーネントを収容するための相対的に大きな容積を得てもよい。下部左側部分２０４Ｂは、剛性材料から構築されてもよく、且つ、コンポーネントが下部左側部分２０４Ｂ内において収容されうるように、少なくとも部分的に中空であってもよい。

【0045】

下部左側部分２０４Ｂは、ステレオカメラのペア２２１を含んでもよい。ステレオカメラ２２１Ａは、左側中間部分２０２Ｂに近接して配置されていてもよく、別のステレオカメラ２２１Ｂは、左側端部２１５Ｂに近接して配置されている。ステレオカメラのペア２２１は、距離２１７だけ、相互に分離されてもよい。距離２１７は、最適な距離に基づいて選択されてもよい。例えば、深さ情報が５〜１０ＦＴ（１．５ｍ〜３ｍ）において最も重要であると決定された場合には、距離２１７は、深さ情報が１０〜１５ＦＴ（３ｍ〜４．５ｍ）において最も重要であると決定された場合よりも、小さくてもよい。

【0046】

ステレオカメラ２２１Ａ及びステレオカメラ２２１Ｂは、約１２０度の範囲において画像データを検出しうるように、広角カメラであってもよい。ステレオカメラ２２１は、限定を伴うことなしに、可視光スペクトル、赤外スペクトル、近紫外スペクトルなどを含む様々な光スペクトルにおいて画像データを検出する能力を有していてもよい。

【0047】

又、下部左側部分２０４Ｂは、光センサ２２５を含んでもよい。様々な実施形態においては、単一の装置は、光センサ２２５と、ステレオカメラ２２１Ｂと、を有してもよい。様々な実施形態においては、下部左側部分２０４Ｂは、光センサ２２５とステレオカメラ２２１Ｂの両方が同一の空洞内に配置されるような空洞を含む。様々な実施形態においては、光センサ２２５及びステレオカメラ２２１Ｂは、スマートネックレス２００上の別個の場所に配置されてもよい。様々な実施形態においては、光センサ２２５は、ウェアラブルスマート装置１００のそれぞれのカメラ及びステレオカメラに対して結合されている。カメラと光センサ２２５の間の結合により、それぞれのカメラは、それぞれのカメラが最適な品質の画像データを検出しうるように、光センサ２２５によって検知される周辺光量に基づいて、その光に対する感度を調節できるようになっていてもよい。様々な実施形態においては、プロセッサは、プロセッサが、検出された周辺光に基づいてカメラから受け取られる画像データを調節しうるように、光センサ２２５に対して結合されてもよい。

【0048】

又、下部左側部分２０４Ｂは、マイクロフォン２３１Ｂを含んでもよい。マイクロフォン２３１Ｂは、オーディオ情報を検出するように適合されてもよい。例えば、マイクロフォン２３１Ｂは、ユーザーの発話、別の人物の発話、ユーザーの環境に関係するオーディオデータ、及び環境からの雑音を検出してもよい。更には、マイクロフォン２３１Ｂは、様々な周波数を検出すると共に／又は音量を検出するように適合されてもよい。マイクロフォン２３１Ａ及びマイクロフォン２３１Ｂは、マイクロフォン２３１Ａ及びマイクロフォン２３１Ｂから受け取ったデータを使用して音響の発生源の方向及び／又はそれまでの距離を決定しうるように、相互に離隔している。マイクロフォンは、２分の１インチ〜１２インチ（１．２７ｃｍ〜３０．４８ｃｍ）の任意の距離だけ、離隔してもよい。この情報を使用することにより、スマートネックレス２００の警告又はその他の機能を支援してもよい。

【0049】

下部右側部分２０４Ａと右側端部２１５Ａの間には、ボタン部分２０６が存在してもよい。ボタン部分２０６は、下部右側部分２０４Ａの下部端部２１０Ａに結合された上部端部２１３と、スマートネックレス２００の右側端部２１５Ａと同一である下部端部２１４と、を有する。

【0050】

下部右側部分２０４Ａは、ボタン部分２０６に対して永久的に結合されてもよく、或いは、ボタン部分２０６に対して着脱自在に結合されてもよい。様々な実施形態においては、下部右側部分２０４Ａ及びボタン部分２０６は、単一の部分であると共に／又は、ボタン部分２０６は、単に、下部右側部分２０４Ａの延長部であってもよい。様々な実施形態においては、ボタン部分２０６は、新しい又は更新されたボタン部分がスマートネックレス２００に装着されうるように、着脱自在である。この結果、新しいボタン部分の包含により、機能をスマートネックレス２００に追加してもよい。ボタン部分２０６は、少なくとも部分的に中空であると共に剛性の材料から構築されてもよく、且つ、ボタン部分は、コンポーネントを収容してもよい。ボタン部分２０６は、少なくとも１つのボタン又はその他の入力装置２５２を含んでもよい。入力装置２５２は、スマートネックレス２００の動作モードを選択するべく、スマートネックレス２００の設定を変更するべく、或いは、これらに類似したことを実行するべく、ユーザーによって使用されてもよい。

【0051】

図３は、背後又は後部からの（即ち、Ｚ軸に沿った）図２のスマートネックレス２００を示している。図３においては、スマートネックレス２００は、図２に示されているものとは反対のＺ軸の側から示されている。

【0052】

スマートネックレスの上部部分２０１は、電池２４１を含んでもよい。様々な実施形態においては、電池２４１は、Ｘ軸上において、上部部分２０１内においてセンタリングされてもよい。電池２４１は、電池が電力をスマートネックレス２００内のすべての電気コンポーネントに対して提供しうるように、スマートネックレス２００内のすべての電子装置に結合されてもよい。

【0053】

又、上部部分２０１は、プロセッサ２１１を含んでもよい。プロセッサ２１１は、スマートネックレス２００のすべての電子コンポーネントに結合されてもよく、且つ、電子コンポーネントとの間において入力を受け取ると共に出力を提供するように、適合されてもよい。プロセッサ２１１は、ステレオカメラ２２１、カメラ２２２、マイクロフォン２３１、ＩＭＵ２２３、ＧＰＳ１２４、及び／又は光センサ２２５から受け取った入力に基づいて危険データを決定するように適合されてもよい。

【0054】

又、上部部分２０１は、メモリ２１２を含んでもよい。メモリ２１２は、プロセッサ２１１がメモリ２１２からのデータを記憶及び取得できるように、プロセッサ２１１に結合されてもよい。メモリ２１２及びプロセッサ２１１は、上部部分２０１の同一の側又は反対の側に配置されてもよい。上部部分２０１の重さの分布が、Ｘ方向に沿って上部部分２０１の中間においてセンタリングされることが好ましい。この結果、上部部分２０１の重みがユーザー上において均一に分散されることにより、スマートネックレス２００の快適性が向上することになる。

【0055】

上部部分２０１は、カメラ２２２Ｂと、マイクロフォン２３１Ｃと、を含んでもよい。カメラ２２２Ｂは、限定を伴うことなしに、可視光スペクトル、赤外スペクトル、近紫外スペクトルなどを含む任意の光スペクトルの画像データを検出する能力を有する単一のカメラであってもよい。カメラ２２２Ｂは、ユーザーの背後の画像データを検出するように適合されてもよい。マイクロフォン２３１Ｃは、オーディオ情報を検出するように適合されてもよい。例えば、マイクロフォン２３１Ｃは、ユーザーの発話、別の人物の発話、ユーザーの環境に関係するオーディオデータ、及び環境からの雑音を検出してもよい。更には、マイクロフォン２３１Ｃは、様々な周波数及び音量を検出するように適合されてもよい。マイクロフォン２３１Ｃから受け取ったデータをマイクロフォン２３１Ａ及びマイクロフォン２３１Ｂから受け取ったデータとの関連において使用することにより、音響の発生源の方向及び／又はそれまでの距離を決定してもよい。マイクロフォン２３１Ｃは、スマートネックレス２００の背後に由来するオーディオデータを相対的に良好に検出するように適合されてもよい。

【0056】

下部左側部分２０４Ｂは、ＩＭＵ１２３に類似したＩＭＵ２２３を含んでもよい。下部右側部分２０４Ａは、ＧＰＳ１２４に類似したＧＰＳ２２４を含んでもよい。

【0057】

下部左側部分２０４Ｂは、凹部２６０と、コネクタ２６１と、充電接点２６２と、を含んでもよい。様々な実施形態においては、充電接点２６２は、凹部２６０内において位置決めされてもよい。充電接点２６２は、充電接点２６２が電力を受け取ると共にその電力を記憶のために電池２４１に転送するように、電池２４１に対して結合されてもよい。充電接点２６２は、磁気充電、誘導充電、直接充電、又はこれらに類似したものを介して電力を受け取るように適合されてもよい。様々な実施形態においては、充電接点２６２は、電力に加えて又はその代わりに、電子データが充電接点２６２を介して転送されうるように、プロセッサ２１１に結合されてもよい。

【0058】

中間部分２０２は、図２に示されているもの以外の更なるコンポーネントを含んでもよく、或いは、そうでなくてもよい。更なるコンポーネントが中間部分２０２内に存在しない場合には、下部部分２０４を上部部分２０１に対して電気的に結合するべく、接続２７０Ａ及び接続２７０Ｂが中間部分２０２内に存在してもよい。接続２７０は、データバス、電源ライン、或いは、任意のその他の電気接続を含んでもよい。いくつかの実施形態においては、接続２７０は、下部部分２０４と上部部分２０１の間の無線接続により、置換されてもよい。

【0059】

スマートネックレス２００は、左側中間部分２０２Ｂ内に延在したアンテナ２４２を有してもよい。アンテナ２４２は、プロセッサ２１１がアンテナ２４２を介して無線信号を送受信しうるように、プロセッサ２１１に対して結合されてもよい。

【0060】

アンテナ２４２は、クラウド２９０、モバイル装置２９２、ラップトップ、タブレット、又はこれらに類似したものなどのスマートネックレス２００からはリモート状態にある１つ又は複数の装置に対して無線結合されてもよい。様々な実施形態においては、クラウド２９０は、スマートネックレス２００が利用しうるストレージ及び／又は処理を含んでもよい。例えば、スマートネックレス２００は、クラウドがデータを記憶するか又はデータを処理するように、特定のデータをクラウド２９０に対して送信してもよい。スマートネックレス２００は、記憶及び／又は処理されたデータを後からクラウド２９０から取得してもよい。様々な実施形態においては、スマートネックレス２００は、プロセッサ２１１などにより、いくつかの機能をローカルに実行するように設計されており、且つ、その他の機能がクラウド２００などによってリモートで実行されるように、設計されている。

【0061】

モバイル装置２９２は、モバイル装置２９２がスマートネックレス２００のためにいくつかの処理及びストレージ機能を実行しうるように、スマートネックレス２００に対して結合されてもよい。又、モバイル装置２９２は、モバイル装置２９２がいくつかのストレージ及び／又は処理機能を実行すると共に更なるストレージ及び／又は処理機能をクラウド２９０に送信しうるように、クラウド２９０に対して接続されてもよい。様々な実施形態においては、処理及び／又はストレージは、スマートネックレス２００、モバイル装置２９２、及びクラウド２９０の任意の組合せにより、実行されてもよい。

【0062】

スマートネックレス２００などのスマートネックレスの使用は、その他のウェアラブルスマート装置よりも有利でありうる。スマートネックレスは、一般に、ユーザーが、通常、オーディオ及び画像データを検出することになるユーザーの頭部近傍において位置決めされる。更には、大部分の人々は、自身の頭部近傍において相対的に良好な検知能力を有する。従って、スマートネックレスによって提供されるオーディオ及び触覚フィードバックは、ユーザーにより、頭部近傍のエリアから相対的に容易に検出されることになる。最後に、スマートネックレスは、ユーザーの首の周りにおいてループすると共にユーザーの肩部上において位置決めされていることから、スマートネックレスが偶発的にその人物から外れる尤度が低減される。

【0063】

図４は、ユーザーを安全監視すると共に危険についてユーザーに警告するべく、ウェアラブルスマート装置１００又はスマートネックレス２００などのウェアラブルスマート装置によって実行されうる、例示用の方法４００を示している。方法４００は、ブロック４０２において始まっており、ここで、ウェアラブルスマート装置１００は、ウェアラブルスマート装置１００の現在の場所の場所データを検出し、且つ、メモリ１１２内において現在の場所と関連付けられた危険データのルックアップを実行している。ウェアラブルスマート装置１００の現在の場所は、センサアレイ１２０及び／又はマイクロフォン１３１によって検出されるデータに基づいて決定されてもよい。いくつかの実施形態においては、プロセッサ１１１は、ＧＰＳ１２４によって検出されたデータを使用してウェアラブルスマート装置１００の概略場所を決定してもよい。ステレオカメラ１２１、カメラ１２２、センサ１２５、及び／又はマイクロフォン１３１によって受け取られたデータを使用することにより、ＧＰＳ１２４によって検出されたデータを補完又は置換してもよい。ウェアラブルスマート装置１００が移動するのに伴って、ＩＭＵ１２３が動きを検出してもよい。次いで、プロセッサ１１１は、この検出された動きを使用してウェアラブルスマート装置１００の現在の場所を更新してもよい。この結果、ウェアラブルスマート装置１００は、１ＦＴ（０．３ｍ）以内、５ＦＴ（１．５ｍ）以内、又は１０ＦＴ（３ｍ）以内などのように、現在の場所を正確に決定することができる。

【0064】

プロセッサ１１１に結合されたデータベースは、場所情報と、複数の場所に関する危険情報と、を含んでもよい。プロセッサ１１１は、ウェアラブルスマート装置１００の検出された現在の場所をデータベースと比較し、潜在的な危険がウェアラブルスマート装置１００の現在の場所において又はその既定の距離内に存在しているかどうかを決定してもよい。データベースは、ローカルデータベースであってもよく、リモートデータベースであってもよく、或いは、これらの組合せであってもよい。いくつかの実施形態においては、ウェアラブルスマート装置１００は、リモートデータベースによって補完されるローカルデータベースを記憶している。例えば、ウェアラブルスマート装置１００がネットワークに接続された際に、ウェアラブルスマート装置１００は、リモート装置から、危険及び場所情報を含むデータベースをダウンロードしてもよく、且つ、データベースをメモリ１１２内において記憶してもよい。ウェアラブルスマート装置１００は、ネットワークに定期的に又はこれに類似した方式によって接続されるたびに、更新済みのデータベース情報を取得してもよい。

【0065】

ブロック４０４において、プロセッサ１１１は、危険情報が、ウェアラブルスマート装置１００の現在の場所と関連付けられているかどうか、或いは、ウェアラブルスマート装置１００から既定の距離内にあるかどうか、を決定してもよい。メモリ１１２がウェアラブルスマート装置１００の既定の距離内において危険情報を含んでいない場合には、方法４００は、ブロック４０６及びブロック４０８に進む。

【0066】

ブロック４０６において、オーディオデータがマイクロフォン１３１によって検出されている。このオーディオデータは、ウェアラブルスマート装置１００の環境内の特定の物体又は物品に関係する発話データ及び雑音データを含んでもよい。マイクロフォン１３１によって検出される任意のオーディオデータは、潜在的に、危険と関連付けられてもよい。従って、オーディオデータをメモリ１１２内のデータと比較することにより、そのデータが危険と関連付けられているかどうかを決定してもよい。例えば、検出されたオーディオデータは、車両の音響、チェーンソーの音響、人々のグループの音響、或いは、これらに類似したものに対応していてもよい。

【0067】

騒々しい工場の環境においては、人間は、周辺雑音下において接近する危険を聴取する能力を有していない場合がある。プロセッサ１１１は、周辺雑音をフィルタリングによって除去して任意の潜在的なオーディオデータを決定する能力を有してもよく、且つ、オーディオデータに基づいてフィードバックをユーザーに提供する能力を有してもよい。いくつかの実施形態においては、プロセッサ１１１は、周辺雑音を検出すると共に以前に検出された周辺雑音に基づいて潜在的な危険オーディオデータをフィルタリングによって取得する能力を有してもよい。いくつかの実施形態においては、プロセッサ１１１は、低域通過、帯域通過、高域通過フィルタ、及び／又はこれらに類似したものを含んでもよく、且つ、検出された周辺雑音に基づいて適用するべき１つ又は複数のフィルタを決定してもよく、且つ／又は、共通的な危険及び周辺雑音の周波数パターンに基づいて、１つ又は複数のフィルタが既定されてもよい。

【0068】

ブロック４０８において、画像データが、ステレオカメラ１２１及び／又はカメラ１２２によって検出されている。いくつかの実施形態においては、画像データは、ウェアラブルスマート装置１００からすべての方向において検出されてもよく、或いは、ウェアラブルスマート装置１００の１つ又は複数の既定のエリア内において検出されてもよい。ブロック４０８において検出された画像データは、ブロック４０６におけるオーディオデータと同一の方法により、潜在的な危険データを含みうる。プロセッサ１１１は、オーディオデータと類似した方式により、画像をフィルタリングする能力を有してもよい。

【0069】

ブロック４１０において、ステレオカメラ１２１、カメラ１２２、及び／又はマイクロフォン１３１が、任意の潜在的な危険データに向かって方向付け及び／又は合焦されてもよい。プロセッサ１１１は、オーディオデータ及び／又は画像データに基づいて潜在的な危険の場所を決定してもよく、且つ、センサをその場所に対して合焦させてもよい。例えば、マイクロフォン１３１は、潜在的な危険に対応したオーディオデータを検出してもよい。マイクロフォン１３１は、複数のマイクロフォンを含んでもよいことから、マイクロフォン１３１によって検出されたデータに基づいて、オーディオデータの発生源の方向を決定してもよい。これに応答して、ステレオカメラ１２１及び／又はカメラ１２２をオーディオデータの方向において合焦させてもよい。又、いくつかの実施形態においては、マイクロフォン１３１が、オーディオデータの発生源の方向において合焦された状態となってもよい。いくつかの実施形態においては、カメラ１２２及び／又はステレオカメラ１２１が、まず、潜在的な危険データを検出してもよく、次いで、マイクロフォン１３１が、画像データに向かって合焦されてもよい。

【0070】

ブロック４１２において、プロセッサ１１１は、マイクロフォン１３１、ステレオカメラ１２１、カメラ１２２、及び／又はセンサ１２５のうちから、最高品質のデータを検出したセンサを決定してもよい。高品質とは、データの障害物（例えば、ステレオカメラ１２１とデータの発生源の間の経路内の障害物）の欠如、最も正確なデータ（即ち、カメラ１２２ではなく、ステレオカメラ１２１を選択可能であり、その理由は、ステレオカメラ１２１によれば、深さ情報を決定可能であるからである）、メモリ１１２内の物体とマッチングした１つのタイプのデータ（即ち、画像データではなく、オーディオデータに対応したマッチングが見出される）、或いは、これらに類似したものに関するものであってもよい。最高品質データは、プロセッサ１１１によって使用される唯一のデータであってもよく、最高品質データには、相対的に低い品質のデータよりも大きな重みが付与されてもよく、或いは、すべてのデータに対して等しい重みが付与されてもよい。

【0071】

ブロック４１４において、潜在的な危険データをメモリ１１２内のデータと比較することにより、潜在的な危険データが危険と関連しているかどうかを決定している。比較は、様々な方式で実行されてもよい。メモリ１１２は、様々な危険に関係する画像及び／又はオーディオデータを記憶してもよい。いくつかの実施形態においては、プロセッサ１１１は、検出された画像及び／又はオーディオデータをメモリ内の危険データと比較してマッチングが発生するかどうかを決定してもよい。いくつかの実施形態においては、プロセッサ１１１は、画像データ及び／又はオーディオデータをメモリ１１２内の場所に関係するデータと比較し、現在検出されているデータと以前に記憶されているデータの間に発散（ｄｉｖｅｒｇｅｎｃｅ）が存在しているかどうかを決定してもよい。この発散方法については、図１１及び図１２を参照し、更に詳しく後述することとする。

【0072】

ブロック４１６において、プロセッサ１１１は、マイクロフォン１３１、ステレオカメラ１２１、及び／又はカメラ１２２からの検出データがメモリ１１２内の危険データとマッチングしているかどうかを決定している。

【0073】

ブロック４１６においてマッチングが見出された場合には、プロセッサ１１１は、ブロック４２０において、危険の深刻さを決定してもよい。深刻さは、危険によって提示される危険尤度、危険によって提示される危険度、ウェアラブルスマート装置１００までの危険の近さ、又はこれらに類似したものに対応したものであってもよい。それぞれの危険は、深刻さ等級と関連付けられてもよい。例えば、ウェアラブルスマート装置１００に向かって直接的に移動している車両は、ウェアラブルスマート装置１００の移動の方向にはない道路内の窪みよりも大きな深刻さ等級を有してもよい。深刻さ等級については、図５〜図７を参照して後述することとする。

【0074】

ブロック４１６においてマッチングが見出されない場合には、プロセッサ１１１は、ブロック４１８において、危険が存在しているとファクタが通知しているかどうかを決定してもよい。ファクタとは、潜在的な危険が、危険性を有するのか、或いは、そうでないのかに関する任意の通知であってもよい。プロセッサ１１１は、検出されたデータをメモリ内に記憶されているデータと比較することにより、ファクタが危険を通知しているかどうかを決定してもよい。特定の数及びタイプのファクタが充足された場合に、プロセッサ１１１は、潜在的な危険データが危険を通知していると決定してもよい。ファクタは、深刻さレベルに対する調節を含んでもよい。深刻さが既定の深刻さレベルに到達した場合に、プロセッサ１１１は、潜在的危険データが危険を通知していると決定してもよい。ブロック４１８において、危険が存在しているとファクタが通知していない場合には、方法４００は、ブロック４０２に戻り、ここで、場所データが検出されると共にメモリ１１２内のデータベースと比較される。

【0075】

ファクタが危険を通知している場合には、方法４００は、プロセッサ１１１が危険の深刻さレベルを決定するブロック４２０に進んでもよい。いくつかの実施形態においては、深刻さレベルは、検出されたデータをファクタと比較することにより、決定されてもよい。ファクタのうちのいくつかは、危険の欠如を通知しており、且つ、いくつかは、危険の存在を通知してもよい。従って、ブロック４１６において、マッチングが見出されることが可能であり、且つ、危険が存在していないとプロセッサ１１１が決定することができる。

【0076】

ブロック４２２において、危険データがウェアラブルスマート装置１００のユーザーに対してフィードバックとして提供されてもよい。フィードバックは、スピーカ１３２、振動装置１３３、及び／又はディスプレイ１３５を介して提供されてもよい。データは、危険を表現／識別すると共に／又は危険の場所を通知する発話データ、振動データ、又は画像データであってもよい。いくつかの実施形態においては、危険の周りのナビゲーション命令を提供するデータが、スピーカ１３２、振動装置１３３、及び／又はディスプレイ１３５によって提供されてもよい。スピーカ１３２は、ユーザーを危険の周りにおいて導く発話データを提供してもよく、且つ／又は、スピーカ１３２及び／又は振動装置１３３は、ウェアラブルスマート装置１００のいずれかの側において、ユーザーが危険の周りにおいてナビゲートするための命令を通知する特定のトーン及び／又は振動を提供してもよい。例えば、左側振動装置は、振動することにより、危険を回避するべく、ユーザーが左に移動するべきであると通知してもよい。いくつかの実施形態においては、右側振動装置は、振動することにより、危険を回避するべく、ユーザーが右への移動を回避するべきであると共に左に移動するべきであると通知してもよい。

【0077】

更には、振動を使用することにより、危険の存在をユーザーに対して通知することもできる。これは、ユーザーが弱化した聴力を有するか又は危険且つ騒々しい環境内において働いている際に、特に有用である。これらのタイプのユーザーは、可聴フィードバックを聴取しない場合があり、従って、触覚フィードバックが、彼らが受け取ることができる唯一のフィードバックである場合がある。更には、これらのユーザーの場合には、危険決定における検出オーディオデータの包含が、場合によっては、その他のユーザーの場合よりも更に重要である。聴力が弱化した人物及び騒々しい環境にある人物は、接近する危険を聴取しない場合がある。従って、ウェアラブルスマート装置１００は、オーディオデータを検出すると共にオーディオデータを触覚フィードバックに変換することにより、彼らの耳として機能してもよい。

【0078】

いくつかの実施形態においては、ウェアラブルスマート装置１００は、オーディオ及び／又は触覚フィードバックを提供するべきかどうかを決定するように適合されてもよい。プロセッサ１１１は、マイクロフォン１３１によって検出されたオーディオデータに基づいて、周囲の環境の音量を決定してもよい。検出された音量が特定のレベルを上回っている場合には、ユーザーがオーディオフィードバックを聴取する尤度が低い場合があることから、プロセッサ１１１は、振動フィードバックが好ましいと決定してもよい。これは、工場内の労働者などの特定のユーザーの場合に、極めて有用であり、その理由は、彼らが、相対的に静かな環境においては、オーディオフィードバックを選好する場合があり、且つ、相対的に騒々しい環境においては、触覚フィードバックを選好する場合があるからである。

【0079】

いくつかの実施形態においては、ウェアラブルスマート装置１００は、危険の深刻さが特定のレベルを上回っているとプロセッサ１１１が決定した場合にのみ、出力データを提供してもよい。この深刻さのレベルは、ウェアラブルスマート装置１００内にプログラミングされてもよく、且つ／又は、ウェアラブルスマート装置１００のユーザーによって選択されてもよい。いくつかの実施形態においては、ウェアラブルスマート装置１００は、深刻さレベルに基づいて異なるデータを出力している。例えば、相対的に低い深刻さレベルを提示する危険よりも、相対的に高い深刻さレベルを提示する危険の場合に、相対的に強力な振動及び／又は音量の出力が提供されてもよい。いくつかの実施形態においては、ウェアラブルスマート装置１００は、相対的に高い深刻さレベルの危険の周りにおけるナビゲーション命令を出力してもよく、且つ、相対的に低い深刻さレベルの危険については、警告するのみであってもよい。

【0080】

ブロック４２４において、プロセッサ１１１は、危険データにより、メモリ１１２を更新してもよい。メモリ１１２内の更新は、危険のタイプ、危険の深刻さ、及び／又は危険の場所を含んでもよい。いくつかの実施形態においては、危険に関係するオーディオ及び／又は画像データがメモリ１１２内において記憶されてもよい。この結果、ウェアラブルスマート装置１００及び／又は別のウェアラブルスマート装置は、後から、記憶されている危険データにアクセスしてもよく、且つ、その存在について認知してもよい。

【0081】

いくつかの実施形態においては、ウェアラブルスマート装置１００は、危険データにより、リモートデータベースを更新してもよい。この結果、その他のウェアラブルスマート装置がデータを受け取ることが可能であり、これにより、複数のウェアラブルスマート装置による危険情報の共有リソースの開発及びアクセスが可能となる。

【0082】

図５は、メモリ１１２内に記憶されうる例示用のデータベース５００を示している。本明細書において記述されている任意のデータベースは、ウェアラブルスマート装置１００のローカルメモリ上において記憶されてもよく、且つ／又は、ウェアラブルスマート装置１００からはリモート状態において記憶されてもよく、且つ、アンテナ１４２及び／又はＩ／Ｏポート１４３を介してアクセスされてもよい。任意のデータベースが、ウェアラブルスマート装置１００のみにより、或いは、ウェアラブルスマート装置１００とその他のウェアラブルスマート装置の組合せにより、アクセス可能であってもよい。

【0083】

データベース５００は、場所情報、危険タイプ、危険が依然として存在していることに関するコンフィデンス、及び危険に関係する深刻さレベルを記憶している。第１列５０１は、場所情報を含む。第２列５０２は、それぞれの場所に関係する危険タイプを列挙している。第３列５０４は、危険がその場所において依然として存在していることに関する推定されたコンフィデンスを含む。第４列５０６は、それぞれの危険に関係する深刻さレベルを表している。データベース５００は、図５に示されているものよりも多くの又は少ない情報を含んでもよい。いくつかの実施形態においては、データベース５００は、コンフィデンス値及び／又は深刻さレベルを含んでいなくてもよい。いくつかの実施形態においては、データベース５００は、危険が特定の場所において存在していることを通知するのみであってもよく、且つ、危険に関するなんらの詳細をも含んでいない。

【0084】

危険タイプは、危険が特定の場所に存在しているという通知などの抽象的な危険情報から、危険の形状、危険の説明、危険のサイズ情報、又はこれらに類似したものなどの非常に詳細な情報まで、様々であってもよい。

【0085】

コンフィデンス情報は、特定のエントリの更新以降の時間の長さ、危険のタイプ、データがデータベース５００内に記憶された際のデータの精度、危険が依然として存在しているのか又は修復済みであるのかのいずれを報告が示しているのかどうか、危険が依然として存在しているのか又は除去済みであるのかを別のウェアラブルスマート装置が検出したのかどうか、或いは、これらに類似したものに基づいて決定されてもよい。

【0086】

深刻さレベルは、危険によって提示される潜在的な危険量（負傷が危険によって引き起こされる尤度、危険が発生した場合の負傷の深刻さ、又はこれらに類似したもの）に関係するものであってもよい。ウェアラブルスマート装置１００は、任意の数の深刻さレベルを含んでもよい。図５に示されている実施形態においては、ウェアラブルスマート装置１００は、５つの深刻さレベルを含み、この場合に、１が最小深刻レベルであり、且つ、５が最大深刻レベルである。深刻さレベルは、危険のタイプ、危険によって課される危険、コンフィデンス値、及び／又は様々なファクタに基づいて決定されてもよい。ファクタについては、図７を参照して後述することとする。

【0087】

いくつかの実施形態においては、データベース５００は、修復作業者によるアクセスが可能であってもよい。修復作業者は、データベース５００内に含まれている危険を修復してもよく、且つ、相応してエントリを編集してもよい。

【0088】

第１エントリ５０８は、データベース５００内の例示用のエントリを示している。第１列５０１において、データベース５００は、危険の場所が場所１であることを通知している。場所１は、座標値、基準点からの相対位置、特定の画像データ及び／又はオーディオデータに関係するアドレス、又はこれらに類似したものとして記憶されてもよい。

【0089】

第２列５０２において示されているように、危険タイプは、歩道上の低い枝などの危険の詳細を表している。いくつかの実施形態においては、データベース５００は、低い枝の高さ又はその他の情報を通知してもよい。プロセッサ１１１は、地面との関係におけるウェアラブルスマート装置１００の高さと地面との関係におけるブランチの高さの比較に基づいて、危険データを出力するかどうかを決定してもよい。いくつかの実施形態においては、データベース５００は、低い枝に関係するサイズ情報を含んでもよい。

【0090】

第３列５０４において示されているように、第１エントリ５０８は、５０％という記憶されたコンフィデンス値を有する。コンフィデンス値は、ユーザーに対する危険の尤度（即ち、危険によってユーザーが負傷する５０％の可能性が存在していること）、危険が存在する尤度（即ち、危険が存在する５０％の可能性が存在していること）、又はこれらに類似したものを通知してもよい。コンフィデンス値は、低い枝が除去済みであることを通知する修復情報を記憶されているデータが含んでいるかどうか、チェーンソーが低い枝の近傍において検出済みであると以前に記憶されているデータが通知しているかどうか、その他のウェアラブルスマート装置が同一の危険情報をデータベース５００にアップロードしたかどうか、枝が依然として存在しているか又は除去済みであることをその他のウェアラブルスマート装置が通知しているかどうか、或いは、これらに類似したものなどのような様々なファクタに基づいて決定されてもよい。

【0091】

第４列５０６において示されているように、第１エントリ５０８は、４という深刻さレベルと関連付けられている。４の深刻さレベルは、ユーザーが危険に気が付いていない場合には、低い枝が負傷の大きな可能性を提示することを通知しうる。深刻さレベルに関する更なる詳細について、図６及び図７を参照して説明することとする。

【0092】

第２エントリ５１０、第３エントリ５１２、及び第４エントリ５１４は、データベース５００内に記憶されているその他の例示用のエントリを示している。

【0093】

図６は、画像データ、オーディオデータ、及びベース深刻さレベルを様々なタイプの危険と関連付ける別の例示用のデータベース６００を示している。データベース６００は、危険のタイプを通知する第１列６０２と、危険に関係する画像データを含む第２列６０４と、危険に関係するオーディオデータを含む第３列６０６と、危険のベース深刻さレベルを通知する第４列６０８と、を含む。

【0094】

第１列６０２は、様々なタイプの危険を含んでもよい。プロセッサ１１１は、検出されたデータ及び／又はウェアラブルスマート装置１００に対する更新に基づいて、更なるタイプの危険を含むことにより、データベース６００を更新してもよい。危険情報は、危険のタイプのラベルを含んでもよい。いくつかの実施形態においては、危険情報は、図５の列５０２と同様の危険の説明を含む。

【0095】

第２列６０４は、危険のそれぞれのタイプに関係する画像データを含んでもよい。このデータは、ステレオカメラ１２１及び／又はカメラ１２２により、予め検出されてもよい。いくつかの実施形態においては、第２列６０４は、データベース６００内にプログラミングされた物体形状データを含んでもよい。例えば、危険がオートバイである場合には、画像データは、ステレオカメラ１２１及び／又はカメラ１２２が２つの車輪と１つのエンジンを含む画像データを検出した際に、この画像データがオートバイに対応しているとプロセッサ１１１が決定しうるように、１つのエンジンと共に結合された２つの車輪を含んでもよい。いくつかの実施形態においては、特定のタイプの危険に関係する画像データは、マッチングを目的として複数の画像を含んでもよい。例えば、自動車用のエントリは、クーペに対応した１つ又は複数の形状、ＳＵＶに対応した１つ又は複数の形状、スポーツカーに対応した１つ又は複数の形状、又はこれらに類似したものを含んでもよい。

【0096】

第３列６０６は、危険のタイプに対応したオーディオデータを含む。例えば、オーディオデータは、オートバイに関係する周波数パターン及び／又は特定の音響を含んでもよい。プロセッサ１１１は、検出されたオーディオデータを第３列６０６内の記憶されているオーディオデータと比較することにより、検出されたオーディオデータが特定のタイプの危険を通知しているかどうかを決定してもよい。

【0097】

第４列６０８は、危険のベース深刻さレベルを通知している。ベース深刻さレベルは、危険の深刻さレベルのオリジナルの推定値を表してもよい。図７を参照して後述するように、ベース深刻さレベルは、様々なファクタに基づいて調節されてもよい。

【0098】

第１エントリ６１０は、オートバイの危険に対応している。第２列６０４において、オートバイに対応した画像データが記憶されてもよい。第３列６０６において、データベース６００は、オートバイに関係する周波数パターンを含んでもよい。周波数パターン情報は、オートバイエンジンの基本及び／又は調和周波数を含んでもよい。又、第３列６０６は、オートバイエンジンの音響を通知するオーディオデータを含んでもよい。オーディオデータは、オートバイエンジンの予め録音されたオーディオクリップであってもよく、或いは、オートバイエンジンの音響の表現であってもよい。第４列６０８において、データベース６００は、オートバイの危険が、３というベース深刻さレベルと関連していることを通知している。

【0099】

第２エントリ６１２、第３エントリ６１４、第４エントリ６１６、及び第５エントリ６１８は、データベース６００内のその他の例示用のエントリを示している。

【0100】

いくつかの実施形態においては、データベース６００は、未知の危険エントリ６２０を含んでもよい。画像データ又はオーディオデータが検出されたが、データベース６００内の危険とマッチングしていない場合に、画像又はオーディオデータは、未知の危険エントリ６２０と関連付けられてもよい。第４列において、未知の物体のベース深刻さレベルは、０という深刻さレベルと関連付けられてもよい。

【0101】

図７は、様々なファクタを深刻さレベルに対する対応した調節と関連付ける例示用のデータベース７００を示している。ファクタのいくつかは、既知であるのか又は未知であるのかを問わず、すべての危険のために決定される必要がある。いくつかのファクタは、識別されていない危険とのみ関連付けられてもよい。例えば、識別されている危険の場合には、サイズ情報は、ベース深刻さレベルの決定に内蔵されていてもよく、従って、深刻さレベルは、検出されたサイズに基づいて調節されなくてもよい。但し、当業者は、図７に示されている任意のファクタ又は深刻さレベルの調節は、例示を目的としたものに過ぎないことを理解するであろう。

【0102】

第１列７０２は、ファクタが、すべての危険に対して適用されるべきであるのか、又は識別されていない危険に対してのみ適用されるべきであるのかに対応している。又、いくつかの実施形態においては、データベース７００は、識別されている危険に対してのみ適用されるべきファクタを含んでもよい。いくつかの実施形態においては、データベース７００は、識別されていない危険、識別されている危険、又はこれらの両方に対してのみ適用されるべきファクタを含んでもよい。

【0103】

第２列７０４は、様々な深刻さレベルファクタを示している。深刻さレベルファクタが特定の危険に対して適用されるかどうかは、メモリ内において記憶されると共に第２列７０４内において列挙されているデータに対するステレオカメラ１２１、カメラ１２２、及び／又はマイクロフォン１３１から検出されたデータの比較に基づいて決定されてもよい。例えば、プロセッサ１１１は、ステレオカメラ１２１、カメラ１２２、及び／又はマイクロフォン１３１によって検出されたデータに基づいて危険までの距離を決定してもよく、且つ、距離情報をファクタと比較することにより、検出された距離が第２列７０４内のエントリとマッチングしているかどうかを決定してもよい。

【0104】

第３列７０６は、ファクタに基づいた深刻さレベルの調節に対応している。それぞれの危険の深刻さレベルは、深刻さレベルファクタとのマッチングに基づいて調節されてもよい。

【0105】

第１列７０２は、すべての物体に対応する第１グループ７０８と、識別されていない物体に対してのみ対応する第２グループ７１０と、を含む。第１グループ７０８は、検出された物体がウェアラブルスマート装置１００の５ＦＴ（１．５ｍ）以内に存在しているという決定に対応したファクタ７１２を含む。このファクタ７１２が充足された場合に、危険の深刻さレベルは、深刻さレベルの半分だけ、増大されてもよい。又、第１グループ７０８は、物体が、ウェアラブルスマート装置１００の１０ＦＴ（３ｍ）以内に存在しているという決定に対応したファクタ７１４を含み、これは、深刻さレベルの調節と関連付けられてはいない。データベース７００は、すべての危険に関係する更なる例示用のファクタを含んでいる。

【0106】

第２グループ７１０は、検出された物体のサイズが１立方ＦＴ（０．０２８立方メートル）を上回っていることを通知するファクタ７２６を含む。このファクタが充足されている場合には、セキュリティレベルは、１つのレベルの半分だけ、調節されてもよい。又、第２グループ７１０は、物体が、サイズにおいて５立方ＦＴ（０．１４立方メートル）を上回っているという決定に対応したファクタ７２８をも含み、これは、１という深刻さレベルの調節と関連付けられている。データベース７００は、識別されていない危険に関係する更なる例示用のファクタを含んでいる。

【0107】

図８は、検出された危険の音量に基づいて危険までの推定距離を決定するべく、プロセッサ１１１によって利用されうる例示用のデータベース８００を示している。データベース８００は、特定の危険に対応した第１列８０２、危険の様々な音量に対応した第２列８０４、及び検出音量に基づいた危険までの推定距離に対応した第３列８０６を含んでもよい。第１危険であるオートバイグループ８０８は、３０デシベル未満の音量に対応した第１エントリ８１０と関連付けられている。第３列８０６は、音量が３０デシベル未満である場合には、オートバイまでの推定距離が５０ＦＴ（１５ｍ）超であることを示している。又、オートバイグループ８０８は、３０〜４０デシベルの範囲に対応すると共に推定距離が３５（１０．５ｍ）ＦＴ〜５０ＦＴ（１５ｍ）であることを示すオートバイグループエントリ８１２をも含む。データベース８００は、オートバイグループ８０８及びチェーンソー８２４に関係するその他の例示用のエントリを示している。

【0108】

データベース８００を使用するべく、プロセッサ１１１は、マイクロフォン１３１からオーディオデータを受け取ってもよい。データベース６００を使用することにより、プロセッサ１１１は、オーディオデータに基づいて危険のタイプを決定してもよい。危険のタイプがプロセッサ１１１によって決定された際に、プロセッサ１１１は、マイクロフォン１３１によって検出された危険の音量をデータベース８００と比較して危険までの推定距離を決定してもよい。

【0109】

図９は、方法４００に類似した方法を利用するウェアラブルスマート装置１００に類似した例示用のウェアラブルスマート装置９００を示している。図９に示されている例においては、ウェアラブルスマート装置９００のユーザー（そして、ウェアラブルスマート装置９００）は、通り９０２に隣接した歩道９０４を移動している。歩道９０４に隣接した樹木９０６は、場所９１２において歩道９０４の上方において空中に位置した低い垂れ下がった枝９０７を含む。

【0110】

ウェアラブルスマート装置９００が歩道９０４を移動すると共に場所９１０に到達するのに伴って、ウェアラブルスマート装置９００のマイクロフォンは、サラサラと音を立てる樹木９０６の葉っぱを検出しうる。次いで、ウェアラブルスマート装置９００のカメラ及び／又はステレオカメラをサラサラと音を立てる葉っぱの音響に向かって方向付けしてもよい。カメラは、低い垂れ下がった枝９０７に向かって合焦されるのに伴って、低い垂れ下がった枝に対応した画像データを検出する。低く垂れ下がった枝９０７は、大きな音響を生成しないことから、プロセッサ１１１は、マイクロフォンよりも高品質のデータをカメラが検出するものと決定してもよい。

【0111】

画像データ及びオーディオデータをデータベース６００などのデータベースと比較することにより、検出されたデータがメモリ１１２内の記憶されている危険データとマッチングしているかどうかを決定してもよい。データベース６００が、樹木の枝に対応した第３エントリ６１４を含んでいることから、プロセッサ１１１は、マッチングを見出し、且つ、検出されたデータが樹木の枝に対応していると通知する。データベース６００を使用することにより、プロセッサ１１１は、低い垂れ下がった枝９０７が、１というベース深刻さレベルに対応していると決定してもよい。

【0112】

次いで、画像データ及びオーディオデータをデータベース７００などのデータベースと比較することにより、いずれのファクタが充足されているのかを、もしあれば、決定してもよい。場所９１０において、ウェアラブルスマート装置９００は、低い垂れ下がった枝９０７の１０ＦＴ（３ｍ）以内に位置している。この結果、１というベース深刻さレベルは、調節されない。但し、ウェアラブルスマート装置９００は、低い垂れ下がった枝９０７に接近しつつあり、これにより、低い垂れ下がった枝９０７とウェアラブルスマート装置９００の間の相対的な距離が減少することになる。この結果、１つのレベルの半分だけ、深刻さレベルが増大する。低い垂れ下がった枝９０７が歩道９０４の直接上方において位置決めされていることから、ウェアラブルスマート装置９００は、低い垂れ下がった枝９０７がウェアラブルスマート装置１００に対して直接的に接近しつつあるものと決定してもよく、これにより、深刻さレベルが１だけ増大する。この時点において、ウェアラブルスマート装置９００は、低い垂れ下がった枝９０７の危険を通知するデータをスピーカ及び／又は振動装置を介してユーザーに出力してもよい。又、いくつかの実施形態においては、ウェアラブルスマート装置９００は、低い垂れ下がった枝９０７の周りにおいてユーザーを導くためのナビゲーション命令を提供してもよい。

【0113】

次いで、ウェアラブルスマート装置９００は、場所９１２における低い垂れ下がった枝９０７の危険を含むように、データベース５００などのデータベースを更新してもよい。深刻さレベルが２．５であることから、ウェアラブルスマート装置９００が２．５以上の深刻さレベルを有する危険についてユーザーに警告するように設計されている場合には、ウェアラブルスマート装置９００は、危険についてユーザーに警告してもよい。

【0114】

ウェアラブルスマート装置９００が場所９１４に到達するのに伴って、ウェアラブルスマート装置９００のプロセッサ１１１は、検出された場所データをデータベース５００などのデータベースと比較することにより、なんらかの危険が場所９１４において又はその近傍において存在しているかどうかを決定してもよい。この結果、プロセッサ１１１は、場所９１４の近傍の場所９１５が、カバーされていない窪み９０８に対応していると決定してもよい。次いで、プロセッサ１１１は、データベース５００内のエントリ及びファクタに基づいてカバーされていない窪み９０８の深刻さレベルを決定してもよく、且つ、危険のタイプ及び危険の深刻さレベルに基づいて危険データを出力してもよい。又、ウェアラブルスマート装置９００は、更なる画像及びオーディオデータを検出してもよく、且つ、データをデータベース６００などのデータベースと比較することにより、危険を検証すると共に／又は更なる危険を検出してもよい。

【0115】

図１０は、方法４００に類似した方法を利用したウェアラブルスマート装置９００の別の例を示している。図１０において、ウェアラブルスマート装置９００は、歩道９０４上の場所９１０において留まっている。オートバイ９０５が場所９１２に接近しつつあってもよい。ウェアラブルスマート装置９００の１つ又は複数のマイクロフォンは、オートバイ９０５に対応したオーディオデータを検出しうる。又、ウェアラブルスマート装置９００のマイクロフォンは、プロセッサ１１１が検出音量に基づいてオートバイ９０５までの距離を決定しうるように、オートバイ９０５の音量を検出してもよい。

【0116】

オートバイ９０５が場所９１１に接近するのに伴って、ウェアラブルスマート装置９００によって検出される画像データは、低品質しか有していない場合があり、その理由は、ウェアラブルスマート装置９００が、後方に対向したカメラを含んでいない場合があるからである。従って、マイクロフォンが、カメラよりも高品質のデータを提供しうる。オーディオデータ及び画像データをデータベース６００などのデータベースと比較することにより、場所９１１における物体がオートバイ９０５であると決定してもよい。次いで、ウェアラブルスマート装置９００のプロセッサ１１１は、検出されたデータをデータベース７００内において列挙されている深刻さレベルファクタと比較し、深刻さレベルを決定してもよい。この時点において、相対的に大きな重みをマイクロフォンによって検出されたデータに対して付与してもよい。

【0117】

オートバイ９０５が場所９１２に到達するのに伴って、画像データが、オーディオデータよりも高品質を有しうる。この結果、ウェアラブルスマート装置９００は、マイクロフォンからのものよりもカメラから検出されたデータに相対的に大きな力点を置いてもよい。オートバイ９０５がウェアラブルスマート装置９００との関係において場所を変更するのに伴って、オートバイ９０６の深刻さレベルが連続的に更新されてもよい。オートバイが、既定の深刻さレベル、ウェアラブルスマート装置９００からの距離、又はこれらに類似したものに到達した際に、ウェアラブルスマート装置９００は、オートバイ９０５によって提示される危険を通知する警告を出力してもよい。

【0118】

図１１は、ユーザーを安全監視すると共に危険についてユーザーに警告するべくウェアラブルスマート装置１００によって実行されうる別の例示用の方法１１００を示している。プロセスは、ブロック１１０２において始まっており、ここでは、センサアレイ１２０を使用することにより、新しいデータがウェアラブルスマート装置１００によって検出されている。このデータは、視覚データ（通り、歩道、人々）、位置データ（ユーザーの場所、移動の方向）、オーディオデータ（移動する自動車の音響、サイレン、アラームなど）、又は任意のその他のデータなどのセンサアレイ１２０によって検出される任意のデータを含んでもよい。ブロック１１０４において、この新しいデータがメモリ１１２内において記憶されている。

【0119】

ブロック１１０６において、この新しいデータがメモリ１１２内において記録されているデータと比較されている。メモリ１１２内において記録されているデータは、ウェアラブルスマート装置１００及び／又は別のウェアラブルスマート装置によってキャプチャされたデータを含んでもよい。いくつかの実施形態においては、メモリ１１２は、メモリ１１２内において記録されているデータが別のウェアラブルスマート装置によって検出されうるように、複数のウェアラブルスマート装置によるアクセスが可能なデータベースを含む。又、メモリ１１２内において記録されているデータは、現在の時刻以前の数ミリ秒、数秒、又は数分などように、現在の時刻以前の時点において同一の場所又はその近傍においてキャプチャされたデータを含んでもよい。

【0120】

ブロック１１０８において、新しいデータとメモリ１１２内において記録されているデータの間において発散が検出されるかどうかが決定されている。この発散は、以前には検出されなかった新しい物体がウェアラブルスマート装置１００の視野内に存在していることを通知するデータを含んでもよい。又、発散は、以前には存在していた物体が視野内にもはや存在していないことを通知するデータを含んでもよい。又、発散は、警察のサイレン、オートバイ、又はこれらに類似したものなどの新しい音響を含んでもよい。

【0121】

発散が新しいデータ内において検出された場合には、ブロック１１１０において、この発散に基づいて、第２データがインターフェイスアレイ１３０を介してユーザーに対して出力されてもよい。発散が歩道の真ん中の岩を含んでいると仮定しよう。岩を有する画像と岩を有していない画像の間における発散の検出に応答して、ウェアラブルスマート装置１００は、データをユーザーに提供することにより、発散を通知してもよい。例えば、ウェアラブルスマート装置１００は、スピーカ１３２を使用することにより、岩の形状にマッチングした物体が、ユーザーから特定の距離及び／又は方向において存在していることをユーザーに対して通知してもよい。この代わりに、又はこれに加えて、ウェアラブルスマート装置１００は、岩の距離及び／又は方向を示す触覚フィードバックをユーザーに対して提供してもよい。

【0122】

ブロック１１１２において、発散がテキストを含んでいるかどうかが決定されている。例えば、発散は、テキストを含むサイン又は警察のテープであってもよい。プロセッサ１１１は、新しい検出されたデータをテキスト文字の形状を通知するデータと比較することによってこの決定を実施し、なんらかのマッチングが存在しているかどうかを決定してもよい。

【0123】

発散がテキストを含んでいると決定された場合には、ブロック１１１４において、ウェアラブルスマート装置１００は、発散のテキストに基づいてインターフェイスアレイ１３０を介してユーザーにデータを出力してもよい。データは、発散のテキストのコンテンツを通知するオーディオデータを含んでもよい。

【0124】

ブロック１１１６において、発散が危険を提示しているかどうかが決定されている。メモリ１１２は、発散が危険であるかどうかを決定するべく、検出されたデータと比較されうる記憶されているデータを有してもよい、例えば、メモリ１１２は、特定の危険に関係する視覚及び／又はオーディオデータを含んでもよく、且つ、マッチングが生成された場合に、プロセッサは、発散が危険であると決定してもよい。例えば、メモリ１１２は、警告サインの形状及び言葉による警告に関係する視覚データを含んでもよく、且つ、このデータは、危険のインジケータである。

【0125】

別の例として、危険な物体を表すデータを有する代わりに、メモリ１１２は、状況データを記憶してもよい。例えば、ウェアラブルスマート装置１００は、大きな物体が、ユーザーが歩いている歩道の真ん中に存在している場合に、その物体が危険を提示しうることを認識しうる。状況データの別の例は、所定のエリアの視覚データが予め検知及び記憶されており、且つ、そのエリアの視覚データがそのエリアの現在の検知において大きく異なっている場合に、危険が存在しうることをウェアラブルスマート装置１００が認識しうるというものである。

【0126】

発散が危険を提示していると決定された場合に、ブロック１１１８において、ウェアラブルスマート装置１００は、インターフェイスアレイ１３０を介してユーザーに警告してもよい。警告は、危険の存在と危険の場所をユーザーに対して通知するスピーカ１３２を介したオーディオ出力を含んでもよい。又、警告は、危険のタイプ及び／又は危険の深刻さを含んでもよい。ウェアラブルスマート装置１００が、「歩道の窪み」と記された警告サインを検出した際に、ウェアラブルスマート装置１００は、データをユーザーに出力することにより、窪みが歩道に存在していることをユーザーに通知してもよい。又、ウェアラブルスマート装置１００は、危険の場所を検出するのに伴って、それらの危険の場所についてユーザーに通知してもよい。いくつかの実施形態においては、ウェアラブルスマート装置１００は、危険情報を通知する振動データを振動装置１３３を介してユーザーに提供してもよい。

【0127】

ブロック１１２０において、ブロック１１１６内において決定された任意の危険情報がメモリ１１２内に記憶される。この結果、ウェアラブルスマート装置１００は、メモリ１１２内の場所の比較及びルックアップにより、危険の場所及びタイプを容易に決定することができる。いくつかの実施形態においては、危険情報は、クラウド内において記憶されており、且つ、その他のウェアラブルスマート装置によるアクセスが可能である。この結果、危険場所のデータ及び情報のデータベースの生成及び複数のウェアラブルスマート装置によるアクセスが可能となる。

【0128】

図１２は、図１１の方法１１００の例示用の使用法を示している。図１２のフレーム１２５０内において、ウェアラブルスマート装置１００のユーザー１２５６は、歩道に沿って歩いている。メモリ１１２は、歩道に沿った以前の移動の際にセンサアレイ１２０によって検出されたデータを含んでおり、これは、なんらの危険情報をも含んでいない。

【0129】

フレーム１２５２においては、ユーザーの移動の方向における歩道上に危険１２５８が存在している。危険は、警告サイン１２６０のみならず、２つの警告又はオレンジコーン１５６２をも含む。危険がウェアラブルスマート装置１００の視野内に位置している際に、ウェアラブルスマート装置１００は、検出されたデータを記憶されているデータと比較してもよい。プロセッサ１１１は、危険が発散であると決定してもよく、且つ、プロセッサ１１は、発散に基づいてデータをユーザー１２５６に対して提供してもよい。データは、２つのコーン１５６２の説明、警告サイン１２６０が存在しているという事実、並びに、任意のその他の方向転換データを含んでもよい。又、ウェアラブルスマート装置１００は、方向転換がテキストを含んでいると決定してもよい。ウェアラブルスマート装置１００は、ユーザーに対するテキストの読み上げなどのように、テキストに基づいたデータをユーザー１２５６に対して提供してもよい。

【0130】

ウェアラブルスマート装置１００は、警告サイン１５６０及び／又は警告コーン１５６２が危険を提示していると決定してもよい。次いで、ウェアラブルスマート装置１００は、危険１２５８が存在していることを通知するデータをユーザー１２５６に対して提供してもよい。ウェアラブルスマート装置１００は、危険１２５８のタイプ及び／又は場所を通知するオーディオ及び／又は触覚データをユーザー１２５６に対して出力してもよい。

【0131】

フレーム１２５４において、ユーザーは、ウェアラブルスマート装置１００からのオーディオ及び／又は触覚出力を利用することにより、危険１２５８の周りにおいてナビゲートしてもよい。危険は、ユーザー１２５６の右側に位置している。従って、ウェアラブルスマート装置１００は、左側よりも右側において多く振動し、これにより、危険が右側に位置していることを通知してもよく、或いは、右側よりも左側において多く振動し、これにより、ユーザーが左側に移動するべきであることを通知してもよい。

【0132】

以上、方法／システムの例示用の実施形態について、例示を目的としたスタイルで開示した。従って、全体を通じて利用されている用語は、非限定的な方式で理解することを要する。当業者には、本明細書の教示内容に対する小規模な変更が想起されるであろうが、本明細書について付与される特許の範囲に含まれるべく意図されているのは、本明細書が寄与する当技術分野の進歩の範囲に合理的に含まれるそのようなすべての実施形態であり、且つ、この範囲は、添付の請求項及びその均等物に鑑みた場合を除き、制限されるものではないことを理解されたい。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【外国語明細書】

2016186786000001.pdf