特表 2024-525560 着目オブジェクト動画分析検出のための動的シンボルベースのシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-07-12

(54)【発明の名称】着目オブジェクト動画分析検出のための動的シンボルベースのシステム

(51)【国際特許分類】

   G06F 16/74 20190101AFI20240705BHJP

   G06T 7/00 20170101ALI20240705BHJP

   G06F 16/28 20190101ALI20240705BHJP

【ＦＩ】

G06F16/74

G06T7/00 300F

G06F16/28

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2024500228

(86)(22)【出願日】2022-07-07

(85)【翻訳文提出日】2024-03-01

(86)【国際出願番号】 US2022036400

(87)【国際公開番号】W WO2023283367

(87)【国際公開日】2023-01-12

(31)【優先権主張番号】17/372,096

(32)【優先日】2021-07-09

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】521211572

【氏名又は名称】ミューチュアリンク， インコーポレイテッド

(74)【代理人】

【識別番号】100078282

【弁理士】

【氏名又は名称】山本 秀策

(74)【代理人】

【識別番号】100113413

【弁理士】

【氏名又は名称】森下 夏樹

(74)【代理人】

【識別番号】100181674

【弁理士】

【氏名又は名称】飯田 貴敏

(74)【代理人】

【識別番号】100181641

【弁理士】

【氏名又は名称】石川 大輔

(74)【代理人】

【識別番号】230113332

【弁護士】

【氏名又は名称】山本 健策

(72)【発明者】

【氏名】マッツァレラ， ジョゼフ アール．

(72)【発明者】

【氏名】ウェングロヴィッツ， マイケル エス．

【テーマコード（参考）】

5B175

5L096

【Ｆターム（参考）】

5B175DA04

5B175EA04

5B175FB02

5L096AA02

5L096AA06

5L096BA02

5L096BA04

5L096CA02

5L096CA22

5L096DA02

5L096DA03

5L096HA11

5L096JA11

5L096KA04

(57)【要約】

着目オブジェクト（ＯＯＩ）動画分析検出のための動的シンボルベースのシステムのためのシステム、方法、およびコンピュータプログラム製品実施形態が、本明細書に開示される。いくつかの実施形態は、１つ以上の実世界規則に関連付けられた１つ以上のシンボルオブジェクトをインスタンス化することと、着目エリアを画定することと、１つ以上のＣＶ関数を１つ以上のシンボルオブジェクトに関連付けることと、１つ以上のＣＶ関数を適用する１つ以上の動画ソースを識別することとを含む。いくつかの実施形態は、１つ以上のシンボルオブジェクトに関連付けられた１つ以上のＣＶ関数を実行し、１つ以上の動画ソースを処理することをさらに含む。

【特許請求の範囲】

【請求項1】

コンピュータ実装方法であって、前記コンピュータ実装方法は、
１つ以上の実世界規則に関連付けられた１つ以上のシンボルオブジェクトをインスタンス化する第１の信号を受信することと、
着目エリアを画定する第２の信号を受信することと、
１つ以上のコンピュータビジョン（ＣＶ）関数を前記１つ以上のシンボルオブジェクトに関連付けることと、
前記１つ以上のＣＶ関数を展開すべき１つ以上の動画ソースを識別することと、
前記１つ以上の動画ソースから前記１つ以上のシンボルオブジェクトに関連付けられた前記１つ以上のＣＶ関数を実行することと
を含む、コンピュータ実装方法。

【請求項2】

１つ以上の構成パラメータを用いて前記１つ以上のＣＶ関数をインスタンス化することをさらに含む、請求項１に記載の方法。

【請求項3】

前記１つ以上のシンボルオブジェクトに関連付けられた前記１つ以上のＣＶ関数を伝送することをさらに含む、請求項１に記載の方法。

【請求項4】

クライアント制御モジュール上で前記１つ以上のシンボルオブジェクトをインスタンス化することをさらに含み、前記クライアント制御モジュールは、物理空間の表現を表示するユーザインターフェースである、請求項１に記載の方法。

【請求項5】

前記クライアント制御モジュールにおいて着目エリアをインスタンス化することであって、前記着目エリアは、前記物理空間の表現の座標と互いに関係がある形状によって画定され得ることをさらに含む、請求項４に記載の方法。

【請求項6】

テキストを認識することまたはオブジェクトを検出することを行うＣＶ関数を実行することと、
１つ以上のカメラの視野内で１つ以上の標示を検出することと、
前記１つ以上のカメラの前記視野内で検出された前記１つ以上の標示の動画分析データを受信することと、
前記１つ以上の標示の前記動画分析データを前記１つ以上のシンボルオブジェクトに関連付けることと
をさらに含む、請求項１に記載の方法。

【請求項7】

前記１つ以上のカメラの視野内で１つ以上の参照オブジェクトを検出することと、
前記１つ以上のカメラの前記視野内の前記１つ以上の参照オブジェクトに関連する動画分析データを受信することであって、前記動画分析データは、前記１つ以上の参照オブジェクトの少なくとも座標を含む、ことと、
前記１つ以上の参照オブジェクトの前記座標に基づいて前記着目エリアをインスタンス化することと
をさらに含む、請求項６に記載の方法。

【請求項8】

前記１つ以上のシンボルオブジェクトのステータスの変化を示す第３の信号を受信することと、
前記１つ以上のシンボルオブジェクトの前記ステータスの前記変化に基づく前記１つ以上のＣＶ関数に関する命令を受信することと
をさらに含む、請求項１に記載の方法。

【請求項9】

前記１つ以上のシンボルオブジェクトをインスタンス化する前記第１の信号に関連する情報を含む通知を伝送することをさらに含む、請求項１に記載の方法。

【請求項10】

システムであって、前記システムは、
送受信機と、
前記送受信機に結合されたプロセッサと
を備え、
前記プロセッサは、
前記送受信機を介して、１つ以上の実世界規則に関連付けられた１つ以上のシンボルオブジェクトをインスタンス化する第１の信号を受信することと、
前記送受信機を介して、着目エリアを画定する第２の信号を受信することと、
前記送受信機を介して、１つ以上のコンピュータビジョン（ＣＶ）関数を前記１つ以上のシンボルオブジェクトに関連付けることと、
前記送受信機を介して、前記１つ以上のＣＶ関数を展開すべき１つ以上の動画ソースを識別することと、
前記送受信機を介して、前記１つ以上の動画ソースから、前記１つ以上のシンボルオブジェクトに関連付けられた前記１つ以上のＣＶ関数を実行することと
を行うように構成されている、システム。

【請求項11】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、１つ以上の構成パラメータを用いて前記１つ以上のＣＶ関数をインスタンス化するように構成されている、請求項１０に記載のシステム。

【請求項12】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、前記１つ以上のシンボルオブジェクトに関連付けられた前記１つ以上のＣＶ関数を伝送するように構成されている、請求項１０に記載のシステム。

【請求項13】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、クライアント制御モジュール上で前記１つ以上のシンボルオブジェクトをインスタンス化するように構成され、前記クライアント制御モジュールは、物理空間の表現を表示するユーザインターフェースである、請求項１０に記載のシステム。

【請求項14】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、前記クライアント制御モジュールにおいて着目エリアをインスタンス化するように構成され、前記着目エリアは、前記物理空間の表現の座標と互いに関係がある形状によって画定可能である、請求項１３に記載のシステム。

【請求項15】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、テキストを認識することまたはオブジェクトを検出することを行うように構成されたＣＶ関数を実行することと、
前記送受信機を介して、１つ以上のカメラの視野内で１つ以上の標示を検出することと、
前記送受信機を介して、前記１つ以上のカメラの前記視野内で検出された前記１つ以上の標示の動画分析データを受信することと、
前記送受信機を介して、前記１つ以上の標示の前記動画分析データを前記１つ以上のシンボルオブジェクトに関連付けることと
を行うように構成されている、請求項１０に記載のシステム。

【請求項16】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、前記１つ以上のカメラの視野内で１つ以上の参照オブジェクトを検出することと、
前記送受信機を介して、前記１つ以上のカメラの前記視野内の前記１つ以上の参照オブジェクトに関連する動画分析データを受信することであって、前記動画分析データは、前記１つ以上の参照オブジェクトの少なくとも座標を含む、ことと、
前記送受信機を介して、前記１つ以上の参照オブジェクトの前記座標に基づいて前記着目エリアをインスタンス化することと
を行うように構成されている、請求項１５に記載のシステム。

【請求項17】

前記少なくとも１つのプロセッサは、
送受信機を介して、前記１つ以上のシンボルオブジェクトのステータスの変化を示す第３の信号を受信することと、
前記送受信機を介して、前記１つ以上のシンボルオブジェクトの前記ステータスの前記変化に基づく前記１つ以上のＣＶ関数に関する命令を受信することと
を行うように構成されている、請求項１０に記載のシステム。

【請求項18】

前記少なくとも１つのプロセッサは、
前記送受信機を介して、前記１つ以上のシンボルオブジェクトをインスタンス化する前記第１の信号に関連する情報を含む通知を伝送するように構成されている、請求項１０に記載のシステム。

【請求項19】

命令を記憶している非一過性コンピュータ読み取り可能な媒体であって、前記命令は、少なくとも１つのコンピューティングデバイスによって実行されると、
１つ以上の実世界規則に関連付けられた１つ以上のシンボルオブジェクトをインスタンス化する第１の信号を受信することと、
着目エリアを画定する第２の信号を受信することと、
１つ以上のコンピュータビジョン（ＣＶ）関数を前記１つ以上のシンボルオブジェクトに関連付けることと、
前記１つ以上のＣＶ関数を展開すべき１つ以上の動画ソースを識別することと、
前記１つ以上の動画ソースから前記１つ以上のシンボルオブジェクトに関連付けられた前記１つ以上のＣＶ関数を実行することと
を含む動作を前記少なくとも１つのコンピューティングデバイスに実施させる、非一過性コンピュータ読み取り可能な媒体。

【請求項20】

前記動作は、
テキストを認識することまたはオブジェクトを検出することを行うように構成されたＣＶ関数を実行することと、
１つ以上のカメラの視野内で１つ以上の標示を検出することと、
前記１つ以上のカメラの前記視野内で検出された前記１つ以上の標示の動画分析データを受信することと、
前記１つ以上の標示の前記動画分析データを前記１つ以上のシンボルオブジェクトに関連付けることと
をさらに含む、実施形態１９に記載の非一過性コンピュータ読み取り可能な媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本実施形態は、概して、動画分析に関し、特に、シンボルベースの着目オブジェクト（ＯＯＩ）動画分析検出に関する。

【背景技術】

【0002】

視覚分析システムは、動画および画像内に表されるデータに論理および計算関数を適用することによって、動画および画像を分析し得る。動画分析システムは、限定ではないが、顔、車両、ナンバープレート、パッケージ、群衆、群衆の移動、動物、火炎、煙、ジェスチャ、および他の着目オブジェクト（ＯＯＩ）を含む動画ソースからＯＯＩを識別するために様々な方法を使用する。これらのシステムは、意図される目的または意図される使用コンテキストに基づいてＯＯＩを検出するために、関連のあるコンピュータビジョン（ＣＶ）関数を展開し得る。

【発明の概要】

【課題を解決するための手段】

【0003】

いくつかの実施形態は、着目オブジェクト（ＯＯＩ）を検出するための動的シンボルベースのシステムのためのシステム、装置、デバイス、方法、および／またはコンピュータプログラム製品実施形態、および／またはそれらの組み合わせおよび部分的組み合わせを含む。いくつかの実施形態は、実世界規則に関連付けられたシンボルをインスタンス化することと、着目エリアをインスタンス化することと、コンピュータビジョン（ＣＶ）関数をインスタンス化されたシンボルに関連付けることと、着目エリアに基づいて選択されたＣＶ関数を処理するための動画ソースを識別することと、ＣＶ関数とＣＶ関数が処理され得る動画ソースとを含む命令を伝送することと、動画ソースからＣＶ関数を処理することとを含む。

【図面の簡単な説明】

【0004】

付随の図面が、本明細書に組み込まれ、本明細書の一部を形成する。図面は、提示される開示を図示し、説明とともに、さらに、本開示の原理を解説し、当業者が本開示を作製および使用することを可能にする役割を果たす。

【0005】

【図1】図１は、いくつかの実施形態による着目オブジェクト（ＯＯＩ）動画分析検出のための動的シンボルベースのシステムを図示する。

【0006】

【図2】図２は、いくつかの実施形態による実世界規則に関連付けられた意図される目的を表すシンボルをインスタンス化することのある例を図示する。

【0007】

【図3】図３は、いくつかの実施形態によるＯＯＩ動画分析検出のための動的シンボルベースのシステムの動画分析システムのある例を図示する。

【0008】

【図4】図４は、いくつかの実施形態によるＯＯＩ動画分析検出のための動的シンボルベースのシステムのための方法のある例を図示する。

【0009】

【図5】図５は、いくつかの実施形態による動画分析システムを使用するＯＯＩ動画分析検出のための動的シンボルベースのシステムのための方法のある例を図示する。

【0010】

【図6】図６は、いくつかの実施形態によるクライアント制御モジュールを使用するＯＯＩ動画分析検出のための動的シンボルベースのシステムのための方法のある例を図示する。

【0011】

【図7】図７は、種々の実施形態またはそれらの一部を実装するために有用である例示的コンピュータシステムを図示する。

【発明を実施するための形態】

【0012】

提示される開示は、付随の図面を参照して説明される。図面では、同様の参照番号は、概して、同じまたは類似する要素を示す。加えて、概して、参照番号の最左桁が、参照番号が最初に出現する図面を識別する。

【0013】

動画分析システムは、着目オブジェクト（ＯＯＩ）を検出するために様々な方法を使用する。実世界の使用事例では、動画分析システムは、意図される目的または意図される使用コンテキストに基づいてＯＯＩを検出するために、コンピュータビジョン（ＣＶ）関数に対応する先験的参照組で構成され得る。しかしながら、ＯＯＩモデルの意図される使用コンテキストは、急速に変化し得、現在の意図される使用コンテキストを反映するために、ＣＶ関数の動的実装を要求する。動画分析システムは、ＯＯＩを検出するためにＣＶ関数を使用しているが、従来型動画分析システムは、特に緊急事態コンテキストにおいて、変化する意図される使用コンテキストを反映するようにＣＶ関数を動的に実装することにおいて困難に直面する。いくつかの実施形態は、シンボルの使用を通して動画分析システムの有用性を改良するためのシステム、方法、およびコンピュータプログラム製品を含み、シンボルは、物理空間を表すグラフィカルユーザインターフェースに適用され得るか、または、標示が関連のあるＯＯＩモデルを呼び出す規則または命令の組に関連付けられた物理的標識から推論され得る。

【0014】

例えば、動画分析システムは、ナンバープレート分析モデルを使用することによって、ナンバープレートの番号を読み取り、データベースルックアップを実施することによって、特定の車両登録を決定し得る。この場合、ＯＯＩモデルの意図される目的は、ナンバープレート上に表示される英数字情報を解釈し、導出された英数字文字列を利用し、ナンバープレートの番号のデータベースにクエリし、既知の関連付けられた登録識別情報への部分的または完全な合致を決定することである。

【0015】

他方では、セキュリティステーションが、顔認識ベースの動画分析システムを使用し、訪問者の身元を決定し、訪問者のリストに対してデータベースルックアップを実施し得る。ナンバープレート情報を検出するために顔認識ＯＯＩを検出するためのＣＶ関数は、ＣＶ関数から導出される情報がこの特定のＯＯＩモデルの意図される使用コンテキストに無関係であろうから、有用ではないであろう。この場合、このＯＯＩモデルの意図される使用コンテキストは、概して、アクセスが禁止されたエリア内の人物または複数の人物の存在を監視および検出することである。ＣＶ関数は、次いで、画定された物理的エリア内の人間の存在を検出するように設計される必要があろう。故に、動画分析システムは、動画フレーム内で捕捉される種々の特徴に基づいて訪問者の顔のデータ表現を確立し、訪問者に関連付けられたセキュリティステーション内の他の既知の表現に対してそのデータ表現を解釈し得る。

【0016】

これらの場合、動画分析システムは、検出されるＯＯＩが、関連のあるＯＯＩクラスのメンバーとして識別されるべき特定のＯＯＩクラスモデルの必要な数の特徴または特質を共有するかどうかを決定するために、先験的参照組またはモデルを使用している。故に、動画分析システムは、検出されるべきＯＯＩのクラスに基づいて、特定のＯＯＩモデルをインテリジェントに採用することができる。従来型動画分析システムは、特に、意図される使用コンテキストにおいてＣＶ関数を使用し得るが、これらの従来型システムは、変化する意図される使用コンテキストに基づいて、迅速にＣＶ関数を動的に展開することにおける課題に直面する。

【0017】

多くの場合、動的環境においてＯＯＩを検出する動画分析システムは、異なるＯＯＩモデルが迅速に実装されることを要求し得る。これは、特に、緊急事態応答状況に当てはまり、緊急事態のリスクまたは脅威条件、基礎条件、または既知の情報の本質は、急速に変化し得る。緊急事態コンテキストでは、動画分析システムは、変化する意図される使用コンテキストに基づくＯＯＩ検出のための特定のＣＶ関数を展開することから恩恵を得られ得る。しかしながら、従来型動画分析システムは、動的環境において所望のＣＶ関数を急速に実装することを容易に可能にするわけではない。

【0018】

いくつかの実施形態は、標識または実世界規則を表すシンボルを動的に推論し、変化する環境内での特定の事例のための意図される使用コンテキストを表すＯＯＩ検出のためのＣＶ関数を動的に決定することによって、動画分析システムを改良する。シンボルおよび標識は、概して、環境における暗示的または明示的な規則の組を示す。これらのシンボルまたは標識は、動的環境における種々のＯＯＩモデルの意図される目的を表すために使用され得る。標識および実世界規則を表す意図される目的を決定することによって、関連のあるＣＶ関数が、リアルタイムに展開され、標識および／または実世界規則のステータスが急速に変化し得る緊急事態状況において動的に調節され得る。

【0019】

図１は、いくつかの実施形態によるＯＯＩ動画分析検出のための動的シンボルベースのシステム１００を図示する。システム１００は、ＣＶ関数ライブラリ１１０を含み得る。ＣＶ関数ライブラリ１１０は、１つ以上のＣＶ関数１１２を含むデータ記憶部であり得る。ＣＶ関数１１２は、ＯＯＩを検出および処理するための１つ以上の関数を含み得る。ＣＶ関数１１２は、代表的なクラスデータを伴う種々の動画分析モデルを使用して、ＯＯＩの特定のクラスを識別するように動的にパラメータ化され得る。例えば、図１に示されるように、ＣＶ関数１１２は、限定ではないが、以下を含むＯＯＩの代表的なクラスデータを検出するための１つ以上の関数を含むことができる：移動車両を検出すること１１４、人々を検出すること１１６、および／またはイベントを検出すること１１８を行うための関数。

【0020】

ＣＶ関数１１２は、決定木、サポートベクタ、およびアンサンブル等の機械学習方法を含み得る。ＣＶ関数１１２は、畳み込みニューラルネットワーク、フィードフォワードおよびフィードッバックニューラルネットワーク、および再帰深層学習ネットワーク等のニューラルネットワークを含み得る。ＣＶ関数１１２は、統計的に導出される許容誤差または確実性レベル内でＯＯＩの存在または不在を決定するために使用され得る。ＣＶ関数１１２は、同時関数を実施し得る。

【0021】

ＣＶ関数ライブラリ１１０は、標示検出ＣＶ関数１１３を含み得る。標示検出ＣＶ関数１１３は、動画ソースの視野内で物理世界における標識に関して監視するように構成され得る。標示検出ＣＶ関数１１３は、物理世界における標識に含まれるテキスト、シンボル、形状、または色を描く物理標示および／または電子標示に関して監視するように構成され得る。標示検出ＣＶ関数１１３は、テキスト認識およびオブジェクト検出技法を使用して標識を検出するように構成され得る。テキスト認識およびオブジェクト検出技法は、限定ではないが、動画ソースの視野内で観察可能な標示またはメッセージを解釈することを含む。

【0022】

システム１００は、１つ以上の動画分析システム１３２（例えば、１３２－Ａ、１３２－Ｂ）を含み得る。動画分析システム１３２－Ａは、ＣＶ関数１１２および／または標示検出ＣＶ関数１１３を実行し得る。動画分析システム１３２－Ａは、グラフィカルユーザインターフェース（ＧＵＩ）に結合され得る。動画分析システム１３２－Ａは、物理世界における標識を検出するための標示検出ＣＶ関数１１３、および／またはＯＯＩの代表的なクラスを検出するためのＣＶ関数１１２を実行するセンサシステムであり得る。動画分析システム１３２－Ａは、動画ソース１３０（例えば、１３０－Ａ、・・・、１３０－Ｘ）からＣＶ関数１１２および／または標示検出ＣＶ関数１１３を処理し得る。動画分析システム１３２－Ａは、動画ソース１３０の視野または画定部によって画定される指定される物理または論理ドメイン内で標示検出ＣＶ関数１１３および／またはＣＶ関数１１２を処理し得る。動画分析システム１３２－Ａは、動画分析データを動画管理システム１３４に伝送し得る。動画管理システム１３４は、動画分析システム１３２－Ａから受信された動画分析データを記憶するためのデータ記憶部であり得る。動画管理システム１３４は、動画分析システム１３２－Ａから受信された動画分析データを処理、管理、および／または分析し得る。

【0023】

システム１００は、コントローラモジュール１２０を含み得る。コントローラモジュール１２０は、分析エージェント１２２および／または調整モジュール１２４を含み得る。分析エージェント１２２は、ＯＯＩを検出するために使用されるＣＶ関数１１２、および／またはＣＶ関数ライブラリ１１０から標識を検出するための標示検出ＣＶ関数１１３をインスタンス化し得る。調整モジュール１２４は、標示検出ＣＶ関数１１３および／またはＣＶ関数１１２を処理するために使用される動画ソース１３０を決定し得る。

【0024】

分析エージェント１２２および／または調整モジュール１２４は、コントローラモジュール１２０の関数（例えば、人工知能構築物または機械エージェント）であり得る。例えば、分析エージェント１２２は、ＣＶ関数１１２をインスタンス化するための入力または通知を受信し得る。通知は、（例えば、１つ以上のＧＵＩからのアイテムの選択を介して）動画分析システム１３２－Ａ、動画管理システム１３４、クライアント制御モジュール１６０、および／またはコントローラモジュール１２０から受信され得る。例えば、動画ソース１３０は、１つ以上の標示（例えば、最近追加された電子道路標示）を検出し、通知を動画分析システム１３２－Ａを介してコントローラモジュール１２０に送信するように構成された動画カメラを含み得る。

【0025】

コントローラモジュール１２０は、実世界規則１４２のインスタンス化についてのメッセージまたは命令をアラートまたは通知システム等の別のシステムから受信し得る（例えば、動画分析システム１３２（例えば、１３２－Ａ）、動画管理システム１３４、クライアント制御モジュール１６０、および／またはコントローラモジュール１２０に結合されるＧＵＩから）。いくつかの実施形態において、メッセージは、１つ以上のネットワーク（図示せず）を介して受信されることができる。システム１００は、実世界規則ライブラリ１４０を含み得る。実世界規則ライブラリ１４０は、ＯＯＩの特定のクラスに関する実世界規則１４２を表すオブジェクトを含むデータ記憶部であり得る。

【0026】

システム１００は、シンボルライブラリ１５０を含み得る。シンボルライブラリ１５０は、１つ以上のシンボル１５２を含むデータ記憶部であり得る。シンボルライブラリ１５０は、シンボル１５２に対応するシンボルＩＤを記憶し得る。いくつかの実施形態において、シンボルライブラリ１５０は、クライアント制御モジュール１６０に結合されたクライアントＧＵＩ上にシンボル１５２を表示するライブラリであり得る。シンボル１５２は、限定ではないが、アイコン、絵文字、テキスト、画像、色、形状、音、または信号を含み得る。シンボル１５２は、実世界規則ライブラリ１４０における実世界規則１４２に関連付けられ得る。シンボルＩＤは、意図される目的に基づいて、実世界規則ライブラリ１４０における実世界規則１４２のオブジェクトに対応し得る。

【0027】

分析エージェント１２２は、コントローラモジュール１２０が動画分析システム１３２－Ａに伝送し得るＣＶ関数１１２を決定し得る。いくつかの実施形態において、分析エージェント１２２は、動画分析システム１３２－Ａが動画ソース１３０の視野内でＯＯＩを動的に検出することを可能にするために、インスタンス化されたＣＶ関数１１２を実装するための命令を動画分析システム１３２－Ａに伝送する。分析エージェント１２２は、意図される目的を表す実世界規則１４２に関連付けられたシンボル１５２に基づいて、ＣＶ関数１１２を動的に選択し得る。

【0028】

受信された入力および／または通知に基づいて、分析エージェント１２２は、シンボル１５２のインスタンス化に基づいて、動画分析システム１３２－Ａが処理し得るＣＶ関数１１２を決定し得る。分析エージェント１２２は、シンボル１５２の実世界解釈に基づいて、インスタンス化されたシンボル１５２をＯＯＩモデルの意図される目的を表す実世界規則１４２に関連付け得る。実世界規則１４２は、限定ではないが、禁止、命令、指示、要求、助言、アラート、警告、または告知を含み得、それらは、物理世界における機械エージェントまたは人間によって検出、観察、推論、または解釈され得る。実世界規則１４２は、限定ではないが、交通アラート、標識の意図される目的（例えば、幹線道路標識の意図される目的、モバイル電子標識の意図される目的）、封鎖通知、および化学的、生物学的、または他の危険性警告を含み得る。

【0029】

例えば、図１に示されるように、実世界規則ライブラリ１４０は、実世界規則「車両進入禁止１４４」を含む。この規則は、道路または幹線道路の閉鎖が生じており、車両がそのエリアに進入できない実世界の規則を反映し得る。実世界規則ライブラリ１４０は、権限付与されていない人物があるエリアに進入できないことを反映する規則であり得る実世界規則「人々のアクセス禁止１４６」も含む。別の例では、実世界規則ライブラリ１４０は、あるイベント（例えば、不法行為またはリスクがある条件）が生じることを禁止されていることを示す規則であり得る実世界規則「イベント禁止１４８」を含む。

【0030】

システム１００は、クライアント制御モジュール１６０を含み得る。いくつかの実施形態において、クライアント制御モジュール１６０は、シンボル１５２のインスタンス化を引き起こし得る。クライアント制御モジュール１６０は、クライアント制御エージェント１６２および／または制御関数１６４を含み得る。クライアント制御エージェント１６２および／または制御関数１６４は、クライアント制御モジュール１６０の関数であり得る。クライアント制御モジュール１６０は、クライアントＧＵＩに結合され得る。クライアント制御エージェント１６２は、シンボル１５２をインスタンス化し得る。クライアント制御エージェント１６２は、限定ではないが、ＧＵＩソフトウェア選択制御、音声コマンド、ジェスチャ、または当業者に公知であるコンピュータインターフェースとの相互作用の任意の変形例を含む制御の任意の手段を通して、シンボル１５２をインスタンス化し得る。

【0031】

クライアント制御エージェント１６２は、意図される目的を表す対応する実世界規則１４２に基づいて、選択すべきシンボル１５２を決定し得る。制御関数１６４は、クライアント制御エージェント１６２が、グラフィカルユーザインターフェース上で、またはそれからアクセス可能にシンボル１５２を選択することを可能にし得る。制御関数１６４は、シンボル１５２をインスタンス化するための関数を含み得、シンボル１５２をインスタンス化することは、限定ではないが、シンボル１５２をドラッグおよびドロップすること、地図上にシンボル１５２を置き、表示すること、または場所基準系に基づいて場所の座標またはアドレスパラメータをシンボル１５２に関連付けることを含む。クライアント制御モジュール１６０は、物理空間の表現を表示するインターフェースを含み得、物理空間の表現は、限定ではないが、物理空間を表す地図、見取図、または他の略図を含む。シンボル１５２は、クライアント制御エージェント１６２がクライアント制御モジュール１６０における制御関数１６４を実施するとき、インスタンス化され得る。

【0032】

いくつかの実施形態において、クライアント制御エージェント１６２は、着目エリアをインスタンス化し得、動画分析システム１３２－Ａは、着目エリアからＣＶ関数１１２を処理し得る。着目エリアは、動画ソースがＯＯＩを検出し得るエリアを表し得る。着目エリアは、閉鎖された境界内に線または形状を形成する座標であり得る。形状の線またはエリアを形成する座標は、線上または形状のエリア内の全ての点の組を含み得る。着目エリアは、クライアント制御モジュール１６０のクライアントＧＵＩ内の物理空間の表現上に表示され得る。

【0033】

いくつかの実施形態において、コントローラモジュール１２０は、動画分析システム１３２－Ａから受信される動画分析データを使用し、シンボル１５２をインスタンス化し得る。例えば、動画ソース１３０は、新しい標識（例えば、ポータブル電子標識）を含む動画分析データを動画分析システム１３２－Ａに伝送し得る。いくつかの実施形態において、コントローラモジュール１２０は、ＣＶ関数ライブラリ１１０に記憶される標示検出ＣＶ関数１１３を動画分析システム１３２－Ａに伝送し得る。動画ソース１３０および／または動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を実施し得る。標示検出ＣＶ関数１１３は、動画ソース１３０の視野内で観察可能な標示および／またはメッセージを解釈することによって、物理世界における標識に含まれるテキスト、単語、またはシンボルを検出するように構成され得る。

【0034】

物理世界における標識の検出時、動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を処理することから取得された動画分析データを動画分析データ記憶部１７２に記憶し得る。実世界における標識に関連する動画分析データは、限定ではないが、標識の意図される目的を決定することに関連する標識のおおよその座標、実世界内に表示されている標識のタイプの本質および目的、標示内のテキスト、標示の形状、標示の色、および他の情報を含み得る。

【0035】

動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を処理することから取得された動画分析データをコントローラモジュール１２０に伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａから動画分析データを受信し得る。分析エージェント１２２は、動画分析システム１３２－Ａから受信される動画分析データを使用し、シンボル１５２をインスタンス化し得る。分析エージェント１２２が、動画分析データ内に表される標識の特性がシンボルライブラリ１５０における特定のシンボル１５２の特性にほぼ合致することを決定する場合、分析エージェント１２２は、標識の特性に合致するシンボル１５２をインスタンス化し得る。いくつかの実施形態において、シンボル１５２は、シンボルＩＤを指定され得る。コントローラモジュール１２０は、指定されたシンボルＩＤを実世界規則１４２に関連付け得、実世界規則１４２は、標識の意図される目的または物理世界における受信された通知に対応する。

【0036】

いくつかの実施形態において、コントローラモジュール１２０は、検出された標識の座標を包囲する参照オブジェクトに関連する動画分析システム１３２－Ａから受信される動画分析データに基づいて、着目エリアをインスタンス化し得る。標示検出ＣＶ関数１１３は、着目エリアを画定する１つ以上の座標を動画ソース１３０の視野内の１つ以上の観察可能に異なる基準点、特徴、またはオブジェクト（「参照オブジェクト」）と互いに関係付けるように構成され得る。動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を実行し、参照オブジェクトを検出し得る。標示検出ＣＶ関数１１３は、限定ではないが、着目エリアを確立するための空間内の物理的場所、入射角、および／または物理的方向を含む異なる基準点等の参照オブジェクトを決定するように構成され得る。動画分析システム１３２－Ａは、動画分析データ記憶部１７２に参照オブジェクトの座標等の動画分析データを記憶することができる。動画分析システム１３２－Ａは、着目エリアを確立するために、参照オブジェクトを含む動画分析データをコントローラモジュール１２０に伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａから受信される動画分析データに基づいてＣＶ関数１１２を処理するために、着目エリアをインスタンス化し得る。

【0037】

シンボル１５２および着目エリアをインスタンス化すると、分析エージェント１２２は、シンボル１５２に基づいて、ＯＯＩを検出するために使用されるＣＶ関数１１２を決定し得、シンボル１５２は、ＯＯＩモデルの意図される使用コンテキスト、および物理世界における標識の意図される目的を表す実世界規則１４２に関連付けられている。

【0038】

調整モジュール１２４は、インスタンス化された着目エリアに近接する動画ソース１３０の場所に基づいて、ＣＶ関数１１２によって処理されるべき動画データを提供する動画ソース１３０を決定し得る。例えば、シンボル１５２および着目エリアの場所は、カメラのリストおよびカメラ場所記憶部１７０内の関連付けられた場所情報のクエリを実施することによって、動画ソース１３０の場所と比較され得る。いくつかの実施形態において、インスタンス化されたシンボル１５２の座標が、動画分析データ記憶部１７２に記憶され得る。調整モジュール１２４は、カメラ場所記憶部１７０に記憶された関連付けられたカメラ場所情報を動画分析データ記憶部１７２に記憶されたインスタンス化されたシンボル１５２の場所および着目エリア含む動画分析システム１３２－Ａから受信された動画分析データと比較し得る。

【0039】

分析エージェント１２２は、関連のあるＯＯＩモデルを検出するためにＣＶ関数１１２を選択することができ、調整モジュール１２４は、ＣＶ関数１１２が処理されるであろう動画ソース１３０を選択することができる。続いて、コントローラモジュール１２０は、選択されたＣＶ関数１１２および選択された動画ソース１３０に基づいて、命令を動画分析システム１３２－Ａに伝送し得る。コントローラモジュール１２０から命令を受信することに応答して、動画分析システム１３２－Ａは、ＣＶ関数１１２を実行し、調整モジュール１２４によって選択された動画ソース１３０から分析エージェント１２２によって選択されたＣＶ関数１１２を処理し得る。動画分析システム１３２－Ａは、受信されたＣＶ関数１１２を構成パラメータ１１７で構成し得る。構成パラメータ１１７は、限定ではないが、命令、パラメータ、構成、設定規則、または入力を含み得る。構成パラメータ１１７は、所定のものであり得る。構成パラメータ１１７は、特定の事例に関して動画ソース１３０内からのＯＯＩの検出を可能にし得る。ＣＶ関数１１２は、構成パラメータ１１７の組によって決定される定められた順序において関数を実施し得る。動的環境または緊急事態コンテキストの場合、動画分析システム１３２－Ａは、構成パラメータ１１７を適用することによって、検出されるべきＯＯＩのクラスに関する設定を変更し得る。いくつかの実施形態において、分析エージェント１２２は、構成パラメータをＣＶ関数１１２に適用し得る。

【0040】

コントローラモジュール１２０は、スケジューリングモジュール１１５と通信し得る。スケジューリングモジュール１１５は、事前に確立された日付および時間に従ってシンボル１５２をインスタンス化し得る。スケジューリングモジュール１１５は、関連付けられたＣＶ関数１１２が実行され得る期間または持続時間を定め得る。コントローラモジュール１２０は、スケジューリングモジュール１１５内に構成される期間または持続時間に関連する情報に基づいて、ＣＶ関数１１２に関連する命令を動画分析システム１３２－Ａに伝送し得る。

【0041】

シンボル１５２および／または着目エリアのインスタンス化の後、コントローラモジュール１２０は、インスタンス化されたシンボル１５２および／または着目エリアの座標に近接する１つ以上のデバイスに通知を伝送し得る。通知は、限定ではないが、通知を受信するデバイスのＧＵＩ上に表示される物理空間の表現上にシンボル１５２および／または着目エリアを表示することを含み得る。通知は、動画分析システム１３２－Ａから受信される動画分析データに含まれる記憶される物理世界内の着目エリアおよび／または標識の座標、および／またはクライアント制御モジュール１６０におけるインスタンス化されたシンボル１５２および／またはインスタンス化された着目エリアの座標に対するデバイスの近接度に基づいて、伝送され得る。

【0042】

コントローラモジュール１２０は、ステータス記憶部１７４と通信し得る。ステータス記憶部１７４は、インスタンス化されたシンボル１５２および／またはインスタンス化された着目エリアのステータスを説明するデータ記憶部であり得る。インスタンス化されたシンボル１５２および／またはインスタンス化された着目エリアのステータスは、限定ではないが、選択されたＣＶ関数１１２に関してアクティブ化されていること、非アクティブ化されていること、中断されていることを含み得る。いくつかの実施形態によると、インスタンス化されたシンボル１５２および／またはインスタンス化された着目エリアのステータスが変化した場合、コントローラモジュール１２０は、動画分析システム１３２－Ａに、インスタンス化されたシンボル１５２のステータスが変化したことの命令を伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａに、関連付けられたＣＶ関数１１２をアクティブ化し、実行すること、ＣＶ関数１１２を実施することを終結させること、ある条件が満たされるまでＣＶ関数１１２を実施することを中断すること、または関連付けられたＣＶ関数１１２をインスタンス化されたシンボル１５２の更新された状態と対応するように変更することを行うための要求を送信し得る。動画分析システム１３２－Ａは、インスタンス化されたシンボル１５２および／またはインスタンス化された着目エリアへのコントローラモジュール１２０からの変化に関連する命令に基づいて、コマンドを実行し得る。

【0043】

ＣＶ関数ライブラリ１１０、実世界規則ライブラリ１４０、シンボルライブラリ１５０、カメラ場所記憶部１７０、動画分析データ記憶部１７２、ステータス記憶部１７４、および／または動画管理システム１３４の各々は、データ記憶部（「データ記憶部」）であり得る。データ記憶部は、関係データベース、ＮｏＳＱＬデータベース、または他の水平スケーリングデータベース、または好適なデータベース設計方法論に準拠する任意の他のデータベースであり得る。ある実施形態において、データ記憶部は、一元化ストレージエリアネットワーク（ＳＡＮ）、ネットワーク接続型記憶装置（ＮＡＳ）、独立ディスクの冗長アレイ、および／またはデータベーステーブルおよび支持構造を記憶するために十分な記憶容量を供給するための記憶デバイスの任意の他の構成を実装し得る。十分な記憶装置は、代替として、任意の他の物理的に取り付けられる磁気記憶装置、クラウド記憶装置、または付加的な記憶媒体内に存在し得る。ある実施形態において、データ記憶部は、記憶媒体とインターフェースをとるためのＡＴＡ、ＳＡＴＡ、ＳＣＳＩ、ＳＡＳ、および／またはファイバ等のハードディスクインターフェースを展開し得る。

【0044】

動画分析システム１３２－Ａ、コントローラモジュール１２０、クライアント制御モジュール１６０、および動画管理システム１３４は、１つのシステム内に共同配置されるか、１つのシステムに組み合わせられるか、または別個のシステム内に存在し得る。

【0045】

いくつかの実施形態において、動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を使用し、実世界内の物理標識および電子標識を検出し得る。標示検出ＣＶ関数１１３は、従来型動画分析ツールから区別可能である様式において、電子標識および物理標識から動画分析データを読み出すように構成された分析ツールであり得る。標示検出ＣＶ関数１１３は、物理標識または電子標識が実世界内で修正または物理的に展開されていることを動画ソース１３０に信号伝達する、標識の属性を検出するように構成され得る。動画分析システム１３２－Ａは、オブジェクト検出およびテキスト認識技法を使用して、特に、概して、実世界内の物理標識および電子標識を表す属性（例えば、色、アイコン、線、テキスト、形状）を検出するように標示検出ＣＶ関数１１３を構成し得る。加えて、標示検出ＣＶ関数１１３は、検出された物理標識または電子標識に近接する参照オブジェクトを検出するように構成され得る。実世界内の物理標識および電子標識および参照オブジェクトを検出した後、動画分析システム１３２－Ａは、動画分析データをコントローラモジュール１２０に伝送し得る。コントローラモジュール１２０は、動画分析データ記憶部１７２に動画分析データを記憶し得る。

【0046】

いくつかの実施形態において、コントローラモジュール１２０は、動画分析データ記憶部１７２に記憶された動画分析データを特定のシンボル１５２にマップすることによって、シンボルライブラリ１５０にクエリするように構成された分析ツールであり得る。シンボルライブラリ１５０は、各シンボル１５２に対応するシンボルＩＤを記憶し得る。シンボルＩＤは、特定のシンボル１５２に関する種々の属性を表すクエリタプルに対応し得る。例えば、各シンボル１５２は、概して、実世界内の物理標識および電子標識を表すある属性（例えば、色、アイコン、線、テキスト、形状）を有し得る。したがって、各シンボル１５２は、シンボル１５２を表す属性に対応する値を含む独特のクエリタプルを有し得る。コントローラモジュール１２０は、実世界内で検出される各物理標示および電子標に関する動画分析データを同じまたは類似の属性を伴うシンボル１５２に関するクエリタプルにマップし得る。

【0047】

故に、分析エージェント１２２は、シンボル１５２のクエリタプルを実世界内で検出される物理標識または電子標識を表す動画分析データにマップすることからコントローラモジュール１２０が選択したシンボル１５２に基づいて、ＣＶ関数１１２を決定し得る。いくつかの実施形態は、特有の標示検出ＣＶ関数１１３から読み出される動画分析データのシンボルライブラリ１５０に記憶された特定のシンボル１５２を表すクエリタプルへのマッピングを可能にする。いくつかの実施形態において、調整モジュール１２４は、実世界内の物理標識および電子標識および／または参照オブジェクトの座標を使用し、着目エリアを決定し得る。調整モジュール１２４は、ＣＶ関数１１２を実行するための動画ソース１３０を決定し得る。

【0048】

いくつかの実施形態において、コントローラモジュール１２０は、関連のあるＣＶ関数１１２を選択するためにインスタンス化されたシンボル１５２および参照オブジェクトを使用する分析ツールであり得る。クライアント制御モジュール１６０は、クライアントグラフィカルユーザインターフェース上で特定のシンボル１５２をインスタンス化し得る。クライアント制御モジュール１６０は、選択されたＣＶ関数１１２が実行され得る動画ソース１３０を決定するために着目エリアも決定し得る。インスタンス化されたシンボル１５２は、シンボルライブラリ１５０に記憶されたシンボル１５２オブジェクトに対応する。クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２および着目エリアをコントローラモジュール１２０に伝送し得る。さらに、クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２の状況およびステータスが変化すると、除去、修正、および／または新しいシンボル１５２を追加し得る。したがって、コントローラモジュール１２０は、インスタンス化されたシンボル１５２および着目エリアに関するクライアント制御モジュール１６０から受信された変化する入力に基づいて、ＣＶ関数１１２を動的に変更し得る。故に、インスタンス化されたシンボル１５２および着目エリアのステータスを動的に調節することは、動画分析ツールおよび緊急事態動作を改良する。

【0049】

図２は、いくつかの実施形態による実世界規則１４２に関連付けられた意図される目的を表すシンボル１５２をインスタンス化することの例２００を図示する。限定ではなく、便宜上、図２は、図１の要素を参照して説明され得る。例えば、グラフィカルユーザインターフェース（ＧＵＩ）２６０は、図１のクライアント制御モジュール１６０に結合されることができる。概して、従来型システムは、動的環境内で特定の意図される目的のためにＯＯＩモデルを呼び出す困難に直面する。故に、実世界規則に関連付けられたシンボルを使用し、動的環境内での動画分析システムの有用性を改良する必要性が、存在する。この問題に対処するために、特定の意図される目的を表すシンボル１５２が、動的環境内に関連のあるＣＶ関数１１２を展開するためにインスタンス化され得る。インスタンス化されたシンボル１５２に対応する特定のＣＶ関数１１２を展開するための方法を図示するために、車両交通に対する双方向道路の閉鎖部に直面したときのシンボルベースの規則の使用を図示するある例が、提供される。

【0050】

いくつかの実施形態において、クライアント制御モジュール１６０は、車両交通に対する特定の双方向車道が閉鎖されていることの通知をアラートシステムから受信し得る。クライアント制御エージェント１６２は、この通知の意図される目的が、閉鎖された双方向車道に進入する移動車両が存在するかどうかを検出することであることを決定し得る。いくつかの実施形態において、クライアント制御エージェント１６２は、クライアント制御モジュール１６０において、実世界規則１４２に関連付けられたシンボル１５２をインスタンス化し得る。通知のこの特定の意図される目的に基づいて、クライアント制御エージェント１６２は、クライアント制御モジュール１６０において、意図される目的を表す実世界規則１４２に関連付けられたシンボル１５２を選択し得る。

【0051】

クライアント制御エージェント１６２は、クライアント制御モジュール１６０に結合されたクライアントＧＵＩ２６０からシンボル１５２を選択し得る。クライアントＧＵＩ２６０は、いくつかの実施形態によるＣＶ関数１１２が処理され得る物理空間を表す地図２８２を含み得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０のクライアントＧＵＩ２６０内に表示されるシンボルライブラリ２５０からシンボル１５２を選択し得る。シンボルライブラリ２５０内のシンボルは、データ記憶部に記憶されたシンボルＩＤに対応し得る。シンボルＩＤは、実世界規則ライブラリ１４０に記憶される実世界規則１４２に関連付けられ得る。

【0052】

シンボルまたは標識は、概して、環境内の規則の暗示的または明示的な組を示す。例えば、「通行止」と記載するテキストを含む、示またはシンボルは、車両が、閉鎖された道路に進入できないという暗示的または明示的な規則を表す。故に、「通行止」シンボルアイコンは、実世界規則「車両進入禁止１４４」を表す実世界ライブラリ１４０に記憶される、実世界規則１４２オブジェクトに関連付けるシンボルＩＤに対応し得る。

【0053】

意図される目的が、移動車両が道路閉鎖部に進入することを制限することであることを決定すると、クライアント制御エージェント１６２（例えば、ユーザは、ＧＵＩ２６０を利用し得）は、意図される目的を表すための実世界規則「車両進入禁止１４４」に関連付けられた「通行止」と記載するテキストを含む菱形形状のシンボルを選定し得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０のクライアントＧＵＩ２６０上で種々の制御関数２６４を採用し得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０のクライアントＧＵＩ２６０上に表示される地図２８２内のシンボルライブラリ２５０から選択されるシンボル１５２をドラッグおよびドロップするために利用され得る。

【0054】

例２００に示されるように、ユーザは、クライアント制御エージェント１６２を介して、シンボルライブラリ２５０から、クライアント制御モジュール１６０のクライアントＧＵＩ２６０上に表示される地図２８２まで、２つの道路閉鎖部シンボル、すなわち、シンボル２５２－Ａおよびシンボル２５２－Ｂをドラッグおよびドロップし、双方向車道上に道路閉鎖部が存在することを示している。２つの「通行止」シンボルをドラッグおよびドロップすることによって、クライアント制御エージェント１６２は、シンボル２５２－Ａおよびシンボル２５２－Ｂを実世界規則「車両進入禁止１４４」に関連付けられた特定の双方向車道道路閉鎖部にインスタンス化している。

【0055】

シンボル２５２－Ａおよびシンボル２５２－Ｂをインスタンス化することの後、クライアント制御エージェント１６２は、次いで、動画ソース１３０からＣＶ関数１１２を処理すべきＧＵＩ２６０のエリアを決定するために着目エリア２８０を選択し得る。クライアント制御エージェント１６２は、その形状の境界が地図２８２の座標系と互いに関係付けられ得る着目エリア２８０を画定する形状または境界を画定し得る。故に、クライアント制御エージェント１６２は、双方向車道の周囲の着目エリア２８０を決定し得、着目エリア２８０は、閉鎖された双方向車道を包囲する長方形オブジェクトの境界を定める。ＧＵＩ２６０内の地図２８２上で着目エリアの境界を定めることによって、クライアント制御エージェント１６２は、着目エリアをインスタンス化している。クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２と、インスタンス化された着目エリアとを含むデータをコントローラモジュール１２０に伝送し得る。

【0056】

いくつかの実施形態において、分析エージェント１２２は、環境内で標識を検出することによって、意図される目的を表す実世界規則１４２に関連付けられたシンボル１５２をインスタンス化し得る。この場合、２つの「通行止」標示が、物理世界内で物理的に展開され得る。２つの「通行止」標示は、動画ソース２３０－Ａおよび動画ソース２３０－Ｂの視野内に存在し得る。動画分析システム１３２－Ａは、テキスト認識技法またはオブジェクト検出技法を利用し、物理世界における標識を解釈する標示検出ＣＶ関数１１３を実行し得る。この場合、標示検出ＣＶ関数１１３を処理する動画分析システム１３２－Ａは、動画ソース２３０－Ａおよび動画ソース２３０－Ｂの視野内で標示の動画データを処理することによって、「通行止」標示を検出していることもある。

【0057】

動画分析システム１３２－Ａは、動画分析データ記憶部１７２に物理世界内に置かれる「通行止」標示の意図される目的を表す標識の形状、標識の色、標識に含まれるテキスト、および標識の他の関連のある情報等の特性を記憶し得る。動画分析システム１３２－Ａは、動画分析データをコントローラモジュール１２０に伝送し得る。分析エージェント１２２は、動画分析システム１３２－Ａから受信される動画分析データを使用し、シンボルライブラリ２５０にクエリし、「通行止」シンボル２５２－Ａおよびシンボル２５２－Ｂを双方向車道内に物理的に展開される「通行止」標示と関連付け得る。分析エージェント１２２は、標識内の色、形状、テキスト、およびアイコン等、動画分析データに含まれる物理世界における標識の属性をシンボルライブラリ２５０内のシンボルの特性と互いに関係付け得る。物理世界内に置かれる「通行止」標示の特性とシンボルライブラリ２５０内のシンボル２５２－Ａおよびシンボル２５２－Ｂとを合致させることに基づいて、分析エージェント１２２は、シンボル２５２－Ａおよびシンボル２５２－Ｂをインスタンス化し得る。

【0058】

いくつかの実施形態において、動画分析システム１３２－Ａは、ＣＶ関数ライブラリ１１０からの標示検出ＣＶ関数１１３を実行し、着目エリア２８０を画定し得る。動画分析システム１３２－Ａは、動画ソース１３０の視野内で検出された標識の既知の座標を使用し、参照オブジェクトを検出し得る。参照オブジェクトは、検出される標識に関する空間内の物理的場所と、入射角と、物理的方向とを含み得る。動画分析システム１３２－Ａは、参照オブジェクトの座標等、物理世界内に置かれた参照オブジェクトに関連する動画分析データを動画分析データ記憶部１７２に記憶し得る。これらの参照オブジェクトを使用して、動画分析システム１３２－Ａは、着目エリアの形状または境界を決定し得る。動画分析システム１３２－Ａは、動画ソース１３０の視野内で参照オブジェクトの座標を互いに関係付け、着目エリア２８０の場所点を決定し得る。

【0059】

図３は、いくつかの実施形態によるＯＯＩ動画分析検出のための動的シンボルベースのシステムの動画分析システムの例３００を図示する。限定ではなく、便宜上、図３は、図１および／または２の要素を参照して説明され得る。例えば、例３００は、図２の着目エリア２８０を描写する図１の動画分析システム１３２ＡのＧＵＩであり得る。シンボル２５２－Ａおよびシンボル２５２－Ｂおよび着目エリア２８０のインスタンス化の後、分析エージェント１２２は、インスタンス化されたシンボル２５２－Ａおよびシンボル２５２－Ｂに基づいて実行されるべきであるＣＶ関数１１２を決定し得る。「通行止」シンボル２５２－Ａおよびシンボル２５２－Ｂは、その意図される目的として移動車両を検出する１１４ように構成されたＣＶ関数に関連付けられたシンボルＩＤに対応し得る。ＣＶ関数「移動車両検出１１４」は、実世界規則「車両進入禁止１４４」の禁止に違反する任意の移動車両を検出することによって、移動車両が道路閉鎖部に進入することを制限する、意図される目的を遂行することに寄与する。

【0060】

関連のあるＯＯＩを検出するためにＣＶ関数１１２を選択すると、調整モジュール１２４は、ＣＶ関数「移動車両検出１１４」が処理され得る動画ソース１３０を決定し得る。調整モジュール１２４は、ＣＶ関数「移動車両検出１１４」が処理され得るエリアがインスタンス化された着目エリア２８０であり得ることを決定し得る。調整モジュール１２４は、動画分析システム１３２－Ａから受信される動画分析データに含まれるシンボル２５２－Ａおよびシンボル２５２－Ｂおよび着目エリア２８０の座標と、カメラ場所記憶部１７０に記憶される動画ソースの座標とを比較し、ＣＶ関数１１２を処理するために使用されるであろう動画ソース１３０を決定し得る。

【0061】

ＣＶ関数「移動車両検出１１４」が、意図される目的およびＣＶ関数「移動車両検出１１４」を処理するために使用される動画ソース１３０に基づいて、ＯＯＩを検出するために使用されるであろうことを決定した後、コントローラモジュール１２０は、動画ソース１３０およびＣＶ関数「移動車両検出１１４」に関連する命令を動画分析システム１３２－Ａに伝送し得る。動画分析システム１３２－Ａは、ＣＶ関数「移動車両検出１１４」を実行し、ＯＯＩの代表的なクラスとして移動車両を検出し得る。動画分析システム１３２－Ａは、例３００の動画分析システムＧＵＩを含み得る。例３００は、選択された動画ソース１３０からの動画データおよび動画ソース２３０－Ａおよび動画ソース２３０－Ｂの視野内で検出される着目オブジェクト３９０（例えば、３９０－Ａ、３９０－Ｂ、３９０－Ｃ、・・・）を表示し得る。

【0062】

動画分析システム１３２－Ａは、ＣＶ関数「移動車両検出１１４」を双方向道路閉鎖部の特定のインスタンスに適合させるために、構成パラメータ１１７を使用し得る。例えば、ＣＶ関数「移動車両検出１１４」は、双方向道路閉鎖部に進入する任意の移動車両を検出するように構成され得る。動画分析システム１３２－Ａは、任意の車両を検出するためにＣＶ関数「移動車両検出１１４」を実行し続け得る。しかしながら、環境は、急変し得、車両が、道路閉鎖部に進入し得る。その場合、ＣＶ関数「移動車両検出１１４」をさらに精緻化することが、有用であり得る。例えば、動画分析システム１３２－Ａは、実世界規則「車両進入禁止１４４」に違反するＯＯＩとしてオートバイを検出していることもある。図３において強調されるように、動画分析システム１３２－Ａは、次いで、オートバイおよび／または特定のナンバープレート、型、またはモデルのみを検出するように動画分析システム１３２－Ａ内の構成パラメータ３１７を精緻化し得る。

【0063】

図４は、いくつかの実施形態によるＯＯＩ動画分析検出のための動的シンボルベースのシステムに関する例示的方法４００を図示する。限定ではなく、便宜上、図４は、図１、図２、および図３の要素を参照して説明され得る。例えば、方法４００は、図１のコントローラモジュール１２０によって実施され得る。いくつかの実施形態において、方法４００は、ハードウェア（例えば、回路網、専用論理、プログラマブル論理、マイクロコード等）、ソフトウェア（例えば、処理デバイス上で実行されている命令）、またはそれらの組み合わせを備え得る処理論理によって実施されることができる。全てのステップが、本明細書に提供される開示を実施するために必要となり得るわけではないことを理解されたい。さらに、ステップのうちのいくつかが、当業者によって理解されるであろうように、同時に、または図４に示されるものと異なる順序において実施され得る。

【0064】

４０５において、コントローラモジュール１２０（例えば、分析エージェント１２２）は、動画分析システム１３２－Ａによって処理されるべき標示検出ＣＶ関数１１３をＣＶ関数ライブラリ１１０から選択すべきかどうかを決定する。標示検出ＣＶ関数１１３は、テキスト認識およびオブジェクト検出技法を使用してオブジェクトを検出するために使用され得る。テキスト認識およびオブジェクト検出技法は、限定ではないが、動画ソース１３０の視野内で観察可能な標示またはメッセージを解釈することを含む。コントローラモジュール１２０が、ＣＶ関数ライブラリ１１０からの標示検出ＣＶ関数１１３が、動画分析システム１３２－Ａによって処理されるべきであることを決定すると、方法４００は、４１０に進む。コントローラモジュール１２０が、ＣＶ関数ライブラリ１１０から動画分析システム１３２－Ａによって処理されるべき標示検出ＣＶ関数１１３を選択していないとき、方法４００は、４３０に進む。

【0065】

４１０において、コントローラモジュール１２０は、１つ以上の選択される標示検出ＣＶ関数１１３を動画分析システム１３２－Ａに伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａが選択された標示検出ＣＶ関数１１３を処理し得る動画ソース１３０を伝送し得る。

【0066】

４２０において、コントローラモジュール１２０は、シンボル１５２および着目エリアをインスタンス化するための動画ソース１３０の視野内の標識および参照オブジェクトの動画分析データを受信し得る。例えば、動画分析システム１３２－Ａは、動画ソース１３０の視野における物理世界における標識に関して監視するように構成された標示検出ＣＶ関数１１３を実行し得る。標識は、意図される目的を表すテキスト、シンボル、形状、または色を描く物理標識または電子標識であり得る。物理世界における標識を検出すると、動画分析システム１３２－Ａは、動画分析データ記憶部１７２に、標示検出ＣＶ関数１１３を実行することから処理される動画分析データを記憶し得る。実世界における標識に関連する動画分析データは、限定ではないが、標識のおおよその座標、物理世界内に表示されている標識のタイプの本質および目的、標識内のテキスト、標識の形状、標識の色、および標識の意図される目的を決定することに関連する他の情報を含み得る。

【0067】

物理世界における標識に関連するデータを検出し、記憶すると、動画分析システム１３２－Ａは、動画分析データ記憶部１７２に、参照オブジェクトに関連する動画分析データも記憶し得る。参照オブジェクトに関連する動画分析データは、限定ではないが、参照オブジェクトの座標、異なる基準点、空間内の物理的場所、入射角、および／または物理世界における標識に対する物理的方向を含み得る。参照オブジェクトは、動画ソース１３０の視野内のオブジェクトを含み得る。

【0068】

コントローラモジュール１２０は、シンボル１５２をインスタンス化するための標示検出ＣＶ関数１１３から処理される動画分析データを受信し得る。動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を処理することから取得された動画分析データをコントローラモジュール１２０に伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａから動画分析データを受信し得る。物理世界における標識の特性を定義することに基づいて、分析エージェント１２２は、シンボルライブラリ１５０および／または実世界規則ライブラリ１４０にクエリし、シンボル１５２をインスタンス化し得る。分析エージェント１２２は、動画分析システム１３２－Ａから受信される動画分析データを使用し、物理世界における標識の特性を定義することを特定のシンボル１５２に関連付け得る。物理世界における標識のこれらの特性は、限定ではないが、物理世界における標識に含まれる色、テキスト、形状、またはアイコンを含み得る。

【0069】

動画分析データにおける標識の特性が、シンボルライブラリ１５０における特定のシンボル１５２の特性にほぼ合致する場合、コントローラモジュール１２０は、標識の特性に合致するシンボル１５２をインスタンス化し得る。いくつかの実施形態において、シンボル１５２は、シンボルＩＤに関連付けられるであろう。コントローラモジュール１２０は、シンボルＩＤを標識の意図される目的を表す実世界規則１４２に関連させ得る。

【0070】

コントローラモジュール１２０は、動画分析データ記憶部１７２に記憶された検出された参照オブジェクトに関連する情報を含む動画分析データに基づいて、着目エリアを画定し得る。分析エージェント１２２は、動画ソース１３０の視野内の参照オブジェクトの座標を互いに関係付け、着目エリアの場所点を決定し得る。方法４００は、４５０に進む。

【0071】

４５０において、コントローラモジュール１２０（例えば、分析エージェント１２２）は、インスタンス化されたシンボル１５２に関連付けられたＣＶ関数１１２を決定し得る。分析エージェント１２２は、ＣＶ関数ライブラリ１１０から、意図される目的を最良に表すＣＶ関数１１２を選択し得る。ＣＶ関数１１２は、ＯＯＩを検出および処理するための方法であり得る。ＣＶ関数１１２は、代表的なクラスデータを伴う種々の動画分析モデルを使用して、ＯＯＩの特定のクラスを識別するために双方向性にパラメータ化され得る。ＣＶ関数１１２は、機械学習方法およびニューラルネットワークを含み得る。分析エージェント１２２は、ＣＶ関数１１２を意図される目的を表す実世界規則１４２に対応するインスタンス化されたシンボル１５２と関連付け得る。

【0072】

４６０において、コントローラモジュール（例えば、調整モジュール１２４）は、動画分析システム１３２－Ａが選択されたＣＶ関数１１２を処理するであろう動画ソース１３０を識別し得る。調整モジュール１２４は、ＣＶ関数１１２が処理されるであろう動画ソース１３０を決定し得る。調整モジュール１２４は、ＣＶ関数１１２がインスタンス化された着目エリアに対して処理されるであろう動画ソース１３０を限定し得る。調整モジュール１２４は、インスタンス化されたシンボル１５２および着目エリアの座標を含む動画分析システム１３２－Ａから受信される動画分析データも使用し、処理すべき動画ソース１３０を決定し得る。

【0073】

４７０において、コントローラモジュール１２０は、選択されたＣＶ関数１１２を動画分析システム１３２－Ａに伝送し得る。コントローラモジュール１２０は、コントローラモジュール１２０が関連付けられたＣＶ関数１１２を動画分析システム１３２－Ａに伝送し得る期間または持続時間を定めるために、スケジューリングモジュール１１５も使用し得る。

【0074】

４８０において、コントローラモジュール１２０は、インスタンス化されたシンボル１５２のステータスに対する変化に基づく入力が受信されたかどうかを決定する。コントローラモジュール１２０は、インスタンス化されたシンボル１５２のステータスを説明するデータ記憶部であり得るステータス記憶部１７４を含み得る。インスタンス化されたシンボル１５２のステータスは、限定ではないが、関連付けられたＣＶ関数１１２に関するアクティブ化されていること、非アクティブ化されていること、中断されていることを含み得る。コントローラモジュール１２０が、インスタンス化されたシンボル１５２のステータスに対するいかなる変化も受信しなかった場合、方法４００は、４９０に進む。コントローラモジュール１２０が、シンボル１５２のステータスに対するステータス記憶部１７４内の変化を示す入力を受信した場合、方法４００は、４８５に進む。

【0075】

４８５において、コントローラモジュール１２０は、シンボル１５２に関連付けられたＣＶ関数１１２に関連する命令を伝送し得る。シンボル１５２のステータスが変化している場合、コントローラモジュール１２０は、動画分析システム１３２－Ａに、シンボル１５２のステータスが変化していることの命令を伝送し得る。コントローラモジュール１２０は、動画分析システム１３２－Ａに、選択されたＣＶ関数１１２をアクティブ化し、実行すること、ＣＶ関数１１２を実施することを終結させること、ある条件が満たされるまでＣＶ関数１１２を実施することを中断すること、または関連付けられたＣＶ関数１１２をシンボル１５２の更新された状態と対応するように変更することを行うための要求を送信し得る。

【0076】

４９０において、コントローラモジュール１２０は、インスタンス化されたシンボル１５２および着目エリアの通知をデバイスに伝送し得る。通知は、限定ではないが、デバイスのユーザインターフェース上に表示される物理空間の表現上にインスタンス化されたシンボル１５２を表示することを含み得る。分析エージェント１２２は、デバイスの地理的座標を使用し、物理世界における標識の座標に対するデバイスの近接度を決定し得る。この情報に基づいて、コントローラモジュール１２０は、インスタンス化されたシンボル１５２および／または着目エリアに関連付けられた物理的場所に対するデバイスの近接度に基づいて、通知を伝送し得る。

【0077】

コントローラモジュール１２０が、ＣＶ関数ライブラリ１１０から、動画分析システム１３２－Ａによって処理されるべき標示検出ＣＶ関数１１３を選択しなかった４３０に戻ると、コントローラモジュール１２０は、実世界規則１４２に関連付けられたシンボル１５２のインスタンス化に基づく入力を受信し得る。コントローラモジュール１２０は、実世界規則ライブラリ１４０に実世界規則１４２を記憶し得る。実世界規則１４２は、限定ではないが、物理世界において観察、理解、および／または解釈され得る禁止、命令、指示、要求、助言、アラート、警告、または告知を含み得る。

【0078】

コントローラモジュール１２０は、意図される目的を表す実世界規則１４２に関連付けられた入力を受信し得る。意図される目的は、実世界規則１４２によって表され得る。コントローラモジュール１２０は、クライアント制御モジュール１６０からの実世界規則１４２のインスタンス化についての入力または通知を受信し得る。

【0079】

いくつかの実施形態において、クライアント制御モジュール１６０は、アラートシステムから、実世界規則１４２のインスタンス化についての通知を受信し得る。受信される入力は、限定ではないが、交通アラート、幹線道路標示メッセージングシステム、封鎖通知、化学的、生物学的、または他の危険性警告を含むアラートまたは通知システム等の別のシステムからの通知または命令であり得る。クライアント制御エージェント１６２は、この通知の意図される目的を決定し得る。いくつかの実施形態において、クライアント制御エージェント１６２は、クライアント制御モジュール１６０において実世界規則１４２に関連付けられたシンボル１５２をインスタンス化し得る。通知のこの特定の意図される目的に基づいて、クライアント制御エージェント１６２は、クライアント制御モジュール１６０において意図される目的を表す実世界規則１４２に関連付けられたシンボル１５２を選択し得る。

【0080】

クライアント制御エージェント１６２は、制御関数１６４を使用し、クライアント制御モジュール１６０に結合されたクライアントＧＵＩ上で、またはそれからアクセス可能にシンボル１５２を選択し得る。制御関数１６４は、限定ではないが、クライアントＧＵＩ上でシンボル１５２をドラッグおよびドロップすること、地図上にシンボル１５２を置き、表示すること、または場所基準系に基づいて場所の座標またはアドレスパラメータをシンボル１５２に関連付けることを含む。クライアント制御モジュール１６０は、クライアント制御エージェント１６２が制御関数１６４を実施すると、シンボル１５２をインスタンス化し得る。クライアント制御エージェントは、限定ではないが、ＧＵＩソフトウェア選択制御、音声コマンド、ジェスチャ、または当業者に公知であるコンピュータインターフェースとの相互作用の任意の変形例を含む制御の任意の手段を通して、シンボル１５２のインスタンス化を可能にし得る。

【0081】

４４０において、コントローラモジュール１２０は、着目エリアのインスタンス化に基づく入力を受信し得る。クライアント制御エージェントは、動画分析システム１３２－ＡがＣＶ関数１１２を処理し、ＯＯＩを検出するエリアを表す着目エリアを決定し得る。クライアント制御エージェント１６２は、動画分析システム１３２－ＡがＣＶ関数１１２を処理するエリアのおおよその座標に基づいて、着目エリアを画定し得る。クライアント制御エージェント１６２は、制御関数１６４を使用し、クライアント制御モジュール１６０のグラフィカルユーザインターフェース内に着目エリアを表し得る。方法４００は、４５０に進む。

【0082】

図５は、いくつかの実施形態による動画分析システムを使用するＯＯＩ動画分析検出のための動的シンボルベースのシステムのための方法５００のある例である。限定ではなく、便宜上、図５は、図１－４の要素を用いて説明され得る。例えば、方法５００は、図１の動画分析システム１３２Ａによって実施され得る。いくつかの実施形態において、方法５００は、ハードウェア（例えば、回路網、専用論理、プログラマブル論理、マイクロコード等）、ソフトウェア（例えば、処理デバイス上で実行されている命令）、またはそれらの組み合わせを備え得る処理論理によって実施されることができる。全てのステップが、本明細書に提供される開示を実施するために必要となり得るわけではないことを理解されたい。さらに、ステップのうちのいくつかが、当業者によって理解されるであろうように、同時に、または図５に示されるものと異なる順序において実施され得る。

【0083】

５１０において、動画分析システム１３２－Ａは、コントローラモジュール１２０から標示検出ＣＶ関数１１３を受信し得る。標示検出ＣＶ関数１１３は、テキスト認識およびオブジェクト検出技法を使用してオブジェクトを検出するように構成され得る。テキスト認識およびオブジェクト検出技法は、限定ではないが、動画ソース１３０の視野内で観察可能な標示またはメッセージを解釈することを含む。動画分析システム１３２－Ａは、コントローラモジュール１２０から、標示検出ＣＶ関数１１３を処理するための選択された動画ソース１３０に関連する情報を受信し得る。

【0084】

５２０において、動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を実行し得る。動画分析システム１３２－Ａは、選択された動画ソース１３０から標示検出ＣＶ関数１１３を実行し得る。動画分析システム１３２－Ａは、動画ソース１３０のビュー内で物理世界における標識に関して監視するように構成された標示検出ＣＶ関数１１３を実行し得る。標示は、意図される目的を表すテキスト、シンボル、形状、または色を描く物理標示または電子標示であり得る。物理世界における標識を検出すると、動画分析システム１３２－Ａは、標示検出ＣＶ関数１１３を実行することから処理される動画分析データを記憶し得る。

【0085】

５３０において、動画分析システム１３２－Ａは、動画ソース１３０の視野内で標示を検出し得る。いくつかの実施形態において、動画分析システム１３２－Ａは、物理世界における標識の存在を示す動画分析データを処理し得る。標示検出ＣＶ関数１１３は、以前には物理世界において存在していなかった標識の存在があるときを検出するように構成され得る。いくつかの実施形態において、標示検出ＣＶ関数１１３は、物理世界における標識に対する変化を検出するように構成され得る。いくつかの実施形態において、電子標識は、動画分析システム１３２－Ａに、実世界規則１４２に関連付けられた意図される目的を表す実世界における標識の存在を示す動画分析データを伝送し得る。

【0086】

標示検出ＣＶ関数１１３は、動画ソース１３０の視野内で検出されたオブジェクトを実世界規則１４２を表す標示に関連するデータを含むデータ記憶部におけるオブジェクトに関連付けるように構成され得る。実世界規則１４２を表す標示に関連するデータを含むデータ記憶部におけるオブジェクトは、テキスト、形状、色、またはシンボル等の標示の特性を含み得る。標示検出ＣＶ関数１１３は、動画ソース１３０の視野内で検出されたオブジェクトの特性が実世界規則１４２を表す標示に関連するデータを含むデータ記憶部内の標示の特性にほぼ合致するかどうかを決定するように構成され得る。データ記憶部におけるオブジェクトの特性が動画ソース１３０の視野内で検出されたオブジェクトに合致する場合、動画分析システム１３２－Ａは、物理世界における標識の存在を決定し得る。動画分析システム１３２－Ａは、動画分析データ記憶部１７２に、動画ソース１３０の視野内で検出された標示に関連する特性を記憶し得る。

【0087】

５４０において、動画分析システム１３２－Ａは、動画ソース１３０の視野内で参照オブジェクトを検出し得る。標示検出ＣＶ関数１１３は、物理世界において検出された標識を包囲する参照オブジェクトを検出するように構成され得る。動画分析システム１３２－Ａは、動画分析データ記憶部１７２に記憶される物理世界における標識の座標を使用し、包囲エリア内の参照オブジェクトを決定し得る。動画分析システム１３２－Ａは、動画分析データ記憶部１７２に参照オブジェクトの座標を記憶し得る。参照オブジェクトは、限定ではないが、異なる基準点、空間内の物理的場所、入射角、および物理世界における標識に対する物理的方向を含み得る。参照オブジェクトは、動画ソース１３０の視野内のオブジェクトを含み得る。

【0088】

５４０において、動画分析システム１３２－Ａは、動画分析データをコントローラモジュール１２０に伝送し得る。動画分析システム１３２－Ａは、動画分析データ記憶部に記憶された動画分析データをコントローラモジュール１２０に伝送し得る。動画分析データは、限定ではないが、物理世界において検出された標示に関連するデータ、動画ソース１３０の視野内で検出された参照オブジェクトに関連するデータ、動画ソース１３０の視野内で検出された標識および参照オブジェクトの座標、標示に含まれる色、テキスト、形状、またはシンボル等の物理世界において検出された標識の特性に関連するデータ、および／または電子標識から伝送されたデータを含み得る。

【0089】

５５０において、動画分析システム１３２－Ａは、コントローラモジュール１２０から、インスタンス化されたシンボル１５２に関連付けられたＣＶ関数１１２を受信し得る。動画分析システム１３２－Ａは、コントローラモジュール１２０から、意図される目的を最良に表すＣＶ関数１１２を受信し得る。ＣＶ関数１１２は、ＯＯＩを検出および処理するための方法であり得る。動画分析システム１３２－Ａは、コントローラモジュール１２０から２つ以上のＣＶ関数１１２を受信し得る。ＣＶ関数１１２は、代表的なクラスデータを伴う種々の動画分析モデルを使用してＯＯＩの特定のクラスを識別するために、双方向性にパラメータ化され得る。ＣＶ関数１１２は、機械学習方法およびニューラルネットワークを含み得る。

【0090】

５６０において、動画分析システム１３２－Ａは、インスタンス化されたシンボル１５２に関連付けられたＣＶ関数１１２を実行し得る。動画分析システム１３２－Ａは、実世界規則１４２に関連付けられた意図される目的に関連するＯＯＩのクラスの検出のために、ＣＶ関数１１２を実行し得る。動画分析システム１３２－Ａは、動画分析システムＧＵＩを含み得る。動画分析システム１３２－Ａに結合される動画分析システムＧＵＩは、選択された動画ソース１３０からの動画データおよび動画ソース１３０の視野内で検出されるＯＯＩを表示し得る。動画分析システム１３２－Ａは、ＣＶ関数１１２を処理することから取得された動画分析データを動画管理システム１３４に伝送し得る。動画管理システム１３４は、動画分析システム１３２－Ａから受信された動画分析データを記憶、管理、および／または分析し得る。

【0091】

５７０において、動画分析システム１３２－Ａは、構成パラメータ１１７をＣＶ関数１１２に適用し得る。動画分析システム１３２－Ａは、ＣＶ関数１１２を適合させるために構成パラメータ１１７を使用し得る。動画分析システム１３２－Ａは、ＣＶ関数１１２が動画ソース１３０から監視するであろうＯＯＩの特定のクラスを狭めるために、または広くするために構成パラメータ１１７を使用し得る。動的環境において、動画分析システム１３２－Ａは、ＣＶ関数１２２によって処理されるＯＯＩのクラスを変更するために構成パラメータ１１７を使用し得る。

【0092】

構成パラメータ１１７は、限定ではないが、命令、パラメータ、構成、設定規則、または入力を含み得る。構成パラメータ１１７は、所定のものであり得る。構成パラメータ１１７は、特定の事例に関して、動画ソース１３０からの動画データ（例えば、動画フィード）内でのＯＯＩの検出を可能にし得る。ＣＶ関数１１２は、構成パラメータ１１７によって決定される、定められた順序において関数を実施し得る。

【0093】

５８０において、動画分析システム１３２－Ａは、コントローラモジュール１２０から、ＣＶ関数１１２に関連する命令を受信し得る。命令は、限定ではないが、選択されたＣＶ関数１１２をアクティブ化し、実行すること、ＣＶ関数１１２を終結させること、ある条件が満たされるまでＣＶ関数１１２を中断すること、または関連付けられたＣＶ関数１１２をシンボル１５２の更新された状態と対応するように変更することを含み得る。動画分析システム１３２－Ａは、コントローラモジュール１２０から受信される命令を実行し得る。

【0094】

図６は、いくつかの実施形態によるクライアント制御モジュールを使用するＯＯＩ動画分析検出のための動的シンボルベースのシステムのための方法６００を図示するフローチャートである。限定ではなく、便宜上、図６は、図１－５の要素を参照して説明され得る。いくつかの実施形態において、方法６００は、ハードウェア（例えば、回路網、専用論理、プログラマブル論理、マイクロコード等）、ソフトウェア（例えば、処理デバイス上で実行する命令）、またはそれらの組み合わせを含み得る処理論理によって実施されることができる。全てのステップが、本明細書に提供される開示を実施するために必要となり得るわけではないことを理解されたい。さらに、ステップのうちのいくつかが、当業者によって理解されるであろうように、同時に、または図６に示されるものと異なる順序において実施され得る。

【0095】

６１０において、クライアント制御モジュール１６０（例えば、クライアント制御エージェント１６２）は、クライアント制御モジュール１６０においてシンボル１５２をインスタンス化する。クライアント制御エージェント１６２は、実世界規則１４２に関連付けられた意図される目的を表すシンボル１５２を決定し得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０において制御関数１６４を実施し、シンボル１５２をインスタンス化し得る。制御関数１６４は、限定ではないが、シンボル１５２をドラッグおよびドロップすること、地図上にシンボル１５２を置き、表示すること、および／または場所基準系に基づいて場所の座標をシンボル１５２に関連付けることを含む。クライアント制御モジュール１６０は、限定ではないが、物理空間を表す地図、見取図、または他の略図を含む物理空間の表現を表示するインターフェースを含み得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０において制御関数１６４を実施すると、シンボル１５２をインスタンス化し得る。

【0096】

６２０において、クライアント制御エージェント１６２は、クライアント制御モジュール１６０において着目エリアをインスタンス化する。クライアント制御エージェント１６２は、動画分析システム１３２－ＡがＣＶ関数１１２を処理し、ＯＯＩを検出するエリアを表す着目エリアを決定し得る。クライアント制御エージェント１６２は、動画分析システム１３２－ＡがＣＶ関数１１２を処理するエリアのおおよその座標に基づいて、着目エリアを画定し得る。クライアント制御エージェント１６２は、動画分析データ記憶部１７２に記憶される標識を包囲する参照オブジェクトに関連する情報を使用し、クライアント制御モジュール１６０において着目エリアを決定し得る。

【0097】

いくつかの実施形態において、電子標識は、電子標識、または電子標識に対する参照オブジェクトのいくつかのおおよその座標をコントローラモジュール１２０に伝送し得る。コントローラモジュール１２０は、電子標識および参照オブジェクトの記憶されたおおよその座標をクライアント制御モジュール１６０に伝送し得る。クライアント制御エージェント１６２は、クライアント制御モジュール１６０から受信される電子標識および参照オブジェクトの座標に基づいて、着目エリアを画定し得る。

【0098】

クライアント制御エージェント１６２は、着目エリアの境界を表す線または形状を用いて、クライアント制御モジュール１６０に結合されるグラフィカルユーザインターフェースにおいて着目エリアを表し得る。線または形状を画定する点の組は、動画分析システム１３２－ＡがＣＶ関数１１２を処理するエリアの座標にほぼ対応し得る。

【0099】

６３０において、クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２をコントローラモジュール１２０に伝送し得る。インスタンス化されたシンボル１５２は、対応するシンボルＩＤを有し得る。クライアント制御モジュール１２０は、インスタンス化されたシンボル１５２に関連するデータおよび／または対応するシンボルＩＤをコントローラモジュール１２０に伝送し得る。

【0100】

６４０において、クライアント制御モジュール１６０は、インスタンス化された着目エリアをコントローラモジュール１２０に伝送する。クライアント制御モジュール１６０は、クライアント制御モジュール１６０のグラフィカルユーザインターフェースにおける地図上に表示される着目エリアを画定する座標をコントローラモジュール１２０に伝送し得る。

【0101】

６５０において、クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２のステータスの変化をコントローラモジュール１２０に伝送する。コントローラモジュール１２０は、インスタンス化されたシンボル１５２および着目エリアに関連するデータを含む、ステータス記憶部１７４を含む。クライアント制御エージェント１６２は、クライアント制御モジュール上で、インスタンス化されたシンボル１５２および／または着目エリアのステータスを変更する新しい制御関数を実施し得る。インスタンス化されたシンボル１５２および／または着目エリアのステータスを変更する、新しい制御関数１６４は、クライアント制御モジュール１６０からインスタンス化されたシンボル１５２を除去すること、新しいシンボル１５２をクライアント制御モジュール１６０に追加すること、またはクライアント制御モジュール１６０上で着目エリアを調節することを含み得る。クライアント制御モジュール１６０におけるインスタンス化されたシンボル１５２および／または着目エリアに対する任意の変化に基づいて、クライアント制御モジュール１６０は、インスタンス化されたシンボル１５２および／または着目エリアのステータスに対する更新を含む入力をコントローラモジュール１２０に伝送し得る。

【0102】

種々の実施形態が、例えば、図７に示されるコンピュータシステム７００等の１つ以上のコンピュータシステムを使用して、実装されることができる。図７は、図１－図６を参照して説明される。コンピュータシステム７００は、例えば、動画分析システム１３２と、コントローラモジュール１２０と、クライアント制御モジュール１６０と、図４の方法４００と、図５の方法５００と、図６の方法６００とを含む図１の要素を実装するために使用されることができる。コンピュータシステム７００は、本明細書に説明される関数を実施することが可能である任意のコンピュータであることができる。

【0103】

コンピュータシステム７００は、本明細書に説明される関数を実施することが可能である任意の周知のコンピュータであることができる。

【0104】

コンピュータシステム７００は、プロセッサ７０４等の１つ以上のプロセッサ（中央処理ユニット、すなわち、ＣＰＵとも呼ばれる）を含む。プロセッサ７０４は、バスであり得る通信インフラストラクチャ７０６に接続される。

【0105】

１つ以上のプロセッサ７０４の各々は、グラフィック処理ユニット（ＧＰＵ）であり得る。ある実施形態において、ＧＰＵは、数学的に集約的なアプリケーションを処理するために設計される特殊な電子回路であるプロセッサである。ＧＰＵは、コンピュータグラフィックアプリケーション、画像、動画等に対して共通である数学的に集約的なデータ等のデータの大型ブロックの並行処理のために効率的である並列構造を有し得る。

【0106】

コンピュータシステム７００は、ユーザ入／出力インターフェース７０２を通して通信インフラストラクチャ７０６と通信するモニタ、キーボード、ポインティングデバイス等のユーザ入／出力デバイス６０３も含む。

【0107】

コンピュータシステム７００は、ランダムアクセスメモリ（ＲＡＭ）等のメインまたは一次メモリ７０８も含み得る。メインメモリ７０８は、１つ以上のレベルのキャッシュを含み得る。メインメモリ７０８は、その中に制御論理（すなわち、コンピュータソフトウェア）および／またはデータを記憶している。

【0108】

コンピュータシステム７００は、１つ以上の二次記憶デバイスまたはメモリ７１０も含み得る。二次メモリ７１０は、例えば、ハードディスクドライブ７１２および／またはリムーバブル記憶デバイスまたはドライブ７１４を含み得る。リムーバブル記憶ドライブ７１４は、フロッピー（登録商標）ディスクドライブ、磁気テープドライブ、コンパクトディスクドライブ、光学記憶デバイス、テープバックアップデバイス、および／または任意の他の記憶デバイス／ドライブであり得る。

【0109】

リムーバブル記憶ドライブ７１４は、リムーバブル記憶ユニット７１８と相互作用し得る。リムーバブル記憶ユニット７１８は、コンピュータソフトウェア（制御論理）および／またはデータを記憶しているコンピュータ使用可能または読み取り可能な記憶デバイスを含む。リムーバブル記憶ユニット７１８は、フロッピー（登録商標）ディスク、磁気テープ、コンパクトディスク、ＤＶＤ、光学記憶ディスク、および／または任意の他のコンピュータデータ記憶デバイスであり得る。リムーバブル記憶ドライブ７１４は、周知の様式においてリムーバブル記憶ユニット７１８から読み取り、および／またはそれに書き込む。

【0110】

例示的実施形態によると、二次メモリ７１０は、コンピュータプログラムおよび／または他の命令および／またはデータがコンピュータシステム７００によってアクセスされることを可能にするための他の手段、媒介、または他のアプローチを含み得る。そのような手段、媒介、または他のアプローチは、例えば、リムーバブル記憶ユニット７２２およびインターフェース７２０を含み得る。リムーバブル記憶ユニット７２２およびインターフェース７２０の例は、プログラムカートリッジおよびカートリッジインターフェース（ビデオゲームデバイス内に見出されるもの等）、リムーバブルメモリチップ（ＥＰＲＯＭまたはＰＲＯＭ等）および関連付けられたソケット、メモリスティックおよびＵＳＢポート、メモリカードおよび関連付けられたメモリカードスロット、および／または任意の他のリムーバブル記憶ユニットおよび関連付けられたインターフェースを含み得る。

【0111】

コンピュータシステム７００は、通信またはネットワークインターフェース７２４をさらに含み得る。通信インターフェース７２４は、コンピュータシステム７００が、遠隔デバイス、遠隔ネットワーク、遠隔エンティティ等（個々かつ集合的に、参照番号７２８によって参照される）の任意の組み合わせと通信および相互作用することを可能にする。例えば、通信インターフェース７２４は、コンピュータシステム７００が通信経路７２６（有線および／または無線であり得、ＬＡＮ、ＷＡＮ、インターネット等の任意の組み合わせを含み得る）を経由して遠隔デバイス７２８と通信することを可能にし得る。制御論理および／またはデータが、通信経路７２６を介してコンピュータシステム７００に、およびそれから伝送され得る。

【0112】

ある実施形態において、記憶された制御論理（ソフトウェア）を有する有形非一過性コンピュータ使用可能または読み取り可能な媒体を備えた有形非一過性装置または製造品も、本明細書では、コンピュータプログラム製品またはプログラム記憶デバイスと称される。これは、限定ではないが、コンピュータシステム７００、メインメモリ７０８、二次メモリ７１０、およびリムーバブル記憶ユニット７１８および７２２、および前述のものの任意の組み合わせを具現化する有形製品を含む。そのような制御論理は、１つ以上のデータ処理デバイス（コンピュータシステム７００等）によって実行されると、そのようなデータ処理デバイスに本明細書に説明されるように動作させる。

【0113】

本開示に含まれる教示に基づいて、図７に示されるもの以外のデータ処理デバイス、コンピュータシステム、および／またはコンピュータアーキテクチャを使用して、本開示の実施形態を作製および使用する方法が、当業者に明白となるであろう。特に、実施形態は、本明細書に説明されるもの以外のソフトウェア、ハードウェア、および／またはオペレーティングシステム実装とともに動作することができる。

【0114】

任意の他の節ではなく、詳細な説明の節が、請求項を解釈するために使用されることを意図することを理解されたい。他の節は、本発明者らによって考慮されるような、１つ以上の全てではない例示的実施形態を記載することができ、したがって、本開示または添付の請求項をいかようにも限定することを意図していない。

【0115】

本開示は、例示的分野および用途に関して例示的実施形態を説明するが、本開示が、それらに限定されるものではないことを理解されたい。他の実施形態およびそれに対する修正が、可能性として考えられ、本開示の範囲および精神内のものである。例えば、本段落の一般性を限定することなく、実施形態は、図に図示される、および／または本明細書に説明される、ソフトウェア、ハードウェア、ファームウェア、および／またはエンティティに限定されない。さらに、実施形態（本明細書に明示的に説明されているかどうかにかかわらず）は、本明細書に説明される例以外の分野および用途に対して有意な有用性を有する。

【0116】

実施形態は、本明細書では、規定される関数の実装およびそれらの関係を図示する関数構成要素の補助を借りて説明されている。これらの関数構成要素の境界は、本明細書では、説明の利便性のために任意に定義されている。代替の境界が、規定される関数および関係（またはそれらの均等物）が適切に実施される限り、定義されることができる。また、代替実施形態が、本明細書に説明されているものと異なる順序付けを使用して、関数ブロック、ステップ、動作、方法等を実施することができる。

【0117】

本明細書における、「一実施形態」、「ある実施形態」、「例示的実施形態」、または類似語句の言及は、説明される実施形態が、特定の特徴、構造、または特性を含み得るが、全ての実施形態が、必ずしもその特定の特徴、構造、または特性を含まないこともあることを示す。さらに、そのような語句は、必ずしも同一の実施形態を参照しているわけではない。さらに、特定の特徴、構造、または特性がある実施形態と関連して説明されるとき、本明細書に明示的に言及または説明されているかどうかにかかわらず、そのような特徴、構造、または特性を他の実施形態に組み込むことは、当業者の知識の範囲内であろう。加えて、いくつかの実施形態は、それらの派生語とともに、表現「結合される」および「接続される」を使用して説明されることができる。これらの用語は、必ずしも互いのために同義語として意図されていない。例えば、いくつかの実施形態は、２つ以上の要素が互いに直接物理的または電気的に接触していることを示すために、用語「接続される」および／または「結合される」を使用して説明されることができる。しかしながら、用語「結合される」はまた、２つ以上の要素が、互いに直接接触していないが、なおもさらに、互いに協働または相互作用することも意味することができる。

【0118】

本開示の範疇および範囲は、上記に説明される例示的実施形態のうちのいずれによっても限定されるべきではなく、以下の請求項およびそれらの均等物のみに従って定義されるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【国際調査報告】