特開 2022-173071 車両に基づくインタラクション方法、装置、機器、媒体および車両

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022173071

(43)【公開日】2022-11-17

(54)【発明の名称】車両に基づくインタラクション方法、装置、機器、媒体および車両

(51)【国際特許分類】

   G06V 20/56 20220101AFI20221110BHJP

   G06V 40/20 20220101ALI20221110BHJP

   G08B 21/00 20060101ALI20221110BHJP

   G08B 21/02 20060101ALI20221110BHJP

【ＦＩ】

G06V20/56

G06V40/20

G08B21/00 U

G08B21/02

【審査請求】有

【請求項の数】15

【出願形態】ＯＬ

(21)【出願番号】P 2022054980

(22)【出願日】2022-03-30

(31)【優先権主張番号】202110495987.9

(32)【優先日】2021-05-07

(33)【優先権主張国・地域又は機関】CN

(71)【出願人】

【識別番号】521208273

【氏名又は名称】阿波▲羅▼智▲聯▼（北京）科技有限公司

【氏名又は名称原語表記】ＡＰＯＬＬＯ ＩＮＴＥＬＬＩＧＥＮＴ ＣＯＮＮＥＣＴＩＶＩＴＹ（ＢＥＩＪＩＮＧ）ＴＥＣＨＮＯＬＯＧＹ ＣＯ．，ＬＴＤ．

【住所又は居所原語表記】１０１， １ｓｔ Ｆｌｏｏｒ， Ｂｕｉｌｄｉｎｇ １， Ｙａｒｄ ７， Ｒｕｉｈｅ Ｗｅｓｔ ２ｎｄ Ｒｏａｄ， Ｂｅｉｊｉｎｇ Ｅｃｏｎｏｍｉｃ ａｎｄ Ｔｅｃｈｎｏｌｏｇｉｃａｌ Ｄｅｖｅｌｏｐｍｅｎｔ Ｚｏｎｅ， Ｂｅｉｊｉｎｇ １００１７６， Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】周 国▲輝▼

【テーマコード（参考）】

5C086

5L096

【Ｆターム（参考）】

5C086AA22

5C086AA26

5C086BA22

5C086CA25

5C086CA28

5C086CB36

5L096BA02

5L096BA04

5L096BA16

5L096BA17

5L096CA02

5L096CA18

5L096DA02

5L096DA03

5L096FA02

5L096FA66

5L096FA69

5L096GA51

5L096JA11

5L096JA16

(57)【要約】

【課題】車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張することができる車両に基づくインタラクション方法、装置、機器、媒体および車両を提供する。
【解決手段】本開示は、車両に基づくインタラクション方法、装置、機器、媒体および車両を提供し、データ処理の技術分野に関し、更に、インテリジェント車載機器の技術およびＩｏＶ技術に関し、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することと、前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得することと、前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することとを含む。本開示の実施例は、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張することができる。
【選択図】図１

【特許請求の範囲】

【請求項1】

車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することと、
前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得することと、
前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することとを含む、
車両に基づくインタラクション方法。

【請求項2】

車両外部監視モジュールによって収集された車両外部監視情報を取得することと、
前記車両外部監視情報に基づいて前記車両外部接近オブジェクトを確定することとを更に含み、
前記車両外部監視モジュールは、車両レーダおよび／または車両カメラを含む、
請求項１に記載の車両に基づくインタラクション方法。

【請求項3】

車両外部監視モジュールによって収集された車両外部監視情報を取得することは、
前記車両レーダが第１所定範囲内で収集した第１車両外部監視情報を取得すること、および／または
前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することを含む、
請求項２に記載の車両に基づくインタラクション方法。

【請求項4】

前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することは、
前記車両外部接近オブジェクトが第２所定範囲内に位置することを確定した場合、前記車両カメラによってリアルタイムに収集された前記車両外部接近オブジェクトの外部オブジェクト画像データを取得することと、
前記車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記外部オブジェクト画像データを画像認識することとを含む、
請求項３に記載の車両に基づくインタラクション方法。

【請求項5】

車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することは、
前記車両外部接近オブジェクトが第１車両外部接近オブジェクトであり、且つ前記第１車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第１車両外部接近オブジェクトの車両接近距離をリアルタイムに取得することと、
前記車両接近距離に基づいて前記車両インタラクション指示情報を生成することとを含む、
請求項１から４のいずれか１項に記載の車両に基づくインタラクション方法。

【請求項6】

車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することは、
前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであり、且つ前記第２車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第２車両外部接近オブジェクトが車両インタラクション案内情報に基づいて入力したオブジェクトインタラクション意図命令情報を取得することと、
前記オブジェクトインタラクション意図命令情報を前記車両インタラクション指示情報として確定することとを含み、
前記オブジェクトインタラクション意図命令情報は、ジェスチャ動作情報および／または音声命令情報を含む、
請求項１から４のいずれか１項に記載の車両に基づくインタラクション方法。

【請求項7】

関連車両のユーザに車両インタラクション情報を送信することは、
所定の車両インタラクション情報を取得し、前記所定の車両インタラクション情報を前記関連車両のユーザに送信すること、および／または
車両監視情報を取得し、前記車両監視情報をクラウドにアップロードし、前記クラウドにより前記車両監視情報を前記関連車両のユーザに送信することを含み、
前記車両監視情報は、車両内部監視情報および／または車両外部監視情報を含む、
請求項１から６のいずれか１項に記載の車両に基づくインタラクション方法。

【請求項8】

インタラクションタイプ認識結果に基づいて前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであると確定した場合、前記第２車両外部接近オブジェクトのオブジェクトＩＤを取得することと、
前記関連車両のユーザが前記オブジェクトＩＤに基づいて送信したインタラクションマスク命令を受信することと、
前記インタラクションマスク命令に基づき、前記第２車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報の取得を拒否することとを更に含む、
請求項１から７のいずれか１項に記載の車両に基づくインタラクション方法。

【請求項9】

車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得するための車両インタラクション指示情報取得モジュールと、
前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得するためのインタラクションタイプ認識結果取得モジュールと、
前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信するための車両インタラクション情報送信モジュールとを備える、
車両に基づくインタラクション装置。

【請求項10】

車両外部監視モジュールによって収集された車両外部監視情報を取得するための車両外部監視情報取得モジュールと、
前記車両外部監視情報に基づいて前記車両外部接近オブジェクトを確定するための車両外部接近オブジェクト確定モジュールとを更に備え、
前記車両外部監視モジュールは、車両レーダおよび／または車両カメラを含む、
請求項９に記載の車両に基づくインタラクション装置。

【請求項11】

前記車両外部監視情報取得モジュールは、
前記車両レーダが第１所定範囲内で収集した第１車両外部監視情報を取得すること、および／または
前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することに用いられる、
請求項１０に記載の車両に基づくインタラクション装置。

【請求項12】

少なくとも１つのプロセッサと、
前記少なくとも１つのプロセッサに通信接続されたメモリとを備える電子機器であって、
前記メモリには、前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、
前記命令は、前記少なくとも１つのプロセッサが請求項１から８のいずれか１項に記載の車両に基づくインタラクション方法を実行可能であるように、前記少なくとも１つのプロセッサにより実行される、
電子機器。

【請求項13】

コンピュータ命令が記憶された非一時的なコンピュータ可読記憶媒体であって、
前記コンピュータ命令は、コンピュータに、請求項１から８のいずれか１項に記載の車両に基づくインタラクション方法を実行させることに用いられる、
非一時的なコンピュータ可読記憶媒体。

【請求項14】

プロセッサにより実行されると、請求項１から８のいずれか１項に記載の車両に基づくインタラクション方法を実現する、
コンピュータプログラム。

【請求項15】

車体を備える車両であって、
請求項１２に記載の電子機器と、車体に設けられた少なくとも１つの車両レーダと、車体外部に設けられた車両カメラとを更に備える、ことを特徴とする、
車両。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、データ処理の技術分野に関し、具体的には、インテリジェント車載機器の技術およびＩｏＶ技術に関する。

【背景技術】

【0002】

インテリジェント車載機器の技術およびＩｏＶ技術の発展に伴い、車両のヒューマン－コンピュータインタラクション機能は、ますますユーザにより注目される。ヒューマン－コンピュータインタラクションとは、ヒトとコンピュータとの間で何らかの対話言語を使用し、一定のインタラクション方式で確定されたタスクを行うためのヒトとコンピュータとの間の情報交換過程である。車両のヒューマン－コンピュータインタラクションは、ヒトと車両との間のインタラクションを実現することを目的とする。車両のヒューマン－コンピュータインタラクション機能をどのように豊かにするかは、車載機器の知能性およびユーザエクスペリエンスに対して重大な意義を持つ。

【発明の概要】

【発明が解決しようとする課題】

【0003】

本開示の実施例は、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張することができる車両に基づくインタラクション方法、装置、機器、媒体および車両を提供する。

【課題を解決するための手段】

【0004】

態様１において、本開示の実施例は、
車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することと、
前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得することと、
前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することとを含む、
車両に基づくインタラクション方法を提供する。

【0005】

態様２において、本開示の実施例は、
車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得するための車両インタラクション指示情報取得モジュールと、
前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得するためのインタラクションタイプ認識結果取得モジュールと、
前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信するための車両インタラクション情報送信モジュールとを備える、
車両に基づくインタラクション装置を提供する。

【0006】

態様３において、本開示の実施例は、
少なくとも１つのプロセッサと、
前記少なくとも１つのプロセッサに通信接続されたメモリとを備える電子機器であって、
前記メモリには、前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、
前記命令は、前記少なくとも１つのプロセッサが態様１の実施例に係る車両に基づくインタラクション方法を実行可能であるように、前記少なくとも１つのプロセッサにより実行される、
電子機器を提供する。

【0007】

態様４において、本開示の実施例は、
コンピュータ命令が記憶された非一時的なコンピュータ可読記憶媒体であって、
前記コンピュータ命令は、態様１の実施例に係る車両に基づくインタラクション方法を前記コンピュータに実行させることに用いられる、
非一時的なコンピュータ可読記憶媒体を更に提供する。

【0008】

態様５において、本開示の実施例は、
プロセッサにより実行されると、態様１の実施例に係る車両に基づくインタラクション方法を実現する、
コンピュータプログラムを更に提供する。

【0009】

態様６において、本開示の実施例は、
車体を備える車両であって、
態様３に記載の電子機器と、車体に設けられた少なくとも１つの車両レーダと、車体外部に設けられた車両カメラとを更に備える、
ことを特徴とする車両を提供する。

【発明の効果】

【0010】

本開示の実施例は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得した後、車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得し、インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することにより、従来の車両インタラクション機能が完璧ではない等の問題を解決し、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0011】

本開示に記載された内容は、本開示の実施例のキーとなるまたは重要な特徴を標識するためのものではなく、本開示の範囲を限定するものでもないことが理解されるべきである。本開示の他の特徴は、以下の明細書により容易に理解することができる。

【図面の簡単な説明】

【0012】

図面は本形態をより良く理解するためのものであり、本開示を限定するものではない。

【0013】

【図1】本開示の実施例に係る車両に基づくインタラクション方法のフローチャートである。

【図2】本開示の実施例に係る車両に基づくインタラクション方法のフローチャートである。

【図3】本開示の実施例に係る車両に基づくインタラクションシステムの構造模式図である。

【図4】本開示の実施例に係る車両に基づくインタラクション装置の構造図である。

【図5】本開示の実施例の車両に基づくインタラクション方法を実現するための電子機器の構造模式図である。

【発明を実施するための形態】

【0014】

以下、図面を参照しながら本開示の例示的な実施例を詳細に説明する。ここで、理解の便宜上、本開示の実施例に係る様々な細かい内容まで含まれているが、例示的なものに過ぎないと理解すべきである。従って、当業者であれば理解するであろうが、本開示の範囲から逸脱しない限り、ここで説明する実施例に対して様々な変更や修正を行うことができる。同様に、以下の説明において、公知されている機能および構造の説明は、明確且つ簡潔にするために省略している。

【0015】

車両の普及に伴い、特に、インテリジェント車両が人々の生活に入ってき、インテリジェントインタラクションは、徐々に人々に認められるようになった。いくつかのシーンにおいて、車両オーナが車をロックして離れた後、外界がいくつかの問題を解決するために車両オーナとタイムリーに連絡する必要があるが、外界が車両オーナの連絡先をタイムリーに取得できない場合、外界要素は、通常、暴力的に問題を解決することで車両オーナの車両の損傷を引き起してしまう。１つの典型的なシーンは、車両オーナが車をロックして離れた後、別の車両の移動を妨げる可能性があり、妨げられた車両は、車両オーナと連絡して車を移動させようとするが、車両オーナの任意の有効な連絡先を取得できない。極端な場合、妨げられた車両オーナは車両にぶつかってから離れ、車両オーナの財産が損なわれる。別の典型的なシーンは救急警報であり、例えば、車両オーナが赤ちゃんを車内に閉じ込めて離れ、赤ちゃんに生命危険状況が発生したことが他の人に発見されると、車両オーナの任意の有効な連絡先を取得できないと、多くの場合、窓を割って赤ちゃんを救出するしかできないため、車両オーナの財産が損なわれる。

【0016】

一例において、図１は、本開示の実施例に係る車両に基づくインタラクション方法のフローチャートであり、本実施例は、車両外部オブジェクトが車両を介して関連車両のユーザと遠隔インタラクションを行う場合に適用でき、該方法は、車両に基づくインタラクション装置で実行でき、該装置は、ソフトウェアおよび／またはハードウェアの方式で実現でき、一般的に、電子機器に集積できる。該電子機器は車載端末機器であってもよい。それに対応し、図１に示すように、該方法は、以下のような操作を含む。

【0017】

Ｓ１１０において、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得する。

【0018】

ここで、車両外部接近オブジェクトは、車両外部の車両に接近するオブジェクトであってもよい、外部のユーザ（外部ユーザと略称する）であってもよいし、外部車両等の任意の車両に接近するオブジェクトタイプであってもよく、本開示の実施例は、車両外部接近オブジェクトの具体的なオブジェクトタイプを限定しない。車両インタラクション指示情報は、インタラクションを行う必要があることを車両に指示する情報であってもよく、その情報タイプは、文字、音声、画像、または映像等であってもよく、本開示の実施例は、車両インタラクション指示情報の情報タイプを限定しない。

【0019】

本開示の実施例において、車両外部に車両に接近する車両外部接近オブジェクトが存在する場合、車両外部接近オブジェクトは、車両を介して車両インタラクション指示情報をトリガすることができる。それに対応し、車両は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を受信することができる。例示的には、車両外部接近オブジェクトが接近している外部車両である場合、車両インタラクション指示情報は、車両によって収集された外部車両の接近情報であってもよく、例えば、車両は、外部車両Ａと車両との間の距離が１ｍであることを探知すると、「外部障害物が車両の衝突範囲内にある」という警報文字情報を車両インタラクション指示情報とすることができる。車両外部接近オブジェクトが接近している外部ユーザである場合、車両インタラクション指示情報は、外部ユーザが車両に入力した情報であってもよく、例えば、外部ユーザが車両に入力した音声または画像等の形式の命令情報等であってもよい。即ち、車両インタラクション指示情報は、車両外部接近オブジェクトのタイプおよび具体的なインタラクションのニーズに応じて設定でき、本開示の実施例は、車両インタラクション指示情報の具体的なタイプおよび内容を限定しない。

【0020】

なお、車両は、音声形式の車両インタラクション指示情報を収集するように、外部にマイク等のような外部音声情報を収集する音声収集装置を設けてもよい。

【0021】

好ましくは、車両に基づくインタラクション方法を実行する車両は、ロック状態での車両であってもよいし、ロック状態ではなくて車内に人がいない車両であってもよく、本開示の実施例は、車両に基づくインタラクション方法を実行する車両のタイプを限定しない。車両は、具体的に、車載システムにより車両に基づくインタラクション方法を実行することができることが理解できる。

【0022】

Ｓ１２０において、前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得する。

【0023】

ここで、インタラクションタイプ認識結果は、車両が車両インタラクション指示情報のインタラクションタイプを認識して得た結果であってもよい。

【0024】

それに対応し、車両は、車両インタラクション指示情報を受信した後、車両インタラクション指示情報のインタラクションタイプを認識し、車両インタラクション指示情報のインタラクションタイプ認識結果を確認することができる。

【0025】

車両インタラクション指示情報のタイプが異なり、車両インタラクション指示情報のインタラクションタイプを認識する方式も異なることが理解できる。例えば、車両インタラクション指示情報が文字情報である場合、車両は、直接文字を認識し、車両インタラクション指示情報の意味を取得することができる。例示的には、車両インタラクション指示情報が「外部障害物が車両の衝突範囲内にある」という警報文字情報であると仮定すれば、該車両インタラクション指示情報のインタラクションタイプ認識結果は、「障害物が近距離に接近し、緊急避難が必要である」であってもよい。車両インタラクション指示情報が音声情報である場合、車両は、直接音声情報を音声認識し、外部ユーザの意図を取得し、車両インタラクション指示情報に対応する音声命令を生成することができる。例示的には、車両インタラクション指示情報は、外部ユーザが車両に入力した「車両オーナに連絡する必要がある」という音声情報であると仮定すれば、該車両インタラクション指示情報のインタラクションタイプ認識結果は、「外部ユーザは車両オーナへの連絡を要求する」であってもよい。車両インタラクション指示情報が画像または映像情報である場合、車両は、画像または映像情報を画像認識し、外部ユーザの意図を取得し、画像認識結果で表される意味を車両インタラクション指示情報とすることができる。例示的には、車両インタラクション指示情報は外部ユーザが車両に入力したあるジェスチャ動作であり、且つ車両は該ジェスチャ動作に対応する命令が車両オーナに連絡することであると予め設定したと仮定すれば、該車両インタラクション指示情報のインタラクションタイプ認識結果は、「外部ユーザは車両オーナへの連絡を要求する」であってもよい。

【0026】

Ｓ１３０において、前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信する。

【0027】

ここで、ターゲットインタラクションタイプは、関連車両のユーザとインタラクションする必要があるタイプを表すことができる。関連車両のユーザは、車両オーナまたは車両オーナが指定した連絡先等のような車両に対して操作権限を持つユーザであってもよく、本開示の実施例は、関連車両のユーザの具体的なユーザタイプを限定しない。車両インタラクション情報は、関連車両のユーザに外界要求インタラクションを提示する情報であってもよく、そのタイプは文字、音声、画像または映像等であってもよく、本開示の実施例は、車両インタラクション情報の具体的な情報タイプを限定しない。

【0028】

それに対応し、車両は、インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することができる。

【0029】

例示的には、車両は、インタラクションタイプ認識結果が「外部ユーザは車両オーナへの連絡を要求する」であると確定した場合、外界が車両を介して関連車両のユーザとのインタラクションを要求することを表し、該インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定できる。

【0030】

それに対応し、関連車両のユーザに送信される車両インタラクション情報は、様々な情報タイプ方式であってもよい。例えば、車両は、システムが予め設定したテキスト形式の車両インタラクション情報に基づいてメッセージまたは通知等の方式で関連車両のユーザに送信してもよい。または、車両は、外界の映像データをリアルタイムに収集し、映像データをクラウドにアップロードしてもよい。クラウドは、関連車両のユーザに情報提示を送信し、車両インタラクション情報が送信されたことを関連車両のユーザに提示し、車両によって収集された映像データをインタラクション情報として関連車両のユーザに提供することができる。

【0031】

これにより見られるように、車両外部障害物が車両に接近して車両の衝突を引き起こす可能性があるシーンにおいて、車両は、外部障害物の接近状況に応じて車両インタラクション指示情報を自動的に生成し、車両インタラクション指示情報に基づいて更に関連車両のユーザに車両インタラクション情報を送信することができる。この場合、関連車両のユーザは、外部障害物の車両への接近状況をリアルタイムに把握することができ、例えば、車両が取得した外部の映像データにより車両周囲状況を観察し、緊急避難するように車両を遠隔制御する。または、関連車両のユーザは、車両を介して接近している障害物に警告情報を送信し、周囲状況を監視していることを障害物に提示することもできる。または、関連車両のユーザは、駐車現場に到着して処理することもできる。即ち、関連車両のユーザは、車両インタラクション情報に基づいて対応するフィードバックを行うことができる。外部ユーザが関連車両のユーザにタイムリーに連絡する必要があるシーンにおいて、例えば、車両が離れるために車を移動する必要がある、または赤ちゃんは車内で危険がある等のシーンにおいて、外部ユーザが車両に車両インタラクション指示情報を入力することができれば、車両は、車両インタラクション指示情報に基づいて更に関連車両のユーザに車両インタラクション情報を送信することができる。この場合、関連車両のユーザは、外部ユーザがインタラクションを要求することを知り、関連車両のユーザは、車両周囲または車内の状況をリアルタイムに把握することができ、例えば、車両が取得した外部および内部の映像データにより車両周囲および車内の状況を観察し、車内に赤ちゃんが閉じ込められて命の危険があることを確定した場合、アンロックするように車両を速やかに制御することができる。車を移動する必要があることを確定した場合、関連車両のユーザは、移動するように車両を遠隔制御することができる。または、関連車両のユーザは、駐車現場に到着して処理することもできる。即ち、関連車両のユーザは、車両インタラクション情報に基づいて対応するフィードバックを行うことができる。

【0032】

以上をまとめ、本開示の実施例に係る車両に基づくインタラクション方法は、車両外部接近オブジェクトが車両の関連車両のユーザと車両を介して遠隔インタラクションを行うことを実現することができ、車両の知能性を更に向上させ、車両の安全防護アプリケーションの利便性を高め、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0033】

本開示の実施例は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得した後、車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得し、インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することにより、従来の車両インタラクション機能が完璧ではない等の問題を解決し、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0034】

一例において、図２は、本開示の実施例に係る車両に基づくインタラクション方法のフローチャートであり、本開示の実施例は、上記各実施例の技術案の基に最適化して改良し、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得するおよび関連車両のユーザに車両インタラクション情報を送信する様々な具体的な好ましい実現形態を与える。

【0035】

図２に示す車両に基づくインタラクション方法は、以下のステップを含む。

【0036】

Ｓ２１０において、車両外部監視モジュールによって収集された車両外部監視情報を取得する。

【0037】

ここで、前記車両外部監視モジュールは、車両レーダおよび／または車両カメラを含んでもよいが、これらに限定されず、外部監視情報を取得できる任意のモジュールは、いずれも車両外部監視モジュールとすることができ、本開示の実施例は、車両外部監視モジュールの具体的なタイプを限定しない。好ましくは、車両レーダは、超音波レーダ等のタイプであってもよく、車両カメラは、車両外部の画像または映像を取得するための車両外部に設けられたカメラであってもよい。車両外部監視情報は、車両外部の監視情報であってもよいし、車両レーダが探知した情報であってもよいし、車両カメラが取得した外部画像または映像情報であってもよく、本開示の実施例は、これについて限定しない。

【0038】

本開示の実施例において、車両は、車両外部をリアルタイムに監視するために、車両外部監視モジュールにより車両外部監視情報の収集を実施することができる。

【0039】

好ましくは、車両は、赤ちゃんが閉じ込められたまたは不審者がいる等の車内に異常状況が存在することを確定した場合、処理するように関連車両のユーザにタイムリーに提示するために、車両内部監視モジュール（例えば、車両内部カメラ等）により車両内部を監視することもできる。

【0040】

Ｓ２２０において、前記車両外部監視情報に基づいて前記車両外部接近オブジェクトを確定する。

【0041】

それに対応し、車両は、車両外部監視情報に基づいて車両外部接近オブジェクトを確定することができる。具体的には、車両は、車両外部監視情報により車両の所定範囲内に障害物が存在することを確定した場合、車両外部に車両外部接近オブジェクトが存在することを確定することができる。

【0042】

上記形態において、車両によって収集された車両外部監視情報に基づいて車両外部接近オブジェクトを確定し、車両が無人制御の状態（例えば、ロック状態）で車両外部接近オブジェクトを自律的に確定し、車両外部接近オブジェクトに基づいて車両に基づくインタラクション機能を自動的にトリガすることを実現することができる。

【0043】

本開示の１つの好ましい実施例において、前記車両外部監視モジュールによって収集された車両外部監視情報を取得することは、前記車両レーダが第１所定範囲内で収集した第１車両外部監視情報を取得すること、および／または、前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することを含んでもよい。

【0044】

ここで、第１所定範囲および第２所定範囲は実際の必要に応じることができ、例えば、第１所定範囲は１０ｍ等であってもよく、第２所定範囲は５ｍ等であってもよく、本開示の実施例は、第１所定範囲および第２所定範囲の具体的な数値を限定しない。好ましくは、第１所定範囲は第２所定範囲よりも大きくなってもよい。第１車両外部監視情報は、車両レーダによって収集されたレーダ監視情報であってもよく、第２車両外部監視情報は車両カメラによって収集された画像または映像情報であってもよい。

【0045】

本開示の１つの好ましい実施例において、前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することは、前記車両外部接近オブジェクトが第２所定範囲内に位置することを確定した場合、前記車両カメラによってリアルタイムに収集された前記車両外部接近オブジェクトの外部オブジェクト画像データを取得することと、前記車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記外部オブジェクト画像データを画像認識することとを含んでもよい。

【0046】

ここで、車両インタラクション範囲は、カメラを用いて収集した画像データを画像認識する範囲であってもよく、具体的には、実際の必要に応じて設定することができ、本開示の実施例は、これについて限定しない。外部オブジェクト画像データは、車両カメラによって収集された車両外部接近オブジェクトの活動データであってもよい。車両外部接近オブジェクトがカメラの監視範囲内に位置する場合、外部オブジェクト画像データは、車両外部接近オブジェクトの具体的な活動情報を含んでもよいことが理解できる。車両外部接近オブジェクトがカメラの監視範囲外に位置する場合、外部オブジェクト画像データは、車両外部接近オブジェクトの具体的な活動情報を含まない。通常、車両外部に複数のカメラが設けられ、各カメラは、車両の異なる角度の画像データを収集することができ、全てのカメラにより収集された画像データは、車両周囲の全ての角度の範囲をカバーすることができる。従い、通常、少なくとも１つの車両カメラにより収集された外部オブジェクト画像データには、車両外部接近オブジェクトの活動情報が含まれる。

【0047】

本開示の実施例において、好ましくは、車両レーダにより第１所定範囲内で第１車両外部監視情報を収集し、車両カメラにより第２所定範囲内で第２車両外部監視情報を収集することができる。車両カメラにより第２所定範囲内で第２車両外部監視情報を収集する過程において、車両は、車両外部接近オブジェクトが第２所定範囲内に位置するが、車両インタラクション範囲外に位置することを確定した場合、車両カメラがリアルタイムに収集して記憶する車両外部接近オブジェクトの外部オブジェクト画像データに基づくことができる。車両は、車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、車両は、車両外部接近オブジェクトが車両に衝突する活動傾向を有し、または車両外部接近オブジェクトが車両カメラに対してジェスチャ動作を実行する等のような車両外部接近オブジェクトの具体的な活動内容を確定するために、外部オブジェクト画像データを収集し続け、車両カメラによって収集された外部オブジェクト画像データを画像認識するように車両カメラを制御することができる。

【0048】

１つの具体的な例において、車両オーナが車をロックして離れた後、車両は、常に超音波レーダ探知機能をオンにし、超音波レーダにより第１所定範囲内で、接近している他の車両または歩行者等のような車両に接近する車両外部接近オブジェクトを探知する。好ましくは、超音波レーダの探知は、車両外部接近オブジェクトの距離の近さに応じてそれぞれ車載ホストコンピュータに異なる警報信号をフィードバックすることができ、例えば、車両外部接近オブジェクトが車両より５ｍの範囲に接近すると、レベル１の警報をトリガし、車両外部接近オブジェクトが車両より１ｍの範囲に接近すると、レベル２の警報をトリガする。好ましくは、超音波レーダがレベル１の警報をトリガすると、車両外部接近オブジェクトが第２所定範囲内に位置することを確定できる。この場合、車両は、車両カメラをオンにして車両外部接近オブジェクトの第２所定範囲内の外部オブジェクト画像データを収集して第２車両外部監視情報とすることができる。超音波レーダがレベル２の警報をトリガすると、車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定できる。この場合、車両は、車両カメラによって収集された外部オブジェクト画像データを画像認識し、画像認識結果を記憶することができる。車両の安全防護対策を更に向上させるために、車両は、車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、車両は、車両外部接近オブジェクトが車両外部情報を監視していることを提示するために、規則的に点滅するようにランプを制御することもできる。

【0049】

車両レーダが低い消費電力を有するため、車両がロック状態にあっても、車両レーダにより車両外部監視情報を収集しても過剰な電力を消費しない。車両レーダが車両外部接近オブジェクトしか探知できず、車両外部接近オブジェクトのタイプを認識できないことを考慮するため、車両レーダにより車両外部接近オブジェクトと車両との距離が近すぎることを確定した場合、カメラにより車両外部接近オブジェクトの活動情報を収集し、カメラによって収集された情報に基づいて車両外部接近オブジェクトの具体的な活動状態を正確に取得することができる。これにより分かるように、上記車両レーダと車両カメラとを組み合わせて車両外部監視情報を収集する方式は、車両の低消費電力のニーズを満たすだけでなく、更に車両外部監視情報の収集ニーズを満たすこともできる。

【0050】

それと同時に、車両外部接近オブジェクトが第２所定範囲内に位置する場合、車両カメラのみで外部オブジェクト画像データを収集する。外部ユーザが、通常、車両付近で、音声命令を送信するまたはジェスチャ動作を実行する等のような車両インタラクション指示情報をトリガすることを考慮した上、車両は、車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合のみに画像認識機能をオンにし、車両インタラクション指示情報を取得し、車両の消費電力を更に低減する。

【0051】

Ｓ２３０において、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得する。

【0052】

本開示の１つの好ましい実施例において、前記車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することは、前記車両外部接近オブジェクトが第１車両外部接近オブジェクトであり、且つ前記第１車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第１車両外部接近オブジェクトの車両接近距離をリアルタイムに取得することと、前記車両接近距離に基づいて前記車両インタラクション指示情報を生成することとを含んでもよい。

【0053】

ここで、第１車両外部接近オブジェクトは、車両、動物または他の障害物等のような外部ユーザ以外のオブジェクトであってもよい。車両接近距離は、第１車両外部接近オブジェクトと車両との間の距離であってもよい。

【0054】

好ましくは、車両は、車両外部接近オブジェクトが第１車両外部接近オブジェクトであると確定し、且つ、第１車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、第１車両外部接近オブジェクトの車両接近距離を車両レーダによりリアルタイムに取得し、車両接近距離に基づいて前記車両インタラクション指示情報を生成することができる。例えば、車両接近距離が１ｍよりも小さい場合、生成された車両インタラクション指示情報は「外部障害物が車両の衝突範囲内にある」であってもよく、車両接近距離が負の値である場合、生成された車両インタラクション指示情報は「外部障害物が車両に衝突した」であってもよい。

【0055】

上記技術案は、車両接近距離により車両インタラクション指示情報を生成し、関連車両のユーザは第１車両外部接近オブジェクトの車両に接近する状態をリアルタイムに把握することができる。

【0056】

本開示の１つの好ましい実施例において、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することは、前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであり、且つ前記第２車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第２車両外部接近オブジェクトが車両インタラクション案内情報に基づいて入力したオブジェクトインタラクション意図命令情報を取得することと、前記オブジェクトインタラクション意図命令情報を前記車両インタラクション指示情報として確定することとを含んでもよく、ここで、前記オブジェクトインタラクション意図命令情報は、ジェスチャ動作命令情報および／または音声命令情報を含む。

【0057】

ここで、第２車両外部接近オブジェクトは外部ユーザであってもよい。車両インタラクション案内情報は、入力車両インタラクション指示情報を入力するように外部ユーザを案内する情報であってもよく、その情報タイプは、文字、音声、画像または映像等であってもよく、本開示の実施例は、これについて限定しない。オブジェクトインタラクション意図命令情報は、第２車両外部接近オブジェクトが車両インタラクション案内情報に基づいて入力した情報であってもよい。

【0058】

好ましくは、車両は、車両外部接近オブジェクトが第２車両外部接近オブジェクトであると確定し、且つ第２車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、第２車両外部接近オブジェクトである外部ユーザは、車両を介して車両インタラクション案内情報を取得することができる。例えば、関連車両のユーザは、車両のフロントウィンドウに警告標識を貼り付け、警告標識の標語は「車両の真正面から１ｍの位置に立ち、左手がいいねのジェスチャをし、右手がｏｋのジェスチャをしてください。正しく認識できれば、ランプが２回点滅し、既にメッセージを送信してできるだけ早く車を移動することを車両オーナに伝えたことを操作者に提示する」であり、該警告標識の標語は、車両インタラクション案内情報とすることができる。または、車両は、更に音声アナウンスまたは音声映像等の方式により外部ユーザに車両インタラクション案内情報を表示することもでき、本開示の実施例は、これについて限定しない。それに対応し、外部ユーザは、車両インタラクション案内情報の案内に応じてオブジェクトインタラクション意図命令情報を車両に入力することができ、例えば、車両インタラクション案内情報に基づいて関連する音声命令情報を入力したり、対応するジェスチャ動作等を実行したりする。この場合、車両は、オブジェクトインタラクション意図命令情報を取得し、オブジェクトインタラクション意図命令情報を車両インタラクション指示情報として確定することができる。

【0059】

上記技術案は、車両インタラクション案内情報を用いて車両インタラクション指示情報をトリガするように第２車両外部接近オブジェクトを案内することにより、車両を中間媒体とし、外部ユーザが車両を介して外界とのインタラクションのニーズがあることを関連車両のユーザに通知することを実現でき、関連車両のユーザは、外界とのインタラクションのニーズをリアルタイムに取得することができる。

【0060】

Ｓ２４０において、前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得する。

【0061】

一部のシーンにおいて、車両外部接近オブジェクトが外部ユーザである場合、外部ユーザによってトリガされた車両インタラクション指示情報は正確でない可能性があることが理解できる。例えば、車両は、車両インタラクション案内情報により、予め設定されたジェスチャ動作を実行するように外部ユーザを案内するが、外部ユーザが実行したジェスチャ動作が予め設定されたジェスチャ動作にマッチングしない場合、インタラクションタイプ認識結果がターゲットインタラクションタイプでないことを確定し、この場合、車両のインタラクション機能をトリガできない。

【0062】

Ｓ２５０において、前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信する。

【0063】

本開示の１つの好ましい実施例において、前記関連車両のユーザに車両インタラクション情報を送信することは、所定の車両インタラクション情報を取得し、前記所定の車両インタラクション情報を前記関連車両のユーザに送信すること、および／または、車両監視情報を取得し、前記車両監視情報をクラウドにアップロードし、前記クラウドにより前記車両監視情報を前記関連車両のユーザに送信することを含んでもよく、ここで、前記車両監視情報は、車両内部監視情報および／または車両外部監視情報を含む。

【0064】

ここで、所定の車両インタラクション情報は、車載システムが予め設定した車両インタラクション情報であってもよい。車両監視情報は、車両が取得した内部または外部の監視情報であってもよい。

【0065】

本開示の実施例において、様々な好ましい形態を用いて関連車両のユーザに車両インタラクション情報を送信することができる。例えば、車両は、直接システムに記憶された所定の車両インタラクション情報を取得し、所定の車両インタラクション情報を関連車両のユーザに送信することができる。例えば、所定の車両インタラクション情報は、「障害物が近距離に車両に接近し、緊急避難が必要である」または「外部ユーザは車両オーナへの連絡を要求する」等であってもよい。車両は、更に車両内部監視情報および／または車両外部監視情報等の車両監視情報を取得し、車両監視情報をクラウドにアップロードすることもできる。クラウドは、車両監視情報を直接車両インタラクション情報として関連車両のユーザに送信することができる。

【0066】

上記技術案は、様々な好ましい形態を用いて関連車両のユーザに車両インタラクション情報を送信し、車両インタラクション情報を送信する方式を豊かにする。

【0067】

本開示の１つの好ましい実施例において、車両に基づくインタラクション方法は、インタラクションタイプ認識結果に基づいて前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであると確定した場合、前記第２車両外部接近オブジェクトのオブジェクトＩＤを取得することと、前記関連車両のユーザが前記オブジェクトＩＤに基づいて送信したインタラクションマスク命令を受信することと、前記インタラクションマスク命令に基づき、ターゲット第２車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報の取得を拒否することとを更に含んでもよい。

【0068】

ここで、オブジェクトＩＤは、第２車両外部接近オブジェクトである外部ユーザの身分を識別することに使用できる。インタラクションマスク命令は、第２車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報の受信を禁止するように車両に指示する命令であってもよい。ターゲット第２車両外部接近オブジェクトは、関連車両のユーザにより指定された第２車両外部接近オブジェクトであってもよい。

【0069】

一部の外部ユーザが上記車両に基づくインタラクション方法を用いて関連車両のユーザに嫌がらせをする可能性があることを考慮し、関連車両のユーザのプライバシー保護を実現するために、車両は、各外部ユーザに対して対応するオブジェクトＩＤを設けて各外部ユーザを一意に識別することができ、例えば、外部ユーザの顔認識結果を用いて対応するオブジェクトＩＤ等を確定する。ある外部ユーザに不正行為が存在すれば、関連車両のユーザは、該外部ユーザのオブジェクトＩＤに対してインタラクションマスク命令を設定して車両に送信することにより、該外部ユーザによってトリガされた車両インタラクション指示情報の受信を拒否するように車両に指示することができる。車両は、インタラクションマスク命令を受信すると、インタラクションマスク命令に応じてターゲット第２車両外部接近オブジェクトを確定し、即ち、ターゲット外部ユーザを確定することにより、ターゲット第２車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報の取得を拒否することができ、ターゲット第２車両外部接近オブジェクトは、車両を介して関連車両のユーザとインタラクションすることができなくなる。または、関連車両のユーザは、車両に基づくインタラクション機能を直接オフにしてもよい。

【0070】

図３は、本開示の実施例に係る車両に基づくインタラクションシステムの構造模式図であり、１つの具体的な例において、図３に示すように、車両に基づくインタラクションシステムは、緊急時に車両オーナと自律的にインタラクションを行う方式を実現することができ、超音波レーダ探知モジュール、映像画像認識モジュール、車両警報モジュール、情報伝達モジュール、および車両オーナプライバシー保護モジュール等の様々な機能モジュールのタイプを含んでもよく、車をロックして離れた状態で車両オーナの車両財産安全を保証するニーズを全面的に満たす。

【0071】

ここで、超音波レーダ探知機能は、主に、車両オーナが車をロックして離れた後、接近している他の車両または歩行者等のような車両に接近する障害物を探知することに用いられる。このモジュールの主な機能は、障害物を探知し、障害物の距離の近さに応じてそれぞれ車載ホストコンピュータに異なる警報信号をフィードバックすることであり、例えば、障害物が車両より５ｍの範囲に接近すると、レベル１の警報をトリガし、障害物が車両より１ｍの範囲に接近すると、レベル２の警報をトリガする。

【0072】

車両警報モジュールは、異なる警報レベルに応じて処理を行うことに用いられる。レベル１の警報は車載カメラを喚起して認識録画を行い、レベル２の警報は映像録画の画像を認識して記憶するとともに、ランプが点滅して車両が監視していることを歩行者に提示する。

【0073】

画像認識モジュールは、主に、歩行者のジェスチャ動作を認識し、例えば、フロントウィンドウに警告標識を貼り付け、「車両の真正面から１ｍの位置に立ち、左手がいいねのジェスチャをし、右手がｏｋのジェスチャをしてください。正しく認識できれば、ランプが２回点滅し、既にメッセージを送信してできるだけ早く車を移動することを車両オーナに伝えたことを操作者に提示する」ことを歩行者に提示し、歩行者は、指導に応じて車両オーナに通知する。

【0074】

情報伝達モジュールは、主に、他の人・車両が離れるために車を移動する必要がある、または赤ちゃんは車内で危険がある等のことをメッセージ等の形式で車両オーナに警告する。該モジュールは、映像データをクラウドに伝送することもでき、車両オーナは、映像データにより車周囲の状況および車内の状況を観察し、対応するフィードバックを行うことができる。

【0075】

プライバシー保護モジュールは、主に、車両オーナのプライバシーを保護し、歩行者が該機能を介して車両オーナに嫌がらせをすれば、車両オーナは、該機能をオフにしたり、画像認識技術を用いてマスクする必要がある人を認識し、ハラッサーがマスクされた後、ジェスチャにより該機能をトリガすることができない。

【0076】

上記技術案は、車両レーダおよび／または車両カメラ等の方式を用いて車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得し、車両インタラクション指示情報に基づいて関連車両のユーザとの間接的なインタラクションを実現し、電話番号漏洩等のような従来方式による車両ユーザのプライバシー漏洩の問題を回避することができるだけでなく、更に、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0077】

本開示の技術案において、関するユーザの個人情報（例えば、顔情報、音声情報等）の取得、記憶および適用等は、いずれも関連法律法規の規定に該当し、且つ公序良俗に反しない。

【0078】

なお、以上の各実施例における各技術特徴間の任意の組み合わせも本開示の保護範囲に属する。

【0079】

一例において、図４は、本開示の実施例に係る車両に基づくインタラクション装置の構造図であり、本開示の実施例は、車両外部オブジェクトが車両を介して関連車両のユーザと遠隔インタラクションを行う場合に適用でき、該装置は、ソフトウェアおよび／またはハードウェアで実現され、具体的に電子機器に構成される。該電子機器は車載端末機器であってもよい。

【0080】

図４に示す車両に基づくインタラクション装置３００は、車両インタラクション指示情報取得モジュール３１０と、インタラクションタイプ認識結果取得モジュール３２０と、車両インタラクション情報送信モジュール３３０とを備える。

【0081】

車両インタラクション指示情報取得モジュール３１０は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得することに用いられる。

【0082】

インタラクションタイプ認識結果取得モジュール３２０は、前記車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得することに用いられる。

【0083】

車両インタラクション情報送信モジュール３３０は、前記インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することに用いられる。

【0084】

本開示の実施例は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得した後、車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得し、インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することにより、従来の車両インタラクション機能が完璧ではない等の問題を解決し、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0085】

好ましくは、車両に基づくインタラクション装置は、車両外部監視モジュールによって収集された車両外部監視情報を取得するための車両外部監視情報取得モジュールと、前記車両外部監視情報に基づいて前記車両外部接近オブジェクトを確定するための車両外部接近オブジェクト確定モジュールとを更に備えてもよく、ここで、前記車両外部監視モジュールは、車両レーダおよび／または車両カメラを含む。

【0086】

好ましくは、車両外部監視情報取得モジュールは、具体的に、前記車両レーダが第１所定範囲内で収集した第１車両外部監視情報を取得すること、および／または、前記車両カメラが第２所定範囲内で収集した第２車両外部監視情報を取得することに用いられる。

【0087】

好ましくは、車両外部監視情報取得モジュールは、具体的に、前記車両外部接近オブジェクトが第２所定範囲内に位置することを確定した場合、前記車両カメラによってリアルタイムに収集された前記車両外部接近オブジェクトの外部オブジェクト画像データを取得することと、前記車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記外部オブジェクト画像データを画像認識することとに用いられる。

【0088】

好ましくは、車両インタラクション指示情報取得モジュール３１０は、具体的に、前記車両外部接近オブジェクトが第１車両外部接近オブジェクトであり、且つ前記第１車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第１車両外部接近オブジェクトの車両接近距離をリアルタイムに取得することと、前記車両接近距離に基づいて前記車両インタラクション指示情報を生成することとに用いられる。

【0089】

好ましくは、車両インタラクション指示情報取得モジュール３１０は、具体的に、前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであり、且つ前記第２車両外部接近オブジェクトが車両インタラクション範囲内に位置することを確定した場合、前記第２車両外部接近オブジェクトが車両インタラクション案内情報に基づいて入力したオブジェクトインタラクション意図命令情報を取得することと、前記オブジェクトインタラクション意図命令情報を前記車両インタラクション指示情報として確定することとに用いられ、ここで、前記オブジェクトインタラクション意図命令情報は、ジェスチャ動作情報および／または音声命令情報を含む。

【0090】

好ましくは、車両インタラクション情報送信モジュール３３０は、具体的に、所定の車両インタラクション情報を取得し、前記所定の車両インタラクション情報を前記関連車両のユーザに送信すること、および／または、車両監視情報を取得し、前記車両監視情報をクラウドにアップロードし、前記クラウドにより前記車両監視情報を前記関連車両のユーザに送信することに用いられ、ここで、前記車両監視情報は、車両内部監視情報および／または車両外部監視情報を含む。

【0091】

好ましくは、車両に基づくインタラクション装置は、インタラクションタイプ認識結果に基づいて前記車両外部接近オブジェクトが第２車両外部接近オブジェクトであると確定した場合、前記第２車両外部接近オブジェクトのオブジェクトＩＤを取得するためのオブジェクトＩＤ取得モジュールと、前記関連車両のユーザが前記オブジェクトＩＤに基づいて送信したインタラクションマスク命令を受信するためのインタラクションマスク命令受信モジュールと、前記インタラクションマスク命令に基づき、ターゲット第２車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報の取得を拒否するための車両インタラクション指示情報取得拒否モジュールとを備えてもよい。

【0092】

上記車両に基づくインタラクション装置は、本開示のいずれかの実施例に係る車両に基づくインタラクション方法を実行することができ、方法の実行に対応する機能モジュールおよび有益な効果を備える。本実施例で詳しく説明されていない技術詳細は、本開示のいずれかの実施例に係る車両に基づくインタラクション方法を参照することができる。

【0093】

上記車両に基づくインタラクション装置が本開示の実施例における車両に基づくインタラクション方法を実行できる装置であるため、本開示の実施例に係る車両に基づくインタラクション方法に基づき、当業者は、本実施例の車両に基づくインタラクション装置の具体的な実施形態およびその様々な変形を知ることができるため、ここで、該車両に基づくインタラクション装置が、本開示の実施例における車両に基づくインタラクション方法をどのように実現するかについて詳細に説明しない。当業者が本開示の実施例における車両に基づくインタラクション方法を実施するために使用する装置であれば、本開示の保護オブジェクトとする範囲に属する。

【0094】

一例において、本開示は、電子機器と、可読記憶媒体と、コンピュータプログラム製品とを更に提供する。

【0095】

図５は、本開示の実施例の実施に使用可能な例示的な電子機器４００の模式的なブロック図を示す。電子機器は、ラップトップ型コンピュータ、デスクトップ型コンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレーム、および他の適切なコンピュータのような様々な形式のデジタルコンピュータを表すことを目的とする。電子機器は、携帯端末、携帯電話、スマートフォン、ウェララブル機器および他の類似する計算装置のような様々な形式の移動装置を表すこともできる。本開示に示されたコンポーネント、それらの接続、関係、およびそれらの機能は例示的なものに過ぎず、本開示に記載および／または要求される本開示の実現を限定するものではない。

【0096】

図５に示すように、機器４００は、計算ユニット４０１を備え、読み出し専用メモリ（ＲＯＭ）４０２に記憶されたコンピュータプログラム、または記憶ユニット４０８からランダムアクセスメモリ（ＲＡＭ）４０３にロードされたコンピュータプログラムに基づき、様々な適当な動作および処理を実行することができる。ＲＡＭ ４０３には、機器４００の操作に必要な様々なプログラムおよびデータが記憶されてもよい。計算ユニット４０１、ＲＯＭ ４０２およびＲＡＭ ４０３は、バス４０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）インタフェース４０５もバス４０４に接続されている。

【0097】

機器４００における複数のコンポーネントはＩ／Ｏインタフェース４０５に接続され、キーボード、マウス等のような入力ユニット４０６と、各種のディスプレイ、スピーカ等のような出力ユニット４０７と、磁気ディスク、光ディスク等のような記憶ユニット４０８と、ネットワークカード、モデム、無線通信送受信機等のような通信ユニット４０９とを備える。通信ユニット４０９は、機器４００がインターネットのようなコンピュータネットワークおよび／または様々な電気通信ネットワークを介して他のデバイスと情報／データを交換することを許容する。

【0098】

計算ユニット４０１は、処理および計算能力を有する汎用および／または専用の処理アセンブリであってもよい。計算ユニット４０１のいくつかの例は、中央処理ユニット（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、各種の専用の人工知能（ＡＩ）コンピューティングチップ、各種の機械学習モデルアルゴリズムを実行する計算ユニット、デジタルシグナルプロセッサ（ＤＳＰ）、および任意の適当なプロセッサ、コントローラ、マイクロコントローラ等を含んでもよいが、これらに限定されない。計算ユニット４０１は、上記様々な方法および処理、例えば、車両に基づくインタラクション方法を実行する。例えば、いくつかの実施例において、車両に基づくインタラクション方法は、コンピュータソフトウェアプログラムとして実現でき、有形的に記憶ユニット４０８のような機器可読媒体に含まれている。いくつかの実施例において、コンピュータプログラムの一部または全ては、ＲＯＭ ４０２および／または通信ユニット４０９を介して機器４００にロードおよび／またはインストールされ得る。コンピュータプログラムがＲＡＭ ４０３にロードされて計算ユニット４０１により実行されると、上記車両に基づくインタラクション方法の１つまたは複数のステップを実行することができる。あるいは、他の実施例において、計算ユニット４０１は、他の任意の適当な方式（例えば、ファームウェアを介して）により、車両に基づくインタラクション方法を実行するように構成され得る。

【0099】

本開示に記載されたシステムおよび技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準パーツ（ＡＳＳＰ）、システムオンチップのシステム（ＳＯＣ）、複合プログラマブルロジックデバイス（ＣＰＬＤ）、コンピュータハードウェア、ファームウェア、ソフトウェア、および／またはそれらの組み合わせで実現できる。これらの様々な実施形態は以下を含んでもよい。１つまたは複数のコンピュータプログラムに実施され、該１つまたは複数のコンピュータプログラムは、少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステムで実行および／または解釈することができ、該プログラマブルプロセッサは、ストレージシステム、少なくとも１つの入力装置、および少なくとも１つの出力装置からデータおよび命令を受信し、且つデータおよび命令を、該ストレージシステム、該少なくとも１つの入力装置、および該少なくとも１つの出力装置に伝送することができる専用または汎用のプログラマブルプロセッサであってもよい。

【0100】

本開示の方法を実施するためのプログラムコードは、１つまたは複数のプログラミング言語の任意の組み合わせでコードできる。これらのプログラムコードは、汎用コンピュータ、専用コンピュータ、または他のプログラマブルデータ処理装置のプロセッサまたはコントローラに提供でき、これにより、プログラムコードがプロセッサまたはコントローラにより実行されると、フローチャートおよび／またはブロック図で規定された機能／操作が実施される。プログラムコードは、完全に機器で実行されてもよいし、一部が機器で実行されてもよいし、独立したソフトウェアパッケージとして一部が機器で実行されて一部がリモート機器で実行されてもよいし、完全にリモート機器またはサーバで実行されてもよい。

【0101】

本開示の明細書において、機器可読媒体は、命令実行システム、装置またはデバイスに使用される、または命令実行システム、装置またはデバイスと合わせて使用されるプログラムを含有または記憶できる有形的な媒体であってもよい。機器可読媒体は、機器可読信号媒体または機器可読記憶媒体であってもよい。機器可読媒体は、電子の、磁気の、光の、電磁気の、赤外線の、または半導体のシステム、装置またはデバイス、または上記内容の任意の適当な組み合わせを含んでもよいが、これらに限定されない。機器可読記憶媒体の更なる具体的な例は、１つまたは複数の線による電気的接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、消去可能なプログラマブル読み出し専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、ポータブルコンパクトディスク読み出し専用ディスク（ＣＤ－ＲＯＭ）、光記憶デバイス、磁気記憶デバイス、または上記内容の任意の適当な組み合わせを含む。

【0102】

ユーザとのインタラクションを提供するために、ここで説明するシステムおよび技術をコンピュータで実施することができ、該コンピュータは、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）またはＬＣＤ（液晶ディスプレイ）モニタ）と、ユーザがそれにより入力をコンピュータに提供することができるキーボードおよび指向装置（例えば、マウスまたはトラックボール）とを有する。他の種類の装置は、更にユーザとのインタラクションを提供するために使用できる。例えば、ユーザに提供されるフィードバックは、任意の形式のセンシングフィードバック（例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック）であってもよく、且つ、任意の形式（音入力、音声入力または、触覚入力を含む）でユーザからの入力を受信することができる。

【0103】

ここで説明するシステムおよび技術を、バックグラウンドコンポーネントを含むコンピュータシステム（例えば、データサーバとする）、または中間コンポーネントを含むコンピュータシステム（例えば、アプリケーションサーバ）、またはフロントエンドコンポーネントを含むコンピュータシステム（例えば、ユーザがそれによりここで説明するシステムおよび技術の実施形態とインタラクションできるグラフィカルユーザインタフェースまたはネットワークブラウザを有するユーザコンピュータ）、またはこのようなバックグラウンドコンポーネント、中間コンポーネント、またはフロントエンドコンポーネントの任意の組み合わせを含むコンピュータシステムに実施することができる。任意の形式または媒体のデジタルデータ通信（例えば、通信ネットワーク）により、システムのコンポーネントを互に接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、ブロックチェーンネットワーク、およびインターネットを含む。

【0104】

コンピュータシステムはクライアントおよびサーバを含んでもよい。クライアントとサーバとは、一般的に互いに離れ、且つ、通常、通信ネットワークを介してインタラクションを行う。対応するコンピュータで実行されて互いにクライアント－サーバ関係を持つコンピュータプログラムにより、クライアントとサーバとの関係を生成する。サーバはクラウドサーバであってもよく、クラウドコンピューティングサーバまたはクラウドホストとも呼ばれ、クラウドコンピューティングサービス体系における１つのホスト製品であり、従来の物理ホストおよびＶＰＳサービスに存在する管理しにくく、トラフィックの拡張性が弱いという欠陥を解決するために使用される。

【0105】

本開示の実施例は、車両外部接近オブジェクトによってトリガされた車両インタラクション指示情報を取得した後、車両インタラクション指示情報のインタラクションタイプを認識し、インタラクションタイプ認識結果を取得し、インタラクションタイプ認識結果がターゲットインタラクションタイプであると確定した場合、関連車両のユーザに車両インタラクション情報を送信することにより、従来の車両インタラクション機能が完璧ではない等の問題を解決し、車両のインタラクション機能を豊かにし、インテリジェント車両のインタラクション使用シーンを拡張する。

【0106】

上記実施例の基に、本開示の実施例は、車体を備える車両を更に提供し、上記実施例に記載の電子機器と、車体に設けられた少なくとも１つの車両レーダと、車体外部に設けられた車両カメラとを更に備える。好ましくは、車両は、車体外部に設けられた音声収集モジュールと情報表示モジュールとを更に備えてもよい。好ましくは、情報表示モジュールは、文字、音声、画像または映像等のタイプの情報を表示することに使用できる。

【0107】

上記に示す様々な形式のフローを用い、ステップを並べ替え、追加または削除することができることを理解すべきである。例えば、本発明に記載された各ステップは、並列に実行されてもよいし、順に実行されてもよいし、異なる順序で実行されてもよく、本開示に開示された技術案の所望する結果を達成できる限り、本開示はここで限定しない。

【0108】

上記具体的な実施形態は、本開示の保護範囲を限定するものではない。当業者は、設計要求および他の要因に基づき、様々な修正、組み合わせ、サブ組み合わせおよび代替が可能であることを理解すべできる。本発明の精神および原則内で行われる任意の修正、均等置換および改良等は、いずれも本開示の保護範囲内に含まれているべきである。

【図1】

【図2】

【図3】

【図4】

【図5】