特表 2022-553174 ビデオ検索方法、装置、端末、及び記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2022-12-22

(54)【発明の名称】ビデオ検索方法、装置、端末、及び記憶媒体

(51)【国際特許分類】

   G06F 16/735 20190101AFI20221215BHJP

   G06F 16/738 20190101ALI20221215BHJP

【ＦＩ】

G06F16/735

G06F16/738

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2022522608

(86)(22)【出願日】2020-09-11

(85)【翻訳文提出日】2022-04-14

(86)【国際出願番号】 CN2020114799

(87)【国際公開番号】W WO2021073328

(87)【国際公開日】2021-04-22

(31)【優先権主張番号】201910990463.X

(32)【優先日】2019-10-17

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＪＡＶＡ

２．ＳＭＡＬＬＴＡＬＫ

(71)【出願人】

【識別番号】520476341

【氏名又は名称】北京字節跳動網絡技術有限公司

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂｙｔｅｄａｎｃｅ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】Ｒｏｏｍ Ｂ－００３５， ２／Ｆ， Ｎｏ．３ Ｂｕｉｌｄｉｎｇ， Ｎｏ．３０， Ｓｈｉｘｉｎｇ Ｒｏａｄ， Ｓｈｉｊｉｎｇｓｈａｎ Ｄｉｓｔｒｉｃｔ Ｂｅｉｊｉｎｇ １０００４１ Ｃｈｉｎａ

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】王 子昂

(72)【発明者】

【氏名】▲張▼ 永▲華▼

(72)【発明者】

【氏名】王 ▲暁▼露

【テーマコード（参考）】

5B175

【Ｆターム（参考）】

5B175DA04

5B175HA01

(57)【要約】

本発明は、ビデオ検索方法、装置、端末及び記憶媒体を提供する。ビデオ検索方法は、ビデオ再生画面において第一制御部の触発により形成される第一事項を受信するステップと、前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得するステップと、現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象と前記第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップと、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ前記第一推薦結果を検索結果画面に表示するステップとを含む。本発明のビデオ検索方法で、ビデオ中の人物と物品を認識し、分類の問題を解決し、類似している結果を検索することにより、使用者はビデオ中の商品と人物に関する情報を獲得することができる。

【特許請求の範囲】

【請求項1】

ビデオ検索方法であって、
ビデオ再生画面において、第一制御部の触発により形成される第一事項を受信するステップと、
前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得するステップと、
前記現在のビデオ画像フレームにおいて、第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が前記現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップと、
前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップと、を含む、
ことを特徴とする、方法。

【請求項2】

前記第二制御部は、フローティングボックスまたはフローティングポイントのうち少なくとも１つを含む、
ことを特徴とする、請求項１に記載の方法。

【請求項3】

前記第一検索待機対象は、第一目標と第二目標を含み、前記第二制御部は、フローティングボックスまたはフローティングポイントを含み、
前記現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップは、
前記現在のビデオ画像フレームにおいて前記フローティングボックスにより位置が決められる前記第一目標と前記フローティングポイントにより位置が決められる前記第二目標とをそれぞれ獲得するステップと、
前記第一目標が前記現在のビデオ画像フレームに位置している表示位置と、前記第二目標が前記現在のビデオ画像フレームに位置している表示位置とを獲得するステップと、
前記第一目標が前記現在のビデオ画像フレームに位置している表示位置に前記フローティングボックスを表示し、前記第二目標が前記現在のビデオ画像フレームに位置している表示位置に前記フローティングポイントを表示するステップと、
を含む、
ことを特徴とする、請求項２に記載の方法。

【請求項4】

前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップは、
前記第一目標に対応する第一推薦待機結果と、前記第二目標に対応する第二推薦待機結果とをそれぞれ獲得するステップと、
前記第一目標を認識する第一ラベルと、前記第一推薦結果とを前記検索結果画面中の第一区域内に表示するステップと、
前記第二目標を認識する第二ラベルと、第二推薦結果とを前記検索結果画面中の第二区域内に表示するステップと、
を含む、
ことを特徴とする、請求項３に記載の方法。

【請求項5】

前記第一推薦待機結果は、有効目標と無効目標を更に含み、
前記ビデオ検索方法は、さらに、
前記ビデオ再生画面に再生されているビデオ中のすべてのビデオ画像フレームを獲得するステップと、
各前記ビデオ画像フレーム中の前記有効目標を獲得することにより全局結果を獲得するステップと、含み、
前記有効目標は、人物、商品及び物品のうち少なくとも一種を含み、前記無効目標は、前記有効目標以外の目標結果である、
ことを特徴とする、請求項４に記載の方法。

【請求項6】

前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップは、さらに、
前記第一推薦待機結果が有効目標である場合、前記有効目標に対応する前記第一推薦結果を獲得し、かつ、前記第一推薦結果を前記検索結果画面に表示し、前記第一推薦待機結果が無効目標である場合、前記検索結果画面に結果がないと表示するステップ、または、
前記第一推薦待機結果が有効目標である場合、前記有効目標に対応する前記第一推薦結果を獲得し、かつ、前記第一推薦結果と前記第一推薦結果以外の前記全局結果を前記検索結果画面に順に表示し、前記第一推薦待機結果が無効目標である場合、前記全局結果を前記検索結果画面に表示するステップ、
を含む、
ことを特徴とする、請求項５に記載の方法。

【請求項7】

前記方法は、さらに、
前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示する前に、前記第二制御部の触発により形成される第二事項を受信するステップと、
前記第二事項により前記検索結果画面を呼び出すステップと、
を含み、
前記検索結果画面の少なくとも一部分は、前記現在のビデオ画像フレームを覆うとともに、前記第二制御部を遮る、
ことを特徴とする、請求項１に記載の方法。

【請求項8】

前記方法は、さらに、 前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示した後、前記検索結果画面を前記現在のビデオ画像フレームの辺縁部まで移動させるとともに、前記検索結果画面の一部分を隠蔽することにより、前記第二制御部を表示するステップ、
を含む、
ことを特徴とする、請求項７に記載の方法。

【請求項9】

前記方法は、さらに、
前記第二制御部が位置している前記第一表示位置が変化したかを検出し、前記第一表示位置が変化する場合、前記第二制御部の第二表示位置を獲得するステップと、
前記第二表示位置により所定の第二検索待機対象を確定するステップと、
前記第二検索待機対象に対応する第二推薦結果を獲得するステップと、
前記検索結果画面を再び呼び出し、前記検索結果画面中の前記第一推薦結果を前記第二推薦結果に変化させるステップと、
を含む、
ことを特徴とする、請求項８に記載の方法。

【請求項10】

ビデオ検索装置であって、
ビデオ再生画面において、第一制御部の触発により形成される第一事項を受信する、受信モジュールと、
前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得し、前記現在のビデオ画像フレームにおいて、第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が前記現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一検索待機対象に対応する第一推薦結果を獲得する、獲得モジュールと、
前記第一表示位置に前記第二制御部を表示し、前記第一推薦結果を検索結果画面に表示する、表示モジュールと、
を含む、ことを特徴とする、装置。

【請求項11】

少なくとも１個の記憶装置と、少なくとも１個の処理装置とを含む、端末であって、
前記少なくとも１個の記憶装置には、プログラムコードが記憶されており、
前記
プログラムコードが実行されると、前記少なくとも１個の処理装置に、請求項１乃至９いずれか一項に記載の方法を実施させる、
ことを特徴とする、端末。

【請求項12】

プログラムコードが記憶されている、コンピュータで読み取り可能な記憶媒体であって、
前記プログラムコードが実行されると、前記コンピュータに、請求項１乃至９いずれか一項に記載の方法を実施させる、
ことを特徴とする、記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、コンピュータの技術分野に属し、特に、ビデオ検索方法、装置、端末及び記憶媒体に関するものである。

【0002】

（関連出願への相互参照）
本出願は、２０１９年１０月１７日に中国専利局（特許庁に相当する）に提出し、出願番号が２０１９１０９９０４６３．Ｘであり、発明の名称が「ビデオ検索方法、装置、端末及び記憶媒体」である中国特許出願の優先権を出張し、かつ、その中国出願の全文の内容を本出願に組み込む。

【背景技術】

【0003】

現在の画像認識技術においては、まず写真を撮った後で、その写真をサーバーに送信する。次に、サーバーにより、写真中の物品または人物を認識するとともに検索する。最後に、検索の結果を端末にフィードバックする。現在はビデオにより検索をする方法がなさそうである。

【発明の概要】

【発明が解決しようとする課題】

【0004】

従来の技術の問題を解決するため、本発明は、ビデオ検索方法、装置、端末、及び記憶媒体を提供する。

【課題を解決するための手段】

【0005】

そのため、本発明は次の技術的事項を採用する。
本発明の実施例において、ビデオ検索方法を提供する。その方法は、
ビデオ再生画面において、第一制御部の触発により形成される第一事項を受信するステップと、
前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得するステップと、
前記現在のビデオ画像フレームにおいて、第二制御部により位置が決められる第一検索待機対象と前記第一検索待機対象が前記現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップと、
前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップと、を含む。

【0006】

本発明の実施例において、ビデオ検索装置を提供する。その装置は、
第一制御部の触発により形成される第一事項を受信する、受信モジュールと、
前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得し、前記現在のビデオ画像フレームにおいて、第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が前記現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一検索待機対象に対応する第一推薦結果を獲得する、獲得モジュールと、
前記第一表示位置に前記第二制御部を表示し、前記第一推薦結果を検索結果画面に表示する、表示モジュールと、を含む。

【0007】

本発明の実施例において、端末を提供する。前記端末は少なくとも１個の記憶装置と、少なくとも１個の処理装置とを含む。前記記憶装置は、プログラムコードを記憶することに用いられ、前記処理装置は、前記記憶装置に記憶されているプログラムコードを実行することにより、前記方法を実施する。

【0008】

本発明の実施例において、コンピュータで読み取り可能な記憶媒体を提供する。前記記憶媒体は、プログラムコードを記憶することに用いられ、前記プログラムコードは、前記方法を実施することに用いられる。

【発明の効果】

【0009】

本発明の実施例に係るビデオ検索方法は、現在のビデオ内容を選択し、ビデオ画像フレームに対して分類と認識をすることができる。認識される内容は、すべてのビデオ画像に表示されている人物と物品を含むか、或いは、選択された特定区域の人物と物品を含む。本発明の実施例に係るビデオ検索方法により、使用者は、ビデオ中の商品及び人物に関する情報を容易に獲得することができる。

【図面の簡単な説明】

【0010】

以下、本発明の図面により本発明の具体的な実施例を説明する。それにより、本発明の各実施例に係る技術的特徴、発明の効果、及び目的をより詳細に理解してもらうことができる。本発明の図面において、同一であるか或いは類似している図面中の符号は、同一であるか或いは類似している部品を意味する。下記図面は、本発明の例示にしか過ぎないものであり、図面中の部品と要素は、部品と要素の実際のサイズの比例に描いたものでない。

【図1】本発明の実施例に係るビデオ検索方法を示す流れ図である。

【図2】本発明の実施例に係るビデオ再生画面にビデオ画像フレームが表示されていることを示す図である。

【図3】本発明の実施例において第一制御部が第二制御部に転化することを示す図である。

【図4】本発明の実施例に係る検索結果画面を示す図である。

【図5】本発明の他の実施例に係る検索結果画面を示す図である。

【図6】本発明の他の実施例に係る検索結果画面を示す図である。

【図7】本発明の実施例に係る検索待機対象が変換されることを示す図である。

【図8】本発明の実施例に係るビデオ検索装置の構造を示す図である。

【図9】本発明の実施例に係る電子装置の構造を示す図である。

【発明を実施するための形態】

【0011】

以下、図面により本発明の実施例をより詳細に説明する。図面には本発明の好適な実施例が記載されているが、本発明は、いろいろな実施例により実施されることができ、かつ、下記実施例の構成にのみ限定されるものでない。下記実施例を説明することにより、本発明の技術的事項をより詳細に理解してもらうことができる。本発明の下記図面と実施例は、本発明の例示にしか過ぎないものであり、本発明の保護範囲を限定するものでないことに、注意されたい。

【0012】

本発明の実施例に係る方法中の各ステップをいろいろな順番に実施するか或いは同時に実施することができることに、注意されたい。本発明の実施例に係る方法は、付加ステップ及び／又は図示されていないステップを含むことができるが、本発明はそれらを限定しない。

【0013】

この明細書中の「含む」という用語及びそれに類似している用語は、明確に記載されている事項のみを含むことを意味せず、記載されていない事項を更に含むことを意味することができる。この明細書中の「～による」という用語は、「～事項の少なくとも一部分による」ことを意味し、この明細書中の「１つの実施例」は、「少なくとも１つの実施例」を意味し、この明細書中の「他の実施例」は、「少なくとも１つの他の実施例」を意味し、この明細書中の「１つの実施例」は、「少なくとも一部分の実施例」を意味する。この明細書中の用語が特別な意味を有している場合、それを特別に説明する必要がある。

【0014】

この明細書中の「第一」、「第二」という用語は、いろいろな装置、モジュール、またはユニットを区分するものであり、その装置、モジュール、またはユニットが実施するステップの順番または依存関係を限定するものでないことに、注意されたい。

【0015】

この明細書中の「１個」、「複数個」という用語は、事項の数量の例示にしか過ぎないものであり、事項の数量を具体的に限定するものでない。特別な説明がない場合、この技術分野の技術者は、この明細書中の「１個」、「複数個」という用語を「１個または複数個」として理解することができることに、注意されたい。

【0016】

本発明の実施例において、複数個の装置がインタラクティブする情報または情報の名称は、本発明を説明するものであるが、その情報または情報の範囲を限定するものでない。

【0017】

以下、図面により、本発明の実施例に係る技術的事項を詳細に説明する。

【0018】

図１を参照すると、図１は、本発明の実施例に係るビデオ検索方法を示す流れ図である。その方法は、次のステップを含む。

【0019】

Ｓ１００において、ビデオ再生画面において第一制御部の触発により形成される第一事項を受信する。

【0020】

図２を参照すると、図２は、本発明の実施例に係るビデオ再生画面にビデオ画像フレームが表示されていることを示す図である。具体的に、本発明の実施例は、第一制御部を含み、その第一制御部を起動パス（path）にすることができる。起動パスは、プログラムにより端末に形成されるサークルセレクト（circle select）ボタンと画像認識ボタン（image recognition button）であることができる。サークルセレクトボタンと画像認識ボタンの相違点は、次のとおりである。画像認識ボタンをクリックするとき自動認識指令情報を送信することができる。すなわち、１つのフレームを自動に選択した後、それが有効情報であると認定することができる。サークルセレクトボタンは、使用者が選択した１つのフレームの画像中の一部分の情報であることができる。より具体的に、所定のフレームのビデオを再生するとき、使用者は、獲得指令を送信することができる。本発明の実施例において、図２中の第一制御部をクリックすることにより、獲得指令を送信することができる。図２中の第一制御部は、円形アイコンに形成されているが、本発明の他の実施例において、第一制御部を他の形状に形成されることもできることに、注意されたい。すなわち、第一制御部の形状は、円形またはアイコンにのみ限定されるものでない。第一事項がアクティベーション（activation）されるとき、第一事項は、形状が変化する状態に表示されることができる。例えば、第一制御部以外の表示区域は、輝度が低下する状態に表示されることができる。前記事項は、本発明の例示にしか過ぎないものであり、本発明の実施例は、他のアクティベーション表示方法を採用することができる。すなわち、本発明は前記例示にのみ限定されるものでない。

【0021】

Ｓ２００において、前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得する。

【0022】

本発明の実施例において、例えば、ビデオ再生ファイル中のビデオ画像フレームを獲得することができる。具体的に、使用者が送信する指令情報により、例えば、第一制御部が触発されることによる制御部の変形または輝度の変化によりビデオの再生を停止させる。ビデオファイルの再生を停止させることにより、獲得した所定のビデオ画像フレームを確定することができる。他の実施例において、触発されるときビデオが再生されているタイムスタンプ（time stamp）を記録し、かつ、そのタイムスタンプにより所定のビデオファイル中のビデオ画像フレームを確定することもできる。

【0023】

Ｓ３００において、現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置とを獲得する。前記第一表示位置に前記第二制御部を表示する。

【0024】

第二制御部は、フローティングボックス（floating box）またはフローティングポイント（floating Point）のうち少なくとも１つを含むことができる。本発明の具体的な実施例に係る第二制御部は、フローティングボックスとフローティングポイントを含み、第一検索待機対象は、第一目標と第二目標を含むことができる。本発明の具体的な実施例において、現在のビデオ画像フレームにおいてフローティングボックスにより位置が決められる第一目標と、フローティングポイントにより位置が決められる第二目標とを獲得し、第一目標が現在のビデオ画像フレームに位置している表示位置と、第二目標が現在のビデオ画像フレームに位置している表示位置とを獲得し、第一目標が現在のビデオ画像フレームに位置している表示位置に前記フローティングボックスを表示し、第二目標が現在のビデオ画像フレームに位置している表示位置に前記フローティングポイントを表示することができる。より具体的に、本発明の実施例において、第一制御部を触発させることにより第二制御部を呼び出し、第二制御部により第一検索待機対象及びその位置を決めることができる。第二制御部は、第一制御部から転化するものであることもできる。図３に示すとおり、図３は、本発明の実施例において、第一制御部が第二制御部に転化することを示す図である。その図面において、ボックスＡとボックスＢは第一検索待機対象である。第一制御部が触発されるとき、第一制御部は、面取り付き矩形に変形し、サイズが増加するとともに、Ａ方向に移動することにより、目標Ａに位置している面取り付き矩形のフローティングボックスに変形することができる。本発明の実施例において、ビデオ画像フレームの背景部分と主体部分により、フローティングボックスに対応する表示パラメーターを更に獲得することができる。表示パラメーターは、フローティングボックスの位置情報とサイズ情報を含むことができる。具体的に、表示パラメーターは、フローティングボックスの左上隅の１つ目の画素（pixel）がビデオ画像フレームに位置しているＸ座標、フローティングボックスの左上隅の１つ目の画素がビデオ画像フレームに位置しているＹ座標、フローティングボックスの長さ及び幅、等を含むことができる。前記４つの表示パラメーターによりビデオ画像フレームにおいて確定した位置情報とサイズ情報により、フローティングボックスの位置を決めることができる。フローティングボックスは、原点座標、フローティングボックスの長さ及び幅を表示することにより表示し、それにより、フローティングボックスの表示区域を画定することができる。前記フローティングボックスは、規則的形状に形成されているが、本実施例のフローティングボックスを輪郭の認識が可能な不規則的形状に形成するか、或いは、フローティングボックスの最初位置と移動路線を確定することにより、横座標ｘの変化によって変化する函数ｆ（ｘ）等を獲得することができる。本発明の実施例は、１個の検索待機対象のみを含むだけでなく、第一検索待機対象は、ＡとＢを更に含むことができる。本発明の実施例において、第一検索待機対象の数量を限定しない。本発明は、数量がより多いか、或いはより少ない第一検索待機対象を含むこともできる。第二制御部は、フローティングボックスまたはフローティングポイントにのみ限定されず、類似の役割をする他の第二制御部があっても本発明に含まれることは勿論である。

【0025】

Ｓ４００において、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示する。

【0026】

具体的に、本発明の実施例において、第二制御部の触発により形成される第二事項を受信し、かつ、第二事項により検索結果画面を呼び出す。検索結果画面の少なくとも一部分は、現在のビデオ画像フレームを覆うとともに第二制御部を遮る。第一目標に対応する第一推薦待機結果と第二目標に対応する第二推薦待機結果をそれぞれ獲得する。第一目標を認識する第一ラベルと第一推薦結果は、検索結果画面中の第一区域内に表示され、第二目標を認識する第二ラベルと第二推薦結果は、検索結果画面中の第二区域内に表示される。具体的に、本発明の実施例は、第二制御部の触発により形成された第二事項に対応する第一推薦結果において検索をするステップを含み、かつ、検索結果画面を呼び出すことにより、第一推薦結果を表示することができる。検索結果画面は、ビデオ画像フレームの一部分または全部を覆うことができる。本発明の実施例において、１つのフレームのビデオ画像において物品を検出するか、或いは人物を検出することができる。そのとき、人物と物品に関する検索結果をそれぞれ表示するか、或いは各ラベルにそれぞれ表示することができる。図４に示すとおり、図４は、本発明の実施例に係る検索結果画面を示す図である。図４に示される検索結果画面は、並列に表示されている第一推薦待機結果と第二推薦待機結果を含む。第一推薦待機結果は、第一目標Ａに対応するものであり、第二推薦待機結果は、」第二目標Ｂに対応するものである。例えば、第一目標Ａは商品であり、検索結果画面の上部には、商品Ａと同一であるかまたは類似する商品が表示され、第二目標Ｂは人物であり、検索結果画面の下部には、人物Ｂ関するビデオの結果が表示されることができる。本発明の実施例は、第一目標Ａを認識する第一ラベルａと第二目標Ｂを認識する第二ラベルｂを更に含むことができる。検索結果画面は、例えば、１個のクロスバー（cross bar）と複数個のバーチカルバー（Vertical bar）を含む。クロスバーには、ビデオ中のいろいろな目標に対応するラベルを表示され、そのラベルは、所定の商品／人物にそれぞれ対応することができる。図面に示すとおり、第一目標Ａに対応する第一推薦待機結果を表示するとき、第一ラベルａを拡大してラベルにすることができる。第二目標Ｂに対応する第二推薦待機結果を表示するとき、第一ラベルａを元のサイズに回復させるとともに、第二ラベルｂを拡大することができる。本発明の他の実施例において、他の実施形態を採用することができるが、本発明はそれを限定しない。複数個のバーチカルバーは、それぞれクロスバーに対応し、各バーチカルバーは、例えば垂直方向に人物Ａに関する他のビデオａと商品Ｂと同一であるか、または類似する商品ｂを表示することができる。クロスバーは、固定バーであるか、或いはスクロールバー（scroll bar）であることができる。認識目標が多くない場合、各ラベルを横方向に配列させ、認識目標が多い場合、各ラベルをスクロール方式で表示することができる。同様に、縦方向の商品／ビデオを縦方向のスクロールバー（scroll bar）に配列させることができる。配列の方法を選択するとき、人物ビデオは、例えばクリック率（Click-through Rate）により配列させ、商品類ビデオは、目標商品と類似する類似度により配列させることができる。本発明の実施例において、他の配列の方法を採用することもでき、適合な結果を獲得できる方法であれば、いずれでもよい。図面に示されるとおり、第一推薦待機結果は、縦方向の二列に表示されるか、或いは他の配列方式に表示されることができるが、本発明は、結果の配列方法を限定しない。配列の順番について、例えば、類似度の結果により検索結果を配列させ、類似度が高い結果を前に配列させることができる。配列の順番を決める要因は、ビデオの再生量等を更に含むことができるが、本発明はそれを限定しない。

【0027】

第一推薦待機結果は、有効目標と無効目標を更に含むことができる。本発明の実施例において、ビデオ再生画面に再生されているビデオ中のすべてのビデオ画像フレームを更に獲得するとともに、各ビデオ画像フレーム中の有効目標を獲得することにより、全局結果を獲得することができる。有効目標は、人物、商品、及び物品のうち少なくとも一種を含み、無効目標は、有効目標以外の目標結果である。具体的に、本発明の実施例において、モデル、例えば多重検出モデル（Multiplex detection model）により目標を分類することができる。具体的に、商品検出モデル、顏検出モデル、及び物品検出モデル、等により、第一検索待機目標を分類することができる。モデルは、例えば、顔特徴情報、商品特徴情報、等を含むことができる。次に、第一推薦待機結果を少なくとも１つの分類に分類する。第一推薦待機結果が有効目標である場合、有効目標に対応する第一推薦結果を獲得し、かつ、第一推薦結果を検索結果画面に表示し、第一推薦待機結果が無効目標である場合、検索結果画面に結果がないと表示することができる。第一推薦待機結果が有効目標である場合、有効目標に対応する第一推薦結果を獲得し、かつ、第一推薦結果と第一推薦結果以外の全局結果を検索結果画面に順に表示し、第一推薦待機結果が無効目標である場合、全局結果を検索結果画面に表示することもできる。

【0028】

具体的に、本発明の実施例の第一推薦結果を獲得する方法は、オンライン獲得方法とオフライン獲得方法を含むことができる。具体的に、第一推薦結果は、サーバーまたは現地に記憶されるデータであることができる。例えば、物品紹介情報、購入用リンクであるか、或いは、人物に関するビデオであるか、或いは、他の情報であることができる。フィードバックされる結果は、認識される区域の座標とその区域において認識される有効目標であることができる。サーバーに前記ビデオに関する情報がキャッシュされていないとき、サーバーは、オンラインにより認識を随時に実施し、サーバーの商品ライブラリ中の商品と特徴を比較することにより、同一の商品または類似している商品の結果をフィードバックする。認識される結果が人物である場合、例えば顏の特徴を検出し、ビデオ特徴検出手段により、その人物の画像または名前が含まれているビデオがあるかを検索する。検索の過程は、サーバーにおいて実施し、その結果を端末のインターフェースに送信することができる。特に、端末、例えば携帯電話にインストールされたアプリケーションプログラムに固有商品ライブラリがある場合、認識結果により、固有商品ライブラリを直接に採用することができる。固有商品ライブラリに外部リンクを更に設置する場合、その外部リンクをクリックすることにより、例えばスモールルーチン（small routine）、他のＡＰＰまたはウェブページを起動させることができる。オフライン獲得方法は、現在のビデオ画像フレームの結果を獲得するステップと、全局検索結果をフィードバックするステップとを含む。オンラインにより有効な結果を獲得できない場合がある。すなわち、商品または人物の情報を認識できない場合がある。したがって、ユーザーインターフェース（user interface）に図５中の提示情報を表示する必要がある。オフラインによるキャッシュ結果がない場合、使用者は、現在のビデオ画像フレームの検索結果だけでなく、全局結果も獲得することができる。したがって、現在のビデオ画像フレームにおいて有効な結果を獲得することができなくても、使用者は、全局結果を獲得することができる。現在の結果と全局結果が同時にフィードバックされるとき、現在の結果を先に配列させ、全局結果を現在の結果の後に配列させることにより、使用者がより多い選択肢を与えることができることに、注意されたい。図６に示すとおり、図６は、本発明の他の実施例に係る検索結果画面を示す図である。図６において、現在の結果ａとｂの後ろに１つの全局結果ｃが配列されている。好ましくは、本実施例においてラベルを更に設置し、そのラベルにより分類を容易にし、かつ、重複除去（duplicate removal）を実施することができる。例えば、全局結果において同一のラベルの結果を比較することにより、同一の物品／同一の人物であるかを判断するか、或いは類似の物品／類似の人物であるかを判断することができる。同一の物品／同一の人物である場合、１つの結果をフィードバックし、その結果を重複除去後の結果とする。類似の物品／類似の人物である場合、各結果を一類とする。

【0029】

本発明の実施例に係るビデオ検索方法は、検索待機対象を再び確定するステップを更に含むことができる。本発明の実施例において、検索結果画面を現在のビデオ画像フレームの辺縁部まで移動させるとともに、検索結果画面の一部分を隠蔽することにより、第二制御部を表示する。第二制御部が位置している第一表示位置が変化したかを検出する。第一表示位置が変化する場合、第二制御部の第二表示位置を獲得し、前記第二表示位置により、所定の第二検索待機対象を確定し、第二検索待機対象に対応する第二推薦結果を獲得するとともに、検索結果画面を再び呼び出し、検索結果画面中の第一推薦結果を第二推薦結果に変化させる。

【0030】

具体的に、図７に示すとおり、図７は、本発明の実施例に係る検索待機対象が変換されることを示す図である。本発明の実施例において、検索結果画面の一部分は現在のビデオ画像フレームの下方に隠蔽されている。本発明の他の実施例において、他の隠蔽方法により、検索結果画面を隠蔽することができるが、本発明はそれを制限しない。フローティングボックスの位置がＡからＧまで移動すること及び／又はフローティングポイントの位置がＢからＨまで移動することにより、第二検索待機対象を獲得する。第二検索待機対象により第二推薦結果を獲得して表示するステップは、第一検索待機対象により第一推薦結果を獲得して表示するステップを参照することができるので、ここで再び説明しない。

【0031】

特に、本発明の実施例に係るビデオ検索方法は、リスクコントロールモデル（Risk control model）を更に含むことができる。具体的に、所定の特徴をフィルタするシールド手段を設定することができる。例えば、認識された検索待機目標に予め設定されたフィルタ特徴が含まれているとき、その認識結果をインターセプト（intercept）するとともに、検索にマッチングする指令を送信しないことにより、インターセプトの効果を獲得することができる。インターセプト標準は、暴力シーン、暴力画面をシールドするか、或いは認識された顏特徴がプライバシー（Privacy）事項が含まれているとき、それをシールドするものである。具体的に、顏検出モデルは、セレブリティーアトラース（Celebrity Atlas）のみを含み、検出結果と顏検出モデルが符合しないとき、フィルタ特徴を添加することができる。その場合、検出と検索をしないことにより、個人のプライバシーを保護することができる。本発明の実施例に係るインターセプト標準は、前記例示にのみ限定されるものでなく、好適なフィルタ評判基準は、いずれも本発明の実施例を採用することができる。

【0032】

本発明の実施例に係るビデオ検索方法をオンライン検索方法またはオフライン検索方法に用いることができる。商品サーバー側において、検出及び検索の結果と商品ライブラリを関連させることにより、営業者は、消費ストックと存量増量を適当に調節し、商品の構造を適合にすることができる。ビデオサーバー側において、ホットスポットを案内することにより、ビデオ提供者は、よりよいビデオを提供することができる。他の場面において、フィードバック結果により、事項配列規則を形成することができる。例えば、プレーズクオンティティー（Praise quantity）、内容の質量、等により、規則形成手段等を自動に形成することができる。

【0033】

図８に示すとおり、本発明の実施例において、ビデオ検索装置１０を更に提供する。その装置は、受信モジュール３０、獲得モジュール５０、及び表示モジュール７０を含むことができる。受信モジュール３０は、第一制御部の触発により形成される第一事項を受信する。獲得モジュール５０は、第一事項が触発されるときビデオ再生画面に表示されている現在のビデオ画像フレームと、現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象及び第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置と、第一検索待機対象に対応する第一推薦結果とを獲得する。表示モジュール７０は、第一推薦結果を検索結果画面に表示する。

【0034】

本発明の装置に関する実施例は、本発明の方法に関する実施例に対応するので、類似している事項について方法の実施例を参照することができる。以上、説明してきた装置の実施例は、本発明の例示にしか過ぎないものであり、分離式モジュールとして説明してきたモジュールは、分離式モジュールであるか、或いは非分離式モジュールであることができる。実際の需要により一部分のモジュールまたはすべてのモジュールを採用することにより、本発明の実施例を実施することができる。この技術分野の技術者は、創造的な研究をしなくても本発明を容易に理解することも実施することもできる。

【0035】

以上、本発明の実施例と応用例により、本発明の実施例に係る視覚検出方法、検索方法、及び装置を説明してきた。以下、本発明の実施例に係る端末と記憶媒体を更に提供し、かつ、その端末と記憶媒体を詳細に説明する。

【0036】

図９を参照すると、図９は本発明の実施例に用いられる電子装置（例えば端末装置またはサーバー）８００の構造を示す図である。本発明の実施例に係る端末装置、例えば携帯電話、ノートブックコンピューター、デジタル放送受信機（Digital broadcasting receiver）、ＰＤＡ（携帯情報端末、Personal Digital Assistant）、ＰＡＤ（タブレット）、ＰＭＰ（ポータブルメディアプレーヤー、Portable Media Player）、車用端末装置（例えばナビゲーション）等の携帯式端末と、例えばデジタルＴＶ、デスクトップコンピュータ等の非携帯式端末とを含むことができるが、本発明はそれらにのみ限定されるものでない。図９に示される端末装置は、本発明の例示にしか過ぎないものであり、本発明の実施例の機能と使用の範囲を限定するものでない。

【0037】

図９に示すとおり、電子装置８００は処理装置（例えば、中央処理装置、画像処理装置、等）８０１を含むことができる。前記処理装置８０１は、リードオンリーメモリー（ＲＯＭ、Read-Only Memory）８０２に記憶されているプログラム、または記憶装置８０８からランダムアクセスメモリ（ＲＡＭ、Random Access Memory）８０３に送信されるプログラムにより、所定の作業と処理をすることができる。ＲＡＭ８０３には、電子装置８００の操作に必要である、いろいろなプログラムとデータが更に記憶されている。処理装置８０１、ＲＯＭ８０２、及びＲＡＭ８０３は、バス８０４により、互いに接続されている。入力／出力（Ｉ／Ｏ、Input/Output）インターフェース８０５も、バス８０４に接続されている。

【0038】

下記装置を入力／出力（Ｉ／Ｏ）インターフェース８０５に接続することができる。当該装置は、例えば、タッチパネル、タッチ基板、キーボード、マウス、画像センサー、マイク、加速度計、ジャイロスコープ、等を含む入力装置８０６と、液晶表示装置（ＬＣＤ、Liquid Crystal Display）、スピーカー、振動機、等を含む出力装置８０７と、メモリーカード、等を含む記憶装置８０８と、通信装置８０９とを含むことができる。通信装置８０９は、電子装置８００と他の装置が無線または有線で通信をするようにサポートすることにより、データを交換することができる。図９にはいろいろな装置を具備する電子装置８００が示されているが、その電子装置８００は、図面の複数の装置を全部具備するか、或いは全部具備しなくてもよい。すなわち、電子装置８００は、より多いか、或いはより少ない装置を具備するか、或いは採用することができる。

【0039】

特に、本発明の実施例において、前記流れ図に示されるステップは、コンピュータソフトウェアプログラムにより実施されることができる。例えば、本発明の実施例は、コンピュータプログラム製品を含み、そのコンピュータプログラム製品は、コンピュータ読み取り可能な媒体に記憶されているコンピュータプログラムを含み、前記コンピュータプログラムは、前記流れ図中の方法を実施するプログラムコードを含むことができる。この実施例において、通信装置８０９により前記コンピュータプログラムをネットワークからダウンロードしてインストールするか、或いは、記憶装置８０８からダウンロードしてインストールするか、或いは、ＲＯＭ８０２からダウンロードしてインストールすることができる。前記コンピュータプログラムが処理装置８０１により実行されるとき、前記実施例に係る方法中の所定の機能を実施することができる。

【0040】

前記コンピュータ読み取り可能な媒体は、コンピュータ読み取り可能な信号媒体、コンピュータ読み取り可能な記憶媒体、またはその２つの組合せであることができることに、注意されたい。コンピュータ読み取り可能な記憶媒体は、電気、磁気、光、電磁、赤外線であるか、或いは、半導体のシステム、装置、または部品であるか、或いはそれらの任意の組合せであることができる。コンピュータ読み取り可能な記憶媒体の具体的な例として、１つまたは複数の導線により接続される、携帯式コンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ、Random Access Memory）、リードオンリーメモリー（ＲＯＭ、Read-Only Memory）、消去可能プログラム可能ＲＯＭ（ＥＰＲＯＭ、Erasable Programmable Read-Only Memory）、フラッシュメモリー、光ファイバー、ＣＤロム（ＣＤ－ＲＯＭ、Compact Disc Read Only Memory）、光記憶部品、磁気記憶部品、またはそれらの任意の組合せを含むことができるが、本発明は、それらにのみ限定されるものでない。本発明の実施例において、コンピュータ読み取り可能な記憶媒体は、プログラムを含むか、或いはプログラムを記憶する実物型媒体であり、前記プログラムは、指令実行システム、装置、またはそれらの組合せに用いられることができる。本発明の実施例において、コンピュータ読み取り可能な信号媒体は、ベースバンド（base band）またはキャリアの一部分により伝送されるデータ信号を含み、コンピュータ読み取り可能な信号媒体には、コンピュータ読み取り可能なプログラムコードが記憶されている。その方法により伝送されるデータ信号は、いろいろな信号、例えば電磁信号、光信号、またはそれらの組合せであることができるが、本発明はそれらにのみ限定されるものでない。コンピュータ読み取り可能な信号媒体は、コンピュータ読み取り可能な記憶媒体以外のいずれかのコンピュータ読み取り可能な媒体であることができる。前記コンピュータ読み取り可能な信号媒体は、指令実行システム、装置、またはそれらの組合せに用いられるプログラムを送信、伝播、または伝送することができる。コンピュータ読み取り可能な媒体に含まれているプログラムコードは、適当な媒体、例えば、電線、光ケーブル、ＲＦ（Radio Frequency）、等により伝送されるか、或いはそれらの組合せにより伝送されることができる。

【0041】

本発明の実施例において、クライアント端末、サーバー、等は、ＨＴＴＰ（Hyper Text Transfer Protocol、ハイパーテキスト転送プロトコル）等のような通信手段により、現在または未来のネットワークプロトコルと通信をし、かつ、いずれかの実物または媒体型デジタルデータ通信（例えば通信ネットワーク）に接続されることができる。通信ネットワークは、ローカルエリアネットワーク（ＬＡＮ、local area network）、ワイドエリアネットワーク（ＷＡＮ、Wide Area Network）、インタネットワーク（例えばインターネット）、及びエンドツーエンドネットワーク（End-to-End Network、例えばａｄ ｈｏｃエンドツーエンドネットワーク）、及び現在または未来のネットワークプロトを含むことができる。

【0042】

前記コンピュータ読み取り可能な媒体は、前記電子装置に設けられるか、或いは前記電子装置に設けられず、前記電子装置とそれぞれ存在するものであることができる。

【0043】

前記コンピュータ読み取り可能な記憶媒体には、１個または複数個のプログラムが記憶されており、前記１個または複数個のプログラムが前記電子装置に実行されることにより、前記電子装置は、前記方法を実施することができる。

【0044】

１つまたは複数のプログラミング言語（programming language）またはそれらの組合せにより、本発明の実施例に係る方法を実施するコンピュータプログラムコードを作成することができる。前記プログラミング言語は、対象に向くプログラミング言語、例えばJava、Smalltalk、Ｃ＋＋を含むか、或いは常用する過程式プログラミング言語、例えば「Ｃ」プログラミング言語またはそれに類似しているプログラミング言語を更に含むことができる。プログラムコードは、クライアントコンピュータにより実行されるか、或いは、一部分がクライアントコンピュータにより実行されるか、或いは、独立しているソフトウェアパッケージとして実行されるか、或いは、一部分がクライアントコンピュータにより実行され、かつ、一部分がリモートコンピュータにより実行されるか、或いは、リモートコンピュータまたはサーバーにより実行されることができる。リモートコンピュータにより実行される場合、リモートコンピュータは、いずれかのネットワーク、例えばローカルエリアネットワーク（ＬＡＮ、local area network）またはワイドエリアネットワーク（ＷＡＮ、Wide Area Network）により、クライアントコンピュータに接続されるか、或いは外部のコンピュータに接続されることができる（例えばインターネットサービスプロバイダー（Internet Service Provider）が提供するインターネットにより外部のコンピュータに接続される）。

【0045】

図面中の流れ図とブロックダイアグラム（block diagram）には、本発明の実施例に係るシステム、方法、及びコンピュータプログラムを実施することができる、システムの構造、機能、及び操作方法が記載されている。流れ図とブロックダイアグラム中の各枠は、１つのモジュール、プログラムの一部分、コードの一部分を示し、前記モジュール、プログラムの一部分、コードの一部分は、所定の機能を実現する実行可能な指令を含むことができる。他の実施例において、ブロックダイアグラムの各枠中の各ステップは、図面に示される順番に実施されなくてもよいことに、注意されたい。例えば、隣接している各枠中のステップは、通常、並行の順番に実施されるが、実現しようとする機能が異なることにより、逆の順番に実施されることもできる。ブロックダイアグラム及び／又はと／或いは流れ図中の各枠、ブロックダイアグラム及び／又は流れ図中の各枠の組合せは、所定の機能を獲得するか、或いは所定の操作をすることができるハードウェアにより実施されるか、或いは専用ハードウェアとコンピュータ指令の組合せにより実施されることができることに、注意されたい。

【0046】

本発明の実施例に係るユニットは、ソフトウェアにより実施されるか、或いはハードウェアにより実施されることができる。特別な説明がない限り、前記ユニットの名称は、そのユニットを限定するものでない。

【0047】

本発明の実施例に係る少なくとも一部分の機能は、１個または複数個のロジックユニットにより実施されることができる。例えば、常用するロジックユニットは、フィールドプログラマブルゲートアレイ（ＦＰＧＡ、Field Programmable Gate Array）、アプリケーション含有集積回路（ＡＳＩＣ、Application Specific Integrated Circuit）、特定用途向けに開発された汎用の集積回路（ＡＳＳＰ、Application Specific Standard Parts）、システムオンアチップ（ＳＯＣ、system-on-a-chip）、複合プログラマブルロジックデバイス（ＣＰＬＤ、Complex Programmable logic device）、等を含むことができるが、本発明はそれらにのみ限定されるものでない。

【0048】

本発明の実施例において、コンピュータ読み取り可能な媒体は、実物型媒体であることができる。そのコンピュータ読み取り可能な媒体は、指令実行システム、装置、または設備が用いるか、或いは指令実行システム、装置、または設備が一緒に用いるプログラムを含むか、或いは記憶することができる。コンピュータ読み取り可能な媒体は、コンピュータ読み取り可能な記憶媒体またはコンピュータ読み取り可能な信号媒体であることができる。コンピュータ読み取り可能な媒体は、電気、磁性、光、電磁、赤外線であるか、或いは、半導体システム、装置、または設備であるか、或いはそれらの任意の組合せであることができる。コンピュータ読み取り可能な記憶媒体の具体的な例として、１つまたは複数の導線により電気接続される携帯式コンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ、Random Access Memory）、リードオンリーメモリー（ＲＯＭ、Read-Only Memory）、消去可能プログラム可能ＲＯＭ（ＥＰＲＯＭ、Erasable Programmable Read-Only Memoryまたはフラッシュメモリー）、光ファイバー、ＣＤロム（ＣＤ－ＲＯＭ、Compact Disc Read Only Memory）、光記憶部品、磁気記憶部品、またはそれらの任意の組合せを含むことができるが、本発明はそれらにのみ限定されるものでない。

【0049】

本発明の１個または複数個の実施例において、ビデオ検索方法を提供する。その方法は、
ビデオ再生画面において第一制御部の触発により形成される第一事項を受信するステップと、
前記第一事項により、前記第一事項が触発されるとき前記ビデオ再生画面に表示されている現在のビデオ画像フレームを獲得するステップと、
現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップと、
前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップと、を含む。

【0050】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第二制御部は、フローティングボックスまたはフローティングポイントのうち少なくとも１つを含む。

【0051】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一検索待機対象は、第一目標と第二目標を含み、前記第二制御部は、フローティングボックスまたはフローティングポイントを含み、
現在のビデオ画像フレームにおいて、第二制御部により位置が決められる第一検索待機対象と、前記第一検索待機対象が現在のビデオ画像フレームに位置している第一表示位置とを獲得し、前記第一表示位置に前記第二制御部を表示するステップは、
現在のビデオ画像フレームにおいて前記フローティングボックスにより位置が決められる前記第一目標と、前記フローティングポイントにより位置が決められる前記第二目標とをそれぞれ獲得するステップと、
前記第一目標が前記現在のビデオ画像フレームに位置している表示位置と、前記第二目標が前記現在のビデオ画像フレームに位置している表示位置とを獲得するステップと、
前記第一目標が前記現在のビデオ画像フレームに位置している表示位置に前記フローティングボックスを表示し、前記第二目標が前記現在のビデオ画像フレームに位置している表示位置に前記フローティングポイントを表示するステップと、を含む。

【0052】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップは、
前記第一目標に対応する第一推薦待機結果と前記第二目標に対応する第二推薦待機結果をそれぞれ獲得するステップと、
前記第一目標を認識する第一ラベルと前記第一推薦結果を前記検索結果画面中の第一区域内に表示するステップと、
前記第二目標を認識する第二ラベルと前記第二推薦結果を前記検索結果画面中の第二区域内に表示するステップと、を含む。

【0053】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一推薦待機結果は、有効目標と無効目標を更に含み、
前記ビデオ検索方法は、前記ビデオ再生画面に再生されているビデオ中のすべてのビデオ画像フレームを獲得するステップと、各前記ビデオ画像フレーム中の前記有効目標を獲得することにより全局結果を獲得するステップと、を更に含み、
前記有効目標は、人物、商品、及び物品のうち少なくとも一種を含み、前記無効目標は、前記有効目標以外の目標結果である。

【0054】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示するステップは、
前記第一推薦待機結果が有効目標である場合、前記有効目標に対応する前記第一推薦結果を獲得し、かつ、前記第一推薦結果を前記検索結果画面に表示し、前記第一推薦待機結果が無効目標である場合、前記検索結果画面に結果がないと表示するステップ、または、
前記第一推薦待機結果が有効目標である場合、前記有効目標に対応する前記第一推薦結果を獲得し、かつ、前記第一推薦結果と前記第一推薦結果以外の前記全局結果を前記検索結果画面に順に表示し、前記第一推薦待機結果が無効目標である場合、前記全局結果を前記検索結果画面に表示するステップ、を更に含む。

【0055】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ前記第一推薦結果を検索結果画面に表示する前に実施する下記ステップ、を更に含む。すなわち、前記第二制御部の触発により形成される第二事項を受信するステップと、前記第二事項により前記検索結果画面を呼び出すステップと、を更に含む。
前記検索結果画面の少なくとも一部分は、前記現在のビデオ画像フレームを覆うとともに、前記第二制御部を遮る。

【0056】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記第一検索待機対象に対応する第一推薦結果を獲得し、かつ、前記第一推薦結果を検索結果画面に表示した後、前記検索結果画面を前記現在のビデオ画像フレームの辺縁部まで移動させるとともに、前記検索結果画面の一部分を隠蔽することにより、前記第二制御部を表示するステップ、を更に含む。

【0057】

本発明の１個または複数個の実施例に係るビデオ検索方法において、前記ビデオ検索方法は、
前記第二制御部が位置している前記第一表示位置が変化したかを検出し、前記第一表示位置が変化する場合、前記第二制御部の第二表示位置を獲得するステップと、
前記第二表示位置により、所定の第二検索待機対象を確定するステップと、
前記第二検索待機対象に対応する第二推薦結果を獲得するステップと、
前記検索結果画面を再び呼び出し、前記検索結果画面中の前記第一推薦結果を前記第二推薦結果に変化させるステップと、を更に含む。

【0058】

本発明の１個または複数個の実施例に係るビデオ検索装置を提供する。その装置は、
第一制御部の触発により形成される第一事項を受信する受信モジュールと、
前記第一事項が触発されるときビデオ再生画面に表示されている現在のビデオ画像フレームと、前記現在のビデオ画像フレームにおいて第二制御部により位置が決められる第一検索待機対象、及び前記第一検索待機対象が前記現在のビデオ画像フレームに位置している第一表示位置と、前記第一検索待機対象に対応する第一推薦結果とを獲得する獲得モジュールと、
前記第一推薦結果を検索結果画面に表示する表示モジュールと、を含む。

【0059】

本発明の１個または複数個の実施例に係る端末を提供する。前記端末は、少なくとも１個の記憶装置と少なくとも１個の記憶装置を含む。前記少なくとも１個の記憶装置にはプログラムコードが記憶されており、前記少なくとも１個の記憶装置は、前記少なくとも１個の記憶装置に記憶されているプログラムコードを実行することにより、前記方法を実施する。

【0060】

本発明の１個または複数個の実施例に係る記憶媒体を提供する。前記記憶媒体にはプログラムコードが記憶されており、前記プログラムコードは、前記方法を実施することに用いられる。

【0061】

以上、本発明の好適な実施例とそれらに用いられる技術的事項を説明してきた。本技術分野の技術者が知っているように、本発明が公開する範囲は、前記技術的特徴の組合せによって構成される技術的事項にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲において、前記技術的特徴または類似の技術的特徴の組合せにより形成される他の技術的事項を更に含むこともできる。例えば、前記技術的特徴と本発明の実施例に公開される類似の技術的特徴（それにのみ限定されるものでない）により形成される技術的事項を更に含むこともできる。

【0062】

以上、本発明の各ステップを所定の順番に説明してきたが、本発明の前記ステップは、前記所定の順番にのみ実施されるものではなく、他の順番に実施されることもできることに、注意されたい。所定の条件において、多任務を同時に実施するか、或いは多任務を並行に実施することにより、想像外の発明の効果を獲得することができる。同様に、前記明細書には本発明の複数個の具体的な実施形態が含まれているが、本発明は前記具体的な実施形態にのみ限定されるものでない。ある１つの実施例に記載されている所定の技術的特徴を結合させることにより、その実施例を実施することができる。また、ある１つの実施例に記載されている所定の技術的特徴を複数個の実施例にそれぞれ結合させるか、或いは適合な結合手段により、複数個の実施例に同時に結合させることができる。

【0063】

以上、本発明の特定の構造特徴及び／又は方法のロジカルアクション（logical action）により本発明の事項を説明してきたが、前記特定の構造特徴及び／又は方法のロジカルアクションのみにより本発明の特許請求の範囲を定める意図はない。逆に、前記特定の特徴と動作は、本発明の特許請求の範囲を実施する例示にしか過ぎないものである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【国際調査報告】