2022-68146 データ注釈方法、装置、電子機器、記憶媒体およびコンピュータプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022068146

(43)【公開日】2022-05-09

(54)【発明の名称】データ注釈方法、装置、電子機器、記憶媒体およびコンピュータプログラム

(51)【国際特許分類】

   G06N 20/00 20190101AFI20220426BHJP

【ＦＩ】

G06N20/00

【審査請求】有

【請求項の数】15

【出願形態】ＯＬ

【外国語出願】

【公開請求】

(21)【出願番号】P 2022004875

(22)【出願日】2022-01-17

(31)【優先権主張番号】202110465098.8

(32)【優先日】2021-04-28

(33)【優先権主張国・地域又は機関】CN

(71)【出願人】

【識別番号】514322098

【氏名又は名称】ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド

【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂａｉｄｕ Ｎｅｔｃｏｍ Ｓｃｉｅｎｃｅ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．

【住所又は居所原語表記】２／Ｆ Ｂａｉｄｕ Ｃａｍｐｕｓ， Ｎｏ．１０， Ｓｈａｎｇｄｉ １０ｔｈ Ｓｔｒｅｅｔ， Ｈａｉｄｉａｎ Ｄｉｓｔｒｉｃｔ， Ｂｅｉｊｉｎｇ １０００８５， Ｃｈｉｎａ

(74)【代理人】

【識別番号】110000914

【氏名又は名称】特許業務法人 安富国際特許事務所

(72)【発明者】

【氏名】ジャン， ウェイペイ

(72)【発明者】

【氏名】ホン， ジーユェン

(57)【要約】      （修正有）

【課題】データを注釈する方法、装置、電子機器、記憶媒体及びコンピュータプログラムを提供する。
【解決手段】方法は、注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするためのアンカーを抽出するステップと、注釈対象データに対応する注釈要求を取得し、当該注釈要求に対応するターゲットアンカーを確定するステップと、注釈要求に基づいて当該ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するステップと、当該ターゲット注釈アルゴリズムを用いて当該注釈対象データを処理し、注釈結果を取得するステップと、を含む。
【選択図】図２

【特許請求の範囲】

【請求項1】

注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、前記オリジナル注釈アルゴリズムにおけるアンカーを抽出するステップであって、前記アンカーは、前記オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる、ステップと、
前記注釈対象データに対応する注釈要求を取得し、前記注釈要求に対応するターゲットアンカーを確定するステップと、
前記注釈要求に基づいて前記ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するステップと、
前記ターゲット注釈アルゴリズムを用いて前記注釈対象データを処理し、注釈結果を取得するステップと、
を含むデータ注釈方法。

【請求項2】

前記の、注釈対象データに対応するオリジナル注釈アルゴリズムを取得するステップは、
前記注釈対象データが属するタイプ情報を解析するステップであって、前記タイプ情報は、画像タイプデータ、オーディオタイプデータおよびテキストタイプデータのうちの少なくとも１つを含む、ステップと、
前記タイプ情報に基づいて、予め設定されたアルゴリズムデータベースから前記オリジナル注釈アルゴリズムを抽出するステップと、
を含む請求項１に記載のデータ注釈方法。

【請求項3】

前記の、前記タイプ情報に基づいて、予め設定されたアルゴリズムデータベースから前記オリジナル注釈アルゴリズムを抽出するステップは、
前記タイプ情報に対応する推奨アルゴリズムを提示するステップと、
前記推奨アルゴリズムに対する選択情報を受信したことに応答して、前記選択情報に基づいて確定された推奨アルゴリズムを前記オリジナル注釈アルゴリズムとして確定するステップと、
を含む請求項２に記載のデータ注釈方法。

【請求項4】

前記の、前記注釈要求に基づいて前記ターゲットアンカーの実現パラメータを調整するステップは、
前記ターゲットアンカーに対応する修正可能なコードを取得し、前記修正可能なコードにおける各部分の機能を提示するための、前記修正可能なコードのプロンプト情報を生成するステップと、
前記修正可能なコードおよび前記プロンプト情報を提示するステップと、
前記修正可能なコードに対応するパラメータ修正情報を受信し、前記パラメータ修正情報に基づいて前記修正可能なコードを調整するステップと、
を含む請求項１に記載のデータ注釈方法。

【請求項5】

前記の、ターゲット注釈アルゴリズムを生成するステップの後に、
前記注釈対象データに対する前処理の指示を取得したことに応答して、前記注釈対象データに対して、前記前処理の指示に従って、重複排除、偏差補正および色度調整のうちの少なくとも１つを含む対応する前処理動作を行うステップをさらに含む、請求項１に記載のデータ注釈方法。

【請求項6】

前記注釈要求に基づいて、前記ターゲット注釈アルゴリズムの機能タグを生成するステップと、
前記機能タグに基づいて、異なる注釈要求に対応する各ターゲット注釈アルゴリズムと、各ターゲット注釈アルゴリズムにおける前記オリジナル注釈アルゴリズムに関する修正情報との関係が記録されたテーブルを生成するステップと、
をさらに含む請求項１～５のいずれか一項に記載のデータ注釈方法。

【請求項7】

注釈対象データに対応するオリジナル注釈アルゴリズムを取得するように構成されるオリジナル注釈アルゴリズム抽出サブユニットと、前記オリジナル注釈アルゴリズムにおけるアンカーを抽出するように構成されるアンカー抽出サブユニットであって、前記アンカーは、前記オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる、アンカー抽出サブユニットと、を含むオリジナル注釈アルゴリズム・アンカー抽出ユニットと、
前記注釈対象データに対応する注釈要求を取得し、前記注釈要求に対応するターゲットアンカーを確定するように構成されるターゲットアンカー確定ユニットと、
前記注釈要求に基づいて前記ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するように構成される注釈アルゴリズム生成ユニットと、
前記ターゲット注釈アルゴリズムを用いて前記注釈対象データを処理し、注釈結果を取得するように構成される注釈結果生成ユニットと、を含むデータ注釈装置。

【請求項8】

前記オリジナル注釈アルゴリズム抽出サブユニットは、
前記注釈対象データが属するタイプ情報を解析するように構成されるタイプ解析モジュールであって、前記タイプ情報は、画像タイプデータ、オーディオタイプデータおよびテキストタイプデータのうちの少なくとも１つを含む、タイプ解析モジュールと、
前記タイプ情報に基づいて、予め設定されたアルゴリズムデータベースから前記オリジナル注釈アルゴリズムを抽出するように構成されるオリジナル注釈アルゴリズム抽出モジュールと、
を含む請求項７に記載のデータ注釈装置。

【請求項9】

前記オリジナル注釈アルゴリズム抽出モジュールは、
前記タイプ情報に対応する推奨アルゴリズムを提示するように構成される推奨アルゴリズム提示サブモジュールと、
前記推奨アルゴリズムに対する選択情報を受信したことに応答して、前記選択情報に基づいて確定された推奨アルゴリズムを前記オリジナル注釈アルゴリズムとして確定するように構成されるオリジナル注釈アルゴリズム確定サブモジュールと、
を含む請求項８に記載のデータ注釈装置。

【請求項10】

前記注釈アルゴリズム生成ユニットは、
前記ターゲットアンカーに対応する修正可能なコードを取得し、前記修正可能なコードにおける各部分の機能を提示するための、前記修正可能なコードのプロンプト情報を生成するように構成されるプロンプト情報生成サブユニットと、
前記修正可能なコードおよび前記プロンプト情報を提示するように構成される修正可能内容提示サブユニットと、
前記修正可能なコードに対応するパラメータ修正情報を受信し、前記パラメータ修正情報に基づいて前記修正可能なコードを調整するように構成されるコード調整サブユニットと、を含み、
前記注釈アルゴリズム生成ユニットは、前記オリジナル注釈アルゴリズムにおける修正可能なコードを調整した結果に基づいて、前記ターゲット注釈アルゴリズムを生成するようにさらに構成されている、請求項７に記載のデータ注釈装置。

【請求項11】

前記注釈対象データに対する前処理の指示を取得したことに応答して、前記注釈対象データに対して、前記前処理の指示に従って、重複排除、偏差補正および色度調整のうちの少なくとも１つを含む対応する前処理動作を行うように構成されるデータ前処理ユニットをさらに含む請求項７に記載のデータ注釈装置。

【請求項12】

前記注釈要求に基づいて、前記ターゲット注釈アルゴリズムの機能タグを生成するように構成される機能タグ生成ユニットと、
前記機能タグに基づいて、異なる注釈要求に対応する各ターゲット注釈アルゴリズムと、各ターゲット注釈アルゴリズムにおける前記オリジナル注釈アルゴリズムに関する修正情報との関係が記録されたテーブルを生成するように構成される関係テーブル生成ユニットと、をさらに含む請求項７～１１のいずれか一項に記載のデータ注釈装置。

【請求項13】

少なくとも１つのプロセッサと、前記少なくとも１つのプロセッサと通信可能に接続されたメモリと、を含む電子機器であって、
前記メモリに前記少なくとも１つのプロセッサによって実行可能な指令が記憶され、前記指令が前記少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサが請求項１～６のいずれか一項に記載のデータ注釈方法を実施する、電子機器。

【請求項14】

コンピュータ指令が記憶されている非一時的コンピュータ可読記憶媒体であって、
前記コンピュータ指令はコンピュータに請求項１～６のいずれか一項に記載のデータ注釈方法を実施させるためのものである、非一時的コンピュータ可読記憶媒体。

【請求項15】

プロセッサによって実行されると、請求項１～６のいずれか一項に記載のデータ注釈方法を実施するコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本出願は、データ処理技術分野に関し、具体的にデータ注釈（ｄａｔａ ａｎｎｏｔａｔｉｏｎ）、ディープラーニングなどの人工知能技術分野に関し、特にデータ注釈方法、装置、電子機器、コンピュータ可読記憶媒体およびコンピュータプログラムに関する。

【背景技術】

【0002】

人工知能産業は現代社会でますます重要視されているが、この産業では、サンプルデータのデータ注釈作業は依然として労働集約型産業であり、いまだに手作業に頼っており、長期的にわたって粗放な状態のままである。

【0003】

従来技術では、データ注釈に関連する認識アルゴリズムを用いてユーザの前処理、事前注釈を行うことが多い。これにより、ユーザは前処理、事前注釈の結果に基づいて注釈を行い、人工データ注釈の効率を向上させることができる。

【発明の概要】

【課題を解決するための手段】

【0004】

本出願の実施形態は、データ注釈方法、装置、電子機器、コンピュータ可読記憶媒体、およびコンピュータプログラムを提案する。

【0005】

第１態様において、本出願の実施形態は、注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、オリジナル注釈アルゴリズムにおけるアンカーを抽出するステップであって、アンカーは、オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる、ステップと、注釈対象データに対応する注釈要求を取得し、注釈要求に対応するターゲットアンカーを確定するステップと、注釈要求に基づいてターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するステップと、ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、注釈結果を取得するステップと、を含むデータ注釈方法を提供する。

【0006】

第２態様において、本出願の実施形態は、注釈対象データに対応するオリジナル注釈アルゴリズムを取得するように構成されるオリジナル注釈アルゴリズム抽出サブユニットと、オリジナル注釈アルゴリズムにおけるアンカーを抽出するように構成されるアンカー抽出サブユニットであって、アンカーは、オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる、アンカー抽出サブユニットと、を含むオリジナル注釈アルゴリズム・アンカー抽出ユニットと、注釈対象データに対応する注釈要求を取得し、注釈要求に対応するターゲットアンカーを確定するように構成されるターゲットアンカー確定ユニットと、注釈要求に基づいてターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するように構成される注釈アルゴリズム生成ユニットと、ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、注釈結果を取得するように構成される注釈結果生成ユニットと、を含むデータ注釈装置を提供する。

【0007】

第３態様において、本出願の実施形態は、少なくとも１つのプロセッサと、少なくとも１つのプロセッサと通信可能に接続されたメモリと、を含む電子機器であって、メモリに少なくとも１つのプロセッサによって実行可能な指令が記憶され、指令が少なくとも１つのプロセッサによって実行されると、少なくとも１つのプロセッサが第１態様のいずれか一つの実施形態に記載のデータ注釈方法を実施する、電子機器を提供する。

【0008】

第４態様において、本出願の実施形態は、コンピュータ指令が記憶されている非一時的コンピュータ可読記憶媒体であって、コンピュータ指令はコンピュータに第１態様のいずれか一つの実施形態に記載のデータ注釈方法を実施させるためのものである、非一時的コンピュータ可読記憶媒体を提供する。

【0009】

第５態様において、本出願の実施形態は、プロセッサによって実行されると、第１態様のいずれか一つの実施形態に記載のデータ注釈方法を実施するコンピュータプログラムを提供する。

【0010】

本出願の実施形態に係るデータ注釈方法、装置、電子機器、コンピュータ可読記憶媒体、およびコンピュータプログラム製品は、まず、注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、オリジナル注釈アルゴリズムのコードセグメントにおける予め設定された機能に対応するコードの修正可能な部分をマークするための、オリジナル注釈アルゴリズムにおけるアンカーを抽出する。そして、注釈対象データに対応する注釈要求を取得し、注釈要求に対応するターゲットアンカーを確定する。さらに、注釈要求に基づいてターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成する。最後に、ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、注釈結果を取得する。

【0011】

本出願は、オリジナルのアルゴリズムの機能、コードの解析を予め行い、オリジナルのアルゴリズムの各部分の機能および機能に対応するコードの修正可能な部分を確定し、各修正可能な部分に対して対応するアンカーを追加することができる。また、注釈対象データを取得した後、注釈対象データに基づいて対応するオリジナル注釈アルゴリズムを確定するとともに、注釈対象データの注釈要求に基づいて対応するターゲットアンカーを確定することができる。さらに、当該注釈要求の実現パラメータに基づいてターゲットアンカーに対応する内容を修正して当該注釈要求に適合可能なターゲット注釈アルゴリズムを取得することができる。これにより、異なる注釈対象データ、適用シーンに対するオリジナル注釈アルゴリズムの汎用性、および異なる注釈対象データに対するアルゴリズムの構成効率を向上させることができる。

【0012】

上記説明は、本出願の実施形態の肝心または重要な特徴を認識させることが意図されているわけではなく、本出願の範囲を限定するためにも使用されないことを理解されたい。本出願の他の特徴は、以下の説明によって理解しやすくなる。

【0013】

以下の図面を参照して作成された非限定的な実施形態の詳細な説明を読むことによって、本出願の他の特徴、目的、および利点は、より明らかになる。

【図面の簡単な説明】

【0014】

【図1】本出願が適用可能な例示的なシステムアーキテクチャである。

【図2】本出願の実施形態に係るデータ注釈方法のフローチャートである。

【図3】本出願の実施形態に係る別のデータ注釈方法のフローチャートである。

【図4】本出願の実施形態に係る１つの適用シーンにおけるデータ注釈方法の効果を示す概略図である。

【図5】本出願の実施形態に係るデータ注釈装置の構成ブロック図である。

【図6】本出願の実施形態に係るデータ注釈方法の実行に適する電子機器の構成概略図である。

【発明を実施するための形態】

【0015】

以下、図面に関連して、本出願の例示的な実施形態を説明する。理解を助けるために、本出願の実施形態の様々な詳細を含むが、それらは例示的なものにすぎないとみなされるべきである。したがって、当業者であれば、本出願に記載された実施形態は、本出願の範囲および趣旨から逸脱することなく、様々な変更および修正を行うことができることを認識すべきである。同様に、以下の説明では、明確化かつ簡略化のために、公知の機能および構造の説明を省略する。なお、矛盾を生じない限り、本出願における実施形態および実施形態における特徴は、互いに組み合わせられてもよい。

【0016】

また、本出願に係る技術的解決手段では、係るユーザ個人情報の取得（例えば、注釈対象データがユーザの顔情報を含む顔画像である場合）、記憶、応用などは、関連する法律法規の規定に適合しており、公序良俗に反しない。

【0017】

図１は、本出願に係るデータ注釈方法、装置、電子機器、およびコンピュータ可読記憶媒体の一実施形態を適用することができる例示的なシステムアーキテクチャ１００を示す。

【0018】

図１に示すように、システムアーキテクチャ１００は、端末装置１０１、１０２、１０３、ネットワーク１０４、およびサーバ１０５を含んでもよい。ネットワーク１０４は、端末装置１０１、１０２、１０３とサーバ１０５との間に通信リンクを提供するための媒体である。ネットワーク１０４は、有線、無線通信リンク、または光ファイバケーブルなどの様々な接続タイプを含んでもよい。

【0019】

ユーザは、メッセージなどを受信または送信するために、端末装置１０１、１０２、１０３を使用して、ネットワーク１０４を介してサーバ１０５とインタラクションすることができる。端末装置１０１、１０２、１０３、およびサーバ１０５には、データ注釈アプリケーション、モデルトレーニングアプリケーション、インスタント通信アプリケーションなど、両者の間の情報通信を実現するための様々なアプリケーションが実装されていてもよい。

【0020】

端末装置１０１、１０２、１０３、およびサーバ１０５は、ハードウェアであってもよいし、ソフトウェアであってもよい。端末装置１０１、１０２、１０３がハードウェアである場合、スマートフォン、タブレット、ラップトップ、デスクトップコンピュータなどを含むが、これらに限定されない、ディスプレイを有する様々な電子機器であってもよい。端末装置１０１、１０２、１０３がソフトウェアである場合、上記の電子機器にインストールすることが可能であり、複数のソフトウェアまたはソフトウェアモジュールとして実装されてもよく、単一のソフトウェアまたはソフトウェアモジュールとして実装されてもよい。ここでは、具体的には限定しない。サーバ１０５がハードウェアである場合、複数のサーバからなる分散サーバクラスタとして実装されてもよく、単一のサーバとして実装されてもよい。サーバがソフトウェアである場合、複数のソフトウェアまたはソフトウェアモジュールとして実装されてもよく、単一のソフトウェアまたはソフトウェアモジュールとして実装されてもよい。ここでは、具体的に限定しない。

【0021】

サーバ１０５は内蔵された様々なアプリケーションによって様々なサービスを提供することができる。ユーザからアップロードされた注釈対象データを注釈することができるデータ注釈アプリケーションを例にすると、サーバ１０５は当該データ注釈アプリケーションを実行する場合、次のようなことが可能となる。まず、ネットワーク１０４を介して端末装置１０１、１０２、１０３から注釈対象データを受信し、当該注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、当該オリジナル注釈アルゴリズムにおけるアンカーを抽出する。当該アンカーは、当該オリジナル注釈アルゴリズムのコードセグメントにおける予め設定された機能に対応するコードの修正可能な部分をマークするためのものである。そして、サーバ１０５は当該注釈対象データに対応する注釈要求を取得し、当該注釈要求に対応するターゲットアンカーを確定する。さらに、サーバ１０５は当該注釈要求に基づいて当該ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成する。最後に、サーバ１０５は当該ターゲット注釈アルゴリズムを用いて当該注釈対象データを処理し、注釈結果を取得する。

【0022】

なお、注釈対象データは端末装置１０１、１０２、１０３からネットワーク１０４を介して取得することができるほか、様々な方法で予めサーバ１０５のローカルに記憶されていてもよい。したがって、サーバ１０５はこれらのデータがローカルに記憶されていることを検出した場合（例えば、前に残ったデータ注釈の処理すべきタスクを処理し始める場合）は、これらのデータをローカルから直接取得することを選択することができる。この場合、例示的なシステムアーキテクチャ１００は、端末装置１０１、１０２、１０３、およびネットワーク１０４を含まなくてもよい。

【0023】

データ注釈プロセスは、多くの演算リソースおよび強い演算能力を占有する必要があるため、本出願の以下の各実施形態に係るデータ注釈方法は、一般に、強い演算能力、多くの演算リソースを有するサーバ１０５によって実行される。それに応じて、データ注釈装置も、一般に、サーバ１０５に配置される。しかし同時に、端末装置１０１、１０２、１０３も要求を満たす演算能力および演算リソースを有する場合には、端末装置１０１、１０２、１０３はそれらに実装されたデータ注釈アプリケーションにより、上記のサーバ１０５による各演算を完了し、サーバ１０５と同様の結果を出力してもよいことに留意されたい。特に、異なる演算能力を有する端末装置が複数同時に存在するが、データ注釈アプリケーションは、所在の端末装置がより強い演算能力とより多くの演算リソースを有すると判断した場合には、端末装置に上記の演算を実行させるようにしてもよい。これにより、サーバ１０５の演算負荷を適宜に軽減することができる。したがって、データ注釈装置を端末装置１０１、１０２、１０３に設けてもよい。この場合、例示的なシステムアーキテクチャ１００は、サーバ１０５およびネットワーク１０４を含まなくてもよい。

【0024】

図１の端末装置、ネットワーク、およびサーバの数は、例示的なものにすぎないことを理解すべきである。実装の必要に応じて、任意の数の端末装置、ネットワーク、およびサーバを有してもよい。

【0025】

図２を参照すると、図２は、本出願の実施形態に係るデータ注釈方法のフローチャートである。フローチャート２００は、以下のステップを含む。

【0026】

ステップ２０１では、注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、オリジナル注釈アルゴリズムにおけるアンカーを抽出する。

【0027】

本実施形態では、データ注釈方法の実行主体（例えば、図１に示すサーバ１０５）は、注釈対象データを確定した後、当該注釈対象データに対応するオリジナル注釈アルゴリズムを取得し、当該オリジナル注釈アルゴリズムにおけるアンカーを確定するが、アンカーは、当該オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる。

【0028】

一般に、オリジナル注釈アルゴリズムは、注釈対象データのタイプおよび注釈目的に関連している。例えば、注釈対象データが画像データである場合には、注釈目的は画像データにおける特定の内容を注釈、分割（例えば、顔、車両など）することであってもよい。この場合、オリジナル注釈アルゴリズムは意味分割ニューラルネットワークであってもよい。注釈対象データがオーディオ情報である場合には、注釈目的はオーディオ情報の特徴ベクトルを生成することであってもよい。これにより、後の音声情報の分類処理が便利になる。この場合、オリジナル注釈アルゴリズムは、畳み込みニューラルネットワークに基づいて音声情報のラベルベクトルを生成し、音声情報の注釈を完了するための、畳み込みニューラルネットワークであってもよい。

【0029】

なお、注釈対象データは、上記の実行主体がローカル記憶装置から直接取得してもよいし、ローカル以外の記憶装置（例えば、図１に示す端末装置１０１、１０２、１０３）から取得してもよい。ローカル記憶装置は、上記の実行主体に設けられたデータ記憶モジュール、例えば、サーバハードディスクであってもよい。この場合、注釈対象データをローカルに迅速に読み出すことができる。ローカル以外の記憶装置は、データを記憶するために設けられた他の任意の電子機器、例えば、いくつかのユーザ端末などであってもよい。この場合、上記の実行主体は、取得コマンドを当該電子機器に送信することにより、必要な注釈対象データを取得することができる。

【0030】

ここで、データ注釈をより良く実現するために、注釈対象データに対応するオリジナル注釈アルゴリズムは、通常、上記の実行主体のローカルに記憶されている。これにより、上記の実行主体は、注釈データの内容に応じて、オリジナル注釈アルゴリズムを迅速に呼び出して、適合させることができる。

【0031】

さらに、オリジナル注釈アルゴリズムの解析および得られたアンカーの更新、構成を助けるために、オリジナル注釈アルゴリズムにおけるアンカーは、通常、上記の実行主体によってオリジナル注釈アルゴリズムを取得した後、実行主体のローカルで対応する解析を行い、オリジナル注釈アルゴリズムに存在するアンカーを確定する。実際には、オリジナル注釈アルゴリズムに存在するアンカーに対する解析、マーク作業は、上記の実行主体以外の装置によって実行されてもよい。オリジナル注釈アルゴリズムにおけるアンカーの注釈が完了した後、関連する注釈情報をオリジナル注釈アルゴリズムに対応させて上記の実行主体にフィードバックして、アンカーソースを拡張することができる。

【0032】

ステップ２０２では、注釈対象データに対応する注釈要求を取得し、注釈要求に対応するターゲットアンカーを確定する。

【0033】

本実施形態では、上記のステップ２０１に基づいて注釈対象データに対応するオリジナル注釈アルゴリズムおよび当該オリジナルのアルゴリズムにおけるアンカーを確定した後、当該注釈対象データに対応する注釈要求に基づいて、オリジナル注釈アルゴリズムにおける、当該注釈要求に対応して機能を実現するターゲットアンカーを確定する。

【0034】

ここで、注釈要求は、画像における特定オブジェクトの確定、画像の特徴情報の確定、顔画像における五官の位置情報の確定、音声セグメントからの特定情報の抽出などの注釈目的であり得る。

【0035】

実際には、通常、上記の実行主体はステップ２０１で確定されたオリジナル注釈アルゴリズムにおけるアンカーを確定し、当該アンカーに対応する機能に基づいてマークした後、注釈対象データの提供者にフィードバックする。これにより、当該提供者は自身の注釈要求に応じて対応する機能タグ、ターゲットアンカーを選択することができる。

【0036】

ステップ２０３では、注釈要求に基づいてターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成する。

【0037】

本実施形態では、ターゲットアンカーがあると確定された後、注釈要求に対応する内容に応じて、当該ターゲットアンカーに対応するコード部分の実現パラメータを調整する。例えば、注釈対象データが画像である場合には、調整すべきパラメータは、認識範囲サイズ、認識内容精度、データ並列量などの内容であり得る。これにより、ターゲットアンカーに対応するコードを注釈対象データの注釈要求に適合させることができる。さらに、当該注釈要求を満たすために利用可能なターゲット注釈アルゴリズムを取得することができる。

【0038】

ステップ２０４では、ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、注釈結果を取得する。

【0039】

本実施形態では、上記のステップ２０３に基づいて調整後のターゲット注釈アルゴリズムを取得した後、当該ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、注釈要求を満たすデータ注釈動作を完了させ、最終的な注釈結果を取得する。

【0040】

本出願の実施形態に係るデータ注釈方法は、オリジナルのアルゴリズムの機能およびコードに対する解析を予め行い、オリジナルのアルゴリズムの各部分の機能および機能に対応するコードの修正可能な部分を確定し、各修正可能な部分に対して対応するアンカーを追加することができる。また、注釈対象データを取得した後、注釈対象データに基づいて対応するオリジナル注釈アルゴリズムを確定するとともに、注釈対象データの注釈要求に基づいて対応するターゲットアンカーを確定することができる。さらに、当該注釈要求の実現パラメータに基づいてターゲットアンカーに対応する内容を修正して当該注釈要求に適合可能なターゲット注釈アルゴリズムを取得することができる。これにより、異なる注釈対象データおよび適用シーンに対するオリジナル注釈アルゴリズムの汎用性、および異なる注釈対象データに対するアルゴリズムの構成効率を向上させることができる。

【0041】

本実施形態のいくつかのオプション的な実施形態では、上記の、当該注釈要求に基づいて当該ターゲットアンカーの実現パラメータを調整するステップは、当該ターゲットアンカーに対応する修正可能なコードを取得し、当該修正可能なコードにおける各部分の機能を提示するための、当該修正可能なコードのプロンプト情報を生成するステップと、当該修正可能なコードおよび当該プロンプト情報を提示するステップと、当該修正可能なコードに対応するパラメータ修正情報を受信し、当該パラメータ修正情報に基づいて当該修正可能なコードを調整するステップと、を含む。

【0042】

具体的には、注釈要求に対応するターゲットアンカーを取得した後、当該ターゲットアンカーに対応する修正可能なコードを抽出し、当該修正可能なコードのプロンプト情報を生成する。プロンプト情報は当該修正可能なコードにおける各部分の機能を提示するためのものである。例えば、当該プロンプト情報は、当該修正可能なコードが実現可能な対応機能とコードにおける各文字、パラメータに対応する意味、およびコード修正後に生じ得る効果を提示する。そして、当該ターゲットアンカーに対応する修正可能なコードおよびプロンプト情報を提示する。これにより、ユーザは当該修正可能なコードおよび対応するプロンプト情報に基づいて、修正可能なコードに対応するパラメータ修正情報を構成して生成することができる。さらに、上記の実行主体は、修正可能なコードに対応するパラメータ修正情報を受信した後、パラメータ修正情報に基づいて修正可能なコードを調整する。情報を提示することにより、データ注釈機能を実現したいユーザによる機能およびパラメータ構成の調整を支援し、ターゲット注釈アルゴリズムを取得する効率と品質を向上させることができる。

【0043】

図３を参照すると、図３は、本出願の実施形態に係る別のデータ注釈方法のフローチャートである。フローチャート３００は、以下のステップを含む。

【0044】

ステップ３０１では、注釈対象データが属するタイプ情報を解析する。

【0045】

本実施形態では、注釈対象データを取得した後、当該注釈対象データに対応するタイプ情報を取得するために、当該注釈対象データのタイプを解析する。当該タイプ情報は、画像タイプデータ、オーディオタイプデータ、およびテキストタイプデータのうちの少なくとも１つを含む。

【0046】

ステップ３０２では、タイプ情報に基づいて、予め設定されたアルゴリズムデータベースからオリジナル注釈アルゴリズムを抽出し、オリジナル注釈アルゴリズムにおけるアンカーを抽出する。

【0047】

本実施形態では、上記のステップ３０１で確定された注釈対象データのタイプ情報を取得し、当該タイプ情報に基づいて予めアルゴリズムデータベースから当該タイプ情報に対応するアルゴリズムを抽出する。アルゴリズムデータベースには、予めデータのタイプおよび注釈要求に応じて、対応する注釈アルゴリズムを設定しておいてもよい。これにより、後に注釈対象データのタイプ、注釈要求などの内容を取得した場合に、アルゴリズムのマッチングを高速に行うことができる。

【0048】

さらに、アルゴリズムデータベースにおける注釈アルゴリズムは、上記の実行主体の運営側によってカスタマイズされてもよいし、履歴データにおける異なる注釈データ、注釈要求に対応するターゲット注釈アルゴリズムに基づいてマッチング・記憶を行ってもよい。これにより、後に同一の、または類似度が閾値条件を超えた注釈データ、注釈要求を受信した場合に、近似的なターゲット注釈アルゴリズムを確定し、効率を向上させることができる。また、他のユーザからアップロードする形で、アルゴリズムデータベースにおける注釈アルゴリズムを補完、更新することにより、アルゴリズムデータベースに記憶されている注釈アルゴリズムの数量を豊富にし、その品質を高め、アルゴリズムデータベースの使用価値を向上させることができる。

【0049】

その上、アルゴリズムデータベースを構築する際には、注釈アルゴリズムが使用されるシーン、注釈対象データのタイプ、処理能力、並列量、実現可能な注釈機能などの内容に基づいて、アルゴリズムデータベースにおける注釈アルゴリズムに、対応する注釈情報を付加することも可能である。これにより、ユーザの指示を通じて、またはユーザからアップロードされた注釈対象データパラメータ、注釈要求の内容に基づいて、関連するマッチングに対応するオリジナル注釈アルゴリズムを自主的に選択することができるため、ユーザ体験を向上させることができる。

【0050】

ステップ３０３では、当該注釈対象データに対応する注釈要求を取得し、当該注釈要求に対応するターゲットアンカーを確定する。

【0051】

ステップ３０４では、当該注釈要求に基づいて当該ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成する。

【0052】

ステップ３０５では、当該ターゲット注釈アルゴリズムを用いて当該注釈対象データを処理し、注釈結果を取得する。

【0053】

上記のステップ３０３～３０５は図２に示すステップ２０２～２０４と一致し、同じ部分の内容は、前の実施形態の対応する部分を参照されたい。ここではこれ以上説明しない。

【0054】

本実施形態では、上記の図２に対応する実施形態に基づいて、さらに、アルゴリズムデータベースを構築する形で複数の注釈アルゴリズムを記憶した後、注釈対象データのタイプ情報に基づいて、対応する初期注釈アルゴリズムを確定する。これにより、データ注釈方法が複数のタイプの注釈対象データ、多面的な注釈要求に対応する場合の注釈処理能力を向上させることができる。

【0055】

本実施形態のいくつかのオプション的な実施形態では、上記の、当該タイプ情報に基づいて、予め設定されたアルゴリズムデータベースからオリジナル注釈アルゴリズムを抽出するステップは、当該タイプ情報に対応する推奨アルゴリズムを提示するステップと、当該推奨アルゴリズムに対する選択情報を受信したことに応答して、当該選択情報によって確定された推奨アルゴリズムを当該オリジナル注釈アルゴリズムとして確定するステップと、を含む。

【0056】

具体的には、注釈対象データのタイプ情報を取得した後、予め設定されたアルゴリズムデータベースから当該タイプ情報に対応するオリジナル注釈アルゴリズムを抽出する際に、当該アルゴリズムデータベースから当該注釈対象データのタイプ情報に対応する一つまたは複数の推奨アルゴリズムを同時に抽出することができる。これにより、ユーザは自身の実際のニーズに応じて適当なオリジナル注釈アルゴリズムを選択することができる。推奨アルゴリズムに対する選択情報を受信した後、当該選択情報に対応する推奨アルゴリズムをオリジナル注釈アルゴリズムとして確定する。これにより、ユーザに対して実際の要求にいっそう適合できるオリジナル注釈アルゴリズムを提供し、取得されたオリジナル注釈アルゴリズムの品質を向上させることができる。

【0057】

上記のいずれかの実施形態に基づいて、当該ターゲット注釈アルゴリズムを生成するステップの後に、当該注釈対象データに対する前処理の指示を取得したことに応答して、当該注釈対象データに対して、当該前処理の指示に従って、重複排除、偏差補正および色度調整のうちの少なくとも１つを含む対応する前処理動作を行うステップをさらに含む。

【0058】

具体的には、ターゲット注釈アルゴリズムを取得した後、注釈対象データに対する前処理の指示を受信すると、当該前処理の指示に従って、注釈対象データに対して、ターゲット注釈アルゴリズムの適応的な処理を行う。前処理動作は、重複排除、偏差補正および色度調整のうちの少なくとも１つを含む。前処理を通じて注釈対象データに対してターゲット注釈アルゴリズムの適応的な処理を行うことにより、ターゲット注釈アルゴリズムは、注釈対象データをより良く注釈し、良質な注釈結果を取得することができる。

【0059】

実際には、注釈対象データの前処理方法は注釈対象データのタイプに応じて適当に設定されてもよい。例えば、注釈対象データが画像データである場合、対応する前処理方法は、要素のエンクロウジング（ｅｌｅｍｅｎｔ ｅｎｃｌｏｓｉｎｇ）、フレームセグメンテーション（ｆｒａｍｅ ｓｅｇｍｅｎｔａｔｉｏｎ）のうちの少なくとも１つを含んでもよい。

【0060】

さらに、データ注釈の効率を向上させるために、特に上記の図３に対応する実施形態では、アルゴリズムデータベースに基づいてオリジナル注釈アルゴリズムを取得し、ユーザは同じタイプの注釈対象データに対して同じ注釈要求がある場合には、当該データ注釈方法は、注釈結果を取得した後に、さらに、当該注釈要求に基づいて当該ターゲット注釈アルゴリズムの機能タグを生成するステップと、当該機能タグに基づいて、異なる注釈要求に対応する各ターゲット注釈アルゴリズムと、各ターゲット注釈アルゴリズムにおける当該オリジナル注釈アルゴリズムに関する修正情報との関係が記録されたテーブルを生成するステップと、を含む。

【0061】

具体的には、注釈対象データに対応する注釈要求の注釈結果を取得した後、今回用いた注釈データと当該注釈データに対応する注釈要求に基づいて、取得したターゲット注釈アルゴリズムの機能タグを生成する。その後、当該ターゲット機能タグに基づいて、注釈要求に対応するターゲット注釈アルゴリズムと、当該ターゲット注釈アルゴリズムにおけるオリジナル注釈アルゴリズムに関する修正情報との関係が記録されたテーブルを生成する。これにより、当該テーブルに基づいて、注釈要求に対応するターゲット注釈アルゴリズムと当該ターゲット注釈アルゴリズムにおけるオリジナル注釈アルゴリズムに対する修正部分を取得して繰り返し構成し、後続の同じ注釈要求に対する呼び出しおよびアルゴリズムデータベースの構築効率を向上させることができる。

【0062】

さらに、ユーザの使用を助けるために、当該関係テーブルには、注釈対象データの内容、注釈対象データのタイプが含まれてもよい。これにより、より多くの参照情報を提供することができる。後に当該関係テーブルの内容に基づいてターゲット注釈アルゴリズムを取得、構成することに役立つ。

【0063】

理解を深めるために、本出願はまた、１つの具体的な適用シーンに関連して、具体的な実施形態を提供する。当該適用シーンでは、データ注釈方法の実行主体がユーザからアップロードされた画像形式の注釈対象データを受信した後、対応する処理を行い、注釈結果を取得するプロセスは、以下の通りである。

【0064】

ユーザからアップロードされた注釈対象データを受信すると、当該注釈データのタイプを解析する。例えば、本適用シーンでは、当該注釈対象データのタイプ情報を「ピクチャ」として確定する。

【0065】

当該注釈データに対応する意味分割ニューラルネットワークをオリジナル注釈アルゴリズムとして取得し、当該オリジナル注釈アルゴリズムにおけるアンカーを抽出する。

【0066】

当該注釈対象データに対応する「画像において顔画像をマークする」という注釈要求を取得し、当該注釈要求に対応するターゲットアンカーを確定する。

【0067】

当該ターゲットアンカーに対応する修正可能なコードを取得して提示する。当該修正可能なコードを提示する効果は、図４を参照することができる。ここで、アルゴリズム構成情報ボックス内にはターゲットアンカーに対応する修正可能なコードの内容が提示されている。

【0068】

ユーザは直接、図４に示すインタフェースを介してアルゴリズム構成部分の内容を修正して、修正可能なコードの構成を完了する。本出願の実行主体は、対応する修正内容（パラメータ修正情報）を受信した後、修正可能なコードを調整し、さらに同様にターゲット注釈アルゴリズムの並列量、認識時間を調整することができる。これにより、最終的なターゲット注釈アルゴリズムを生成することができる。

【0069】

ターゲット注釈アルゴリズムを取得した後、当該ターゲット注釈アルゴリズムを用いて注釈対象データを処理し、最終的な注釈結果を取得する。

【0070】

さらに図５を参照すると、本出願は、上記の各図に示す方法の実施形態として、様々な電子機器に具体的に適用可能な図２に示す方法の実施形態に対応するデータ注釈装置の一実施形態を提供する。

【0071】

図５に示すように、本実施形態に係るデータ注釈装置５００は、注釈対象データに対応するオリジナル注釈アルゴリズムを取得するように構成されるオリジナル注釈アルゴリズム抽出サブユニットと、当該オリジナル注釈アルゴリズムにおけるアンカーを抽出するように構成されるアンカー抽出サブユニットであって、アンカーは、当該オリジナル注釈アルゴリズムのコードセグメントにおける、予め設定された機能に対応するコードの修正可能な部分をマークするために用いられる、アンカー抽出サブユニットと、を含むオリジナル注釈アルゴリズム・アンカー抽出ユニット５０１と、当該注釈対象データに対応する注釈要求を取得し、当該注釈要求に対応するターゲットアンカーを確定するように構成されるターゲットアンカー確定ユニット５０２と、当該注釈要求に基づいて当該ターゲットアンカーの実現パラメータを調整し、ターゲット注釈アルゴリズムを生成するように構成される注釈アルゴリズム生成ユニット５０３と、当該ターゲット注釈アルゴリズムを用いて当該注釈対象データを処理し、注釈結果を取得するように構成される注釈結果生成ユニット５０４と、を含んでもよい。

【0072】

本実施形態では、データ注釈装置５００におけるオリジナル注釈アルゴリズム・アンカー抽出ユニット５０１、ターゲットアンカー確定ユニット５０２、注釈アルゴリズム生成ユニット５０３、および注釈結果生成ユニット５０４の具体的な処理およびそれによる技術的効果は、それぞれ図２に対応する実施形態におけるステップ２０１～２０４に関する説明を参照することができる。ここではこれ以上説明しない。

【0073】

本実施形態のいくつかのオプション的な実施形態では、当該オリジナル注釈アルゴリズム抽出サブユニットは、当該注釈対象データが属するタイプ情報を解析するように構成されるタイプ解析モジュールであって、タイプ情報は、画像タイプデータ、オーディオタイプデータおよびテキストタイプデータのうちの少なくとも１つを含む、タイプ解析モジュールと、当該タイプ情報に基づいて、予め設定されたアルゴリズムデータベースから当該オリジナル注釈アルゴリズムを抽出するように構成されるオリジナル注釈アルゴリズム抽出モジュールと、を含む。

【0074】

本実施形態のいくつかのオプション的な実施形態では、当該オリジナル注釈アルゴリズム抽出モジュールは、当該タイプ情報に対応する推奨アルゴリズムを提示するように構成される推奨アルゴリズム提示サブモジュールと、当該推奨アルゴリズムに対する選択情報を受信したことに応答して、当該選択情報に基づいて確定された推奨アルゴリズムを当該オリジナル注釈アルゴリズムとして確定するように構成されるオリジナル注釈アルゴリズム確定サブモジュールと、を含む。

【0075】

本実施形態のいくつかのオプション的な実施形態では、当該注釈アルゴリズム生成ユニット５０３は、当該ターゲットアンカーに対応する修正可能なコードを取得し、当該修正可能なコードにおける各部分の機能を提示するための、当該修正可能なコードのプロンプト情報を生成するように構成されるプロンプト情報生成サブユニットと、当該修正可能なコードおよび当該プロンプト情報を提示するように構成される修正可能内容提示サブユニットと、当該修正可能なコードに対応するパラメータ修正情報を受信し、当該パラメータ修正情報に基づいて当該修正可能なコードを調整するように構成されるコード調整サブユニットと、を含み、当該注釈アルゴリズム生成ユニットは、当該オリジナル注釈アルゴリズムにおける修正可能なコードを調整した結果に基づいて、当該ターゲット注釈アルゴリズムを生成するようにさらに構成されている。

【0076】

本実施形態のいくつかのオプション的な実施形態では、当該データ注釈装置は、当該注釈対象データに対する前処理の指示を取得したことに応答して、当該注釈対象データに対して、当該前処理の指示に従って、重複排除、偏差補正および色度調整のうちの少なくとも１つを含む対応する前処理動作を行うように構成されるデータ前処理ユニットをさらに含む。

【0077】

本実施形態のいくつかのオプション的な実施形態では、当該データ注釈装置は、当該注釈要求に基づいて、当該ターゲット注釈アルゴリズムの機能タグを生成するように構成される機能タグ生成ユニットと、当該機能タグに基づいて、異なる注釈要求に対応する各ターゲット注釈アルゴリズムと、各ターゲット注釈アルゴリズムにおける当該オリジナル注釈アルゴリズムに関する修正情報との関係が記録されたテーブルを生成するように構成される関係テーブル生成ユニットと、をさらに含む。

【0078】

本実施形態は、上記の方法の実施形態に対応する装置の実施形態として存在する。本実施形態に係るデータ注釈装置は、オリジナルのアルゴリズムの機能、コードの解析を予め行い、オリジナルのアルゴリズムの各部分の機能および機能に対応するコードの修正可能な部分を確定し、各修正可能な部分に対して対応するアンカーを追加し、その後、注釈対象データを取得した後、注釈対象データに基づいて対応するオリジナル注釈アルゴリズムを確定するとともに、注釈対象データの注釈要求に基づいて対応するターゲットアンカーを確定することができる。さらに、当該注釈要求の実現パラメータに基づいてターゲットアンカーに対応する内容を修正して当該注釈要求に適合可能なターゲット注釈アルゴリズムを取得することができる。これにより、異なる注釈対象データおよび適用シーンに対するオリジナル注釈アルゴリズムの汎用性、および異なる注釈対象データに対するアルゴリズムの構成効率を向上させることができる。

【0079】

本出願の実施形態によれば、本出願はさらに、電子機器、読み取り可能な記憶媒体、およびコンピュータプログラムを提供する。

【0080】

図６は、本出願の実施形態を実施するために使用することができる例示的な電子機器６００の概略ブロック図である。電子機器は、ラップトップ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピュータ、および他の適切なコンピュータのような様々な形態のデジタルコンピュータを示すことが意図されている。電子機器はまた、個人デジタル処理、携帯電話、スマートフォン、ウェアラブル装置、および他の同様のコンピューティングデバイスのような様々な形態のモバイルデバイスを示すことができる。本明細書に示すコンポーネント、それらの接続と関係、およびそれらの機能は、あくまでも例示であり、本明細書に記載されたおよび／または要求される本明細書の実装を限定することは意図されていない。

【0081】

図６に示すように、機器６００は、読み出し専用メモリ（ＲＯＭ）６０２に記憶されたコンピュータプログラム、または記憶ユニット６０８からランダムアクセスメモリ（ＲＡＭ）６０３にロードされたコンピュータプログラムに基づいて、様々な適切な動作および処理を実行することができる計算ユニット６０１を含む。ＲＡＭ６０３には機器６００の動作に必要な各種プログラムおよびデータも記憶することができる。計算ユニット６０１、ＲＯＭ６０２およびＲＡＭ６０３は、バス６０４を介して互いに接続されている。入出力（Ｉ／Ｏ）インタフェース６０５もバス６０４に接続されている。

【0082】

機器６００における複数のコンポーネントは、Ｉ／Ｏインタフェース６０５に接続されている。それには、キーボード、マウスなどの入力ユニット６０６と、各種のディスプレイ、スピーカなどの出力ユニット６０７と、磁気ディスク、光ディスクなどの記憶ユニット６０８と、ＮＩＣ、モデム、無線通信送受信機などの通信ユニット６０９と、が含まれる。通信ユニット６０９は、機器６００が、インターネットなどのコンピュータネットワークおよび／または様々な電気通信ネットワークを介して他のデバイスと情報／データを交換することを可能にする。

【0083】

計算ユニット６０１は、処理および計算能力を有する様々な汎用および／または専用の処理モジュールであってもよい。計算ユニット６０１のいくつかの例示として、中央処理ユニット（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、様々な専用人工知能（ＡＩ）計算チップ、様々な機械学習モデルアルゴリズムを実行する計算ユニット、デジタル信号プロセッサ（ＤＳＰ）、および任意の適切なプロセッサ、コントローラ、マイクロコントローラなどが挙げられるが、これらに限定されない。計算ユニット６０１は、上記の様々な方法および処理、例えば、データ注釈方法を実行する。例えば、いくつかの実施形態では、データ注釈方法は、記憶ユニット６０８のような機械可読媒体に有形的に含まれるコンピュータソフトウェアプログラムとして実装されてもよい。いくつかの実施形態では、コンピュータプログラムの一部または全部は、ＲＯＭ６０２および／または通信ユニット６０９を介して機器６００にロードおよび／またはインストールされてもよい。コンピュータプログラムがＲＡＭ６０３にロードされ、計算ユニット６０１によって実行される場合には、上記のデータ注釈方法の１つまたは複数のステップを実行することができる。あるいは、他の実施形態では、計算ユニット６０１は、他の任意の適切な方法を通じて（例えば、ファームウェアによって）、データ注釈方法を実行するように構成されてもよい。

【0084】

本明細書に述べた上記システムおよび技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準製品（ＡＳＳＰ）、オンチップシステムのシステム（ＳＯＣ）、コンプレックスプログラマブルロジックデバイス（ＣＰＬＤ）、コンピュータハードウェア、ファームウェア、ソフトウェア、および／またはそれらの組み合わせで実装することができる。これらの様々な実施形態は、１つまたは複数のコンピュータプログラム内に実装されることを含んでもよい。当該１つまたは複数のコンピュータプログラムは、少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステム上で実行および／または解釈することができる。当該プログラマブルプロセッサは、記憶システム、少なくとも１つの入力デバイス、および少なくとも１つの出力デバイスからデータおよび指令を受信し、データおよび指令を当該記憶システム、当該少なくとも１つの入力デバイス、および当該少なくとも１つの出力デバイスに送信することができる専用または汎用プログラマブルプロセッサであり得る。

【0085】

本明細書の方法を実施するためのプログラムコードは、１つまたは複数のプログラミング言語の任意の組み合わせを用いて書くことができる。これらのプログラムコードは、プロセッサまたはコントローラによって実行されるときに、フローチャートおよび／またはブロック図に規定された機能／動作を実施するように、汎用コンピュータ、専用コンピュータ、または他のプログラマブルデータ処理装置のプロセッサまたはコントローラに提供することができる。プログラムコードは、完全に機械上で実行されるか、部分的に機械上で実行されるか、独立したソフトウェアパッケージとして機械上で部分的に実行されかつ遠隔機械上で部分的に実行されるか、または完全に遠隔機械もしくはサーバ上で実行されてもよい。

【0086】

本明細書の文脈では、機械可読媒体は、指令実行システム、機器、もしくはデバイスが使用するため、または指令実行システム、機器、もしくはデバイスと組み合わせて使用するためのプログラムを含むかまたは記憶することができる有形媒体とすることができる。機械可読媒体は、機械可読信号媒体または機械可読記憶媒体とすることができる。機械可読媒体は、電子的、磁気的、光学的、電磁的、赤外線の、または半導体のシステム、機器もしくはデバイス、またはこれらの任意の適切な組み合わせを含んでもよいが、これらに限定されない。機械可読記憶媒体のより具体的な例は、１つまたは複数のラインに基づく電気的接続、携帯型コンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭまたはフラッシュメモリ）、光ファイバ、携帯用のコンパクトディスク読取り専用メモリ（ＣＤ－ＲＯＭ）、光学記憶装置、磁気記憶装置、またはこれらの任意の適切な組み合わせを含む。

【0087】

ユーザとの相互作用を提供するために、本明細書に記載されたシステムおよび技術は、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）またはＬＣＤ（液晶ディスプレイ）モニタ）と、キーボードおよびポインティングデバイス（例えば、マウスまたはトラックボール）とを有するコンピュータ上で実施されてもよく、ユーザはキーボードおよびポインティングデバイスを介して入力をコンピュータに提供することができる。他の種類のデバイスはさらに、ユーザとの相互作用を提供するために使用されてもよい。例えば、ユーザに提供されるフィードバックは、任意の形態のセンサフィードバック（例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック）であってもよい。ユーザからの入力は、任意の形態（音響入力、音声入力、または触覚入力を含む）で受信されてもよい。

【0088】

本明細書に記載されたシステムおよび技術は、バックグラウンドコンポーネントを含む計算システム（例えば、データサーバとして）、またはミドルウェアコンポーネントを含む計算システム（例えば、アプリケーションサーバ）、またはフロントエンドコンポーネントを含む計算システム（例えば、グラフィカルユーザインターフェースまたはウェブブラウザを有するユーザコンピュータ。ユーザは当該グラフィカルユーザインターフェースまたは当該ウェブブラウザを介して、本明細書に記載されたシステムおよび技術の実施形態と相互作用することができる）、またはそのようなバックグラウンドコンポーネント、ミドルウェアコンポーネント、もしくはフロントエンドコンポーネントの任意の組み合わせを含む計算システムにおいて実装されてもよい。システムのコンポーネントは、任意の形態または媒体のデジタルデータ通信（例えば、通信ネットワーク）によって相互に接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、およびインターネットを含む。

【0089】

コンピュータシステムは、クライアントおよびサーバを含んでもよい。クライアントおよびサーバは、一般に、互いに離れており、一般に通信ネットワークを介して相互作用する。クライアントとサーバの関係は、対応するコンピュータ上で動作し、互いにクライアント・サーバ関係を有するコンピュータプログラムによって生成される。サーバは、クラウドサーバであってもよい。クラウドサーバは、クラウドコンピューティングサーバまたはクラウドホストとも呼ばれ、クラウドコンピューティングサービスシステムのうちの一つのホスト製品である。これにより、従来の物理ホストと仮想専用サーバ（ＶＰＳ，Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｓｅｒｖｅｒ）サービスに存在する管理難度が大きく、業務拡張性が弱いという欠陥を解決することができる。サーバは、分散システムのサーバであってもよいし、ブロックチェーンを結合したサーバであってもよい。

【0090】

本出願の実施形態の技術的解決手段によれば、オリジナルのアルゴリズムの機能、コードの解析を予め行い、オリジナルのアルゴリズムの各部分の機能および機能に対応するコードの修正可能な部分を確定し、各修正可能な部分に対して対応するアンカーを追加することができる。また、注釈対象データを取得した後、注釈対象データに基づいて対応するオリジナル注釈アルゴリズムを確定するとともに、注釈対象データの注釈要求に基づいて対応するターゲットアンカーを確定することができる。さらに、当該注釈要求の実現パラメータに基づいてターゲットアンカーに対応する内容を修正して当該注釈要求に適合可能なターゲット注釈アルゴリズムを取得することができる。これにより、異なる注釈対象データおよび適用シーンに対するオリジナル注釈アルゴリズムの汎用性、および異なる注釈対象データに対するアルゴリズムの構成効率を向上させることができる。

【0091】

なお、上述した様々な形態のフローを用いて、ステップを改めて並び替え、追加または削除を行うことができる。例えば、本出願に記載された各ステップは、本出願に開示された技術案の所望の結果が達成できる限り、並行して実行されてもよいし、順次実行されてもよいし、異なる順番で実行されてもよい。本明細書はここで制限しない。

【0092】

上記具体的な実施形態は、本出願の保護範囲を限定するものではない。設計要件および他の要因に従って、様々な修正、組み合わせ、副次的な組み合わせ、および置換を行うことができることを当業者は理解すべきである。本出願の趣旨および原理を逸脱せずに行われたあらゆる修正、均等な置換および改善などは、いずれも本出願の保護範囲内に含まれるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【外国語明細書】

Ｔｉｔｌｅ ｏｆ Ｉｎｖｅｎｔｉｏｎ

Ｆｉｇｕｒｅ １

Ｆｉｇｕｒｅ ２

Ｆｉｇｕｒｅ ３

Ｆｉｇｕｒｅ ４

Ｆｉｇｕｒｅ ５

Ｆｉｇｕｒｅ ６