特開 2024-136083 情報処理装置、システム、方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024136083

(43)【公開日】2024-10-04

(54)【発明の名称】情報処理装置、システム、方法およびプログラム

(51)【国際特許分類】

   G06Q 50/04 20120101AFI20240927BHJP

   G06N 20/00 20190101ALI20240927BHJP

【ＦＩ】

G06Q50/04

G06N20/00 130

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2023047056

(22)【出願日】2023-03-23

(71)【出願人】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】100110607

【弁理士】

【氏名又は名称】間山 進也

(72)【発明者】

【氏名】吉見 駿

【テーマコード（参考）】

5L049

5L050

【Ｆターム（参考）】

5L049CC03

5L050CC03

(57)【要約】

【課題】 アノテーションに要する負担を軽減する情報処理装置、システム、方法およびプログラムを提供すること。
【解決手段】 情報処理装置であって、製品に関する作業の動画を取得する作業動画取得部３２０と、作業の標準的な作業時間のデータを含む標準作業情報を取得する標準作業情報取得部３１０と、標準作業時間に基づいて、動画の所定箇所と作業とを対応付ける情報であるアノテーション情報を生成するアノテーション処理部３３０とを含む。
【選択図】 図３

【特許請求の範囲】

【請求項1】

製品に関する作業の動画を取得する手段と、
前記作業の標準的な作業時間のデータを含む標準作業情報を取得する手段と、
前記標準作業時間に基づいて、前記動画の所定箇所と前記作業とを対応付ける情報であるアノテーション情報を生成するアノテーション処理手段と
を含む、情報処理装置。

【請求項2】

前記作業時間に基づくシークバーを含む画面を表示する手段をさらに含み、
前記アノテーション処理手段は、前記シークバーに対する操作によって、アノテーションの調整を行う、
請求項１に記載の情報処理装置。

【請求項3】

前記表示する手段は、前記画面に前記作業動画を表示する、
請求項２に記載の情報処理装置。

【請求項4】

前記表示する手段は、過去のアノテーション結果から算出される作業時間の中央値に基づくシークバーを表示する、
請求項２に記載の情報処理装置。

【請求項5】

前記表示する手段は、過去のアノテーション結果から算出される作業時間の平均値に基づくシークバーを表示する、
請求項２に記載の情報処理装置。

【請求項6】

前記標準作業情報は、前記作業に係るラベルのデータを含み、
前記アノテーション処理手段は、前記作業動画の各フレームに前記ラベルを対応付ける、
請求項１に記載の情報処理装置。

【請求項7】

前記アノテーション処理手段によってアノテーションした作業動画に基づいて、ＡＩモデルを生成する手段
をさらに含む、請求項１に記載の情報処理装置。

【請求項8】

製品に関する作業の動画を取得する手段と、
前記作業の標準的な作業時間のデータを含む標準作業情報を取得する手段と、
前記標準作業時間に基づいて、前記動画の所定箇所と前記作業とを対応付ける情報であるアノテーション情報を生成するアノテーション処理手段と
を含む、システム。

【請求項9】

製品に関する作業の動画を取得するステップと、
前記作業の標準的な作業時間のデータを含む標準作業情報を取得するステップと、
前記標準作業時間に基づいて、前記動画の所定箇所と前記作業とを対応付ける情報であるアノテーション情報を生成するステップ
を含む、方法。

【請求項10】

情報処理装置が実行するプログラムであって、前記情報処理装置を
製品に関する作業の動画を取得する手段、
前記作業の標準的な作業時間のデータを含む標準作業情報を取得する手段、
前記標準作業時間に基づいて、前記動画の所定箇所と前記作業とを対応付ける情報であるアノテーション情報を生成するアノテーション処理手段と
として機能させる、プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ＡＩモデルを生成するための画像に対してアノテーションする情報処理装置、方法およびプログラムに関する。

【背景技術】

【0002】

工場などにおいて製品を組み立てる際に、作業中の画像を撮影し、作業の手順の正確性を判定することで、製品の歩留まりを向上させるプロセス保証技術が開発されている。

【0003】

上述の判定は、撮影した画像と、ＡＩモデルとを比較することで行うことができる。そのため、モデルとなる画像のうちモデルとしてより適切な箇所を示す情報としてアノテーション情報を付与する作業がある。

【0004】

例えば、特開２０２１－０８９４９１号公報（特許文献１）では、疑似ラベルが正解ラベルとして妥当か否かの二者択一の判定によりアノテーションを行う技術が開示されている。特許文献１によれば、人によるアノテーションの作業を軽減する技術が提供される。

【0005】

繰り返し作業の録画データにアノテーションを行う場合には、同じ手順を繰り返すこととなり、手間がかかる。この点につき、従来技術では、１サイクル目のアノテーションを、２サイクル目以降に用いることで手間を軽減できる。

【0006】

しかしながら、特許文献１では、上述の疑似ラベルを生成するために、まずは人がアノテーションを行い、正解ラベルを付与している。つまり、１サイクル目のアノテーションについては手間を軽減できず、ユーザの負担が大きかった。そのため、ユーザの手間を軽減するさらなる技術が求められていた。

【発明の概要】

【発明が解決しようとする課題】

【0007】

本発明は、上記従来技術における課題に鑑みてなされたものであり、アノテーションに要する負担を軽減する情報処理装置、システム、方法およびプログラムを提供することを目的とする。

【課題を解決するための手段】

【0008】

すなわち、本発明によれば、
製品に関する作業の動画を取得する手段と、
前記作業の標準的な作業時間のデータを含む標準作業情報を取得する手段と、
前記標準作業時間に基づいて、前記動画の所定箇所と前記作業とを対応付ける情報であるアノテーション情報を生成するアノテーション処理手段と
を含む、情報処理装置が提供される。

【発明の効果】

【0009】

本発明によれば、アノテーションに要する負担を軽減する情報処理装置、システム、方法およびプログラムが提供できる。

【図面の簡単な説明】

【0010】

【図1】本実施形態におけるシステム全体のハードウェアの概略構成を示す図。

【図2】本実施形態の情報処理装置に含まれるハードウェア構成を示す図。

【図3】本実施形態の情報処理装置に含まれるソフトウェアブロック図。

【図4】本実施形態の標準作業情報の例を示す図。

【図5】本実施形態においてアノテーションを行う処理を示すフローチャート。

【図6】本実施形態においてアノテーションを行うＵＩの例を示す図。

【図7】本実施形態における標準作業情報に基づくアノテーション調整の例を示す図。

【図8】本実施形態において作業動画と対応付けられたアノテーション情報の例を示す図。

【図9】本実施形態におけるアノテーションの別の例を示すフローチャート。

【図10】本実施形態におけるアノテーションの別の例を示すフローチャート。

【発明を実施するための形態】

【0011】

以下、本発明を、実施形態をもって説明するが、本発明は後述する実施形態に限定されるものではない。なお、以下に参照する各図においては、共通する要素について同じ符号を用い、適宜その説明を省略するものとする。

【0012】

図１は、本実施形態におけるシステム１００全体のハードウェアの概略構成を示す図である。図１では、例として、情報処理装置１１０と、撮影装置１２０とが、接続されたシステム１００を例示している。なお、情報処理装置１１０や撮影装置１２０の台数は、図１に示したものに限らず、システム１００に含まれる装置の台数に制限はない。また、情報処理装置１１０と、撮影装置１２０とを接続する方法は、有線または無線のどちらでもよく、例えば、インターネットやＬＡＮなどのネットワークを介して接続されてもよい。

【0013】

情報処理装置１１０は、例えば、パーソナルコンピュータのような装置であって、各種情報の処理、実行などを行うことができる。本実施形態の情報処理装置１１０は、撮影装置１２０が撮影した画像にアノテーションをすることができる。また、情報処理装置１１０は、アノテーションをした画像に基づいてプロセス保証のためのＡＩモデルを生成することができる。なお、説明する実施形態における情報処理装置１１０は、図１に示すようなパソコン端末に限らず、例えば、サーバコンピュータなどの装置であってもよい。

【0014】

撮影装置１２０は、例えば、カメラのような装置であって、各種画像を撮影することができる。本実施形態の撮影装置１２０は、製品を組み立てるライン設置され、作業従事者による組立作業の様子を撮影することができる。なお、説明する実施形態では、製品を組み立てる工程を例示しているが、特に実施形態を限定するものではなく、例えば、製品に関する任意の作業に関するものであってもよい。

【0015】

次に、情報処理装置１１０のハードウェア構成について説明する。図２は、本実施形態の情報処理装置１１０に含まれるハードウェア構成を示す図である。情報処理装置１１０は、ＣＰＵ２１０と、ＲＡＭ２２０と、ＲＯＭ２３０と、記憶装置２４０と、通信Ｉ／Ｆ２５０と、ディスプレイ２６０と、入力装置２７０とを含んで構成され、各ハードウェアはバスを介して接続されている。

【0016】

ＣＰＵ２１０は、情報処理装置１１０の動作を制御するプログラムを実行し、所定の処理を行う装置である。ＲＡＭ２２０は、ＣＰＵ２１０が実行するプログラムの実行空間を提供するための揮発性の記憶装置であり、プログラムやデータの格納用、展開用として使用される。ＲＯＭ２３０は、ＣＰＵ２１０が実行するプログラムやファームウェアなどを記憶するための不揮発性の記憶装置である。

【0017】

記憶装置２４０は、情報処理装置１１０を機能させるＯＳや種々のソフトウェア、設定情報、各種データなどを記憶する、読み書き可能な不揮発性の記憶装置である。記憶装置２４０の一例としては、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などが挙げられる。

【0018】

通信Ｉ／Ｆ２５０は、情報処理装置１１０とネットワークとを接続し、ネットワークを介して他の装置との通信を可能にする。ネットワークを介した通信は、有線通信または無線通信のいずれであってもよく、ＴＣＰ／ＩＰなどの所定の通信プロトコルを使用し、各種データを送受信できる。また、本実施形態の通信Ｉ／Ｆ２５０は、撮影装置１２０との通信を行うこともできる。

【0019】

ディスプレイ２６０は、各種データや情報処理装置１１０の状態などを、ユーザに対して表示する装置であり、例として、ＬＣＤ（Liquid Crystal Display）などが挙げられる。入力装置２７０は、ユーザが情報処理装置１１０を操作するための装置であり、例として、キーボード、マウスなどが挙げられる。なお、ディスプレイ２６０と入力装置２７０は、それぞれ別個の装置であってもよいし、タッチパネルディスプレイのような両方の機能を備えるものであってもよい。

【0020】

以上、本実施形態の情報処理装置１１０に含まれるハードウェア構成について説明した。次に、本実施形態における各ハードウェアによって実行される機能手段について、図３を以て説明する。図３は、本実施形態の情報処理装置１１０に含まれるソフトウェアブロック図である。

【0021】

本実施形態の情報処理装置１１０は、図３に示すように、標準作業情報取得部３１０、作業動画取得部３２０、アノテーション処理部３３０、表示部３４０、ＡＩモデル生成部３５０、データ記憶部３６０の各機能手段を含んで構成される。以下では、各機能手段の詳細を説明する。

【0022】

標準作業情報取得部３１０は、製品を組み立てるための標準的な作業を示すデータ（以下、標準作業情報として参照する）を取得する手段である。標準作業情報は、例えば、情報処理装置１１０上で作成されてもよいし、他の装置で作成されたものであってもよい。標準作業情報取得部３１０が取得した標準作業情報のデータは、データ記憶部３６０に記憶することができる。ここで、本実施形態の標準作業情報取得部３１０が取得する標準作業情報の例について、図４を以て説明する。

【0023】

図４は、本実施形態の標準作業情報の例を示す図である。本実施形態の標準作業情報は、例えば、図４に示すように、工程名と、作業の順番と、作業名と、作業を行うのに要する標準的な時間とを含むデータ形式とすることができる。図４に示す標準作業情報の例では、最初の作業（作業１）として作業「ＡＡＡ」にａａ秒を要し、次の作業（作業２）として作業「ＢＢＢ」にｂｂ秒を要する、工程「ＸＸＸ」が定義されている。なお、作業数は任意の数とすることができ、作業の順番（作業ｎ（ｎは自然数））に準拠する。

【0024】

説明を図３に戻す。作業動画取得部３２０は、撮影装置１２０が撮影した、製品を組み立てる工程の動画を取得する手段である。作業動画取得部３２０が取得した作業動画のデータは、データ記憶部３６０に記憶することができる。

【0025】

アノテーション処理部３３０は、取得した動画にアノテーションを行う手段である。より具体的には、アノテーション処理部３３０は、製品に関する各作業の学習データとして、動画の所定個所がどの作業に対応するのかを示す情報である、アノテーション情報を生成する処理を行う。ここで、本実施形態におけるアノテーション情報とは、アノテーション処理をした結果を指す。本実施形態のアノテーション処理部３３０は、標準作業情報を読み込んで、動画の各フレームにアノテーションラベルを付加することができる。また、アノテーション処理部３３０は、ユーザの操作によって、アノテーションを調整することができる。アノテーション情報は、データ記憶部３６０に記憶することができる。なお、アノテーション情報は一例として、動画の所定箇所を示す情報としての動画中のフレームの情報と、所定箇所に対応する作業と特定する情報（アノテーションラベル）としての作業名とからなるが、これに限られない。つまり動画の所定箇所を示す情報は動画の経過時間などであってもよいし、動画の所定箇所に対応する作業を特定する情報は、作業を特定可能な情報であれば作業に付与された識別子などであってもよい。

【0026】

表示部３４０は、ディスプレイ２６０を制御し、種々のデータや操作画面などを表示する手段である。本実施形態の表示部３４０は、アノテーション処理を行うＵＩを表示することができる。アノテーション処理を行うユーザは、表示部３４０によって表示されたＵＩを見て、各種操作を行うことができる。

【0027】

ＡＩモデル生成部３５０は、アノテーション情報と、学習用のデータセットとしての動画データとに基づいて、プロセス保証のためのＡＩモデルを生成する手段である。生成されたＡＩモデルは、データ記憶部３６０に記憶することができる。

【0028】

データ記憶部３６０は、記憶装置２４０を制御し、各種データなどを記憶する手段である。本実施形態のデータ記憶部３６０は、例えば、標準作業情報、動画データ、アノテーション情報、ＡＩモデルなどを記憶することができる。

【0029】

なお、上述したソフトウェアブロックは、ＣＰＵ２１０が本実施形態のプログラムを実行することで、各ハードウェアを機能させることにより、実現される機能手段に相当する。また、各実施形態に示した機能手段は、全部がソフトウェア的に実現されても良いし、その一部または全部を同等の機能を提供するハードウェアとして実装することもできる。

【0030】

さらに、上述した各機能手段は、必ずしも全てが図３に示すような構成で、１つの情報処理装置１１０に含まれていなくてもよい。例えば、他の好ましい実施形態では、各機能手段は、複数の情報処理装置１１０の協働によって実現されてもよい。

【0031】

次に上述した各機能手段によって行う処理について、図５を以て説明する。図５は、本実施形態においてアノテーションを行う処理を示すフローチャートである。

【0032】

情報処理装置１１０は、ステップＳ１０００から処理を開始する。また、ステップＳ１００１では、Ｎの初期値を０として設定し、続くステップＳ１００２において、Ｎの値をインクリメントする。

【0033】

ステップＳ１００３では、アノテーション処理部３３０は、データ記憶部３６０から、Ｎサイクル目の作業を録画した動画のデータを読み込む。また、ステップＳ１００４では、アノテーション処理部３３０は、データ記憶部３６０から標準作業情報を取得する。なお、ステップＳ１００３およびＳ１００４の処理は、図５とは逆の順序で行われてもよいし、並行して行われてもよい。

【0034】

次に、ステップＳ１００５では、表示部３４０はＵＩを表示し、ユーザが、作業時間を修正することで、アノテーションを行う。ここで、本実施形態において表示されるＵＩについて図６を参照して説明する。

【0035】

図６は、本実施形態においてアノテーションを行うＵＩの例を示す図である。本実施形態では、図６に示すように、動画表示フィールド６１０、凡例表示フィールド６２０、シークバー６３０、アノテーション完了ボタン６４０を含むＵＩが表示される。

【0036】

動画表示フィールド６１０には、作業を録画した動画が表示される。ユーザは、当該動画を見ながら、アノテーションの調整を行うことができる。

【0037】

凡例表示フィールド６２０は、シークバー６３０に表示される各作業の凡例が表示される。凡例は、標準作業情報の作業名に基づいて表示することができる。

【0038】

シークバー６３０は、再生される動画の進行状況を示すＵＩである。本実施形態のシークバー６３０は、作業ごとに異なる色で分けられて表示することができる。すなわち、シークバー６３０の表示は、凡例表示フィールド６２０に示された各作業に対応する。また、本実施形態のシークバー６３０において、各作業の境界の近傍にマウスカーソルを移動させると、両矢印カーソル６３１が表示される。ユーザは、両矢印カーソル６３１をドラッグアンドドロップ操作することで、作業の境界の位置（すなわち、各作業の開始時間または終了時間）を変更することができる。本実施形態におけるアノテーションは、各作業の開始時間または終了時間を調整することを含む。

【0039】

アノテーション完了ボタン６４０は、各作業の時間の調整が完了した場合に押下することで、当該動画についてのアノテーションを完了することができるインターフェースである。

【0040】

アノテーションを行うユーザは、図６に示すようなＵＩにおいて、作業動画を見ながら、ある作業が次の作業に移行する時間をシークバー６３０上で調整する。これによって、作業動画内の各作業が、如何なる作業であるかを対応付けることができる。このようにして、作業動画と作業の内容とを対応付けることで、プロセス保証に生成されるＡＩモデルの精度を向上できる。

【0041】

また、説明する実施形態では、標準作業情報や作業時間の統計的な情報などに基づいてシークバー６３０の初期状態を表示することができる。このように、各種情報に基づいてシークバー６３０の初期状態を表示することで、ユーザがアノテーションを調整する手間を軽減できる。また、標準作業情報によって各作業名が定義されているため、ユーザは、作業名のラベルを入力することなく、アノテーションを行うことができる。

【0042】

説明を図５に戻す。ステップＳ１００５の後、ステップＳ１００６では、全ての作業時間を修正したか否かによって処理を分岐する。すべての作業時間を修正していない場合には（ＮＯ）、ステップＳ１００５に戻り、上記の処理を繰り返す。全ての作業時間を修正した場合には（ＹＥＳ）、ステップＳ１００７に進む。なお、ステップＳ１００６では、図６に示したアノテーション完了ボタン６４０が押されたか否かによって処理を分岐することとしてもよい。

【0043】

ステップＳ１００７では、調整されたアノテーション情報をデータ記憶部３６０に記憶する。

【0044】

その後、ステップＳ１００８では、次の動画があるか否かによって処理を分岐する。次の動画がある場合（ＹＥＳ）、ステップＳ１００２に戻り、Ｎの値をインクリメントして、次の動画について上記の各処理を繰り返す。次の動画がない場合には（ＮＯ）、ステップＳ１００９に進み、処理を終了する。

【0045】

ここで、図５に示した処理におけるアノテーションの詳細について、図７を以て説明する。図７は、本実施形態における標準作業情報に基づくアノテーション調整の例を示す図である。図７（ａ）は、アノテーション調整前後のシークバー６３０の例を示している。また、図７（ｂ）は、調整前の、すなわち、標準作業情報に基づくアノテーションを示し、図７（ｂ）は、調整後のアノテーションを示している。

【0046】

図７（ａ）の上図は、アノテーションの調整前のシークバー６３０の例であり、例えば、ステップＳ１００５におけるＵＩ上に表示される。ここで、図７（ａ）上図のシークバー６３０は、標準作業情報に規定されている作業名や作業時間に基づいて表示されるものである。すなわち、図７（ａ）上図のシークバー６３０は、図７（ｂ）のテーブルに対応したものである。

【0047】

ユーザは、図７（ａ）の上図のように表示されたシークバー６３０の各作業の領域を、ドラッグアンドドロップ操作し、領域の大きさを調整し、実際の作業時間に対応するようにアノテーションする。ここで、ユーザは、ＵＩ上に表示される作業動画を見ながら調整することで、実際の作業時間に対応したアノテーションを容易に行うことができる。また、図７（ａ）の上図のシークバー６３０は、標準作業情報に基づくものであることから、各作業の領域の大きさは、実際の作業時間に比較的近似している。したがって、ユーザは、アノテーションの調整がわずかなもので済ませることができ、負担を軽減しながら適切なアノテーションを行うことができる。

【0048】

ユーザが、ステップＳ１００５において、図７（ａ）の上図のように表示されたシークバー６３０を調整し、各作業の作業時間を修正することで、例えば、図７（ａ）の下図のようなシークバー６３０とすることができる。これを保存した場合、アノテーション情報は、図７（ｃ）のようになる。例えば、パーツ取得の作業時間は、調整前の標準的な作業時間では５秒間であったが、実際には７秒であったと調整される。

【0049】

このようにして調整されたアノテーションの結果は、作業動画の各フレームと対応付けられて保存される（ステップＳ１００７）。図８は、本実施形態において作業動画と対応付けられたアノテーション情報の例を示す図である。

【0050】

図８に示すテーブルは、作業動画の各フレームと、当該フレームがどの作業をしているものであるかを対応付けたものである。フレームは、調整されたアノテーションによる作業時間から算出することができる。また、アノテーションラベルは、作業１、作業２のように、標準作業情報に基づいて割り当てることができる。

【0051】

このようにして作成されたアノテーション情報は、ＡＩモデル生成部３５０が処理することで、作業の動作と作業名とを対応付けて学習したＡＩモデルとして生成される。

【0052】

次に、本実施形態のアノテーション処理の別の例について、図９および図１０を以て説明する。図９および図１０は、本実施形態におけるアノテーションの別の例を示すフローチャートである。なお、図９および図１０は、一連の処理を示している。なお、図９および図１０の処理のうち、図５で説明した処理と同様の処理については、適宜説明を省略する。

【0053】

情報処理装置１１０は、ステップＳ２０００から処理を開始する。また、ステップＳ２００１では、Ｎの初期値を１として設定する。

【0054】

ステップＳ２００２では、アノテーション処理部３３０は、データ記憶部３６０から、Ｎサイクル目、すなわち１サイクル目の作業を録画した動画のデータを読み込む。また、ステップＳ２００３では、アノテーション処理部３３０は、データ記憶部３６０から標準作業情報を取得する。なお、ステップＳ２００２およびＳ２００３の処理は、図５のステップＳ１００３およびＳ１００４の処理と同様である。

【0055】

次に、ステップＳ２００４では、表示部３４０はＵＩを表示し、ユーザが、作業時間を修正することで、アノテーションを行う。次に、ステップＳ２００５では、全ての作業時間を修正したか否かによって処理を分岐する。すべての作業時間を修正していない場合には（ＮＯ）、ステップＳ２００４に戻り、上記の処理を繰り返す。全ての作業時間を修正した場合には（ＹＥＳ）、ステップＳ２００６に進む。ステップＳ２００６では、調整されたアノテーション情報をデータ記憶部３６０に記憶する。なお、ステップＳ２００４～Ｓ２００６の処理は、図５のステップＳ１００５～Ｓ１００７の処理と同様である。

【0056】

その後、ステップＳ２００７では、次の動画があるか否かによって処理を分岐する。次の動画がない場合には（ＮＯ）、ステップＳ２００８に進み、処理を終了する。次の動画がある場合（ＹＥＳ）、図１０のＡに進む。

【0057】

図１０のＡからステップＳ２００９に進んだ場合、Ｎの値をインクリメントする。続くステップＳ２０１０では、アノテーション処理部３３０は、データ記憶部３６０から、Ｎサイクル目の作業を録画した動画のデータを読み込む。なお、ステップＳ２０１０の処理は、ステップＳ１００３の処理と同様である。

【0058】

次に、ステップＳ２０１１では、アノテーション処理部３３０は、アノテーション結果であるＮ－１回目までのアノテーションの統計値を算出する。ここで、統計値は、例えば中央値や平均値などとすることができるが、特に実施形態を限定するものではない。表示部３４０は、算出した統計値に基づいて、シークバー６３０を表示する。このように、過去のアノテーションの実績に基づいて算出された作業時間の中央値や平均値を、シークバー６３０に反映することで、アノテーションの調整がわずかなもので済むようにでき、ユーザの負担を軽減できる。

【0059】

ステップＳ２０１２では、ユーザは、ステップＳ２０１１で算出された統計値に基づいて表示されたシークバー６３０を含むＵＩ上で、作業動画を見ながら作業時間を修正する。

【0060】

その後、ステップＳ２０１３では、全ての作業時間を修正したか否かによって処理を分岐する。すべての作業時間を修正していない場合には（ＮＯ）、ステップＳ２０１２に戻り、上記の処理を繰り返す。全ての作業時間を修正した場合には（ＹＥＳ）、ステップＳ２０１４に進む。

【0061】

ステップＳ２０１４では、調整されたアノテーション情報をデータ記憶部３６０に記憶する。

【0062】

その後、ステップＳ２０１５では、次の動画があるか否かによって処理を分岐する。次の動画がある場合（ＹＥＳ）、ステップＳ２００９に戻り、Ｎの値をインクリメントして、次の動画について上記の各処理を繰り返す。次の動画がない場合には（ＮＯ）、ステップＳ２０１６に進み、処理を終了する。

【0063】

なお、ステップＳ２０１３～Ｓ２０１５の処理は、ステップＳ１００６～Ｓ１００８の処理と同様である。

【0064】

図９および図１０に示した処理によれば、２サイクル目以降のアノテーションでは、統計値に基づく作業時間をシークバー６３０の初期状態として表示することができるため、過去の作業実績を参考にした調整ができ、ユーザの負担を軽減できる。

【0065】

以上、説明した本発明の実施形態によれば、アノテーションに要する負担を軽減する情報処理装置、システム、方法およびプログラムを提供することができる。

【0066】

上述した本発明の実施形態の各機能は、Ｃ、Ｃ＋＋、Ｃ＃、Ｊａｖａ（登録商標）等で記述された装置実行可能なプログラムにより実現でき、本実施形態のプログラムは、ハードディスク装置、ＣＤ－ＲＯＭ、ＭＯ、ＤＶＤ、フレキシブルディスク、ＥＥＰＲＯＭ（登録商標）、ＥＰＲＯＭ等の装置可読な記録媒体に格納して頒布することができ、また他装置が可能な形式でネットワークを介して伝送することができる。

【0067】

上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュールなどのデバイスを含むものとする。

【0068】

以上、本発明について実施形態をもって説明してきたが、本発明は上述した実施形態に限定されるものではなく、当業者が推考しうる実施態様の範囲内において、本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。

【符号の説明】

【0069】

１００…システム、１１０…情報処理装置、１２０…撮影装置、２１０…ＣＰＵ、２２０…ＲＡＭ、２３０…ＲＯＭ、２４０…記憶装置、２５０…通信Ｉ／Ｆ、２６０…ディスプレイ、２７０…入力装置、３１０…標準作業情報取得部、３２０…作業動画取得部、３３０…アノテーション処理部、３４０…表示部、３５０…ＡＩモデル生成部、３６０…データ記憶部、６１０…動画表示フィールド、６２０…凡例表示フィールド、６３０…シークバー、６３１…両矢印カーソル、６４０…アノテーション完了ボタン

【先行技術文献】

【特許文献】

【0070】

【特許文献1】特開２０２１－０８９４９１号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】