特開 2024-130366 情報処理装置、プログラム及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024130366

(43)【公開日】2024-09-30

(54)【発明の名称】情報処理装置、プログラム及び方法

(51)【国際特許分類】

   G06F 3/04842 20220101AFI20240920BHJP

   G06F 3/0481 20220101ALI20240920BHJP

   G06F 16/907 20190101ALI20240920BHJP

【ＦＩ】

G06F3/04842

G06F3/0481

G06F16/907

【審査請求】未請求

【請求項の数】9

【出願形態】ＯＬ

(21)【出願番号】P 2023040044

(22)【出願日】2023-03-14

(71)【出願人】

【識別番号】000002945

【氏名又は名称】オムロン株式会社

(74)【代理人】

【識別番号】100079108

【弁理士】

【氏名又は名称】稲葉 良幸

(74)【代理人】

【識別番号】100108213

【弁理士】

【氏名又は名称】阿部 豊隆

(74)【代理人】

【識別番号】100139066

【弁理士】

【氏名又は名称】伊藤 健太郎

(72)【発明者】

【氏名】山田 浩臣

【テーマコード（参考）】

5B175

5E555

【Ｆターム（参考）】

5B175FB02

5B175GB01

5E555AA02

5E555AA04

5E555AA75

5E555BA02

5E555BA73

5E555BB02

5E555BC18

5E555CB37

5E555CC03

5E555CC21

5E555DB03

5E555DB04

5E555DC40

5E555EA19

5E555EA26

5E555EA27

5E555FA00

(57)【要約】

【課題】対象データと対象データに基づく特徴量との対応の確認をユーザにとって利便性良く可能とする情報処理装置、プログラム及び方法を提供する。
【解決手段】コンピュータに、複数の対象データを取得することと、複数の対象データのそれぞれに基づく複数の特徴量を取得することと、複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、複数の対象データが表示される対象データ表示領域と、複数の特徴量が表示される特徴量表示領域とを有し、選択された少なくとも１つの特徴量と対応付けられた少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を実行させる、プログラム。
【選択図】図４

【特許請求の範囲】

【請求項1】

複数の対象データを取得する対象データ取得部と、
前記複数の対象データに対応する複数の特徴量を取得する特徴量取得部と、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付ける選択受付部と、
前記複数の対象データが表示される対象データ表示領域と、前記複数の特徴量が表示される特徴量表示領域とを有し、選択された前記少なくとも１つの特徴量と前記少なくとも１つの特徴量に対応する少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成する画面生成部と、を備える、情報処理装置。

【請求項2】

請求項１に記載の情報処理装置であって、
前記画面生成部は、選択された前記少なくとも１つの特徴量を示す情報が表示される選択表示領域をさらに有する前記表示画面を生成する、情報処理装置。

【請求項3】

請求項２に記載の情報処理装置であって、
前記画面生成部は、前記特徴量表示領域における前記ユーザからの操作入力に基づいて選択可能な、前記複数の特徴量に対応する複数のオブジェクトを、前記特徴量表示領域に表示し、
前記選択受付部は、前記表示画面において、前記複数のオブジェクトのうち前記特徴量表示領域において選択されたオブジェクトが、前記選択表示領域に配置されることで、前記少なくとも１つの特徴量の選択を受け付ける、情報処理装置。

【請求項4】

請求項１に記載の情報処理装置であって、
前記画面生成部は、前記組を共通の表示態様で表示することで前記組を識別可能に表示する、情報処理装置。

【請求項5】

請求項１に記載の情報処理装置であって、
前記少なくとも１つの特徴量に対するラベリング情報を前記ユーザから受け付けるラベリング情報受付部、をさらに備える、情報処理装置。

【請求項6】

請求項１から５のいずれか１項に記載の情報処理装置であって、
前記対象データは時系列データを含む、情報処理装置。

【請求項7】

請求項１から５のいずれか１項に記載の情報処理装置であって、
前記対象データは画像データを含む、情報処理装置。

【請求項8】

コンピュータに、
複数の対象データを取得することと、
前記複数の対象データに対応する複数の特徴量を取得することと、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、
前記複数の対象データが表示される対象データ表示領域と、選択された前記複数の特徴量が表示される特徴量表示領域とを有し、前記少なくとも１つの特徴量と対応付けられた前記少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を実行させる、プログラム。

【請求項9】

コンピュータが実行する情報処理方法であって、
複数の対象データを取得することと、
前記複数の対象データに対応する複数の特徴量を取得することと、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、
前記複数の対象データが表示される対象データ表示領域と、選択された前記複数の特徴量が表示される特徴量表示領域とを有し、前記少なくとも１つの特徴量と対応付けられた前記少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を含む、情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、プログラム及び方法に関する。

【背景技術】

【0002】

機械学習においては、データセットと学習モデルを用いた学習、学習済みモデルの検証及び評価等が行われる。具体的には、まず、データセットに対して前処理が行われ、データセットが学習用と検証及び評価用とに分割される。前処理では、データセットに対してラベリング等が行われる（特許文献１参照）。ラベリングを適切に実行することにより有効なデータと無効なデータとの切り分けが可能となり、精度の高い学習モデルを生成することが可能となる。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１９－１０５９７９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

一方で、当該ラベリングは自動化できないため効率的に作業するためのツールが求められる。例えば、あるデータ（対象データ）から抽出された特徴量は、対象データに含まれる情報が抽出された情報であるので、異なる対象データに対応する場合であっても、近い特徴量となることがある。このように、特徴量のみからは、実際のデータの様子をユーザが把握することが難しく、ユーザによる特徴量のラベリングには効率化の余地がある。

【0005】

本開示は、一側面では、このような実情を鑑みてなされたものであり、その目的は、対象データと対象データに基づく特徴量との対応の確認をユーザにとって利便性良く可能とする情報処理装置、プログラム及び方法を提供することである。

【課題を解決するための手段】

【0006】

本開示は、上述した課題を解決するために、以下の構成を採用する。

【0007】

本開示の一側面に係る情報処理装置は、複数の対象データを取得する対象データ取得部と、複数の対象データに対応する複数の特徴量を取得する特徴量取得部と、複数の特徴量のうち少なくとも１つの特徴量の選択を受け付ける選択受付部と、複数の対象データが表示される対象データ表示領域と、複数の特徴量が表示される特徴量表示領域とを有し、選択された少なくとも１つの特徴量と少なくとも１つの特徴量に対応する少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成する画面生成部と、を備える。

【0008】

当該情報処理装置によれば、対象データ及び特徴量が取得され、特徴量の選択が受け付けられる。対象データが表示される対象データ表示領域と、特徴量が表示される特徴量表示領域とを有する表示画面において、選択された特徴量と、選択された特徴量に対応する対象データとが識別可能に表示される。これにより、情報処理装置を操作するユーザは、特徴量と対象データとの対応を１つの画面上で確認することができる。これにより、ユーザによる対応関係の確認の利便性が向上する。

【0009】

上記一側面に係る情報処理装置において、画面生成部は、選択された少なくとも１つの特徴量を示す情報が表示される選択表示領域をさらに有する表示画面を生成してもよい。

【0010】

当該情報処理装置によれば、ユーザが表示画面における選択表示領域を確認することで、ユーザは選択された特徴量を把握することができる。これにより、ユーザによる対応関係の確認の利便性が向上する。

【0011】

上記一側面に係る情報処理装置において、画面生成部は、特徴量表示領域における操作入力に基づいて選択可能な、複数の特徴量に対応する複数のオブジェクトを、特徴量表示領域に表示し、選択受付部は、表示画面において、複数のオブジェクトのうち特徴量表示領域において選択されたオブジェクトが、選択表示領域に配置されることで、少なくとも１つの特徴量の選択を受け付けてもよい。

【0012】

当該情報処理装置によれば、ユーザは、特徴量表示領域におけるオブジェクトを選択し、オブジェクトを選択表示領域に配置することで特徴量の選択を行うことができる。ユーザは直感的な操作によって特徴量を選択することができるので、ユーザによる対応関係の確認の利便性が向上する。

【0013】

上記一側面に係る情報処理装置において、画面生成部は、組を共通の表示態様で表示することで組を識別可能に表示する表示画面を生成してもよい。

【0014】

当該情報処理装置によれば、例えば、対象データ又は特徴量が多数の点によって表示される場合であっても、表示態様が共通するので、ユーザが一覧的に対象データと特徴量との対応を確認することができ、ユーザの利便性が向上する。

【0015】

上記一側面に係る情報処理装置は、少なくとも１つの特徴量に対するラベリング情報をユーザから受け付けるラベリング情報受付部、をさらに備えてもよい。

【0016】

当該情報処理装置によれば、ユーザは特徴量に対応する対象データを確認しながら特徴量に対するラベリングが可能となるため、ユーザのラベリングの利便性が向上する。

【0017】

上記一側面に係る情報処理装置では、対象データは時系列データを含んでもよい。

【0018】

当該情報処理装置によれば、時系列表示される性質を有する対象データに対して、特徴量との対応関係の確認の利便性が向上する。

【0019】

上記一側面に係る情報処理装置では、対象データは画像データを含んでもよい。

【0020】

当該情報処理装置によれば、画像データに対して、特徴量との対応関係の確認の利便性が向上する。

【0021】

また、本開示の一側面に係るプログラムは、コンピュータに、複数の対象データを取得することと、複数の対象データに対応する複数の特徴量を取得することと、複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、複数の対象データが表示される対象データ表示領域と、複数の特徴量が表示される特徴量表示領域とを有し、選択された少なくとも１つの特徴量と対応付けられた少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を実行させる。

【0022】

また、本開示の一側面に係る情報処理方法は、コンピュータが実行する情報処理方法であって、複数の対象データを取得することと、複数の対象データに対応する複数の特徴量を取得することと、複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、複数の対象データが表示される対象データ表示領域と、複数の特徴量が表示される特徴量表示領域とを有し、選択された少なくとも１つの特徴量と対応付けられた少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を含む。

【発明の効果】

【0023】

本発明によれば、対象データと対象データに基づく特徴量との対応の確認をユーザにとって利便性良く可能とする情報処理装置、プログラム及び方法を提供することができる。

【図面の簡単な説明】

【0024】

【図1】本実施形態に係る情報処理装置のブロック図である。

【図2】本実施形態に係る情報処理装置のハードウェア構成の一例である。

【図3】本実施形態に係る情報処理装置の処理の一例を説明するフローチャートである。

【図4】本実施形態に係る表示画面の一例を示す図である。

【図5】本実施形態に係る表示画面の一例を示す図である。

【図6】本実施形態に係る表示画面の一例を示す図である。

【図7】本実施形態に係る表示画面の一例を示す図である。

【図8】本実施形態に係る表示画面の一例を示す図である。

【図9】本実施形態に係るラベリング情報受付処理の一例を示すフローチャートである。

【図10】本実施形態に係る表示画面におけるラベリング情報の入力の一例を示す図である。

【図11】本実施形態に係る表示画面におけるラベリング情報の入力の一例を示す図である。

【図12】本実施形態に係る表示画面の他の一例を示す図である。

【発明を実施するための形態】

【0025】

以下、発明の実施の形態を通じて本発明を説明するが、特許請求の範囲に係る発明を以下の実施形態に限定するものではない。また、実施形態で説明する構成の全てが課題を解決するための手段として必須であるとは限らない。以下、添付図面を取得して説明する。なお、各図において、同一の符号を付したものは、同一又は同様の構成を有する。なお、本明細書において「又は」という用語は「及び」の意味に加えて「又は」の意味も含み得る。

【0026】

図１を参照して、情報処理装置１００の構成の一例について説明する。図２の例では、情報処理装置１００は、記憶部１０１、通信部１０２、表示部１０３、操作部１０４、及び制御部１０５を備える。

【0027】

また、図２を参照して、情報処理装置１００のハードウェア構成の一例について説明する。情報処理装置１００は、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphical Processing Unit）等のプロセッサ２０１、メモリ、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）等の記憶装置２０２、有線又は無線通信を行う通信ＩＦ（Interface）２０３、入力操作を受け付ける入力デバイス２０４、及び情報の出力を行う出力デバイス２０５を有する。

【0028】

記憶部１０１は、記憶部１０１が備える記憶装置２０２を用いて実現することができる。制御部１０５は、情報処理装置１００のプロセッサ２０１が、記憶装置２０２に記憶されたプログラムを実行することにより実現することができる。また、当該プログラムは、記憶媒体に格納することができる。当該プログラムを格納した記憶媒体は、コンピュータ読み取り可能な非一時的な記憶媒体（Non-transitory computer readable medium）であってもよい。非一時的な記憶媒体は特に限定されないが、例えば、ＵＳＢメモリ又はＣＤ－ＲＯＭ等の記憶媒体であってもよい。

【0029】

記憶部１０１は、１つの装置によって実現されてもよく、あるいは各部の機能を有する複数の装置によって実現されてよい。例えば、情報処理装置１００は、提供されるサービス専用に設計された情報処理装置の他、汎用のデスクトップＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、タブレットＰＣ等によって実現されてもよい。また、情報処理装置１００の制御部１０５の機能は、端末とネットワークを通じて通信可能なサーバ等の他の情報処理装置にインストールされたプログラムによって実現されてもよい。

【0030】

図１に戻り、情報処理装置１００の各部について説明する。

【0031】

記憶部１０１は、制御部１０５による処理のために実行されるプログラム又は情報処理装置１００で使用される各種の情報を記憶する。

【0032】

通信部１０２は、例えば、情報処理装置１００とネットワークを通じて接続される他のシステム又は情報処理装置への接続及びデータ授受を行う情報処理ユニットとして構成されている。

【0033】

表示部１０３は、例えば、ディスプレイ等の出力を行うための装置であり、情報処理装置１００が備える出力デバイス２０５を用いて実現することができる。

【0034】

操作部１０４は、例えば、キーボード、マウス、又はタッチパネル等のユーザ入力を行うための装置であり、情報処理装置１００が備える入力デバイス２０４を用いて実現することができる。

【0035】

制御部１０５は、対象データ取得部１０５１、特徴量取得部１０５２、第１リスト生成部１０５３、第２リスト生成部１０５４、選択受付部１０５５、画面生成部１０５６、及びラベリング情報受付部１０５７を有する。

【0036】

対象データ取得部１０５１は、複数の対象データを取得する。ここで、本実施形態における対象データとは、特徴量の抽出の対象となるデータであり、例えば時系列データ又は画像データを含む。また、対象データを生データとよぶこともある。対象データ取得部１０５１は、例えば、記憶部１０１に記憶されたデータを読み出すことで対象データを取得する。

【0037】

特徴量取得部１０５２は、複数の対象データに対応する複数の特徴量を取得する。また、特徴量は、１つの特徴量に対して、１つの対象データが対応してもよく、複数の対象データが対応してもよい。ここで、「特徴量」は、処理対象の時系列データに含まれる情報を包含する用語であり、例えば、対象の時系列データについての、最大値、最小値、中間値、平均値、標準偏差、又は分散などを含み得る。なお、「特徴量」は、対象データそのものも含み得る。特徴量取得部１０５２は、例えば、記憶部１０１に記憶された対象データに基づく特徴量を読み出すことで、特徴量を取得する。対象データからの特徴量の抽出は情報処理装置１００によって行われてもよく、情報処理装置１００とは異なる他の情報処理装置によって行われてもよい。

【0038】

第１リスト生成部１０５３は、対象データに含まれる変数を示す第１リストを生成する。第１リストには、例えば、変数及び変数に対して付与される列ラベルの情報が含まれる。

【0039】

第２リスト生成部１０５４は、特徴量及び特徴量に対して付与される列ラベルの情報が含まれる第２リストを生成する。

【0040】

選択受付部１０５５は、複数の特徴量のうち少なくとも１つの特徴量の選択を受け付ける。選択受付部１０５５は、例えば、後述の画面生成部１０５６が生成する表示画面を通じて、ユーザから、特徴量の選択を受け付ける。また、選択受付部１０５５は、予め選択する特徴量を設定する設定情報に基づいて、特徴量の選択を受け付けてもよい。

【0041】

画面生成部１０５６は、複数の対象データが表示される対象データ表示領域と、複数の特徴量が表示される特徴量表示領域とを有し、選択受付部１０５５を通じて選択された少なくとも１つの特徴量と少なくとも１つの特徴量に対応する少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成する。画面生成部１０５６が生成する表示画面については後述する。

【0042】

ラベリング情報受付部１０５７は、特徴量に対するラベリング情報をユーザから受け付ける。ラベリング情報受付部１０５７は、受け付けたラベリング情報を特徴量と対応付けて記憶部１０１に記憶してもよい。また、ラベリング情報受付部１０５７は、対象データの変数に対するラベリング情報をユーザから受け付けてもよい。この場合、ラベリング情報受付部１０５７は、受け付けたラベリング情報を変数と対応付けて記憶部１０１に記憶してもよい。

【0043】

図３から図８を参照して、情報処理装置１００における、特徴量の選択及び対象データと特徴量との表示処理について説明する。なお、本表示処理は、本開示の情報処理方法の一例である。

【0044】

ステップＳ３０１において、対象データ取得部１０５１は、複数の対象データを取得する。対象データ取得部１０５１は例えば記憶部１０１に記憶されたデータから、複数の変数を有する時系列データを対象データとして取得する。取得された対象データに基づいて、第１リスト生成部１０５３が第１リストを生成する。

【0045】

ステップＳ３０２において、特徴量取得部１０５２は、対象データ取得部１０５１が取得した複数の対象データに対応する複数の特徴量を取得する。特徴量取得部１０５２は、例えば記憶部１０１に予め記憶された特徴量を取得する。取得された特徴量に基づいて、第２リスト生成部１０５４が第２リストを生成する。

【0046】

ステップＳ３０３において、画面生成部１０５６は、対象データ表示領域、特徴量表示領域、及び選択表示領域を含む表示画面を生成する。

【0047】

ステップＳ３０４において、画面生成部１０５６は、対象データが対象データ表示領域に、特徴量が特徴量表示領域にそれぞれ表示されるよう表示画面を更新する。

【0048】

ここで、図４を参照して、画面生成部１０５６が生成し、表示部１０３を通じてユーザに表示する表示画面４００の一例について説明する。

【0049】

表示画面４００は、対象データ表示領域４０１、特徴量表示領域４０２、及び選択表示領域４０３を有する。また、対象データ表示領域４０１はデータ表示部４００１を有する。データ表示部４００１には、対象データ取得部１０５１が取得する基となる対象データを示す情報が表示される。図４の例では、データファイルを示す「Data fileXXX」という情報が表示される。

【0050】

対象データ表示領域４０１には対象データが散布図の形式で表示される。対象データ表示領域４０１は、縦軸変数選択欄４０１１１、横軸変数選択欄４０１２１、第１リスト４０１３、２次元散布図表示領域４０１４、時間軸散布図表示領域４０１５、列ラベル入力領域４０１６、行ラベル入力領域４０１７、行ラベル入力欄４０１７１、及び登録ボタン４０１７２を有する。

【0051】

縦軸変数選択欄４０１１１は、２次元散布図表示領域４０１４において縦軸に表示される変数をユーザが選択可能とし、選択された変数を表示する領域である。図４の例では、縦軸の変数として「ＶＡＲ１」が選択されている例が示される。また、縦軸変数選択欄４０１１１で選択された変数は、時間軸散布図表示領域４０１５における横軸が時間軸の時間軸散布図において縦軸の変数として表示される。

【0052】

横軸変数選択欄４０１２１は、２次元散布図表示領域４０１４において横軸に表示される変数をユーザが選択可能とし、選択された変数を表示する領域である。図４の例では、横軸の変数として「ＶＡＲ２」が選択されている例が示される。

【0053】

第１リスト４０１３は、データ表示部４００１に基づく対象データに含まれる複数の変数を示すリストである。第１リスト４０１３には、縦軸変数選択欄４０１１１及び横軸変数選択欄４０１２１においてユーザが選択可能な変数が示される。

【0054】

２次元散布図表示領域４０１４は、縦軸の変数として選択された変数と横軸の変数として選択された変数とに基づいてプロットされる散布図を表示する領域である。

【0055】

時間軸散布図表示領域４０１５は、縦軸の変数として選択された変数を、横軸を時間軸としてプロットした散布図である。

【0056】

列ラベル入力領域４０１６は、第１リスト４０１３に表示される各変数に対する列ラベルの入力を受け付ける。列ラベル入力領域４０１６に入力された列ラベルに基づいて、第１リスト４０１３が更新される。

【0057】

行ラベル入力領域４０１７は、対象データに対する行ラベルの入力をユーザから受け付ける。ユーザは、行ラベル入力欄４０１７１に行ラベルを入力し、登録ボタン４０１７２を選択することで、記憶部１０１において対象データに対応する行ラベルを更新することができる。

【0058】

特徴量表示領域４０２には特徴量が散布図の形式で表示される。特徴量表示領域４０２は、縦軸特徴量選択欄４０２１１、横軸特徴量選択欄４０２２１、第２リスト４０２３、２次元散布図表示領域４０２４、時間軸散布図表示領域４０２５、列ラベル入力領域４０２６、行ラベル入力領域４０２７、行ラベル入力欄４０２７１、及び登録ボタン４０２７２を有する。

【0059】

縦軸特徴量選択欄４０２１１は、２次元散布図表示領域４０２４において縦軸に表示される特徴量をユーザが選択可能とし、選択された特徴量を表示する領域である。図４の例では、縦軸の特徴量として「Ｆ１」が選択されている例が示される。また、縦軸特徴量選択欄４０２１１で選択された特徴量は、時間軸散布図表示領域４０２５における横軸が時間軸の時間軸散布図において縦軸の特徴量として表示される。

【0060】

横軸特徴量選択欄４０２２１は、２次元散布図表示領域４０２４において横軸に表示される特徴量をユーザが選択可能とし、選択された特徴量を表示する領域である。図４の例では、横軸の特徴量として「Ｆ２」が選択されている例が示される。

【0061】

第２リスト４０２３は、データ表示部４００１に基づく特徴量に含まれる複数の特徴量を示すリストである。第２リスト４０２３には、縦軸特徴量選択欄４０２１１及び横軸特徴量選択欄４０２２１においてユーザが選択可能な特徴量が示される。

【0062】

２次元散布図表示領域４０２４は、縦軸の特徴量として選択された特徴量と横軸の特徴量として選択された特徴量とに基づいてプロットされる散布図を表示する領域である。ユーザは、２次元散布図表示領域４０２４における各特徴量に対応する点を表示画面４００上のオブジェクトとして選択可能である。２次元散布図表示領域４０２４では、例えば、オブジェクトＯ１及びオブジェクトＯ２が例示されている。

【0063】

時間軸散布図表示領域４０２５は、縦軸の特徴量として選択された特徴量を、横軸を時間軸としてプロットした散布図である。ユーザは、時間軸散布図表示領域４０２５における特徴量に対応する点を表示画面４００上のオブジェクトとして選択可能である。時間軸散布図表示領域４０２５では、例えば、オブジェクトＯ３及びオブジェクトＯ４が例示されている。

【0064】

列ラベル入力領域４０２６は、第２リスト４０２３に表示される各特徴量に対する列ラベルの入力を受け付ける。列ラベル入力領域４０２６に入力された列ラベルに基づいて、第２リスト４０２３が更新される。

【0065】

行ラベル入力領域４０２７は、特徴量に対する行ラベルの入力をユーザから受け付ける。ユーザは、行ラベル入力欄４０２７１に行ラベルを入力し、登録ボタン４０２７２を選択することで、記憶部１０１において特徴量に対応する行ラベルを更新することができる。

【0066】

選択表示領域４０３は、後述の選択処理によって、ユーザによる特徴量の選択を可能とするための領域である。選択表示領域４０３については後述する。

【0067】

図３に戻り、ステップＳ３０５において、選択受付部１０５５は、特徴量表示領域４０２に表示されている特徴量に対応するオブジェクトの選択をユーザから受け付ける。例えば、図５に示されるように、操作部１０４によって制御される、ポインタＰによってユーザはオブジェクトＯ１を選択する。ユーザは、一例として、マウスを操作することによってこの操作を行うことができる。ユーザがポインタＰをオブジェクトＯ１上に動かし、クリックすることで、オブジェクトＯ１を選択することができる。

【0068】

ステップＳ３０６において、選択受付部１０５５は、表示画面において選択表示領域に配置されたオブジェクトに対応する特徴量を特定する。具体的には、選択受付部１０５５は、図５に示されるポインタＰによって選択されたオブジェクトＯ１が、選択表示領域４０３にドラッグアンドドロップされたことを検出し、表示画面においてオブジェクトが選択表示領域に配置されたことを検出する。次に、選択受付部１０５５は、当該オブジェクトに対応する特徴量を特定する。

【0069】

ステップＳ３０７において、画面生成部１０５６は、特定された特徴量に対応する対象データを特定する。

【0070】

ステップＳ３０８において、画面生成部１０５６は、特定された特徴量と、特徴量に対応する対象データとの組を識別可能に表示するように表示画面を更新する。具体的には、図６に示されるように、選択表示領域４０３においてオブジェクト４０３１を表示し、オブジェクト４０３１に対応する情報を特徴量表示領域４０２における特徴量及び対象データ表示領域４０１における対象データに関連付けて表示する。図６の例では、オブジェクト４０３１で示される表示態様がなされる特徴量及び対象データが、１つの組として識別可能に表示されている。このように表示することで、ユーザは特徴量と対象データとの対応を確認しやすくなる。ここでオブジェクト及び対象データと特徴量との組の共通の表示態様は、一例として、色分けをオブジェクト及び組ごとに異ならせる態様であってもよい。また、共通の表示態様は、対象データ及び特徴量を表示するマーカーの形、大きさ、又は透明度を組ごとに異ならせる態様であってもよい。ただし、表示態様はこれらに限られない。

【0071】

ステップＳ３０５からステップＳ３０８までの処理は、ユーザの操作に応じて任意のタイミングで行うことができる。例えば、図７及び図８に示されるように、オブジェクトＯ２がポインタＰによって選択され、選択表示領域４０３へとドラッグアンドドロップされることで、オブジェクト４０３１が対応する特徴量とは異なる特徴量に対応するオブジェクト４０３２が選択表示領域４０３に表示される。また、このとき、オブジェクト４０３１に対応する特徴量及び対象データとは異なる表示態様（例えば異なる色による表示）が、オブジェクト４０３２に対応する特徴量及び対象データに対してはなされる。なお、２次元散布図表示領域４０２４における他のオブジェクト及び時間軸散布図表示領域４０２５に表示されるオブジェクトＯ３又はオブジェクトＯ４等の他のオブジェクトが選択表示領域４０３にドラッグアンドドロップされることで、選択表示領域４０３におけるオブジェクトが生成されてもよい。

【0072】

このように、表示画面４００では、特徴量及び対象データの組が識別可能に表示される。

【0073】

ステップＳ３０９において、ラベリング情報受付部１０５７は、ラベリング情報受付処理を行う。図９、図１０、及び図１１を参照して、ラベリング情報受付処理について説明する。

【0074】

図９に示されるフローチャートにおけるステップＳ９０１にて、ラベリング情報受付部１０５７は、選択表示領域４０３におけるオブジェクトの選択入力を受け付ける。例えば、図１０に示されるように、ポインタＰによって、オブジェクト４０３１が選択されることで、ラベリング情報受付部１０５７は選択表示領域４０３におけるオブジェクトの選択を受け付ける。

【0075】

ステップＳ９０２において、ラベリング情報受付部１０５７は、オブジェクトが対応する特徴量を特定する。

【0076】

ステップＳ９０３において、画面生成部１０５６は、特定された特徴量及び対応する対象データの組のみを強調表示する。この様子は、例えば、図１０に示されている。オブジェクト４０３１が選択される前は、例えば図８に示すようにオブジェクト４０３１とオブジェクト４０３２に対応する特徴量及び対象データがそれぞれ塗分けされて表示されている。一方、図１０の表示画面４００ではオブジェクト４０３１に対応する特徴量及び対象データのみが塗分けされて表示されている、つまり強調表示されている。

【0077】

ステップＳ９０４において、ラベリング情報受付部１０５７は、ラベリング情報を取得し、記憶部１０１に記憶する。具体的には、図９のように特徴量及び対象データの組が強調表示された表示画面４００をユーザが閲覧し、行ラベル入力欄４０２７１にラベリング情報を入力する。ラベリング情報受付部１０５７は、ユーザが登録ボタン４０２７２を選択したことに応じて、入力されたラベリング情報を記憶部１０１に記憶する。図１０の例では、ユーザは、行ラベルとして「normal」を入力する場合が示されている。

【0078】

同様に、図１１に示すように、オブジェクト４０３２に対応する特徴量及び対象データに基づいて、行ラベルを入力してもよい。なお、不要なオブジェクト４０３１等は選択表示領域４０３の削除領域Ｄにドラッグアンドドロップすることで、削除可能である。

【0079】

このように、情報処理装置１００は、ユーザがラベリング情報を入力したい特量量に対応する対象データを表示させることで、ユーザがより正確に特量量をラベリングすることができる。

【0080】

最後に、対象データが画像データである場合の表示画面４００について説明する。図１２では、対象データ表示領域４０１に、対象データとして画像１２０１及び画像１２０２がそれぞれ示される。特徴量の選択が時系列データの場合と同様に行われ、選択表示領域４０３にオブジェクト４０３１及びオブジェクト４０３２が表示される。図１２の例では、画像を識別するために表示枠１２０１１と表示枠１２０１２とが、オブジェクト４０３１とオブジェクト４０３２とにそれぞれ対応するように設けられ、特徴量と対象データとの組が識別可能に表示される。

【0081】

ここで、以上説明した情報処理装置及びプログラムの主要な構成についてまとめておく。

【0082】

［付記１］
複数の対象データを取得する対象データ取得部（１０５１）と、
前記複数の対象データに対応する複数の特徴量を取得する特徴量取得部（１０５２）と、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付ける選択受付部（１０５５）と、
前記複数の対象データのそれぞれが表示される対象データ表示領域（４０１）と、前記複数の特徴量のそれぞれが表示される特徴量表示領域（４０２）とを有し、選択された前記少なくとも１つの特徴量と前記少なくとも１つの特徴量に対応する少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面（４００）を生成する画面生成部（１０５６）と、を備える、情報処理装置。
［付記２］
付記１に記載の情報処理装置であって、
前記画面生成部は、選択された前記少なくとも１つの特徴量を示す情報が表示される選択表示領域（４０３）をさらに有する前記表示画面を生成する、情報処理装置。
［付記３］
付記２に記載の情報処理装置であって、
前記画面生成部は、前記特徴量表示領域における前記ユーザからの操作入力に基づいて選択可能な、前記複数の特徴量のそれぞれに対応する複数のオブジェクト（Ｏ１，Ｏ２，Ｏ３，Ｏ４）を、前記特徴量表示領域に表示し、
前記選択受付部は、前記表示画面において、前記複数のオブジェクトのうち前記特徴量表示領域において選択されたオブジェクトが、前記選択表示領域に配置されることで、前記少なくとも１つの特徴量の選択を受け付ける、情報処理装置。
［付記４］
付記１に記載の情報処理装置であって、
前記画面生成部は、前記組を共通の表示態様で表示することで前記組を識別可能に表示する、情報処理装置。
［付記５］
付記１から４のいずれかに記載の情報処理装置であって、
前記少なくとも１つの特徴量に対するラベリング情報を前記ユーザから受け付けるラベリング情報受付部（１０５７）、をさらに備える、情報処理装置。
［付記６］
付記１から５のいずれか１項に記載の情報処理装置であって、
前記対象データは時系列データである、情報処理装置。
［付記７］
付記１から５のいずれか１項に記載の情報処理装置であって、
前記対象データは画像データである、情報処理装置。
［付記８］
コンピュータに、
複数の対象データを取得することと、
前記複数の対象データに対応する複数の特徴量を取得することと、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、
前記複数の対象データが表示される対象データ表示領域と、前記複数の特徴量が表示される特徴量表示領域とを有し、選択された前記少なくとも１つの特徴量と対応付けられた前記少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を実行させる、プログラム。
［付記９］
コンピュータが実行する情報処理方法であって、
複数の対象データを取得することと、
前記複数の対象データに対応する複数の特徴量を取得することと、
前記複数の特徴量のうち少なくとも１つの特徴量の選択を受け付けることと、
前記少なくとも１つの特徴量と、前記少なくとも１つの特徴量に対応する少なくとも１つの対象データとを対応付けることと、
前記複数の対象データが表示される対象データ表示領域と、前記複数の特徴量が表示される特徴量表示領域とを有し、選択された前記少なくとも１つの特徴量と対応付けられた前記少なくとも１つの対象データとの組をユーザが識別可能に表示する表示画面を生成することと、を含む、情報処理方法。

【符号の説明】

【0083】

１００…情報処理装置、１０５１…対象データ取得部、１０５２…特徴量取得部、１０５３…第１リスト生成部、１０５４…第２リスト生成部、１０５５…選択受付部、１０５６…画面生成部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】