特許 7615979 方法、情報処理装置、及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-01-08

(45)【発行日】2025-01-17

(54)【発明の名称】方法、情報処理装置、及びプログラム

(51)【国際特許分類】

   G06V 30/00 20220101AFI20250109BHJP

   G06V 30/14 20220101ALI20250109BHJP

   G06F 3/0481 20220101ALI20250109BHJP

【ＦＩ】

G06V30/00 P

G06V30/14 340

G06F3/0481

【請求項の数】 20

(21)【出願番号】P 2021151598

(22)【出願日】2021-09-16

(65)【公開番号】P2023043794

(43)【公開日】2023-03-29

【審査請求日】2024-02-12

(73)【特許権者】

【識別番号】000003207

【氏名又は名称】トヨタ自動車株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100187078

【弁理士】

【氏名又は名称】甲原 秀俊

(74)【代理人】

【識別番号】100202326

【弁理士】

【氏名又は名称】橋本 大佑

(72)【発明者】

【氏名】上野 洋輔

(72)【発明者】

【氏名】武藤 晴文

【審査官】菊池 伸郎

(56)【参考文献】

【文献】特開平０６－２２３２３１（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １／００－７／９０

Ｇ０６Ｖ １０／００－４０／７０

Ｇ０６Ｆ ３／０４８１

(57)【特許請求の範囲】

【請求項1】

情報処理装置が実行する方法であって、
対象情報を含む画像を取得すること、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定すること、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得すること、
前記対象情報に沿って示されている軸に関する第２情報を取得すること、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出すること、及び
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定すること、
を含む、
方法。

【請求項2】

請求項１に記載の方法であって、
算出された前記位置関係に基づき、前記省略線を境界とする第１領域及び第２領域の２つに前記画像を切り分けて識別することをさらに含む、
方法。

【請求項3】

請求項１又は２に記載の方法であって、
前記省略線を境界とする第１領域及び第２領域を前記画像においてそれぞれ指定するユーザ入力を受け付けることをさらに含む、
方法。

【請求項4】

請求項３に記載の方法であって、
前記第２情報を取得することは、前記軸に関連する数値について、前記軸に沿った数値間隔を前記第１領域及び前記第２領域のそれぞれについて指定するユーザ入力を受け付けることを含む、
方法。

【請求項5】

請求項１乃至４のいずれか１項に記載の方法であって、
前記第１情報を取得することは、前記省略線を囲む範囲を指定するユーザ入力を受け付けること、及び前記範囲の中で前記省略線を読み取ること、を含む、
方法。

【請求項6】

請求項１乃至４のいずれか１項に記載の方法であって、
前記第１情報を取得することは、前記画像に含まれる前記省略線を画像認識のみにより読み取ることを含む、
方法。

【請求項7】

請求項１乃至６のいずれか１項に記載の方法であって、
前記対象情報は、前記省略線と共に複数の前記軸に沿って描かれたグラフを含み、
前記軸に関連する数値を前記軸に対して設定することは、前記グラフに対して外挿された情報が含まれる外挿領域で前記軸に関連する数値を前記軸に対して設定することを含む、
方法。

【請求項8】

制御部を備える情報処理装置であって、前記制御部は、
対象情報を含む画像を取得し、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定し、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得し、
前記対象情報に沿って示されている軸に関する第２情報を取得し、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出し、
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定する、
情報処理装置。

【請求項9】

請求項８に記載の情報処理装置であって、
前記制御部は、算出された前記位置関係に基づき、前記省略線を境界とする第１領域及び第２領域の２つに前記画像を切り分けて識別する、
情報処理装置。

【請求項10】

請求項８又は９に記載の情報処理装置であって、
前記制御部は、前記省略線を境界とする第１領域及び第２領域を前記画像においてそれぞれ指定するユーザ入力を受け付ける、
情報処理装置。

【請求項11】

請求項１０に記載の情報処理装置であって、
前記制御部は、前記軸に関連する数値について、前記軸に沿った数値間隔を前記第１領域及び前記第２領域のそれぞれについて指定するユーザ入力を受け付けることで前記第２情報を取得する、
情報処理装置。

【請求項12】

請求項８乃至１１のいずれか１項に記載の情報処理装置であって、
前記制御部は、前記省略線を囲む範囲を指定するユーザ入力を受け付け、かつ前記範囲の中で前記省略線を読み取ることで前記第１情報を取得する、
情報処理装置。

【請求項13】

請求項８乃至１１のいずれか１項に記載の情報処理装置であって、
前記制御部は、前記画像に含まれる前記省略線を画像認識のみにより読み取ることで前記第１情報を取得する、
情報処理装置。

【請求項14】

請求項８乃至１３のいずれか１項に記載の情報処理装置であって、
前記対象情報は、前記省略線と共に複数の前記軸に沿って描かれたグラフを含み、
前記制御部は、前記グラフに対して外挿された情報が含まれる外挿領域で前記軸に関連する数値を前記軸に対して設定する、
情報処理装置。

【請求項15】

情報処理装置に、
対象情報を含む画像を取得すること、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定すること、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得すること、
前記対象情報に沿って示されている軸に関する第２情報を取得すること、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出すること、及び
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定すること、
を含む動作を実行させる、
プログラム。

【請求項16】

請求項１５に記載のプログラムであって、
前記動作は、算出された前記位置関係に基づき、前記省略線を境界とする第１領域及び第２領域の２つに前記画像を切り分けて識別することをさらに含む、
プログラム。

【請求項17】

請求項１５又は１６に記載のプログラムであって、
前記動作は、前記省略線を境界とする第１領域及び第２領域を前記画像においてそれぞれ指定するユーザ入力を受け付けることをさらに含む、
プログラム。

【請求項18】

請求項１７に記載のプログラムであって、
前記第２情報を取得することは、前記軸に関連する数値について、前記軸に沿った数値間隔を前記第１領域及び前記第２領域のそれぞれについて指定するユーザ入力を受け付けることを含む、
プログラム。

【請求項19】

請求項１５乃至１８のいずれか１項に記載のプログラムであって、
前記第１情報を取得することは、前記省略線を囲む範囲を指定するユーザ入力を受け付けること、及び前記範囲の中で前記省略線を読み取ること、を含む、
プログラム。

【請求項20】

請求項１５乃至１８のいずれか１項に記載のプログラムであって、
前記第１情報を取得することは、前記画像に含まれる前記省略線を画像認識のみにより読み取ることを含む、
プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、方法、情報処理装置、及びプログラムに関する。

【背景技術】

【0002】

従来、グラフ又は地図等を含む画像を情報処理装置が読み込んでデータベースを作成する技術が知られている。例えば特許文献１には、イメージ画像として入力されたグラフ情報から格子を用いながらグラフを抽出するデータ読取り装置が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開平５－２３３７８５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来技術では、省略線が含まれている画像について十分に考慮されていなかった。したがって、省略線が活用されている画像から必要な情報を読み取ることが困難であった。

【0005】

本開示は、省略線が活用されている画像から必要な情報を精度良く読み取ることを可能にする技術を提供する。

【課題を解決するための手段】

【0006】

本開示の一実施形態に係る方法は、
情報処理装置が実行する方法であって、
対象情報を含む画像を取得すること、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定すること、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得すること、
前記対象情報に沿って示されている軸に関する第２情報を取得すること、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出すること、及び
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定すること、
を含む。

【0007】

本開示の一実施形態に係る情報処理装置は、
制御部を備える情報処理装置であって、前記制御部は、
対象情報を含む画像を取得し、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定し、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得し、
前記対象情報に沿って示されている軸に関する第２情報を取得し、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出し、
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定する。

【0008】

本開示の一実施形態に係るプログラムは、
情報処理装置に、
対象情報を含む画像を取得すること、
前記対象情報に重ねて示されている省略線が前記画像に含まれているか否かを判定すること、
前記画像に前記省略線が含まれていると判定すると、前記省略線に関する第１情報を取得すること、
前記対象情報に沿って示されている軸に関する第２情報を取得すること、
取得された前記第１情報及び前記第２情報に基づいて前記省略線と前記軸との位置関係を算出すること、及び
取得された前記第２情報に基づいて前記軸に関連する数値を前記軸に対して設定すること、
を含む動作を実行させる。

【発明の効果】

【0009】

本開示の一実施形態に係る方法、情報処理装置、及びプログラムによれば、省略線が活用されている画像から必要な情報を精度良く読み取ることが可能になる。

【図面の簡単な説明】

【0010】

【図1】本開示の一実施形態に係る情報処理装置の概略構成を示す機能ブロック図である。

【図2】図１の情報処理装置により実行される情報処理方法の第１実施形態を説明するためのフローチャートである。

【図3】図２に示す情報処理方法をステップごとに具体的に説明するための第１図である。

【図4】図２に示す情報処理方法をステップごとに具体的に説明するための第２図である。

【図5】図２に示す情報処理方法をステップごとに具体的に説明するための第３図である。

【図6】図２に示す情報処理方法をステップごとに具体的に説明するための第４図である。

【図7】図２に示す情報処理方法をステップごとに具体的に説明するための第５図である。

【図8】図１の情報処理装置により実行される情報処理方法の第２実施形態を説明するためのフローチャートである。

【図9】図１の情報処理装置により実行される情報処理方法の他の例を示す模式図である。

【発明を実施するための形態】

【0011】

以下、本開示の実施形態について、図面を参照して説明する。

【0012】

図１は、本開示の一実施形態に係る情報処理装置１０の概略構成を示す機能ブロック図である。図１を参照しながら、情報処理装置１０の構成の一例について主に説明する。

【0013】

情報処理装置１０は、ＰＣ（Personal Computer）又はスマートフォン等の任意の汎用の電子機器である。情報処理装置１０は、所定のユーザが使用する電子機器である。情報処理装置１０は、これらに限定されず、１つ又は互いに通信可能な複数のサーバ装置であってもよい。

【0014】

一実施形態の概要として、情報処理装置１０は、対象情報を含む画像を取得する。本明細書において、「画像」は、例えば対象情報がその中に示されている任意の画像を含む。「対象情報」は、例えばグラフを含む。グラフは、２次元、すなわち２つのＸ軸及びＹ軸に沿って描かれる任意のグラフを含む。

【0015】

情報処理装置１０は、対象情報に重ねて示されている省略線が画像に含まれているか否かを判定する。本明細書において、「省略線」は、例えば画像において対象情報に重ねて示されている、当該対象情報の省略を意味する任意の線を含む。省略線は、例えば画像においてグラフと重なるように描かれている、互いに並列する２つの波線を含む。情報処理装置１０は、画像に省略線が含まれていると判定すると、省略線に関する第１情報を取得する。本明細書において、「第１情報」は、例えば画像における省略線の位置、形状、及び数等を含む。第１情報は、これらの情報を数値として含む。

【0016】

情報処理装置１０は、対象情報に沿って示されている軸に関する第２情報を取得する。本明細書において、「第２情報」は、例えば画像におけるグラフのＸ軸の位置及びＸ軸の目盛りの数値範囲、並びに画像におけるグラフのＹ軸の位置及びＹ軸の目盛りの数値範囲等を含む。加えて、第２情報は、例えばグラフのＸ軸の目盛りの数値間隔及びＹ軸の目盛りの数値間隔を含む。情報処理装置１０は、取得された第１情報及び第２情報に基づいて省略線と軸との位置関係を算出する。情報処理装置１０は、取得された第２情報に基づいて軸に関連する数値を軸に対して設定する。本明細書において、「軸に関連する数値」は、例えばグラフのＸ軸に沿って付される目盛りの数値、及びグラフのＹ軸に沿って付される目盛りの数値等を含む。

【0017】

図１に示すとおり、情報処理装置１０は、通信部１１、記憶部１２、入力部１３、出力部１４、及び制御部１５を有する。

【0018】

通信部１１は、例えば移動体通信網及びインターネットを含むネットワークに接続する通信モジュールを含む。例えば、通信部１１は、４Ｇ（4th Generation）及び５Ｇ（5th Generation）等の移動体通信規格又はインターネット規格に対応する通信モジュールを含む。一実施形態において、情報処理装置１０は、通信部１１を介してネットワークに接続されている。通信部１１は、ネットワークを介して多様な情報を送信及び受信する。

【0019】

記憶部１２は、例えば半導体メモリ、磁気メモリ、又は光メモリ等であるが、これらに限定されない。記憶部１２は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部１２は、情報処理装置１０の動作に用いられる任意の情報を記憶する。例えば、記憶部１２は、システムプログラム、アプリケーションプログラム、及び通信部１１により受信又は送信される各種情報等を記憶する。記憶部１２に記憶された情報は、例えば通信部１１を介してネットワークから受信される情報で更新可能である。

【0020】

入力部１３は、ユーザ入力を検出して、ユーザの操作に基づく入力情報を取得する１つ以上の入力インタフェースを含む。例えば、入力部１３は、物理キー、静電容量キー、マウス、出力部１４のディスプレイと一体的に設けられたタッチスクリーン、当該タッチスクリーンと共に機能するタッチペン、及び音声入力を受け付けるマイクロフォン等を含む。

【0021】

出力部１４は、情報を出力してユーザに通知する１つ以上の出力インタフェースを含む。例えば、出力部１４は、情報を映像で出力するディスプレイ、又は情報を音声で出力するスピーカ等であるが、これらに限定されない。

【0022】

制御部１５は、１つ以上のプロセッサを含む。一実施形態において「プロセッサ」は、汎用のプロセッサ、又は特定の処理に特化した専用のプロセッサであるが、これらに限定されない。制御部１５は、情報処理装置１０を構成する各構成部と通信可能に接続され、情報処理装置１０全体の動作を制御する。

【0023】

（第１実施形態）
図２は、図１の情報処理装置１０により実行される情報処理方法の第１実施形態を説明するためのフローチャートである。図２を参照しながら、図１の情報処理装置１０が実行する情報処理方法の第１実施形態について説明する。図２に示すフローチャートは、情報処理装置１０により実行される情報処理方法の基本的な処理の流れの一例を示す。

【0024】

ステップＳ１００では、情報処理装置１０の制御部１５は、対象情報を含む画像を取得する。

【0025】

ステップＳ１０１では、制御部１５は、ステップＳ１００において取得された画像に、対象情報に重ねて示されている省略線が含まれているか否かを判定する。制御部１５は、画像に省略線が含まれていると判定すると、ステップＳ１０２の処理を実行する。制御部１５は、画像に省略線が含まれていないと判定すると、処理を終了する。

【0026】

ステップＳ１０２では、制御部１５は、ステップＳ１０１において画像に省略線が含まれていると判定すると、省略線に関する第１情報を取得する。

【0027】

ステップＳ１０３では、制御部１５は、ステップＳ１００において取得された画像に含まれる、対象情報に沿って示されている軸に関する第２情報を取得する。例えば、制御部１５は、グラフのＸ軸の位置及びＸ軸の目盛りの数値範囲、並びにグラフのＹ軸の位置及びＹ軸の目盛りの数値範囲を第２情報として取得する。

【0028】

ステップＳ１０４では、制御部１５は、ステップＳ１０２及びステップＳ１０３においてそれぞれ取得された第１情報及び第２情報に基づいて省略線と軸との位置関係を算出する。

【0029】

ステップＳ１０５では、制御部１５は、ステップＳ１０４において算出された位置関係に基づき、省略線を境界とする第１領域及び第２領域の２つに画像を切り分けて識別する。

【0030】

ステップＳ１０６では、制御部１５は、ステップＳ１００において取得された画像に含まれる、対象情報に沿って示されている軸に関する第２情報を取得する。例えば、制御部１５は、ステップＳ１０５において識別した第１領域及び第２領域のそれぞれにおいて、軸の目盛りの数値間隔を第２情報として取得する。

【0031】

ステップＳ１０７では、制御部１５は、ステップＳ１０３及びステップＳ１０６において取得された第２情報に基づいて軸に関連する数値を軸に対して設定する。

【0032】

図３は、図２に示す情報処理方法をステップごとに具体的に説明するための第１図である。図３を参照しながら、図２のステップＳ１００における制御部１５の処理内容をより詳細に説明する。

【0033】

制御部１５は、入力部１３を用いたユーザの操作に基づいて、記憶部１２に記憶されている任意のファイル形式の電子ファイルを参照する。例えば、制御部１５は、ＰＤＦファイルを参照する。続いて、制御部１５は、参照したＰＤＦファイルに含まれている任意の画像を取得する。このとき、制御部１５は、ＰＤＦファイルに含まれている、対象情報を含む画像に対して画像領域ＩＭを指定するユーザ入力を入力部１３により受け付ける。制御部１５は、入力部１３を用いてユーザにより指定された画像領域ＩＭを抽出することで、対象情報を含む画像を取得する。

【0034】

図４は、図２に示す情報処理方法をステップごとに具体的に説明するための第２図である。図４は、図２のステップＳ１００において制御部１５により取得された画像の一例を示す。図４を参照しながら、図２のステップＳ１０１における制御部１５の処理内容をより詳細に説明する。

【0035】

制御部１５により取得された画像には、２次元のグラフＧが対象情報として含まれている。このような画像には、グラフＧに加えて、グラフＧのＸ軸及びＹ軸、並びにＸ軸の目盛りＭ１及びＹ軸の目盛りＭ２が示されている。さらに、このような画像には、グラフＧと重なるように、互いに並列する２つの波線が省略線Ｌとして示されている。省略線Ｌは、上下方向に互いに並列する上側波線Ｌ１と下側波線Ｌ２とを含む。省略線Ｌは、グラフＧにおけるＹ軸に沿った一部分を省略していることを表している。グラフＧは、Ｙ軸に沿って上下方向に２つの領域に区別することが可能である。

【0036】

制御部１５は、図２のステップＳ１００において取得された画像に対して画像認識等の技術を用いることで図２のステップＳ１０１の判定処理を実行する。すなわち、制御部１５は、ステップＳ１００において取得された画像においてグラフＧと重なる省略線Ｌが含まれているか否かを判定する。

【0037】

図５は、図２に示す情報処理方法をステップごとに具体的に説明するための第３図である。図５を参照しながら、図２のステップＳ１０２における制御部１５の処理内容をより詳細に説明する。

【0038】

制御部１５は、省略線Ｌを囲む範囲Ｒ０を指定するユーザ入力を入力部１３により受け付ける。範囲Ｒ０は、例えば省略線Ｌの周囲を矩形状に囲む。制御部１５は、画像認識等の技術を用いることで、このような矩形状の範囲Ｒ０の中で省略線Ｌを読み取る。すなわち、制御部１５は、画像における省略線Ｌの位置、形状、及び数等の数値情報を上側波線Ｌ１及び下側波線Ｌ２のそれぞれに対し第１情報として取得する。

【0039】

図６は、図２に示す情報処理方法をステップごとに具体的に説明するための第４図である。図６を参照しながら、図２のステップＳ１０３における制御部１５の処理内容をより詳細に説明する。

【0040】

制御部１５は、Ｘ軸の目盛りＭ１の数値範囲における最小値０と最大値５とを数値情報として指定するユーザ入力を入力部１３により受け付ける。制御部１５は、Ｙ軸の目盛りＭ２の数値範囲における最小値０と最大値２０００とを数値情報として指定するユーザ入力を入力部１３により受け付ける。制御部１５は、ユーザにより指定された各軸の目盛りの数値範囲における最小値及び最大値に基づいて、各軸の目盛りの数値範囲を第２情報として取得する。

【0041】

制御部１５は、Ｘ軸を指定するユーザ入力を入力部１３により受け付ける。例えば、ユーザは、出力部１４に表示された画像中のＸ軸上の一部でマウスをクリックすることで、画像中のＸ軸を指定する。例えば、ユーザは、マウスをクリックしながら画像中のＸ軸に沿ってポインタを移動させることで、画像中のＸ軸を指定する。例えば、ユーザは、画像中のＸ軸に沿ってタッチペンを移動させることで、画像中のＸ軸を指定する。

【0042】

制御部１５は、Ｙ軸を指定するユーザ入力を入力部１３により受け付ける。例えば、ユーザは、出力部１４に表示された画像中のＹ軸上の一部でマウスをクリックすることで、画像中のＹ軸を指定する。例えば、ユーザは、マウスをクリックしながら画像中のＹ軸に沿ってポインタを移動させることで、画像中のＹ軸を指定する。例えば、ユーザは、画像中のＹ軸に沿ってタッチペンを移動させることで、画像中のＹ軸を指定する。

【0043】

制御部１５は、ユーザによるＸ軸の指定に基づいて、画像におけるグラフＧのＸ軸の位置を第２情報として取得する。同様に、制御部１５は、ユーザによるＹ軸の指定に基づいて、画像におけるグラフＧのＹ軸の位置を第２情報として取得する。

【0044】

図７は、図２に示す情報処理方法をステップごとに具体的に説明するための第５図である。図７を参照しながら、図２のステップＳ１０４乃至Ｓ１０７における制御部１５の処理内容をより詳細に説明する。

【0045】

制御部１５は、取得された第１情報及び第２情報に基づいて省略線Ｌと軸との位置関係を算出する。制御部１５は、省略線ＬとＸ軸及びＹ軸との位置関係、より具体的にはＹ軸上の省略線Ｌの位置を算出する。これにより、制御部１５は、省略線Ｌが上下方向に沿ってＹ軸の中央部に位置し、かつＹ軸の目盛り２００と目盛り１０００との間に位置すると識別する。

【0046】

制御部１５は、このようにして算出された位置関係に基づき、省略線Ｌを境界とする第１領域Ｒ１及び第２領域Ｒ２の２つに画像を切り分けて識別する。図７に示す画像において、第１領域Ｒ１は省略線Ｌの上側波線Ｌ１から上側の領域を含み、第２領域Ｒ２は省略線Ｌの下側波線Ｌ２から下側の領域を含む。

【0047】

ここで、第１領域Ｒ１ではＹ軸の目盛りＭ２の数値間隔は１０００である一方で、第２領域Ｒ２ではＹ軸の目盛りＭ２の数値間隔は１００である。第１領域Ｒ１及び第２領域Ｒ２において、Ｙ軸の目盛りＭ２の数値間隔は互いに異なる。制御部１５は、Ｙ軸に沿った目盛りＭ２の数値間隔を第１領域Ｒ１及び第２領域Ｒ２のそれぞれについて画像認識等の技術を用いることで識別し、第２情報として取得する。制御部１５は、第１領域Ｒ１ではＹ軸の目盛りＭ２の数値間隔が１０００であり、第２領域Ｒ２ではＹ軸の目盛りＭ２の数値間隔が１００であることを識別する。

【0048】

制御部１５は、第２情報に基づいて軸に関連する数値を軸に対して設定する。例えば、制御部１５は、Ｘ軸の位置及びＸ軸の目盛りＭ１の数値範囲を用いて、Ｘ軸に沿って付される目盛りＭ１の数値をＸ軸に対して設定する。制御部１５は、識別した第１領域Ｒ１及び第２領域Ｒ２のそれぞれのＹ軸の目盛りＭ２の数値間隔と共に、Ｙ軸の位置及びＹ軸の目盛りＭ２の数値範囲を用いて、Ｙ軸に沿って付される目盛りＭ２の数値をＹ軸に対して設定する。

【0049】

以上により、制御部１５は、図３に示すように電子ファイル内で画像として取り込まれていたグラフＧを、各軸、各軸の目盛り、及び省略線Ｌと共に精度良く読み取る。

【0050】

以上のような一実施形態によれば、省略線が活用されている画像から必要な情報を精度良く読み取ることが可能になる。情報処理装置１０は、画像に含まれるグラフを読み取るときに、値の省略を意味する省略線がグラフと重なるように画像に含まれていて、軸上での目盛りの値の一貫性が崩れていたとしても、グラフ、各軸、各軸の目盛り、及び省略線を精度良く読み取ることが可能になる。

【0051】

情報処理装置１０は、ユーザ入力及び画像認識等の技術により第１情報を取得することで情報を補完することが可能となる。これにより、情報処理装置１０は、省略線に関する第１情報を精度良く読み取ることが可能となる。

【0052】

情報処理装置１０は、ユーザ入力又は画像認識等の技術により第２情報を取得することで情報を補完することが可能となる。これにより、情報処理装置１０は、省略線を境界とする第１領域Ｒ１及び第２領域Ｒ２の両方で軸に関する第２情報を精度良く読み取ることが可能となる。例えば、図７において、第２領域Ｒ２での目盛りＭ２の数値間隔１００が第１領域Ｒ１においても続けて適用されて、目盛りＭ２において本来２０００の数値として読み取るべき部分が１１００として読み取られるような誤認識が抑制される。

【0053】

情報処理装置１０は、省略線を境界とする第１領域及び第２領域の２つに画像を切り分けて識別することで、第１領域及び第２領域において軸の目盛りの数値間隔が互いに異なるような場合であっても、領域ごとに個別に軸の目盛りの数値間隔を識別可能である。これにより、情報処理装置１０は、省略線が活用されている画像から、省略線近傍の軸に関する第２情報を精度良く読み取ることが可能である。

【0054】

情報処理装置１０は、省略線を囲む範囲を指定するユーザ入力を受け付けて、当該範囲の中で省略線を読み取ることで、省略線に関する第１情報を画像から精度良く読み取ることが可能である。

【0055】

（第２実施形態）
図８は、図１の情報処理装置１０により実行される情報処理方法の第２実施形態を説明するためのフローチャートである。図８を参照しながら、図１の情報処理装置１０が実行する情報処理方法の第２実施形態について説明する。図８に示すフローチャートは、情報処理装置１０により実行される情報処理方法の基本的な処理の流れの一例を示す。

【0056】

以下の説明において、図２に示す情報処理方法の第１実施形態と共通する処理内容については、第１実施形態において図３乃至図７を参照しながら上述した具体的な処理内容と同様の説明が当てはまる。以下では、第１実施形態と共通する処理内容については概要のみを述べ、第１実施形態と異なる処理内容について詳細に説明する。

【0057】

ステップＳ２００では、情報処理装置１０の制御部１５は、対象情報を含む画像を取得する。

【0058】

ステップＳ２０１では、制御部１５は、ステップＳ２００において取得された画像に、対象情報に重ねて示されている省略線が含まれているか否かを判定する。制御部１５は、画像に省略線が含まれていると判定すると、ステップＳ２０２の処理を実行する。制御部１５は、画像に省略線が含まれていないと判定すると、処理を終了する。

【0059】

ステップＳ２０２では、制御部１５は、ステップＳ２０１において画像に省略線が含まれていると判定すると、省略線を境界とする、図７に示すような第１領域Ｒ１及び第２領域Ｒ２を画像においてそれぞれ指定するユーザ入力を受け付ける。制御部１５は、画像において第１領域Ｒ１及び第２領域Ｒ２をユーザ入力により識別する。

【0060】

ステップＳ２０３では、制御部１５は、省略線に関する第１情報を取得する。制御部１５は、ステップＳ２０２において識別された第１領域Ｒ１において第２領域Ｒ２に隣接する縁部に沿って示されている上側波線Ｌ１を省略線Ｌとして識別する。同様に、制御部１５は、ステップＳ２０２において識別された第２領域Ｒ２において第１領域Ｒ１に隣接する縁部に沿って示されている下側波線Ｌ２を省略線Ｌとして識別する。制御部１５は、上側波線Ｌ１及び下側波線Ｌ２を含む省略線Ｌに関する第１情報を取得する。

【0061】

ステップＳ２０４では、制御部１５は、ステップＳ２００において取得された画像に含まれる、対象情報に沿って示されている軸に関する第２情報を取得する。例えば、制御部１５は、第１実施形態と同様に、グラフのＸ軸の位置及びＸ軸の目盛りの数値範囲、並びにグラフのＹ軸の位置及びＹ軸の目盛りの数値範囲をユーザ入力により第２情報として取得する。

【0062】

第２実施形態では、これに加えて、制御部１５は、軸に関連する数値について、軸に沿った数値間隔を第１領域Ｒ１及び第２領域Ｒ２のそれぞれについて指定するユーザ入力を受け付ける。制御部１５は、Ｙ軸に沿った目盛りＭ２の数値間隔を第１領域Ｒ１及び第２領域Ｒ２のそれぞれについてユーザ入力により識別し、第２情報として取得する。制御部１５は、第１領域Ｒ１ではＹ軸の目盛りＭ２の数値間隔が１０００であり、第２領域Ｒ２ではＹ軸の目盛りＭ２の数値間隔が１００であることを識別する。

【0063】

ステップＳ２０５では、制御部１５は、ステップＳ２０３及びステップＳ２０４においてそれぞれ取得された第１情報及び第２情報に基づいて省略線と軸との位置関係を算出する。

【0064】

ステップＳ２０６では、制御部１５は、ステップＳ２０４において取得された第２情報に基づいて軸に関連する数値を軸に対して設定する。

【0065】

以上のような第２実施形態によれば、第１実施形態と同様の効果を奏する。

【0066】

加えて、情報処理装置１０は、省略線を境界とする第１領域及び第２領域を画像においてそれぞれ指定するユーザ入力を受け付けることで、第１領域及び第２領域を画像から精度良く読み取ることが可能である。同様に、情報処理装置１０は、軸に関連する数値について、軸に沿った数値間隔を第１領域及び第２領域のそれぞれについて指定するユーザ入力を受け付けることで、軸に沿った目盛りの数値間隔を第１領域及び第２領域のそれぞれにおいて第２情報として画像から精度良く読み取ることが可能である。

【0067】

本開示を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び改変を行うことが可能であることに注意されたい。したがって、これらの変形及び改変は本開示の範囲に含まれることに留意されたい。例えば、各構成又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の構成又はステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。

【0068】

例えば、スマートフォン又はコンピュータ等の汎用の電子機器を、上述した実施形態に係る情報処理装置１０として機能させる構成も可能である。具体的には、実施形態に係る情報処理装置１０等の各機能を実現する処理内容を記述したプログラムを、電子機器のメモリに格納し、電子機器のプロセッサにより当該プログラムを読み出して実行させる。したがって、一実施形態に係る開示は、プロセッサが実行可能なプログラムとしても実現可能である。

【0069】

又は、一実施形態に係る開示は、実施形態に係る情報処理装置１０等に各機能を実行させるために１つ又は複数のプロセッサにより実行可能なプログラムを記憶した非一時的なコンピュータ読取可能な媒体としても実現し得る。本開示の範囲には、これらも包含されると理解されたい。

【0070】

上記実施形態では、画像に含まれる対象情報は２次元のグラフであると説明したが、これに限定されない。対象情報は、３次元、すなわち３つのＸ軸、Ｙ軸、及びＺ軸に沿って描かれる任意のグラフを含んでもよい。対象情報は、２次元又は３次元の任意の地図を含んでもよい。対象情報は、ＣＡＤ（Computer-Aided Design）に基づく２次元又は３次元の任意の図面を含んでもよい。

【0071】

上記実施形態では、省略線は、グラフをＹ軸方向の２つの領域に切り分ける、互いに並列する２つの波線を含むと説明したが、これに限定されない。省略線は、グラフをＹ軸方向ではなくＸ軸方向の２つの領域に切り分けてもよい。省略線は、波線とは異なる任意の他の形状の線を含んでもよい。省略線は、２つではなく、１つ又は３つ以上の線を含んでもよい。省略線は、グラフではなく地図と重なるように描かれている任意の線を含んでもよい。省略線は、グラフ及び地図ではなくＣＡＤ図面と重なるように描かれている任意の線を含んでもよい。

【0072】

上記実施形態では、対象情報に沿って示されている軸は、グラフのＸ軸及びＹ軸であると説明したが、これに限定されない。対象情報に沿って示されている軸は、グラフのＸ軸、Ｙ軸、及びＺ軸であってもよい。対象情報に沿って示されている軸は、地図上の位置を示す任意の座標軸であってもよい。対象情報に沿って示されている軸は、ＣＡＤ図面上の位置を示す任意の座標軸であってもよい。

【0073】

上記第１実施形態では、情報処理装置１０は、算出された位置関係に基づき、省略線を境界とする第１領域及び第２領域の２つに画像を切り分けて識別すると説明したが、これに限定されない。情報処理装置１０は、このような識別処理に代えて、又は加えて、第２実施形態のように第１領域及び第２領域を画像においてそれぞれ指定するユーザ入力を受け付けてもよい。情報処理装置１０は、例えばＹ軸に沿った各領域の目盛りの数値間隔が同一であるような場合、これらの処理を実行しなくてもよい。すなわち、情報処理装置１０は、画像を複数の領域に切り分けなくてもよい。

【0074】

上記第１実施形態では、情報処理装置１０は、目盛りの数値間隔を第１領域及び第２領域のそれぞれについて画像認識等の技術を用いることで識別し、第２情報として取得すると説明したが、これに限定されない。情報処理装置１０は、このような処理に代えて、又は加えて、第２実施形態のように、軸に関連する数値について、軸に沿った数値間隔を第１領域及び第２領域のそれぞれについて指定するユーザ入力を受け付けてもよい。

【0075】

上記第１実施形態では、情報処理装置１０は、省略線を囲む範囲を指定するユーザ入力を受け付け、かつ当該範囲の中で省略線を読み取ることで第１情報を取得すると説明したが、これに限定されない。情報処理装置１０は、このような処理に代えて、又は加えて、第２実施形態のように、先に第１領域及び第２領域がユーザにより指定された状態でこれらの領域の中から省略線を読み取ってもよい。情報処理装置１０は、これらの処理に代えて、画像に含まれる省略線を画像認識のみにより読み取ることで第１情報を取得してもよい。これにより、ユーザは、情報処理装置１０が省略線を読み取るために入力部１３を用いて任意の入力操作を行う必要がない。したがって、情報処理装置１０を使用するときのユーザの利便性が向上する。

【0076】

情報処理装置１０は、以上の処理に代えて、又は加えて省略線の少なくとも一部を指定するユーザ入力を受け付けることで第１情報を取得してもよい。例えば、ユーザは、出力部１４に表示された画像中の省略線の少なくとも一部に沿ってマウスをクリックしながらポインタを移動させることで、省略線の少なくとも一部を指定してもよい。例えば、ユーザは、画像中の省略線の少なくとも一部に沿ってタッチペンを移動させることで、省略線の少なくとも一部を指定してもよい。情報処理装置１０は、ユーザが省略線の一部のみを指定した場合、省略線の残りの部分を画像認識等の技術を用いることで識別してもよい。

【0077】

上記実施形態では、情報処理装置１０は、グラフのＸ軸の位置及びＸ軸の目盛りの数値範囲、並びにグラフのＹ軸の位置及びＹ軸の目盛りの数値範囲をユーザ入力により第２情報として取得すると説明したが、これに限定されない。情報処理装置１０は、グラフのＸ軸の位置及びＸ軸の目盛りの数値範囲、並びにグラフのＹ軸の位置及びＹ軸の目盛りの数値範囲の少なくとも１つを画像認識等の技術を用いて識別することで第２情報として取得してもよい。情報処理装置１０は、グラフのＹ軸全体の目盛りの数値範囲に代えて、第１領域における目盛りの最小値及び最大値、並びに第２領域における目盛りの最小値及び最大値を個別に指定するユーザ入力により、各領域における目盛りの数値範囲を第２情報として個別に取得してもよい。

【0078】

上記第１実施形態では、情報処理装置１０は、算出された位置関係に基づき、省略線を境界とする第１領域及び第２領域の２つに画像を切り分けて識別してから、目盛りの数値間隔を第１領域及び第２領域のそれぞれについて画像認識等の技術を用いることで識別し、第２情報として取得すると説明したが、これに限定されない。情報処理装置１０は、第１領域及び第２領域の２つに画像を切り分けることなく、軸全体の目盛りの各数値を画像認識等の技術を用いて識別することで、図２のステップＳ１０３において第２情報としてまとめて取得してもよい。

【0079】

上記実施形態では、情報処理装置１０は、入力部１３を用いてユーザにより指定された画像領域ＩＭを抽出することで、対象情報を含む画像を取得すると説明したが、これに限定されない。情報処理装置１０は、画像認識等の技術を用いることで対象情報を含む画像を取得してもよい。

【0080】

図９は、図１の情報処理装置１０により実行される情報処理方法の他の例を示す模式図である。上記実施形態では、情報処理装置１０は、ユーザにより指定された目盛りの数値範囲内で軸に沿って付される目盛りの数値を軸に対して設定すると説明したが、これに限定されない。図９に示すように、対象情報が省略線と共に複数の軸に沿って描かれたグラフを含むような場合に、情報処理装置１０の制御部１５は、グラフに対して外挿された情報が含まれる外挿領域Ｒ３で軸に関連する数値を軸に対して設定してもよい。すなわち、制御部１５は、元のグラフに対してユーザにより追加された外挿データと共に、対応する目盛りの数値を、元の数値範囲の最小値又は最大値を超えて設定してもよい。図９では一例として、制御部１５は、元のグラフに対してＹ軸の値がより大きい外挿領域Ｒ３に追加された外挿データに対して、３０００及び４０００の目盛りの数値をＹ軸に対して設定する。

【符号の説明】

【0081】

１０ 情報処理装置
１１ 通信部
１２ 記憶部
１３ 入力部
１４ 出力部
１５ 制御部
Ｇ グラフ
ＩＭ 画像領域
Ｌ 省略線
Ｌ１ 上側波線
Ｌ２ 下側波線
Ｍ１ 目盛り
Ｍ２ 目盛り
Ｒ０ 範囲
Ｒ１ 第１領域
Ｒ２ 第２領域
Ｒ３ 外挿領域

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】