特許 7364287 情報通信プログラム及び情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-10-10

(45)【発行日】2023-10-18

(54)【発明の名称】情報通信プログラム及び情報処理装置

(51)【国際特許分類】

   G06Q 30/0601 20230101AFI20231011BHJP

【ＦＩ】

G06Q30/0601 312

【請求項の数】 8

(21)【出願番号】P 2022502905

(86)(22)【出願日】2021-11-09

(86)【国際出願番号】 JP2021041108

(87)【国際公開番号】W WO2022102599

(87)【国際公開日】2022-05-19

【審査請求日】2022-01-18

【審判番号】

【審判請求日】2022-09-22

(31)【優先権主張番号】P 2020190316

(32)【優先日】2020-11-16

(33)【優先権主張国・地域又は機関】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】520447824

【氏名又は名称】吉谷 拓海

(74)【代理人】

【識別番号】100180758

【弁理士】

【氏名又は名称】荒木 利之

(72)【発明者】

【氏名】吉谷 拓海

【合議体】

【審判長】佐藤 智康

【審判官】相崎 裕恒

【審判官】中野 浩昌

(56)【参考文献】

【文献】特表２０１２－５１０１２８（ＪＰ，Ａ）

【文献】特開２０１２－２４３１５０（ＪＰ，Ａ）

【文献】特開２０１７－３３２８９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

G06Q10/00-99/00

(57)【特許請求の範囲】

【請求項1】

コンピュータを、
第１の利用者に関連付けられたコンテンツ情報を第２の利用者の端末上に表示制御する表示制御手段と、
前記端末において前記コンテンツ情報の範囲の指定及び当該範囲に対する応答を要求する通知内容を受け付けると、当該範囲及び当該通知内容を通知情報として受け付ける通知受付手段と、
前記通知情報に基づいて前記第１の利用者の端末に、前記第２の利用者の端末に対して応答可能に通知する通知手段として機能させる情報通信プログラム。

【請求項2】

前記コンテンツ情報を受け付けて記憶部に格納する受付手段としてさらに機能させ、
前記第１の利用者は、前記コンテンツ情報を前記受付手段に対してアップロードした者である請求項１に記載の情報通信プログラム。

【請求項3】

前記コンテンツ情報の記録の際、記録より前又は記録と同時に範囲の指定を受け付ける範囲指定受付手段としてさらに機能させる請求項２に記載の情報通信プログラム。

【請求項4】

前記第１の利用者は、前記コンテンツ情報に記録された対象物の所有者である請求項１又は３に記載の情報通信プログラム。

【請求項5】

前記通知受付手段の受け付ける通知内容は売買契約の申し出である請求項１から４のいずれか１項に記載の情報通信プログラム。

【請求項6】

前記端末においてコンテンツ情報の第１の範囲の指定と、コンテンツ情報の第２の範囲の指定と、当該第１の範囲と当該第２の範囲の関連付けを受け付ける関連付手段としてさらに機能させ、
前記表示制御手段は、当該第１の範囲又は当該第２の範囲の表示要求を受け付けると、当該第１の範囲又は当該第２の範囲とともに当該第２の範囲又は当該第１の範囲を表示制御する請求項１から５のいずれか１項に記載の情報通信プログラム。

【請求項7】

前記表示制御手段は、予め入力された前記第１の利用者の通知内容とともに前記第１の利用者に関連付けられたコンテンツ情報を前記第２の利用者の端末上に表示制御する請求項１から６のいずれか１項に記載の情報通信プログラム。

【請求項8】

第１の利用者に関連付けられたコンテンツ情報を第２の利用者の端末上に表示制御する表示制御手段と、
前記端末において前記コンテンツ情報の範囲の指定及び当該範囲に対する応答を要求する通知内容を受け付けると、当該範囲及び当該通知内容を通知情報として受け付ける通知受付手段と、
前記通知情報に基づいて前記第１の利用者の端末に、前記第２の利用者の端末に対して応答可能に通知する通知手段とを有する情報処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報通信プログラム及び情報処理装置に関する。

【背景技術】

【0002】

従来の技術として、アイテム購入情報を、インターネットを介して出力する情報処理装置が提案されている（例えば、特許文献１参照。）。

【0003】

特許文献１に開示された情報処理装置は、クライアント・システムから購入注文が出されると、購入者のＩＤ、支払い情報、出荷情報を含む購入者情報をクライアントから受けた後、クライアントにＩＤを割り当て、割り当てＩＤを上記購入者情報と関連付け、割り当てＩＤ、アイテムを特定し、注文ボタンを含むＨＴＭＬ文書をクライアントに送る。次に、クライアントは割り当てＩＤを受けストアし、上記文書を受け表示する。情報処理装置は、注文ボタンの選択に応答してクライアントから送られた特定されたアイテムの購入要求を受けると、クライアントのクライアントＩＤと関連付けられた購入者情報を結合し、請求書発行と出荷情報に従いアイテム購入注文を生成し、これにより購入者は注文ボタンを選択して製品を注文する。

【先行技術文献】

【特許文献】

【0004】

【文献】特開平１１－１６１７１７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかし、特許文献１の情報処理装置は、インデックス化されたアイテムについてのアイテム購入情報を出力するものの、インデックス化されていないアイテム、例えば、背景を含む画像中に写っているアイテムについて、アイテム購入情報を出力することができない、という問題がある。つまり、画像中に含まれるアイテムを事前に準備し、インデックス化しておく必要がある。

【0006】

本発明の目的は、コンテンツ情報中のインデックス化されていない対象に関連付けて情報を通知する情報通信プログラム及び情報処理装置を提供することにある。

【課題を解決するための手段】

【0007】

本発明の一態様は、上記目的を達成するため、以下の情報通信プログラム及び情報処理装置を提供する。

【0008】

［１］コンピュータを、
第１の利用者に関連付けられたコンテンツ情報を第２の利用者の端末上に表示制御する表示制御手段と、
前記端末において前記コンテンツ情報の範囲の指定及び当該範囲に対する応答を要求する通知内容を受け付けると、当該範囲及び当該通知内容を通知情報として受け付ける通知受付手段と、
前記通知情報に基づいて前記第１の利用者の端末に、前記第２の利用者の端末に対して応答可能に通知する通知手段として機能させる情報通信プログラム。
［２］前記コンテンツ情報を受け付けて記憶部に格納する受付手段としてさらに機能させ、
前記第１の利用者は、前記コンテンツ情報を前記受付手段に対してアップロードした者である前記［１］に記載の情報通信プログラム。
［３］前記コンテンツ情報の記録の際、記録より前又は記録と同時に範囲の指定を受け付ける範囲指定受付手段としてさらに機能させる前記［２］に記載の情報通信プログラム。
［４］前記第１の利用者は、前記コンテンツ情報に記録された対象物の所有者である前記［１］又は［３］に記載の情報通信プログラム。
［５］前記通知受付手段の受け付ける通知内容は売買契約の申し出である前記［１］から［４］のいずれか１項に記載の情報通信プログラム。
［６］前記端末においてコンテンツ情報の第１の範囲の指定と、コンテンツ情報の第２の範囲の指定と、当該第１の範囲と当該第２の範囲の関連付けを受け付ける関連付手段としてさらに機能させ、
前記表示制御手段は、当該第１の範囲又は当該第２の範囲の表示要求を受け付けると、当該第１の範囲又は当該第２の範囲とともに当該第２の範囲又は当該第１の範囲を表示制御する前記［１］から［５］のいずれか１項に記載の情報通信プログラム。
［７］前記表示制御手段は、予め入力された前記第１の利用者の通知内容とともに前記第１の利用者に関連付けられたコンテンツ情報を前記第２の利用者の端末上に表示制御する前記［１］から［６］のいずれかに記載の情報通信プログラム。
［８］第１の利用者に関連付けられたコンテンツ情報を第２の利用者の端末上に表示制御する表示制御手段と、
前記端末において前記コンテンツ情報の範囲の指定及び当該範囲に対する応答を要求する通知内容を受け付けると、当該範囲及び当該通知内容を通知情報として受け付ける通知受付手段と、
前記通知情報に基づいて前記第１の利用者の端末に、前記第２の利用者の端末に対して応答可能に通知する通知手段とを有する情報処理装置。

【発明の効果】

【0009】

請求項１又は８に係る発明によれば、コンテンツ情報中のインデックス化されていない対象に関連付けて情報を通知することができる。
請求項２に係る発明によれば、画像中のインデックス化されていない対象に関連付けて、画像情報を受付手段に対してアップロードした者に対して、情報を通知することができる。
請求項３に係る発明によれば、画像情報の撮影の際、撮影より前又は撮影と同時に範囲の指定を受け付けることができる。
請求項４に係る発明によれば、画像中のインデックス化されていない対象に関連付けて、画像情報に記録された対象物の所有者に対して、情報を通知することができる。
請求項５に係る発明によれば、通知内容として売買契約の申し出を行うことができる。
請求項６に係る発明によれば、第１の画像情報の第１の範囲の指定と、第２の画像情報の第２の範囲の指定と、当該第１の範囲と当該第２の範囲の関連付けを受け付けることができるとともに、当該第１の範囲又は当該第２の範囲の表示要求を受け付けると、当該第１の範囲又は当該第２の範囲とともに当該第２の範囲又は当該第１の範囲を表示制御することができる。
請求項７に係る発明によれば、予め入力された第１の利用者の通知内容とともに第１の利用者に関連付けられた画像情報を第２の利用者の端末上に表示制御することができる。

【図面の簡単な説明】

【0010】

【図1】図１は、実施の形態に係る情報処理システムの構成の一例を示す概略図である。

【図2】図２は、実施の形態に係る情報処理装置の構成例を示すブロック図である。

【図3】図３は、利用者情報の構成例を示す概略図である。

【図4】図４は、画像情報の構成例を示す概略図である。

【図5】図５は、範囲指定情報の構成例を示す概略図である。

【図6】図６は、通知情報の構成例を示す概略図である。

【図7】図７は、販売情報の構成例を示す概略図である。

【図8】図８は、関連付情報の構成例を示す概略図である。

【図9】図９（ａ）～（ｃ）は、各通知動作を共通して説明するための概略図である。

【図10】図１０は、基本動作及び基本通知動作を説明するためのフローチャートである。

【図11】図１１は、自由通知動作を説明するためのフローチャートである。

【図12】図１２は、売買動作を説明するためのフローチャートである。

【図13】図１３は、売買・配達要求動作を説明するためのフローチャートである。

【図14】図１４（ａ）及び（ｂ）は、関連付動作を説明するための概略図である。

【図15】図１５（ａ）及び（ｂ）は、関連付情報を伴う画像情報の表示動作例を示す概略図である。

【図16】図１６（ａ）～（ｃ）は、配達完了確認動作を説明するための概略図である。

【発明を実施するための形態】

【0011】

［実施の形態］
（情報処理システムの構成）
図１は、実施の形態に係る情報処理システムの構成の一例を示す概略図である。

【0012】

この情報処理システム５は、情報処理装置１と、端末２ａ、２ｂ、２ｃ…とをネットワーク４によって互いに通信可能に接続することで構成される。端末２ａ、２ｂ、２ｃ…は、それぞれ利用者３ａ、３ｂ、３ｃ…によって操作される。

【0013】

情報処理装置１は、サーバ型の情報処理装置であり、端末２ａ、２ｂ、２ｃ…の要求に応じて動作するものであって、本体内に情報を処理するための機能を有するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やフラッシュメモリ等の電子部品を備える。なお、情報処理装置１は、サーバに限らずクラウド上の資源を用いて動作するものであってもよい。

【0014】

端末２ａ、２ｂ、２ｃ…は、スマートフォン等の情報処理装置であって、本体内に情報を処理するための機能を有するＣＰＵやフラッシュメモリ、撮像素子等の電子部品を備える。なお、端末２ａ、２ｂ、２ｃ…は、スマートフォンに限らず情報を処理できるものであれば、パーソナルコンピューターやタブレット等、その形態は問わない。また、撮像素子を備えずに、デジタルカメラ、人工衛星等に搭載されたカメラ等の他の機器により撮像された画像情報を読み込むものであってもよい。

【0015】

ネットワーク４は、高速通信が可能な通信ネットワークであり、例えば、イントラネットやＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等の有線又は無線の通信網である。

【0016】

情報処理装置１は、一例として、端末２ａ、２ｂ、２ｃ…の要求に応じてコンテンツ情報としての画像情報のアップロードを受け付けて記憶部に格納し、格納した画像情報を表示制御するとともに、（範囲指定及び通知元である）利用者から表示した画像情報に対する範囲指定をテキストやアクション内容等の通知内容とともに受け付けて、受け付けた通知内容を画像情報のアップロード主である利用者又は画像情報の撮影対象であるオーナーである利用者に通知する。なお、当該操作は、複数のサーバで実行するものであってもよい。利用者３ａ、３ｂ、３ｃ…は、アップロード主、撮影対象のオーナー又は範囲指定及び通知元のいずれか又は複数の役割を担うことができる。

【0017】

なお、上記したコンテンツ情報としての画像情報は、静止画について以下説明するが、コンテンツ情報は、動画情報であってもよいし、音声情報であってもよい。動画情報の場合は、範囲として画像領域と時間範囲とが指定される。又は動画情報中の１フレームが指定されるものであってもよいし、１フレームとその画像領域が指定されるものであってもよい。また、音声情報の場合は、範囲として再生時間範囲が指定される。

【0018】

（情報処理装置の構成）
図２は、実施の形態に係る情報処理装置１の構成例を示すブロック図である。

【0019】

情報処理装置１は、ＣＰＵ等から構成され、各部を制御するとともに、各種のプログラムを実行する制御部１０と、フラッシュメモリ等の記憶媒体から構成され情報を記憶する記憶部１１と、ネットワークを介して外部と通信する通信部１２とを備える。

【0020】

制御部１０は、後述する情報通信プログラム１１０を実行することで、画像情報受付手段１００、範囲指定受付手段１０１、通知受付手段１０２、通知手段１０３、表示制御手段１０４、販売処理手段１０５及び関連付手段１０６等として機能する。

【0021】

画像情報受付手段１００は、端末２ａ、２ｂ、２ｃ…から画像情報のアップロードを受け付けて記憶部１１に画像情報１１２として格納する。

【0022】

範囲指定受付手段１０１は、端末２ａ、２ｂ、２ｃ…から画像情報１１２の範囲の指定を受け付けて範囲指定情報１１３として記憶部に格納する。

【0023】

通知受付手段１０２は、端末２ａ、２ｂ、２ｃ…から画像情報１１２及び範囲指定情報１１３と関連付けて通知内容を受け付けて通知情報１１４として格納する。

【0024】

通知手段１０３は、通知情報１１４を、画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者の端末２ａ、２ｂ、２ｃ…に通知する。

【0025】

表示制御手段１０４は、画像情報１１２を端末２ａ、２ｂ、２ｃ…に表示制御するとともに、通知情報１１４を端末２ａ、２ｂ、２ｃ…に表示制御し、その他、各手段１００－１０３、１０５の動作に伴い端末２ａ、２ｂ、２ｃ…に操作用画像や動作結果画像を表示制御する。

【0026】

販売処理手段１０５は、画像情報１１２の範囲指定情報１１３によって指定された対象が販売対象であった場合、利用者３ａ、３ｂ、３ｃ…間の販売対象の売買を処理し、処理中及び処理後の情報を販売情報１１５として記憶部１１に格納する。

【0027】

関連付手段１０６は、端末２ａ、２ｂ、２ｃ…の要求に応じて範囲指定情報１１３同士を関連のあるものとして関連付けて関連付情報１１６として記憶部１１に格納する。

【0028】

記憶部１１は、制御部１０を上述した各手段１００－１０５として動作させる情報通信プログラム１１０、利用者３ａ、３ｂ、３ｃ…の利用者名、位置情報、連絡先情報等を含む利用者情報１１１、画像情報１１２、範囲指定情報１１３、通知情報１１４及び販売情報１１５等を記憶する。

【0029】

図３は、利用者情報１１１の構成例を示す概略図である。

【0030】

利用者情報１１１は、利用者３ａ、３ｂ、３ｃ…の利用者名、位置情報、連絡先情報等を含む情報であって、利用者を識別するための利用者ＩＤと、利用者名と、当該利用者の現在又は固定の位置情報と、メールアドレスや電話番号、住所等の連絡先情報とを有する。

【0031】

図４は、画像情報１１２の構成例を示す概略図である。

【0032】

画像情報１１２は、画像内容及び付随情報を含む情報であって、画像情報を識別するための画像ＩＤと、具体的な画像データを示す画像内容と、当該画像情報が撮影された位置又は画像中の撮影対象の所在位置である位置情報と、当該画像情報をアップロードした利用者又は画像中の撮影対象の所有者等である利用者の利用者ＩＤである利用者情報とを有する。

【0033】

図５は、範囲指定情報１１３の構成例を示す概略図である。

【0034】

範囲指定情報１１３は、画像情報１１２において指定された範囲を示す情報であって、範囲指定情報を識別するための範囲ＩＤと、画像ＩＤと、画像中の範囲を指定する座標等の情報である範囲とを有する。

【0035】

図６は、通知情報１１４の構成例を示す概略図である。

【0036】

通知情報１１４は、通知の詳細を示す情報であって、通知情報を識別するための通知ＩＤと、自由記載されたテキスト又は選択されたテキスト等である通知内容と、範囲ＩＤと、画像ＩＤと、通知元の利用者ＩＤである通知元ＩＤとを有する。

【0037】

図７は、販売情報１１５の構成例を示す概略図である。

【0038】

販売情報１１５は、画像情報１１２中の対象が売買される場合にやりとりされる情報であって、販売情報を識別するための販売ＩＤと、画像ＩＤと、範囲ＩＤと、商品の価格と、購入者の利用者ＩＤである支払元と、販売者の利用者ＩＤである支払先と、配送者の利用者ＩＤ又は業者名である配送者とを有する。

【0039】

図８は、関連付情報１１６の構成例を示す概略図である。

【0040】

関連付情報１１６は、指定された範囲を関連付けるための情報であって、関連付情報を識別するための関連付ＩＤと、関連付けられた範囲指定情報１１３の複数の範囲ＩＤ（範囲ＩＤ１、範囲ＩＤ２…）とを有する。

【0041】

（情報処理装置の動作）
次に、本実施の形態の作用を、（１）基本動作、（２）基本通知動作、（３）自由通知動作、（４）売買動作、（５）売買・配達要求動作、（６）関連付動作、（７）配達完了確認動作に分けて説明する。

【0042】

（１）基本動作
図１０は、基本動作及び基本通知動作を説明するためのフローチャートである。

【0043】

まず、情報処理装置１の提供するサービスを利用する利用者３ａ、３ｂ、３ｃ…は、端末２ａ、２ｂ、２ｃ…を操作して、図３に示すように、自己の氏名、位置情報、連絡先等を利用者情報１１１として予め情報処理装置１に登録する。ここで位置情報は、自宅等の固定された位置の情報であってもよいし、端末２ａ、２ｂ、２ｃ…がリアルタイムに所在する位置の情報であってもよい。また、連絡先は、メールアドレス、電話番号に限らずサービス独自のＩＤ等であってもよい。

【0044】

次に、利用者３ｂは、端末２ｂを用いて撮影をし、撮影結果としての画像情報を情報処理装置１にアップロードすべく端末２ｂを操作する。端末２ｂは、利用者３ｂの利用者情報、撮影位置情報等とともに撮影した画像情報を情報処理装置１に送信する（Ｓ３００）。

【0045】

情報処理装置１の画像情報受付手段１００は、端末２ｂから画像情報のアップロードを受け付けて記憶部１１に画像情報１１２として格納する（Ｓ１００）。図４に示すように、アップロードされた画像情報は画像情報１１２の画像内容として、撮影位置情報は画像情報１１２の位置情報として、利用者３ｂの利用者情報は画像情報１１２の利用者情報の「Ｕｐｌｏａｄ」として記録される。なお、利用者３ｂが撮影対象物（商品、メニュー等）のオーナー（販売主、所有者等）である場合は、利用者３ｂの利用者情報は画像情報１１２の利用者情報の「Ｏｗｎｅｒ」としても記録される。また、アップロードした利用者と、撮影対象物のオーナーが異なっていてもよいし、オーナー又は対象物が存在しない画像情報の場合は、オーナーは空白でもよい。また、オーナーが存在するが、アップロードした利用者が立替購入の依頼を受け付けている場合についても、オーナーは空白でよい。また、位置情報は撮影位置に限らず、端末２ｂのアップロード時の位置情報であってもよい。

【0046】

（２）基本通知動作
図９（ａ）～（ｃ）は、各通知動作を共通して説明するための概略図である。

【0047】

次に、基本通知（「いいね」等の定型通知）を行うため利用者３ａは、端末２ａを用いて画像の閲覧を要求し（Ｓ２００）、情報処理装置１の表示制御手段１０４は閲覧要求を受け付けると端末２ａの表示部に画像情報１１２を表示制御する（Ｓ１０１）。表示制御手段１０４により表示される画像情報１１２は、例えば、図９（ａ）に示すような画面１０４ａである。

【0048】

次に、利用者３ａは、画面１０４ａを参照し、画像情報１１２に含まれる単一又は複数の対象から所望の対象を選択するため、図９（ａ）に示すように、始点１０１ａ_１の位置に対応する端末２ａのタッチパネル位置にタッチした後、終点１０１ａ２までドラッグすることで、図９（ｂ）に示すように、選択枠１０１ｂの範囲を選択する（Ｓ２０１）。端末２ａは、選択枠１０１ｂに対応する選択範囲の座標情報等を情報処理装置１に送信する。

【0049】

なお、選択枠１０１ｂは、１つの画像情報１１２に対して複数選択するものであってもよい。また、複数選択する場合、同時に複数選択してもよいし、異なるタイミングで複数選択してもよい。また、１つの選択枠１０１ｂ内に複数の対象を含めるようにしてもよい。複数の対象は、セット化された商品であってもよいし、単一の商品を複数種類含むものであってもよい。

【0050】

また、選択枠１０１ｂは、アップロードした利用者や、オーナーである利用者が選択するものであってもよい。

【0051】

また、選択枠１０１ｂは、利用者３ａによって選択される他、画像認識により認識された対象を自動で選択し、選択枠の候補として提示するものであってもよい。また、アップロードする利用者がアップロード対象の写真を撮影する際に、画像認識により認識された対象を自動で選択し、選択枠の候補として提示するものであってもよい。

【0052】

次に、情報処理装置１の範囲指定受付手段１０１は、端末２ａから範囲指定を受け付けて受け付けた範囲に関する情報を範囲指定情報１１３として記憶部１１に格納する。次に、情報処理装置１の表示制御手段１０４は、図９（ｂ）に示すように、選択枠１０１ｂに対する操作項目１０２ｂを表示する。操作項目１０２ｂは、例えば、「いいね」を伝えるための項目１０２ｂ_１、コメントを入力するための項目１０２ｂ_２、価格をきくための項目１０２ｂ_３、購入するための項目１０２ｂ_４、複数商品をまとめて決済するカートに入れるための項目１０２ｂ_５、他の画像と関連付けるための項目１０２ｂ_６を有する。なお、複数の選択範囲をまとめて決済する場合だけでなく、「いいね」を伝える際、コメントを入力する際、価格を聞く際に複数の選択範囲をまとめるためにカートに該当する一時的な保持枠を設けてもよい。

【0053】

利用者３ａは、操作項目１０２ｂのうち、例えば、「いいね」を伝えるために項目１０２ｂ_１を操作する。端末２ａは、項目１０２ｂ_１が操作された旨を情報処理装置１に送信する（Ｓ２０２）。また、利用者３ａは、操作項目１０２ｂから同時に複数の項目（「いいね」とコメント等）を操作してもよく、この場合、端末２ａは、複数の項目が操作された旨を情報処理装置１に送信する。

【0054】

情報処理装置１の通知受付手段１０２は、端末２ａから通知内容を受け付けて通知情報１１４として記憶部１１に格納する（Ｓ１０３）。通知情報１１４は、画像ＩＤに対する範囲ＩＤと、通知元である利用者３ａの利用者ＩＤである通知元ＩＤと、通知内容「いいね」とが格納される。

【0055】

次に、情報処理装置１の通知手段１０３は、通知情報１１４に基づいて画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者３ｂの端末２ｂに通知して通知処理を実行する（Ｓ１０４）。なお、アップロードした利用者又は撮影対象の所有者のいずれに通知するかは、通知内容に応じて定めるものであってもよいし、通知を行う利用者３ａが選択するものであってもよいし、両者に通知するものであってもよい。

【0056】

端末２ｂは、情報処理装置１から通知内容を受け付けて、図９（ｃ）に示すように、表示画面１０４ｃに選択範囲１０１ｃ_１とともにメッセージ１０１ｃ_２を表示する（Ｓ３０１）。

【0057】

端末２ｂの利用者３ｂは、当該メッセージ１０１ｃ_２を閲覧し、選択範囲１０１ｃ_１及びメッセージ１０１ｃ_２の内容を確認する。なお、利用者３ｂは、選択範囲１０１ｃ_１の画像だけを閲覧して元の画像がわからない場合は、当該選択範囲１０１ｃ_１を検索キーとして元画像である画像情報１１２と、選択範囲の位置の検索要求を端末２ｂから情報処理装置１に送信してもよい。情報処理装置１は、当該要求に応じて元画像である画像情報１１２と選択範囲の位置を端末２ｂに応答する。

【0058】

（３）自由通知動作
図１１は、自由通知動作を説明するためのフローチャートである。

【0059】

自由通知（コメントの通知）を行うため、利用者３ａは、端末２ａを用いて画像の閲覧を要求し（Ｓ２１０）、情報処理装置１の表示制御手段１０４は閲覧要求を受け付けると端末２ａの表示部に画像情報１１２を表示制御する（Ｓ１１１）。表示制御手段１０４により表示される画像情報１１２は、例えば、図９（ａ）に示すような画面１０４ａである。

【0060】

次に、利用者３ａは、画面１０４ａを参照し、画像情報１１２に含まれる単一又は複数の対象から所望の対象を選択するため、図９（ａ）に示すように、始点１０１ａ_１の位置に対応する端末２ａのタッチパネル位置にタッチした後、終点１０１ａ_２までドラッグすることで、図９（ｂ）に示すように、選択枠１０１ｂの範囲を選択する（Ｓ２１１）。端末２ａは、選択枠１０１ｂに対応する選択範囲の座標情報等を情報処理装置１に送信する。

【0061】

次に、情報処理装置１の範囲指定受付手段１０１は、端末２ａから範囲指定を受け付けて受け付けた範囲に関する情報を範囲指定情報１１３として記憶部１１に格納する。次に、情報処理装置１の表示制御手段１０４は、図９（ｂ）に示すように、選択枠１０１ｂに対する操作項目１０２ｂを表示する。

【0062】

利用者３ａは、操作項目１０２ｂのうち、例えば、「コメント」を入力するために項目１０２ｂ_２を操作する。端末２ａは、項目１０２ｂ_２が操作された旨を情報処理装置１に送信する（Ｓ２１２）。

【0063】

情報処理装置１の通知受付手段１０２は、端末２ａから通知内容を受け付けて通知情報１１４として記憶部１１に格納する（Ｓ１１３）。通知情報１１４は、画像ＩＤに対する範囲ＩＤと、通知元である利用者３ａの利用者ＩＤである通知元ＩＤと、通知内容として文字列であるテキストデータとが格納される。

【0064】

次に、情報処理装置１の通知手段１０３は、通知情報１１４に基づいて画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者３ｂの端末２ｂに通知して通知処理を実行する（Ｓ１１４）。

【0065】

端末２ｂは、情報処理装置１から通知内容を受け付けて、表示画面に選択範囲とともにメッセージを表示する（Ｓ３１１）。

【0066】

（４）売買動作
図１２は、売買動作を説明するためのフローチャートである。

【0067】

なお、Ｓ１２０～Ｓ１２２、Ｓ２２０、Ｓ２２１、Ｓ３２０の動作については、図１０及び図１１の動作と共通の内容であるため説明を省略する。

【0068】

利用者３ａは、操作項目１０２ｂのうち、例えば、「価格をきく」ために項目１０２ｂ_３を操作する。端末２ａは、項目１０２ｂ_３が操作された旨を情報処理装置１に送信する（Ｓ２２２）。

【0069】

情報処理装置１の通知受付手段１０２は、端末２ａから通知内容を受け付けて通知情報１１４として記憶部１１に格納する（Ｓ１２３）。通知情報１１４は、図６に示すように、画像ＩＤに対する範囲ＩＤと、通知元である利用者３ａの利用者ＩＤである通知元ＩＤと、通知内容として「この商品の価格を教えてください」といったテキストデータとが格納される。

【0070】

次に、情報処理装置１の通知手段１０３は、通知情報１１４に基づいて画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者３ｂの端末２ｂに通知して通知処理を実行する（Ｓ１２４）。

【0071】

端末２ｂは、情報処理装置１から通知内容を受け付けて、表示画面に選択範囲とともに「この商品の価格を教えてください」をメッセージとして表示する（Ｓ３２１）。

【0072】

端末２ｂの利用者３ｂは、表示画面のメッセージを確認し、端末２ｂの操作部を介して価格を入力する（Ｓ３２２）。端末２ｂは入力された価格を情報処理装置１に送信する。

【0073】

情報処理装置１の通知受付手段１０２は、端末２ｂから通知内容を受け付けて通知情報１１４として記憶部１１に格納する（Ｓ１２５）。通知情報１１４は、図６に示すように、画像ＩＤに対する範囲ＩＤと、通知元である利用者３ｂの利用者ＩＤである通知元ＩＤと、通知内容として「１，２００円です」といったテキストデータとが格納される。

【0074】

次に、情報処理装置１の通知手段１０３は、通知情報１１４に基づいて通知先である利用者３ａの端末２ａに通知して通知処理を実行する（Ｓ１２６）。

【0075】

端末２ａは、情報処理装置１から通知内容を受け付けて、表示画面に選択範囲とともに「１，２００円です」をメッセージとして表示する（Ｓ２２３）。

【0076】

端末２ａの利用者３ａは、表示画面のメッセージを確認し、端末２ａの操作部を介して注文（売買契約の申し出を）するために項目１０２ｂ_４を選択する（Ｓ２２４）。端末２ａは注文通知を情報処理装置１に送信する。

【0077】

情報処理装置１の通知受付手段１０２は、端末２ａから注文通知を受け付けて通知情報１１４として記憶部１１に格納する（Ｓ１２７）。通知情報１１４は、図６に示すように、画像ＩＤに対する範囲ＩＤと、通知元である利用者３ａの利用者ＩＤである通知元ＩＤと、通知内容として「ＴＡＲＯさんがこの商品を注文しました。配達可能な場合はＹｅｓを…」といったテキストデータとが格納される。

【0078】

次に、情報処理装置１の通知手段１０３は、通知情報１１４に基づいて通知先である利用者３ｂの端末２ｂに通知して通知処理を実行する（Ｓ１２８）。

【0079】

端末２ｂは、情報処理装置１から通知内容を受け付けて、表示画面に選択範囲とともに「ＴＡＲＯさんがこの商品を注文しました。配達可能な場合はＹｅｓを…」をメッセージとして表示する（Ｓ３２３）。

【0080】

端末２ｂの利用者３ｂは、表示画面のメッセージを確認し、商品を販売する場合、販売処理を要求するために端末２ｂの操作部を操作する（Ｓ３２４）。端末２ｂは販売処理要求を情報処理装置１に送信する。

【0081】

情報処理装置１の販売処理手段１０５は、端末２ｂから販売処理要求を受け付けて記憶部１１の販売情報１１５に、図７に示すように、新たに生成した販売ＩＤ、閲覧した画像ＩＤ、選択した範囲の範囲ＩＤ、入力された価格、購入者である支払元、販売者である支払先、配送者がいる場合は配送者を入力し、当該販売情報１１５に基づいて商品の配送、支払元及び支払先に対する決済又は決済の補助等を行い、販売処理を実行する（Ｓ１２９）。

【0082】

次に、情報処理装置１の販売処理手段１０５は、販売処理を完了すると購入者である利用者３ａの端末２ａに注文の完了を通知する（Ｓ１３０）。

【0083】

端末２ａは、情報処理装置１から注文の完了を受け付けて、表示画面に選択範囲とともに注文完了をメッセージとして表示する。

【0084】

端末２ａの利用者３ａは、表示画面のメッセージを確認し、商品を利用者３ｂの元まで取りに行き、又は任意の配送手段を介して商品を配送してもらい、商品を受け取る（Ｓ２２５）。

【0085】

また、アップロードした利用者が立替購入の依頼を受け付けている場合については、立替購入の依頼を受け付けている旨の通知内容が立替購入を要求する利用者の端末の表示部に表示され、当該利用者は売買契約の申し出ではなく、立替購入をアップロードした利用者に依頼することとなる。また、この場合、立替購入の依頼を受け付けているアップロードした利用者が配達も行ってもよい。

【0086】

（５）売買・配達要求動作
図１３は、売買・配達要求動作を説明するためのフローチャートである。

【0087】

なお、Ｓ１４０～Ｓ１４６、Ｓ２４０～Ｓ２４３、Ｓ３４０～Ｓ３４２の動作については、図１２の動作と共通の内容であるため説明を省略する。

【0088】

次に、情報処理装置１の販売処理手段１０５は、販売者の位置情報、商品が販売者と異なる位置にある場合は商品の位置情報を配送元とし、配送元の位置情報に基づいて配送可能な利用者を検索し、例えば、利用者３ｃの端末２ｃに配送要求を送信する（Ｓ１４７）。なお、配送要求は複数の端末に同時に送信してもよい。

【0089】

端末２ｃは、情報処理装置１からの配送要求を受信し、配送の内容を表示部に表示する（Ｓ４４０）。利用者３ｃは配送内容を確認し、配達が可能であれば配送要求を承諾するために端末２ｃを操作する。端末２ｃは、配送要求の承諾を情報処理装置１に送信する（Ｓ４４１）。

【0090】

情報処理装置１の販売処理手段１０５は、端末２ｃから配送要求の承諾を受信すると配送者を確定し（Ｓ１４８）、配送元、配送先、経路等の情報を配送内容として端末２ｃに通知する（Ｓ１４９）。

【0091】

端末２ｃは、情報処理装置１からの配送内容を受信し、配送内容を表示部に表示する（Ｓ４４２）。利用者３ｃは配送内容を確認し、配達を実行する（Ｓ４４３）。利用者３ａは商品を受け取る（Ｓ２４４）。

【0092】

なお、情報処理装置１の販売処理手段１０５が配送者を検索し、手配する例を示したが、購入者である利用者３ａ又は販売者である利用者３ｂがそれぞれ端末２ａ又は端末２ｂを用いて近くにいる利用者を検索し、配送を手配するようにしてもよい。また、購入処理の後に配送者を手配する例を示したが、配送者を手配してから購入処理を進めるようにしてもよい。

【0093】

また、上記動作では売買及びその配送手続きについて説明したが、売買に限らず有償又は無償の貸与であってもよいし、無償の譲渡であってもよい。さらには、利用者が互いに画像情報を送り合って物々交換を行うものであってもよい。

【0094】

（６）関連付動作
複数の画像情報１１２が関連するものである場合、情報処理装置１は、利用者３ａ、３ｂ、３ｃの操作に応じて当該関連する複数の画像情報１１２を関連付ける。

【0095】

図１４（ａ）及び（ｂ）は、関連付動作を説明するための概略図である。

【0096】

図１４（ａ）に示す画面１０４ｄは、例えば、ある店舗のメニューを撮影した写真であって、利用者３ａの操作する端末２ａに表示されたものである。利用者３ａが端末２ａを操作し、選択範囲１０１ｄを選択すると、「（２）基本通知動作」、「（３）自由通知動作」と同様に、画面１０４ｄに選択項目１０２ｄが表示される。

【0097】

利用者３ａは、選択範囲１０１ｄに含まれる文字「ブレンドコーヒー ６００円」に対応する実際のブレンドコーヒーの画像情報を所有している場合、画面１０４ｅの選択項目１０２ｄのうち「他の画像と関連付ける」ための項目１０２ｄ_６を選択する。端末２ａは、利用者３ａの操作に応じて関連付ける画像情報を選択するための画面を表示し（図示せず）、当該画面において利用者の画像情報の選択操作を受け付け、当該画像情報を図１４（ｄ）に示すように画面１０４ｅとして表示する。なお、画像情報は、利用者の所有する画像に限らず情報処理装置１の画像情報１１２であってもよい。

【0098】

利用者３ａは、画面１０４ｅを参照し、ブレンドコーヒーに該当する選択範囲１０１ｅを選択操作する。端末２ａは、選択操作を受け付けると選択範囲１０１ｅに対して「この範囲を関連付ける」ための選択項目１０２ｅを表示する。利用者３ａは、選択範囲１０１ｄと選択範囲１０１ｅとを関連付けるため選択項目１０２ｅを選択操作する。端末２ａは、利用者３ａ所有の画像情報を情報処理装置１に送信するとともに、利用者３ａの選択操作に応じて選択範囲１０１ｄと選択範囲１０１ｅとを関連付けるよう情報処理装置１に要求する。

【0099】

情報処理装置１の関連付手段１０６は、端末２ａから関連付けの要求を受け付けると関連付ける選択範囲１０１ｄの範囲ＩＤと選択範囲１０１ｅの範囲ＩＤとを関連付けて関連付情報１１６に記録する。関連付情報１１６は、図８に示すように、関連付けられた複数の範囲ＩＤを関連付ＩＤで管理する。

【0100】

また、関連付手段１０６は、動作の変形例として、単一の画像において選択された複数の選択範囲を関連付けてもよい。例えば、店舗の棚に商品が陳列されており、商品とともにバーコードを含む値札が付されている状態において、当該棚全体を撮影した画像から複数の商品と複数のバーコードに該当する範囲を選択範囲として商品とバーコードとをそれぞれ関連付けて関連付情報１１６として記録してもよい。当該関連付けにより、例えば、ある利用者が上記画像からある商品に該当する範囲を選択して購入するやりとりが行われた場合、販売処理手段１０５は、商品に関連付けられたバーコードの選択範囲を取得し、当該バーコードを読み取り処理して、バーコードにより商品在庫を管理する販売システムにアクセスし、販売個数に応じて在庫を減ずる処理を行うことができる。なお、これは一例であり、単一又は複数の画像から自動で又は操作内容に応じて選択範囲を関連付け、関連付けられた選択範囲に含まれるコード、ＵＲＬ等に応じて他のシステムにアクセスして撮影対象の管理を行ってもよい。また、管理対象は在庫に限らず、ポイントシステムや電子マネー、仮想通過、クレジットカード決済等の管理を行うものであってもよい。

【0101】

図１５（ａ）及び（ｂ）は、関連付情報を伴う画像情報の表示動作例を示す概略図である。

【0102】

図１５（ａ）に示す画面１０４ｆは、例えば、利用者３ｂの操作する端末２ｂに表示されたものである。利用者３ｂが端末２ｂを操作し、選択範囲１０１ｆを選択し、当該選択範囲１０１ｆに異なる選択範囲が存在し、さらに関連付情報１１６に当該異なる選択範囲に他の選択範囲が関連付けられている場合、画面１０４ｆの選択項目１０２ｆに、通常の項目１０２ｆ_２…に加えて項目１０２ｆ_１が表示され、関連付けられた選択範囲の存在が知らされる。

【0103】

利用者３ｂは、選択範囲１０１ｆに関連付けられた他の選択範囲の確認を所望する場合、画面１０４ｆの選択項目１０２ｆのうち「この範囲に関連付けられた画像があります」の項目１０２ｆ_１を選択する。端末２ａは、利用者３ｂの選択操作を受け付け、関連付けられた画像を表示するよう情報処理装置１に要求する。

【0104】

情報処理装置１の表示制御手段１０４は、端末２ｂから関連付けの要求を受け付けると関連付情報１１６を参照し、関連付けられた範囲ＩＤの選択範囲を端末２ｂに表示制御する。端末２ｂは、表示制御に応じて選択範囲を表示する（図示せず。）。

【0105】

また、情報処理装置１の表示制御手段１０４は、他の表示方法の例として、図１５（ｂ）に示すように、地図を含む画面１０４ｇを端末２ｂの表示画面に表示制御し、例えば、選択範囲（図１４（ａ）の画面１０４ｄ）の画像情報に位置情報が含まれていれば対応する位置１０２ｇ_１に当該選択範囲の画像１０２ｇ_３を表示するとともに、当該選択範囲（図１４（ａ）の画面１０４ｄ）の画像に関連付情報１１６によって関連付けられた他の選択範囲（図１４（ｂ）の選択範囲１０１ｅ）の画像を表示する。なお、選択範囲（図１４（ｂ）の選択範囲１０１ｅ）の画像に位置情報が含まれていない場合でも表示されるものとする。

【0106】

（７）配達完了確認動作
ステップＳ４４３において、利用者３ｃが配達完了した際、以降に示す動作を行う。

【0107】

図１６（ａ）～（ｃ）は、配達完了確認動作を説明するための概略図である。

【0108】

利用者３ｃは、利用者３ａに直接配達物を渡さずに玄関前等に置く場合、図１６（ａ）に示すように、端末２ｃを操作することで配達完了を通知するための画面１０４ｈを表示部に表示させ、配達したことを証明するために配達物と利用者３ａが予め登録した目印（例えば、人形）を端末２ｃの画面１０４ｈを参照しつつ撮影するとともに、端末２ｃを操作して当該目印を選択枠１０１ｈで選択する。なお、目印は、配達依頼の際に予め端末２ｃに通知されているものとし、利用者３ｃに知らされているものとする。

【0109】

端末２ｃは、目印が選択枠１０１ｈで選択されると「配達を通知」するための項目１０２ｈ１を含む選択項目１０２ｈを表示し、利用者３ｃにより項目１０２ｈ１が選択操作されると、当該選択枠１０１ｈの選択範囲の画像情報とともに情報処理装置１に確認要求を行う。

【0110】

情報処理装置１の販売処理手段１０５は、端末２ｃから画像情報とともに確認要求を受け付けると、図１６（ｂ）に示すように端末２ｃから受け付けた選択範囲の画像情報１０５ｈ_１と、利用者３ａによって予め登録された登録画像１０５ｈ_２とを比較し、目印が同一のものであるかどうか画像情報の比較による画像認識を行って確認する。また、確認方法は、三次元画像情報（深度情報）の比較による画像認識、動画情報の比較による画像認識等の技術及び音声データ、磁気センサー等のセンサーデータ、ＧＰＳデータ、姿勢データ等の追加情報を組み合わせることにより信頼性を向上させて行うものであってもよい。

【0111】

同一であると確認された場合、情報処理装置１の販売処理手段１０５は、端末２ａに配達の完了を通知し、図１６（ｃ）に示すように、端末２ａの表示部に配達が完了したことを示す画面１０４ｉを表示制御する。画面１０４ｉは、端末２ｃで撮影された画像１０４ｉ_１と、配達を完了したことを示すメッセージ及び配達完了日時１０４ｉ_２とを有する。

【0112】

なお、商品を利用者３ｃに渡す前に、端末２ｂの利用者３ｂが、商品が含まれる写真を撮影し、利用者３ｃが商品を受け取った際に撮影する写真との間で上記画像による確認を行ってもよい。この確認により、利用者３ｂの用意した商品と、利用者３ｃが受け取った商品とが同一であることを確認できる。また、これらの写真を利用者３ａにも共有することで、利用者３ａが受け取る商品との同一性も確認できるようになる。また、同一商品を識別するために撮影対象又はその包装に数字やコード等の識別手段を設けるようにしてもよい。

【0113】

また、商品の販売に限らず商品を貸し出してもよく、当該商品の貸し出し開始の時刻を、例えば、利用者３ｃが配達完了の際に撮影するタイミングとしてもよいし、貸し出し終了の時刻を、例えば、利用者３ａが商品の返送を利用者３ｃに依頼するとした場合、利用者３ｃが利用者３ａから商品受け取りの際に撮影するタイミングとしてもよい。これらのタイミングを管理することで、貸し出し期間を定義することができ、貸し出し期間に基づく貸し出し料金の計算等が可能となる。

【0114】

（実施の形態の効果）
上記した実施の形態によれば、例えば、利用者３ａに関連付けられた画像情報１１２を利用者３ｂの端末２ｂ上に表示制御し、利用者３ｂの端末２ｂにおいて画像情報１１２の範囲の指定及び当該範囲に対する通知内容を受け付けると、当該範囲及び当該通知内容を通知情報１１４として受け付け、通知情報１１４に基づいて利用者３ａの端末２ａに通知するようにしたため、コンテンツ情報中のインデックス化されていない対象に関連付けて情報を通知することができる。

【0115】

また、画像情報１１２の利用者情報としてアップロードした利用者と、対象物のオーナーとを設けたため、通知の内容に応じてアップロードした利用者、又は対象物のオーナーに対して通知を行うことができる。

【0116】

また、情報の通知だけでなく、決済を伴う売買を処理可能としたため、販売用の（商品を単体で撮影した）商品写真、テキストによる商品情報、テキストによる価格等のこれまで販売に必要とされてきた情報を予め用意する必要がなくなる。

【0117】

また、関連付手段１０６により範囲同士を関連付けるとともに、表示制御手段１０４により関連付けられた範囲を同時に表示するようにしたため、利用者の指定動作により、指定したもの以外の情報を当該利用者に提示することができる。

【0118】

また、画像に対する範囲指定を始点から終点に対するドラッグ動作のみで行うようにしたため、さらに撮影前、撮影と同時、撮影後に指定可能としたため、指定を単一動作で行うことができ、指定に要する工程、時間を短縮することができる。

【0119】

［他の実施の形態］
なお、本発明は、上記実施の形態に限定されず、本発明の趣旨を逸脱しない範囲で種々な変形が可能である。

【0120】

範囲指定受付手段１０１は、撮影済みの画像情報に対して範囲の指定を受け付けるだけでなく、撮影者である利用者が撮影中のプレビュー画像に対してタッチパネルを介して範囲の指定を受け付けてもよい。つまり、撮像による画像生成より前に範囲指定を受け付けるものであってもよい。さらに、例えば、範囲指定と同時に撮像を行うものであってもよい。つまり、撮像による画像生成と、範囲指定を同時に行うものであってもよい。さらに、範囲指定はプレビュー画像に対してタッチパネルを介して行うもののみならず、撮影中の実際の対象物とカメラとの間で撮影者の手によりジェスチャーを行って、当該ジェスチャーを画像処理により認識して行うものであってもよい。また、他の利用者が撮影中の動画であって配信中のもの、例えば、ライブ配信中の動画に対してタッチパネルを介した利用者からの範囲の指定を受け付けてもよい。さらに受け付けた当該範囲の指定を用いて、利用者から当該他の利用者に対して任意の指示、例えば、進む方向の指示や購入の指示等、を行うものであってもよい。なお、ライブ配信中の動画の撮影は、他の利用者が所有するスマートフォン等で行ってもよいし、カメラ、撮影機器を用いて行うものであってもよい。

【0121】

また、範囲指定受付手段１０１は、範囲の始点から終点へのドラッグ動作を例に挙げて説明したが、これに限るものではなく、自由描画による範囲境界指定や、円形又は楕円形の範囲の中心と半径をドラッグ動作により受け付けるものであってもよいし、多角形の始点と終点又は中心と最大（最小）外形をドラッグ動作により受け付けるものであってもよい。さらに、ドラッグ動作以外の操作、例えば、複数回のタップやピンチアウト等により受け付けるものであってもよい。

【0122】

また、通知手段１０３は、通知情報１１４を、画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者に通知しない（情報として保管する）又は即座には通知しない（通知情報１１４を情報処理装置１が一旦保管して定期的に通知する）構成としてもよい。例えば、通知受付手段１０２が予め定めたルールによって受け付けた通知情報１１４を、予め定めた期間保管して、内容を集計してから統計情報を利用者に通知してもよい。また、通知しない場合は、利用者から通知情報１１４にアクセスするようにしてもよい。具体的には以下の例が挙げられる。

【0123】

例えば、アンケートとそのアンケートの選択項目（「○」又は「×」や、１から１０段階の程度を表す数字等）が記載された画像を画像情報１１２として用意した場合に、範囲指定受付手段１０１が当該画像情報１１２に対してアンケートの選択項目に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、単数又は複数の利用者からの回答である範囲指定情報１１３からアンケートの選択項目を集計し、集計した内容を通知情報１１４としてもよい。集計した内容は匿名にしてもよいし、利用者のＩＤ等と関連付けてもよい。

【0124】

また、例えば、貸スタジオや貸会議室の予約のために、各スタジオや各会議室に対して日時がマス目状に描かれた画像を画像情報１１２として用意した場合に、範囲指定受付手段１０１が当該画像情報１１２のマス目に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、単数又は複数の利用者からの範囲指定情報１１３から各スタジオや各会議室の予約を受け付け、受け付けた予約の内容を通知情報１１４としてもよい。

【0125】

また、例えば、ライブの座席指定やキャンプ場のエリアの予約のために、座席表やエリアを表した画像を画像情報１１２として用意した場合に、範囲指定受付手段１０１が当該画像情報１１２の座席や自由なエリア指定に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、単数又は複数の利用者からの範囲指定情報１１３から座席又は自由なエリアの予約を受け付け、受け付けた予約の内容を通知情報１１４としてもよい。また、座席指定の場合は、「指定したエリアのうち２席」のように、指定したエリア中から任意に選択されるものであってもよい。また、エリア指定は２次元だけでなく３次元以上に対する指定であってもよい。

【0126】

また、通知手段１０３は、通知情報１１４を、画像情報１１２をアップロードした利用者又は撮影対象の所有者である利用者ではなく、ドローン、アクチュエータ、ロボット等の装置に動作指示として送信する構成としてもよい。また、ＰＣやサーバにプログラム実行指示として送信する構成としてもよい。具体的には以下の例が挙げられる。

【0127】

例えば、テレビのリモコン、家の中の電気スイッチ、プリンターのボタン、ＰＣのキーボード等の写真を画像情報として用意した場合に（当該画像情報はドローンやロボット等により撮影されて用意されるものであってもよい。）、範囲指定受付手段１０１が当該画像情報１１２のリモコンのボタン、電気スイッチ、プリンターのボタン、ＰＣのキーボード等に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、範囲指定情報１１３から指定されたスイッチ、ボタン等の押下操作、回転操作、引込操作等（別途指定してもよいし、予め定められた操作であってもよい。）を受け付け、受け付けた操作内容を通知情報１１４としてドローン、アクチュエータ、ロボット等の装置に動作指示として送信してもよい。また、スイッチ等の操作に限らず画像情報中で指定された位置への移動を動作指示として送信してもよい。

【0128】

例えば、テレビのリモコン、家の中の電気スイッチ、プリンターのボタン、ＰＣのキーボード等の写真を画像情報として用意した場合に、範囲指定受付手段１０１が当該画像情報１１２のリモコンのボタン、電気スイッチ、プリンターのボタン、ＰＣのキーボード等に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、範囲指定情報１１３から指定されたスイッチ、ボタン等の操作の結果出力される赤外線や電磁波等の無線信号の発信を受け付け、受け付けた操作内容を通知情報１１４として赤外線エミュレータ、無線信号エミュレータ等の無線通信模擬装置に動作指示として送信してもよい（エミュレータには画像と予め発信信号を対応付けて学習させておくものとする。）。これにより、画像情報中のボタン等を操作した場合と同様の結果（テレビの操作、家の中の電気の調整、プリンターのキャンセル、ＰＣのスリープ等）を得られる。

【0129】

また、例えば、ＰＣやスマートフォンの画面のうち、操作実行用ボタン（ＧＵＩ；Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）が表示された画面のスクリーンショットを画像情報として用意した場合に、範囲指定受付手段１０１が当該画像情報１１２の操作実行用ボタン等に対して範囲指定を受け付けて範囲指定情報１１３とし、通知受付手段１０２は、範囲指定情報１１３から指定された操作実行用ボタン等の押下操作を受け付け、受け付けた操作内容を通知情報１１４として該当するＰＣやスマートフォン又は当該画面に対応するウェブサイトを管理するサーバ等（画像情報１１２の利用者情報として登録しておく。）に動作指示として送信してもよい。また、指示対象のウェブサイトが利用者情報として登録されていない場合であっても、画像検索を行って特定するようにしてもよい。

【0130】

上記実施の形態では制御部１０の各手段１００～１０６の機能をプログラムで実現したが、各手段の全て又は一部をＡＳＩＣ等のハードウエアによって実現してもよい。また、上記実施の形態で用いたプログラムをＣＤ－ＲＯＭ等の記録媒体に記憶して提供することもできる。また、上記実施の形態で説明した上記ステップの入れ替え、削除、追加等は本発明の要旨を変更しない範囲内で可能である。

【産業上の利用可能性】

【0131】

インデックス化されていない対象について情報を通知する情報通信プログラム及び情報処理装置を提供する。

【符号の説明】

【0132】

１ ：情報処理装置
２ａ～２ｃ ：端末
３ａ～３ｃ ：利用者
４ ：ネットワーク
５ ：情報処理システム
１０ ：制御部
１１ ：記憶部
１２ ：通信部
１００ ：画像情報受付手段
１０１ ：範囲指定受付手段
１０２ ：通知受付手段
１０３ ：通知手段
１０４ ：表示制御手段
１０５ ：販売処理手段
１０６ ：関連付手段
１１０ ：情報通信プログラム
１１１ ：利用者情報
１１２ ：画像情報
１１３ ：範囲指定情報
１１４ ：通知情報
１１５ ：販売情報
１１６ ：関連付情報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】