特許 5904887 メッセージ送信システム、メッセージ送信方法、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5904887

(24)【登録日】2016年3月25日

(45)【発行日】2016年4月20日

(54)【発明の名称】メッセージ送信システム、メッセージ送信方法、プログラム

(51)【国際特許分類】

   G06F 13/00 20060101AFI20160407BHJP

【ＦＩ】

   G06F13/00 601A

【請求項の数】5

【全頁数】13

(21)【出願番号】特願2012-144683(P2012-144683)

(22)【出願日】2012年6月27日

(65)【公開番号】特開2014-10502(P2014-10502A)

(43)【公開日】2014年1月20日

【審査請求日】2014年3月3日

(73)【特許権者】

【識別番号】500521522

【氏名又は名称】株式会社オプティム

(74)【代理人】

【識別番号】100177220

【弁理士】

【氏名又は名称】小木 智彦

(72)【発明者】

【氏名】菅谷 俊二

【審査官】 田上 隆一

(56)【参考文献】

【文献】 特開２００７−１０２６８３（ＪＰ，Ａ）

【文献】 国際公開第２０１０／１０７０７２（ＷＯ，Ａ１）

【文献】 特開２０１１−０４０８６５（ＪＰ，Ａ）

【文献】 特開２０１０−０８１４８０（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１１／００４３６４３（ＵＳ，Ａ１）

【文献】 石黒 祥生，インタラクションの理解および基盤・応用技術，情報処理学会論文誌 論文誌ジャーナル，日本，一般社団法人情報処理学会，２０１２年 ４月１５日，Ｖｏｌ．５３ Ｎｏ．４，ｐ.１３２８〜１３３７

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ １３／００

(57)【特許請求の範囲】

【請求項1】

ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムであって、
前記ユーザの視野を画像として取得する視野画像取得手段を少なくとも備える視野画像取得装置と、
前記視野画像取得手段によって取得した視野画像を解析し、人物の特定に係る特徴量を抽出する特徴量抽出手段と、
前記特徴量抽出手段によって抽出した特徴量から、前記視野画像内の人物を特定する人物特定手段と、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付する視野画像添付手段と、
前記人物特定手段によって特定した人物に対して、前記電子メッセージを送信するメッセージ送信手段と、
を備えるメッセージ送信システム。

【請求項2】

前記人物特定手段によって特定した人物に対して、前記視野画像取得手段で取得した視野画像の一部または全部を送信する視野画像送信手段と、
を備える請求項１に記載のメッセージ送信システム。

【請求項3】

前記人物特定手段によって特定した人物の、前記視野画像内における位置を算出する人物像位置算出手段と、
前記人物像位置算出手段によって算出した位置を基準に、前記特定した人物に関する情報を、前記ユーザの視野内に表示する人物情報表示手段と、
を備える請求項１または請求項２のいずれか一項に記載のメッセージ送信システム。

【請求項4】

ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムが実行するメッセージ送信方法であって、
視野画像取得装置が前記ユーザの視野を画像として取得するステップと、
前記取得した視野画像を解析し、人物の特定に係る特徴量を抽出するステップと、
前記抽出した特徴量から、前記視野画像内の人物を特定するステップと、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付するステップと、
前記特定した人物に対して、前記電子メッセージを送信するステップと、
を備えるメッセージ送信方法。

【請求項5】

ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムに、
視野画像取得装置に、
前記ユーザの視野を画像として取得するステップ、
を実行させ、
前記取得した視野画像を解析し、人物の特定に係る特徴量を抽出するステップ、
前記抽出した特徴量から、前記視野画像内の人物を特定するステップ、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付するステップ、
前記特定した人物に対して、前記電子メッセージを送信するステップ、
を実行させるためのメッセージ送信システム用プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システム、メッセージ送信方法、及び、プログラムに関する。

【背景技術】

【0002】

今日、ユーザ間における意思疎通を行う手段として、電子メールやインスタント・メッセンジャー等の電子メッセージが盛んになってきている。テキストデータや画像データで構成される電子メッセージは、従来の音声によるやり取りと比較して、雑然とした場所でも正確な入力や閲覧が可能であり、特に移動中等の街中における利用において優れている。

【0003】

しかしながら、電子メッセージは通常遠隔にいる相手との意思疎通において利用されるのが常であり、直接対面した際には、通常の発声による会話をするのが普通である。その場合、話者は会話の相手を見ながら発声をするので、発言は話者の視野の中心に近い人物に対するものと推察できる。

【0004】

例えば、会議において話者の視線の先にいる人物を判定し、音声データをテキストデータに変換して、当該人物データとともに保存することで、当該データベースからの情報検索を適切に処理するアーカイブ装置が明らかにされている（特許文献１）。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特許公開２０００−３５０１９２号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、特許文献１において明らかにされているアーカイブ装置では、あくまで実際にあった音声たる発言を話者の視線の先にいる人物とともに記憶するにすぎず、単なるアーカイブ装置としての機能の提供に留まっていた。

【0007】

そこで本発明の発明者は、ユーザが視野内にいる人物に対して、電子メッセージやユーザが見ている視野を画像として送信することで、直接対話と感覚が近い意思疎通の形式を取りつつも、音声を介さず、街中やパーティー会場といった雑然とした場所においても、正確かつ迅速に情報伝達を行えることに着目した。

【0008】

本発明は、ユーザの視野を画像データとして取得し、視野内に存在する人物を特定して電子メッセージや当該画像データを送信することで、ユーザが視野内の人物と意思疎通を行うためのメッセージ送信システム、メッセージ送信方法、及び、プログラムを提供することを目的とする。

【課題を解決するための手段】

【0009】

本発明では、以下のような解決手段を提供する。

【0010】

第１の特徴に係る発明は、ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムであって、
前記ユーザの視野を画像として取得する視野画像取得手段を少なくとも備える視野画像取得装置と、
前記視野画像取得手段によって取得した視野画像を解析し、人物の特定に係る特徴量を抽出する特徴量抽出手段と、
前記特徴量抽出手段によって抽出した特徴量から、前記視野画像内の人物を特定する人物特定手段と、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付する視野画像添付手段と、
前記人物特定手段によって特定した人物に対して、前記電子メッセージを送信するメッセージ送信手段と、
を備えるメッセージ送信システムを提供する。

【0011】

第１の特徴に係る発明によれば、ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムにおいて、視野画像取得装置が前記ユーザの視野を画像として取得し、メッセージ送信システムが取得した視野画像を解析し、人物の特定に係る特徴量を抽出し、抽出した特徴量から、前記視野画像内の人物を特定し、前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付し、特定した人物に対して、前記電子メッセージを送信する。

【0012】

第２の特徴に係る発明は、前記人物特定手段によって特定した人物に対して、前記視野画像取得手段で取得した視野画像の一部または全部を送信する視野画像送信手段と、
を備える第１の特徴に係る発明であるメッセージ送信システムを提供する。

【0013】

第２の特徴に係る発明によれば、第１の特徴に係る発明であるメッセージ送信システムは、特定した人物に対して、前記視野画像取得手段で取得した視野画像の一部または全部を送信する。

【0014】

第３の特徴に係る発明は、前記人物特定手段によって特定した人物の、前記視野画像内における位置を算出する人物像位置算出手段と、
前記人物像位置算出手段によって算出した位置を基準に、前記特定した人物に関する情報を、前記ユーザの視野内に表示する人物情報表示手段と、
を備える第１または第２のいずれかの特徴に係る発明であるメッセージ送信システムを提供する。

【0015】

第３の特徴に係る発明によれば、第１または第２のいずれかの特徴に係る発明であるメッセージ送信システムは、特定した人物の、前記視野画像内における位置を算出し、算出した位置を基準に、前記特定した人物に関する情報を、ユーザの視野内に表示する。

【0016】

これら上記の発明は、メッセージ送信システムのカテゴリであるが、方法、プログラムのカテゴリであっても、そのカテゴリに応じた同様の作用、効果を奏する。

【0017】

第４の特徴に係る発明は、ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムが実行するメッセージ送信方法であって、
視野画像取得装置が前記ユーザの視野を画像として取得するステップと、
前記取得した視野画像を解析し、人物の特定に係る特徴量を抽出するステップと、
前記抽出した特徴量から、前記視野画像内の人物を特定するステップと、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付するステップと、
前記特定した人物に対して、前記電子メッセージを送信するステップと、
を備えるメッセージ送信方法を提供する。

【0018】

第５の特徴に係る発明は、
ユーザが視野内に存在する人物と意思疎通を行うためのメッセージ送信システムにおいて、
視野画像取得装置に、
前記ユーザの視野を画像として取得するステップ、
を実行させ、
前記取得した視野画像を解析し、人物の特定に係る特徴量を抽出するステップ、
前記抽出した特徴量から、前記視野画像内の人物を特定するステップ、
前記人物特定手段によって特定した人物の視野画像、又は、前記人物特定手段によって特定した人物の過去に取得した視野画像を電子メッセージに添付するステップ、
前記特定した人物に対して、前記電子メッセージを送信するステップ、
を実行させるためのメッセージ送信システム用プログラムを提供する。

【発明の効果】

【0019】

本発明によれば、ユーザの視野を画像データとして取得し、視野内に存在する人物を特定して電子メッセージや当該画像データを送信することで、ユーザが視野内の人物と意思疎通を行うためのメッセージ送信システム、メッセージ送信方法、及び、プログラムを提供することが可能となる。

【図面の簡単な説明】

【0020】

【図1】図１は、メッセージ送信システム１の概要を説明するための概念図である。

【図2】図２は、メッセージ送信システム１の全体構成図である

【図3】図３は、ユーザ利用端末１０、視野画像解析サーバ１００、メッセージ送信サーバ２００の機能ブロック図である。

【図4】図４は、ユーザ利用端末１０、視野画像解析サーバ１００、メッセージ送信サーバ２００が実行する、購入商品の資産登録処理の手順を示すフローチャートである。

【図5】図５は、ユーザ利用端末１０、視野画像解析サーバ１００が実行する、視野画像内の人物の特定処理の手順を示すフローチャートである。

【図6】図６は、眼鏡型を模したユーザ利用端末１０の概要を説明するための概要図である。

【図7】図７は、人物情報表示モジュール１９によってユーザ利用端末１０に表示された人物情報の一例である。

【図8】図８は、ユーザ利用端末１０としてスマートフォン端末を利用した場合の、表示された人物情報の一例である。

【図9】図９は、特徴量データベース１５０内の特徴量テーブルの一例を示したものである。

【図10】図１０は、人物情報データベース１５１内の人物情報テーブルの一例を示したものである。

【発明を実施するための形態】

【0021】

以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

【0022】

本発明の概要について説明する。人物５００がユーザの視野内に存在するとき、ユーザ利用端末１０はユーザの視野を画像データとして取得し、その視野画像を視野画像解析サーバ１００に送信する。視野画像解析サーバ１００は、視野画像から特徴量を抽出し、特徴量データベース１５０を参照することで視野画像の中心付近にいる人物を特定する。そして、その人物の情報を人物情報データベース１５１から読み込み、ユーザ利用端末１０に送信する。ユーザ利用端末１０が、入力された電子メッセージや画像データを、受信した人物情報を基にメッセージ送信サーバ２００を介して送信することで、ユーザは視野内の人物とメッセージによって意思疎通を行うことができる。

【0023】

[メッセージ送信システムの概要］
図１に基づいて、本発明の好適な実施形態であるメッセージ送信システム１の概要について説明する。メッセージ送信システム１は、ユーザ利用端末１０、視野画像解析サーバ１００、メッセージ送信サーバ２００から構成される。

【0024】

初めに、ユーザ利用端末１０はユーザの視野画像を取得する。ユーザが人物５００に対してメッセージを送信する場合、図１に示されるように、ユーザ利用端末１０は人物５００を含んだ視野画像を取得する（ステップＳ０１）。

【0025】

次に、ユーザ利用端末１０は、取得した視野画像を視野画像解析サーバ１００に送信する（ステップＳ０２）。視野画像解析サーバ１００は、受信した視野画像に対して解析を加え、顔や体系等を判定するための特徴量を抽出する。

【0026】

視野画像解析サーバ１００が備える記憶部内の特徴量データベース１５０には、人物を特定するための特徴量に関する情報があらかじめ記憶されている。視野画像解析サーバ１００は、特徴量データベース１５０を参照し、抽出した特徴量に基づいて視野画像内の人物を特定する（ステップＳ０３）。視野画像解析サーバ１００は、特定した人物に関する情報を記憶部内の人物情報データベース１５１に問い合わせ（ステップＳ０４）、人物情報を読み込む（ステップＳ０５）。そして、読み込んだ人物情報をユーザ利用端末１０に送信する（ステップＳ０６）。

【0027】

ユーザ利用端末１０は、特定した人物情報と、その人物に送信するメッセージ内容とを、メッセージ送信サーバ２００に対して送信する（ステップＳ０７）。ここで、ユーザ利用端末１０は、メッセージ内容に、現在や過去に取得した視野画像を含めてもよい。また、送信するメッセージ内容は、キーボード等の入力デバイスを利用して人物５００を視野内に捉えながら入力してもよいし、ステップＳ０１より以前に入力を完了していてもよい。すなわち、ステップＳ０１の時点で視野画像内に人物５００が含まれ、ステップＳ０５が実行される段階でメッセージの入力が完了していればよい。

【0028】

また、メッセージ送信サーバ２００を介してメッセージを送信する際には、通常の電子メールプロトコルに限らず、ＩＭ（インスタント・メッセージ）のほか、特定のソフトウェアや、ＳＮＳ（ソーシャル・ネットワーキング・サービス）が備えるメッセージ機能を、ＡＰＩ等によって呼び出す形式であってもよい。当該メッセージは、電子的に送受信され、少なくとも文字情報を含めることができればよい。ユーザ利用端末１０は特定のメッセージ送信規約に基づく形式で、メッセージ送信サーバ２００にメッセージ内容と宛先たる特定した人物情報を送信し、メッセージ送信サーバ２００はその内容をメッセージとして特定した人物に送信する（ステップＳ０８）。

【0029】

人物５００は、メッセージ送信サーバ２００が送信したメッセージを、メッセージ受信装置５０１で受信する。メッセージ受信装置５０１は、メッセージ送信サーバ２００が送信したメッセージを受信できればよく、スマートフォン、パソコン等の情報端末に限らず、ユーザ利用端末１０と同種の端末であっても構わない。

【0030】

以上が、本発明の好適な実施形態であるメッセージ送信システム１の概要である。

【0031】

［メッセージ送信システム１のシステム構成］
図２は、メッセージ送信システム１のシステム構成を示す。メッセージ送信システム１は、インターネット網などの公衆回線網３と、ユーザ利用端末１０と、視野画像解析サーバ１００と、メッセージ送信サーバ２００から構成される。ユーザ利用端末１０は、公衆回線網３を介して、視野画像解析サーバ１００、メッセージ送信サーバ２００と通信可能に接続されている。

【0032】

ここで、視野画像解析サーバ１００とメッセージ送信サーバ２００が物理的に同一のサーバであってもよく、これらが備える機能すべてをユーザ利用端末１０が備える場合は、ユーザ利用端末１０のみによってメッセージ送信システム１が構成されていてもよい。

【0033】

［各機能の説明］
図３に基づいて、各装置の構成について説明する。ユーザ利用端末１０は、制御部１１として、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ），ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ），ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等を備え、通信部１２として、他の機器と通信可能にするためのデバイス、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）対応デバイスを備える。また、入出力部１３として、ユーザの視野を画像として取得するカメラ等の撮影機器を備え、画像や文字のメッセージを表示する液晶モニタ、投影スクリーン等の表示部と、ユーザからの入力を受付けるキーボードやタッチパネル等の入力部を備える。

【0034】

ユーザ利用端末１０において、制御部１１が所定のプログラムを読み込むことで、通信部１２と協働して、視野画像送信モジュール１４、人物情報受信モジュール１５、メッセージ内容送信モジュール１６を実現する。また、ユーザ利用端末１０において、制御部１１が所定のプログラムを読み込むことで、入出力部１３と協働して、視野画像撮影モジュール１７、視野画像調整モジュール１８、人物情報表示モジュール１９、送信先決定モジュール２０、メッセージ内容入力受付モジュール２１を実現する。

【0035】

視野画像解析サーバ１００は、ユーザ利用端末１０と同様に、制御部１０１として、ＣＰＵ，ＲＡＭ，ＲＯＭ等を備え、通信部１０２として、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ対応デバイス又は、有線ケーブルによる接続可能とするデバイス等の、他の電化製品、及び無線アクセスポイントとのデータ通信を実現するデバイスを備える。データやファイルを記憶する記憶部１０３として、ハードディスクや半導体メモリ、記録媒体、メモリカード等による、データのストレージ部を備える。記憶部１０３は、特徴量データベース１５０と、人物情報データベース１５１を備える。

【0036】

視野画像解析サーバ１００において、制御部１０１が所定のプログラムを読み込むことで、通信部１０２と協働して、視野画像受信モジュール１０４、人物情報送信モジュール１０５を実現する。また、視野画像解析サーバ１００において、制御部１０１が所定のプログラムを読み込むことで、記憶部１０３と協働して、特徴量抽出モジュール１０６、人物特定モジュール１０７、人物情報読み込みモジュール１０８を実現する。

【0037】

メッセージ送信サーバ２００は、視野画像解析サーバ１００と同様に、制御部２０１として、ＣＰＵ，ＲＡＭ，ＲＯＭ等を備え、通信部２０２として、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ対応デバイス又は、有線ケーブルによる接続可能とするデバイス等の、他の電化製品、及び無線アクセスポイントとのデータ通信を実現するデバイスを備える。

【0038】

メッセージ送信サーバ２００において、制御部２０１が所定のプログラムを読み込むことで、通信部２０２と協働して、送信メッセージ受付モジュール２０３、メッセージ送信モジュール２０４を実現する。

【0039】

［視野画像内の人物の特定処理］
図４は、メッセージ送信システム１において、ユーザ利用端末１０、視野画像解析サーバ１００が実行する、視野画像内の人物の特定処理の手順を表したフローチャートである。この視野画像内の人物の特定処理について説明する。

【0040】

初めに、ユーザ利用端末１０は、ユーザの視野画像を取得する。視野画像撮影モジュール１７は、ユーザの視野画像を撮影する（ステップＳ１１）。図６は、眼鏡型を模したユーザ利用端末１０の概要を説明するための概要図である。カメラ５１は、ユーザ利用端末１０のほぼ中央に存在し、ユーザの前方に向かって撮像を行うことで、ユーザの視野画像を撮影する。

【0041】

ユーザが常に真正面を向いていると近似した場合、カメラ５１によって撮影した正面方向の画像を、そのままユーザの視野画像として用いてよい。しかし実際には、ユーザが同時に二人以上と対面している際、顔を固定したまま眼球を動かした場合を考慮し、ユーザの視野画像の中心をより精密に求めたい場合もある。ユーザ利用端末１０の視野画像調整モジュール１８は、ユーザの視線方向を取得し、視野画像の中心や範囲を調整してもよい（ステップＳ１２）。フレームの裏に赤外線光源５２、赤外線カメラ５３を設置して、ユーザの眼球画像を撮影し、ユーザの視線方向を算出する等、一例として特許公開２０１０−２０４８２３号公報において明らかにされている手法を用いてよい。

【0042】

なお、ユーザ利用端末１０のレンズ５４は、ユーザ側の面に特殊な反射加工がなされており、小型投影機５５によって投影される画像を視野に重ねて表示できるようになっている。また、ユーザ利用端末１０は、入力部としてキーボード５６やタッチパネル等を備えている。

【0043】

次に、ユーザ利用端末１０の視野画像送信モジュール１４は、調整された視野画像を視野画像解析サーバ１００に送信する（ステップＳ１３）。視野画像解析サーバ１００の視野画像受信モジュール１０４は、視野画像を受信する（ステップＳ１４）。

【0044】

視野画像解析サーバ１００の特徴量抽出モジュール１０６は、受信した視野画像の中心付近に含まれる人物を特定するために、画像の特徴量の抽出を行う（ステップＳ１５）。ここで特徴量とは、受信した視野画像内から、予め記憶された人物の顔や体の画像をパターンとしてパターン認識を行う際に、その評価基準となる値である。より具体的には、特徴量抽出モジュール１０６は、受信した視野画像の中心付近から、人の顔や体にあたる部分を特定し、当該部分を縦横に数等分し、各部分のピクセルの色の平均値を算出する。そして、顔の輪郭、鼻、眼、眉などの位置や大きさによって大きく変化する色の平均値を特徴量として扱う。

【0045】

視野画像解析サーバ１００の人物特定モジュール１０７は、抽出された特徴量を特徴量データベース１５０に予め記憶された各人物の特徴量と比較し、その差を算出するとともに、各特徴量に設定された重みづけの係数を乗算し、足し合わせて正規化することで、その中のどの人物である蓋然性が高いかを算出し、その中で最も蓋然性の高い人物を視野画像の中心付近に映っている人物として特定する（ステップＳ１６）。

【0046】

図９は、特徴量データベース１５０内の特徴量テーブルの一例を示したものである。ここでは簡単のため、人物が二名と、視野画像を２５６色と仮定し、特徴量１から特徴量５の５つの特徴量を０から２５５までの数字で表しているが、実際には更に多くの特徴量を、さらに広い値域で表すことで精度を向上させるのが普通である。

【0047】

その後、視野画像解析サーバ１００の人物情報読み込みモジュール１０８は、特定した人物の情報を人物情報データベース１５１から読み込む。そして、人物情報送信モジュール１０５は、当該人物情報をユーザ利用端末１０に送信する（ステップＳ１７）。人物情報送信モジュール１０５は、特徴量抽出モジュール１０６が顔や体にあたる部分を特定した、当該部分の画像内の位置を同時に送信してもよい。

【0048】

図１０は、人物情報データベース１５１内の人物情報テーブルの一例を示したものである。人物情報テーブルには、各人物の人物名、性別、年齢を始めとする個人情報と、メッセージの送信先とが記憶されている。

【0049】

ユーザ利用端末１０の人物情報受信モジュール１５は、人物情報を受信する（ステップＳ１８）。ユーザ利用端末１０の人物情報表示モジュール１９は、受信した人物情報を、同時に受信した画像内の位置情報を用いて、当該人物の顔や体にあたる部分の付近に表示してもよい。

【0050】

図７は、人物情報表示モジュール１９によってユーザ利用端末１０に表示された人物情報の一例である。この図は、ユーザ利用端末１０をユーザ側から見た場合を示している。人物６１は、表示内容でなくレンズ６５を透過した視野の一部であり、それに重ねて人物６１の人物情報６２、指示棒６３、説明文６４が表示されている。これらの表示内容は、眼鏡の弦に設置された小型投影機によって、レンズ６５に投影されている。

【0051】

ユーザ利用端末１０として、図７のような眼鏡型の端末ではなく、液晶とカメラを備えたスマートフォン端末等を利用しても、本発明の目的を達成できる。図８は、ユーザ利用端末１０としてスマートフォン端末を利用した場合の、表示された人物情報の一例である。ユーザがスマートフォン端末１０ｂを目の前に構えることによって、スマートフォン端末１０ｂのカメラによって撮影された画像がユーザの視野とみなされ、タッチパネル液晶７５に表示される。すなわち、ユーザは人物７１を肉眼で直視せず、タッチパネル液晶７５を介してその姿をみることになる。その上に図７と同様、人物情報７２、指示棒７３、説明文７４が表示される。加えて、タッチパネルによるソフトウェアキーボード７６を利用すれば、視点たるカメラを固定したまま、ソフトウェアキーボード７６を見ることができるので、眼鏡型端末と比較して入力の簡便性が高いと考えられる。ユーザは作成したメッセージ内容７７を、説明文７４をタップすることで、人物７１に対して送信する。メッセージに視野画像を添付する際には、視野画像添付ボタン７８をタップすることで、現在または過去の視野画像を添付することができる。

【0052】

以上が、メッセージ送信システム１において、ユーザ利用端末１０、視野画像解析サーバ１００が実行する、視野画像内の人物の特定処理の手順である。

【0053】

［メッセージの送信処理］
図４は、メッセージ送信システム１において、ユーザ利用端末１０、メッセージ送信サーバ２００が実行する、メッセージの送信処理の手順を表したフローチャートである。このメッセージの送信処理について説明する。

【0054】

初めに、ユーザ利用端末１０の送信先決定モジュール２０は、ユーザからの入力を受け付け、メッセージの送信先を決定する（ステップＳ２１）。メッセージの送信先としては、前述した視野画像内の人物の特定処理において取得した人物情報に含まれた宛先や、過去にメッセージを送信した送信先から選択してよい。

【0055】

次に、ユーザ利用端末１０のメッセージ内容送信モジュール１６は、送信するメッセージ内容が入力されているかを判断する。メッセージ内容の入力が完了していない場合（ステップＳ２２：「ＮＯ」の場合）、メッセージ内容入力受付モジュール２１は、ユーザからメッセージ内容の入力を受け付ける（ステップＳ２３）。メッセージ送信先の選択よりも前に、既にメッセージ内容入力受付モジュール２１がメッセージ内容の入力を受け付けていた場合（ステップＳ２２：「ＹＥＳ」の場合）には、ステップＳ２３を行わずに処理を進める。

【0056】

その後、メッセージ内容送信モジュール１６は、メッセージ内容とメッセージの送信先とを、メッセージ送信サーバ２００に送信する（ステップＳ２４）。メッセージ送信サーバ２００の送信メッセージ受付モジュール２０３は、メッセージ内容とメッセージの送信先とを受信する（ステップＳ２５）。

【0057】

メッセージ送信サーバのメッセージ送信モジュール２０４は、受信したメッセージ内容とメッセージの送信先に基づいて、メッセージの送信処理を行う（ステップＳ２６）。当該送信処理とは、例えば、メッセージがメールであればメールデーモンのプロセスがメール送信リクエストを処理することであるし、メッセージがＳＮＳ内のメッセージ機能であれば、宛先ユーザのメッセージボックス領域にメッセージ内容を書き込むことが該当する。

【0058】

以上が、メッセージ送信システム１において、ユーザ利用端末１０、メッセージ送信サーバ２００が実行する、メッセージの送信処理の手順である。

【0059】

上述した手段、機能は、コンピュータ（ＣＰＵ，情報処理装置，各種端末を含む）が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、フレキシブルディスク、ＣＤ（ＣＤ−ＲＯＭなど）、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭなど）等のコンピュータ読取可能な記録媒体に記録された形態で提供される。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置または外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置（記録媒体）に予め記録しておき、その記憶装置から通信回線を介してコンピュータに提供するようにしてもよい。

【0060】

以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。

【符号の説明】

【0061】

１ メッセージ送信システム、１０ ユーザ利用端末、１００ 視野画像解析サーバ、１５０ 特徴量データベース、１５１ 人物情報データベース、２００ メッセージ送信サーバ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】