ホーム > 特許ランキング > 株式会社ＪＶＣケンウッド
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022144864
(43)【公開日】2022-10-03
(54)【発明の名称】画像処理装置、画像処理方法及びプログラム
(51)【国際特許分類】
G06T 19/00 20110101AFI20220926BHJP
G06F 3/0346 20130101ALI20220926BHJP
G06F 3/04815 20220101ALI20220926BHJP
G09G 5/00 20060101ALI20220926BHJP
G09G 5/36 20060101ALI20220926BHJP
G06F 13/00 20060101ALI20220926BHJP
【ＦＩ】
G06T19/00 A
G06F3/0346 421
G06F3/0481 150
G09G5/00 555D
G09G5/36 520P
G09G5/00 530T
G09G5/36 520G
G06F13/00 650R
【審査請求】未請求
【請求項の数】6
【出願形態】ＯＬ
(21)【出願番号】P 2021046053
(22)【出願日】2021-03-19
(71)【出願人】
【識別番号】308036402
【氏名又は名称】株式会社ＪＶＣケンウッド
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】宍戸 智之
【テーマコード（参考）】
5B050
5B084
5B087
5C182
5E555
【Ｆターム（参考）】
5B050BA09
5B050BA12
5B050CA07
5B050CA08
5B050DA10
5B050EA07
5B050EA12
5B050EA13
5B050EA14
5B050EA18
5B050EA19
5B050EA27
5B050FA02
5B050GA08
5B084AA02
5B084AA18
5B084AB06
5B084BA03
5B084BB16
5B084CB12
5B084CB22
5B084CE03
5B084CE15
5B084CF12
5B084DC02
5B084EA47
5B087AA07
5B087CC01
5B087CC33
5B087DD03
5C182AB08
5C182AB33
5C182BA02
5C182BA35
5C182BA46
5C182BA47
5C182BA75
5C182BB01
5C182BC22
5C182BC25
5C182CB14
5C182CB44
5C182CB55
5C182CC21
5C182DA68
5E555AA23
5E555AA27
5E555AA28
5E555AA76
5E555BA01
5E555BB01
5E555BC04
5E555BE17
5E555CA42
5E555CA44
5E555CB21
5E555CB23
5E555CB82
5E555CC05
5E555DA08
5E555DB32
5E555DB56
5E555DC09
5E555DC11
5E555DC13
5E555DD09
5E555EA05
5E555EA07
5E555EA08
5E555EA22
5E555FA00
(57)【要約】
【課題】仮想空間でアバターを介してコミュニケーションする際にユーザのプライバシーを適切に保護する。
【解決手段】画像処理装置は、仮想空間内の第１ユーザのアバターＡａと、仮想空間ＳＶ内の第２ユーザのアバターＢａとの、仮想空間内における位置の情報を取得する位置情報取得部と、アバターＡａの周囲の領域である境界領域ＡＲＡの情報を取得する境界領域取得部と、第１ユーザと第２ユーザとの関係を示す関係情報を取得する関係取得部と、関係が所定条件を満たさない場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と異なる仮想空間用の画像データを生成する画像処理部とを含む。
【選択図】図５
【解決手段】画像処理装置は、仮想空間内の第１ユーザのアバターＡａと、仮想空間ＳＶ内の第２ユーザのアバターＢａとの、仮想空間内における位置の情報を取得する位置情報取得部と、アバターＡａの周囲の領域である境界領域ＡＲＡの情報を取得する境界領域取得部と、第１ユーザと第２ユーザとの関係を示す関係情報を取得する関係取得部と、関係が所定条件を満たさない場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と異なる仮想空間用の画像データを生成する画像処理部とを含む。
【選択図】図５
【特許請求の範囲】
【請求項1】
仮想空間用の画像処理を行う画像処理装置であって、
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得する位置情報取得部と、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得する境界領域取得部と、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得する関係取得部と、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成する画像処理部と、
を含む
画像処理装置。
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得する位置情報取得部と、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得する境界領域取得部と、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得する関係取得部と、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成する画像処理部と、
を含む
画像処理装置。
【請求項2】
前記画像処理部は、前記関係が、前記第１ユーザと前記第２ユーザとが友好関係にあることを示す場合に、前記所定条件を満たすと判断する、請求項１に記載の画像処理装置。
【請求項3】
前記画像処理部は、前記関係が前記所定条件を満たさず、かつ、前記第２アバターが前記第１境界領域内に位置する場合には、前記第１アバターと前記第２アバターとの間の距離が短くなるに従って、前記第１アバターの表示態様の変化度合いを大きくする、請求項１または請求項２に記載の画像処理装置。
【請求項4】
前記画像処理部は、前記第１アバターの表示態様を異ならせる処理として、前記第１アバターを透明化する処理、前記第１アバターを他のアバターに変換する処理、及び前記第１アバターの画像の解像度を低下させる処理との、少なくとも１つを実行する、請求項１から請求項３のいずれか１項に記載の画像処理装置。
【請求項5】
仮想空間用の画像処理を行う画像処理方法であって、
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、
を含む、
画像処理方法。
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、
を含む、
画像処理方法。
【請求項6】
仮想空間用の画像処理を行う画像処理方法をコンピュータに実行させるプログラムであって、
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、
をコンピュータに実行させる、
プログラム。
前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、
前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、
前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、
前記関係が所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、
をコンピュータに実行させる、
プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【0002】
昨今、情報機器が大きな進化をしている。そしてその代表例であるスマートフォンだけでなく、所謂ウエラブル機器も普及してきた。ウエラブル機器としては、直接視覚を刺激する眼鏡タイプのＨＭＤ（ヘッドマウントディスプレイ）が知られている。このようなＨＭＤを用いると、ユーザの視線方向に合わせて映像を表示することで、ユーザＵに仮想空間を提供することができる。近年、仮想空間のアバターを介して、ユーザ同士がコミュニケーションを取ることが増えている。例えば特許文献１には、仮想空間内のアバターと画像との位置関係に応じて、画像の表示態様を変化させる旨が記載されている。特許文献２には、仮想空間をブロックに分割して、アバターが入室したブロックに基づき、アバターの行動履歴を管理する旨が記載されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２００９－２７１６１８号公報
【特許文献2】特開２００９－１４０１９７号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかし、仮想空間内でアバターを介して複数のユーザ同士がコミュニケーションする場合には、プライバシーを保護することも求められる。
【0005】
本発明は、上記課題に鑑み、仮想空間でアバターを介してコミュニケーションする際に、ユーザのプライバシーを適切に保護可能な画像処理装置、画像処理方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【0006】
本発明の一態様にかかる画像処理装置は、仮想空間用の画像処理を行う画像処理装置であって、前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得する位置情報取得部と、前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得する境界領域取得部と、前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得する関係取得部と、前記画像処理部は、前記関係が前記所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成する画像処理部と、を含む。
【0007】
本発明の一態様にかかる画像処理方法は、仮想空間用の画像処理を行う画像処理方法であって、前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、前記画像データを生成するステップでは、前記関係が前記所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、を含む。
【0008】
本発明の一態様にかかるプログラムは、仮想空間用の画像処理を行う画像処理方法をコンピュータに実行させるプログラムであって、前記仮想空間内の第１ユーザのアバターである第１アバターと、前記仮想空間内の第２ユーザのアバターである第２アバターとの、前記仮想空間内における位置の情報を取得するステップと、前記第１アバターに対して設定された、前記仮想空間内での前記第１アバターの周囲の領域である第１境界領域の情報を取得するステップと、前記第１ユーザと前記第２ユーザとの関係を示す関係情報を取得するステップと、前記関係が前記所定条件を満たさない場合には、前記第２アバターが前記第１境界領域内に位置する場合の前記第１アバターの表示態様が、前記第２アバターが前記第１境界領域外に位置する場合の前記第１アバターの表示態様と異なる前記仮想空間用の画像データを生成するステップと、をコンピュータに実行させる。
【発明の効果】
【0009】
本発明によれば、仮想空間でアバターを介してコミュニケーションする際に、ユーザのプライバシーを適切に保護することができる。
【図面の簡単な説明】
【0010】
【発明を実施するための形態】
【0011】
以下に、本発明の実施形態を図面に基づいて詳細に説明する。なお、以下に説明する実施形態により本発明が限定されるものではない。
【0012】
（実空間と仮想空間）
図１は、実空間と仮想空間の一例を説明する模式図である。本実施形態に係る画像処理システム１００は、ユーザＵに仮想空間を提供するシステムであり、表示装置１０と画像処理装置１２とを含む。図１に示すように、表示装置１０は、ユーザＵの頭部に装着される、いわゆるＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔ Ｄｉｓｐｌａｙ）である。表示装置１０は、画像を表示することで、ユーザＵに仮想空間を提供する。図１に示すように、ユーザＵが実際に存在する現実空間を実空間ＳＲとし、表示装置１０がユーザＵに提供する仮想の空間を仮想空間ＳＶとする。この場合、表示装置１０は、実空間ＳＲでのユーザＵの動作（視線）に応じた仮想空間ＳＶ用の画像を表示する。すなわち、ユーザＵがアバターとして仮想空間ＳＶで動作していることを模擬して、仮想空間ＳＶ用の画像を表示する。そのため、ユーザＵは、自身が仮想空間ＳＶ内に存在していると認識することができる。なお、ここでの仮想空間ＳＶは、ユーザＵが存在する場所から離れた実在の場所を再現した空間、すなわちＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）であってもよいし、実際に存在しない仮想の空間、すなわちＶＲ（Ｖｅｒｔｉａｌ Ｒｅａｌｉｔｙ）であってもよい。
図１は、実空間と仮想空間の一例を説明する模式図である。本実施形態に係る画像処理システム１００は、ユーザＵに仮想空間を提供するシステムであり、表示装置１０と画像処理装置１２とを含む。図１に示すように、表示装置１０は、ユーザＵの頭部に装着される、いわゆるＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔ Ｄｉｓｐｌａｙ）である。表示装置１０は、画像を表示することで、ユーザＵに仮想空間を提供する。図１に示すように、ユーザＵが実際に存在する現実空間を実空間ＳＲとし、表示装置１０がユーザＵに提供する仮想の空間を仮想空間ＳＶとする。この場合、表示装置１０は、実空間ＳＲでのユーザＵの動作（視線）に応じた仮想空間ＳＶ用の画像を表示する。すなわち、ユーザＵがアバターとして仮想空間ＳＶで動作していることを模擬して、仮想空間ＳＶ用の画像を表示する。そのため、ユーザＵは、自身が仮想空間ＳＶ内に存在していると認識することができる。なお、ここでの仮想空間ＳＶは、ユーザＵが存在する場所から離れた実在の場所を再現した空間、すなわちＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）であってもよいし、実際に存在しない仮想の空間、すなわちＶＲ（Ｖｅｒｔｉａｌ Ｒｅａｌｉｔｙ）であってもよい。
【0013】
本実施形態では、画像処理システム１００は、複数のユーザＵに共通の仮想空間ＳＶを提供する。表示装置１０はそれぞれのユーザＵに用いられ、ユーザＵは、自身の表示装置１０から提供された仮想空間ＳＶ内において、アバターを介して他のユーザＵとコミュニケーションをとることができる。図１の例では、ユーザＡが表示装置１０Ａを装着し、ユーザＢが表示装置１０Ｂを装着し、ユーザＣが表示装置１０Ｃを装着しており、共通の仮想空間ＳＶにおけるユーザＡ、Ｂ、Ｃのアバターを、それぞれアバターＡａ、Ｂａ、Ｃａとする。表示装置１０Ａは、アバターＡａの視野範囲ＶＡ内の仮想空間ＳＶでの画像を、仮想空間ＳＶ用の画像としてユーザＡに提供する。同様に、表示装置１０Ｂは、アバターＢａの視野範囲ＶＢ内の仮想空間ＳＶでの画像を、仮想空間ＳＶ用の画像としてユーザＢに提供する。同様に、表示装置１０Ｃは、アバターＣａの視野範囲ＶＣ内の仮想空間ＳＶでの画像を、仮想空間ＳＶ用の画像としてユーザＣに提供する。なお、仮想空間ＳＶ内におけるアバターの数（すなわち共通の仮想空間ＳＶが提供されるユーザＵの数）は、３人に限られず任意であってよい。また、図１や、以降の図でも、仮想空間ＳＶを鉛直方向上方から見た２次元平面で表しているが、仮想空間ＳＶは３次元空間であってよい。
【0014】
（表示装置）
図２は、本実施形態に係る表示装置の模式的なブロック図である。表示装置１０は、コンピュータであるともいえ、図２に示すように、入力部２０と、表示部２２と、記憶部２４と、通信部２６と、位置検出部２８と、制御部３０とを備える。入力部２０は、ユーザＵによる操作を受け付ける機構であり、例えばＨＭＤに設けられるコントローラやマイクなどであってよい。表示部２２は、画像を表示するディスプレイである。表示部２２は、画像を出力することで、ユーザＵに仮想空間ＳＶを提供する。表示装置１０は、表示部２２以外にも、例えば音声を出力するスピーカなど、情報を出力する装置を備えていてよい。
図２は、本実施形態に係る表示装置の模式的なブロック図である。表示装置１０は、コンピュータであるともいえ、図２に示すように、入力部２０と、表示部２２と、記憶部２４と、通信部２６と、位置検出部２８と、制御部３０とを備える。入力部２０は、ユーザＵによる操作を受け付ける機構であり、例えばＨＭＤに設けられるコントローラやマイクなどであってよい。表示部２２は、画像を表示するディスプレイである。表示部２２は、画像を出力することで、ユーザＵに仮想空間ＳＶを提供する。表示装置１０は、表示部２２以外にも、例えば音声を出力するスピーカなど、情報を出力する装置を備えていてよい。
【0015】
記憶部２４は、制御部３０の演算内容やプログラムなどの各種情報を記憶するメモリであり、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）のような主記憶装置と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの外部記憶装置とのうち、少なくとも１つ含む。記憶部２４が記憶する制御部３０用のプログラムは、表示装置１０が読み取り可能な記録媒体に記憶されていてもよい。
【0016】
通信部２６は、画像処理装置１２などの外部の装置と通信を行う通信モジュールであり、例えばアンテナなどである。表示装置１０は、無線通信で外部の装置と通信を行うが、有線通信でもよく、通信方式は任意であってよい。
【0017】
位置検出部２８は、実空間ＳＲにおけるユーザＵ（表示装置１０）の位置（座標）と、実空間ＳＲにおけるユーザＵ（表示装置１０）の向き（例えばユーザＵの顔や視線が向いている方向）とを検出するセンサである。位置検出部２８は、ユーザＵの位置及び向きを検出可能なセンサであれば、任意のセンサであってよく、例えばジャイロセンサやカメラなどであってよい。また、位置検出部２８は、１つであることに限られず複数であってよく、例えば、ユーザＵの位置を検出するセンサとユーザＵの向きを検出するセンサとを有していてよい。
【0018】
制御部３０は、演算装置であり、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などの演算回路を含む。制御部３０は、位置情報取得部４０と、画像データ取得部４２と、表示制御部４４とを含む。制御部３０は、記憶部２４からプログラム（ソフトウェア）を読み出して実行することで、位置情報取得部４０と画像データ取得部４２と表示制御部４４を実現して、それらの処理を実行する。なお、制御部３０は、１つのＣＰＵによってこれらの処理を実行してもよいし、複数のＣＰＵを備えて、それらの複数のＣＰＵで、処理を実行してもよい。また、位置情報取得部４０と画像データ取得部４２と表示制御部４４との処理の少なくとも一部を、ハードウェア回路で実現してもよい。
【0019】
位置情報取得部４０は、実空間ＳＲにおけるユーザＵの位置の情報と、実空間ＳＲにおけるユーザＵの向きの情報とを、ユーザＵの位置情報として取得する。位置情報取得部４０は、位置検出部２８を制御して、位置検出部２８にユーザＵ（表示装置１０）の位置と向きとを検出させ、その検出結果を、ユーザＵの位置情報として取得する。
【0020】
画像データ取得部４２は、表示部２２に表示させる仮想空間ＳＶ用の画像データを取得する。本実施形態では、画像データ取得部４２は、通信部２６を介して、画像処理装置１２から、仮想空間ＳＶ用の画像データを取得する。仮想空間ＳＶ用の画像データの詳細は後述する。
【0021】
表示制御部４４は、画像データ取得部４２が取得した仮想空間ＳＲ用の画像を、表示部２２に表示させる。
【0022】
（画像処理装置）
画像処理装置１２は、仮想空間ＳＶ用の画像の画像処理を行う装置である。画像処理装置１２は、ユーザＵ毎の表示装置１０と情報の送受信を行って、仮想空間ＳＶ用の画像の画像処理を行うサーバといえる。
画像処理装置１２は、仮想空間ＳＶ用の画像の画像処理を行う装置である。画像処理装置１２は、ユーザＵ毎の表示装置１０と情報の送受信を行って、仮想空間ＳＶ用の画像の画像処理を行うサーバといえる。
【0023】
【0024】
記憶部５０は、制御部５４の演算内容やプログラムなどの各種情報を記憶するメモリであり、例えば、ＲＡＭと、ＲＯＭのような主記憶装置と、ＨＤＤなどの外部記憶装置とのうち、少なくとも１つ含む。記憶部５０が記憶する制御部５４用のプログラムは、画像処理装置１２が読み取り可能な記録媒体に記憶されていてもよい。
【0025】
通信部５２は、表示装置１０などの外部の装置と通信を行う通信モジュールであり、例えばアンテナなどである。画像処理装置１２は、無線通信で外部の装置と通信を行うが、有線通信でもよく、通信方式は任意であってよい。
【0026】
制御部５４は、演算装置であり、例えばＣＰＵなどの演算回路を含む。制御部５４は、位置情報取得部６０と、境界領域取得部６２と、関係取得部６４と、画像処理部６６とを含む。制御部５４は、記憶部５０からプログラム（ソフトウェア）を読み出して実行することで、位置情報取得部６０と境界領域取得部６２と関係取得部６４と画像処理部６６を実現して、それらの処理を実行する。なお、制御部５４は、１つのＣＰＵによってこれらの処理を実行してもよいし、複数のＣＰＵを備えて、それらの複数のＣＰＵで、処理を実行してもよい。また、位置情報取得部６０と境界領域取得部６２と関係取得部６４と画像処理部６６との処理の少なくとも一部を、ハードウェア回路で実現してもよい。
【0027】
（位置情報取得部）
位置情報取得部６０は、仮想空間ＳＶにおける各ユーザＵのアバターの位置情報を、すなわち仮想空間ＳＶの座標系におけるアバターの位置と向きの情報を、取得する。具体的には、位置情報取得部６０は、通信部５２を介して、それぞれの表示装置１０から、ユーザＵの位置情報（実空間ＳＲの座標系におけるユーザＵの位置と向きとの情報）を取得する。位置情報取得部６０は、実空間ＳＲの座標系におけるユーザＵの位置と向きを、仮想空間ＳＶの座標系に座標変換して、仮想空間ＳＶの座標系におけるアバターの位置及び向きを、算出する。すなわち本例では、位置情報取得部６０は、表示装置１０ＡからユーザＡの位置情報を取得し、それを座標変換して、アバターＡａの位置情報を設定する。また、位置情報取得部６０は、表示装置１０ＢからユーザＢの位置情報を取得し、それを座標変換して、アバターＢａの位置情報を設定する。また、位置情報取得部６０は、表示装置１０ＣからユーザＣの位置情報を設定し、それを座標変換して、アバターＣａの位置情報を設定する。なお、実空間ＳＲの座標系を仮想空間ＳＶの座標系に変換する方法は任意であるが、例えば座標変換するための数値が予め設定されていてよい。
位置情報取得部６０は、仮想空間ＳＶにおける各ユーザＵのアバターの位置情報を、すなわち仮想空間ＳＶの座標系におけるアバターの位置と向きの情報を、取得する。具体的には、位置情報取得部６０は、通信部５２を介して、それぞれの表示装置１０から、ユーザＵの位置情報（実空間ＳＲの座標系におけるユーザＵの位置と向きとの情報）を取得する。位置情報取得部６０は、実空間ＳＲの座標系におけるユーザＵの位置と向きを、仮想空間ＳＶの座標系に座標変換して、仮想空間ＳＶの座標系におけるアバターの位置及び向きを、算出する。すなわち本例では、位置情報取得部６０は、表示装置１０ＡからユーザＡの位置情報を取得し、それを座標変換して、アバターＡａの位置情報を設定する。また、位置情報取得部６０は、表示装置１０ＢからユーザＢの位置情報を取得し、それを座標変換して、アバターＢａの位置情報を設定する。また、位置情報取得部６０は、表示装置１０ＣからユーザＣの位置情報を設定し、それを座標変換して、アバターＣａの位置情報を設定する。なお、実空間ＳＲの座標系を仮想空間ＳＶの座標系に変換する方法は任意であるが、例えば座標変換するための数値が予め設定されていてよい。
【0028】
（境界領域取得部）
図４は、境界領域の一例を示す模式図である。境界領域取得部６２は、各アバターに対して設定された境界領域ＡＲの情報を取得する。境界領域ＡＲとは、仮想空間ＳＶ内での、アバターの周囲の所定の大きさの領域であり、アバター毎に設定されている。すなわち、境界領域取得部６２は、アバター毎の、境界領域ＡＲの大きさの情報を取得するといえる。ここでの大きさの情報とは、例えば、境界領域ＡＲの外周から境界領域ＡＲ内に位置するアバターまでの、距離Ｄを示す情報であってよい。なお、図４の例では、境界領域ＡＲは、アバターを中心として距離Ｄを半径とする円形の領域（３次元である場合は円筒又は半球の空間）であるが、境界領域ＡＲの形状はそれに限られず、任意の形状の領域（又は空間）であってよい。なお、境界領域ＡＲは、アバターの周囲の領域なので、アバターの位置の移動に伴い、境界領域ＡＲの位置も移動する。
図４は、境界領域の一例を示す模式図である。境界領域取得部６２は、各アバターに対して設定された境界領域ＡＲの情報を取得する。境界領域ＡＲとは、仮想空間ＳＶ内での、アバターの周囲の所定の大きさの領域であり、アバター毎に設定されている。すなわち、境界領域取得部６２は、アバター毎の、境界領域ＡＲの大きさの情報を取得するといえる。ここでの大きさの情報とは、例えば、境界領域ＡＲの外周から境界領域ＡＲ内に位置するアバターまでの、距離Ｄを示す情報であってよい。なお、図４の例では、境界領域ＡＲは、アバターを中心として距離Ｄを半径とする円形の領域（３次元である場合は円筒又は半球の空間）であるが、境界領域ＡＲの形状はそれに限られず、任意の形状の領域（又は空間）であってよい。なお、境界領域ＡＲは、アバターの周囲の領域なので、アバターの位置の移動に伴い、境界領域ＡＲの位置も移動する。
【0029】
境界領域ＡＲの情報は、例えばユーザＵにより設定される。すなわち、ユーザＵが表示装置１０の入力部２０に、自身のアバターについての境界領域ＡＲの情報（本実施形態では距離Ｄ）を入力し、境界領域取得部６２は、表示装置１０から、境界領域ＡＲの情報を取得する。ただし、境界領域ＡＲの情報はユーザＵに設定されることに限られず、例えば予め設定されていてもよい。
【0030】
図４の例では、境界領域取得部６２は、アバターＡａについての境界領域ＡＲＡの情報と、アバターＢａについての境界領域ＡＲＢの情報と、アバターＣａについての境界領域ＡＲＣの情報とを取得する。図４の例では、境界領域ＡＲＡは、アバターＡａの位置を中心として半径が距離ＤＡとなる円形の領域であり、境界領域ＡＲＢは、アバターＢａの位置を中心として半径が距離ＤＢとなる円形の領域であり、境界領域ＡＲＣは、アバターＣａの位置を中心として半径が距離ＤＣとなる円形の領域である。ただし、図４に示す各アバターの位置や境界領域ＡＲは、一例である。
【0031】
（関係取得部）
関係取得部６４は、ユーザＵ同士の関係を示す関係情報を取得する。本実施形態では、関係情報は、ユーザＵ同士が友好関係にあるかを示す情報である。例えば、関係情報は、ユーザＵ同士が友好関係にある旨を示すフレンド情報と、ユーザＵ同士が友好関係にない旨の非フレンド情報とのいずれかに設定される。関係情報は、ユーザＵにより設定される。例えば、ユーザＡが、ユーザＢに対して友好関係を結ぶ旨のフレンド申請を、表示装置１０Ａに入力すると、画像処理装置１２は、フレンド申請の情報を表示装置１０Ａから取得して、ユーザＢの表示装置１０Ｂに送信する。ユーザＢは、表示装置１０Ｂを介して、フレンド申請がなされている旨の情報を確認し、承認する場合は、承認する旨の情報を表示装置１０Ｂに入力する。画像処理装置１２は、承認する旨の情報を表示装置１０Ｂから取得したら、ユーザＡとユーザＢとの関係を、フレンド情報に設定して、記憶部５０に記憶させる。一方、画像処理装置１２は、フレンド情報に設定されていないユーザＵ同士の関係情報を、非フレンド情報に設定する。関係取得部６４は、記憶部５０から、ユーザＵ同士の関係情報を読み出すことで、関係情報を取得する。なお、関係情報の設定方法はこれに限られず任意であってよい。例えば、ユーザＡが、ユーザＢに対して非友好関係とする旨の非フレンド申請を、表示装置１０Ａに入力すると、画像処理装置１２は、非フレンド申請の情報を表示装置１０Ａから取得する。この場合、画像処理装置１２は、ユーザＡとユーザＢとの関係情報を、非フレンド情報に設定する。
関係取得部６４は、ユーザＵ同士の関係を示す関係情報を取得する。本実施形態では、関係情報は、ユーザＵ同士が友好関係にあるかを示す情報である。例えば、関係情報は、ユーザＵ同士が友好関係にある旨を示すフレンド情報と、ユーザＵ同士が友好関係にない旨の非フレンド情報とのいずれかに設定される。関係情報は、ユーザＵにより設定される。例えば、ユーザＡが、ユーザＢに対して友好関係を結ぶ旨のフレンド申請を、表示装置１０Ａに入力すると、画像処理装置１２は、フレンド申請の情報を表示装置１０Ａから取得して、ユーザＢの表示装置１０Ｂに送信する。ユーザＢは、表示装置１０Ｂを介して、フレンド申請がなされている旨の情報を確認し、承認する場合は、承認する旨の情報を表示装置１０Ｂに入力する。画像処理装置１２は、承認する旨の情報を表示装置１０Ｂから取得したら、ユーザＡとユーザＢとの関係を、フレンド情報に設定して、記憶部５０に記憶させる。一方、画像処理装置１２は、フレンド情報に設定されていないユーザＵ同士の関係情報を、非フレンド情報に設定する。関係取得部６４は、記憶部５０から、ユーザＵ同士の関係情報を読み出すことで、関係情報を取得する。なお、関係情報の設定方法はこれに限られず任意であってよい。例えば、ユーザＡが、ユーザＢに対して非友好関係とする旨の非フレンド申請を、表示装置１０Ａに入力すると、画像処理装置１２は、非フレンド申請の情報を表示装置１０Ａから取得する。この場合、画像処理装置１２は、ユーザＡとユーザＢとの関係情報を、非フレンド情報に設定する。
【0032】
本実施形態では、関係情報は、二人のユーザＵの組み合わせ毎に設定される。すなわち、本例では、ユーザＡとユーザＢとの関係情報と、ユーザＢとユーザＣとの関係情報と、ユーザＡとユーザＣとの関係情報とが設定されている。関係取得部６４は、ユーザＡとユーザＢとの関係情報と、ユーザＢとユーザＣとの関係情報と、ユーザＡとユーザＣとの関係情報とを、取得する。なお、関係情報は、フレンド情報と非フレンド情報との２種類であることに限られず、友好関係の度合いに応じて３段階以上設定されてもよい。
【0033】
（画像処理部）
画像処理部６６は、仮想空間ＳＶ用の画像データを生成する。画像処理部６６は、位置情報取得部６０が設定したアバターの位置情報から、アバターの視野範囲Ｖを特定して、仮想空間ＳＶにおいて視野範囲Ｖ内にある仮想の物体や他のアバターを抽出する。そして、画像処理部６６は、抽出した物体や他のアバターの画像が、アバターの位置及び向きから見た場合の位置、大きさ及び向きとなるように、仮想空間ＳＶ用の画像データを生成する。なお、アバターの姿を示す画像データは、そのアバターのユーザＵによって表示装置１０を介して設定され、画像処理部６６がアバターの姿を示す画像データを表示装置１０から取得する。ただし、アバターの姿を示す画像データの取得方法は任意であり、例えば画像処理部６６により自動で設定されてもよい。
画像処理部６６は、仮想空間ＳＶ用の画像データを生成する。画像処理部６６は、位置情報取得部６０が設定したアバターの位置情報から、アバターの視野範囲Ｖを特定して、仮想空間ＳＶにおいて視野範囲Ｖ内にある仮想の物体や他のアバターを抽出する。そして、画像処理部６６は、抽出した物体や他のアバターの画像が、アバターの位置及び向きから見た場合の位置、大きさ及び向きとなるように、仮想空間ＳＶ用の画像データを生成する。なお、アバターの姿を示す画像データは、そのアバターのユーザＵによって表示装置１０を介して設定され、画像処理部６６がアバターの姿を示す画像データを表示装置１０から取得する。ただし、アバターの姿を示す画像データの取得方法は任意であり、例えば画像処理部６６により自動で設定されてもよい。
【0034】
画像処理部６６は、生成した仮想空間ＳＶ用の画像データを、通信部５２を介して表示装置１０に送信する。表示装置１０は、表示制御部４６により、画像処理部６６（画像処理装置１２）から送信された仮想空間ＳＶ用の画像データを用いて、仮想空間ＳＶ用の画像を表示する。すなわち本例では、画像処理部６６は、アバターＡａの視野範囲Ｖから見た仮想空間ＳＶ用の画像データを生成して、表示装置１０Ａに送信する。表示装置１０Ａは、画像処理部６６から受信した画像データに基づき、表示部２２に、アバターＡａの視野範囲Ｖから見た仮想空間ＳＶ用の画像を表示する。同様に、画像処理部６６は、アバターＢａの視野範囲Ｖから見た仮想空間ＳＶ用の画像データを生成して、表示装置１０Ｂに送信する。表示装置１０Ｂは、画像処理部６６から受信した画像データに基づき、表示部２２に、アバターＢａの視野範囲Ｖから見た仮想空間ＳＶ用の画像を表示する。同様に、画像処理部６６は、アバターＣａの視野範囲Ｖから見た仮想空間ＳＶ用の画像データを生成して、表示装置１０Ｃに送信する。表示装置１０Ｃは、画像処理部６６から受信した画像データに基づき、表示部２２に、アバターＣａの視野範囲Ｖから見た仮想空間ＳＶ用の画像を表示する。これにより、ユーザＡ、Ｂ、Ｃは、あたかも自身がアバターＡａ、Ｂａ、Ｃａとして仮想空間ＳＶにいると認識でき、アバターＡａ、Ｂａ、Ｃａを介して、互いにコミュニケーションをとることができる。
【0035】
このように仮想空間ＳＶ内でアバターを介してコミュニケーションする際にも、実空間ＳＶでのユーザＵ同士のコミュニケーションと同様に、プライバシーを保護することが求められる場合がある。例えば、実空間ＳＶで他人から近い距離で注視されることを望まない人がいるように、仮想空間ＳＶでも、他のユーザのアバターに自身のアバターを注視されることを望まない人もいる。それに対して、本実施形態に係る画像処理装置１２は、アバター毎に境界領域ＡＲを設定して、他のユーザのアバターが境界領域ＡＲ内に入った場合に、他のユーザに対する自身のアバターの見え方（表示態様）を異ならせることで、他のユーザに注視され難くして、プライバシーの保護を実現している。以下、具体的に説明する。
【0036】
（関係情報の判断）
画像処理部６６は、関係取得部６４が取得したユーザ同士の関係情報が、所定の条件を満たすか判断する。本実施形態では、画像処理部６６は、関係情報が友好情報として設定されている場合に、すなわちユーザＵ同士が友好関係にある場合に、所定の条件を満たすと判断する。一方、画像処理部６６は、関係情報が非友好情報として設定されている場合に、すなわちユーザＵ同士が友好関係にない場合に、所定の条件を満たさないと判断する。なお、所定の条件を満たすかの判断基準は、友好状態であるかに限られず、適宜決められてよい。
画像処理部６６は、関係取得部６４が取得したユーザ同士の関係情報が、所定の条件を満たすか判断する。本実施形態では、画像処理部６６は、関係情報が友好情報として設定されている場合に、すなわちユーザＵ同士が友好関係にある場合に、所定の条件を満たすと判断する。一方、画像処理部６６は、関係情報が非友好情報として設定されている場合に、すなわちユーザＵ同士が友好関係にない場合に、所定の条件を満たさないと判断する。なお、所定の条件を満たすかの判断基準は、友好状態であるかに限られず、適宜決められてよい。
【0037】
（関係条件が所定の条件を満たさない場合）
以降では、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合（ここではユーザＡ、Ｂが友好関係にない場合）に、ユーザＢのアバターＢａの視野範囲ＶにユーザＡのアバターＡａが入っており、ユーザＢの表示装置１０Ｂに提供するアバターＡａの画像データを生成する場合を例にする。ただし、以降の説明は、他のユーザＵ同士にも適用される。
以降では、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合（ここではユーザＡ、Ｂが友好関係にない場合）に、ユーザＢのアバターＢａの視野範囲ＶにユーザＡのアバターＡａが入っており、ユーザＢの表示装置１０Ｂに提供するアバターＡａの画像データを生成する場合を例にする。ただし、以降の説明は、他のユーザＵ同士にも適用される。
【0038】
図５は、アバターの表示態様の一例を説明する模式図である。画像処理部６６は、ユーザＡ、Ｂの関係情報が所定の条件を満たさない場合（ここではユーザＡ、Ｂが友好関係にない場合）、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置しているかを判断する。例えば、画像処理部６６は、アバターＡａの位置情報と境界領域ＡＲＡの大きさの情報とから、仮想空間ＳＶ内における境界領域ＡＲＡの占める位置を特定し、アバターＢａの位置情報から、仮想空間ＳＶ内におけるアバターＢａの位置を特定する。そして、画像処理部６６は、仮想空間ＳＶ内におけるアバターＢａの位置が、境界領域ＡＲＡに重なる場合には、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していると判断し、アバターＢａの位置が境界領域ＡＲＡに重ならない場合には、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していないと判断する。図５では、ステップＳ１００が、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合の例を示しており、ステップＳ１０２、Ｓ１０４が、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合の例を示している。
【0039】
ただし、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置しているかの判断方法は、以上の説明に限られない。例えば、画像処理部６６は、アバターＡａ、Ｂａの位置情報から、仮想空間ＳＶ内におけるアバターＡａとアバターＢａとの間の距離Ｌを算出してよい。そして、画像処理部６６は、境界領域ＡＲＡの広さの情報としての距離Ｄを取得し、距離Ｌが距離Ｄ以下である場合に、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していると判断し、距離Ｌが距離Ｄより長い場合に、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していないと判断してもよい。
【0040】
画像処理部６６は、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置している場合における、ユーザＢの表示装置１０Ｂに提供するアバターＡａの画像データの表示態様が、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合における、ユーザＢの表示装置１０Ｂに提供するアバターＡａの画像データの表示態様と異なるように、表示装置１０Ｂに提供するアバターＡａの画像データを生成する。すなわち、ユーザＡとユーザＢとが友好関係にない場合であって、ユーザＢのアバターＢａがユーザＡのアバターＡａの境界領域ＡＲＡ内に入った場合には、ユーザＢに視認させるアバターＡａの表示態様が、変化する。
【0041】
なお、ここでの表示態様とは、アバターＡａの画像の視認性に影響を及ぼす画像データのパラメータである。すなわち、画像処理部６６は、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置している場合におけるアバターＡａの画像の視認性を、アバターＡａの境界領域ＡＲＡ外にアバターＢａが位置している場合におけるアバターＡａの画像の視認性よりも、低くする（すなわちユーザＢにアバターＡａを見えにくくする）。なお、アバターＡａとアバターＢａとの相対位置や相対向きが変わると、アバターＢａの大きさや見える向きは変わるが、ここでの表示態様は、アバターＢａの大きさや見える向きを意味しない。ここでの表示態様とは、例えば同じ相対距離、相対向きで見たと仮定しても、表示態様が変わるとアバターＢａの視認性が低くなるパラメータを指す。
【0042】
本実施形態における表示態様は、アバターＢａの画像の透明度を指す。すなわち本実施形態では、画像処理部６６は、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合には、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置している場合におけるアバターＡａの画像の透明度が、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合におけるアバターＡａの画像の透明度より高くなるように、表示装置１０Ｂに提供するアバターＡａの画像データを生成する。
【0043】
さらに、本実施形態では、画像処理部６６は、ユーザＡとユーザＢとの関係情報が所定の条件を満たさず、かつ、アバターＢａがアバターＡａの境界領域ＡＲＡ内に位置する場合には、アバターＡａとアバターＢａとの間の距離Ｌが短くなるに従って、アバターＡａの表示態様の変化度合いを大きくする。すなわち、画像処理部６６は、アバターＢａがアバターＡａの境界領域ＡＲＡ内に入ったら、アバターＡａとアバターＢａとの間の距離が短くなるに従って、アバターＡａの画像の視認性の低下度合いを大きくする。本実施形態では、図５のステップＳ１０２に示すように、アバターＢａがアバターＡａの境界領域ＡＲＡ内に入ると、アバターＢａがアバターＡａの境界領域ＡＲＡの外にいるステップＳ１００と比べて、アバターＡａの画像の透明度が高くなる。さらに、ステップＳ１０２よりもアバターＡａとアバターＢａとの距離Ｌが短くなるに従って、アバターＡａの画像の透明度が高くなる。そして、ステップＳ１０４に示すように、アバターＡａとアバターＢａとの距離Ｌが所定値まで近づくと、アバターＡａの画像が完全に透明となり、アバターＡａの画像が表示されなくなる。
【0044】
このように、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合には、アバターＢａがアバターＡａに近づくと（境界領域ＡＲＡ内に入ったら）、ユーザＢが見る画像におけるアバターＡａの視認性が低下する。そのため、アバターＡａがユーザＢに注視され難くなり、仮想空間ＳＶにおけるユーザＡのプライバシーを保護できる。また、本実施形態では、アバターＢａが境界領域ＡＲＡ内に入ってからさらに距離Ｌが近づくにつれて、徐々にアバターＡａが透明になってゆき、急にアバターＡａを消さないようにしている。これにより、例えば完全に透明になってユーザＢがアバターＡａの存在を認識できなくなる前に、ユーザＢがアバターＡａを視認して、ユーザＡに対してフレンド申請を行うことが可能となる。従って、本実施形態によると、プライバシーを保護しつつ、コミュニケーションを補助できる。すなわちこの場合には、画像処理システム１００は、アバターＡａが完全に消えるまでは、ユーザＡへのフレンド申請を受け付けてよい。
【0045】
以上の説明では、関係情報が友好情報と非友好情報との２種類であったが、３段階以上の場合には、友好度合いに応じて、アバターＡａの表示態様の変化のさせ方を調整してもよい。この場合例えば、友好度合いが低いほど境界領域ＡＲを広くして、アバターＡａが遠くからでも視認され難くしてよい。また例えば、友好度合いが低いほど、境界領域ＡＲ内に入った場合の表示態様の変化度合い（ここでは透明度の度合い）を大きくしてもよいし、境界領域ＡＲ内に入ってから距離Ｌが単位長さ短くなった場合の視認性の低下度合い（すなわちここでは透明化が進むスピード）を大きくして、近づいた場合に視認され難くしてもよい。
【0046】
（表示態様の他の例）
図６は、アバターの表示態様の他の例を説明する模式図である。以上の説明では、アバターの表示態様として、アバターＡａの画像の透明度を異ならせていたが、表示態様は透明度であることに限られない。例えば図６に示すように、アバターＡａと重なる位置に、別のアバターＸａの画像を表示させることで、アバターＡａを他のアバターＸａに変換するように、表示態様を変えてもよい。すなわち、アバターＡａと重なる位置に、別のアバターＸａが表示されることで、アバターＡａの視認度が低下する。この場合例えば、図６のステップＳ１００ａに示すように、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合には、アバターＸａは表示されずにアバターＡａが表示される。一方、ステップＳ１０２ａに示すように、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置する場合、アバターＡａと重なる位置に、アバターＸａが表示される。そして例えば、アバターＡａとアバターＢａとの間の距離Ｌが短くなるに従って、アバターＸａの透明度を低くし（すなわちアバターＸａが鮮明になってゆき）、逆にアバターＡａの透明度を高くしてよい。そして、ステップＳ１０４ａに示すように、アバターＡａとアバターＢａとの距離Ｌが所定値まで近づくと、アバターＡａの画像が完全に透明となり、アバターＡａの位置にアバターＸａの画像のみが表示される。なお、ここでのアバターＸａの姿の画像は、任意に設定されてよく、アバターＡａと異なる任意の姿であってよい。
図６は、アバターの表示態様の他の例を説明する模式図である。以上の説明では、アバターの表示態様として、アバターＡａの画像の透明度を異ならせていたが、表示態様は透明度であることに限られない。例えば図６に示すように、アバターＡａと重なる位置に、別のアバターＸａの画像を表示させることで、アバターＡａを他のアバターＸａに変換するように、表示態様を変えてもよい。すなわち、アバターＡａと重なる位置に、別のアバターＸａが表示されることで、アバターＡａの視認度が低下する。この場合例えば、図６のステップＳ１００ａに示すように、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置していない場合には、アバターＸａは表示されずにアバターＡａが表示される。一方、ステップＳ１０２ａに示すように、アバターＡａの境界領域ＡＲＡ内にアバターＢａが位置する場合、アバターＡａと重なる位置に、アバターＸａが表示される。そして例えば、アバターＡａとアバターＢａとの間の距離Ｌが短くなるに従って、アバターＸａの透明度を低くし（すなわちアバターＸａが鮮明になってゆき）、逆にアバターＡａの透明度を高くしてよい。そして、ステップＳ１０４ａに示すように、アバターＡａとアバターＢａとの距離Ｌが所定値まで近づくと、アバターＡａの画像が完全に透明となり、アバターＡａの位置にアバターＸａの画像のみが表示される。なお、ここでのアバターＸａの姿の画像は、任意に設定されてよく、アバターＡａと異なる任意の姿であってよい。
【0047】
なお、表示態様を異ならせる処理は、透明度を上げることや、別のアバターＸａに変換すること（モーフィング処理）に限られない。例えば、表示態様を異ならせる処理は、アバターＡａの解像度を低下させることであってもよい。
【0048】
（関係条件が所定の条件を満たす場合）
以降では、ユーザＢとユーザＣとの関係情報が所定の条件を満たす場合（すなわちここではユーザＢとユーザＣとが友好関係にある場合）に、ユーザＢのアバターＢａの視野範囲Ｖに他のユーザＣのアバターＣａが入っており、ユーザＢの表示装置１０Ｂに提供するアバターＣａの画像データを生成する場合を例にする。以降の説明は、他のユーザＵ同士にも適用される。
以降では、ユーザＢとユーザＣとの関係情報が所定の条件を満たす場合（すなわちここではユーザＢとユーザＣとが友好関係にある場合）に、ユーザＢのアバターＢａの視野範囲Ｖに他のユーザＣのアバターＣａが入っており、ユーザＢの表示装置１０Ｂに提供するアバターＣａの画像データを生成する場合を例にする。以降の説明は、他のユーザＵ同士にも適用される。
【0049】
画像処理部６６は、関係情報が所定の条件を満たす場合（ここではユーザＢ、Ｃが友好関係にある場合）、アバターＣａの境界領域ＡＲＣ内にアバターＣａが位置している場合における、ユーザＢの表示装置１０Ｂに提供するアバターＣａの画像データの表示態様が、アバターＣａの境界領域ＡＲＣ内にアバターＢａが位置していない場合における、ユーザＢの表示装置１０Ｂに提供するアバターＣａの画像データの表示態様と同じとなるように、表示装置１０Ｂに提供するアバターＣａの画像データを生成する。すなわち図５の例では、アバターＣａの境界領域ＡＲＣの外にアバターＢａが位置しているステップＳ１００及びステップＳ１０２と、アバターＣａの境界領域ＡＲＣ内にアバターＢａが位置しているステップＳ１０４とで、アバターＣａの透明度が同じである（視認性が同じである）。さらに、アバターＣａとアバターＢａとの距離Ｌが近づいても、表示態様は変わらない。従って、友好関係にある場合には、距離ＬによらずアバターＣａが視認可能である。
【0050】
（処理フロー）
次に、画像処理装置１２による画像データ生成の処理フローを説明する。以下では、ユーザＢの表示装置１０Ｂ用に、ユーザＡのアバターＡａの画像データを生成する場合を例にする。図７は、画像処理装置１２による画像データ生成の処理フローを説明するフローチャートである。
次に、画像処理装置１２による画像データ生成の処理フローを説明する。以下では、ユーザＢの表示装置１０Ｂ用に、ユーザＡのアバターＡａの画像データを生成する場合を例にする。図７は、画像処理装置１２による画像データ生成の処理フローを説明するフローチャートである。
【0051】
図７に示すように、画像処理装置１２は、位置情報取得部６０により、アバターの位置情報を取得し（ステップＳ１０）、境界領域取得部６２により、境界領域ＡＲの情報を取得し（ステップＳ１２）、関係情報取得部６４により、関係情報を取得する（ステップＳ１４）。ステップＳ１０、Ｓ１２、Ｓ１４の順番はこれに限られず任意である。その後、画像処理装置１２は、画像処理部６６により、ユーザＡとユーザＢとの関係情報が所定の関係を満たすかを判断し（ステップＳ１６）、所定の関係を満たす場合（ステップＳ１６；Ｙｅｓ）、既存の表示態様で、すなわち例えば透明度を付与せずに、アバターＡａの画像データを生成する（ステップＳ１８）。そして、画像処理装置１２は、アバターＡａの画像データを含む、アバターＢａの視野範囲Ｖに入る仮想空間ＳＶの画像データを、ユーザＢの表示装置１０Ｂに送信する。表示装置１０Ｂは、受信した画像データに基づき、アバターＢａの視野範囲Ｖに入る仮想空間ＳＶの画像を表示する。
【0052】
一方、ユーザＡとユーザＢとの関係情報が所定の関係を満たさない場合（ステップＳ１６；Ｎｏ）、画像処理部６６は、アバターＢａがアバターＡａの境界領域ＡＲＡ内に位置しているかを判断し（ステップＳ２０）、境界領域ＡＲＡ内に位置していない場合（ステップＳ２０；Ｎｏ），ステップＳ１８に進み、既存の表示態様で、すなわち例えば透明度を付与せずに、アバターＡａの画像データを生成する。一方、アバターＢａがアバターＡａの境界領域ＡＲＡ内に位置している場合（ステップＳ２０；Ｙｅｓ）、画像処理部６６は、異なる表示態様で、すなわち例えば透明度を付与して、アバターＡａの画像データを生成する（ステップＳ２２）。そして、画像処理装置１２は、アバターＢａの視野範囲Ｖに入る仮想空間ＳＶの画像データを、ユーザＢの表示装置１０Ｂに送信する。表示装置１０Ｂは、受信した画像データに基づき、アバターＢａの視野範囲Ｖに入る仮想空間ＳＶの画像を表示する。
【0053】
ステップＳ１８、Ｓ２２の後、処理を終了しない場合（ステップＳ２４；Ｎｏ）、ステップＳ１０に戻り処理を続け、処理を終了する場合（ステップＳ２４；Ｙｅｓ）、本処理を終了する。
【0054】
なお、以上の処理は、一対のアバターの組み合わせ毎に実行される。例えば図４において、ユーザＡとユーザＢ、ユーザＢとユーザＣ、ユーザＡとユーザＣとの全ての関係情報が、非友好情報であったとする。そして、アバターＡａは、アバターＣａの境界領域ＡＲＣの範囲外に位置し、かつ視野範囲にアバターＣａが入っているとする。また、アバターＣａは、アバターＡａの境界領域ＡＲＡの範囲内に位置し、かつ視野範囲にアバターＡａが入っているとする。この場合、ユーザＡの表示装置１０Ａに提供される画像には、アバターＣａが写るが、ユーザＣの表示装置１０Ｃに提供される画像には、アバターＡａが写らない。また、ユーザＢのアバターＢａは、ユーザＡのアバターＡａの境界領域ＡＲＡ、及びユーザＣのアバターＣａの境界領域ＡＲＣの範囲外であり、かつ視野範囲にアバターＡａ、Ｃａが入っているとすると、ユーザＢの表示装置１０Ｂに提供される画像には、アバターＡａ、Ｃａの両方が写る。
【0055】
（効果）
以上説明したように、本実施形態に係る画像処理装置１２は、仮想空間ＳＶ用の画像処理を行うものであって、位置情報取得部６０と、境界領域取得部６２と、関係取得部６４と、画像処理部６６とを含む。位置情報取得部６０は、仮想空間ＳＶ内の第１ユーザ（ユーザＡ）の第１アバター（アバターＡａ）と、仮想空間ＳＶ内の第２ユーザ（ユーザＢ）の第２アバター（アバターＢａ）との、仮想空間ＳＶ内における位置の情報を取得する。境界領域取得部６２は、アバターＡａに対して設定された、仮想空間ＳＶ内でのアバターＡａの周囲の領域である第１境界領域（境界領域ＡＲＡ）の情報を取得する。関係情報取得部６４は、ユーザＡとユーザＢとの関係を示す関係情報を取得する。画像処理部６６は、ユーザＢに提供する仮想空間ＳＶ用の画像データを生成する。画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たす場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と同じになるように、ユーザＢに提供する画像データを生成する。一方、画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たさない場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と異なるように、ユーザＢに提供する画像データを生成する。
以上説明したように、本実施形態に係る画像処理装置１２は、仮想空間ＳＶ用の画像処理を行うものであって、位置情報取得部６０と、境界領域取得部６２と、関係取得部６４と、画像処理部６６とを含む。位置情報取得部６０は、仮想空間ＳＶ内の第１ユーザ（ユーザＡ）の第１アバター（アバターＡａ）と、仮想空間ＳＶ内の第２ユーザ（ユーザＢ）の第２アバター（アバターＢａ）との、仮想空間ＳＶ内における位置の情報を取得する。境界領域取得部６２は、アバターＡａに対して設定された、仮想空間ＳＶ内でのアバターＡａの周囲の領域である第１境界領域（境界領域ＡＲＡ）の情報を取得する。関係情報取得部６４は、ユーザＡとユーザＢとの関係を示す関係情報を取得する。画像処理部６６は、ユーザＢに提供する仮想空間ＳＶ用の画像データを生成する。画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たす場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と同じになるように、ユーザＢに提供する画像データを生成する。一方、画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たさない場合には、アバターＢａが境界領域ＡＲＡ内に位置する場合のアバターＡａの表示態様が、アバターＢａが境界領域ＡＲＡ外に位置する場合のアバターＡａの表示態様と異なるように、ユーザＢに提供する画像データを生成する。
【0056】
本実施形態に係る画像処理装置１２によると、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合には、アバターＢａがアバターＡａに近づくと（境界領域ＡＲＡ内に入ったら）、ユーザＢが見る画像におけるアバターＡａの表示態様が変化する。そのため、仮想空間ＳＶにおけるユーザＡのプライバシーを適切に保護できる。
【0057】
また、境界領域取得部６２は、アバターＢａに対して設定された、仮想空間ＳＶ内でのアバターＢａの周囲の領域である第２境界領域（境界領域ＡＲＢ）の情報も取得する。画像処理部６６は、ユーザＡに提供する仮想空間ＳＶ用の画像データを生成する。画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たす場合には、アバターＡａが境界領域ＡＲＢ内に位置する場合のアバターＢａの表示態様が、アバターＡａが境界領域ＡＲＢ外に位置する場合のアバターＢａの表示態様と同じになるように、ユーザＡに提供する画像データを生成する。一方、画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たさない場合には、アバターＡａが境界領域ＡＲＢ内に位置する場合のアバターＢａの表示態様が、アバターＡａが境界領域ＡＲＢ外に位置する場合のアバターＢａの表示態様と異なるように、ユーザＡに提供する画像データを生成する。本実施形態に係る画像処理装置１２によると、ユーザＡに提供する画像データにおけるユーザＢのアバターＢａの表示態様も変えるため、仮想空間ＳＶにおけるユーザＢのプライバシーについても、適切に保護できる。さらに、アバター毎に境界領域を設定しているため、ユーザＵに合わせて、プライバシーの保護度合いを適切に調整できる。
【0058】
画像処理部６６は、ユーザＡとユーザＢとの関係が、ユーザＡとユーザＢとが友好関係にあることを示す場合に、所定の条件を満たすと判断する。本実施形態に係る画像処理装置１２によると、友好関係にある場合には表示態様を変えずに、友好関係にない場合には表示態様を変えることで、プライバシーを保護しつつ、コミュニケーションをサポートできる。
【0059】
画像処理部６６は、ユーザＡとユーザＢとの関係が所定条件を満たさず、かつ、アバターＢａが境界領域ＡＲＡ内に位置する場合には、アバターＡａとアバターＢａとの間の距離が短くなるに従って、アバターＡａの表示態様の変化度合いを大きくする。本実施形態に係る画像処理装置１２によると、アバターＡａに近づくほど表示態様の変化が大きくなるため、ユーザＡのプライバシーを適切に保護できる。
【0060】
画像処理部６６は、アバターＡａの表示態様を異ならせる処理として、アバターＡａを透明化する処理、アバターＡａを他のアバターＸａに変換する処理、及びアバターＡａの画像の解像度を低下させる処理との、少なくとも１つを実行する。本実施形態に係る画像処理装置１２によると、このように表示態様を変化させることで、ユーザＡのプライバシーを適切に保護できる。
【0061】
なお、本実施形態では、画像処理装置１２が、位置情報取得部６０と境界領域取得部６２と関係取得部６４と画像処理部６６の機能を有していたが、表示装置１０がこれらの機能を有していてもよい。すなわち、表示装置１０が、画像処理装置１２として機能してもよく、位置情報取得部６０と境界領域取得部６２と関係取得部６４と画像処理部６６との少なくとも１つを含んで、これらの処理を実行してもよい。
【0062】
（他の例）
以下、画像処理部６６による表示態様を異ならせる処理の他の例を説明する。図８は、アバターの表示態様の他の例を説明する模式図である。ここで、例えばユーザＡ、Ｃが友好関係にあり、ユーザＢ、Ｃが友好関係にあり、ユーザＡ、Ｂが非友好関係であるとする。そして、図８の（Ａ）に示すように、ユーザＢのアバターＢａが、ユーザＡのアバターＡａの境界領域ＡＲＡとユーザＣのアバターＣａの境界領域ＡＲＣとの両方に入っているとする。この場合、本実施形態の説明では、ユーザＢの表示装置１０Ｂには、友好関係にあるアバターＣａが写るが、非友好関係にあるアバターＡａが写らない。このようなケースで、例えばユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていた場合、表示装置１０Ｂには、アバターＣａが一人でコミュニケーションを取っている画像が写り、違和感が生じるおそれがある。そのため、本例では、画像処理部６６は、このようなケースにおいて、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断した場合には、アバターＡａの表示態様の変化度合いを小さくしてよい。すなわち例えば、図８の（Ａ）に示すように、アバターＢａがアバターＡａの境界領域ＡＲＡに入っていた場合と、アバターＢａがアバターＡａの境界領域ＡＲＡに入っていない場合との表示態様の変化度合い（ここでは透明度）を小さくしてもよいし、表示態様を変化させなく（ここでは非透明に）してもよい。これにより、表示装置１０ＢにアバターＡａも写るため、違和感を解消できる。また例えば、画像処理部６６は、図８の（Ｂ）に示すように、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断した場合には、アバターＡａの境界領域ＡＲＡの大きさを小さくしてもよい。これにより、かなり近づかなければアバターＡａが透明にならないため、違和感を解消できる。
以下、画像処理部６６による表示態様を異ならせる処理の他の例を説明する。図８は、アバターの表示態様の他の例を説明する模式図である。ここで、例えばユーザＡ、Ｃが友好関係にあり、ユーザＢ、Ｃが友好関係にあり、ユーザＡ、Ｂが非友好関係であるとする。そして、図８の（Ａ）に示すように、ユーザＢのアバターＢａが、ユーザＡのアバターＡａの境界領域ＡＲＡとユーザＣのアバターＣａの境界領域ＡＲＣとの両方に入っているとする。この場合、本実施形態の説明では、ユーザＢの表示装置１０Ｂには、友好関係にあるアバターＣａが写るが、非友好関係にあるアバターＡａが写らない。このようなケースで、例えばユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていた場合、表示装置１０Ｂには、アバターＣａが一人でコミュニケーションを取っている画像が写り、違和感が生じるおそれがある。そのため、本例では、画像処理部６６は、このようなケースにおいて、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断した場合には、アバターＡａの表示態様の変化度合いを小さくしてよい。すなわち例えば、図８の（Ａ）に示すように、アバターＢａがアバターＡａの境界領域ＡＲＡに入っていた場合と、アバターＢａがアバターＡａの境界領域ＡＲＡに入っていない場合との表示態様の変化度合い（ここでは透明度）を小さくしてもよいし、表示態様を変化させなく（ここでは非透明に）してもよい。これにより、表示装置１０ＢにアバターＡａも写るため、違和感を解消できる。また例えば、画像処理部６６は、図８の（Ｂ）に示すように、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断した場合には、アバターＡａの境界領域ＡＲＡの大きさを小さくしてもよい。これにより、かなり近づかなければアバターＡａが透明にならないため、違和感を解消できる。
【0063】
なお、本例において、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っているか判断する方法は、任意であってよい。例えば、ユーザＡ、Ｃが、他のユーザには非公開の形で、表示装置１０Ａ、画像処理装置１２、及び表示装置１０Ｃを介して、情報の送受信を行っている場合に、画像処理装置１２は、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断してよい。また例えば、画像処理装置１２は、仮想空間ＳＶにおいて、アバターＡａとアバターＣａとが互いに対面した状態が所定時間以上続く場合に、ユーザＡ、ＣがアバターＡａ、Ｃａを介してコミュニケーションを取っていると判断してよい。
【0064】
次に、別の例について説明する。本実施形態においては、あるアバターの境界領域ＡＲに非友好関係のアバターが入っている場合には、非友好関係のユーザの表示装置１０には、そのアバターが写らなくなる。しかし例えば、不特定多数のユーザとコミュニケーションすることが望まれるケースがあり、この場合には、非友好関係のユーザの表示装置１０からアバターが消えてしまうと、アバターを介して不特定多数のユーザとコミュニケーションすることができない。それに対して、本例では、仮想空間ＳＶ内に、境界領域ＡＲに他のアバターが入っている場合でも表示態様を変化させない領域（空間）である開放領域を設定する。例えば、ユーザＡ、Ｂが非友好関係であり、ユーザＡ、Ｃが非友好関係にあり、かつ、アバターＡａの境界領域ＡＲＡ内にアバターＢａ、Ｃａが入っていたとする。この場合であっても、アバターＡａが開放領域に入っていた場合には、画像処理装置１２は、ユーザＢ、Ｃの表示装置１０Ｂ、１０Ｃ用の画像において、アバターＡａの画像を透明とすることなく、アバターＡａの画像を既存の表示態様で表示させる。なお、仮想空間ＳＶ内での開放領域の位置情報は、画像処理装置１２から表示装置１０を介して、各ユーザＵに予め通知することが好ましい。これにより、ユーザＵは、不特定多数のユーザとコミュニケーションしたい場合には、アバターを開放領域に移動させ、プライバシーを保護したい場合には、アバターを開放領域に移動させなければよい。
【0065】
次に、さらに別の例について説明する。本実施形態においては、アバターＡａの設定領域ＡＲＡ内にアバターＢａが入っているか否かで、表示態様を異ならせるかを判断していたが、判断手法はそれに限られず、例えば、アバターＢａがアバターＡａを注視した時間にも基づき、表示態様を異ならせるかを判断してよい。この場合例えば、画像処理部６６は、ユーザＡとユーザＢとの関係情報が所定の条件を満たさない場合には、アバターＢａがアバターＡａの境界領域ＡＲＡ内に位置するかを判断しつつ（すなわち距離Ｌが境界領域ＡＲＡの半径の距離Ｄ以下であるかを判断しつつ）、アバターＢａの視線がアバターＡａの位置と重なるかを判断する。アバターＢａの視線は、アバターＢａの向きに基づき適宜設定されてよく、例えば視野範囲Ｖの中心を通る直線でも良いし、アバターＢａから円錐状に広がりを持っていても良いし円錐以外の形状で広がりを持っても良い。画像処理部６６は、アバターＢａの視線がアバターＡａの位置と重なっている時間が閾値を超えるかを判断する。そして、画像処理部６６は、ユーザＡとユーザＢとの関係情報が所定の条件を満たさず、アバターＢａがアバターＡａの境界領域ＡＲＡ内に位置し、かつ、アバターＢａの視線がアバターＡａの位置と重なっている時間が閾値を超えた場合に、表示態様を異ならせると判断する。
【0066】
以上、本発明の実施形態を説明したが、これら実施形態の内容により実施形態が限定されるものではない。また、前述した構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。さらに、前述した構成要素は適宜組み合わせることが可能であり、各実施形態の構成を組み合わせることも可能である。さらに、前述した実施形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換又は変更を行うことができる。
【符号の説明】
【0067】
１０ 表示装置
１２ 画像処理装置
２２ 表示部
６０ 位置情報取得部
６２ 境界領域取得部
６４ 関係取得部
６６ 画像処理部
Ａ、Ｂ、Ｃ ユーザ
Ａａ、Ｂａ、Ｃａ アバター
ＡＲＡ、ＡＲＢ、ＡＲＣ 境界領域
ＳＶ 仮想空間
１２ 画像処理装置
２２ 表示部
６０ 位置情報取得部
６２ 境界領域取得部
６４ 関係取得部
６６ 画像処理部
Ａ、Ｂ、Ｃ ユーザ
Ａａ、Ｂａ、Ｃａ アバター
ＡＲＡ、ＡＲＢ、ＡＲＣ 境界領域
ＳＶ 仮想空間
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】