特許 7697410 プログラム及び通信方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-06-16

(45)【発行日】2025-06-24

(54)【発明の名称】プログラム及び通信方法

(51)【国際特許分類】

   H04N 7/15 20060101AFI20250617BHJP

   G06F 3/0484 20220101ALI20250617BHJP

【ＦＩ】

H04N7/15

G06F3/0484

【請求項の数】 10

(21)【出願番号】P 2022081180

(22)【出願日】2022-05-17

(65)【公開番号】P2023169831

(43)【公開日】2023-11-30

【審査請求日】2024-02-08

(73)【特許権者】

【識別番号】000003207

【氏名又は名称】トヨタ自動車株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100139491

【弁理士】

【氏名又は名称】河合 隆慶

(74)【代理人】

【識別番号】100176728

【弁理士】

【氏名又は名称】北村 慎吾

(72)【発明者】

【氏名】堀 達朗

【審査官】大西 宏

(56)【参考文献】

【文献】特開２００４－１７１３５６（ＪＰ，Ａ）

【文献】特開２０１２－１６９６９４（ＪＰ，Ａ）

【文献】特開２０１５－１１５７２３（ＪＰ，Ａ）

【文献】特開２０１８－０１９３３８（ＪＰ，Ａ）

【文献】特開２０２０－０４３５３３（ＪＰ，Ａ）

【文献】特開２０２０－０９２４２４（ＪＰ，Ａ）

【文献】特開２０２２－０３２８１２（ＪＰ，Ａ）

【文献】特開２０２２－０６９２１１（ＪＰ，Ａ）

【文献】特表２０１０－５４１３９８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１４ － ７／１７３

Ｇ０６Ｆ ３／０４８－ ３／０４８９

(57)【特許請求の範囲】

【請求項1】

第１ユーザがいる第１空間で撮影された、前記第１ユーザの撮影画像を含む前記第１空間の第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成するコンピュータに、
生成された第２画像を、ネットワークを介して送信することと、
前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
スキャンされた物体の画像を、前記ネットワークを介して送信することと
を含む動作を実行させるプログラム。

【請求項2】

前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが手で持っている物体を検知することを含む請求項１に記載のプログラム。

【請求項3】

前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが手を近づけている物体を検知することを含む請求項１に記載のプログラム。

【請求項4】

前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが見ている物体を検知することを含む請求項１に記載のプログラム。

【請求項5】

前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが指さしている物体を検知することを含む請求項１に記載のプログラム。

【請求項6】

前記合図は、前記第１ユーザの声による指示を含む請求項１に記載のプログラム。

【請求項7】

前記合図は、前記第１ユーザの動きによる指示を含む請求項１に記載のプログラム。

【請求項8】

前記動作は、
前記物体の、前記第１ユーザが注目している箇所を特定することと、
特定された箇所を示す注目情報を、前記ネットワークを介して送信することと
を更に含む請求項１に記載のプログラム。

【請求項9】

第１ユーザがいる第１空間で撮影された、前記第１ユーザの撮影画像を含む前記第１空間の第１画像から背景を除去して第２画像を生成する端末装置であって、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンする端末装置により生成された第２画像を、ネットワークを介して受信することと、
受信された第２画像を、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示することと、
前記端末装置によりスキャンされた物体の画像を、前記ネットワークを介して受信することと、
受信された前記物体の画像を前記第２ユーザに向けて表示することと
を含む動作をコンピュータに実行させ、
前記動作は、前記物体の、前記第１ユーザが注目している箇所を示す注目情報を、前記ネットワークを介して受信することを更に含み、
前記物体の画像は、３次元画像であり、
前記表示することは、前記物体の画像を回転又は移動させて、前記物体の画像の、受信された注目情報で示される箇所に対応する位置を前記第２ユーザに向けて表示することを含むプログラム。

【請求項10】

第１ユーザがいる第１空間で撮影された、前記第１ユーザの撮影画像を含む前記第１空間の第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成する端末装置から、生成された第２画像を、ネットワークを介して送信することと、
前記端末装置により、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
前記端末装置から、スキャンされた物体の画像を、前記ネットワークを介して送信することと
を含む通信方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、プログラム及び通信方法に関する。

【背景技術】

【0002】

特許文献１には、ビデオ会議ストリーム内の背景を抽出してユーザから分離し、分離された背景を、別のユーザのシステムから受信した背景又は事前に記録された背景に置き換えるシステムが開示されている。

【0003】

特許文献２に開示されているシステムでは、第１の端末が、カメラによって撮影された動画像を第２の端末に送信する。第２の端末が、受信した動画像をディスプレイに表示し、当該動画像に対する指示をユーザに書き込ませる。第２の端末が、書き込まれた指示の画像と、当該指示の画像に対応する範囲で動画像をトリミングして得られた静止画像とを第１の端末に送信する。第１の端末が、受信した静止画像の射影変換又は姿勢変換を行いながら、カメラによって撮影された動画像の、当該静止画像と一致する部分を抽出する。第１の端末が、抽出した部分に静止画像と同じ射影変換又は姿勢変換を行った指示の画像を重畳させた動画像をディスプレイに表示する。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０２０－０９２４２４号公報

【文献】特開２０１５－１１５７２３号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

従来のシステムでは、ユーザが目の前にある物体をビデオ会議で相手に見せようとしても、物体が背景の一部とみなされて除去されてしまうおそれがある。

【0006】

本開示の目的は、ユーザが映像を使ったコミュニケーションを行っている相手に対し、背景除去機能を有効にしていても目の前にある物体を見せられるようにすることである。

【課題を解決するための手段】

【0007】

本開示に係るプログラムは、
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成するコンピュータに、
前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
スキャンされた物体の画像を前記第２画像とともにネットワークを介して送信することと
を含む動作を実行させる。

【0008】

本開示に係る別のプログラムは、
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して第２画像を生成する端末装置であって、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンする端末装置によりスキャンされた物体の画像を前記第２画像とともにネットワークを介して受信することと、
受信された前記物体の画像を前記第２画像とともに前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示することと
を含む動作をコンピュータに実行させる。

【0009】

本開示に係る通信方法は、
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成する端末装置により、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
前記端末装置から、スキャンされた物体の画像を前記第２画像とともにネットワークを介して送信することと
を含む。

【発明の効果】

【0010】

本開示によれば、ユーザが映像を使ったコミュニケーションを行っている相手に対し、背景除去機能を有効にしていても目の前にある物体を見せることができる。

【図面の簡単な説明】

【0011】

【図1】本開示の実施形態に係る通信システムの構成を示すブロック図である。

【図2】第１ユーザが両手で物体を保持している例を示す図である。

【図3】第２ユーザが物体の画像を見ている例を示す図である。

【図4】第２ユーザが物体の画像を見ている別の例を示す図である。

【図5】本開示の実施形態に係る第１端末装置の動作を示すフローチャートである。

【図6】本開示の実施形態に係る第２端末装置の動作を示すフローチャートである。

【図7】本開示の実施形態に係る第２端末装置の動作の変形例を示すフローチャートである。

【発明を実施するための形態】

【0012】

以下、本開示の一実施形態について、図を参照して説明する。

【0013】

各図中、同一又は相当する部分には、同一符号を付している。本実施形態の説明において、同一又は相当する部分については、説明を適宜省略又は簡略化する。

【0014】

図１から図３を参照して、本実施形態に係る通信システム１０の構成を説明する。

【0015】

通信システム１０は、サーバ装置２０と、第１端末装置３０と、第２端末装置４０とを備える。サーバ装置２０は、ネットワーク５０を介して第１端末装置３０及び第２端末装置４０と通信可能である。第１端末装置３０は、ネットワーク５０を介して第２端末装置４０と通信可能であってもよい。

【0016】

サーバ装置２０は、データセンタなどの施設に設置され、サービス事業者によって運用される。サーバ装置２０は、クラウドコンピューティングシステム又はその他のコンピューティングシステムに属するサーバコンピュータである。

【0017】

第１端末装置３０は、第１ユーザ１３がいる第１空間１１に設置され、第１ユーザ１３によって使用される。第１空間１１は、例えば、第１ユーザ１３の自宅又はオフィスである。第１端末装置３０は、例えば、ＰＣなどの汎用コンピュータ、特定の計算に特化した専用コンピュータ、又は携帯電話機、スマートフォン、若しくはタブレットなどのモバイル機器である。「ＰＣ」は、personal computerの略語である。

【0018】

第２端末装置４０は、第２ユーザ１４がいる、第１空間１１とは別個の第２空間１２に設置され、第２ユーザ１４によって使用される。第２空間１２は、例えば、第２ユーザ１４の自宅又はオフィスである。第２端末装置４０は、例えば、ＰＣなどの汎用コンピュータ、特定の計算に特化した専用コンピュータ、又は携帯電話機、スマートフォン、若しくはタブレットなどのモバイル機器である。

【0019】

ネットワーク５０は、インターネット、少なくとも１つのＷＡＮ、少なくとも１つのＭＡＮ、又はこれらの任意の組合せを含む。「ＷＡＮ」は、wide area networkの略語である。「ＭＡＮ」は、metropolitan area networkの略語である。ネットワーク５０は、少なくとも１つの無線ネットワーク、少なくとも１つの光ネットワーク、又はこれらの任意の組合せを含んでもよい。無線ネットワークは、例えば、アドホックネットワーク、セルラーネットワーク、無線ＬＡＮ、衛星通信ネットワーク、又は地上マイクロ波ネットワークである。「ＬＡＮ」は、local area networkの略語である。

【0020】

図１から図３を参照して、本実施形態の概要を説明する。

【0021】

第１端末装置３０は、第１空間１１で撮影された第１画像Ｍ１から背景を除去して、第２空間１２にいる第２ユーザ１４に向けて表示される第２画像Ｍ２を生成する端末装置である。第１端末装置３０は、第１ユーザ１３の合図を検知すると、第１空間１１にある物体１５をスキャンする。第１端末装置３０は、スキャンした物体１５の画像Ｍ３を第２画像Ｍ２とともにネットワーク５０を介して送信する。物体１５は、図２に示すような車両の模型に限らず、メモ若しくはその他の書類、又は食品若しくはその他の商品など、任意の有体物でよい。

【0022】

第２端末装置４０は、第１端末装置３０によりスキャンされた物体１５の画像Ｍ３を第２画像Ｍ２とともにネットワーク５０を介して受信する。第２端末装置４０は、受信した物体１５の画像Ｍ３を第２画像Ｍ２とともに第２ユーザ１４に向けて表示する。

【0023】

本実施形態によれば、第１ユーザ１３が映像を使ったコミュニケーションを行っている相手に対し、背景除去機能を有効にしていても目の前にある物体１５を見せることができる。例えば、第１ユーザ１３が目の前にある物体１５をビデオ会議で相手に見せようとしたときに、物体１５が背景の一部とみなされて除去されることを回避できる。

【0024】

本実施形態では、第１端末装置３０は、物体１５の、第１ユーザ１３が注目している箇所を特定する。第１端末装置３０は、特定した箇所を示す注目情報Ａ１を、ネットワーク５０を介して送信する。

【0025】

第２端末装置４０は、注目情報Ａ１を、ネットワーク５０を介して受信する。第２端末装置４０は、物体１５の画像Ｍ３の、受信した注目情報Ａ１で示される箇所に対応する位置に印１６を表示する。

【0026】

本実施形態によれば、第１ユーザ１３が映像を使ったコミュニケーションを行っている相手に対し、第１ユーザ１３が注目している箇所を簡単に伝えることができる。例えば、第１ユーザ１３が物体１５の注目している箇所をビデオ会議で相手に伝えたいときに、当該箇所を書き込む必要がなくなる。

【0027】

図２の例では、第１端末装置３０は、カメラ３６を用いて、第１画像Ｍ１として、ウェブ会議中の第１ユーザ１３を含む第１空間１１の映像を撮影する。第１端末装置３０は、第２画像Ｍ２として、撮影した映像から背景を除去して得られた映像を、ネットワーク５０を介してサーバ装置２０に送信する。第１端末装置３０は、ウェブ会議中の第２ユーザ１４を含む第２空間１２の映像、又はその映像から背景を除去して得られた映像を、ネットワーク５０を介してサーバ装置２０から受信する。第１端末装置３０は、受信した映像をディスプレイ３７に表示する。第１端末装置３０は、第１ユーザ１３の合図を検知すると、カメラ３６を用いて、第１空間１１にある物体１５として、第１ユーザ１３が注目した車両の模型をスキャンする。例えば、第１ユーザ１３が車両の模型を両手で保持するか、両手の周辺領域に置くか、目視するか、又は指さした場合に、第１ユーザ１３が車両の模型に注目したとみなされる。第１端末装置３０は、物体１５の画像Ｍ３として、スキャンした車両の模型の画像を、ネットワーク５０を介してサーバ装置２０に送信する。

【0028】

サーバ装置２０は、第１空間１１の映像から背景を除去して得られた映像を、ネットワーク５０を介して第１端末装置３０から受信し、受信した映像を適宜加工した上で、ネットワーク５０を介して第２端末装置４０に送信する。サーバ装置２０は、第２空間１２の映像、又はその映像から背景を除去して得られた映像を、ネットワーク５０を介して第２端末装置４０から受信し、受信した映像を適宜加工した上で、ネットワーク５０を介して第１端末装置３０に送信する。サーバ装置２０は、車両の模型の画像を、ネットワーク５０を介して第１端末装置３０から受信すると、受信した画像を適宜加工した上で、ネットワーク５０を介して第２端末装置４０に送信する。

【0029】

図３の例では、第２端末装置４０は、カメラ４６を用いて、ウェブ会議中の第２ユーザ１４を含む第２空間１２の映像を撮影する。第２端末装置４０は、撮影した映像、又は撮影した映像から背景を除去して得られた映像を、ネットワーク５０を介してサーバ装置２０に送信する。第２端末装置４０は、ウェブ会議中の第１ユーザ１３を含む第１空間１１の映像から背景を除去して得られた映像を、ネットワーク５０を介してサーバ装置２０から受信する。第２端末装置４０は、受信した映像をディスプレイ４７に表示する。第２端末装置４０は、車両の模型の画像を、ネットワーク５０を介してサーバ装置２０から受信すると、受信した画像をディスプレイ４７に表示する。

【0030】

図２及び図３の例によれば、ウェブ会議において、発表者が目の前にある物体１５を、ウェブ会議ツールで特別な操作を行うことなく簡単に相手側に表示させることができる。

【0031】

図２の例では、第１端末装置３０は、カメラ３６を用いて、第１ユーザ１３の顔の向き、視線、又は指の向きを検知して、第１ユーザ１３が車両の模型のどこに注目しているかを認識する。第１端末装置３０は、注目情報Ａ１として、第１ユーザ１３が車両の模型のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０に通知する。

【0032】

サーバ装置２０は、第１ユーザ１３が車両の模型のどこに注目しているかを、ネットワーク５０を介して第１端末装置３０から通知されると、第１ユーザ１３が車両の模型のどこに注目しているかを、ネットワーク５０を介して第２端末装置４０に通知する。

【0033】

図３の例では、第２端末装置４０は、第１ユーザ１３が車両の模型のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、第１ユーザ１３が車両の模型のどこに注目しているかが第２ユーザ１４に分かるように、印１６として破線の枠を、ディスプレイ４７に表示している車両の模型の画像上に表示する。

【0034】

図２及び図３の例によれば、ウェブ会議において、発表者が相手と共有している物体１５のどこを説明しているかを、ウェブ会議ツールで特別な操作を行うことなく簡単に相手に認識させることができる。

【0035】

物体１５の画像Ｍ３は、２次元画像でもよいし、又は３次元画像でもよい。物体１５の画像Ｍ３が３次元画像である場合に、図４に示すように、第２端末装置４０は、物体１５の画像Ｍ３を回転又は移動させて、物体１５の画像Ｍ３の、受信した注目情報Ａ１で示される箇所に対応する位置を第２ユーザ１４に向けて表示してもよい。そのような変形例によれば、印１６を表示しなくても、第１ユーザ１３が映像を使ったコミュニケーションを行っている相手に対し、第１ユーザ１３が注目している箇所を簡単に伝えることができる。

【0036】

図４の例では、第２端末装置４０は、第１ユーザ１３が車両の模型のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、車両の模型の、第１ユーザ１３が注目している箇所が第２ユーザ１４に見えるように、ディスプレイ４７に表示している車両の模型の画像を回転又は移動させる。

【0037】

第１端末装置３０によりスキャンされた物体１５の画像Ｍ３は、第２端末装置４０だけでなく、第１端末装置３０でも表示されてよい。そのような変形例において、第１端末装置３０は、スキャンした物体１５の画像Ｍ３を第１ユーザ１３に向けて表示する。

【0038】

例えば、第１端末装置３０は、車両の模型の画像をディスプレイ３７に表示する。

【0039】

更なる変形例として、第１端末装置３０は、ディスプレイ３７に表示している物体１５の画像Ｍ３の、第１ユーザ１３が注目している箇所を特定し、特定した箇所を示す注目情報Ａ２を、ネットワーク５０を介して送信してもよい。そのような変形例において、第２端末装置４０は、注目情報Ａ２を、ネットワーク５０を介して受信する。第２端末装置４０は、物体１５の画像Ｍ３の、受信した注目情報Ａ２で示される箇所に対応する位置に印を表示する。あるいは、物体１５の画像Ｍ３が３次元画像である場合に、第２端末装置４０は、物体１５の画像Ｍ３を回転又は移動させて、物体１５の画像Ｍ３の、受信した注目情報Ａ２で示される箇所に対応する位置を第２ユーザ１４に向けて表示してもよい。

【0040】

例えば、第１端末装置３０は、カメラ３６を用いて、第１ユーザ１３の顔の向き、視線、又は指の向きを検知して、第１ユーザ１３が車両の模型の画像のどこに注目しているかを認識する。第１端末装置３０は、注目情報Ａ２として、第１ユーザ１３が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０に通知する。

【0041】

サーバ装置２０は、第１ユーザ１３が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介して第１端末装置３０から通知されると、第１ユーザ１３が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介して第２端末装置４０に通知する。

【0042】

第２端末装置４０は、第１ユーザ１３が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、第１ユーザ１３が車両の模型の画像のどこに注目しているかが第２ユーザ１４に分かるように、印として破線の枠を、ディスプレイ４７に表示している車両の模型の画像上に表示する。あるいは、第２端末装置４０は、第１ユーザ１３が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、車両の模型の画像の、第１ユーザ１３が注目している箇所が第２ユーザ１４に見えるように、ディスプレイ４７に表示している車両の模型の画像を回転又は移動させてもよい。

【0043】

更なる別の変形例として、第１端末装置３０は、物体１５の画像Ｍ３の、第２ユーザ１４が注目している箇所を示す注目情報Ａ３を、ネットワーク５０を介して受信し、ディスプレイ３７に表示している物体１５の画像Ｍ３の、受信した注目情報Ａ３で示される箇所に対応する位置に印を表示してもよい。あるいは、物体１５の画像Ｍ３が３次元画像である場合に、第１端末装置３０は、注目情報Ａ３を、ネットワーク５０を介して受信し、ディスプレイ３７に表示している物体１５の画像Ｍ３を回転又は移動させて、物体１５の画像Ｍ３の、受信した注目情報Ａ３で示される箇所に対応する位置を第１ユーザ１３に向けて表示してもよい。

【0044】

例えば、第２端末装置４０は、カメラ４６を用いて、第２ユーザ１４の顔の向き、視線、又は指の向きを検知して、第２ユーザ１４が車両の模型の画像のどこに注目しているかを認識する。第２端末装置４０は、注目情報Ａ３として、第２ユーザ１４が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０に通知する。

【0045】

サーバ装置２０は、第２ユーザ１４が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介して第２端末装置４０から通知されると、第２ユーザ１４が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介して第１端末装置３０に通知する。

【0046】

第１端末装置３０は、第２ユーザ１４が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、第２ユーザ１４が車両の模型の画像のどこに注目しているかが第１ユーザ１３に分かるように、印として破線の枠を、ディスプレイ３７に表示している車両の模型の画像上に表示する。あるいは、第１端末装置３０は、第２ユーザ１４が車両の模型の画像のどこに注目しているかを、ネットワーク５０を介してサーバ装置２０から通知されると、車両の模型の画像の、第２ユーザ１４が注目している箇所が第１ユーザ１３に見えるように、ディスプレイ３７に表示している車両の模型の画像を回転又は移動させてもよい。

【0047】

この例によれば、ウェブ会議において、参加者が相手と共有している物体１５のどこを見ているかを、ウェブ会議ツールで特別な操作を行うことなく簡単に相手に認識させることができる。

【0048】

図１を参照して、本実施形態に係る第１端末装置３０の構成を説明する。

【0049】

第１端末装置３０は、制御部３１と、記憶部３２と、通信部３３と、入力部３４と、出力部３５とを備える。

【0050】

制御部３１は、少なくとも１つのプロセッサ、少なくとも１つのプログラマブル回路、少なくとも１つの専用回路、又はこれらの任意の組合せを含む。プロセッサは、ＣＰＵ若しくはＧＰＵなどの汎用プロセッサ、又は特定の処理に特化した専用プロセッサである。「ＣＰＵ」は、central processing unitの略語である。「ＧＰＵ」は、graphics processing unitの略語である。プログラマブル回路は、例えば、ＦＰＧＡである。「ＦＰＧＡ」は、field-programmable gate arrayの略語である。専用回路は、例えば、ＡＳＩＣである。「ＡＳＩＣ」は、application specific integrated circuitの略語である。制御部３１は、第１端末装置３０の各部を制御しながら、第１端末装置３０の動作に関わる処理を実行する。

【0051】

記憶部３２は、少なくとも１つの半導体メモリ、少なくとも１つの磁気メモリ、少なくとも１つの光メモリ、又はこれらの任意の組合せを含む。半導体メモリは、例えば、ＲＡＭ、ＲＯＭ、又はフラッシュメモリである。「ＲＡＭ」は、random access memoryの略語である。「ＲＯＭ」は、read only memoryの略語である。ＲＡＭは、例えば、ＳＲＡＭ又はＤＲＡＭである。「ＳＲＡＭ」は、static random access memoryの略語である。「ＤＲＡＭ」は、dynamic random access memoryの略語である。ＲＯＭは、例えば、ＥＥＰＲＯＭである。「ＥＥＰＲＯＭ」は、electrically erasable programmable read only memoryの略語である。フラッシュメモリは、例えば、ＳＳＤである。「ＳＳＤ」は、solid-state driveの略語である。磁気メモリは、例えば、ＨＤＤである。「ＨＤＤ」は、hard disk driveの略語である。記憶部３２は、例えば、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部３２には、第１端末装置３０の動作に用いられるデータと、第１端末装置３０の動作によって得られたデータとが記憶される。

【0052】

通信部３３は、少なくとも１つの通信用インタフェースを含む。通信用インタフェースは、例えば、Ethernet（登録商標）などの有線ＬＡＮ通信規格に対応したインタフェース、ＩＥＥＥ８０２．１１などの無線ＬＡＮ通信規格、又はＬＴＥ、４Ｇ規格、若しくは５Ｇ規格などの移動通信規格に対応したインタフェースである。「ＩＥＥＥ」は、Institute of Electrical and Electronics Engineersの略称である。「ＬＴＥ」は、Long Term Evolutionの略語である。「４Ｇ」は、4th generationの略語である。「５Ｇ」は、5th generationの略語である。通信部３３は、サーバ装置２０と通信を行う。通信部３３は、第２端末装置４０とも通信を行ってよい。通信部３３は、第１端末装置３０の動作に用いられるデータを受信し、また第１端末装置３０の動作によって得られるデータを送信する。

【0053】

入力部３４は、少なくとも１つの入力用インタフェースを含む。入力用インタフェースは、例えば、物理キー、静電容量キー、ポインティングデバイス、ディスプレイ３７と一体的に設けられたタッチスクリーン、カメラ３６、ＬｉＤＡＲ、又はマイクロフォンである。「ＬｉＤＡＲ」は、light detection and rangingの略語である。カメラ３６は、例えば、ＲＧＢカメラ、又はＲＧＢカメラとデプスカメラとの組合せである。入力部３４は、第１端末装置３０の動作に用いられるデータを入力する操作を受け付ける。入力部３４は、第１端末装置３０に備えられる代わりに、外部の入力機器として第１端末装置３０に接続されてもよい。接続用インタフェースとしては、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）などの規格に対応したインタフェースを用いることができる。「ＵＳＢ」は、Universal Serial Busの略語である。「ＨＤＭＩ（登録商標）」は、High-Definition Multimedia Interfaceの略語である。

【0054】

出力部３５は、少なくとも１つの出力用インタフェースを含む。出力用インタフェースは、例えば、ディスプレイ３７又はスピーカである。ディスプレイ３７は、例えば、ＬＣＤ又は有機ＥＬディスプレイである。「ＬＣＤ」は、liquid crystal displayの略語である。「ＥＬ」は、electro luminescentの略語である。出力部３５は、第１端末装置３０の動作によって得られるデータを出力する。出力部３５は、第１端末装置３０に備えられる代わりに、外部の出力機器として第１端末装置３０に接続されてもよい。接続用インタフェースとしては、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）などの規格に対応したインタフェースを用いることができる。

【0055】

第１端末装置３０の機能は、本実施形態に係るプログラムを、制御部３１としてのプロセッサで実行することにより実現される。すなわち、第１端末装置３０の機能は、ソフトウェアにより実現される。プログラムは、第１端末装置３０の動作をコンピュータに実行させることで、コンピュータを第１端末装置３０として機能させる。すなわち、コンピュータは、プログラムに従って第１端末装置３０の動作を実行することにより第１端末装置３０として機能する。

【0056】

プログラムは、非一時的なコンピュータ読取り可能な媒体に記憶しておくことができる。非一時的なコンピュータ読取り可能な媒体は、例えば、フラッシュメモリ、磁気記録装置、光ディスク、光磁気記録媒体、又はＲＯＭである。プログラムの流通は、例えば、プログラムを記憶したＳＤカード、ＤＶＤ、又はＣＤ－ＲＯＭなどの可搬型媒体を販売、譲渡、又は貸与することによって行う。「ＳＤ」は、Secure Digitalの略語である。「ＤＶＤ」は、digital versatile discの略語である。「ＣＤ－ＲＯＭ」は、compact disc read only memoryの略語である。プログラムをサーバのストレージに格納しておき、サーバから他のコンピュータにプログラムを転送することにより、プログラムを流通させてもよい。プログラムをプログラムプロダクトとして提供してもよい。

【0057】

コンピュータは、例えば、可搬型媒体に記憶されたプログラム又はサーバから転送されたプログラムを、一旦、主記憶装置に格納する。そして、コンピュータは、主記憶装置に格納されたプログラムをプロセッサで読み取り、読み取ったプログラムに従った処理をプロセッサで実行する。コンピュータは、可搬型媒体から直接プログラムを読み取り、プログラムに従った処理を実行してもよい。コンピュータは、コンピュータにサーバからプログラムが転送される度に、逐次、受け取ったプログラムに従った処理を実行してもよい。サーバからコンピュータへのプログラムの転送は行わず、実行指示及び結果取得のみによって機能を実現する、いわゆるＡＳＰ型のサービスによって処理を実行してもよい。「ＡＳＰ」は、application service providerの略語である。プログラムは、電子計算機による処理の用に供する情報であってプログラムに準ずるものを含む。例えば、コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータは、「プログラムに準ずるもの」に該当する。

【0058】

第１端末装置３０の一部又は全ての機能が、制御部３１としてのプログラマブル回路又は専用回路により実現されてもよい。すなわち、第１端末装置３０の一部又は全ての機能が、ハードウェアにより実現されてもよい。

【0059】

図１を参照して、本実施形態に係る第２端末装置４０の構成を説明する。

【0060】

第２端末装置４０は、制御部４１と、記憶部４２と、通信部４３と、入力部４４と、出力部４５とを備える。

【0061】

制御部４１は、少なくとも１つのプロセッサ、少なくとも１つのプログラマブル回路、少なくとも１つの専用回路、又はこれらの任意の組合せを含む。プロセッサは、ＣＰＵ若しくはＧＰＵなどの汎用プロセッサ、又は特定の処理に特化した専用プロセッサである。プログラマブル回路は、例えば、ＦＰＧＡである。専用回路は、例えば、ＡＳＩＣである。制御部４１は、第２端末装置４０の各部を制御しながら、第２端末装置４０の動作に関わる処理を実行する。

【0062】

記憶部４２は、少なくとも１つの半導体メモリ、少なくとも１つの磁気メモリ、少なくとも１つの光メモリ、又はこれらの任意の組合せを含む。半導体メモリは、例えば、ＲＡＭ、ＲＯＭ、又はフラッシュメモリである。ＲＡＭは、例えば、ＳＲＡＭ又はＤＲＡＭである。ＲＯＭは、例えば、ＥＥＰＲＯＭである。フラッシュメモリは、例えば、ＳＳＤである。磁気メモリは、例えば、ＨＤＤである。記憶部４２は、例えば、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部４２には、第２端末装置４０の動作に用いられるデータと、第２端末装置４０の動作によって得られたデータとが記憶される。

【0063】

通信部４３は、少なくとも１つの通信用インタフェースを含む。通信用インタフェースは、例えば、Ethernet（登録商標）などの有線ＬＡＮ通信規格に対応したインタフェース、ＩＥＥＥ８０２．１１などの無線ＬＡＮ通信規格、又はＬＴＥ、４Ｇ規格、若しくは５Ｇ規格などの移動通信規格に対応したインタフェースである。通信部４３は、サーバ装置２０と通信を行う。通信部４３は、第１端末装置３０とも通信を行ってよい。通信部４３は、第２端末装置４０の動作に用いられるデータを受信し、また第２端末装置４０の動作によって得られるデータを送信する。

【0064】

入力部４４は、少なくとも１つの入力用インタフェースを含む。入力用インタフェースは、例えば、物理キー、静電容量キー、ポインティングデバイス、ディスプレイ４７と一体的に設けられたタッチスクリーン、カメラ４６、ＬｉＤＡＲ、又はマイクロフォンである。カメラ４６は、例えば、ＲＧＢカメラ、又はＲＧＢカメラとデプスカメラとの組合せである。入力部４４は、第２端末装置４０の動作に用いられるデータを入力する操作を受け付ける。入力部４４は、第２端末装置４０に備えられる代わりに、外部の入力機器として第２端末装置４０に接続されてもよい。接続用インタフェースとしては、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）などの規格に対応したインタフェースを用いることができる。

【0065】

出力部４５は、少なくとも１つの出力用インタフェースを含む。出力用インタフェースは、例えば、ディスプレイ４７又はスピーカである。ディスプレイ４７は、例えば、ＬＣＤ又は有機ＥＬディスプレイである。出力部４５は、第２端末装置４０の動作によって得られるデータを出力する。出力部４５は、第２端末装置４０に備えられる代わりに、外部の出力機器として第２端末装置４０に接続されてもよい。接続用インタフェースとしては、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）などの規格に対応したインタフェースを用いることができる。

【0066】

第２端末装置４０の機能は、本実施形態に係る別のプログラムを、制御部４１としてのプロセッサで実行することにより実現される。すなわち、第２端末装置４０の機能は、ソフトウェアにより実現される。プログラムは、第２端末装置４０の動作をコンピュータに実行させることで、コンピュータを第２端末装置４０として機能させる。すなわち、コンピュータは、プログラムに従って第２端末装置４０の動作を実行することにより第２端末装置４０として機能する。

【0067】

第２端末装置４０の一部又は全ての機能が、制御部４１としてのプログラマブル回路又は専用回路により実現されてもよい。すなわち、第２端末装置４０の一部又は全ての機能が、ハードウェアにより実現されてもよい。

【0068】

図５及び図６を参照して、本実施形態に係る通信システム１０の動作を説明する。この動作は、本実施形態に係る通信方法に相当する。

【0069】

図５及び図６に示す動作は、第１ユーザ１３及び第２ユーザ１４がそれぞれ第１端末装置３０及び第２端末装置４０を使用してウェブ会議など、映像を使ったコミュニケーションを行っている間、繰り返し行われる。

【0070】

図５は、第１端末装置３０の動作を示している。

【0071】

ステップＳ１０１において、制御部３１は、入力部３４としてのカメラ３６を用いて、第１空間１１で第１画像Ｍ１を撮影する。ステップＳ１０２において、制御部３１は、ステップＳ１０１で撮影した第１画像Ｍ１から背景を除去して第２画像Ｍ２を生成する。ステップＳ１０３において、制御部３１は、第１空間１１にある物体１５の画像Ｍ３をサーバ装置２０に送信済みであるかどうかを判定する。具体的には、制御部３１は、ステップＳ１０７の処理がまだ実行されていないか、又はステップＳ１０７の処理が実行された後、ステップＳ１１１の処理も実行された場合に、物体１５の画像Ｍ３を送信済みでないと判定する。制御部３１は、ステップＳ１０７の処理が実行された後、ステップＳ１１１の処理がまだ実行されていない場合に、物体１５の画像Ｍ３を送信済みであると判定する。物体１５の画像Ｍ３を送信済みでないと判定された場合は、ステップＳ１０４の処理が実行される。物体１５の画像Ｍ３を送信済みであると判定された場合は、ステップＳ１０８の処理が実行される。

【0072】

ステップＳ１０４において、制御部３１は、入力部３４としてのマイクロフォン又はカメラ３６を用いて、第１ユーザ１３の合図を検知し得る。この合図は、「これを見て」と言うなど、第１ユーザ１３の声による指示を含んでもよいし、又は物体１５を手に取る、物体１５がある方向に首を向ける、若しくは物体１５を指さすなど、第１ユーザ１３の動きによる指示を含んでもよい。合図は、システム側で事前に設定された汎用パターンでもよいし、又はユーザ側で任意に指定された独自パターンでもよい。合図が検知されなかった場合は、ステップＳ１０５の処理が実行される。合図が検知された場合は、ステップＳ１０６の処理が実行される。

【0073】

ステップＳ１０５において、制御部３１は、ステップＳ１０２で生成した第２画像Ｍ２を、通信部３３を介してサーバ装置２０に送信する。その後、ステップＳ１０１の処理が再び実行される。

【0074】

ステップＳ１０６において、制御部３１は、入力部３４としてのカメラ３６を用いて、第１空間１１にある物体１５をスキャンする。具体的には、制御部３１は、第１空間１１にある物体１５として、第１ユーザ１３が手で持っている物体を検知し、検知した物体をスキャンする。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の両手を認識し、認識した両手の間にある車両の模型などの有体物をスキャン対象の物体として検知する。あるいは、制御部３１は、第１空間１１にある物体１５として、第１ユーザ１３が手を近づけている物体を検知し、検知した物体をスキャンしてもよい。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の両手を認識し、認識した両手の周辺にある車両の模型などの有体物をスキャン対象の物体として検知してもよい。あるいは、制御部３１は、第１空間１１にある物体１５として、第１ユーザ１３が見ている物体を検知し、検知した物体をスキャンしてもよい。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の視線又は顔の向きを認識し、認識した視線の先、又は顔が向いている方向にある車両の模型などの有体物をスキャン対象の物体として検知してもよい。あるいは、制御部３１は、意図しない物体の共有化を避けるために、第１空間１１にある物体１５として、第１ユーザ１３が手で持っているか、又は手を近づけており、かつ第１ユーザ１３が見ている物体を検知し、検知した物体をスキャンしてもよい。あるいは、制御部３１は、第１空間１１にある物体１５として、第１ユーザ１３が指さしている物体を検知し、検知した物体をスキャンしてもよい。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の指を認識し、認識した指の先が向いている方向にある車両の模型などの有体物をスキャン対象の物体として検知してもよい。制御部３１は、検知した物体の、第１ユーザ１３の指又は手で隠れている部分も取り込めるように、その物体を動かすか、又は指若しくは手をずらすよう第１ユーザ１３に促してもよい。制御部３１は、２つ以上の物体を検知した場合は、どの物体をスキャンすべきか第１ユーザ１３に問い合わせてもよい。ステップＳ１０７において、制御部３１は、ステップＳ１０６でスキャンした物体１５の画像Ｍ３を、ステップＳ１０２で生成した第２画像Ｍ２とともに通信部３３を介してサーバ装置２０に送信する。その後、ステップＳ１０１の処理が再び実行される。

【0075】

ステップＳ１０８において、制御部３１は、入力部３４としてのマイクロフォン又はカメラ３６を用いて、第１ユーザ１３の別の合図を検知し得る。この合図は、「これを消して」と言うなど、第１ユーザ１３の声による指示を含んでもよいし、又は物体１５をカメラ３６の画角から外れるように動かすなど、第１ユーザ１３の動きによる指示を含んでもよい。合図は、システム側で事前に設定された汎用パターンでもよいし、又はユーザ側で任意に指定された独自パターンでもよい。合図が検知されなかった場合は、ステップＳ１０９の処理が実行される。合図が検知された場合は、ステップＳ１１１の処理が実行される。

【0076】

ステップＳ１０９において、制御部３１は、入力部３４としてのカメラ３６を用いて、物体１５の、第１ユーザ１３が注目している箇所を特定する。具体的には、制御部３１は、物体１５の、第１ユーザ１３が見ている箇所を特定する。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の視線又は顔の向きを認識し、ステップＳ１０６で検知した物体の、認識した視線又は顔が向いている箇所を特定する。あるいは、制御部３１は、物体１５の、第１ユーザ１３が指さしている箇所を特定してもよい。例えば、制御部３１は、カメラ３６を用いて、第１ユーザ１３の指を認識し、ステップＳ１０６で検知した物体の、認識した指の先が向いている箇所を特定してもよい。ステップＳ１１０において、制御部３１は、ステップＳ１０９で特定した箇所を示す注目情報Ａ１を、ステップＳ１０２で生成した第２画像Ｍ２とともに通信部３３を介してサーバ装置２０に送信する。その後、ステップＳ１０１の処理が再び実行される。

【0077】

ステップＳ１１１において、制御部３１は、物体１５の画像Ｍ３の表示を中止するよう要求する物体削除要求Ｒｑを、ステップＳ１０２で生成した第２画像Ｍ２とともに通信部３３を介してサーバ装置２０に送信する。その後、ステップＳ１０１の処理が再び実行される。

【0078】

サーバ装置２０は、ステップＳ１０５、ステップＳ１０７、ステップＳ１１０、又はステップＳ１１１で送信された第２画像Ｍ２を第１端末装置３０から受信すると、受信した第２画像Ｍ２を適宜加工した上で第２端末装置４０に送信する。例えば、サーバ装置２０は、第２画像Ｍ２に含まれている第１ユーザ１３の撮影画像を、仮想３次元空間内に存在する第１ユーザ１３のアバターに変換した上で第２端末装置４０に送信してもよい。サーバ装置２０は、ステップＳ１０７で送信された物体１５の画像Ｍ３を第１端末装置３０から受信すると、受信した物体１５の画像Ｍ３を適宜加工した上で第２端末装置４０に送信する。例えば、サーバ装置２０は、物体１５の画像Ｍ３としての撮影画像を、仮想３次元空間内に存在する物体１５の３次元オブジェクトに変換した上で第２端末装置４０に送信してもよい。サーバ装置２０は、ステップＳ１１０で送信された注目情報Ａ１を第１端末装置３０から受信すると、受信した注目情報Ａ１を適宜加工した上で第２端末装置４０に送信する。サーバ装置２０は、ステップＳ１１１で送信された物体削除要求Ｒｑを第１端末装置３０から受信すると、受信した物体削除要求Ｒｑを適宜加工した上で第２端末装置４０に送信する。

【0079】

図６は、第２端末装置４０の動作を示している。

【0080】

ステップＳ２０１において、制御部４１は、第２画像Ｍ２を、通信部４３を介してサーバ装置２０から受信する。制御部４１は、物体１５の画像Ｍ３、注目情報Ａ１、又は物体削除要求Ｒｑを、第２画像Ｍ２とともに通信部４３を介してサーバ装置２０から受信し得る。ステップＳ２０２において、制御部４１は、物体１５の画像Ｍ３をサーバ装置２０から受信済みであるかどうかを判定する。具体的には、制御部４１は、物体１５の画像Ｍ３をまだ受信していないか、又は物体１５の画像Ｍ３を受信した後、物体削除要求Ｒｑも受信した場合に、物体１５の画像Ｍ３を受信済みでないと判定する。制御部４１は、物体１５の画像Ｍ３を受信した後、物体削除要求Ｒｑをまだ受信していない場合に、物体１５の画像Ｍ３を受信済みであると判定する。物体１５の画像Ｍ３を受信済みでないと判定された場合は、ステップＳ２０３の処理が実行される。物体１５の画像Ｍ３を受信済みであると判定された場合は、ステップＳ２０６の処理が実行される。

【0081】

ステップＳ２０３において、制御部４１は、ステップＳ２０１で物体１５の画像Ｍ３をサーバ装置２０から受信したかどうかを判定する。物体１５の画像Ｍ３を受信しなかったと判定された場合は、ステップＳ２０４の処理が実行される。物体１５の画像Ｍ３を受信したと判定された場合は、ステップＳ２０５の処理が実行される。

【0082】

ステップＳ２０４において、制御部４１は、ステップＳ２０１で受信した第２画像Ｍ２を出力部４５としてのディスプレイ４７に表示する。すなわち、制御部４１は、第２画像Ｍ２を第２ユーザ１４に向けて表示する。その後、ステップＳ２０１の処理が再び実行される。

【0083】

ステップＳ２０５において、制御部４１は、ステップＳ２０１で受信した物体１５の画像Ｍ３を、ステップＳ２０１で受信した第２画像Ｍ２とともに出力部４５としてのディスプレイ４７に表示する。すなわち、制御部４１は、物体１５の画像Ｍ３を第２画像Ｍ２とともに第２ユーザ１４に向けて表示する。その後、ステップＳ２０１の処理が再び実行される。

【0084】

ステップＳ２０６において、制御部４１は、ステップＳ２０１で物体削除要求Ｒｑをサーバ装置２０から受信したかどうかを判定する。物体削除要求Ｒｑを受信しなかったと判定された場合は、ステップＳ２０７の処理が実行される。物体削除要求Ｒｑを受信したと判定された場合は、ステップＳ２０４の処理が実行される。すなわち、制御部４１は、ステップＳ２０１で受信した物体削除要求Ｒｑに応じて、物体１５の画像Ｍ３の表示を中止し、ステップＳ２０４において、ステップＳ２０１で受信した第２画像Ｍ２のみを出力部４５としてのディスプレイ４７に表示する。

【0085】

ステップＳ２０７において、制御部４１は、ステップＳ２０５と同様に、ステップＳ２０３で受信した物体１５の画像Ｍ３を、ステップＳ２０１で受信した第２画像Ｍ２とともに出力部４５としてのディスプレイ４７に表示する。すなわち、制御部４１は、物体１５の画像Ｍ３を第２画像Ｍ２とともに第２ユーザ１４に向けて表示する。ステップＳ２０８において、制御部４１は、物体１５の画像Ｍ３の、ステップＳ２０１で受信した注目情報Ａ１で示される箇所に対応する位置に印１６を表示する。例えば、制御部４１は、第１ユーザ１３が車両の模型などの有体物のどこに注目しているかが第２ユーザ１４に分かるように、印１６として枠又はマークを、ディスプレイ４７に表示している当該有体物の画像上に表示する。その後、ステップＳ２０１の処理が再び実行される。

【0086】

図７を参照して、第２端末装置４０の動作の一変形例を説明する。物体１５の画像Ｍ３は、３次元画像であるとする。

【0087】

ステップＳ２１１からステップＳ２１７の処理については、図６のステップＳ２０１からステップＳ２０７の処理と同じであるため、説明を省略する。

【0088】

ステップＳ２０７の後、ステップＳ２１８において、制御部４１は、物体１５の画像Ｍ３を回転又は移動させて、物体１５の画像Ｍ３の、ステップＳ２０１で受信した注目情報Ａ１で示される箇所に対応する位置を第２ユーザ１４に向けて表示する。例えば、制御部４１は、車両の模型などの有体物の、第１ユーザ１３が注目している箇所が第２ユーザ１４に見えるように、ディスプレイ４７に表示している当該有体物の画像を回転又は移動させる。その後、ステップＳ２１１の処理が再び実行される。

【0089】

第２画像Ｍ２、物体１５の画像Ｍ３、注目情報Ａ１、及び物体削除要求Ｒｑは、第１端末装置３０から第２端末装置４０に送信されてもよい。そのような変形例によれば、サーバ装置２０を省略することができる。

【0090】

以下に本開示の実施形態の一部について例示する。しかしながら、本開示の実施形態はこれらに限定されない点に留意されたい。
［付記１］
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成するコンピュータに、
前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
スキャンされた物体の画像を前記第２画像とともにネットワークを介して送信することと
を含む動作を実行させるプログラム。
［付記２］
前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが手で持っている物体を検知することを含む付記１に記載のプログラム。
［付記３］
前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが手を近づけている物体を検知することを含む付記１に記載のプログラム。
［付記４］
前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが見ている物体を検知することを含む付記１に記載のプログラム。
［付記５］
前記スキャンすることは、前記第１空間にある物体として、前記第１ユーザが指さしている物体を検知することを含む付記１に記載のプログラム。
［付記６］
前記合図は、前記第１ユーザの声による指示を含む付記１から付記５のいずれか１項に記載のプログラム。
［付記７］
前記合図は、前記第１ユーザの動きによる指示を含む付記１から付記６のいずれか１項に記載のプログラム。
［付記８］
前記動作は、
前記物体の、前記第１ユーザが注目している箇所を特定することと、
特定された箇所を示す注目情報を、前記ネットワークを介して送信することと
を更に含む付記１から付記７のいずれか１項に記載のプログラム。
［付記９］
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して第２画像を生成する端末装置であって、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンする端末装置によりスキャンされた物体の画像を前記第２画像とともにネットワークを介して受信することと、
受信された前記物体の画像を前記第２画像とともに前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示することと
を含む動作をコンピュータに実行させるプログラム。
［付記１０］
前記動作は、前記物体の、前記第１ユーザが注目している箇所を示す注目情報を、前記ネットワークを介して受信することを更に含み、
前記表示することは、前記物体の画像の、受信された注目情報で示される箇所に対応する位置に印を表示することを含む付記９に記載のプログラム。
［付記１１］
前記動作は、前記物体の、前記第１ユーザが注目している箇所を示す注目情報を、前記ネットワークを介して受信することを更に含み、
前記物体の画像は、３次元画像であり、
前記表示することは、前記物体の画像を回転又は移動させて、前記物体の画像の、受信された注目情報で示される箇所に対応する位置を前記第２ユーザに向けて表示することを含む付記９に記載のプログラム。
［付記１２］
第１ユーザがいる第１空間で撮影された第１画像から背景を除去して、前記第１空間とは別個の第２空間にいる第２ユーザに向けて表示される第２画像を生成する端末装置により、前記第１ユーザの合図を検知すると、前記第１空間にある物体をスキャンすることと、
前記端末装置から、スキャンされた物体の画像を前記第２画像とともにネットワークを介して送信することと
を含む通信方法。

【0091】

本開示は上述の実施形態に限定されるものではない。例えば、ブロック図に記載の２つ以上のブロックを統合してもよいし、又は１つのブロックを分割してもよい。フローチャートに記載の２つ以上のステップを記述に従って時系列に実行する代わりに、各ステップを実行する装置の処理能力に応じて、又は必要に応じて、並列的に又は異なる順序で実行してもよい。その他、本開示の趣旨を逸脱しない範囲での変更が可能である。

【符号の説明】

【0092】

１０ 通信システム
１１ 第１空間
１２ 第２空間
１３ 第１ユーザ
１４ 第２ユーザ
１５ 物体
１６ 印
２０ サーバ装置
３０ 第１端末装置
３１ 制御部
３２ 記憶部
３３ 通信部
３４ 入力部
３５ 出力部
３６ カメラ
３７ ディスプレイ
４０ 第２端末装置
４１ 制御部
４２ 記憶部
４３ 通信部
４４ 入力部
４５ 出力部
４６ カメラ
４７ ディスプレイ
５０ ネットワーク

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】