特開 2022-181516 表示方法、表示システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022181516

(43)【公開日】2022-12-08

(54)【発明の名称】表示方法、表示システム

(51)【国際特許分類】

   G06T 5/50 20060101AFI20221201BHJP

   H04N 5/74 20060101ALI20221201BHJP

   G09G 5/00 20060101ALI20221201BHJP

   G09G 5/377 20060101ALI20221201BHJP

   G09G 5/08 20060101ALI20221201BHJP

   G08B 25/00 20060101ALI20221201BHJP

【ＦＩ】

G06T5/50

H04N5/74 Z

G09G5/00 550C

G09G5/00 530M

G09G5/36 520L

G09G5/08 E

G08B25/00 510M

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2021088508

(22)【出願日】2021-05-26

(71)【出願人】

【識別番号】000002369

【氏名又は名称】セイコーエプソン株式会社

(74)【代理人】

【識別番号】110001081

【氏名又は名称】弁理士法人クシブチ国際特許事務所

(72)【発明者】

【氏名】仙敷 大樹

【テーマコード（参考）】

5B057

5C058

5C087

5C182

【Ｆターム（参考）】

5B057CA01

5B057CA08

5B057CA12

5B057CA16

5B057CB01

5B057CB08

5B057CB12

5B057CB16

5B057CE08

5B057CE09

5B057DA07

5B057DA08

5B057DA15

5B057DA16

5B057DB02

5B057DB06

5B057DB09

5B057DC16

5B057DC32

5C058BA35

5C058EA02

5C087AA02

5C087AA03

5C087AA09

5C087AA19

5C087AA28

5C087AA32

5C087AA44

5C087DD03

5C087EE14

5C087FF01

5C087FF02

5C087FF04

5C182AA04

5C182AA13

5C182AB33

5C182AC03

5C182AC39

5C182BA14

5C182BA29

5C182BA54

5C182CB42

5C182CB52

5C182CB54

(57)【要約】

【課題】社会的距離を確保するための表示を少ない情報処理量で実現する。
【解決手段】第１画像の入力を受け付けることと、第１物体の第１位置情報を取得することと第２物体の第２位置情報を取得することと、第１物体と第２物体との間の距離が閾値以上であった場合に、第１画像と重畳させたとき第１画像を透過させる透過領域を有する第１マスク画像は当該透過領域が第１物体の位置を包含する第２領域と第２物体の位置を包含する第３領域とを含むことと、第１画像と第１マスク画像とを合成して生成した第２画像を第１領域に表示することと、第１物体の位置と第２物体の距離が閾値より小さい場合に、第１画像と重畳させたときに、透過領域が第２領域及び第３領域を含まない第２マスク画像を生成することと、第１画像と第２マスク画像とを合成して生成した第３画像を、第１領域に表示することと、を含む表示方法。
【選択図】図４

【特許請求の範囲】

【請求項1】

第１画像の入力を受け付けることと、
物体を検出可能な領域である第１領域に存在する第１物体の位置を示す第１位置情報を取得することと、
前記第１領域に存在する第２物体の位置を示す第２位置情報を取得することと、
前記第１位置情報と前記第２位置情報に基づいて算出される、前記第１物体と前記第２物体との距離が予め定められた閾値以上であった場合に、前記第１画像と重畳させたとき前記第１画像を透過させる透過領域を有する第１マスク画像であり、前記透過領域は、前記第１物体の位置を包含する第２領域と前記第２物体の位置を包含する第３領域とを含む前記第１マスク画像を生成することと、
前記第１画像と前記第１マスク画像とを合成して生成した第２画像を、前記第１領域に表示することと、
前記第１物体の位置と前記第２物体の位置との間の距離が前記閾値より小さい場合に、前記第１画像と重畳させたときに、前記透過領域が前記第２領域及び前記第３領域を含まない第２マスク画像を生成することと、
前記第１画像と前記第２マスク画像とを合成して生成した第３画像を、前記第１領域に表示することと、
を含むことを特徴とする表示方法。

【請求項2】

前記第１物体の位置と前記第２物体の位置との間の距離が前記閾値より小さい場合に、前記第２領域及び前記第３領域に第４画像を重畳することを含むことを特徴とする請求項１に記載の表示方法。

【請求項3】

前記第２領域及び前記第３領域の大きさは変更可能であることを特徴とする請求項１または請求項２に記載の表示方法。

【請求項4】

前記第１物体と前記第２物体との距離が前記閾値以上であった場合に、前記透過領域の形状を予め定められた第１形状、または、予め定められた第２形状のうちのいずれか一方を選択できることを特徴とする請求項１から請求項３のうちのいずれか一項に記載の表示方法。

【請求項5】

前記第１物体と前記第２物体との距離が前記閾値以上であった場合に、前記第２領域及び前記第３領域に第５画像を重畳することを特徴とする請求項２から請求項４のうちのいずれか一項に記載の表示方法。

【請求項6】

前記第５画像は、前記第２領域の輪郭を表す画像及び前記第３領域の輪郭を表す画像を含むことを特徴とする請求項５に記載の表示方法。

【請求項7】

画像を表示する表示装置と、
情報処理を行う情報処理装置と、
を備え、
情報処理装置は、
第１の画像情報に基づく第１画像の入力を受け付ける受付部と、
物体を検出可能な領域である第１領域に存在する第１物体の位置を示す第１位置情報と、
前記第１領域に存在する第２物体の位置を示す第２位置情報とを取得する取得部と、
前記第１位置情報と前記第２位置情報に基づいて前記第１物体と前記第２物体との距離を算出する演算部と、
前記距離が予め定められた閾値以上であるか否かを判定する判定部と、
画像を生成する画像生成部と、
複数の前記画像を合成した合成画像を生成する画像合成部と、
を有し、
画像生成部は、前記距離が前記閾値以上であると前記判定部が判定した場合に、
前記第１画像と重畳させたとき前記第１画像を透過させる透過領域を有する第１マスク画像であり、前記透過領域は、前記第１物体の位置を包含する第２領域と前記第２物体の位置を包含する第３領域と、を含む前記第１マスク画像を生成し、
画像合成部は、前記第１画像と前記第１マスク画像とを合成して第２画像を生成し、
表示装置は、前記第２画像を前記第１領域に表示することを特徴とし、
前記画像生成部は、前記第１物体の位置と前記第２物体の位置との間の距離が前記閾値より小さいと前記判定部が判定した場合に、前記透過領域が前記第２領域及び前記第３領域を含まない第２マスク画像を生成し、
前記画像合成部は、前記第１画像と前記第２マスク画像とを合成して第３画像を生成し、
表示装置は、前記第３画像を前記第１領域に表示すること、
を特徴とする表示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、社会的距離を確保するための表示方法、表示システムに関する。

【背景技術】

【0002】

近年、感染症対策として公共の場等で人と人との適切な距離、いわゆる社会的距離を確保することが望まれている。従来は個々人の注意力に頼っていたが、例えば特許文献１では監視カメラが撮影した画像から人物を機械学習によって検出し、検出された人物位置に社会的距離を表す環状線を重畳した画像を表示する混雑情報報知システムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特許第６７６４２１４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかし特許文献１に開示されている技術では、社会的距離を示す環状線を画面に重畳表示することしか考慮されていない。ここで、ユーザー位置に対して任意の画像を表示するような表現を行うため、検出されたユーザー位置に基づいた任意のコンテンツ画像をリアルタイムで生成することも考えられる。しかし情報処理量が大きくなってしまい、表示されるまでの遅延が大きくなってしまう課題がある。

【課題を解決するための手段】

【0005】

上記課題を解決する一態様は、第１画像の入力を受け付けることと、物体を検出可能な領域である第１領域に存在する第１物体の位置を示す第１位置情報を取得することと、第１領域に存在する第２物体の位置を示す第２位置情報を取得することと、第１位置情報と第２位置情報に基づいて算出される、第１物体と第２物体との間の距離が予め定められた閾値以上であった場合に、第１画像と重畳させたとき第１画像を透過させる透過領域を有する第１マスク画像であり、透過領域は、第１物体の位置を包含する第２領域と、第２物体の位置を包含する第３領域と、を含む第１マスク画像を生成することと、第１画像と第１マスク画像とを合成して生成した第２画像を、第１領域に表示することと、第１物体の位置と第２物体の位置との間の距離が閾値より小さい場合に、第１画像と重畳させたときに、透過領域が第２領域及び第３領域を含まない第２マスク画像を生成することと、第１画像と第２マスク画像とを合成して生成した第３画像を、第１領域に表示することと、を含むことを特徴とする表示方法である。

【0006】

上記課題を解決する他の一態様は、画像を表示する表示装置と、情報処理を行う情報処理装置と、を備える表示システムであって、情報処理装置は、第１の画像情報に基づく第１画像の入力を受け付ける受付部と、物体を検出可能な領域である第１領域に存在する第１物体の位置を示す第１位置情報と、第１領域に存在する第２物体の位置を示す第２位置情報とを取得する取得部と、第１位置情報と第２位置情報に基づいて第１物体と第２物体との間の距離を算出する演算部と、距離が予め定められた閾値以上であるか否かを判定する判定部と、画像を生成する画像生成部と、複数の画像を合成した合成画像を生成する画像合成部と、を有し、画像生成部は、距離が閾値以上であると判定部が判定した場合に、第１画像と重畳させたとき第１画像を透過させる透過領域を有する第１マスク画像であり、透過領域は、第１物体の位置を包含する第２領域と、第２物体の位置を包含する第３領域と、を含む第１マスク画像を生成し、画像合成部は、第１画像と第１マスク画像とを合成して第２画像を生成し、表示装置は、第２画像を第１領域に表示し、画像生成部は、第１物体の位置と第２物体の位置との間の距離が閾値より小さいと判定部が判定した場合に、透過領域が第２領域及び第３領域を含まない第２マスク画像を生成し、画像合成部は、第１画像と第２マスク画像とを合成して第３画像を生成し、表示装置は、第３画像を第１領域に表示すること、を特徴とする表示システムである。

【図面の簡単な説明】

【0007】

【図1】表示システムの構成を示す説明図。

【図2】情報処理装置の構成図。

【図3】表示システムの動作を示すフローチャート。

【図4】画像生成処理及び画像合成処理のフローチャート。

【図5】社会的距離以上隔たっている２つの物体の説明図。

【図6】表示方法における画像生成と画像合成を説明する説明図。

【図7】社会的距離が確保されている状態における画像表示の説明図。

【図8】社会的距離未満の状態における画像表示の説明図。

【図9】変形実施例における画像表示の方法を表す説明図。

【発明を実施するための形態】

【0008】

以下、本発明の実施の形態を添付図面を参照して説明する。図１～図９は発明を実施する形態の一例であって、図中、同一の符号を付した部分は同一物を表わす。なお、各図において一部の構成を適宜省略して、図面を簡略化する。そして、部材の大きさ、形状、厚みなどを適宜誇張して表現する。

【0009】

図１は第１実施形態に係る表示システム１の構成を示す説明図である。表示システム１は、情報を処理する情報処理装置１５と情報を報知する情報提供装置、具体的には表示装置であるプロジェクター２０を有する。具体的には表示システム１は、人物や物体を検出する検出装置１０と接続され、情報処理装置１５は検出装置１０が検出した情報を処理する。また表示システム１は、社会的距離を確保することが必要な対象である第１物体Ｐ１に対して社会的距離についての情報を表示する表示装置、具体的には投射光４２を発生して投影画像４０を投影するプロジェクター２０と接続される。

【0010】

プロジェクター２０は、第１物体Ｐ１として人物を検出した場合、その周囲の床面３０に投影画像４０を映し出すことにより、社会的距離を第１物体Ｐ１である人物に認識させることができる。具体的には第１物体Ｐ１を中心とした円板内に、予め情報処理装置１５が記憶した画像を表示してよい。このとき情報処理装置１５が記憶していた画像の一部を切り出して表示してもよい。第１物体Ｐ１である人物にとって社会的距離が確保されているとは、例えば、第１物体Ｐ１を中心として半径１ｍの円板内の範囲に他の人が存在しないことを意味する。プロジェクター２０は、第１物体Ｐ１の移動に合わせて投影画像４０を移動させてよい。

【0011】

検出装置１０としては、距離画像、具体的には３次元的な位置情報を取得できるＲＧＢ－Ｄカメラが望ましい。もちろん超音波センサー、ステレオカメラ、ＬＩＤＡＲ等の距離を測定できる測定装置を含んでもよい。あるいは検出装置１０はカメラ等の撮像装置であって、情報処理装置１５の有する画像認識機能によって距離情報を抽出してもよい。

【0012】

情報処理装置１５としてはパーソナルコンピューターやスマートフォン、タブレットＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等の情報端末であってよい。情報処理装置１５はＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭＲａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）及びＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）や記憶媒体等から構成され、各種制御を実行する。ＣＰＵはいわゆる中央演算処理装置であり、各種プログラムが実行されて様々な機能を実現する。ＲＡＭはＣＰＵの作業領域、記憶領域として使用され、ＲＯＭはＣＰＵで実行されるオペレーティングシステムやプログラムを記憶する。記憶媒体は例えばハードディスクやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）であってよい。情報処理装置１５は、対象となる物体に対して距離的に近い場所に配置されてもよく、遠隔地に置かれたサーバーであってもよい。情報処理装置１５は必ずしも独立した装置である必要はなく、例えば検出装置１０やプロジェクター２０と一体となった装置が含むプロセッサーであってもよい。

【0013】

またここでは社会的距離についての情報を報知する情報提供装置、具体的には表示装置であるプロジェクター２０を例として挙げたが、これに限定されない。具体的には情報を報知する情報提供装置として例えば警報音を発するスピーカーであってもよく、表示装置としては床面全体に展開されて画像を表示するフラットパネルディスプレイであってもよい。またユーザーにヘッドマウントディスプレイ等を装着させて、社会的距離を認識させるためにいわゆる拡張現実画像を現実世界の風景に重畳することで視覚的に情報を報知してもよい。

【0014】

図２は情報処理装置１５の構成図である。情報処理装置１５は、情報処理をおこなうＣＰＵ１２と、揮発性記憶素子であるＲＡＭ２６と、不揮発性記憶素子であるＲＯＭ２７を有する。情報処理装置１５は、外部装置、例えばプロジェクター２０への出力に用いられる出力Ｉ／Ｆ部１３と、検出装置１０からの入力に用いられる入力Ｉ／Ｆ部１４とを備え、内部バス１１で接続される。情報処理装置１５においてＣＰＵ１２は、プログラムを実行することによりプロジェクター２０で投影するために予め用意された画像を受け付ける受付部１６の機能を実現する。ＣＰＵ１２は、検出装置１０で検出可能な領域に存在する物体の位置情報を取得する取得部１７の機能を実現する。またＣＰＵ１２は、取得部１７で取得された位置情報から物体間の距離等を算出する演算部１８の機能を実現する。ＣＰＵ１２は、演算部１８で算出された物体間の距離に基づいて判定をおこなう判定部１９の機能を実現する。ＣＰＵ１２は、プロジェクター２０で投影するための画像を生成する画像生成部２１の機能と、複数の画像を合成する画像合成部２２の機能を実現する。またＣＰＵ１２は、情報処理装置１５に接続される検出装置１０やプロジェクター２０の制御をおこなう制御部２４の機能を実現する。

【0015】

情報処理装置１５において記憶部２３は上記位置情報や、画像情報等を記憶する。具体的に例えばプロジェクター２０で投影される画像等の必要な情報を記憶する。記憶部２３はハードディスクやＳＳＤ等の記憶媒体によって実現されてよい。

【0016】

また出力Ｉ／Ｆ部１３と入力Ｉ／Ｆ部１４は、検出装置１０やプロジェクター２０と有線接続または無線接続によって情報のやり取りをおこなう。出力Ｉ／Ｆ部１３と入力Ｉ／Ｆ部１４は、例えばインターフェース回路を備える。具体的に出力Ｉ／Ｆ部１３と入力Ｉ／Ｆ部１４は、例えばＷｉＦｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信規格に基づいて情報の入出力処理をおこなってよい。

【0017】

図３は本実施形態に係る表示システム１の動作を示すフローチャートである。表示システム１において受付部１６は、プロジェクター２０で投影するために予め用意された画像を受け付ける（ステップＳＡ１）。次に検出装置１０から、検出装置１０が物体を検出する検出範囲である第１領域における基準となる状態、すなわち、第１領域内に検出したい物体が含まれない状態において第１領域内を計測した基準距離画像Ａを取得する（ステップＳＡ２）。具体的には検出装置１０は例えばＲＧＢ－Ｄカメラであり、例えば、図１における第１物体Ｐ１についての距離情報は含まず、床面３０についての距離情報を含む基準距離画像Ａを予め取得し、情報処理装置１５の記憶部２３に記憶する。次に、表示システム１は検出装置１０から、第１領域内に含まれる物体を検出するために、所定のフレームレートでリアルタイム距離画像Ｂを取得する（ステップＳＡ３）。リアルタイム距離画像Ｂには、例えば、図１における第１物体Ｐ１および床面３０についての距離情報が含まれる。ここで、取得するフレームレートとしては、５ＦＰＳ程度であってよい。そして表示システム１の演算部１８は、基準距離画像Ａとリアルタイム距離画像Ｂの差分を算出し、差分距離画像Ｃを取得する（ステップＳＡ４）。この動作によって表示システム１は基準距離画像Ａからの変化を認識し、取得部１７が差分距離画像Ｃから検出装置１０の検出範囲内に存在する物体の位置情報を取得する（ステップＳＡ５）。差分距離画像Ｃには、例えば、図１における第１物体Ｐ１の距離情報のみが含まれるので、検出装置１０の検出範囲内に存在する第１物体Ｐ１の位置情報を取得することができる。ここで位置情報とは、物体の差分距離画像Ｃから求められた物体の重心位置の情報であってよい。

【0018】

検出範囲内に複数の物体がある場合、演算部１８が物体間の距離を算出する（ステップＳＡ６）。次に表示システム１は、画像生成処理及び画像合成処理をおこなう（ステップＳＡ７）。画像生成処理及び画像合成処理については後述する図４で説明する。なお画像生成処理及び画像合成処理において、表示システム１の判定部１９は、検出装置１０による検出範囲内における物体の間で、社会的距離が確保されているか否かの判定処理をおこなう。社会的距離の判定については後述する図５で説明する。

【0019】

そして表示システム１のプロジェクター２０が床面３０に画像を投影する（ステップＳＡ８）。当該画像は、検出装置１０の検出範囲内に存在する複数の物体の間で、社会的距離が確保されている場合はエンターテインメントな要素のある画像であってよく、社会的距離が確保されていない場合は警告画像であってよい。以上のステップを繰り返す（ステップＳＡ３に戻る）。

【0020】

図４は、表示システム１がプロジェクター２０で投影する画像の画像生成処理及び画像合成処理のフローチャートである。まず表示システム１は検出範囲内に存在する複数の物体、例えば第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄを算出する（ステップＳＢ１）。このとき、表示システム１は図３で示したフローチャートのステップＳＡ５において取得部１７が取得した位置情報を用いて距離Ｄを算出してよい。具体的には演算部１８は、第１物体が位置する場所の位置情報である第１位置情報と第２物体が位置する場所の位置情報である第２位置情報に基づいて、第１物体と第２物体との間の距離Ｄを算出する。

【0021】

次に表示システム１の判定部１９は、距離Ｄが予め定められた閾値Ｌ以上かどうかを判定する（ステップＳＢ２）。ここで閾値Ｌは例えば２ｍである。距離Ｄが閾値Ｌ以上の場合（ステップＳＢ２：ＹＥＳ）、画像生成部２１が第１マスク画像を生成する（ステップＳＢ３）。そして画像合成部２２は第１画像と第１マスク画像を合成して第２画像を生成する（ステップＳＢ４）。表示システム１は、検出範囲である第１領域に第２画像を表示する（ステップＳＢ５）。具体的には情報処理装置１５の制御部２４がプロジェクター２０を制御して、第２画像を投影させる。そして表示システム１は画像生成処理及び画像合成処理を終了する（リターン）。

【0022】

距離Ｄが閾値Ｌ未満の場合（ステップＳＢ２：ＮＯ）、画像生成部２１が第２マスク画像を生成する（ステップＳＢ６）。ここで第２マスク画像において、第1画像を透過させる透過領域は、第１物体Ｐ１が存在する位置を含む第２領域、及び第２物体Ｐ２が存在する位置を含む第３領域を含まない。そして画像合成部２２は第１画像と第２マスク画像を合成して第３画像を生成する（ステップＳＢ７）。表示システム１は、検出範囲である第１領域に第３画像を表示する（ステップＳＢ８）。具体的には情報処理装置１５の制御部２４がプロジェクター２０を制御して、第３画像を投影させる。具体的には第２領域と第３領域には第1画像を投影しない。さらに表示システム１は、第１物体Ｐ１が存在する位置を含む第２領域と、第２物体Ｐ２が存在する位置を含む第３領域に第４画像を重畳する（ステップＳＢ９）。第４画像は、検知範囲にいる人物に、社会的距離が確保されていないことを警告する警告表示であることが望ましい。表示システム１は画像生成処理及び画像合成処理を終了する（リターン）。

【0023】

以上をまとめると本実施形態に係る表示システム１は、具体的には表示装置であるプロジェクター２０と、情報処理を行う情報処理装置１５とを備える表示システムである。表示システム１の情報処理装置１５は、第１の画像情報に基づく第１画像の入力を受け付ける受付部１６を備える。また情報処理装置１５は、物体を検出可能な領域である第１領域に存在する第１物体Ｐ１の位置を示す第１位置情報と、第１領域に存在する第２物体の位置を示す第２位置情報とを取得する取得部を有する。さらに情報処理装置１５は、第１位置情報と第２位置情報に基づいて第１物体と第２物体との間の距離を算出する演算部１８と、第１物体と第２物体との間の距離が予め定められた閾値以上であるか否かを判定する判定部１９を備える。また情報処理装置１５は、画像を生成する画像生成部２１と、複数の画像を合成した合成画像を生成する画像合成部２２とを有する。画像生成部２１は、第１物体と第２物体との間の距離が閾値以上であると判定部１９が判定した場合に、第１画像と重畳させたとき第１画像を透過させる透過領域を有するマスク画像である第１マスク画像を生成する。透過領域は、第１物体の位置を包含する第２領域と、第２物体の位置を包含する第３領域とを含む。画像合成部２２は、第１画像と第１マスク画像とを合成して第２画像を生成する、表示装置であるプロジェクター２０は、第２画像を第１領域に表示する。

【0024】

画像生成部２１は、第１物体の位置と第２物体の位置との間の距離が閾値より小さいと判定部１９が判定した場合に、透過領域が第２領域及び第３領域を含まない第２マスク画像を生成する。そして画像合成部２２は、第１画像と第２マスク画像とを合成して第３画像を生成する。表示装置であるプロジェクター２０は、第３画像を第１領域に表示する。

【0025】

図５～図９を用いて第２実施形態に係る表示方法を説明する。

【0026】

図５は社会的距離以上隔たっている２つの物体に対して情報を提供する表示方法の説明図である。具体的には表示方法では、距離を検出可能な領域を第１領域４３と設定する。次に表示方法は、第１領域４３内にある第１物体Ｐ１が位置する場所の位置情報である第１位置情報を取得し、第１領域４３内にある第２物体Ｐ２が位置する場所の位置情報である第２位置情報を取得する。ここで位置情報とは、例えば物体が検出された領域の重心位置でよい。表示方法では、第１位置情報と第２位置情報に基づいて、第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄを算出する。表示方法は距離Ｄの大きさと、予め定められた閾値Ｌの大きさを比較して社会的距離が確保されているか否かを判定する。

【0027】

距離Ｄが予め定められた閾値Ｌ以上である場合、社会的距離が確保されている状態なので、表示方法は社会的距離が確保されている旨を第１物体Ｐ１である人物と第２物体Ｐ２である人物へ報知する。具体的には表示方法では第１物体Ｐ１の位置を中心とした半径ｄの円板領域を第２領域４５と設定し、第２物体Ｐ２の位置を中心として半径ｄの円板領域を第３領域４７と設定する。ここで半径ｄは例えば１ｍである。閾値Ｌは社会的距離であり、例えば２ｍである。第２領域４５と第３領域４７の輪郭は、社会的距離を確保するための領域の輪郭を示すものであり、ここでは環状の第１形状４９である。

【0028】

図６は、本実施形態に係る表示方法における画像生成処理と画像合成処理を説明する説明図である。図中の足し算の記号は、複数の画像を合成させて新たな画像を生成することを意味し、矢印は画像合成処理の結果が矢印の先に示された図のようになることを意味する。まず第１画像５０の入力を受け付ける。次に第１物体Ｐ１の位置を含む領域である第２領域４５と、第２物体Ｐ２の位置を含む領域である第３領域４７とを含む透過領域６０のあるマスク画像である第１マスク画像５５を生成する。そして第１画像５０と第１マスク画像５５を合成することで第２画像６５を生成する。

【0029】

図７は、社会的距離が確保されている状態における画像表示の説明図である。距離検出が可能な領域である第１領域４３に存在する第１物体Ｐ１と第２物体Ｐ２について、第１物体の位置を示す第１位置情報を取得し、第１領域に存在する第２物体の位置を示す第２位置情報を取得する。次に第１位置情報と第２位置情報に基づいて算出される、第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄが予め定められた閾値Ｌ以上であった場合に、第１画像５０と重畳させたとき第１画像５０を透過させる透過領域６０を有するマスク画像を生成する。このとき透過領域６０は、第１物体Ｐ１の位置を包含する第２領域４５と、第２物体Ｐ２の位置を包含する第３領域４７とを含む。また第１画像と第１マスク画像とを合成して生成した第２画像６５を、第１領域４３に表示する。

【0030】

図８は、検出可能な領域である第１領域４３にある第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄが社会的距離未満の場合における画像表示の説明図である。具体的には、第１物体Ｐ１の位置と第２物体Ｐ２の位置との間の距離Ｄが閾値Ｌより小さい場合に、第１画像５０と重畳させたときに、透過領域６０が第２領域４５及び第３領域４７を含まない第２マスク画像６７を生成する。そして表示方法は、第１画像５０と第２マスク画像６７とを合成して生成した第３画像６９を、第１領域４３に表示する。具体的には、第２マスク画像６７では、社会的距離が確保されている場合に表示される第１画像５０が第２領域４５と第３領域４７にあるマスク画像で覆い隠されている。そして第２領域４５及び第３領域４７に第４画像７０を重畳する。具体的には第４画像７０は、第１物体Ｐ１である人物と、第２物体Ｐ２である人物に、社会的距離が確保されていないことを警告する警告画像であることが好ましい。ここで閾値Ｌは例えば２ｍである。

【0031】

図９は、本実施形態に係る表示方法の変形実施例における画像表示の方法を表す説明図である。第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄが閾値Ｌ以上であった場合を考える。このとき表示方法は、透過領域６０の形状を予め定められた複数の形状、例えば円形状である第１形状４９（図５参照）、または、円形状とは異なる予め定められた第２形状７７のうちのいずれか一方を選択できるとする。図９では第２形状７７が選択されている。このとき第２形状７７の大きさは、社会的距離を確保するための領域を示す円板領域８０の大きさよりも大きくてもよく、社会的距離を確保するための領域を示す円板領域８０の大きさよりも小さくてもよい。具体的には第２領域４５及び第３領域４７の大きさは変更可能であってよい。

【0032】

第１物体Ｐ１と第２物体Ｐ２との間の距離Ｄが閾値Ｌ以上であった場合に、表示方法は、第２領域４５及び第３領域４７に第５画像７５を重畳する。具体的に第５画像７５は、第２領域４５の輪郭を表す画像及び第３領域４７の輪郭を表す画像を含んでよい。あるいは第５画像７５は第２領域４５及び第３領域４７を含む領域の輪郭を表す画像でもよい。

【0033】

第１実施形態に係る表示システム１は、画像を表示する表示装置であるプロジェクター２０と、情報処理を行う情報処理装置１５と、を備える表示システムであって、情報処理装置１５は、第１の画像情報に基づく第１画像５０の入力を受け付ける受付部１６と、物体を検出可能な領域である第１領域４３に存在する第１物体Ｐ１の位置を示す第１位置情報と、第１領域４３に存在する第２物体Ｐ２の位置を示す第２位置情報とを取得する取得部１７と、第１位置情報と第２位置情報に基づいて第１物体Ｐ１と第２物体Ｐ２との間の距離を算出する演算部１８と、距離が予め定められた閾値以上であるか否かを判定する判定部１９と、画像を生成する画像生成部２１と、複数の画像を合成した合成画像を生成する画像合成部２２とを有し、画像生成部２１は、距離が閾値以上であると判定部１９が判定した場合に、第１画像５０と重畳させたとき第１画像５０を透過させる透過領域６０を有する第１マスク画像であり、透過領域６０は、第１物体Ｐ１の位置を包含する第２領域４５と、第２物体Ｐ２の位置を包含する第３領域４７と、を含む第１マスク画像５５を生成し、画像合成部２２は、第１画像５０と第１マスク画像５５とを合成して第２画像６５を生成することを特徴とし、表示装置であるプロジェクター２０は、第２画像６５を第１領域４３に表示することを特徴とし、画像生成部２１は、第１物体Ｐ１の位置と第２物体Ｐ２の位置との間の距離が閾値より小さいと判定部１９が判定した場合に、透過領域６０が第２領域４５及び第３領域４７を含まない第２マスク画像６７を生成し、画像合成部２２は、第１画像５０と第２マスク画像６７とを合成して第３画像６９を生成すし、表示装置であるプロジェクター２０は、第３画像６９を第１領域４３に表示することを特徴とする表示システムである。

【0034】

このような表示システムによれば、検出可能な領域にいる人に社会的距離が保たれているか否かを提示できる。そして少ない計算処理によって、任意のコンテンツ画像を表示することができる。

【0035】

第２実施形態に係る表示方法は、第１画像の入力を受け付けることと、物体を検出可能な領域である第１領域４３に存在する第１物体Ｐ１の位置を示す第１位置情報を取得することと、第１領域４３に存在する第２物体Ｐ２の位置を示す第２位置情報を取得することと、第１位置情報と第２位置情報に基づいて算出される、第１物体Ｐ１と第２物体Ｐ２との間の距離が予め定められた閾値以上であった場合に、第１画像５０と重畳させたとき第１画像５０を透過させる透過領域６０を有する第１マスク画像であり、透過領域６０は、第１物体の位置を包含する第２領域４５と、第２物体Ｐ２の位置を包含する第３領域４７と、を含む当該第１マスク画像５５を生成することと、第１画像５０と第１マスク画像５５とを合成して生成した第２画像６５を、第１領域４３に表示することと、第１物体Ｐ１の位置と第２物体Ｐ２の位置との間の距離が閾値より小さい場合に、第１画像５０と重畳させたときに、透過領域６０が第２領域４５及び第３領域４７を含まない第２マスク画像６７を生成することと、第１画像５０と第２マスク画像６７とを合成して生成した第３画像６９を、第１領域４３に表示することと、を含む。

【0036】

このような表示方法によれば、社会的距離が確保されている場合に、対象となっている人物の位置を含む領域に、社会的距離が確保されている旨を報知する任意の第１画像を投影できる。また社会的距離が確保されていない場合に、対象となっている人物の位置を含む領域に、社会的距離が確保されている旨を報知する任意の第１画像を投影することがない。そのため少ない計算処理によって、検出可能な領域にいる人に社会的距離が保たれているか否かを提示できる。

【0037】

第２実施形態に係る表示方法は、第１物体Ｐ１の位置と第２物体Ｐ２の位置との間の距離が閾値より小さい場合に、第２領域４５及び第３領域４７に第４画像７０を重畳することを含む。

【0038】

このような表示方法によれば、社会的距離が確保されていない場合に、対象となっている人物の位置を含む領域に、社会的距離が確保されていない旨を報知する警告画像を投影することができる。そのため公共の場等で社会的距離を確保しやすくなるので、感染症の感染予防に資する。

【0039】

第２実施形態に係る表示方法は、第２領域４５及び第３領域４７の大きさは変更可能である。

【0040】

このような表示方法によれば、十分な社会的距離を確保すべき場合には、人と人の距離を大きくするように促す画像を表示し、社会的距離を大きくとらなくてよい場合には人と人の間の距離を狭めても問題が無い旨を伝える画像を表示することができる。

【0041】

第２実施形態に係る表示方法は、第１物体Ｐ１と第２物体Ｐ２との間の距離が閾値以上であった場合に、透過領域６０の形状を予め定められた第１形状４９、または、予め定められた第２形状７７のうちのいずれか一方を選択できる。

【0042】

このような表示方法によれば、社会的距離が確保されている旨を報知する画像を任意の形状で提供することができる。

【0043】

第２実施形態に係る表示方法は、第１物体Ｐ１と第２物体Ｐ２との距離が閾値以上であった場合に、第２領域４５及び第３領域４７に第５画像７５を重畳する。

【0044】

このような表示方法によれば、どの程度の社会的距離が適切かということとは無関係に、表示をさせたい領域に表示したい画像を投影することができる。そのため距離の検出が可能な領域にいる人へ視覚的に情報を伝えることができる。

【0045】

第２実施形態に係る表示方法は、第５画像は、第２領域の輪郭を表す画像及び第３領域の輪郭を表す画像を含む。

【0046】

このような表示方法によれば、距離が検出可能な領域にいる人の位置を含む予め定められた領域の輪郭部分に画像を表示することができるので、社会的距離を認識しやすくなる。そのため公共の場等で社会的距離を確保しやすくなるので、感染症の感染予防に資する。

【0047】

上述した実施形態は、あくまでも本発明の一態様を示すものであり、本発明の範囲内で任意に変形及び応用が可能である。

【0048】

例えば、図１や図２に示した各部や各装置は一例であって、具体的な実装形態は特に限定されない。つまり、必ずしも各部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで各部の機能を実現する構成とすることも勿論可能である。また、上述した実施形態においてソフトウェアで実現される機能の一部をハードウェアとしてもよく、或いは、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。その他、検出装置１０と、情報処理装置１５と、表示装置であるプロジェクター２０等の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。

【0049】

また例えば、図３、図４に示す処理動作のステップ単位は、表示システム１で実現される表示方法の各工程の動作の理解を容易にするために、主な処理内容に応じて分割したものであり処理単位の分割の仕方や名称によって本発明が限定されることはない。処理内容に応じて、さらに多くのステップ単位に分割してもよい。また、１つのステップ単位がさらに多くの処理を含むように分割してもよい。また、そのステップの順番は、本発明の趣旨に支障のない範囲で適宜に入れ替えてもよい。

【符号の説明】

【0050】

１…表示システム、１０…検出装置、１１…内部バス、１２…ＣＰＵ、１３…出力Ｉ／Ｆ部、１４…入力Ｉ／Ｆ部、１５…情報処理装置、１６…受付部、１７…取得部、１８…演算部、１９…判定部、２０…プロジェクター、２１…画像生成部、２２…画像合成部、２３…記憶部、２４…制御部、２６…ＲＡＭ、２７…ＲＯＭ、３０…床面、４０…投影画像、４２…投射光、４３…第１領域、４５…第２領域、４７…第３領域、４９…第１形状、５０…第１画像、５５…第１マスク画像、６０…透過領域、６５…第２画像、６７…第２マスク画像、６９…第３画像、７０…第４画像、７５…第５画像、７７…第２形状、８０…社会的距離未満の範囲を示す円板領域、Ｄ…第１物体と第２物体の間の距離、Ｐ１…第１物体、Ｐ２…第２物体。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】