特開 2022-156100 情報提供方法、プログラム及び情報提供装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022156100

(43)【公開日】2022-10-14

(54)【発明の名称】情報提供方法、プログラム及び情報提供装置

(51)【国際特許分類】

   G06T 19/00 20110101AFI20221006BHJP

   G06Q 30/02 20120101ALI20221006BHJP

【ＦＩ】

G06T19/00 600

G06Q30/02 470

【審査請求】未請求

【請求項の数】9

【出願形態】ＯＬ

(21)【出願番号】P 2021059628

(22)【出願日】2021-03-31

(71)【出願人】

【識別番号】000005326

【氏名又は名称】本田技研工業株式会社

(74)【代理人】

【識別番号】100077665

【弁理士】

【氏名又は名称】千葉 剛宏

(74)【代理人】

【識別番号】100116676

【弁理士】

【氏名又は名称】宮寺 利幸

(74)【代理人】

【識別番号】100191134

【弁理士】

【氏名又は名称】千馬 隆之

(74)【代理人】

【識別番号】100136548

【弁理士】

【氏名又は名称】仲宗根 康晴

(74)【代理人】

【識別番号】100136641

【弁理士】

【氏名又は名称】坂井 志郎

(74)【代理人】

【識別番号】100180448

【弁理士】

【氏名又は名称】関口 亨祐

(72)【発明者】

【氏名】根建 圭淳

(72)【発明者】

【氏名】松原 一雄

(72)【発明者】

【氏名】山岡 大祐

(72)【発明者】

【氏名】小林 正英

【テーマコード（参考）】

5B050

5L049

【Ｆターム（参考）】

5B050BA09

5B050BA13

5B050CA07

5B050CA08

5B050DA01

5B050DA10

5B050EA07

5B050EA18

5B050EA19

5B050EA27

5B050FA02

5B050FA09

5B050GA08

5L049BB08

(57)【要約】

【課題】良好且つ的確に情報提供を行い得る情報提供方法、プログラム及び情報提供装置を提供する。
【解決手段】情報提供方法は、車両６０に収納される予定の物品６４のサイズに関する情報である物品サイズ情報を取得するステップＳ２と、収納スペース６２を撮像することによって得られる撮像画像を取得する画像取得ステップＳ３と、収納スペースに関する設計データに基づいた収納スペースサイズ情報を取得するステップＳ４と、収納スペースを含む撮像画像を表示画面２８Ａに表示するとともに、収納スペースサイズ情報と、物品サイズ情報とに基づいて、物品に対応する画像である物品画像６４Ａを撮像画像に重畳表示する表示ステップＳ５と、を有する。
【選択図】図６

【特許請求の範囲】

【請求項1】

車両に収納される予定の物品のサイズに関する情報である物品サイズ情報を取得するステップと、
前記車両のうちの前記物品が収納される予定のスペースである収納スペースを端末装置に備えられた撮像部によって撮像することによって得られる撮像画像を取得する画像取得ステップと、
前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得するステップと、
前記収納スペースを含む前記撮像画像を前記端末装置に備えられた表示画面に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像を前記撮像画像に重畳表示する表示ステップと、
を有する、情報提供方法。

【請求項2】

請求項１に記載の情報提供方法において、
前記物品を前記収納スペースに収納する際に干渉が生ずるか否かを判定するステップを更に備える、情報提供方法。

【請求項3】

請求項１又は２に記載の情報提供方法において、
前記物品を前記収納スペースに収納する際に干渉が生ずる場合、前記表示ステップでは、干渉が生ずる部位である干渉部位を前記表示画面に更に表示する、情報提供方法。

【請求項4】

請求項１～３のいずれか１項に記載の情報提供方法において、
前記表示画面に対するユーザによる操作に基づいて、前記物品の位置及び前記物品の姿勢のうちの少なくともいずれかを更新するステップを更に有する、情報提供方法。

【請求項5】

請求項１～４のいずれか１項に記載の情報提供方法において、
前記物品を前記収納スペースに収納する際に干渉が生ずると判定された場合、干渉が生じなくなるような前記物品の位置及び姿勢を算出するステップを更に有する、情報提供方法。

【請求項6】

請求項１～５のいずれか１項に記載の情報提供方法において、
前記物品を前記収納スペースに収納した際における前記収納スペースの変形又は前記車両の変位を算出するステップを更に有し、
前記表示ステップでは、前記収納スペースの変形又は前記車両の変位を示す情報を更に表示する、情報提供方法。

【請求項7】

請求項１～６のいずれか１項に記載の情報提供方法において、
前記物品を前記収納スペースに収納した状態で前記車両が加速又は減速した際における前記物品の変位を算出するステップを更に有し、
前記表示ステップでは、前記物品を前記収納スペースに収納した状態で前記車両が加速又は減速した際における前記物品の変位を示す情報を更に表示する、情報提供方法。

【請求項8】

請求項１～７のいずれか１項に記載の情報提供方法をコンピュータに実行させるためのプログラム。

【請求項9】

撮像部と、
表示画面を有する表示部と、
車両のうちの物品が収納される予定のスペースである収納スペースを、前記撮像部によって撮像することによって得られる撮像画像を取得する画像取得部と、
前記物品のサイズに関する情報である物品サイズ情報を取得するとともに、前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得する情報取得部と、
前記収納スペースを含む前記撮像画像を前記表示画面に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像を前記撮像画像に重畳表示する表示制御部と、
を備える、情報提供装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報提供方法、プログラム及び情報提供装置に関する。

【背景技術】

【0002】

特許文献１には、携帯無線通信端末のディスプレイに撮像画像を表示するとともに、当該撮影画像内に含まれる部品の案内を当該ディスプレイに重畳表示することが開示されている。特許文献１では、ディスプレイに重畳表示された部品の案内が押下された場合、当該部品の操作マニュアルが当該ディスプレイに表示され得る。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１４－２１５８４５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に記載された技術は、重畳表示された部品の案内が押下された場合に当該部品の操作マニュアル等がディスプレイに表示されることを単に開示しているにすぎない。

【0005】

本発明の目的は、良好且つ的確に情報提供を行い得る情報提供方法、プログラム及び情報提供装置を提供することにある。

【課題を解決するための手段】

【0006】

本発明の一態様による情報提供方法は、車両に収納される予定の物品のサイズに関する情報である物品サイズ情報を取得するステップと、前記車両のうちの前記物品が収納される予定のスペースである収納スペースを端末装置に備えられた撮像部によって撮像することによって得られる撮像画像を取得する画像取得ステップと、前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得するステップと、前記収納スペースを含む前記撮像画像を前記端末装置に備えられた表示画面に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像を前記撮像画像に重畳表示する表示ステップと、を有する。

【0007】

本発明の他の態様によるプログラムは、上記のような情報提供方法をコンピュータに実行させる。

【0008】

本発明の更に他の態様による情報提供装置は、撮像部と、表示画面を有する表示部と、車両のうちの物品が収納される予定のスペースである収納スペースを、前記撮像部によって撮像することによって得られる撮像画像を取得する画像取得部と、前記物品のサイズに関する情報である物品サイズ情報を取得するとともに、前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得する情報取得部と、前記収納スペースを含む前記撮像画像を前記表示画面に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像を前記撮像画像に重畳表示する表示制御部と、を備える。

【発明の効果】

【0009】

本発明によれば、良好且つ的確に情報提供を行い得る情報提供方法、プログラム及び情報提供装置を提供することができる。

【図面の簡単な説明】

【0010】

【図1】一実施形態による情報提供システムを示すブロック図である。

【図2】表示部の表示画面の表示の例を示す図である。

【図3】表示部の表示画面の表示の例を示す図である。

【図4】表示部の表示画面の表示の例を示す図である。

【図5】表示部の表示画面の表示の例を示す図である。

【図6】一実施形態による情報提供方法の例を示すフローチャートである。

【図7】一実施形態による情報提供方法の例を示すフローチャートである。

【発明を実施するための形態】

【0011】

本発明による情報提供方法、プログラム及び情報提供装置について、好適な実施形態を挙げ、添付の図面を参照して以下に詳細に説明する。

【0012】

［一実施形態］
一実施形態による情報提供方法、プログラム及び情報提供装置について図１～図７を用いて説明する。図１は、本実施形態による情報提供システムを示すブロック図である。

【0013】

本実施形態による情報提供システム１０は、車両６０に備えられた収納スペース６２に収納される予定の物品６４（図２参照）に対応する画像である物品画像６４Ａを、当該収納スペース６２を含む撮像画像６６に重畳表示し得るものである（図４参照）。

【0014】

端末装置（ユーザ端末、携帯端末、情報提供装置）１２は、車両６０のユーザによって所持され得る。端末装置１２には、撮像部１６と、センサ群１８と、演算部２０と、記憶部２２と、通信部２４と、操作部２６と、表示部２８とが備えられ得る。なお、端末装置１２には、これらの構成要素以外の構成要素も備えられ得るが、ここでは説明を省略する。サーバ装置１４には、演算部４８と、記憶部５０と、通信部５２とが備えられ得る。なお、サーバ装置１４には、これらの構成要素以外の構成要素も備えられ得るが、ここでは説明を省略する。

【0015】

端末装置１２には、本実施形態による情報提供方法をコンピュータに実行させるためのアプリケーションプログラムが予めインストールされる。アプリケーションプログラムの起動は、例えばユーザによる操作に基づいて行われ得る。

【0016】

撮像部１６、即ち、カメラは、端末装置１２の少なくとも背面側に備えられ得る。撮像部１６によって撮像することによって得られる画像である撮像画像６６（図２参照）は、端末装置１２の正面側、即ち、前面側に備えられた表示部２８の表示画面２８Ａ（図２参照）に表示され得る。

【0017】

センサ群１８には、例えば、３Ｄセンサ３０、即ち、３Ｄイメージセンサ等が備えられ得る。３Ｄセンサ３０としては、例えば、ＴｏＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）方式の距離画像センサが用いられ得るが、これに限定されるものではない。ＴｏＦ方式の距離画像センサは、周囲の物体からレーザ光が跳ね返ってくる時間を算出することで、周囲の状況の３次元画像を取得し得るものである。３Ｄセンサ３０によって取得される３Ｄデータは、後述する３Ｄ計測部３８に供給され得る。

【0018】

演算部２０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈ ｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等のプロセッサ（ｐｒｏｃｅｓｓｏｒ）、即ち、処理回路（ｐｒｏｃｅｓｓｉｎｇ ｃｉｒｃｕｒｉｔｙ）によって構成され得る。演算部２０には、制御部３４と、画像取得部３６と、３Ｄ計測部３８と、算出部４０と、判定部４２と、表示制御部４４と、情報取得部４６とが備えられ得る。制御部３４と、画像取得部３６と、３Ｄ計測部３８と、算出部４０と、判定部４２と、表示制御部４４と、情報取得部４６とは、記憶部２２に記憶されているプログラムが演算部２０によって実行されることによって実現され得る。

【0019】

なお、制御部３４、画像取得部３６、３Ｄ計測部３８、算出部４０、判定部４２、表示制御部４４、情報取得部４６の少なくとも一部が、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の集積回路によって実現されるようにしてもよい。また、制御部３４、画像取得部３６、３Ｄ計測部３８、算出部４０、判定部４２、表示制御部４４、情報取得部４６の少なくとも一部が、ディスクリートデバイスを含む電子回路によって構成されるようにしてもよい。

【0020】

記憶部２２には、不図示の揮発性メモリと、不図示の不揮発性メモリとが備えられ得る。揮発性メモリとしては、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等が挙げられ得る。不揮発性メモリとしては、例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ等が挙げられ得る。データ等が、例えば揮発性メモリに記憶され得る。プログラム、テーブル、マップ等が、例えば不揮発性メモリに記憶され得る。記憶部２２の少なくとも一部が、上述したようなプロセッサ、集積回路等に備えられていてもよい。

【0021】

通信部２４には、例えば、携帯電話網に対応し得る不図示の通信モジュールが備えられている。通信部２４は、携帯電話網を介して通信を行い得る。通信部２４は、サーバ装置１４に備えられた通信部５２との間で中継局５４とネットワーク５６とを介して通信を行い得る。

【0022】

操作部２６は、ユーザが端末装置１２を操作する際に用いられ得る。表示部２８には、不図示の表示素子が備えられている。表示素子としては、例えば、液晶表示素子、有機エレクトロルミネッセンス表示素子等が用いられ得る。このような表示素子が備えられた不図示のタッチパネルによって、操作部２６と表示部２８とが構成され得る。

【0023】

制御部３４は、端末装置１２の全体の制御を司る。

【0024】

画像取得部３６は、撮像部１６によって撮像することによって得られる撮像画像６６（図２参照）を取得し得る。物品６４（図２参照）が撮像部１６によって撮像されることによって、物品６４を含む撮像画像６６が画像取得部３６によって取得され得る（図２参照）。物品６４が収納される予定のスペースである収納スペース６２（図３参照）、即ち、収納部位（収納空間）が撮像部１６によって撮像されることによって、当該収納スペース６２を含む撮像画像６６が画像取得部３６によって取得され得る。

【0025】

３Ｄ計測部３８は、３Ｄセンサ３０から供給される情報に基づいて、３Ｄ計測を行い得る。３Ｄセンサ３０から供給される３Ｄデータは、撮像部１６によって取得される撮像画像６６と対応付けられ得る。撮像部１６によって物品６４が撮像された際には、３Ｄ計測部３８は、当該撮像部１６によって取得された撮像画像６６に対応付けられた３Ｄデータに基づいて、当該物品６４に関する３Ｄ情報を取得し得る。

【0026】

表示制御部４４は、表示部２８の表示の制御を司る。表示制御部４４は、表示部２８の表示画面２８Ａに撮像画像６６を表示するとともに、物品６４に対応する画像である物品画像６４Ａ（図４参照）を撮像画像６６に重畳表示し得る。即ち、本実施形態では、拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）表示が行われ得る。物品画像６４Ａは、物品６４を撮像部１６によって撮像することによって得られる撮像画像６６に基づいて取得され得るが、これに限定されるものではない。物品６４に関する情報が掲載されているウェブサイト等から、物品画像６４Ａが取得されるようにしてもよい。表示制御部４４は、収納スペース６２のサイズに関する情報である収納スペースサイズ情報と、物品６４のサイズに関する情報である物品サイズ情報とに基づいて、物品６４に対応する画像である物品画像６４Ａを撮像画像６６に重畳表示し得る。より具体的には、表示制御部４４は、収納スペースサイズ情報と、物品サイズ情報とに基づいて、表示画面２８Ａ上における物品画像６４Ａのサイズを調整し得る。表示制御部４４は、表示部２８の表示画面２８Ａに対するユーザによる操作に基づいて、表示画面２８Ａ上における物品画像６４Ａの位置を更新し得る。また、表示制御部４４は、表示画面２８Ａに対するユーザによる操作に基づいて、表示画面２８Ａ上における物品画像６４Ａの姿勢を更新し得る。

【0027】

情報取得部４６は、車両６０に収納される予定の物品６４のサイズに関する情報、即ち、当該物品６４の形状及び寸法に関する情報を取得し得る。物品６４のサイズに関する情報、即ち、物品サイズ情報は、例えば以下のようにして取得され得る。即ち、撮像部１６によって物品６４を撮像することによって撮像画像６６を取得すると、３Ｄセンサ３０から供給される３Ｄデータが当該撮像画像６６に対応付けられる。３Ｄ計測部３８は、当該撮像画像６６に対応付けられた３Ｄデータに基づいて、当該物品６４のサイズを計測し得る。このように、３Ｄ計測部３８による３Ｄ計測によって物品サイズ情報が取得され得る。なお、物品サイズ情報が、当該物品６４に関する情報が掲載されたウェブサイト等から取得されるようにしてもよい。

【0028】

情報取得部４６は、収納スペース６２のサイズに関する情報、即ち、収納スペース６２の形状及び寸法に関する情報を取得し得る。収納スペース６２のサイズに関する情報、即ち、収納スペースサイズ情報としては、収納スペース６２に関する設計データ（ＣＡＤデータ）に基づくサイズ情報が用いられ得る。設計データに基づくサイズ情報、即ち、設計データに基づく収納スペースサイズ情報は、端末装置１２に備えられた記憶部２２に予め記憶され得るが、これに限定されるものではない。設計データに基づく収納スペースサイズ情報が、サーバ装置１４に備えられた記憶部５０に記憶されていてもよい。この場合には、設計データに基づく収納スペースサイズ情報がサーバ装置１４から端末装置１２に供給され得る。また、当該車両６０に関する情報が掲載されたウェブサイト等から、設計データに基づく収納スペースサイズ情報が取得されるようにしてもよい。

【0029】

判定部４２は、物品６４を収納スペース６２に収納する際に干渉が生ずるか否かを判定し得る。換言すれば、判定部４２は、物品６４を収納スペース６２に収納し得るか否かを判定し得る。物品６４を収納スペース６２に収納する際に干渉が生ずるか否かは、物品６４のサイズに関する情報である物品サイズ情報と、収納スペース６２のサイズに関する情報である収納スペースサイズ情報とに基づいて判定され得る。判定部４２は、物品６４を収納スペース６２に収納する際に干渉が生ずる部位である干渉部位６８（図５参照）を判定し得る。表示制御部４４は、判定部４２によって判定された干渉部位６８を示す情報を表示部２８の表示画面２８Ａに表示し得る。

【0030】

算出部４０は、物品６４を収納スペース６２に収納した際に干渉が生じなくなるような当該物品６４の位置及び姿勢を算出し得る。物品６４を収納スペース６２に収納した際に干渉が生じなくなるような当該物品６４の位置及び姿勢は、物品６４のサイズに関する情報と、収納スペース６２のサイズに関する情報とに基づいて算出され得る。即ち、収納スペース６２に収納した際に干渉が生じなくなるような物品６４の位置及び姿勢は、当該物品６４の形状及び寸法に関する情報と、当該収納スペース６２の形状及び寸法に関する情報とに基づいて算出され得る。

【0031】

算出部４０は、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を算出し得る。収納スペース６２の変形は、物品６４の質量に関する情報と、収納スペース６２に用いられている材料の変形特性に関する情報とに基づいて算出され得る。材料の変形特性は、当該材料に加わる荷重と、当該材料の変形量との関係を示すものである。表示制御部４４は、算出部４０によって算出された収納スペース６２の変形を示す情報を表示部２８の表示画面２８Ａに表示し得る。物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報は、収納スペース６２の変形を示す画像であってもよいし、収納スペース６２の変形量を示す数値等であってもよい。

【0032】

算出部４０は、物品６４を収納スペース６２に収納した際における車両６０の変位、即ち、鉛直方向における車体の変位を算出し得る。車両６０の変位は、物品６４の質量に関する情報と、車両６０の変位特性に関する情報とに基づいて算出され得る。車両６０の変位特性は、当該車両６０に加わる荷重と、当該車両６０の変位量との関係を示すものである。表示制御部４４は、算出部４０によって算出された収納スペース６２の変形を示す情報を表示部２８の表示画面２８Ａに表示し得る。物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報は、車両６０の変位を示す画像であってもよいし、車両６０の変位量を示す数値等であってもよい。

【0033】

算出部４０は、物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位を算出し得る。物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位は、当該物品６４の質量、当該物品６４の重心等に基づいて算出され得る。表示制御部４４は、物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位を示す情報を表示部２８の表示画面２８Ａに表示し得る。車両６０が加速又は減速した際における当該物品６４の変位を示す情報としては、当該物品６４の変位後の位置及び姿勢を示す画像であってもよいし、当該物品６４の変位を示す数値等であってもよい。

【0034】

図２は、表示部の表示画面の表示の例を示す図である。収納スペース６２に収納する予定の物品６４を撮像することによって得られた撮像画像６６が表示部２８の表示画面２８Ａに表示されている例が図２には示されている。

【0035】

図３は、表示部の表示画面の表示の例を示す図である。収納スペース６２が備えられた車両６０を撮像することによって得られた撮像画像６６が表示部２８の表示画面２８Ａに表示されている例が図３には示されている。

【0036】

図４は、表示部の表示画面の表示の例を示す図である。物品６４に対応する画像である物品画像６４Ａを重畳表示させた状態が図４には示されている。物品６４のサイズに関する情報である物品サイズ情報と、収納スペース６２のサイズに関する情報である収納スペースサイズ情報とに基づいて、表示画面２８Ａ上における物品６４のサイズが調整され得る。収納スペース６２のサイズに対して物品６４のサイズが充分に小さい場合の例が図４には示されている。

【0037】

図５は、表示部の表示画面の表示の例を示す図である。収納スペース６２に物品６４を収納する際に干渉が生ずる場合の例が図５には示されている。図５に示すように、表示部２８の表示画面２８Ａには、干渉部位６８を示す情報が表示され得る。

【0038】

次に、本実施形態による情報提供方法の例について図６を用いて説明する。図６は、本実施形態による情報提供方法の例を示すフローチャートである。

【0039】

ステップＳ１において、収納スペース６２に収納する予定の物品６４が撮像部１６によって撮像される。画像取得部３６は、撮像部１６によって物品６４を撮像することによって得られる撮像画像６６を取得する。この後、ステップＳ２に遷移する。

【0040】

ステップＳ２において、情報取得部４６は、物品６４のサイズに関する情報、即ち、物品サイズ情報を取得する。上述したように、３Ｄ計測部３８による３Ｄ計測によって物品サイズ情報が取得され得るが、これに限定されるものではない。上述したように、物品サイズ情報が、当該物品６４に関する情報が掲載されたウェブサイト等から取得されるようにしてもよい。この後、ステップＳ３に遷移する。

【0041】

ステップＳ３において、収納スペース６２が撮像部１６によって撮像される。画像取得部３６は、撮像部１６によって収納スペース６２を撮像することによって得られる撮像画像６６を取得する。この後、ステップＳ４に遷移する。

【0042】

ステップＳ４において、情報取得部４６は、収納スペース６２のサイズに関する情報、即ち、収納スペースサイズ情報を取得し得る。上述したように、収納スペースサイズ情報としては、収納スペース６２に関する設計データに基づくサイズ情報が用いられ得る。この後、ステップＳ５に遷移する。

【0043】

ステップＳ５において、表示制御部４４は、表示部２８の表示画面２８Ａに撮像画像６６を表示するとともに、物品６４に対応する画像である物品画像６４Ａを撮像画像６６に重畳表示する。この後、ステップＳ６に遷移する。

【0044】

ステップＳ６において、判定部４２は、物品画像６４Ａを移動させる操作がユーザによって行われたか否かを判定する。物品画像６４Ａを移動させるためにユーザによって行われる操作は、例えば、表示部２８の表示画面２８Ａに表示された物品画像６４Ａに対するドラッグの操作であるが、これに限定されるものではない。物品画像６４Ａを移動させる操作がユーザによって行われた場合には（ステップＳ６においてＹＥＳ）、ステップＳ７に遷移する。物品画像６４Ａを移動させる操作がユーザによって行われていない場合には（ステップＳ６においてＮＯ）、ステップＳ８に遷移する。

【0045】

ステップＳ７において、表示制御部４４は、表示部２８の表示画面２８Ａに対するユーザによる操作に基づいて、物品画像６４Ａの位置を更新する。この後、ステップＳ８に遷移する。

【0046】

ステップＳ８において、判定部４２は、物品画像６４Ａの姿勢を変更させる操作がユーザによって行われたか否かを判定する。物品画像６４Ａの姿勢を変更させる操作がユーザによって行われた場合には（ステップＳ８においてＹＥＳ）、ステップＳ９に遷移する。物品画像６４Ａの姿勢を変更させる操作がユーザによって行われていない場合には（ステップＳ８においてＮＯ）、ステップＳ１０に遷移する。

【0047】

ステップＳ９において、表示制御部４４は、表示部２８の表示画面２８Ａに対するユーザによる操作に基づいて、物品画像６４Ａの姿勢を更新する。この後、ステップＳ１０に遷移する。

【0048】

ステップＳ１０において、判定部４２は、物品６４を収納スペース６２に収納する際に干渉が生ずるか否かを判定する。上述したように、物品６４を収納スペース６２に収納する際に干渉が生ずるか否かは、物品サイズ情報と、収納スペースサイズ情報とに基づいて判定され得る。物品６４を収納スペース６２に収納する際に干渉が生ずるか否かが判定部４２によって判定される過程で、当該物品６４を収納スペース６２に収納する際に干渉が生ずる部位である干渉部位６８が判定部４２によって判定され得る。

【0049】

物品６４を収納スペース６２に収納する際に干渉が生ずることが判定部４２によって判定された場合（ステップＳ１１においてＹＥＳ）、ステップＳ１２に遷移する。物品６４を収納スペース６２に収納する際に干渉が生じないことが判定部４２によって判定された場合（ステップＳ１１においてＮＯ）、干渉が生じない旨が表示部２８の表示画面２８Ａに表示されるとともに、図６に示す処理が完了する。

【0050】

ステップＳ１２において、表示制御部４４は、判定部４２によって判定された干渉部位６８を示す情報を表示部２８の表示画面２８Ａに表示する。この後、ステップＳ１３に遷移する。

【0051】

ステップＳ１３において、物品６４を収納スペース６２に収納した際に干渉が生じなくなるような位置及び姿勢を算出することを要するか否かが、ユーザに対して問い合わせられる。例えば、表示部２８の表示画面２８Ａに表示された不図示のＹＥＳボタンがユーザによって押されることによって、干渉が生じなくなるような位置及び姿勢の算出部４０による算出が是認され得る。例えば、表示部２８の表示画面２８Ａに表示された不図示のＮＯボタンがユーザによって押されることによって、干渉が生じなくなるような位置及び姿勢の算出部４０による算出が否認され得る。干渉が生じなくなるような位置及び姿勢の算出がユーザによって是認された場合（ステップＳ１３においてＹＥＳ）、ステップＳ１４に遷移する。干渉が生じなくなるような位置及び姿勢の算出がユーザによって否認された場合（ステップＳ１３においてＮＯ）、図６に示す処理が完了する。なお、干渉が生じなくなるような位置及び姿勢の算出の是非をユーザに問い合わせることなく、干渉が生じなくなるような位置及び姿勢が算出部４０によって算出されるようにしてもよい。

【0052】

ステップＳ１４において、算出部４０は、干渉が生じなくなるような位置及び姿勢を算出する。干渉が生じなくなるような当該物品６４の位置及び姿勢は、物品６４のサイズに関する情報と、収納スペース６２のサイズに関する情報とに基づいて算出され得る。この後、ステップＳ１５に遷移する。

【0053】

ステップＳ１５において、表示制御部４４は、干渉が生じなくなるような位置及び姿勢を表示部２８の表示画面２８Ａに表示する。こうして、図６に示す処理が完了する。

【0054】

次に、本実施形態による情報提供方法の例について図７を用いて説明する。図７は、本実施形態による情報提供方法の例を示すフローチャートである。物品６４を収納スペース６２に収納した際における収納スペース６２の変形等を表示部２８の表示画面２８Ａに表示場合の例が図７には示されている。

【0055】

ステップＳ２１において、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報を表示することを要するか否かが、ユーザに対して問い合わせられる。例えば、表示部２８の表示画面２８Ａに表示された不図示のＹＥＳボタンがユーザによって押されることによって、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報の表示が是認され得る。例えば、表示部２８の表示画面２８Ａに表示された不図示のＮＯボタンがユーザによって押されることによって、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報の表示が否認され得る。物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報の表示がユーザによって是認された場合（ステップＳ２１においてＹＥＳ）、ステップＳ２２に遷移する。物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報の表示がユーザによって否認された場合（ステップＳ２１においてＮＯ）、ステップＳ２４に遷移する。

【0056】

ステップＳ２２において、算出部４０は、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を算出する。上述したように、収納スペース６２の変形は、物品６４の質量に関する情報と、収納スペース６２に用いられている材料の変形特性に関する情報とに基づいて算出され得る。この後、ステップＳ２３に遷移する。

【0057】

ステップＳ２３において、表示制御部４４は、算出部４０によって算出された収納スペース６２の変形を示す情報を表示部２８の表示画面２８Ａに表示し得る。上述したように、物品６４を収納スペース６２に収納した際における収納スペース６２の変形を示す情報は、収納スペース６２の変形を示す画像であってもよいし、収納スペース６２の変形量を示す数値等であってもよい。この後、ステップＳ２４に遷移する。

【0058】

ステップＳ２４において、物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報を表示することを要するか否かが、ユーザに対して問い合わせられる。例えば、表示部２８の表示画面２８Ａに表示された不図示のＹＥＳボタンがユーザによって押されることによって、物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報の表示が是認され得る。例えば、表示部２８の表示画面２８Ａに表示された不図示のＮＯボタンがユーザによって押されることによって、物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報の表示が否認され得る。物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報の表示がユーザによって是認された場合（ステップＳ２４においてＹＥＳ）、ステップＳ２５に遷移する。物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報の表示がユーザによって否認された場合（ステップＳ２４においてＮＯ）、ステップＳ２７に遷移する。

【0059】

ステップＳ２５において、算出部４０は、物品６４を収納スペース６２に収納した際における車両６０の変位を算出する。上述したように、車両６０の変位は、物品６４の質量に関する情報と、車両６０の変位特性に関する情報とに基づいて算出され得る。この後、ステップＳ２６に遷移する。

【0060】

ステップＳ２６において、表示制御部４４は、算出部４０によって算出された車両６０の変位を示す情報を表示部２８の表示画面２８Ａに表示し得る。上述したように、物品６４を収納スペース６２に収納した際における車両６０の変位を示す情報は、車両６０の変位を示す画像であってもよいし、車両６０の変位量を示す数値等であってもよい。この後、ステップＳ２７に遷移する。

【0061】

ステップＳ２７において、物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位を示す情報を表示することを要するか否かが、ユーザに対して問い合わせられる。例えば、表示部２８の表示画面２８Ａに表示された不図示のＹＥＳボタンがユーザによって押されることによって、車両６０が加速又は減速した際における当該物品６４の変位を示す情報の表示が是認され得る。例えば、表示部２８の表示画面２８Ａに表示された不図示のＮＯボタンがユーザによって押されることによって、車両６０が加速又は減速した際における当該物品６４の変位を示す情報の表示が否認され得る。車両６０が加速又は減速した際における当該物品６４の変位を示す情報の表示がユーザによって是認された場合（ステップＳ２７においてＹＥＳ）、ステップＳ２８に遷移する。車両６０が加速又は減速した際における当該物品６４の変位を示す情報の表示がユーザによって否認された場合（ステップＳ２７においてＮＯ）、図７に示す処理が完了する。

【0062】

ステップＳ２８において、算出部４０は、物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位を算出する。物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位は、当該物品６４の質量、当該物品６４の重心等に基づいて算出され得る。この後、ステップＳ２９に遷移する。

【0063】

ステップＳ２９において、表示制御部４４は、物品６４を収納スペース６２に収納した状態で車両６０が加速又は減速した際における当該物品６４の変位を示す情報を表示部２８の表示画面２８Ａに表示する。上述したように、車両６０が加速又は減速した際における当該物品６４の変位を示す情報としては、当該物品６４の変位後の位置及び姿勢を示す画像であってもよいし、当該物品６４の変位を示す数値等であってもよい。こうして、図７に示す処理が完了する。

【0064】

このように、本実施形態によれば、収納スペース６２を含む撮像画像６６が表示画面２８Ａに表示されるとともに、当該収納スペース６２に収納される予定の物品６４に対応する画像である物品画像６４Ａが当該撮像画像６６に重畳表示される。物品画像６４Ａが撮像画像６６に重畳表示される際には、収納スペース６２のサイズに関する情報である収納スペースサイズ情報と、物品６４のサイズに関する情報である物品サイズ情報とに基づいて、表示画面２８Ａ上における物品画像６４Ａのサイズが調整される。しかも、かかる収納スペースサイズ情報は、収納スペース６２に関する設計データに基づく高精度な情報である。従って、本実施形態によれば、物品画像６４Ａを撮像画像６６に的確に重畳表示させることができ、ひいては、良好且つ的確に情報提供を行うことができる。

【0065】

本発明についての好適な実施形態を上述したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、種々の改変が可能である。

【0066】

上記実施形態をまとめると以下のようになる。

【0067】

情報提供方法は、車両（６０）に収納される予定の物品（６４）のサイズに関する情報である物品サイズ情報を取得するステップ（Ｓ２）と、前記車両のうちの前記物品が収納される予定のスペースである収納スペース（６２）を端末装置（１２）に備えられた撮像部（１６）によって撮像することによって得られる撮像画像（６６）を取得する画像取得ステップ（Ｓ３）と、前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得するステップ（Ｓ４）と、前記収納スペースを含む前記撮像画像を前記端末装置に備えられた表示画面（２８Ａ）に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像（６４Ａ）を前記撮像画像に重畳表示する表示ステップ（Ｓ５）と、を有する。このような構成によれば、収納スペースを含む撮像画像が表示画面に表示されるとともに、当該収納スペースに収納される予定の物品に対応する画像である物品画像が当該撮像画像に重畳表示される。物品画像が撮像画像に重畳表示される際には、収納スペースのサイズに関する情報である収納スペースサイズ情報と、物品のサイズに関する情報である物品サイズ情報とに基づいて、表示画面上における物品画像のサイズが調整される。しかも、かかる収納スペースサイズ情報は、収納スペースに関する設計データに基づく高精度な情報である。従って、このような構成によれば、物品画像を撮像画像に的確に重畳表示させることができ、ひいては、良好且つ的確に情報提供を行うことができる。

【0068】

前記物品を前記収納スペースに収納する際に干渉が生ずるか否かを判定するステップ（Ｓ１０）を更に備えるようにしてもよい。このような構成によれば、干渉が生ずるか否かをユーザが良好且つ的確に把握し得る。

【0069】

前記物品を前記収納スペースに収納する際に干渉が生ずる場合、前記表示ステップでは、干渉が生ずる部位である干渉部位（６８）を前記表示画面に更に表示するようにしてもよい。このような構成によれば、干渉部位をユーザが良好且つ的確に把握し得る。

【0070】

前記表示画面に対するユーザによる操作に基づいて、前記物品の位置及び前記物品の姿勢のうちの少なくともいずれかを更新するステップを更に有するようにしてもよい。このような構成によれば、物品の位置又は姿勢を変更することによって当該物品を収納し得るか否かをユーザが良好且つ的確に把握し得る。

【0071】

前記物品を前記収納スペースに収納する際に干渉が生ずると判定された場合、干渉が生じなくなるような前記物品の位置及び姿勢を算出するステップ（Ｓ１４）を更に有するようにしてもよい。このような構成によれば、干渉が生じなくなるような物品の位置及び姿勢をユーザが良好且つ的確に把握し得る。

【0072】

前記物品を前記収納スペースに収納した際における前記収納スペースの変形又は前記車両の変位を算出するステップ（Ｓ２２、Ｓ２５）を更に有し、前記表示ステップでは、前記収納スペースの変形又は前記車両の変位を示す情報を更に表示するようにしてもよい。このような構成によれば、収納スペースの変形又は車両の変位をユーザが良好且つ的確に把握し得る。

【0073】

前記物品を前記収納スペースに収納した状態で前記車両が加速又は減速した際における前記物品の変位を算出するステップ（Ｓ２８）を更に有し、前記表示ステップでは、前記物品を前記収納スペースに収納した状態で前記車両が加速又は減速した際における前記物品の変位を示す情報を更に表示するようにしてもよい。このような構成によれば、車両が加速又は減速した際における物品の変位をユーザが良好且つ的確に把握し得る。

【0074】

プログラムは、上記のような情報提供方法をコンピュータに実行させる。

【0075】

情報提供装置（１２）は、撮像部と、表示画面を有する表示部（２８）と、車両のうちの物品が収納される予定のスペースである収納スペースを、前記撮像部によって撮像することによって得られる撮像画像を取得する画像取得部（３６）と、前記物品のサイズに関する情報である物品サイズ情報を取得するとともに、前記収納スペースに関する設計データに基づいた、前記収納スペースのサイズに関する情報である収納スペースサイズ情報を取得する情報取得部（４６）と、前記収納スペースを含む前記撮像画像を前記表示画面に表示するとともに、前記収納スペースサイズ情報と、前記物品サイズ情報とに基づいて、前記物品に対応する画像である物品画像を前記撮像画像に重畳表示する表示制御部（４４）と、を備える。

【符号の説明】

【0076】

１０：情報提供システム １２：端末装置
１４：サーバ装置 １６：撮像部
１８：センサ群 ２０、４８：演算部
２２、５０：記憶部 ２４、５２：通信部
２６：操作部 ２８：表示部
２８Ａ：表示画面 ３０：３Ｄセンサ
３４：制御部 ３６：画像取得部
３８：３Ｄ計測部 ４０：算出部
４２：判定部 ４４：表示制御部
４６：情報取得部 ５４：中継局
５６：ネットワーク ６０：車両
６２：収納スペース ６４：物品
６４Ａ：物品画像 ６６：撮像画像
６８：干渉部位

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】