▶ パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカの特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024096224
(43)【公開日】2024-07-12
(54)【発明の名称】表示制御方法
(51)【国際特許分類】
H04N 7/18 20060101AFI20240705BHJP
H04M 9/00 20060101ALI20240705BHJP
【ＦＩ】
H04N7/18 H
H04N7/18 U
H04M9/00 H
【審査請求】有
【請求項の数】1
【出願形態】ＯＬ
(21)【出願番号】P 2024071487
(22)【出願日】2024-04-25
(62)【分割の表示】P 2023046006の分割
【原出願日】2018-12-26
(31)【優先権主張番号】62/611,109
(32)【優先日】2017-12-28
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】P 2018200429
(32)【優先日】2018-10-24
(33)【優先権主張国・地域又は機関】JP
(71)【出願人】
【識別番号】514136668
【氏名又は名称】パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ
【氏名又は名称原語表記】Ｐａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ
(74)【代理人】
【識別番号】100109210
【弁理士】
【氏名又は名称】新居 広守
(74)【代理人】
【識別番号】100137235
【弁理士】
【氏名又は名称】寺谷 英作
(74)【代理人】
【識別番号】100131417
【弁理士】
【氏名又は名称】道坂 伸一
(72)【発明者】
【氏名】飯島 隆宏
(57)【要約】
【課題】対象物を配達する配達員が到着した際に、ユーザが次の行動を判断するための情報を効果的にユーザに提示することができる表示制御方法を提供する。
【解決手段】表示制御方法は、情報処理サーバ（１００）を備えるシステム（１０）を用いた表示制御方法であって、情報処理サーバ（１００）は、（ａ）ユーザ（２０）が存在する建物に対象物（４０）を配達する配達員（５０）の画像が建物の出入口（３０）に設置されたカメラ（３００）で撮影されたとき、調理機器（６００）のオンオフ信号を取得し（Ｓ２０２）、（ｂ）調理機器のオンオフ信号に基づいて、ユーザが調理機器を用いて調理中であるか否かを示すユーザ状態を推定し、（ｃ）ユーザ状態に対応する少なくとも１つの提案内容を取得し（Ｓ３０１）、（ｄ）建物内に配置された表示端末（２００）に、配達員（５０）の画像と、少なくとも１つの提案内容とを表示させる（Ｓ３０２）。
【選択図】図６
【解決手段】表示制御方法は、情報処理サーバ（１００）を備えるシステム（１０）を用いた表示制御方法であって、情報処理サーバ（１００）は、（ａ）ユーザ（２０）が存在する建物に対象物（４０）を配達する配達員（５０）の画像が建物の出入口（３０）に設置されたカメラ（３００）で撮影されたとき、調理機器（６００）のオンオフ信号を取得し（Ｓ２０２）、（ｂ）調理機器のオンオフ信号に基づいて、ユーザが調理機器を用いて調理中であるか否かを示すユーザ状態を推定し、（ｃ）ユーザ状態に対応する少なくとも１つの提案内容を取得し（Ｓ３０１）、（ｄ）建物内に配置された表示端末（２００）に、配達員（５０）の画像と、少なくとも１つの提案内容とを表示させる（Ｓ３０２）。
【選択図】図６
【特許請求の範囲】
【請求項1】
情報処理サーバを備えるシステムを用いた表示制御方法であって、
前記情報処理サーバは、
（ａ）ユーザが存在する建物に対象物を配達する配達員の画像が前記建物の出入口に設置されたカメラで撮影されたとき、調理機器のオンオフ信号を取得し、
（ｂ）前記調理機器のオンオフ信号に基づいて、前記ユーザが前記調理機器を用いて調理中であるか否かを示すユーザ状態を推定し、
（ｃ）前記ユーザ状態に対応する少なくとも１つの提案内容を取得し、
（ｄ）前記建物内に配置された表示端末に、前記配達員の画像と、前記少なくとも１つの提案内容とを表示させる、
表示制御方法。
前記情報処理サーバは、
（ａ）ユーザが存在する建物に対象物を配達する配達員の画像が前記建物の出入口に設置されたカメラで撮影されたとき、調理機器のオンオフ信号を取得し、
（ｂ）前記調理機器のオンオフ信号に基づいて、前記ユーザが前記調理機器を用いて調理中であるか否かを示すユーザ状態を推定し、
（ｃ）前記ユーザ状態に対応する少なくとも１つの提案内容を取得し、
（ｄ）前記建物内に配置された表示端末に、前記配達員の画像と、前記少なくとも１つの提案内容とを表示させる、
表示制御方法。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、ユーザの建物に対象物を配達する配達員からの対象物の受け取りに関する提案内容の表示を制御する表示制御方法、情報処理サーバ及び表示端末に関する。
【背景技術】
【0002】
従来、建物の出入口に設置されたカメラで撮影された画像を建物内の表示端末に表示する技術がある。例えば、特許文献１では、室内親機と玄関子機との無線通信を安定して行うためのテレビドアホン装置が開示されている。このようなテレビドアホンでは、例えば、配達員が建物の出入口に到着してインターホンをオンした場合に、玄関子機で撮影された配達員の画像が室内親機の表示部に表示される。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１７－２２０７９５号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、上記従来技術では、室内親機には配達員の画像しか表示されないため、ユーザが次の行動を判断するための情報を効果的にユーザに提示できない。
【0005】
そこで、本開示は、対象物を配達する配達員が到着した際に、ユーザが次の行動を判断するための情報を効果的にユーザに提示することができる表示制御方法等を提供する。
【課題を解決するための手段】
【0006】
本開示の一態様に係る表示制御方法は、情報処理サーバを備えるシステムを用いた表示制御方法であって、前記情報処理サーバは、（ａ）ユーザが存在する建物に対象物を配達する配達員の画像が前記建物の出入口に設置されたカメラで撮影されたとき、調理機器のオンオフ信号を取得し、（ｂ）前記調理機器のオンオフ信号に基づいて、前記ユーザが前記調理機器を用いて調理中であるか否かを示すユーザ状態を推定し、（ｃ）前記ユーザ状態に対応する少なくとも１つの提案内容を取得し、（ｄ）前記建物内に配置された表示端末に、前記配達員の画像と、前記少なくとも１つの提案内容とを表示させる。
【0007】
なお、これらの包括的又は具体的な態様は、システム、装置、集積回路、コンピュータプログラム又はコンピュータ読み取り可能なＣＤ－ＲＯＭなどの記録媒体で実現されてもよく、システム、装置、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。
【発明の効果】
【0008】
本開示の一態様に係る表示制御方法は、対象物を配達する配達員が到着した際に、ユーザが次の行動を判断するための情報を効果的にユーザに提示することができる。
【図面の簡単な説明】
【0009】
【発明を実施するための形態】
【0010】
以下、実施の形態について、図面を参照しながら具体的に説明する。
【0011】
なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、請求の範囲を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。また、各図は、必ずしも厳密に図示したものではない。各図において、実質的に同一の構成については同一の符号を付し、重複する説明は省略又は簡略化する。
【0012】
本開示に係る情報処理システム及び方法の基礎となる知見を説明する。本発明者らは、配達員が訪れたときのユーザの対応について検討した。配達員が訪れた時、ユーザは、自身の状況に応じて、希望する対応が異なる。一方で、ユーザは、配達員に対して、早い対応が求められる。そこで、本開示に係る情報処理システム及び方法は、ユーザに、配達の状況を伝えるための情報を提供することで、ユーザが希望する対応を決定することを容易にしている。加えて、本開示に係る情報処理システム及び方法は、対応を早めるための提案内容を提供し、その表示に対するユーザの反応に応じて機器を制御することにより、ユーザの対応を簡易化している。つまり、本開示に係る情報処理システム及び方法は、配達の状況を伝えるための情報と対応を早めるための提案内容との両方を、一つの画面に表示することで、ユーザの状況理解と対応の簡易化とを両立する本発明に至った。
【0013】
（実施の形態１）
［情報処理システム及び周辺機器の構成］
まず、実施の形態１に係る情報処理システム及び周辺機器の構成について、図１～図５を参照しながら説明する。図１は、実施の形態１に係る情報処理システム及び周辺機器の外観図である。図２は、実施の形態１に係る情報処理システムの機能構成を示すブロック図である。
［情報処理システム及び周辺機器の構成］
まず、実施の形態１に係る情報処理システム及び周辺機器の構成について、図１～図５を参照しながら説明する。図１は、実施の形態１に係る情報処理システム及び周辺機器の外観図である。図２は、実施の形態１に係る情報処理システムの機能構成を示すブロック図である。
【0014】
情報処理システム１０は、情報処理サーバ１００と、表示端末２００を含む１以上の表示端末と、を備える。情報処理サーバ１００及び１以上の表示端末は、互いに通信可能に接続されている。以下では、１以上の表示端末を代表して表示端末２００について説明し、他の表示端末の説明を省略する。
【0015】
また、情報処理システム１０は、カメラ３００、電子錠４００、情報端末５００、調理機器６００、センサ７００、第１のデータベース８０１、第２のデータベース８０２、及び第３のデータベース８０３と通信可能に接続されている。
【0016】
情報処理サーバ１００は、例えばクラウドサーバであり、ユーザ状態に基づいて、表示端末２００に少なくとも１つの提案内容を表示させる。
【0017】
表示端末２００は、ディスプレイを有し、情報処理サーバ１００から受信した少なくとも１つの提案内容をディスプレイに表示する。本実施の形態では、表示端末２００は、建物内の壁面に取り付けられている。または、表示端末２００は、携帯端末であってもよい。
【0018】
カメラ３００は、建物の出入口３０に設置される。図１では、カメラ３００は、ドアホンに内蔵されている。例えば、カメラ３００は、対象物４０をユーザ２０の建物に配達する配達員５０の画像を撮影する。建物は、住居、集合住宅、複数の事務所を有するオフィスビル、複数の店舗を有する商業ビル、及び複数の部屋を有するホテルなどを含む。集合住宅の出入口３０は、各住居の出入口、又は集合住宅の出入口であっても良い。オフィスビルの出入口３０は、各事務所の出入口、オフィスビルの出入口であっても良い。同様に、商業ビルの出入口３０は、各店舗の出入口、商業ビルの出入口であっても良い。
【0019】
電子錠４００は、建物の出入口３０の開閉操作を遠隔で制御可能な錠前である。電子錠４００は、電子鍵と呼ばれる場合もある。電子錠４００は、情報処理システム１０からの施錠／開錠信号に基づいて出入口３０の開閉操作を制御する。
【0020】
情報端末５００は、配達員５０が使用可能な端末である。情報端末５００は、例えば配達員５０に携帯されるハンディ端末である。例えば、情報端末５００は、情報処理システム１０から対象物４０の再配達依頼を受信する。また例えば、情報端末５００は、出入口３０に設置されてもよい。
【0021】
調理機器６００は、ユーザ２０が調理時に使用する機器である。調理機器６００は、例えば、電子レンジ及びコンロなどである。調理機器６００は、情報処理システム１０からの信号に基づいてオン／オフを制御することができる。
【0022】
センサ７００は、ユーザ２０が調理機器６００を用いて調理中であるか否かを示すユーザ状態を取得するためのセンサ値を情報処理システム１０に送信する。具体的には、センサ７００は、例えば建物内に配置され、建物内の画像を撮影するイメージセンサである。また例えば、センサ７００は、調理機器６００のオン／オフを検知するオン／オフセンサであってもよい。
【0023】
第１のデータベース８０１は、複数のユーザの各々についてセンサ値とユーザ状態とが対応付けられた第１のデータ８０１ａを記憶している記憶装置である。具体的には、第１のデータベース８０１は、例えばプロセッサ、メモリ及びハードディスクドライブを備えるデータベースサーバである。
【0024】
ここで、第１のデータ８０１ａについて具体例を参照しながら説明する。図３は、実施の形態１における第１のデータ８０１ａの一例を示す。
【0025】
図３では、第１のデータ８０１ａは、ユーザ情報と、センサ値と、ユーザ状態と、を含む。ユーザ情報は、ユーザを識別する情報である。センサ値は、例えば画像パターンを表す。ユーザ状態は、ユーザが調理中か否かを示す。図３の第１のデータ８０１ａによれば、例えば「ＵＳＥＲ１」で識別されるユーザの映像に「パターン１」が含まれていれば、ユーザ状態が調理中と判別される。
【0026】
第２のデータベース８０２は、複数の特定情報又は複数の配達予定時刻と複数の対象物の内容情報とが対応付けられた第２のデータ８０２ａを記憶している記憶装置である。具体的には、第２のデータベース８０２は、例えばプロセッサ、メモリ及びハードディスクドライブを備えるデータベースサーバである。
【0027】
ここで、第２のデータ８０２ａについて具体例を参照しながら説明する。図４は、実施の形態１における第２のデータ８０２ａの一例を示す。
【0028】
図４では、第２のデータ８０２ａは、ＩＤと、配送予定日時と、画像情報と、急ぎフラグと、を含む。ＩＤは、内容情報を特定するための特定情報の一例である。配送予定日時は、対象物の配送が予定されている日時を示す。
【0029】
画像情報は、対象物の画像を識別する識別情報（例えばＵＲＩ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｉｄｅｎｔｉｆｉｅｒ）など）である。急ぎフラグは、対象物の配達が急ぎであるか否かを示す急ぎ情報の一例である。例えば、急ぎフラグは、ユーザがウェブサイトを介して対象物を購入する際にユーザによって設定される。ここでは、急ぎフラグにおいて、「１」は急ぎであることを示し、「０」が急ぎでないことを示す。これらの画像情報及び急ぎフラグが対象物の内容情報に対応する。
【0030】
図４の第２のデータ８０２ａによれば、例えば「０００００１」で特定される対象物の画像が「・・・／ｉｍａｇｅ０１．ｊｐｇ」であり、その配達が急ぎであることがわかる。また、「２０１８年１０月３０日の１２時」に配達予定の対象物の画像が「・・・／ｉｍａｇｅ０１．ｊｐｇ」であり、その配達が急ぎであることもわかる。
【0031】
第３のデータベース８０３は、ユーザ状態及び対象物の内容情報の複数の組合せと少なくとも１つの提案内容をそれぞれ含む複数の提案内容セットとが対応付けられた第３のデータ８０３ａを記憶している記憶装置である。具体的には、第３のデータベース８０３は、例えばプロセッサ、メモリ及びハードディスクドライブを備えるデータベースサーバである。
【0032】
ここで、第３のデータ８０３ａについて具体例を参照しながら説明する。図５は、実施の形態１における第３のデータ８０３ａの一例を示す。
【0033】
図５では、第３のデータ８０３ａは、ユーザ状態と、急ぎフラグと、第１の提案内容と、第２の提案内容と、を含む。ユーザ状態は、ユーザが調理中であるか否かを示す。急ぎフラグは、図４と同様に、対象物の配達が急ぎであるか否かを示す急ぎ情報の一例である。図５の第３のデータ８０３ａによれば、例えばユーザ状態が「調理中」を示し、かつ急ぎ情報が「Ｙｅｓ」を示す場合に、「調理機器ＯＦＦ」を提案する第１の提案内容及び「開錠」を提案する第２の提案内容が取得される。
【0034】
［情報処理サーバの構成］
次に、情報処理サーバ１００の構成について説明する。図２に示すように、情報処理サーバ１００は、プロセッサ１０１と、メモリ１０２と、通信部１０３と、を備える。
次に、情報処理サーバ１００の構成について説明する。図２に示すように、情報処理サーバ１００は、プロセッサ１０１と、メモリ１０２と、通信部１０３と、を備える。
【0035】
プロセッサ１０１は、メモリ１０２に接続された電子回路である。プロセッサ１０１は、対象物４０をユーザ２０の建物に配達する配達員５０の画像が建物の出入口３０に設置されたカメラ３００で撮影されたとき、センサ７００によりユーザ２０が調理機器６００を用いて調理中であるか否かを示すユーザ状態を取得する。さらに、プロセッサ１０１は、対象物４０の内容情報を取得する。それから、プロセッサ１０１は、ユーザ状態に対応する少なくとも１つの提案内容を取得し、表示端末２００に、配達員５０の画像と、対象物４０の内容情報と、少なくとも１つの提案内容とを表示させる。これらの処理の詳細については、フローチャート等を用いて後述する。
【0036】
メモリ１０２は、例えば半導体メモリ及び／又はハードディスクドライブである。メモリ１０２は、ソフトウェアプログラム又はインストラクションを格納することができる。メモリ１０２に格納されたソフトウェアプログラム又はインストラクションが実行されたときに、プロセッサ１０１は上記処理を行うことができる。
【0037】
通信部１０３は、通信ネットワークを介して、表示端末２００、カメラ３００、電子錠４００、情報端末５００、調理機器６００、センサ７００、第１のデータベース８０１、第２のデータベース８０２及び第３のデータベース８０３と有線通信及び無線通信の一方又は両方を行うためのネットワークアダプタである。通信ネットワークとしては、例えばインターネット、ワイドエリアネットワーク（ＷＡＮ）、ローカルエリアネットワーク（ＬＡＮ）、又は、これらの任意の組合せを用いることができる。無線通信としては、無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｚｉｇｂｅｅ（登録商標）、又は、これらの任意の組合せを用いることができる。
【0038】
［表示端末の構成］
次に、表示端末２００の構成について説明する。図２に示すように、表示端末２００は、プロセッサ２０１と、メモリ２０２と、通信部２０３と、ディスプレイ２０４と、入力部２０５と、を備える。
次に、表示端末２００の構成について説明する。図２に示すように、表示端末２００は、プロセッサ２０１と、メモリ２０２と、通信部２０３と、ディスプレイ２０４と、入力部２０５と、を備える。
【0039】
プロセッサ２０１は、メモリ２０２に接続された電子回路である。プロセッサ２０１は、情報処理サーバ１００から受信した、配達員５０の画像、対象物４０の内容情報及び少なくとも１つの提案内容を、ディスプレイ２０４に表示する。
【0040】
メモリ２０２は、例えば半導体メモリ及び／又はハードディスクドライブである。メモリ２０２は、ソフトウェアプログラム又はインストラクションを格納することができる。メモリ２０２に格納されたソフトウェアプログラム又はインストラクションが実行されたときに、プロセッサ２０１は各種処理を行う。
【0041】
通信部２０３は、通信ネットワークを介して情報処理サーバ１００と有線通信及び無線通信の一方又は両方を行うためのネットワークアダプタである。
【0042】
ディスプレイ２０４は、情報処理サーバ１００から受信した、配達員５０の画像、対象物４０の内容情報及び少なくとも１つの提案内容を表示する。例えば、ディスプレイ２０４は、液晶ディスプレイ又は有機ＥＬディスプレイである。
【0043】
入力部２０５は、ユーザから入力を受けるための入力デバイスである。例えば、入力部２０５は、ディスプレイ２０４と一体に設けられたタッチパネル（つまり、タッチスクリーン）である。また例えば、入力部２０５は、機械式ボタン、マウス、キーボード、又は、これらとタッチパネルとの任意の組合せであってもよい。
【0044】
［情報処理システムの動作］
次に、以上のように構成された情報処理システム１０の処理について、図６～図１２を参照しながら説明する。図６は、実施の形態１に係る情報処理システムの処理を示すフローチャートである。
次に、以上のように構成された情報処理システム１０の処理について、図６～図１２を参照しながら説明する。図６は、実施の形態１に係る情報処理システムの処理を示すフローチャートである。
【0045】
［ステップＳ１０１］
情報処理サーバ１００のプロセッサ１０１は、カメラ３００から配達員５０の画像（以下、カメラ画像ともいう）を取得する。図７は、実施の形態１におけるカメラ画像３０１の一例である。図７において、カメラ画像３０１には、配達員５０と対象物４０とが含まれる。さらに、カメラ画像３０１には、対象物４０の内容情報を特定するための特定情報が記載されたシート４１が含まれている。例えば、特定情報は、バーコード及び／又は文字列でシート４１に記載されている。
情報処理サーバ１００のプロセッサ１０１は、カメラ３００から配達員５０の画像（以下、カメラ画像ともいう）を取得する。図７は、実施の形態１におけるカメラ画像３０１の一例である。図７において、カメラ画像３０１には、配達員５０と対象物４０とが含まれる。さらに、カメラ画像３０１には、対象物４０の内容情報を特定するための特定情報が記載されたシート４１が含まれている。例えば、特定情報は、バーコード及び／又は文字列でシート４１に記載されている。
【0046】
［ステップＳ１０２］
情報処理サーバ１００のプロセッサ１０１は、対象物４０の内容情報を取得する。具体的には、プロセッサ１０１は、まず、カメラ画像３０１から特定情報を取得する。そして、プロセッサ１０１は、取得された特定情報に基づいて、第２のデータ８０２ａを参照して、対象物４０の内容情報を取得する。例えば、プロセッサ１０１は、カメラ画像３０１のシート４１に記載されたバーコードを認識することにより、特定情報として「０００００１」を取得する。そして、プロセッサ１０１は、図４の第２のデータ８０２ａを参照して、「０００００１」に対応する画像情報「・・・／ｉｍａｇｅ０１．ｊｐｇ」及び急ぎフラグ「１」を対象物４０の内容情報として取得する。
情報処理サーバ１００のプロセッサ１０１は、対象物４０の内容情報を取得する。具体的には、プロセッサ１０１は、まず、カメラ画像３０１から特定情報を取得する。そして、プロセッサ１０１は、取得された特定情報に基づいて、第２のデータ８０２ａを参照して、対象物４０の内容情報を取得する。例えば、プロセッサ１０１は、カメラ画像３０１のシート４１に記載されたバーコードを認識することにより、特定情報として「０００００１」を取得する。そして、プロセッサ１０１は、図４の第２のデータ８０２ａを参照して、「０００００１」に対応する画像情報「・・・／ｉｍａｇｅ０１．ｊｐｇ」及び急ぎフラグ「１」を対象物４０の内容情報として取得する。
【0047】
なお、プロセッサ１０１は、必ずしも、特定情報に基づいて対象物４０の内容情報を取得する必要はない。例えば、プロセッサ１０１は、画像が取得された日時に基づいて、第２のデータ８０２ａを参照して対象物４０の内容情報を取得してもよい。例えば、カメラ画像３０１が撮影された日時が２０１８年１０月３０日１１時５５分であった場合に、プロセッサ１０１は、当該日時に最も近い配達予定日時「２０１８／１０／３０ １２：００」に対応する画像情報「・・・／ｉｍａｇｅ０１．ｊｐｇ」及び急ぎフラグ「１」を対象物４０の内容情報として取得してもよい。
【0048】
［ステップＳ２０１］
情報処理サーバ１００のプロセッサ１０１は、センサ７００の出力値であるセンサ値を取得する。例えば、センサ７００がイメージセンサである場合、プロセッサ１０１は、画像データをセンサ値として取得する。また例えば、センサ７００がオン／オフセンサである場合、プロセッサ１０１は、オン／オフ信号をセンサ値として取得する。
情報処理サーバ１００のプロセッサ１０１は、センサ７００の出力値であるセンサ値を取得する。例えば、センサ７００がイメージセンサである場合、プロセッサ１０１は、画像データをセンサ値として取得する。また例えば、センサ７００がオン／オフセンサである場合、プロセッサ１０１は、オン／オフ信号をセンサ値として取得する。
【0049】
［ステップＳ２０２］
情報処理サーバ１００のプロセッサ１０１は、センサ７００を用いてユーザ状態を取得する。具体的には、プロセッサ１０１は、例えば、センサ７００により取得されたセンサ値に基づいてユーザ状態を取得する。より具体的には、プロセッサ１０１は、センサ値に基づいて、第１のデータ８０１ａを参照してユーザ状態を取得する。このとき、プロセッサ１０１は、センサ値に基づいてユーザを特定し、特定されたユーザ及びセンサ値に基づいて、第１のデータ８０１ａを参照してユーザ状態を取得してもよい。
情報処理サーバ１００のプロセッサ１０１は、センサ７００を用いてユーザ状態を取得する。具体的には、プロセッサ１０１は、例えば、センサ７００により取得されたセンサ値に基づいてユーザ状態を取得する。より具体的には、プロセッサ１０１は、センサ値に基づいて、第１のデータ８０１ａを参照してユーザ状態を取得する。このとき、プロセッサ１０１は、センサ値に基づいてユーザを特定し、特定されたユーザ及びセンサ値に基づいて、第１のデータ８０１ａを参照してユーザ状態を取得してもよい。
【0050】
例えば、センサ７００がイメージセンサである場合、プロセッサ１０１は、画像データからユーザを認識する。ユーザ認識方法としては、特に限定されず、従来技術が用いられてもよい。例えば、プロセッサ１０１は、ユーザ２０を「ＵＳＥＲ１」と特定する。ここで、画像データに「パターン１」が含まれていれば、プロセッサ１０１は、図３の第１のデータ８０１ａを参照して、ユーザ２０が調理機器６００を用いて調理中であることを示すユーザ状態を取得する。
【0051】
また例えば、センサ７００がオン／オフセンサである場合にオン信号を取得したとき、プロセッサ１０１は、ユーザ２０が調理機器６００を用いて調理中であることを示すユーザ状態を取得する。一方、オフ信号を取得したとき、プロセッサ１０１は、ユーザ２０が調理機器６００を用いて調理中でないことを示すユーザ状態を取得する。
【0052】
［ステップＳ３０１］
情報処理サーバ１００のプロセッサ１０１は、少なくとも１つの提案内容を決定する。具体的には、プロセッサ１０１は、ユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得する。例えば、プロセッサ１０１は、第３のデータ８０３ａを参照して、取得されたユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得する。
情報処理サーバ１００のプロセッサ１０１は、少なくとも１つの提案内容を決定する。具体的には、プロセッサ１０１は、ユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得する。例えば、プロセッサ１０１は、第３のデータ８０３ａを参照して、取得されたユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得する。
【0053】
例えば、ユーザ状態が調理中であることを示し、かつ、対象物４０の内容情報に含まれる急ぎ情報が急ぎであることを示す場合に、プロセッサ１０１は、図５の第３のデータ８０３ａを参照して、調理機器６００のオフを提案する第１の提案内容及び建物の出入口３０の電子錠４００の開錠を提案する第２の提案内容を取得する。また例えば、ユーザ状態が調理中であることを示し、かつ、急ぎ情報が急ぎでないことを示す場合に、プロセッサ１０１は、図５の第３のデータ８０３ａを参照して、対象物４０の再配達を提案する第１の提案内容及び対象物４０の受け取りを提案する第２の提案内容を取得する。また例えば、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎであることを示す場合に、プロセッサ１０１は、図５の第３のデータ８０３ａを参照して、建物の出入口３０の電子錠４００の開錠を提案する第１の提案内容を取得する。つまり、この場合、プロセッサ１０１は、単一の提案内容を取得する。また例えば、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎであることを示す場合に、プロセッサ１０１は、図５の第３のデータ８０３ａを参照して、対象物４０の受け取りを提案する第１の提案内容及び対象物４０の再配達を提案する第２の提案内容を取得する。
【0054】
［ステップＳ３０２］
情報処理サーバ１００のプロセッサ１０１は、決定された少なくとも１つの提案内容を表示端末２００に表示させる。例えば、プロセッサ１０１は、少なくとも１つの提案内容を含む画面データを表示端末２００に送信する。ここで、図８～図１２を参照しながら表示端末２００に表示される画面の具体例について説明する。
情報処理サーバ１００のプロセッサ１０１は、決定された少なくとも１つの提案内容を表示端末２００に表示させる。例えば、プロセッサ１０１は、少なくとも１つの提案内容を含む画面データを表示端末２００に送信する。ここで、図８～図１２を参照しながら表示端末２００に表示される画面の具体例について説明する。
【0055】
図８は、実施の形態１における第１の画面の一例を示す。第１の画面は、ユーザ状態が調理中であることを示し、かつ、急ぎ情報が急ぎであることを示す場合に表示される画面である。
【0056】
図８に示すように、ディスプレイ２０４には、左側から右側に、カメラ画像２１１と、対象物４０の画像２１２と、調理機器６００のオフを提案する第１の提案内容２１３及び出入口３０の電子錠４００の開錠を提案する第２の提案内容２１４とが順に表示されている。ここで、第１の提案内容２１３及び／又は第２の提案内容２１４の選択操作が行われた場合、選択された提案内容に対応する機器制御が行われる。つまり、ディスプレイ２０４の画面は分割されている。画面は、カメラ画像を表示する領域と、対象物の内容が表示される領域と、提案内容が表示される領域とを含む。また、ディスプレイ２０４には、上側に、現在日時、ログインユーザ及び各種状態が表示されている。これらの表示は、一例であり、これに限定されない。
【0057】
カメラ画像２１１と、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とは、ディスプレイ２０４の水平方向に並ぶ３つの表示領域にそれぞれ表示されている。ここでは、３つの表示領域は、同一形状及び同一サイズを有する。３つの表示領域の各々は、ディスプレイ２０４の表示領域の約３分の１を占める正方形の領域である。なお、同一とは、厳密な同一に加えて、実質的な同一も含む。つまり、同一は、略同一を意味する。また、正方形は、厳密な正方形に加えて、厳密な正方形と実質的に同一とみなせる範囲内の形状を含む。例えば、画面は、３つの表示領域のみを含んでも良い。より限定された例では、ディスプレイ２００の画面は、同一の大きさ及び形状を有する３つの表示領域のみを含んでいても良い。
【0058】
第１の提案内容２１３及び第２の提案内容２１４は、垂直方向に並んで配置されている。ここでは、第１の提案内容２１３が第２の提案内容２１４よりも上方に表示されることで、第１の提案内容２１３が優先表示されている。なお、優先表示の方法は、垂直方向の配置に限定されない。例えば、表示サイズ又は表示色などによって第１の提案内容２１３が優先表示されてもよい。
【0059】
これらのカメラ画像２１１と、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とは、例えばディスプレイ２０４に同時に表示されてもよい。つまり、３つの情報の表示が同時に開始されてもよい。また例えば、カメラ画像２１１が表示された後に、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とが、カメラ画像２１１と一緒に表示されてもよい。これにより、ユーザがカメラ画像２１１を認識した後に、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とが表示されるため、ユーザは現在の状況を順番に理解しやすくなる。例えば、ユーザがカメラ画像２１１を見て宅配物が届いたことを認識し、ユーザが次の動作を考えた時に、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とが表示されることにより、ユーザの状況に合わせた情報を提供することができる。例えば、住居、集合住宅などのユーザは、日常的に利用することになるため、ディスプレイ２０４に表示されるに内容を理解度が高まるため、一定以上の期間利用された場合には、カメラ画像２１１と、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とを同時に表示することにしても良い。一定の期間の例は、１週間、１カ月、又は３カ月などである。オフィスビル、商業ビル、ホテルなどでは、ユーザが日常的に利用しない場合が考えられるため、習熟度が低いユーザが利用することになることが想定される。オフィスビル、商業ビル、ホテルなどでは、カメラ画像２１１を表示した後に、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とを表示することで、習熟度が低いユーザにも理解しやすく表示しても良い。なお、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とを同時に表示する例を説明したが、カメラ画像２１１と、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４とをそれぞれ順番に表示しても良い。
【0060】
ここで、第１の画面に、カメラ画像２１１と、対象物４０の画像２１２と、第１の提案内容２１３及び第２の提案内容２１４と含まれている意味を説明する。建物の出入口３０に配達員５０が到着した場合、配達員５０の到着をユーザ２０に認識させるために、カメラ画像２１１が含まれる。配達員５０が配達する対象物４０の内容を示すために対象物４０の画像２１２が含まれる。これにより、ユーザ２０は、配達員５０が配達する対象物４０が何かを認識することができる。
【0061】
カメラ画像２１１と対象物４０の画像２１２とに対応して、ユーザ２０の次の行動を誘導するために、第１の画面は、第１の提案内容２１３及び第２の提案内容２１４を含む。対象物４０の画像２１２に基づいたユーザ２０の次の行動として、対象物４０を受け取るための行動の可能性が高いため、第１の提案内容２１３及び第２の提案内容２１４を表示している。つまり、急ぎの対象物４０を受け取るために調理機器６００のＯＦＦ及び／又は電子錠４００の開錠を行う可能性が高いという仮定に基づいて、第１の提案内容２１３及び第２の提案内容２１４が含まれている。
【0062】
つまり、第１の画面は、ユーザ２０に配達される対象物４０を容易に確認できるように、カメラ画像３０１及び対象物４０の画像２１２を含む。さらに、カメラ画像３０１及び対象物４０の画像２１２に基づいたユーザ２０の次の行動として、第１の画面は、第１の提案内容２１３及び第２の提案内容２１４を含む。ユーザ２０は、第１の画面を見ることにより、対象物４０を配達する配達員５０の到着、対象物４０の内容、及び次の行動を一度に確認及び行動を実行することができる。
【0063】
図９は、実施の形態１における第２の画面の一例を示す。第２の画面は、ユーザ状態が調理中であることを示し、かつ、急ぎ情報が急ぎでないことを示す場合に表示される画面である。
【0064】
図９に示すように、ディスプレイ２０４には、左側から右側に、カメラ画像２１１と、対象物４０の画像２１２と、対象物４０の再配達を提案する第１の提案内容２１５及び対象物４０の受け取りを提案する第２の提案内容２１６とが順に表示されている。ここで、第１の提案内容２１５の選択操作が行われた場合、例えば後述する第３の画面がディスプレイ２０４に表示される。一方、第２の提案内容２１６の選択操作が行われた場合、例えば図８の第１の画面が表示される。
【0065】
ユーザ２０は、第２の画面を見ることにより、対象物４０を配達する配達員５０の到着、対象物４０の内容、及び次の行動を一度に確認及び行動を実行することができる。
【0066】
図１０は、実施の形態１における第３の画面の一例を示す。第３の画面は、対象物４０の再配達を提案する提案内容が選択された後に表示される画面である。
【0067】
図１０に示すように、ディスプレイ２０４には、左側から右側に、カメラ画像２１１と、対象物４０の画像２１２と、再配達の時間を指定して配達員５０の情報端末５００に再配達依頼を送信するためのグラフィカルユーザインタフェース（ＧＵＩ）２１７とが順に表示されている。ユーザ２０は、ＧＵＩ２１７を操作することにより、再配達の時間を指定することができる。例えば、ＧＵＩ２１７が押下された場合に、指定時間後に配達員５０に対象物４０の再配達を依頼する再配達依頼を情報端末５００に送信することができる。つまり、対象物４０の再配達を提案する提案内容の選択が受け付けられた場合に、情報端末５００に対象物４０の再配達依頼が送信される。
【0068】
図１１は、実施の形態１における第４の画面の一例を示す。第４の画面は、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎであることを示す場合に表示される画面である。
【0069】
図１１に示すように、ディスプレイ２０４には、左側から右側に、カメラ画像２１１と、対象物４０の画像２１２と、出入口３０の電子錠４００の開錠を提案する第１の提案内容２１８とが順に表示されている。ここで、第１の提案内容２１８の選択操作が行われた場合、電子錠４００が開錠される。
【0070】
ユーザ２０は、第４の画面を見ることにより、対象物４０を配達する配達員５０の到着、対象物４０の内容、及び次の行動を一度に確認及び行動を実行することができる。
【0071】
図１２は、実施の形態１における第５の画面の一例を示す。第５の画面は、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎでないことを示す場合に表示される画面である。
【0072】
図１２に示すように、ディスプレイ２０４には、左側から右側に、カメラ画像２１１と、対象物４０の画像２１２と、対象物４０の受け取りを提案する第１の提案内容２１９及び対象物４０の再配達を提案する第２の提案内容２２０とが順に表示されている。ここで、第１の提案内容２１９の選択操作が行われた場合、例えば図１１の第４の画面が表示される。一方、第２の提案内容２２０の選択操作が行われた場合、例えば図１０の第３の画面が表示される。
【0073】
ユーザ２０は、第５の画面を見ることにより、対象物４０を配達する配達員５０の到着、対象物４０の内容、及び次の行動を一度に確認及び行動を実行することができる。
【0074】
［ステップＳ３０３］
情報処理サーバ１００のプロセッサ１０１は、選択された提案内容に基づく制御を行う。例えば、表示端末２００において出入口３０の電子錠４００の開錠を提案する提案内容（例えば図８の第２の提案内容２１４）の選択が受け付けられた場合、プロセッサ１０１は、電子錠４００に開錠信号を送信する。これにより、電子錠４００が開錠される。また例えば、表示端末２００において調理機器６００のオフを提案する提案内容（例えば図８の第１の提案内容２１３）の選択が受け付けられた場合、調理機器６００にオフ信号を送信する。これにより、調理機器６００が非稼働になる。出入口３０が、集合住宅、オフィスビル、商業ビル、ホテルのパブリックスペースのドアの電子錠４００の場合、開錠信号の受信後に、第１期間以下後に、電子錠４００を開錠しても良い。第１期間の例は、通信に要する時間、又は数秒である。しかし、出入口３０が、住居、事務所、店舗などのプライバシースペースに直接通じるドアである場合、ユーザが出入口３０に到達する前に、宅配員５０がプライバシースペースに侵入することができるようになるため、ユーザが安心して利用することができない可能性がある。そこで、プライバシースペースへの出入口３０の電子錠４０は、パブリックスペースの出入口３０の電子錠４０に比べて、開錠信号の受信後、第１期間よりも長い第２期間を設定しても良い。第２期間の例は、出入口３０に移動に要する平均時間、又は３０秒である。または、ユーザが設定できるようにしても良い。例えば、住居の場合、第２の期間をユーザからキッチンまでの距離対応する移動時間を設定しても良い。
情報処理サーバ１００のプロセッサ１０１は、選択された提案内容に基づく制御を行う。例えば、表示端末２００において出入口３０の電子錠４００の開錠を提案する提案内容（例えば図８の第２の提案内容２１４）の選択が受け付けられた場合、プロセッサ１０１は、電子錠４００に開錠信号を送信する。これにより、電子錠４００が開錠される。また例えば、表示端末２００において調理機器６００のオフを提案する提案内容（例えば図８の第１の提案内容２１３）の選択が受け付けられた場合、調理機器６００にオフ信号を送信する。これにより、調理機器６００が非稼働になる。出入口３０が、集合住宅、オフィスビル、商業ビル、ホテルのパブリックスペースのドアの電子錠４００の場合、開錠信号の受信後に、第１期間以下後に、電子錠４００を開錠しても良い。第１期間の例は、通信に要する時間、又は数秒である。しかし、出入口３０が、住居、事務所、店舗などのプライバシースペースに直接通じるドアである場合、ユーザが出入口３０に到達する前に、宅配員５０がプライバシースペースに侵入することができるようになるため、ユーザが安心して利用することができない可能性がある。そこで、プライバシースペースへの出入口３０の電子錠４０は、パブリックスペースの出入口３０の電子錠４０に比べて、開錠信号の受信後、第１期間よりも長い第２期間を設定しても良い。第２期間の例は、出入口３０に移動に要する平均時間、又は３０秒である。または、ユーザが設定できるようにしても良い。例えば、住居の場合、第２の期間をユーザからキッチンまでの距離対応する移動時間を設定しても良い。
【0075】
［効果等］
以上にように、本実施の形態に係る情報処理システム１０において、情報処理サーバ１００は、（ａ）対象物４０をユーザ２０の建物に配達する配達員５０の画像が建物の出入口３０に設置されたカメラ３００で撮影されたとき、ユーザ２０が調理機器６００を用いて調理中であるか否かを示すユーザ状態をセンサ７００を用いて取得し、（ｂ）対象物４０の内容情報を取得し、（ｃ）ユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得し、（ｄ）建物内に配置された表示端末２００に、配達員５０の画像と、対象物４０の内容情報と、少なくとも１つの提案内容とを表示させることができる。
以上にように、本実施の形態に係る情報処理システム１０において、情報処理サーバ１００は、（ａ）対象物４０をユーザ２０の建物に配達する配達員５０の画像が建物の出入口３０に設置されたカメラ３００で撮影されたとき、ユーザ２０が調理機器６００を用いて調理中であるか否かを示すユーザ状態をセンサ７００を用いて取得し、（ｂ）対象物４０の内容情報を取得し、（ｃ）ユーザ状態及び対象物４０の内容情報に対応する少なくとも１つの提案内容を取得し、（ｄ）建物内に配置された表示端末２００に、配達員５０の画像と、対象物４０の内容情報と、少なくとも１つの提案内容とを表示させることができる。
【0076】
これにより、ユーザ状態及び対象物４０の内容情報に応じた提案内容を表示端末２００に表示することができる。つまり、ユーザ２０及び対象物４０に適した提案内容をユーザ２０に提示することができる。さらに、配達員５０の画像に加えて、対象物４０の内容情報も表示することができるので、ユーザ２０は、対象物４０の内容に応じて次の行動を判断することができる。したがって、対象物４０を配達する配達員５０が到着した際に、ユーザ２０が次の行動を判断するための情報を効果的にユーザ２０に提示することができる。
【0077】
また、本実施の形態に係る情報処理システム１０において、対象物４０の内容情報は、対象物４０の配達が急ぎであるか否かを示す急ぎ情報を含み、情報処理サーバ１００は、上記（ｃ）において、ユーザ状態が調理中であることを示し、かつ、急ぎ情報が急ぎであることを示す場合に、少なくとも１つの提案内容として、調理機器６００のオフを提案する提案内容及び建物の出入口３０の電子錠４００の開錠を提案する提案内容を取得することができる。
【0078】
これにより、ユーザ２０が調理中に急ぎ配達の対象物４０が到着した場合に、対象物４０を安全に受け取るために必要な行動を提案する提案内容をユーザに提示することができる。つまり、急ぎ配達の対象物４０の受け取りの延期を防ぎつつ、調理機器６００による事故の発生を抑制するための行動を提案する提案内容をユーザに提示することができ、ユーザ２０が次の行動を判断するための情報をより効果的にユーザ２０に提示することが可能となる。
【0079】
また、本実施の形態に係る情報処理システム１０において、情報処理サーバ１００は、上記（ｃ）において、ユーザ状態が調理中であることを示し、かつ、急ぎ情報が急ぎでないことを示す場合に、少なくとも１つの提案内容として、対象物４０の再配達を提案する提案内容及び対象物４０の受け取りを提案する提案内容を取得することができる。
【0080】
これにより、ユーザ２０が調理中に非急ぎ配達の対象物４０が到着した場合に、対象物４０の再配達及び受け取りの中から次の行動を選択可能な提案内容を提示することができる。つまり、ユーザ２０は、対象物４０の内容情報を参照して、対象物４０の再配達及び受け取りを個別に判断することができる。すなわち、情報処理サーバ１００は、ユーザ２０が次の行動を判断するための情報をより効果的にユーザ２０に提示することができる。
【0081】
また、本実施の形態に係る情報処理システム１０において、情報処理サーバ１００は、上記（ｃ）において、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎであることを示す場合に、少なくとも１つの提案内容として、建物の出入口３０の電子錠の開錠を提案する提案内容を取得することができる。
【0082】
これにより、ユーザ２０が非調理中に急ぎ配達の対象物４０が到着した場合に、対象物４０を受け取るために必要な行動を提案する提案内容をユーザに提示することができる。このような場合には、ユーザ２０の次の行動として、対象物４０の再配達の依頼が選択される可能性が低いため、ユーザ２０が次の行動を判断するための情報をより効果的にユーザ２０に提示することができる。
【0083】
また、本実施の形態に係る情報処理システム１０において、情報処理サーバ１００は、上記（ｃ）において、ユーザ状態が調理中でないことを示し、かつ、急ぎ情報が急ぎであることを示す場合に、少なくとも１つの提案内容として、対象物４０の受け取りを提案する提案内容及び対象物４０の再配達を提案する提案内容を取得することができる。
【0084】
これにより、ユーザ２０が非調理中に非急ぎ配達の対象物４０が到着した場合に、対象物４０の受け取り及び再配達の中から次の行動を選択可能な提案内容を提示することができる。つまり、ユーザ２０は、対象物４０の内容情報を参照して、対象物４０の受け取り及び再配達を個別に判断することができる。すなわち、情報処理サーバ１００は、ユーザ２０が次の行動を判断するための情報をより効果的にユーザ２０に提示することができる。
【0085】
なお、本実施の形態において、対象物４０の内容情報は、急ぎ情報を含んでいたが、これに限られない。例えば、対象物４０の内容情報は、対象物４０の種別を含んでもよい。対象物４０の種別は、例えば生鮮食品及び冷凍食品などに対象物４０を分類する。この場合、ユーザ状態と対象物４０の種別とに基づいて少なくとも１つの提案内容が取得される。
【0086】
なお、本実施の形態において、対象物４０の内容情報は、対象物４０の画像を含んでいたが、対象物４０の画像の代わりに対象物４０の商品名を含んでもよい。また、対象物４０の内容情報は、対象物４０の画像及び対象物４０の商品名の両方を含んでもよい。
【0087】
なお、本実施の形態において図示された画面及びデータは、一例であり、これに限定されない。例えば、３つの情報の表示領域のサイズ及び形状は同一でなくてもよい。また、図５におけるユーザ状態及び急ぎフラグと第１の提案内容及び第２の提案内容との組み合わせは一例であり、これに限定されない。ユーザ状態及び急ぎフラグに対して、図５とは異なる第１の提案内容及び第２の提案内容が対応付けられてもよい。
【0088】
例えば、図１３に示すように、第１の提案内容及び第２の提案内容として、「開錠」及び「後で受け取る」が用いられてもよい。また例えば、図１４に示すように、第１の提案内容及び第２の提案内容として、「調理機器ＯＦＦ」及び「後で受け取る」が用いられてもよい。また例えば、図１５に示すように、第１の提案内容及び第２の提案内容として、「今受け取る」及び「再配達時間の指定」が用いられてもよい。また例えば、図１６に示すように、第１の提案内容及び第２の提案内容として、「開錠＆調理機器ＯＦＦ」及び「後で受け取る」が用いられてもよい。
【0089】
【0090】
なお、本実施の形態では、第１のデータ８０１ａ、第２のデータ８０２ａ及び第３のデータ８０３ａが参照されていたが、これに限定されない。例えば、第１のデータ８０１ａは参照されなくてもよい。この場合、例えば、調理機器６００のオン／オフ信号から調理中か否かが直接的に判定されてもよい。また、第２のデータ８０２ａは参照されなくてもよい。この場合、例えば、カメラ画像から対象物４０の内容情報が直接的に取得されてもよい。また、第３のデータ８０３ａは参照されなくてもよい。この場合、第３のデータ８０３ａがハードコーディングされてもよい。
【0091】
なお、本実施の形態において、図６のフローチャートにおける処理の順序は、一例であり、これに限定されない。例えば、ステップＳ１０１、Ｓ１０２よりも前にステップＳ２０１、Ｓ２０２が実行されてもよい。
【0092】
また、サービス提供システムが一定期間の経過された後であり、かつ、ステップＳ３０３の終了後に、ステップＳ３０２でディスプレイ２００の画面に、各表示領域に順番に表示する方法、又は同時に表示する方法の選択画面を表示し、ユーザの希望を確認しても良い。ユーザの選択した表示方法に基づいて、次回のサービス提供時のステップＳ３０２の表示の方法を決定する。
【0093】
なお、ユーザが、図８～図１２に示す第１の画面から第５の画面のいずれを表示するかを選択できるようにしても良い。例えば、第１の画面を表示する初期設定がされており、図６に示すフローチャートの処理を終了した後に、ユーザに、ディスプレイ２００に、第１の画面から第５の画面と、次回以降に表示を希望する画面の選択を要望するメッセージとを表示しても良い。次回以降、ユーザに選択された画面に基づいてユーザに提案内容を表示する。例えば、第１の画面から第５の画面は、時間的に順番に表示される。また、ユーザが希望する画面で一定回数の処理が実行された後、再度、ディスプレイ２００に、第１の画面から第５の画面と、次回以降に表示を希望する画面の選択を要望するメッセージとを表示しても良い。一定回数の例は、１０回、３０回、又は５０回である。一定回数ごとに表示画面の選択要望を繰り返し、連続して同じ画面が選択された場合には、その後は、希望する画面の選択を要望しなくても良い。
【0094】
（実施の形態２）
次に、実施の形態２について説明する。本実施の形態では、表示端末に表示する画面の情報の提供を含むサービスを提供するサービス提供システムについて説明する。
次に、実施の形態２について説明する。本実施の形態では、表示端末に表示する画面の情報の提供を含むサービスを提供するサービス提供システムについて説明する。
【0095】
［提供するサービスの全体像］
図１７Ａには、実施の形態２におけるサービス提供システムの全体像が示されている。
図１７Ａには、実施の形態２におけるサービス提供システムの全体像が示されている。
【0096】
グループ１０００は、例えば企業、団体、家庭等であり、その規模を問わない。グループ１０００には、複数の機器１０１０に含まれる機器Ａ、機器Ｂ及びホームゲートウェイ１０２０が存在する。例えば、機器Ａは、上記実施の形態１における調理機器６００である。複数の機器１０１０には、インターネットと接続可能な機器（例えば、スマートフォン、ＰＣ、ＴＶ等）もあれば、それ自身ではインターネットと接続不可能な機器（例えば、照明、洗濯機等）も存在する。それ自身ではインターネットと接続不可能な機器であっても、ホームゲートウェイ１０２０を介してインターネットと接続可能となる機器が存在してもよい。またグループ１０００には複数の機器１０１０を使用するユーザ９９０Ａが存在する。
【0097】
データセンタ運営会社１１００には、クラウドサーバ１１１０が存在する。クラウドサーバ１１１０とはインターネットを介して様々な機器と連携する仮想化サーバである。例えば、クラウドサーバ１１１０は、上記実施の形態１における情報処理サーバ１００である。クラウドサーバ１１１０は、主に通常のデータベース管理ツール等で扱うことが困難な巨大なデータ（ビッグデータ）等を管理する。データセンタ運営会社１１００は、データ管理やクラウドサーバ１１１０の管理、それらを行うデータセンタの運営等を行っている。データセンタ運営会社１１００が行っている役務については詳細を後述する。ここで、データセンタ運営会社１１００は、データ管理やクラウドサーバ１１１０の運営等のみを行っている会社に限らない。例えば複数の機器１０１０のうちの１つの機器を開発・製造している機器メーカが、併せてデータ管理やクラウドサーバ１１１０の管理等を行っている場合は、機器メーカがデータセンタ運営会社１１００に該当する（図１７Ｂ）。また、データセンタ運営会社１１００は１つの会社に限らない。例えば機器メーカ及び他の管理会社が共同もしくは分担してデータ管理やクラウドサーバ１１１０の運営を行っている場合は、両者もしくはいずれか一方がデータセンタ運営会社１１００に該当するものとする（図１７Ｃ）。
【0098】
サービスプロバイダ１２００は、サーバ１２１０を保有している。ここで言うサーバ１２１０とは、その規模は問わず例えば、個人用ＰＣ内のメモリ等も含む。また、サービスプロバイダがサーバ１２１０を保有していない場合もある。
【0099】
なお、上記サービスにおいてホームゲートウェイ１０２０は必須ではない。例えば、クラウドサーバ１１１０が全てのデータ管理を行っている場合等は、ホームゲートウェイ１０２０は不要となる。また、家庭内のあらゆる機器がインターネットに接続されている場合のように、それ自身ではインターネットと接続不可能な機器は存在しない場合もある。
【0100】
次に、上記サービスにおける情報の流れを説明する。
【0101】
まず、グループ１０００の機器Ａ又は機器Ｂは、各機器で得られた情報をデータセンタ運営会社１１００のクラウドサーバ１１１０に送信する。クラウドサーバ１１１０は機器Ａ又は機器Ｂの情報を集積する（図１７Ａの（ａ））。ここで集積される情報は、複数の機器１０１０の、例えば運転状況や動作日時、動作モード、位置等を示す情報である。例えば、テレビの視聴履歴やレコーダの録画予約情報、洗濯機の運転日時・洗濯物の量、冷蔵庫の開閉日時・開閉回数、冷蔵庫内の食品の量などであるが、これらのものに限らずあらゆる機器から取得が可能なすべての情報をいう。情報は、インターネットを介して複数の機器１０１０自体から直接クラウドサーバ１１１０に提供される場合もある。また複数の機器１０１０から一旦ホームゲートウェイ１０２０に情報が集積され、ホームゲートウェイ１０２０からクラウドサーバ１１１０に提供されてもよい。
【0102】
次に、データセンタ運営会社１１００のクラウドサーバ１１１０は、集積した情報を一定の単位でサービスプロバイダ１２００に提供する。ここで、一定の単位は、データセンタ運営会社が集積した情報を整理してサービスプロバイダ１２００に提供することのできる単位でもいいし、サービスプロバイダ１２００が要求した単位でもいい。一定の単位と記載したが一定でなくてもよく、状況に応じて提供する情報量が変化する場合もある。情報は、必要に応じてサービスプロバイダ１２００が保有するサーバ１２１０に保存される（図１７Ａの（ｂ））。そして、サービスプロバイダ１２００は、情報をユーザに提供するサービスに適合する情報に整理し、ユーザに提供する。提供するユーザは、複数の機器１０１０を使用するユーザ９９０Ａでもよいし、外部のユーザ９９０Ｂでもよい。ユーザへのサービス提供方法は、例えば、サービスプロバイダから直接ユーザへ提供されてもよい（図１７Ａの（ｅ）、（ｆ））。また、ユーザへのサービス提供方法は、例えば、データセンタ運営会社１１００のクラウドサーバ１１１０を再度経由して、ユーザに提供されてもよい（図１７Ａの（ｃ）、（ｄ））。また、データセンタ運営会社１１００のクラウドサーバ１１１０が情報をユーザに提供するサービスに適合する情報に整理し、サービスプロバイダ１２００に提供してもよい。
【0103】
なお、ユーザ９９０Ａとユーザ９９０Ｂとは、別でも同一でもよい。
【0104】
上記態様において説明された技術は、例えば、以下のクラウドサービスの類型において実現されうる。しかし、上記態様において説明された技術が実現される類型はこれに限られるものでない。
【0105】
［サービスの類型１：自社データセンタ型］
図１８は、サービスの類型１（自社データセンタ型）を示す。本類型は、サービスプロバイダ１２００がグループ１０００から情報を取得し、ユーザに対してサービスを提供する類型である。本類型では、サービスプロバイダ１２００が、データセンタ運営会社の機能を有している。即ち、サービスプロバイダが、ビッグデータの管理をするクラウドサーバ１１１０を保有している。したがって、データセンタ運営会社は存在しない。
図１８は、サービスの類型１（自社データセンタ型）を示す。本類型は、サービスプロバイダ１２００がグループ１０００から情報を取得し、ユーザに対してサービスを提供する類型である。本類型では、サービスプロバイダ１２００が、データセンタ運営会社の機能を有している。即ち、サービスプロバイダが、ビッグデータの管理をするクラウドサーバ１１１０を保有している。したがって、データセンタ運営会社は存在しない。
【0106】
本類型では、サービスプロバイダ１２００は、データセンタ９０３（クラウドサーバ１１１０）を運営、管理している。また、サービスプロバイダ１２００は、ＯＳ９０２及びアプリケーション９０１を管理する。サービスプロバイダ１２００は、サービスプロバイダ１２００が管理するＯＳ９０２及びアプリケーション９０１を用いてサービス９０４の提供を行う。
【0107】
［サービスの類型２：ＩａａＳ利用型］
図１９は、サービスの類型２（ＩａａＳ利用型）を示す。ここでＩａａＳとはインフラストラクチャー・アズ・ア・サービスの略であり、コンピュータシステムを構築及び稼動させるための基盤そのものを、インターネット経由のサービスとして提供するクラウドサービス提供モデルである。
図１９は、サービスの類型２（ＩａａＳ利用型）を示す。ここでＩａａＳとはインフラストラクチャー・アズ・ア・サービスの略であり、コンピュータシステムを構築及び稼動させるための基盤そのものを、インターネット経由のサービスとして提供するクラウドサービス提供モデルである。
【0108】
本類型では、データセンタ運営会社１１００がデータセンタ９０３（クラウドサーバ１１１０）を運営、管理している。また、サービスプロバイダ１２００は、ＯＳ９０２及びアプリケーション９０１を管理する。サービスプロバイダ１２００は、サービスプロバイダ１２００が管理するＯＳ９０２及びアプリケーション９０１を用いてサービス９０４の提供を行う。
【0109】
［サービスの類型３：ＰａａＳ利用型］
図２０は、サービスの類型３（ＰａａＳ利用型）を示す。ここでＰａａＳとはプラットフォーム・アズ・ア・サービスの略であり、ソフトウエアを構築及び稼動させるための土台となるプラットフォームを、インターネット経由のサービスとして提供するクラウドサービス提供モデルである。
図２０は、サービスの類型３（ＰａａＳ利用型）を示す。ここでＰａａＳとはプラットフォーム・アズ・ア・サービスの略であり、ソフトウエアを構築及び稼動させるための土台となるプラットフォームを、インターネット経由のサービスとして提供するクラウドサービス提供モデルである。
【0110】
本類型では、データセンタ運営会社１１００は、ＯＳ９０２を管理し、データセンタ９０３（クラウドサーバ１１１０）を運営、管理している。また、サービスプロバイダ１２００は、アプリケーション９０１を管理する。サービスプロバイダ１２００は、データセンタ運営会社が管理するＯＳ９０２及びサービスプロバイダ１２００が管理するアプリケーション９０１を用いてサービス９０４の提供を行う。
【0111】
［サービスの類型４：ＳａａＳ利用型］
図２１は、サービスの類型４（ＳａａＳ利用型）を示す。ここでＳａａＳとはソフトウエア・アズ・ア・サービスの略である。例えばデータセンタ（クラウドサーバ）を保有しているプラットフォーム提供者が提供するアプリケーションを、データセンタ（クラウドサーバ）を保有していない会社・個人（利用者）がインターネットなどのネットワーク経由で使用できる機能を有するクラウドサービス提供モデルである。
図２１は、サービスの類型４（ＳａａＳ利用型）を示す。ここでＳａａＳとはソフトウエア・アズ・ア・サービスの略である。例えばデータセンタ（クラウドサーバ）を保有しているプラットフォーム提供者が提供するアプリケーションを、データセンタ（クラウドサーバ）を保有していない会社・個人（利用者）がインターネットなどのネットワーク経由で使用できる機能を有するクラウドサービス提供モデルである。
【0112】
本類型では、データセンタ運営会社１１００は、アプリケーション９０１を管理し、ＯＳ９０２を管理し、データセンタ９０３（クラウドサーバ１１１０）を運営、管理している。また、サービスプロバイダ１２００は、データセンタ運営会社１１００が管理するＯＳ９０２及びアプリケーション９０１を用いてサービス９０４の提供を行う。
【0113】
以上いずれの類型においても、サービスプロバイダ１２００がサービス提供行為を行ったものとする。また例えば、サービスプロバイダもしくはデータセンタ運営会社は、ＯＳ、アプリケーションもしくはビッグデータのデータベース等を自ら開発してもよいし、また、第三者に外注させてもよい。
【0114】
（他の実施の形態）
以上、本開示の１つまたは複数の態様に係る情報処理システムについて、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本開示の１つまたは複数の態様の範囲内に含まれてもよい。
以上、本開示の１つまたは複数の態様に係る情報処理システムについて、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本開示の１つまたは複数の態様の範囲内に含まれてもよい。
【0115】
例えば、本開示の一態様は、このような情報処理システムだけではなく、情報処理システムに含まれるプロセッサが行う処理をステップとする表示制御方法であってもよい。また、本開示の一態様は、表示制御方法に含まれる特徴的な各ステップをコンピュータに実行させるコンピュータプログラムであってもよい。また、本開示の一態様は、そのようなコンピュータプログラムが記録された、コンピュータ読み取り可能な非一時的な記録媒体であってもよい。
【0116】
このようなプログラムは、コンピュータに、（ａ）対象物をユーザの建物に配達する配達員の画像が前記建物の出入口に設置されたカメラで撮影されたとき、前記ユーザが調理機器を用いて調理中であるか否かを示すユーザ状態をセンサを用いて取得し、（ｂ）前記対象物の内容情報を取得し、（ｃ）前記ユーザ状態及び前記対象物の内容情報に対応する少なくとも１つの提案内容を取得し、（ｄ）前記建物内に配置された表示端末に、前記配達員の画像と、前記対象物の内容情報と、前記少なくとも１つの提案内容とを表示させる。
【0117】
本開示において、ユニット、デバイスの全部又は一部、又は図２に示されるブロック図の機能ブロックの全部又は一部は、半導体装置、半導体集積回路（ＩＣ）、又はＬＳＩ（ｌａｒｇｅ ｓｃａｌｅ ｉｎｔｅｇｒａｔｉｏｎ）を含む１つ又は１つ以上の電子回路によって実行されてもよい。ＬＳＩ又はＩＣは、１つのチップに集積されてもよいし、複数のチップを組み合わせて構成されてもよい。例えば、記憶素子以外の機能ブロックは、１つのチップに集積されてもよい。ここでは、ＬＳＩやＩＣと呼んでいるが、集積の度合いによって呼び方が変わり、システムＬＳＩ、ＶＬＳＩ（ｖｅｒｙ ｌａｒｇｅ ｓｃａｌｅ ｉｎｔｅｇｒａｔｉｏｎ）、若しくはＵＬＳＩ（ｕｌｔｒａ ｌａｒｇｅ ｓｃａｌｅ ｉｎｔｅｇｒａｔｉｏｎ）と呼ばれるかもしれない。ＬＳＩの製造後にプログラムされる、Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ（ＦＰＧＡ）、又はＬＳＩ内部の接合関係の再構成又はＬＳＩ内部の回路区画のセットアップができるｒｅｃｏｎｆｉｇｕｒａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅも同じ目的で使うことができる。
【0118】
さらに、ユニット、装置、又は装置の一部の、全部又は一部の機能又は操作は、ソフトウエア処理によって実行することが可能である。この場合、ソフトウエアは１つ又は１つ以上のＲＯＭ、光学ディスク、ハードディスクドライブ、などの非一時的記録媒体に記録され、ソフトウエアが、処理装置（ｐｒｏｃｅｓｓｏｒ）によって実行された場合に、ソフトウエアは、ソフトウエア内の特定の機能を、処理装置（ｐｒｏｃｅｓｓｏｒ）と周辺のデバイスに実行させる。システム又は装置は、ソフトウエアが記録されている１つ又は１つ以上の非一時的記録媒体、処理装置（ｐｒｏｃｅｓｓｏｒ）、及び必要とされるハードウエアデバイス、例えばインターフェース、を備えていても良い。
【産業上の利用可能性】
【0119】
対象物を配達する配達員がユーザの建物に到着したときにユーザの行動を提案する情報処理システムに利用できる。
【符号の説明】
【0120】
１０ 情報処理システム
２０ ユーザ
３０ 出入口
４０ 対象物
５０ 配達員
１００ 情報処理サーバ
１０１、２０１ プロセッサ
１０２、２０２ メモリ
１０３、２０３ 通信部
２００ 表示端末
２０４ ディスプレイ
２０５ 入力部
３００ カメラ
４００ 電子錠
５００ 情報端末
６００ 調理機器
７００ センサ
８０１ 第１のデータベース
８０１ａ 第１のデータ
８０２ 第２のデータベース
８０２ａ 第２のデータ
８０３ 第３のデータベース
８０３ａ 第３のデータ
２０ ユーザ
３０ 出入口
４０ 対象物
５０ 配達員
１００ 情報処理サーバ
１０１、２０１ プロセッサ
１０２、２０２ メモリ
１０３、２０３ 通信部
２００ 表示端末
２０４ ディスプレイ
２０５ 入力部
３００ カメラ
４００ 電子錠
５００ 情報端末
６００ 調理機器
７００ センサ
８０１ 第１のデータベース
８０１ａ 第１のデータ
８０２ 第２のデータベース
８０２ａ 第２のデータ
８０３ 第３のデータベース
８０３ａ 第３のデータ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17A】
【図17B】
【図17C】
【図18】
【図19】
【図20】
【図21】