2022-175890 アドバイス提示システム、情報端末、器具端末、プログラム及びアドバイス提示方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022175890

(43)【公開日】2022-11-25

(54)【発明の名称】アドバイス提示システム、情報端末、器具端末、プログラム及びアドバイス提示方法

(51)【国際特許分類】

   G09B 9/058 20060101AFI20221117BHJP

   G06Q 50/20 20120101ALI20221117BHJP

【ＦＩ】

G09B9/058 Z

G06Q50/20

【審査請求】未請求

【請求項の数】22

【出願形態】ＯＬ

(21)【出願番号】P 2021082658

(22)【出願日】2021-05-14

(71)【出願人】

【識別番号】521209627

【氏名又は名称】株式会社ブーンカンパニー

(74)【代理人】

【識別番号】100148127

【弁理士】

【氏名又は名称】小川 耕太

(72)【発明者】

【氏名】渡辺未来雄

【テーマコード（参考）】

5L049

【Ｆターム（参考）】

5L049CC34

(57)【要約】

【課題】自転車の使用者のスキルを向上させるためのアドバイスの質を向上させる。
【解決手段】情報端末２と器具端末３とを備えるアドバイス提示システム１であって、器具端末３は、使用者を含む使用者画像を撮像する第１撮像部３１ａと、自転車４を含む器具画像を撮像する第２撮像部３１ｂと、を有し、情報端末２は、器具端末３から使用者画像及び器具画像を取得する画像取得部２３１と、使用者画像に基づいて使用者の状態を特定し、器具画像に基づいて自転車の状態を特定する第１状態特定部２３２と、使用者の状態及び自転車の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が特定した使用者の状態及び自転車の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する第１アドバイス作成部２３３と、第１アドバイス作成部が作成したアドバイスを提示する第１アドバイス提示部２３４と、を有する。
【選択図】図２

【特許請求の範囲】

【請求項1】

自転車に装着された器具端末と、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末と、を備えるアドバイス提示システムであって、
前記器具端末は、
前記使用者を含む使用者画像を撮像する第１撮像部と、
前記自転車を含む器具画像を撮像する第２撮像部または前記自転車の状態を検出し検出した状態を示す状態情報を出力する検出部と、を有し、
前記情報端末は、
前記器具端末から前記使用者画像及び前記器具画像または前記状態情報を取得する画像取得部と、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像または前記状態情報に基づいて前記自転車の状態を特定する第１状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、
前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、
を有するアドバイス提示システム。

【請求項2】

前記第１状態特定部は、前記使用者画像に基づいて前記使用者の状態として前記使用者の身体の姿勢及び動きの少なくともいずれかを特定し、前記器具画像に基づいて前記自転車の傾き、速度及び加速度の少なくともいずれかを前記自転車の状態として特定する、
請求項１に記載のアドバイス提示システム。

【請求項3】

前記第１状態特定部は、前記使用者画像に基づいて前記使用者の状態として前記使用者の顔の表情を特定する、
請求項１又は２に記載のアドバイス提示システム。

【請求項4】

前記第１状態特定部は、前記器具画像に基づいて前記自転車の周辺の状態をさらに特定し、
前記第１アドバイス作成部は、前記使用者の状態、前記自転車の状態及び前記自転車の周辺の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態、前記自転車の状態及び前記自転車の周辺の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する、
請求項１から３のいずれかに記載のアドバイス提示システム。

【請求項5】

前記第１アドバイス作成部は、前記自転車の周辺の状態が直線路である場合に、直線路用の前記一以上のアドバイス候補に基づいて前記アドバイスを作成し、前記自転車の周辺の状態がカーブ路である場合に、カーブ路用の前記一以上のアドバイス候補に基づいて前記アドバイスを作成する、
請求項４に記載のアドバイス提示システム。

【請求項6】

前記情報端末は、前記自転車及び前記使用者を含む画像を撮像する第３撮像部をさらに有し、
前記第１状態特定部は、前記自転車及び前記使用者を含む画像に基づいて前記使用者の身体の位置と前記自転車を構成する部材の位置との相対的な位置関係を特定し、
前記第１アドバイス作成部は、前記相対的な位置関係に関連付けられた前記一以上のアドバイス候補に基づいて前記アドバイスを作成する、
請求項１から５のいずれかに記載のアドバイス提示システム。

【請求項7】

前記器具端末は、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像または前記状態情報に基づいて前記自転車の状態を特定する第２状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第２状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記使用者向けのアドバイスを作成する第２アドバイス作成部と、
前記第２アドバイス作成部が作成した前記アドバイスを提示する第２アドバイス提示部と、
を有する請求項１から６のいずれかに記載のアドバイス提示システム。

【請求項8】

前記第２アドバイス作成部は、前記第１アドバイス作成部が作成した前記アドバイスと異なる前記アドバイスを作成する、
請求項７に記載のアドバイス提示システム。

【請求項9】

前記第１アドバイス作成部が作成する指導者向けアドバイスは言語情報を含み、前記第２アドバイス作成部が作成する使用者向けアドバイスは言語情報を含まず、音・光・振動のいずれかまたはこれらの組み合わせにより構成される、 請求項８に記載のアドバイス提示システム。

【請求項10】

前記情報端末は、前記使用者画像のうち、前記第１アドバイス作成部が前記アドバイスを作成したタイミングに基づいて選択された期間の画像を記憶部に記憶させる、
請求項１から９のいずれかに記載のアドバイス提示システム。

【請求項11】

前記自転車が、ペダルを外した状態でハンドル操作を練習し、その後ペダルを装着してペダル操作を練習することを目的とした、ペダルを着脱可能な自転車であり、
前記第１アドバイス作成部は、前記ペダルが装着されていない状態で前記自転車が使用されている間に撮影された前記使用者画像及び前記器具画像または前記状態情報に基づいて前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に基づいて、前記ペダルを装着するタイミングを指示する前記アドバイスを作成する、
請求項１から１０のいずれかに記載のアドバイス提示システム。

【請求項12】

前記第１アドバイス作成部は、前記指導者向けのアドバイスとして、前記自転車に対する前記指導者の立ち位置を指示することを特徴とする、請求項１から１１のいずれかに記載のアドバイス提示システム。

【請求項13】

前記第１状態特定部は、前記使用者画像に基づいて前記使用者の状態として前記使用者が前記自転車のペダルを漕ぐ際の足の動きを特定する、 請求項１から１２のいずれかに記載のアドバイス提示システム。

【請求項14】

自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末であって、
前記使用者を含む使用者画像及び前記自転車を含む器具画像を取得する画像取得部と、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第１状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、
前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、
を有する情報端末。

【請求項15】

自転車に装着され、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する器具端末であって、
前記使用者を含む使用者画像を撮像する第１撮像部と、
前記自転車を含む器具画像を撮像する第２撮像部または前記自転車の状態を検出し検出した状態を示す状態情報を出力する検出部と、
前記使用者画像または前記状態情報に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第２状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第２状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第２アドバイス作成部と、
前記第２アドバイス作成部が作成した前記アドバイスを提示する第２アドバイス提示部と、
を有する器具端末。

【請求項16】

自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータに、
前記使用者を含む使用者画像及び前記自転車を含む器具画像を取得するステップと、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、
作成した前記アドバイスを提示するステップと、
を実行させるためのプログラム。

【請求項17】

自転車に装着されており、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータに、
前記使用者を含む使用者画像を撮像するステップと、
前記自転車を含む器具画像を撮像するステップと、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、
作成した前記アドバイスを提示するステップと、
を実行させるためのプログラム。

【請求項18】

自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータが実行する方法であって、
前記使用者を含む使用者画像を撮像するステップと、
前記自転車を含む器具画像を撮像するステップと、
前記使用者画像及び前記器具画像を取得するステップと、
前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、
作成した前記アドバイスを提示するステップと、
を有するアドバイス提示方法。

【請求項19】

自転車に装着された器具端末と、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末と、を備えるアドバイス提示システムであって、
前記器具端末は、
前記使用者を含む使用者画像を撮像する撮像部と、
前記自転車の状態を検出し、検出した状態を示す状態情報を出力する検出部と、を有し、
前記情報端末は、
前記器具端末から前記使用者画像及び前記状態情報を取得する取得部と、
前記使用者画像に基づいて前記使用者の状態を特定し、前記状態情報に基づいて前記自転車の状態を特定する第１状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、
前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、
を有するアドバイス提示システム。

【請求項20】

自転車に装着され、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する器具端末を備えるアドバイス提示システムであって、
前記器具端末は、
前記使用者を含む使用者画像を撮像する撮像部と、
前記自転車の状態を検出し、検出した状態を示す状態情報を出力する検出部と、
前記使用者画像に基づいて前記使用者の状態を特定し、前記状態情報に基づいて前記自転車の状態を特定する第２状態特定部と、
前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第２状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第２アドバイス作成部と、
前記第２アドバイス作成部が作成した前記アドバイスを提示する第２アドバイス提示部と、
を有するアドバイス提示システム。

【請求項21】

自転車に装着され、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるための器具端末であって、
前記使用者を含む使用者画像を撮像する第１撮像部と、
前記自転車を含む器具画像を撮像する第２撮像部または前記自転車の状態を検出し、検出した状態を示す状態情報を出力する検出部と、
前記器具画像または前記状態情報に基づいて前記自転車の状態を特定する第２状態特定部とを有し、
前記第２撮像部が撮像した器具画像または前記検出部が出力した状態情報が一定の条件を満たす場合に、前記第２状態特定部は、使用者が自転車に乗れたと判定し、
第１撮像部が、使用者を撮像する、器具端末。

【請求項22】

前記器具端末に加え、前記自転車から離れた位置で使用される情報端末を備え、前記第２状態特定部により使用者が自転車に乗れたと判定された際、前記器具端末から前記情報端末へ信号が送られ、前記情報端末においてアラートが発せられる、請求項２１に記載のアドバイス提示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、自転車の使用者及び使用者に対して指導する指導者にアドバイスを提示するためのアドバイス提示システム、情報端末、器具端末、プログラム及びアドバイス提示方法に関する。

【背景技術】

【0002】

従来、自動車の運転者に対してアドバイスを提示する電子機器が開示されている。例えば、特許文献１においては、自動車の運転者に対して運転の習熟度に応じたアドバイスを提示する技術が提案されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１４－２２８７２５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載の技術においては、運転者の動作に関する履歴情報及び運転者の身体的特徴に関する属性情報等を用いて習熟度を算出し、習熟度に応じたアドバイスを提示している。しかしながら、自転車及びスケートボード等の自転車を使用する場合、使用者の動作が同じであっても、自転車の状態と使用者の動作との関係によって、使用者の動作が適切か否かが異なる。このため、使用者の動作を用いるだけでは、アドバイスの精度が不十分な場合があるという問題があった。

【0005】

そこで、本発明はこれらの点に鑑みてなされたものであり、自転車の使用者のスキルを向上させるためのアドバイスの質を向上させることを目的とする。

【課題を解決するための手段】

【0006】

本発明の第１の態様のアドバイス提示システムは、自転車に装着された器具端末と、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末と、を備えるアドバイス提示システムであって、前記器具端末は、前記使用者を含む使用者画像を撮像する第１撮像部と、前記自転車を含む器具画像を撮像する第２撮像部と、を有し、前記情報端末は、前記器具端末から前記使用者画像及び前記器具画像を取得する画像取得部と、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第１状態特定部と、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、を有する。

【0007】

前記第１状態特定部は、前記使用者画像に基づいて前記使用者の状態として前記使用者の身体の姿勢及び動きの少なくともいずれかを特定し、前記器具画像に基づいて前記自転車の傾き、速度及び加速度の少なくともいずれかを前記自転車の状態として特定してもよい。

【0008】

前記第１状態特定部は、前記使用者画像に基づいて前記使用者の状態として前記使用者の顔の表情を特定してもよい。

【0009】

前記第１状態特定部は、前記器具画像に基づいて前記自転車の周辺の状態をさらに特定し、前記第１アドバイス作成部は、前記使用者の状態、前記自転車の状態及び前記自転車の周辺の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態、前記自転車の状態及び前記自転車の周辺の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成してもよい。

【0010】

前記第１アドバイス作成部は、前記自転車の周辺の状態が直線路である場合に、直線路用の前記一以上のアドバイス候補に基づいて前記アドバイスを作成し、前記自転車の周辺の状態がカーブ路である場合に、カーブ路用の前記一以上のアドバイス候補に基づいて前記アドバイスを作成してもよい。

【0011】

前記情報端末は、前記自転車及び前記使用者を含む画像を撮像する第３撮像部をさらに有し、前記第１状態特定部は、前記自転車及び前記使用者を含む画像に基づいて前記使用者の身体の位置と前記自転車を構成する部材の位置との相対的な位置関係を特定し、前記第１アドバイス作成部は、前記相対的な位置関係に関連付けられた前記一以上のアドバイス候補に基づいて前記アドバイスを作成してもよい。

【0012】

前記器具端末は、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第２状態特定部と、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第２状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第２アドバイス作成部と、前記第２アドバイス作成部が作成した前記アドバイスを提示する第２アドバイス提示部と、を有してもよい。

【0013】

前記第２アドバイス作成部は、前記第１アドバイス作成部が作成した前記アドバイスと異なる前記アドバイスを作成してもよい。

【0014】

前記情報端末は、前記使用者画像のうち、前記第１アドバイス作成部が前記アドバイスを作成したタイミングに基づいて選択された期間の画像を記憶部に記憶させてもよい。

【0015】

前記自転車が、ペダルを着脱可能な自転車であり、前記第１アドバイス作成部は、前記ペダルが装着されていない状態で前記自転車が使用されている間に撮影された前記使用者画像及び前記器具画像に基づいて前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に基づいて、前記ペダルを装着することを促す前記アドバイスを作成してもよい。

【0016】

本発明の第２の態様の情報端末は、自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末であって、前記使用者を含む使用者画像及び前記自転車を含む器具画像を取得する画像取得部と、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第１状態特定部と、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、を有する。

【0017】

本発明の第３の態様の器具端末は、自転車に装着されており、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する器具端末であって、前記使用者を含む使用者画像を撮像する第１撮像部と、前記自転車を含む器具画像を撮像する第２撮像部と、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定する第２状態特定部と、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第２状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第２アドバイス作成部と、前記第２アドバイス作成部が作成した前記アドバイスを提示する第２アドバイス提示部と、を有する。

【0018】

本発明の第４の態様のプログラムは、自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータに、前記使用者を含む使用者画像及び前記自転車を含む器具画像を取得するステップと、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、作成した前記アドバイスを提示するステップと、を実行させるためのプログラムである。

【0019】

本発明の第５の態様のプログラムは、自転車に装着されており、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータに、前記使用者を含む使用者画像を撮像するステップと、前記自転車を含む器具画像を撮像するステップと、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、作成した前記アドバイスを提示するステップと、を実行させるためのプログラムである。

【0020】

本発明の第６の態様のアドバイス提示方法は、自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示するコンピュータが実行する方法であって、前記使用者を含む使用者画像を撮像するステップと、前記自転車を含む器具画像を撮像するステップと、前記使用者画像及び前記器具画像を取得するステップと、前記使用者画像に基づいて前記使用者の状態を特定し、前記器具画像に基づいて前記自転車の状態を特定するステップと、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成するステップと、作成した前記アドバイスを提示するステップと、を有する。

【0021】

本発明の第７の態様のアドバイス提示システムは、自転車に装着された器具端末と、前記自転車を使用する使用者が前記自転車を使用するスキルを向上させるためのアドバイスを提示する情報端末と、を備えるアドバイス提示システムであって、前記器具端末は、前記使用者を含む使用者画像を撮像する撮像部と、前記自転車の状態を検出し、検出した状態を示す状態情報を出力する検出部と、を有し、前記情報端末は、前記器具端末から前記使用者画像及び前記状態情報を取得する取得部と、前記使用者画像に基づいて前記使用者の状態を特定し、前記状態情報に基づいて前記自転車の状態を特定する第１状態特定部と、前記使用者の状態及び前記自転車の状態に関連付けられた複数のアドバイス候補のうち、前記第１状態特定部が特定した前記使用者の状態及び前記自転車の状態に関連付けられている一以上のアドバイス候補に基づいて前記アドバイスを作成する第１アドバイス作成部と、前記第１アドバイス作成部が作成した前記アドバイスを提示する第１アドバイス提示部と、を有する。

【発明の効果】

【0022】

本発明によれば、自転車の使用者のスキルを向上させるためのアドバイスの質を向上させることができるという効果を奏する。

【図面の簡単な説明】

【0023】

【図1】アドバイス提示システムの概要を説明するための図である。

【図2】情報端末の機能構成を示す図である。

【図3】器具端末の機能構成を示す図である。

【図4】アドバイス候補の例を示す図である。

【図5】情報端末においてアドバイスを提示する処理の流れを示すフローチャートである。

【図6】器具端末の変形例を示す斜視図である。

【発明を実施するための形態】

【0024】

［アドバイス提示システムの概要］ 図１は、アドバイス提示システム１の概要を説明するための図である。アドバイス提示システム１は、自転車４を使用する使用者が自転車４を使用するスキルを向上させるためのアドバイスを提示するためのシステムである。アドバイス提示システム１は、情報端末２と、器具端末３と、を有する。

【0025】

アドバイス提示システム１において、情報端末２は、自転車４に装着された器具端末３により撮像された画像に基づいて自転車を使用する使用者が自転車４を使用するスキルを向上させるためのアドバイスを提示する。このようにすることで、例えば、自転車４の使用者に対して指導する指導者が情報端末２に提示されたアドバイスを用いて使用者に指導することができる。

【0026】

器具端末３は、自転車４の使用者の状態及び自転車４の状態を撮像することができる端末であり、例えばスマートフォン又はタブレットであるが、使用者の身体に装着される形態の端末（例えば眼鏡形状の端末）であってもよい。器具端末３は、撮像した画像を情報端末２に送信することができる。

【0027】

図１において、自転車４は、主に自転車の乗り方を習得することを目的とする練習用自転車であり、ペダルを着脱可能である。図１において、自転車４は、ペダルを着脱可能な自転車を示しているが、自転車４は、ペダルが固定された自転車、ペダルなし自転車、スケートボード、鉄棒等のように、器具端末３を装着可能な他の自転車であってもよい。

【0028】

［情報端末２の概要］ 図２は、情報端末２の機能構成を示す図である。情報端末２は、自転車４を使用する使用者が自転車４を使用するスキルを向上させるためのアドバイスを提示する端末である。情報端末２は、撮像部２１と、通信部２２と、制御部２３と、記憶部２４と、表示部２５と、音声出力部２６とを有する。制御部２３は、画像取得部２３１と、第１状態特定部２３２と、第１アドバイス作成部２３３と、第１アドバイス提示部２３４とを有する。

【0029】

撮像部２１は、レンズ及び撮像素子を有しており、撮像画像を生成する。具体的には、撮像部２１は、自転車４及び使用者を含む画像を撮像し、撮像画像を生成する。

【0030】

通信部２２は、他のコンピュータ等の電子機器との間でデータを送受信するための通信インターフェースであり、例えばＬＡＮ（Local Area Network）コントローラを含む。通信部２２は、例えばインターネット又はＬＡＮ等のネットワークに接続されており、もしくは器具端末３に無線通信で直接接続され、器具端末３からネットワークを介して受信した画像を画像取得部２３１に入力する。

【0031】

制御部２３は、例えばＣＰＵ（Central Processing Unit）を含んでおり、記憶部２４に記憶されたプログラムを実行することにより、画像取得部２３１、第１状態特定部２３２、第１アドバイス作成部２３３及び第１アドバイス提示部２３４として機能する。制御部２３は、ＣＰＵとともに、又はＣＰＵの代わりに他の回路を含んでもよい。

【0032】

記憶部２４は、例えばＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）及びハードディスク等の記憶媒体を含む。記憶部２４は、制御部２３が実行するプログラムを記憶する。また、記憶部２４は、使用者の状態及び自転車の状態に関連付けられた複数のアドバイス候補を記憶する。さらに、記憶部２４は、第１状態特定部２３２が使用者画像から使用者の状態を特定し、第１状態特定部２３２が器具画像から自転車４の状態を特定するための各種アルゴリズムを記憶する。また、記憶部２４は、自転車及び使用者を含む画像から周囲の状態を特定するための各種アルゴリズムを記憶する。

【0033】

表示部２５は、画像を表示するためのディスプレイである。表示部２５は、制御部２３から入力される表示用データを表示する。音声出力部２６は、例えばスピーカーであり、制御部２３から入力される音声データを音声として出力する。

【0034】

画像取得部２３１は、通信部２２を介して、器具端末３の撮像部が撮像した使用者を含む使用者画像及び自転車４を含む器具画像を取得する。また、画像取得部２３１は、撮像部２１が生成した自転車４及び使用者を含む画像を取得してもよい。

【0035】

第１状態特定部２３２は、画像取得部２３１が取得した使用者画像に基づいて使用者の状態を特定し、画像取得部２３１が取得した器具画像に基づいて自転車の状態を特定する。

【0036】

具体的には、第１状態特定部２３２は、使用者画像に基づいて使用者の状態として使用者の身体の姿勢及び動きの少なくともいずれかを特定する。第１状態特定部２３２は、例えば、記憶部２４に記憶されている人間の身体の姿勢及び動きを検出するアルゴリズムを用いて使用者画像から使用者の身体の複数の部位の特徴点を検出する。

【0037】

そして、第１状態特定部２３２は、記憶部２４に記憶されている身体の複数の部位の特徴点と身体の姿勢及び／又は動きとを関連付けた情報を参照して、検出した使用者の身体の複数の部位の特徴点に関連付けられている身体の姿勢及び／又は動きを使用者の身体の及び／又は動きとして特定する。第１状態特定部２３２は、身体の姿勢及び動きの両方を特定してもよく、身体の姿勢及び動きのいずれか一方を特定してもよい。

【0038】

また、第１状態特定部２３２は、器具画像に基づいて自転車４の傾き、速度及び加速度の少なくともいずれかを自転車４の状態として特定する。

【0039】

第１状態特定部２３２は、例えば、記憶部２４に記憶された物体検出アルゴリズムを用いて器具画像から自転車４のハンドルの画像を検出し、自転車４のハンドルが水平状態の基準画像と検出した画像とを比較することにより自転車４のハンドルの傾きを検出する。そして、第１状態特定部２３２は、検出した自転車４のハンドルの傾きを自転車４の状態として特定する。第１状態特定部２３２が器具画像から特定する自転車４の傾きは、自転車４のハンドルの傾き、自転車４のタイヤの傾き、自転車４の車体全体の傾きであってもよい。

【0040】

また、例えば、予め自転車４のタイヤにマーキングが施されている場合、第１状態特定部２３２は、記憶部２４に記憶されている画像処理アルゴリズムを用いて回転しているタイヤを撮像した画像内のマーキングの画像を検出する。そして、第１状態特定部２３２は、記憶部２４に記憶されているマーキングの画像と自転車４の速度とを関連付けた情報を参照し、特定したマーキングの画像に関連付けられている速度を自転車４の速度として特定する。また、第１状態特定部２３２は、自転車４の加速度も自転車４の速度と同様の手法で特定することができる。

【0041】

なお、自動車等のように高速で回転しているタイヤを撮像した画像からマーキングが施された部分を検出することは困難であるが、自転車４のタイヤが低速で回転する場合（例えば、自転車４が幼児向けの小型自転車である場合）であれば、画像処理アルゴリズムを用いて回転しているタイヤを撮像した画像内のマーキングの画像を検出することが可能である。

【0042】

また、第１状態特定部２３２は、使用者画像に基づいて使用者の状態として使用者の顔の表情を特定してもよい。第１状態特定部２３２は、例えば、記憶部２４に記憶されている顔認識アルゴリズムを用いて使用者画像から使用者の顔の表情を特定する。特定される顔の表情は、自転車４の使用に関連する表情であり、例えば、余裕がある、緊張している、笑っている、泣いている等である。このように使用者の顔の表情を特定することで、使用者の状態を適切に特定することができる。

【0043】

また、第１状態特定部２３２は、器具画像に基づいて自転車４の周辺の状態をさらに特定してもよい。第１状態特定部２３２は、例えば、記憶部２４に記憶された物体検出アルゴリズムを用いて器具画像から路面の状態、自転車４の周囲の物体等を検出し、検出した路面の状態や、周囲の物体等を自転車４の周辺の状態として特定する。自転車４の周辺の状態は、例えば、自転車が走行する路面がカーブ路である、直線路である、上り斜面である、下り斜面である、路面に障害物（例えば、パイロン）があること等である。

【0044】

また、第１状態特定部２３２は、撮像部２１が撮像した自転車４及び使用者を含む画像に基づいて使用者の身体の位置と自転車４を構成する部材の位置との相対的な位置関係を特定してもよい。第１状態特定部２３２は、例えば、検出した使用者の身体の臀部の重心と自転車４のサドルの重心との間の重心間距離を求める。そして、第１状態特定部２３２は、重心間距離が一定距離以上離れているか否かを判定し、重心間距離が一定距離以上離れている又は一定距離未満であることを相対的な位置関係として特定する。

【0045】

第１アドバイス作成部２３３は、記憶部２４に記憶されている使用者の状態及び自転車４の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が特定した使用者の状態及び自転車４の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する。

【0046】

第１アドバイス作成部２３３は、例えば、第１状態特定部２３２が使用者の状態として「身体が真っ直ぐ」を特定し、自転車４の状態として「タイヤが右側に大きく傾く」を特定した場合、第１アドバイス作成部２３３は、使用者の状態及び自転車の状態に関連付けられているアドバイス候補「バランスが取れていません。真っ直ぐ進めるように地面を蹴る練習をしましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0047】

また、第１アドバイス作成部２３３は、第１状態特定部２３２が使用者の状態として「顔の表情が緊張している」を特定し、自転車４の状態として「タイヤが右側に大きく傾く」を特定した場合、第１アドバイス作成部２３３は、使用者の状態及び自転車の状態に関連付けられているアドバイス候補「緊張しているようです。声をかけてあげましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0048】

第１状態特定部２３２が自転車４の周辺の状態をさらに特定する場合、第１アドバイス作成部２３３は、使用者の状態、自転車４の状態及び自転車４の周辺の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が特定した使用者の状態、自転車４の状態及び自転車４の周辺の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成してもよい。

【0049】

例えば、第１アドバイス作成部２３３は、第１状態特定部２３２が使用者の状態として「身体が真っ直ぐ」を特定し、自転車４の状態として「タイヤが右側に大きく傾く」を特定し、周辺の状態として「路面に障害物がある」を特定した場合、第１アドバイス作成部２３３は、使用者の状態及び自転車の状態に関連付けられているアドバイス候補「障害物にぶつからないように進みましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0050】

このように自転車４の周辺の状態を特定することで、アドバイス提示システム１は、自転車４の状態を適切に特定して、アドバイスを作成することができる。

【0051】

また、第１アドバイス作成部２３３は、自転車４の周辺の状態が直線路である場合に、直線路用の一以上のアドバイス候補に基づいてアドバイスを作成する。また、第１アドバイス作成部２３３は、自転車４の周辺の状態がカーブ路である場合に、カーブ路用の一以上のアドバイス候補に基づいてアドバイスを作成する。

【0052】

第１アドバイス作
成部２３３は、例えば、第１状態特定部２３２が使用者の状態として「身体が右側に傾く」を特定し、自転車４の状態として「タイヤが右側に傾く」を特定し、周辺の状態として「カーブ路」を特定した場合、カーブ路に対応するアドバイス候補「右回りのカーブを上手く曲がれています。次は、左回りのカーブの練習をしましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0053】

このように周辺の状態が直線路であるか又はカーブ路であるかに応じてアドバイスを作成することで、アドバイス提示システム１は、使用者がスキルを向上させるためにより適切なアドバイスを作成することができる。

【0054】

また、第１状態特定部２３２が使用者の身体の位置と自転車４を構成する部材の位置との相対的な位置関係を特定する場合、第１アドバイス作成部２３３は、第１状態特定部２３２が特定した相対的な位置関係に関連付けられた一以上のアドバイス候補に基づいてアドバイスを作成する。

【0055】

例えば、第１状態特定部２３２が、使用者の身体の臀部の重心と自転車４のサドルの重心との間の重心間距離が一定距離以上離れていることを相対的な位置関係として特定した場合、第１アドバイス作成部２３３は、第１状態特定部２３２が特定した相対的な位置関係に関連付けられた一以上のアドバイス候補「おしりが浮いています。正しい姿勢で乗るように指導しましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0056】

このように使用者の身体の位置と自転車４を構成する部材の位置との相対的な位置関係を特定することで、アドバイス提示システム１は、器具端末３で撮像された一つの画像からは特定できない使用者及び自転車４の状態からアドバイスを作成することができる。

【0057】

また、自転車４がペダルを着脱可能な自転車である場合、第１アドバイス作成部２３３は、ペダルが装着されていない状態で自転車が使用されている間に撮影された使用者画像及び器具画像に基づいて第１状態特定部２３２が特定した使用者の状態及び自転車４の状態に基づいて、ペダルを装着することを促すアドバイスを作成する。

【0058】

例えば、第１アドバイス作成部２３３は、自転車４にペダルが装着されていない状態で、自転車４を正しく乗れていることを示す使用者の状態及び自転車４の状態を特定した場合、ペダルを装着することを促すアドバイス「次はペダルを装着してみましょう。」を作成する。

【0059】

ここで、自転車４を正しく乗れていることを示す使用者の状態及び自転車４の状態は、使用者の状態と自転車４の状態との関係が、ペダルを漕ぐ練習を開始することが可能であることを示す適切な関係である複数の組み合わせを含む。このような組み合わせは、例えば、使用者の状態「身体が真っ直ぐ」及び自転車４の状態「タイヤが水平状態であり、一定以上の速度である」、又は使用者の状態「身体が右側に傾いている」及び自転車４の状態「タイヤが右側に傾いている」等である。

【0060】

このようにすることで、アドバイス提示システム１は、使用者画像及び器具画像に基づいてペダルを装着するために適切なタイミングを含むアドバイスを作成することができる。

【0061】

第１アドバイス提示部２３４は、第１アドバイス作成部２３３が作成したアドバイスを提示する。具体的には、第１アドバイス提示部２３４は、アドバイスの画像データ、テキストデータ等を表示部２５に出力して、表示部２５に表示させる。また、第１アドバイス提示部２３４は、音声出力部２６にアドバイスの音声データを出力し、音声出力部２６が音声を出力する。

【0062】

なお、第１状態特定部２３２や第１アドバイス作成部２３３は、インターネットを介して接続されたサーバー上に存在していても良い。この場合、器具端末３により得られたデータがインターネットを介してサーバーへ送られ、いわゆるクラウド上で状態特定及びアドバイスの作成が行われ、サーバーから情報端末２に対してアドバイスもしくはアドバイスを出すための信号が送られ、アドバイスが提示されることになる。

【0063】

［器具端末３の概要］
図３は、器具端末３の機能構成を示す図である。図３に示す器具端末３は、自転車４に装着されており、撮像機能に加えて、自転車４を使用する使用者が自転車４を使用するスキルを向上させるためのアドバイスを提示する機能を有する。器具端末３は、第１撮像部３１ａと、第２撮像部３１ｂと、通信部３２と、制御部３３と、記憶部３４と、表示部３５と、音声出力部３６とを有する。制御部３３は、第２状態特定部３３１と、第２アドバイス作成部３３２と、第２アドバイス提示部３３３と、を有する。

【0064】

第１撮像部３１ａ及び第２撮像部３１ｂは、それぞれレンズ及び撮像素子を有しており、撮像画像を生成する。具体的には、第１撮像部３１ａは、使用者を含む使用者画像を撮像する。第２撮像部３１ｂは、自転車を含む器具画像を撮像する。第１撮像部３１ａ及び第２撮像部３１ｂは、使用者画像及び器具画像を同時に撮像してもよく、時分割で使用者画像と器具画像とを順次撮像してもよい。第１撮像部３１ａが第１期間（例えば所定のエリアを１周する期間）にわたって使用者画像を撮像し、第２撮像部３１ｂが第２期間（例えば第１期間の後に所定のエリアを１周する期間）にわたって器具画像を撮像してもよい。

【0065】

通信部３２は、他のコンピュータ等の電子機器との間でデータを送受信するための通信インターフェースであり、例えばＬＡＮ（Local Area Network）コントローラを含む。通信部３２は、例えばインターネット又はＬＡＮ等のネットワークに接続されており、ネットワークを介して使用者画像及び器具画像を情報端末２に出力する。

【0066】

制御部３３は、例えばＣＰＵを含んでおり、記憶部３４に記憶されたプログラムを実行することにより、第２状態特定部３３１、第２アドバイス作成部３３２及び第２アドバイス提示部３３３として機能する。制御部３３は、ＣＰＵとともに、又はＣＰＵの代わりに他の回路を含んでもよい。

【0067】

記憶部３４は、例えばＲＯＭ、ＲＡＭ及びハードディスク等の記憶媒体を含む。記憶部３４は、制御部３３が実行するプログラムを記憶する。また、記憶部２４は、使用者の状態及び自転車の状態に関連付けられた複数のアドバイス候補を記憶する。また、記憶部３４は、第２状態特定部３３１が使用者画像から使用者の状態を特定し、第２状態特定部３３１が器具画像から自転車４の状態を特定するための各種アルゴリズムを記憶する。

【0068】

表示部３５は、画像を表示するためのディスプレイである。表示部３５は、制御部３３から入力される表示用データを表示する。音声出力部３６は、例えばスピーカーであり、制御部３３から入力される音声データを音声として出力する。

【0069】

第２状態特定部３３１は、情報端末２の第１状態特定部２３２と同様に、使用者画像に基づいて使用者の状態を特定し、器具画像に基づいて自転車４の状態を特定する。具体的には、第２状態特定部３３１は、使用者画像に基づいて使用者の状態として使用者の身体の姿勢及び動きの少なくともいずれかを特定する。第２状態特定部３３１は、器具画像に基づいて自転車４の傾き、速度及び加速度の少なくともいずれかを自転車４の状態として特定する。

【0070】

また、第２状態特定部３３１は、使用者画像に基づいて使用者の状態として使用者の顔の表情を特定してもよい。また、第２状態特定部３３１は、器具画像に基づいて自転車４の周辺の状態をさらに特定してもよい。

【0071】

また、第２状態特定部３３１は、撮像部２１が撮像した自転車４及び使用者を含む画像に基づいて使用者の身体の位置と自転車４を構成する部材の位置との相対的な位置関係を特定してもよい。

【0072】

第２アドバイス作成部３３２は、情報端末２の第１アドバイス作成部２３３と同様に、使用者の状態及び自転車４の状態に関連付けられた複数のアドバイス候補のうち、第２状態特定部３３１が特定した使用者の状態及び自転車４の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する。

【0073】

また、第２アドバイス作成部３３２は、第１アドバイス作成部２３３が作成したアドバイスと異なるアドバイスを作成してもよい。例えば、器具端末３の第２アドバイス作成部３３２は、「いち、にっ、いち、にっ」のように使用者がペダルを漕ぐ際のタイミングを指示する音声を出力するための音声データを作成する。第２アドバイス作成部３３２は、使用者を含む使用者画像が示す使用者の状態、及び自転車４を含む器具画像が示す自転車４の状態に基づく時間間隔でペダルを漕ぐ際のタイミングを指示する音声を出力するための音声データを作成してもよい。

【0074】

一方、情報端末２の第１アドバイス作成部２３３は、「ペダルがスムーズに漕げていません。」のように指導者が使用者の習得状態を示す画像及び／又は音声を出力するための画像データ及び／又は音声データを作成する。このように使用者用のアドバイスと指導者用のアドバイスと作成することができるため、使用者は、自転車４の使用するスキルを向上させることができる。

【0075】

第２アドバイス提示部３３３は、第２アドバイス作成部３３２が作成したアドバイスを提示する。具体的には、第２アドバイス提示部３３３は、アドバイスの画像データ、テキストデータ等を表示部３５に出力して、表示部３５に表示させる。また、第２アドバイス提示部３３３は、音声出力部３６にアドバイスの音声データを出力し、音声出力部３６に音声を出力させる。

【0076】

［撮像画像の記録］
また、情報端末２の制御部２３は、器具端末３の第１撮像部３１ａが撮像した複数の使用者画像のうち、第１アドバイス作成部２３３がアドバイスを作成したタイミングに基づいて選択された期間の画像を記憶部２４に記憶させてもよい。

【0077】

例えば、制御部２３は、第１撮像部３１ａが撮像した複数の使用者画像のうち、第１アドバイス作成部２３３がアドバイスを作成したタイミングに基づいて選択された期間の画像を時系列順にアルバム形式に編集し、編集したデータを記憶部２４に記憶させる。このようにすることで、アドバイス提示システム１は、自転車の使用者が子供の場合、記憶させた画像を子供の成長記録として残しておくことができる。

【0078】

［アドバイス候補の例］
図４は、アドバイス候補の例を示す図である。図４に示すようにアドバイス候補は、使用者の状態及び自転車の状態に関連付けられており、情報端末２の記憶部２４及び器具端末３の記憶部３４に記憶されている。

【0079】

例えば、情報端末２の第１状態特定部２３２が使用者の状態として「身体が真っ直ぐ」を特定し、自転車４の状態として「タイヤ軸が水平状態であり、一定以上の速度」を特定した場合、第１アドバイス作成部２３３は、使用者の状態及び自転車の状態に関連付けられているアドバイス候補「真っ直ぐ進めています。次は、カーブを曲がる練習をしましょう。」を選択する。そして、第１アドバイス作成部２３３は、選択したアドバイス候補の画像データ及び／又は音声データを作成する。

【0080】

また、器具端末３でも情報端末２と同様の処理を行うことによりアドバイス候補からアドバイスを作成する。なお、図４においては、１対の使用者の状態及び自転車４の状態に１つのアドバイス候補が関連付けられている例を示したが、１対の使用者の状態及び自転車４の状態に複数のアドバイス候補が関連付けられていてもよい。

【0081】

［アドバイス提示処理の流れ］
図５は、情報端末２においてアドバイスを提示する処理の流れを示すフローチャートである。まず、画像取得部２３１は、器具端末３から通信部２２を介して使用者画像及び器具画像を取得する（Ｓ１）。第１状態特定部２３２は、使用者画像に基づいて使用者の状態を特定し、器具画像に基づいて自転車４の状態を特定する（Ｓ２）。

【0082】

第１アドバイス作成部２３３は、使用者の状態及び自転車４の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が特定した使用者の状態及び自転車４の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する（Ｓ３）。第１アドバイス提示部２３４は、第１アドバイス作成部２３３が作成したアドバイスを提示する（Ｓ４）。

【0083】

［変形例１］
以上の説明においては、アドバイス提示システム１は、器具端末３の第２撮像部３１ｂにより撮像された器具画像を用いて自転車４の状態を特定したが、器具端末３の構成は、これに限定されない。例えば、器具端末３は、使用者を含む使用者画像を撮像する第１撮像部３１ａと、自転車４の状態を検出し、検出した状態を示す状態情報を出力する検出部と、を有してもよい。また、第１撮像部３１ａ、第２撮像部３１ｂ及び検出部が物理的に一つの器具端末３に内蔵されていなくても良い。第１撮像部３１ａ、第２撮像部３１ｂ及び検出部が有線または無線で器具端末３に接続されていれば、器具端末３が第１撮像部３１ａ、第２撮像部３１ｂ及び検出部を有すると解釈することができる。

【0084】

この場合、検出部は、例えば、加速度センサ、傾斜センサ又はジャイロセンサ、GPSを用いた距離センサ等を含む。例えば、検出部が加速度センサの場合、検出部は、自転車４の加速度を検出することにより自転車４の車体の傾きを自転車４の状態として検出する。また、検出部が距離センサの場合、検出部は、自転車４の移動軌跡から速度や距離、走行安定性を自転車４の状態として検出する。検出部は、器具端末３とは別個に設けられていてもよく、たとえばホイールの回転数検出装置、ヘルメットに備えられた傾斜センサなどが無線で器具端末３に接続されることで検出部として使用できる。

【0085】

さらに、情報端末２は、器具端末３から使用者画像及び状態情報を取得する取得部と、使用者画像に基づいて使用者の状態を特定し、状態情報に基づいて自転車４の状態を特定する第１状態特定部２３２とを有する。

【0086】

また、情報端末２は、使用者の状態及び自転車４の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が使用者画像及び状態情報に基づいて特定した使用者の状態及び自転車の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する第１アドバイス作成部２３３と、第１アドバイス作成部２３３が作成したアドバイスを提示する第１アドバイス提示部２３４とを有する。

【0087】

このような構成を有することで、アドバイス提示システム１は、画像を用いずに自転車４の状態を検出することができるため、例えば、撮像部により自転車４の状態を特定することが困難な環境であっても自転車４の状態を適切に特定することができる。さらに、画像情報と合わせることにより、例えば、車体が左に傾いているのに目線は右を見ているといったミスマッチに対して指摘を行うことができる。

【0088】

より具体的には、自分で車体を起こすことができるかを、情報端末２に内蔵された傾斜センサ及びカメラにより検出して判定し、バランスバイク時の歩幅の大きさ、その左右差をカメラにより検出しつつスピードをGPSにより検出して閾値を超えているかを判断し、8の字走行時に左右の回り方に差がないかをカメラ、GPS、傾斜センサにより検出して判定し、閾値を超えたら次のステップ、例えばペダルをつけるステップに進むよう促す。

【0089】

さらに、ペダルをつけて自転車としての走行を行う際に、例えば地面から足を離してペダルを１０回漕ぐことができた場合に、自転車に乗れた瞬間と判断し、情報端末２のインカメラで使用者の顔などを撮影すると共に、情報端末１に信号を送り、アラートを発する。このようにすることにより、自転車に乗れた決定的な瞬間の表情を映像で残すことを可能とし、親がこの瞬間を見逃すことを防ぐことができる。自転車に乗れていることを判断するには、情報端末２のアウトカメラによりペダルや使用者の足を撮影して連続的に１０回漕いでいることを判定し、検出部としての傾斜センサでバランスが取れていることを判定し、これらのデータが閾値を超えたことにより自転車に乗れたとの判定がなされる。

【0090】

［変形例２］
また、以上の説明においては、情報端末２は、自転車４から離間した位置に存在することが想定されていたが、例えば、情報端末２は、器具端末３と同様に自転車４に装着されていてもよい。具体的には、アドバイス提示システム１において、器具端末３が自転車のハンドル付近に装着されており、情報端末２が自転車のサドル付近に装着されていてもよい。

【0091】

このような構成を有することで、アドバイス提示システム１は、情報端末２が自転車４に装着されているので、指導者は、情報端末２からアドバイスの提示を受けながら、使用者の近傍で使用者に対して指導することができる。

【0092】

［変形例３］
さらに、以上の説明においては、情報端末２と器具端末３とを備えることを必須としていたが、これに限らず、器具端末３のみを備えていてもよい。具体的には、アドバイス提示システム１において、器具端末３が自転車のハンドル付近に装着されているのみで、検出部や撮像部から得られた状態の情報からアドバイスが作成され、器具端末３の音声出力部３６からの音声などにより使用者本人に対して直接アドバイスしてもよい。

【0093】

［変形例４］
また、アドバイス提示システム１において、自転車４に装着された器具端末３が情報端末２として機能してもよい。この場合、器具端末３の制御部３３が、情報端末２の画像取得部２３１、第１状態特定部２３２、第１アドバイス作成部２３３及び第１アドバイス提示部２３４として機能する。このような構成を有することで、アドバイス提示システム１は、器具端末３単体で情報端末２及び器具端末３の機能を実現することができる。

【0094】

［変形例５］
以上の説明においては、器具端末３が第１撮像部３１ａ及び第２撮像部３１ｂを有する場合を例示したが、器具端末３が、３６０度の範囲を撮像できる全方位カメラを有しており、全方位カメラによって使用者画像及び器具画像を撮像してもよい。この場合、全方位カメラが第１撮像部及び第２撮像部として機能する。器具端末３に接続された全方位カメラにより使用者画像及び器具画像を撮像してもよい。

【0095】

［変形例６］
また、第１撮像部３１ａがスマートフォンにおけるいわゆるインカメラであって、使用者を含む使用者画像を撮像し、第２撮像部３１ｂが、スマートフォンにおけるいわゆるアウトカメラであって、自転車を含む器具画像を撮像する場合に、広角レンズやプリズム、鏡などのアタッチメントをスマートフォンである器具端末３に装着することで、使用者及び自転車を適切な画角で捉えるような設計がなされていてもよい。図６において、器具端末としてのスマートフォン３の第一撮像部としてのインカメラ３１ａに破線で示した鏡を内蔵する反射部材３１ａＰが装着され、第二撮像部としてのアウトカメラ３１ｂに破線で示した鏡を内蔵する反射部材３１ｂＰが装着され、画角を調整している。このようにすることで、器具端末３を自転車のハンドルに装着した際に、アウトカメラ３１ｂで主に自転車の車体を撮影しつつ、インカメラ３１ａで主に使用者を撮影するといった運用が可能となる。

【0096】

［アドバイス提示システム１による効果］
以上説明したように、第１状態特定部２３２は、使用者画像に基づいて使用者の状態を特定し、器具画像に基づいて自転車４の状態を特定する。そして、第１アドバイス作成部２３３は、使用者の状態及び自転車の状態に関連付けられた複数のアドバイス候補のうち、第１状態特定部２３２が特定した使用者の状態及び自転車の状態に関連付けられている一以上のアドバイス候補に基づいてアドバイスを作成する。

【0097】

そして、第１アドバイス提示部２３４は、第１アドバイス作成部２３３が作成したアドバイスを提示する。情報端末２がこのような構成を有することで、情報端末２は、使用者の状態及び自転車４の状態に基づいてアドバイスを提示できるため、自転車４の使用者のスキルを向上させるためのアドバイスの質を向上させることができる。特に、使用者に自転車４の指導を行う指導者の指導経験が少ない場合であっても、情報端末２に提示されるアルゴリズムを用いて使用者に適切にアドバイスすることができる。

【0098】

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。

【符号の説明】

【0099】

１ アドバイス提示システム
２ 情報端末
３ 器具端末
４ 自転車
２１ 撮像部
２２ 通信部
２３ 制御部
２４ 記憶部
２５ 表示部
２６ 音声出力部
３１ａ 第１撮像部
３１ｂ 第２撮像部
３２ 通信部
３３ 制御部
３４ 記憶部
３５ 表示部
３６ 音声出力部
２３１ 画像取得部
２３２ 第１状態特定部
２３３ 第１アドバイス作成部
２３４ 第１アドバイス提示部
３３１ 第２状態特定部
３３２ 第２アドバイス作成部
３３３ 第２アドバイス提示部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】