(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022124063
(43)【公開日】2022-08-25
(54)【発明の名称】通話支援装置
(51)【国際特許分類】
B60R 11/02 20060101AFI20220818BHJP
H04M 1/60 20060101ALI20220818BHJP
H04R 3/00 20060101ALI20220818BHJP
【ＦＩ】
B60R11/02 S
H04M1/60 A
B60R11/02 T
H04R3/00 310
【審査請求】未請求
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2021021610
(22)【出願日】2021-02-15
(71)【出願人】
【識別番号】000001487
【氏名又は名称】フォルシアクラリオン・エレクトロニクス株式会社
(74)【代理人】
【識別番号】110001081
【氏名又は名称】弁理士法人クシブチ国際特許事務所
(72)【発明者】
【氏名】渡邉 尚紀
【テーマコード（参考）】
3D020
5D220
5K127
【Ｆターム（参考）】
3D020BA07
3D020BA10
3D020BA20
3D020BC02
3D020BD03
3D020BE03
5D220AA01
5D220AB08
5K127AA36
5K127BA03
5K127BA10
5K127CB33
5K127GB47
5K127JA14
5K127MA08
(57)【要約】
【課題】乗員の通話を適正に支援する。
【解決手段】通話支援ＥＣＵ１１は、車両に搭載され、乗員ＣＲのスマートフォンＳＰによる通話を支援する通話支援ＥＣＵ１１であって、車両に配置されたカメラ１３から乗員ＣＲの画像情報ＰＣを取得する画像取得部１１１と、車両に配置されたマイク１４から乗員ＣＲの音声情報ＳＤを取得する音声取得部１１２と、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する通話判定部１１７と、通話判定部１１７の判定結果に応じて、乗員ＣＲの通話を支援する通話支援部１１９と、を備える。
【選択図】図１
【解決手段】通話支援ＥＣＵ１１は、車両に搭載され、乗員ＣＲのスマートフォンＳＰによる通話を支援する通話支援ＥＣＵ１１であって、車両に配置されたカメラ１３から乗員ＣＲの画像情報ＰＣを取得する画像取得部１１１と、車両に配置されたマイク１４から乗員ＣＲの音声情報ＳＤを取得する音声取得部１１２と、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する通話判定部１１７と、通話判定部１１７の判定結果に応じて、乗員ＣＲの通話を支援する通話支援部１１９と、を備える。
【選択図】図１
【特許請求の範囲】
【請求項1】
車両に搭載され、乗員の携帯電話機器による通話を支援する通話支援装置であって、
前記車両に配置された撮像装置から前記乗員の画像情報を取得する画像取得部と、
前記車両に配置された音声取得装置から前記乗員の音声情報を取得する音声取得部と、
前記画像情報と前記音声情報とに基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する通話判定部と、
前記通話判定部の判定結果に応じて、前記乗員の通話を支援する通話支援部と、
を備える、通話支援装置。
前記車両に配置された撮像装置から前記乗員の画像情報を取得する画像取得部と、
前記車両に配置された音声取得装置から前記乗員の音声情報を取得する音声取得部と、
前記画像情報と前記音声情報とに基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する通話判定部と、
前記通話判定部の判定結果に応じて、前記乗員の通話を支援する通話支援部と、
を備える、通話支援装置。
【請求項2】
前記通話支援部は、前記乗員の通話の妨げとなる音を低減する通話支援処理を実行する、
請求項１に記載の通話支援装置。
請求項１に記載の通話支援装置。
【請求項3】
前記通話支援処理は、前記車両に配置された音響機器から出力される音量を低減する処理、前記車両に配置された空調機器のファンの回転速度を低減する処理、及び、前記車両に配置された窓を閉める処理、の少なくとも１つを含む、
請求項２に記載の通話支援装置。
請求項２に記載の通話支援装置。
【請求項4】
前記画像情報に基づいて、前記乗員の耳と前記携帯電話機器との距離を算出する距離算出部を更に備え、
前記通話判定部は、前記距離算出部の算出結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項３のいずれか１項に記載の通話支援装置。
前記通話判定部は、前記距離算出部の算出結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項３のいずれか１項に記載の通話支援装置。
【請求項5】
前記画像情報に基づいて、前記乗員の口が通話のために動いているか否かを判定する動作判定部を更に備え、
前記通話判定部は、前記動作判定部の判定結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項４のいずれか１項に記載の通話支援装置。
前記通話判定部は、前記動作判定部の判定結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項４のいずれか１項に記載の通話支援装置。
【請求項6】
前記音声情報に基づいて、発話者の人数、前記携帯電話機器の発信音の有無、前記携帯電話機器の着信音の有無、及び、前記携帯電話機器による通話を示唆する特定の文言の発話の有無、の少なくとも１つを判定する音声判定部を更に備え、
前記通話判定部は、前記音声判定部の判定結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項５のいずれか１項に記載の通話支援装置。
前記通話判定部は、前記音声判定部の判定結果に基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する、
請求項１から請求項５のいずれか１項に記載の通話支援装置。
【請求項7】
前記乗員が前記携帯電話機器による通話を開始したか否かを前記通話判定部が判定できない場合に、前記車両の運転者に対して、前記乗員が前記携帯電話機器による通話を開始したか否かの判定を促す旨を通知する通知部を更に備える、
請求項１から請求項６のいずれか１項に記載の通話支援装置。
請求項１から請求項６のいずれか１項に記載の通話支援装置。
【請求項8】
前記音声情報に含まれる機器音声情報を前記音声情報から除外することによって、前記音声情報を補正する除外部を更に備え、
前記機器音声情報は、前記車両に配置された音響機器から出力される音声に対応する、
請求項１から請求項７のいずれか１項に記載の通話支援装置。
前記機器音声情報は、前記車両に配置された音響機器から出力される音声に対応する、
請求項１から請求項７のいずれか１項に記載の通話支援装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、通話支援装置に関する。
【背景技術】
【0002】
従来、車両に搭乗する同乗者に対して携帯電話機を快適に使用できるようにする技術が、例えば特許文献１に開示されている。
特許文献１に記載のハンズフリー通話装置は、携帯電話機が、運転者の携帯電話機か同乗者の携帯電話機かを判定し、運転者の携帯電話機による通話時には運転者の携帯電話機をハンズフリー状態とし、同乗者の携帯電話機による通話時にはカーオーディオの音量を低下させる。
特許文献１に記載のハンズフリー通話装置は、携帯電話機が、運転者の携帯電話機か同乗者の携帯電話機かを判定し、運転者の携帯電話機による通話時には運転者の携帯電話機をハンズフリー状態とし、同乗者の携帯電話機による通話時にはカーオーディオの音量を低下させる。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２００６－１２１２７０号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献１に記載のハンズフリー通話装置では、車室内で通話する際に、車載装置と携帯電話機とがＢｌｕｅｔｏｏｔｈ（登録商標）等の通信機構で接続されていない場合には、携帯電話機による通話が開始されたことを検知できなかった。そのため、通話者に対して適正に支援を行うことができない場合があった。
本発明は、乗員の通話を適正に支援することの可能な通話支援装置を提供することを目的とする。
本発明は、乗員の通話を適正に支援することの可能な通話支援装置を提供することを目的とする。
【課題を解決するための手段】
【0005】
上記目的を達成するために、本実施形態の通話支援装置は、車両に搭載され、乗員の携帯電話機器による通話を支援する通話支援装置であって、前記車両に配置された撮像装置から前記乗員の画像情報を取得する画像取得部と、前記車両に配置された音声取得装置から前記乗員の音声情報を取得する音声取得部と、前記画像情報と前記音声情報とに基づいて、前記乗員が前記携帯電話機器による通話を開始したか否かを判定する通話判定部と、前記通話判定部の判定結果に応じて、前記乗員の通話を支援する通話支援部と、を備える。
【発明の効果】
【0006】
本実施形態によれば、画像情報と音声情報とに基づいて、乗員が携帯電話機器による通話を開始したか否かを判定し、その判定結果に応じて、乗員の通話を支援するため、乗員の通話を適正に支援できる。
【図面の簡単な説明】
【0007】
【図1】本実施形態に係る通話支援装置の構成の一例を示す図である。
【図2】通話判定部の判定方法の一例を示す図表である。
【図3】通話支援ＥＣＵの処理の一例を示すフローチャートである。
【図4】通話支援ＥＣＵの処理の一例を示すフローチャートである。
【発明を実施するための形態】
【0008】
以下、図面を参照して本実施形態について説明する。
【0009】
図１は、本実施形態に係る通話支援システム１の構成の一例を示す図である。通話支援システム１は、車両に搭載される。
通話支援システム１は、乗員ＣＲのスマートフォンＳＰによる通話を支援する。本実施形態では、乗員ＣＲは、運転者を含まない。
なお、スマートフォンＳＰによる通話は、電話回線を介した通話に限定されない。スマートフォンＳＰによる通話は、インターネットを介した通話でもよい。インターネットを介した通話は、例えば、ＳＮＳ（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）を介した通話でもよいし、Ｓｋｙｐｅ（登録商標）、Ｍｉｃｒｏｓｏｆｔ Ｔｅａｍｓ（登録商標）、ＺＯＯＭ（登録商標）等のアプリケーションソフトウェアによる通話でもよい。
スマートフォンＳＰは、「携帯電話機器」の一例に対応する。
通話支援システム１は、乗員ＣＲのスマートフォンＳＰによる通話を支援する。本実施形態では、乗員ＣＲは、運転者を含まない。
なお、スマートフォンＳＰによる通話は、電話回線を介した通話に限定されない。スマートフォンＳＰによる通話は、インターネットを介した通話でもよい。インターネットを介した通話は、例えば、ＳＮＳ（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）を介した通話でもよいし、Ｓｋｙｐｅ（登録商標）、Ｍｉｃｒｏｓｏｆｔ Ｔｅａｍｓ（登録商標）、ＺＯＯＭ（登録商標）等のアプリケーションソフトウェアによる通話でもよい。
スマートフォンＳＰは、「携帯電話機器」の一例に対応する。
【0010】
図１に示すように、通話支援システム１は、通話支援ＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）１１と、カメラ１３と、マイク１４と、を備える。
通話支援ＥＣＵ１１は、車載ネットワークを介して、音響機器２、空調機器４、窓開閉制御ＥＣＵ５、及び、通話開始判定ボタン６と通信する。
通話支援ＥＣＵ１１は、「通話支援装置」の一例に対応する。
通話支援ＥＣＵ１１は、車載ネットワークを介して、音響機器２、空調機器４、窓開閉制御ＥＣＵ５、及び、通話開始判定ボタン６と通信する。
通話支援ＥＣＵ１１は、「通話支援装置」の一例に対応する。
【0011】
カメラ１３は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ－Ｏｘｉｄｅ－Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等のイメージセンサを備える。カメラ１３は、通話支援ＥＣＵ１１からの指示に従って、乗員ＣＲの画像を撮像し、画像情報ＰＣを生成する。カメラ１３は、例えば、第１カメラ１３１、及び第２カメラ１３２で構成される。
第１カメラ１３１は、例えば、助手席に着座する乗員ＣＲの画像を撮像し、第１画像情報ＰＣ１を生成する。第１カメラ１３１は、例えば、車両のダッシュボードに配置される。第１カメラ１３１は、第１画像情報ＰＣ１を通話支援ＥＣＵ１１へ出力する。
第２カメラ１３２は、例えば、後部座席に着座する乗員ＣＲの画像を撮像し、第２画像情報ＰＣ２を生成する。第２カメラ１３２は、例えば、後部座席に向けて、助手席に配置される。第２カメラ１３２は、第２画像情報ＰＣ２を通話支援ＥＣＵ１１へ出力する。
カメラ１３は、「撮像装置」の一例に対応する。
第１カメラ１３１は、例えば、助手席に着座する乗員ＣＲの画像を撮像し、第１画像情報ＰＣ１を生成する。第１カメラ１３１は、例えば、車両のダッシュボードに配置される。第１カメラ１３１は、第１画像情報ＰＣ１を通話支援ＥＣＵ１１へ出力する。
第２カメラ１３２は、例えば、後部座席に着座する乗員ＣＲの画像を撮像し、第２画像情報ＰＣ２を生成する。第２カメラ１３２は、例えば、後部座席に向けて、助手席に配置される。第２カメラ１３２は、第２画像情報ＰＣ２を通話支援ＥＣＵ１１へ出力する。
カメラ１３は、「撮像装置」の一例に対応する。
【0012】
マイク１４は、通話支援ＥＣＵ１１からの指示に従って、乗員ＣＲの音声を取得し、音声情報ＳＤを生成する。マイク１４は、例えば、第１マイク１４１、及び第２マイク１４２で構成される。
第１マイク１４１は、例えば、助手席に着座する乗員ＣＲの発する音声を取得し、第１音声情報ＳＤ１を生成する。第１マイク１４１は、例えば、車両のダッシュボードに配置される。第１マイク１４１は、第１音声情報ＳＤ１を通話支援ＥＣＵ１１へ出力する。
第２マイク１４２は、例えば、後部座席に着座する乗員ＣＲの発する音声を取得し、第２音声情報ＳＤ２を生成する。第２マイク１４２は、例えば、後部座席に向けて、助手席に配置される。第２マイク１４２は、第２音声情報ＳＤ２を通話支援ＥＣＵ１１へ出力する。
マイク１４は、「音声取得装置」の一例に対応する。
第１マイク１４１は、例えば、助手席に着座する乗員ＣＲの発する音声を取得し、第１音声情報ＳＤ１を生成する。第１マイク１４１は、例えば、車両のダッシュボードに配置される。第１マイク１４１は、第１音声情報ＳＤ１を通話支援ＥＣＵ１１へ出力する。
第２マイク１４２は、例えば、後部座席に着座する乗員ＣＲの発する音声を取得し、第２音声情報ＳＤ２を生成する。第２マイク１４２は、例えば、後部座席に向けて、助手席に配置される。第２マイク１４２は、第２音声情報ＳＤ２を通話支援ＥＣＵ１１へ出力する。
マイク１４は、「音声取得装置」の一例に対応する。
【0013】
音響機器２は、例えば、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）プレイヤと、アンプと、を備える。アンプは、ＣＤプレイヤから出力された音声信号を増幅して、スピーカ３に対して、音声信号ＳＧを出力する。
スピーカ３は、音声信号ＳＧに対応する音声を出力する。
スピーカ３は、音声信号ＳＧに対応する音声を出力する。
【0014】
スピーカ３は、例えば、第１スピーカ３１、第２スピーカ３２、第３スピーカ３３、及び第４スピーカ３４を含む。第１スピーカ３１は、運転席の右側のドアに配置される。第２スピーカ３２は、助手席の左側のドアに配置される。第３スピーカ３３は、後部座席の右側のドアに配置される。第４スピーカ３４は、後部座席の左側のドアに配置される。
【0015】
空調機器４は、車両の室内の空気を調和する。空調機器４は、例えば、車両の室内の暖房、及び冷房を行う。空調機器４は、ファン４１を備える。ファン４１は、空気調和後の空気を室内へ送出する。
【0016】
窓開閉制御ＥＣＵ５は、車両のドアに配置された窓ＷＤの開閉を制御する。窓ＷＤは、例えば、第１窓ＷＤ１、第２窓ＷＤ２、第３窓ＷＤ３、及び第４窓ＷＤ４を含む。第１窓ＷＤ１は、運転席の右側のドアに配置される。第２窓ＷＤ２は、助手席の左側のドアに配置される。第３窓ＷＤ３は、後部座席の右側のドアに配置される。第４窓ＷＤ４は、後部座席の左側のドアに配置される。
窓開閉制御ＥＣＵ５は、第１窓ＷＤ１、第２窓ＷＤ２、第３窓ＷＤ３、及び第４窓ＷＤ４の各々の開閉を駆動するモータを制御する。
窓開閉制御ＥＣＵ５は、第１窓ＷＤ１、第２窓ＷＤ２、第３窓ＷＤ３、及び第４窓ＷＤ４の各々の開閉を駆動するモータを制御する。
【0017】
通話開始判定ボタン６は、運転者に対して、乗員ＣＲのスマートフォンＳＰによる通話が開始されたか否かを判定させるボタンである。通話開始判定ボタン６は、例えば、インストルメントパネル、又はその周辺に配置される。通話開始判定ボタン６は、例えば、プッシュボタンであって、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）を備える。
例えば、運転者に対して乗員ＣＲのスマートフォンＳＰによる通話が開始されたか否かを判定させる場合には、通話支援ＥＣＵ１１は、ＬＥＤを点滅させる。運転者は、乗員ＣＲのスマートフォンＳＰによる通話が開始されたと判断した場合には、通話開始判定ボタン６を押下する。通話開始判定ボタン６が押下された場合には、通話支援ＥＣＵ１１は、ＬＥＤを点灯させる。通話開始判定ボタン６が押下されない場合には、通話支援ＥＣＵ１１は、ＬＥＤの点滅を開始してから所定時間経過後に、ＬＥＤを消灯する。所定時間は、例えば、３分である。
例えば、運転者に対して乗員ＣＲのスマートフォンＳＰによる通話が開始されたか否かを判定させる場合には、通話支援ＥＣＵ１１は、ＬＥＤを点滅させる。運転者は、乗員ＣＲのスマートフォンＳＰによる通話が開始されたと判断した場合には、通話開始判定ボタン６を押下する。通話開始判定ボタン６が押下された場合には、通話支援ＥＣＵ１１は、ＬＥＤを点灯させる。通話開始判定ボタン６が押下されない場合には、通話支援ＥＣＵ１１は、ＬＥＤの点滅を開始してから所定時間経過後に、ＬＥＤを消灯する。所定時間は、例えば、３分である。
【0018】
通話支援ＥＣＵ１１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＭＰＵ（Ｍｉｃｒｏ－Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等のプロセッサ１１Ａと、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等のメモリ１１Ｂと、を備える。
通話支援ＥＣＵ１１は、これらの装置の他に、センサ類や周辺機器等を接続するためのインターフェース回路、車載ネットワークを介して他の車載装置と通信する車載ネットワーク通信回路等を備える。
メモリ１１Ｂは、制御プログラムを記憶する。
通話支援ＥＣＵ１１は、これらの装置の他に、センサ類や周辺機器等を接続するためのインターフェース回路、車載ネットワークを介して他の車載装置と通信する車載ネットワーク通信回路等を備える。
メモリ１１Ｂは、制御プログラムを記憶する。
【0019】
通話支援ＥＣＵ１１は、画像取得部１１１と、音声取得部１１２と、除外部１１３と、距離算出部１１４と、動作判定部１１５と、音声判定部１１６と、通話判定部１１７と、通知部１１８と、通話支援部１１９とを備える。
具体的には、通話支援ＥＣＵ１１のプロセッサ１１Ａが、メモリ１１Ｂに記憶された制御プログラムを実行することによって、画像取得部１１１、音声取得部１１２、除外部１１３、距離算出部１１４、動作判定部１１５、音声判定部１１６、通話判定部１１７、通知部１１８、及び通話支援部１１９として機能する。
具体的には、通話支援ＥＣＵ１１のプロセッサ１１Ａが、メモリ１１Ｂに記憶された制御プログラムを実行することによって、画像取得部１１１、音声取得部１１２、除外部１１３、距離算出部１１４、動作判定部１１５、音声判定部１１６、通話判定部１１７、通知部１１８、及び通話支援部１１９として機能する。
【0020】
画像取得部１１１は、第１カメラ１３１及び第２カメラ１３２の各々から第１画像情報ＰＣ１及び第２画像情報ＰＣ２を取得する。第１画像情報ＰＣ１は、助手席に着座する乗員ＣＲの画像を示す。第２画像情報ＰＣ２は、後部座席に着座する乗員ＣＲの画像を示す。
本実施形態では、画像取得部１１１は、車両が走行中（すなわち、走行速度が所定速度以上）である場合に、第１カメラ１３１及び第２カメラ１３２の各々に乗員ＣＲの画像を撮像させ、第１画像情報ＰＣ１及び第２画像情報ＰＣ２を生成させる。また、画像取得部１１１は、第１カメラ１３１及び第２カメラ１３２の各々によって生成された第１画像情報ＰＣ１及び第２画像情報ＰＣ２を取得する。所定速度は、例えば、５ｋｍ／時である。
本実施形態では、画像取得部１１１は、車両が走行中（すなわち、走行速度が所定速度以上）である場合に、第１カメラ１３１及び第２カメラ１３２の各々に乗員ＣＲの画像を撮像させ、第１画像情報ＰＣ１及び第２画像情報ＰＣ２を生成させる。また、画像取得部１１１は、第１カメラ１３１及び第２カメラ１３２の各々によって生成された第１画像情報ＰＣ１及び第２画像情報ＰＣ２を取得する。所定速度は、例えば、５ｋｍ／時である。
【0021】
音声取得部１１２は、第１マイク１４１及び第２マイク１４２の各々から第１音声情報ＳＤ１及び第２音声情報ＳＤ２を取得する。第１音声情報ＳＤ１は、助手席に着座する乗員ＣＲの発する音声を示す。第２音声情報ＳＤ２は、後部座席に着座する乗員ＣＲの発する音声を示す。
本実施形態では、音声取得部１１２は、車両が走行中（すなわち、走行速度が所定速度以上）である場合に、第１マイク１４１及び第２マイク１４２の各々に乗員ＣＲの音声を取得させ、第１音声情報ＳＤ１及び第２音声情報ＳＤ２を生成させる。また、音声取得部１１２は、第１マイク１４１及び第２マイク１４２の各々によって生成された第１音声情報ＳＤ１及び第２音声情報ＳＤ２を取得する。
本実施形態では、音声取得部１１２は、車両が走行中（すなわち、走行速度が所定速度以上）である場合に、第１マイク１４１及び第２マイク１４２の各々に乗員ＣＲの音声を取得させ、第１音声情報ＳＤ１及び第２音声情報ＳＤ２を生成させる。また、音声取得部１１２は、第１マイク１４１及び第２マイク１４２の各々によって生成された第１音声情報ＳＤ１及び第２音声情報ＳＤ２を取得する。
【0022】
除外部１１３は、音声情報ＳＤに含まれる機器音声情報ＳＤＡを音声情報ＳＤから除外することによって、音声情報ＳＤを補正する。機器音声情報ＳＤＡは、音響機器２から出力される音声を示す。
具体的には、除外部１１３は、第１音声情報ＳＤ１と機器音声情報ＳＤＡとに基づいて、第１音声情報ＳＤ１に含まれる機器音声情報ＳＤＡ１を算出する。機器音声情報ＳＤＡ１は、音響機器２から出力される音声に対応する。そして、除外部１１３は、機器音声情報ＳＤＡ１を第１音声情報ＳＤ１から除外することによって、第１音声情報ＳＤ１を補正する。
また、除外部１１３は、第２音声情報ＳＤ２と機器音声情報ＳＤＡとに基づいて、第２音声情報ＳＤ２に含まれる機器音声情報ＳＤＡ２を算出する。機器音声情報ＳＤＡ２は、音響機器２から出力される音声に対応する。そして、除外部１１３は、機器音声情報ＳＤＡ２を第２音声情報ＳＤ２から除外することによって、第２音声情報ＳＤ２を補正する。
すなわち、除外部１１３は、次の式（１）によって、第１音声情報ＳＤ１を補正し、次の式（２）によって、第２音声情報ＳＤ２を補正する。
ＳＤ１←ＳＤ１－ＳＤＡ１ （１）
ＳＤ２←ＳＤ２－ＳＤＡ２ （２）
具体的には、除外部１１３は、第１音声情報ＳＤ１と機器音声情報ＳＤＡとに基づいて、第１音声情報ＳＤ１に含まれる機器音声情報ＳＤＡ１を算出する。機器音声情報ＳＤＡ１は、音響機器２から出力される音声に対応する。そして、除外部１１３は、機器音声情報ＳＤＡ１を第１音声情報ＳＤ１から除外することによって、第１音声情報ＳＤ１を補正する。
また、除外部１１３は、第２音声情報ＳＤ２と機器音声情報ＳＤＡとに基づいて、第２音声情報ＳＤ２に含まれる機器音声情報ＳＤＡ２を算出する。機器音声情報ＳＤＡ２は、音響機器２から出力される音声に対応する。そして、除外部１１３は、機器音声情報ＳＤＡ２を第２音声情報ＳＤ２から除外することによって、第２音声情報ＳＤ２を補正する。
すなわち、除外部１１３は、次の式（１）によって、第１音声情報ＳＤ１を補正し、次の式（２）によって、第２音声情報ＳＤ２を補正する。
ＳＤ１←ＳＤ１－ＳＤＡ１ （１）
ＳＤ２←ＳＤ２－ＳＤＡ２ （２）
【0023】
距離算出部１１４は、第１画像情報ＰＣ１及び第２画像情報ＰＣ２に基づいて、乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。
具体的には、距離算出部１１４は、第１画像情報ＰＣ１に基づいて、助手席に着座する乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。また、距離算出部１１４は、第２画像情報ＰＣ２に基づいて、後部座席に着座する乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。
具体的には、距離算出部１１４は、第１画像情報ＰＣ１に基づいて、助手席に着座する乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。また、距離算出部１１４は、第２画像情報ＰＣ２に基づいて、後部座席に着座する乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。
【0024】
動作判定部１１５は、第１画像情報ＰＣ１及び第２画像情報ＰＣ２に基づいて、乗員ＣＲの口が通話のために動いているか否かを判定する。例えば、口が動いている場合であっても、飲食のために口が動いている場合には、動作判定部１１５は、乗員ＣＲの口が通話のために動いていないと判定する。
具体的には、動作判定部１１５は、第１画像情報ＰＣ１に基づいて、助手席に着座する乗員ＣＲの口が通話のために動いているか否かを判定する。また、動作判定部１１５は、第２画像情報ＰＣ２に基づいて、後部座席に着座する乗員ＣＲの口が通話のために動いているか否かを判定する。
具体的には、動作判定部１１５は、第１画像情報ＰＣ１に基づいて、助手席に着座する乗員ＣＲの口が通話のために動いているか否かを判定する。また、動作判定部１１５は、第２画像情報ＰＣ２に基づいて、後部座席に着座する乗員ＣＲの口が通話のために動いているか否かを判定する。
【0025】
音声判定部１１６は、除外部１１３による補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、を判定する。
また、音声判定部１１６は、第１音声情報ＳＤ１及び第２音声情報ＳＤ２のノイズレベルαを評価する。ノイズレベルαは、０～１の数字であって、ノイズが大きい程小さい値を示す。
「発話者の人数」とは、乗員ＣＲのうちの発話している者の人数である。
「特定の文言」とは、電話での通話の際に発せられる特徴的な文言である。特定の文言は、例えば、「もしもし」、「こんにちは」等を含む。
なお、発信音、着信音、及び特定の文言は、通話支援ＥＣＵ１１のメモリ１１Ｂに予め記憶されている。
ノイズレベルαについては、図２を参照して更に説明する。
また、音声判定部１１６は、第１音声情報ＳＤ１及び第２音声情報ＳＤ２のノイズレベルαを評価する。ノイズレベルαは、０～１の数字であって、ノイズが大きい程小さい値を示す。
「発話者の人数」とは、乗員ＣＲのうちの発話している者の人数である。
「特定の文言」とは、電話での通話の際に発せられる特徴的な文言である。特定の文言は、例えば、「もしもし」、「こんにちは」等を含む。
なお、発信音、着信音、及び特定の文言は、通話支援ＥＣＵ１１のメモリ１１Ｂに予め記憶されている。
ノイズレベルαについては、図２を参照して更に説明する。
【0026】
通話判定部１１７は、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。
具体的には、通話判定部１１７は、距離算出部１１４の算出結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。また、通話判定部１１７は、動作判定部１１５の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。また、通話判定部１１７は、音声判定部１１６の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。
通話判定部１１７の処理については、図２を参照して更に説明する。
具体的には、通話判定部１１７は、距離算出部１１４の算出結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。また、通話判定部１１７は、動作判定部１１５の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。また、通話判定部１１７は、音声判定部１１６の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。
通話判定部１１７の処理については、図２を参照して更に説明する。
【0027】
通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、車両の運転者ＤＶに対して、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を通知する。
通知部１１８は、例えば、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、通話開始判定ボタン６のＬＥＤを点滅させる。そして、通知部１１８は、通話開始判定ボタン６が押下された場合に、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、通話開始判定ボタン６のＬＥＤを点灯させる。通話開始判定ボタン６が押下されない場合には、通知部１１８は、ＬＥＤの点滅を開始してから所定時間経過後に、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、ＬＥＤを消灯する。
通知部１１８は、例えば、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、通話開始判定ボタン６のＬＥＤを点滅させる。そして、通知部１１８は、通話開始判定ボタン６が押下された場合に、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、通話開始判定ボタン６のＬＥＤを点灯させる。通話開始判定ボタン６が押下されない場合には、通知部１１８は、ＬＥＤの点滅を開始してから所定時間経過後に、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、ＬＥＤを消灯する。
【0028】
通話支援部１１９は、通話判定部１１７の判定結果に応じて、乗員ＣＲの通話を支援する。
具体的には、通話判定部１１７によって乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定された場合に、通話支援部１１９は、乗員ＣＲの通話の妨げとなる音を低減する通話支援処理を実行する。
「通話支援処理」は、車両に配置された音響機器２から出力される音量を低減する処理、車両に配置された空調機器４のファン４１の回転速度を低減する処理、及び、車両に配置された窓ＷＤを閉める処理を含む。
車両に配置された窓ＷＤを閉める処理は、通話支援部１１９が、窓開閉制御ＥＣＵ５に対して窓ＷＤを閉める旨を指示することによって実行される。
具体的には、通話判定部１１７によって乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定された場合に、通話支援部１１９は、乗員ＣＲの通話の妨げとなる音を低減する通話支援処理を実行する。
「通話支援処理」は、車両に配置された音響機器２から出力される音量を低減する処理、車両に配置された空調機器４のファン４１の回転速度を低減する処理、及び、車両に配置された窓ＷＤを閉める処理を含む。
車両に配置された窓ＷＤを閉める処理は、通話支援部１１９が、窓開閉制御ＥＣＵ５に対して窓ＷＤを閉める旨を指示することによって実行される。
【0029】
更に具体的には、通話判定部１１７によって乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定された場合に、通話支援部１１９は、以下の処理を実行する。すなわち、通話支援部１１９は、音響機器２から出力される音声の音量を低減する旨の指示を音響機器２に対して出力する。また、通話支援部１１９は、空調機器４のファン４１の回転速度を低減する旨の指示を空調機器４に対して出力する。また、通話支援部１１９は、窓開閉制御ＥＣＵ５に対して窓ＷＤを閉める旨の指示を出力する。
【0030】
次に、図２を参照して、通話判定部１１７の判定方法について説明する。図２は、通話判定部１１７の判定方法の一例を示す図表である。
図２には、距離評点情報１２１、動作評点情報１２２、人数評点情報１２３、発信音評点情報１２４、着信音評点情報１２５、文言評点情報１２６、及び総合評点情報１２７を示す。図２に示す距離評点情報１２１、動作評点情報１２２、人数評点情報１２３、発信音評点情報１２４、着信音評点情報１２５、文言評点情報１２６、及び総合評点情報１２７は、通話支援ＥＣＵ１１のメモリ１１Ｂに予め記憶される。
図２には、距離評点情報１２１、動作評点情報１２２、人数評点情報１２３、発信音評点情報１２４、着信音評点情報１２５、文言評点情報１２６、及び総合評点情報１２７を示す。図２に示す距離評点情報１２１、動作評点情報１２２、人数評点情報１２３、発信音評点情報１２４、着信音評点情報１２５、文言評点情報１２６、及び総合評点情報１２７は、通話支援ＥＣＵ１１のメモリ１１Ｂに予め記憶される。
【0031】
距離評点情報１２１は、距離算出部１１４が算出した距離Ｌと、距離評点Ｘ１１との関係を示す。距離Ｌが「０」である場合、すなわち、乗員ＣＲの耳とスマートフォンＳＰとが接触している場合には、通話判定部１１７によって、距離評点Ｘ１１が「５」に設定される。距離Ｌが「０」より大であり、且つ、所定距離以下である場合、すなわち、乗員ＣＲの耳とスマートフォンＳＰとが近接している場合には、通話判定部１１７によって、距離評点Ｘ１１が「３」に設定される。所定距離は、例えば、３０ｃｍである。距離Ｌが所定距離より大である場合、すなわち、乗員ＣＲの耳とスマートフォンＳＰとが離間している場合には、通話判定部１１７によって、距離評点Ｘ１１が「０」に設定される。
【0032】
動作評点情報１２２は、動作判定部１１５の判定結果、すなわち、乗員ＣＲの口が通話のために動いているか否かと、動作評点Ｘ１２との関係を示す。乗員ＣＲの口が通話のために動いていると動作判定部１１５が判定した場合には、通話判定部１１７によって、動作評点Ｘ１２が「３」に設定される。乗員ＣＲの口が通話のために動いていないと動作判定部１１５が判定した場合には、通話判定部１１７によって、動作評点Ｘ１２が「０」に設定される。
【0033】
人数評点情報１２３は、音声判定部１１６の第１の判定結果、すなわち、発話者の人数と、人数評点Ｘ２１との関係を示す。発話者が居ないと音声判定部１１６が判定した場合には、通話判定部１１７によって、人数評点Ｘ２１が「０」に設定される。発話者が一人であると音声判定部１１６が判定した場合には、通話判定部１１７によって、人数評点Ｘ２１が「３」に設定される。発話者が二人であると音声判定部１１６が判定した場合には、通話判定部１１７によって、人数評点Ｘ２１が「２」に設定される。発話者が三人であるあると音声判定部１１６が判定した場合には、人数評点Ｘ２１が「１」に設定される。
【0034】
発信音評点情報１２４は、音声判定部１１６の第２の判定結果、すなわち、スマートフォンＳＰの発信音の有無と、発信音評点Ｘ２２との関係を示す。スマートフォンＳＰの発信音が有ると音声判定部１１６が判定した場合には、通話判定部１１７によって、発信音評点Ｘ２２が「１」に設定される。スマートフォンＳＰの発信音が無いと音声判定部１１６が判定した場合には、通話判定部１１７によって、発信音評点Ｘ２２が「０」に設定される。
【0035】
着信音評点情報１２５は、音声判定部１１６の第３の判定結果、すなわち、スマートフォンＳＰの着信音の有無と、着信音評点Ｘ２３との関係を示す。スマートフォンＳＰの着信音が有ると音声判定部１１６が判定した場合には、通話判定部１１７によって、着信音評点Ｘ２３が「１」に設定される。スマートフォンＳＰの着信音が無いと音声判定部１１６が判定した場合には、通話判定部１１７によって、着信音評点Ｘ２３が「０」に設定される。
【0036】
文言評点情報１２６は、音声判定部１１６の第４の判定結果、すなわち、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無と、文言評点Ｘ２４との関係を示す。特定の文言の発話が有ると音声判定部１１６が判定した場合には、通話判定部１１７によって、文言評点Ｘ２４が「５」に設定される。特定の文言の発話が無いと音声判定部１１６が判定した場合には、通話判定部１１７によって、文言評点Ｘ２４が「０」に設定される。
【0037】
総合評点情報１２７は、総合評点Ｘの値と、通話判定部１１７の判定結果との関係を示す。総合評点Ｘは、次の式（３）で求められる。総合評点Ｘは、乗員ＣＲがスマートフォンＳＰによる通話を開始した可能性の高さを示す。
Ｘ＝（Ｘ１１＋Ｘ１２）＋（Ｘ２１＋Ｘ２２＋Ｘ２３＋Ｘ２４）×α （３）
なお、ノイズレベルαは、第１音声情報ＳＤ１及び第２音声情報ＳＤ２のＳ／Ｎ比を示す。Ｓ／Ｎ比が大きい程、音声判定部１１６によって、ノイズレベルαは大きく設定される。
Ｘ＝（Ｘ１１＋Ｘ１２）＋（Ｘ２１＋Ｘ２２＋Ｘ２３＋Ｘ２４）×α （３）
なお、ノイズレベルαは、第１音声情報ＳＤ１及び第２音声情報ＳＤ２のＳ／Ｎ比を示す。Ｓ／Ｎ比が大きい程、音声判定部１１６によって、ノイズレベルαは大きく設定される。
【0038】
総合評点Ｘが第１閾値ＳＨ１以上である場合には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定する。第１閾値ＳＨ１は、例えば、「１２」である。総合評点Ｘが第１閾値ＳＨ１未満、且つ、第２閾値ＳＨ２以上である場合には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定不可と判定する。第２閾値ＳＨ２は、例えば、「５」である。総合評点Ｘが第２閾値ＳＨ２未満である場合には、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定する。
【0039】
次に、図３及び図４を参照して、通話支援ＥＣＵ１１の処理について説明する。図３及び図４は、通話支援ＥＣＵ１１の処理の一例を示すフローチャートである。
図３に示すように、まず、ステップＳ１０１において、通話支援ＥＣＵ１１は、車両が走行を開始したか否かを判定する。通話支援ＥＣＵ１１は、例えば、走行速度が５ｋｍ／時以上である場合に走行を開始したと判定する。
車両が走行を開始していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０１；ＮＯ）には、処理が待機状態になる。車両が走行を開始したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０１；ＹＥＳ）には、処理がステップＳ１０３へ進む。
そして、ステップＳ１０３において、通話支援ＥＣＵ１１は、例えば、シートベルトの装着情報に基づいて、乗員ＣＲが居るか否かを判定する。シートベルトの装着情報は、例えば、乗員ＣＲ用の３個のシートベルトにおいて、装着状態にあるシートベルトの有無を示す。装着状態にあるシートベルトがある場合には、乗員ＣＲが居ることを示す。装着状態にあるシートベルトがない場合には、乗員ＣＲが居ないことを示す。なお、通話支援ＥＣＵ１１が、シートに配置された圧力センサの検出結果に基づいて、乗員ＣＲが居るか否かを判定してもよい。
乗員ＣＲが居ないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０３；ＮＯ）には、処理が終了する。乗員ＣＲが居ると通話支援ＥＣＵ１１が判定した場合（ステップＳ１０３；ＹＥＳ）には、処理がステップＳ１０５へ進む。
図３に示すように、まず、ステップＳ１０１において、通話支援ＥＣＵ１１は、車両が走行を開始したか否かを判定する。通話支援ＥＣＵ１１は、例えば、走行速度が５ｋｍ／時以上である場合に走行を開始したと判定する。
車両が走行を開始していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０１；ＮＯ）には、処理が待機状態になる。車両が走行を開始したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０１；ＹＥＳ）には、処理がステップＳ１０３へ進む。
そして、ステップＳ１０３において、通話支援ＥＣＵ１１は、例えば、シートベルトの装着情報に基づいて、乗員ＣＲが居るか否かを判定する。シートベルトの装着情報は、例えば、乗員ＣＲ用の３個のシートベルトにおいて、装着状態にあるシートベルトの有無を示す。装着状態にあるシートベルトがある場合には、乗員ＣＲが居ることを示す。装着状態にあるシートベルトがない場合には、乗員ＣＲが居ないことを示す。なお、通話支援ＥＣＵ１１が、シートに配置された圧力センサの検出結果に基づいて、乗員ＣＲが居るか否かを判定してもよい。
乗員ＣＲが居ないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１０３；ＮＯ）には、処理が終了する。乗員ＣＲが居ると通話支援ＥＣＵ１１が判定した場合（ステップＳ１０３；ＹＥＳ）には、処理がステップＳ１０５へ進む。
【0040】
そして、ステップＳ１０５において、画像取得部１１１は、第１カメラ１３１及び第２カメラ１３２の各々から第１画像情報ＰＣ１及び第２画像情報ＰＣ２を取得する。
次に、ステップＳ１０７において、音声取得部１１２は、第１マイク１４１及び第２マイク１４２の各々から第１音声情報ＳＤ１及び第２音声情報ＳＤ２を取得する。
次に、ステップＳ１０９において、除外部１１３は、第１音声情報ＳＤ１、及び第２音声情報ＳＤ２の各々に含まれる機器音声情報ＳＤＡを第１音声情報ＳＤ１、及び第２音声情報ＳＤ２の各々から除外することによって、第１音声情報ＳＤ１、及び第２音声情報ＳＤ２を補正する。機器音声情報ＳＤＡは、音響機器２から出力される音声に対応する。
次に、ステップＳ１１１において、距離算出部１１４は、第１画像情報ＰＣ１及び第２画像情報ＰＣ２に基づいて、乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。
次に、ステップＳ１１３において、通話判定部１１７は、距離Ｌと、図２に示す距離評点情報１２１とに基づいて、距離評点Ｘ１１を算出する。
次に、ステップＳ１０７において、音声取得部１１２は、第１マイク１４１及び第２マイク１４２の各々から第１音声情報ＳＤ１及び第２音声情報ＳＤ２を取得する。
次に、ステップＳ１０９において、除外部１１３は、第１音声情報ＳＤ１、及び第２音声情報ＳＤ２の各々に含まれる機器音声情報ＳＤＡを第１音声情報ＳＤ１、及び第２音声情報ＳＤ２の各々から除外することによって、第１音声情報ＳＤ１、及び第２音声情報ＳＤ２を補正する。機器音声情報ＳＤＡは、音響機器２から出力される音声に対応する。
次に、ステップＳ１１１において、距離算出部１１４は、第１画像情報ＰＣ１及び第２画像情報ＰＣ２に基づいて、乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する。
次に、ステップＳ１１３において、通話判定部１１７は、距離Ｌと、図２に示す距離評点情報１２１とに基づいて、距離評点Ｘ１１を算出する。
【0041】
次に、ステップＳ１１５において、動作判定部１１５は、第１画像情報ＰＣ１及び第２画像情報ＰＣ２に基づいて、乗員ＣＲの口が通話のために動いているか否かを判定する。
次に、ステップＳ１１７において、通話判定部１１７は、動作判定部１１５の判定結果と、図２に示す動作評点情報１２２とに基づいて、動作評点Ｘ１２を算出する。
次に、ステップＳ１１９において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、発話者の人数を判定する。
次に、ステップＳ１２１において、通話判定部１１７は、発話者の人数と、図２に示す人数評点情報１２３とに基づいて、人数評点Ｘ２１を算出する。
次に、ステップＳ１１７において、通話判定部１１７は、動作判定部１１５の判定結果と、図２に示す動作評点情報１２２とに基づいて、動作評点Ｘ１２を算出する。
次に、ステップＳ１１９において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、発話者の人数を判定する。
次に、ステップＳ１２１において、通話判定部１１７は、発話者の人数と、図２に示す人数評点情報１２３とに基づいて、人数評点Ｘ２１を算出する。
【0042】
次に、図４に示すように、ステップＳ１２３において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、スマートフォンＳＰの発信音の有無を判定する。
次に、ステップＳ１２５において、通話判定部１１７は、発信音の有無と、図２に示す発信音評点情報１２４とに基づいて、発信音評点Ｘ２２を算出する。
次に、ステップＳ１２７において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、スマートフォンＳＰの着信音の有無を判定する。
次に、ステップＳ１２９において、通話判定部１１７は、着信音の有無と、図２に示す着信音評点情報１２５とに基づいて、着信音評点Ｘ２３を算出する。
次に、ステップＳ１２５において、通話判定部１１７は、発信音の有無と、図２に示す発信音評点情報１２４とに基づいて、発信音評点Ｘ２２を算出する。
次に、ステップＳ１２７において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、スマートフォンＳＰの着信音の有無を判定する。
次に、ステップＳ１２９において、通話判定部１１７は、着信音の有無と、図２に示す着信音評点情報１２５とに基づいて、着信音評点Ｘ２３を算出する。
【0043】
次に、ステップＳ１３１において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２に基づいて、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無を判定する。
次に、ステップＳ１３３において、通話判定部１１７は、特定の文言の発話の有無と、図２に示す文言評点情報１２６とに基づいて、文言評点Ｘ２４を算出する。
次に、ステップＳ１３５において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２のノイズレベルαを評価する。
次に、ステップＳ１３７において、通話判定部１１７は、上記の式（３）によって、総合評点Ｘを算出する。
次に、ステップＳ１３３において、通話判定部１１７は、特定の文言の発話の有無と、図２に示す文言評点情報１２６とに基づいて、文言評点Ｘ２４を算出する。
次に、ステップＳ１３５において、音声判定部１１６は、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２のノイズレベルαを評価する。
次に、ステップＳ１３７において、通話判定部１１７は、上記の式（３）によって、総合評点Ｘを算出する。
【0044】
次に、ステップＳ１３９において、通話判定部１１７は、総合評点Ｘが第１閾値ＳＨ１以上であるか否かを判定する。第１閾値ＳＨ１は、例えば「１２」である。
総合評点Ｘが第１閾値ＳＨ１以上であると通話判定部１１７が判定した場合（ステップＳ１３９；ＹＥＳ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、処理がステップＳ１４７へ進む。総合評点Ｘが第１閾値ＳＨ１以上ではないと通話判定部１１７が判定した場合（ステップＳ１３９；ＮＯ）には、処理がステップＳ１４１へ進む。
そして、ステップＳ１４１において、通話判定部１１７は、総合評点Ｘが第２閾値ＳＨ２以上であるか否かを判定する。第２閾値ＳＨ２は、例えば「５」である。
総合評点Ｘが第２閾値ＳＨ２以上ではないと通話判定部１１７が判定した場合（ステップＳ１４１；ＮＯ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、処理がステップＳ１５１へ進む。総合評点Ｘが第２閾値ＳＨ２以上であると通話判定部１１７が判定した場合（ステップＳ１４１；ＹＥＳ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定不可であると判定し、処理がステップＳ１４３へ進む。
総合評点Ｘが第１閾値ＳＨ１以上であると通話判定部１１７が判定した場合（ステップＳ１３９；ＹＥＳ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、処理がステップＳ１４７へ進む。総合評点Ｘが第１閾値ＳＨ１以上ではないと通話判定部１１７が判定した場合（ステップＳ１３９；ＮＯ）には、処理がステップＳ１４１へ進む。
そして、ステップＳ１４１において、通話判定部１１７は、総合評点Ｘが第２閾値ＳＨ２以上であるか否かを判定する。第２閾値ＳＨ２は、例えば「５」である。
総合評点Ｘが第２閾値ＳＨ２以上ではないと通話判定部１１７が判定した場合（ステップＳ１４１；ＮＯ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、処理がステップＳ１５１へ進む。総合評点Ｘが第２閾値ＳＨ２以上であると通話判定部１１７が判定した場合（ステップＳ１４１；ＹＥＳ）には、通話判定部１１７は、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定不可であると判定し、処理がステップＳ１４３へ進む。
【0045】
そして、ステップＳ１４３において、通知部１１８は、車両の運転者ＤＶに対して、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を通知する。具体的には、通知部１１８は、通話開始判定ボタン６のＬＥＤを点滅させる。
次に、ステップＳ１４５において、通知部１１８は、所定時間内に通話開始判定ボタン６が押下されたか否かを判定する。所定時間は、例えば、例えば、３分である。
所定時間内に通話開始判定ボタン６が押下されていないと通知部１１８が判定した場合（ステップＳ１４５；ＮＯ）には、通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、処理がステップＳ１５１へ進む。所定時間内に通話開始判定ボタン６が押下されたと通知部１１８が判定した場合（ステップＳ１４５；ＹＥＳ）には、通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、処理がステップＳ１４７へ進む。
次に、ステップＳ１４５において、通知部１１８は、所定時間内に通話開始判定ボタン６が押下されたか否かを判定する。所定時間は、例えば、例えば、３分である。
所定時間内に通話開始判定ボタン６が押下されていないと通知部１１８が判定した場合（ステップＳ１４５；ＮＯ）には、通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始していないと判定し、処理がステップＳ１５１へ進む。所定時間内に通話開始判定ボタン６が押下されたと通知部１１８が判定した場合（ステップＳ１４５；ＹＥＳ）には、通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定し、処理がステップＳ１４７へ進む。
【0046】
そして、ステップＳ１４７において、通話支援部１１９は、乗員ＣＲの通話を支援する。具体的には、通話支援部１１９は、乗員ＣＲの通話の妨げとなる音を低減する通話支援処理を実行する。
次に、ステップＳ１４９において、通話支援ＥＣＵ１１は、第１画像情報ＰＣ１、及び第２画像情報ＰＣ２と、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２とに基づいて、乗員ＣＲの通話が終了したか否かを判定する。
乗員ＣＲの通話が終了していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１４９；ＮＯ）には、処理がステップＳ１４７に戻る。乗員ＣＲの通話が終了したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１４９；ＹＥＳ）には、処理がステップＳ１５１へ進む。
そして、ステップＳ１５１において、通話支援ＥＣＵ１１は、車両が走行を終了したか否かを判定する。通話支援ＥＣＵ１１は、例えば、車両が所定時間以上継続して停車している場合に、車両が走行を終了したと判定する。所定時間は、例えば、３分間である。
車両が走行を終了していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１５１；ＮＯ）には、処理が図３のステップＳ１０５に戻る。車両が走行を終了したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１５１；ＹＥＳ）には、処理が終了する。
次に、ステップＳ１４９において、通話支援ＥＣＵ１１は、第１画像情報ＰＣ１、及び第２画像情報ＰＣ２と、ステップＳ１０９における補正後の第１音声情報ＳＤ１及び第２音声情報ＳＤ２とに基づいて、乗員ＣＲの通話が終了したか否かを判定する。
乗員ＣＲの通話が終了していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１４９；ＮＯ）には、処理がステップＳ１４７に戻る。乗員ＣＲの通話が終了したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１４９；ＹＥＳ）には、処理がステップＳ１５１へ進む。
そして、ステップＳ１５１において、通話支援ＥＣＵ１１は、車両が走行を終了したか否かを判定する。通話支援ＥＣＵ１１は、例えば、車両が所定時間以上継続して停車している場合に、車両が走行を終了したと判定する。所定時間は、例えば、３分間である。
車両が走行を終了していないと通話支援ＥＣＵ１１が判定した場合（ステップＳ１５１；ＮＯ）には、処理が図３のステップＳ１０５に戻る。車両が走行を終了したと通話支援ＥＣＵ１１が判定した場合（ステップＳ１５１；ＹＥＳ）には、処理が終了する。
【0047】
図２～図４を参照して説明したように、通話判定部１１７は、距離評点Ｘ１１、動作評点Ｘ１２、人数評点Ｘ２１、発信音評点Ｘ２２、着信音評点Ｘ２３、文言評点Ｘ２４、及びノイズレベルαに基づいて、上述の式（３）によって総合評点Ｘを算出する。そして、通話判定部１１７は、総合評点Ｘの値に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0048】
また、図３及び図４を参照して説明したように、通話判定部１１７が、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定不可であると判定した場合には、通知部１１８は、車両の運転者ＤＶに対して、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を通知する。具体的には、通知部１１８は、通話開始判定ボタン６のＬＥＤを点滅させる。そして、通知部１１８は、所定時間内に通話開始判定ボタン６が押下された場合には、通知部１１８は、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定する。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを更に適正に判定できる。
【0049】
以上、図１～図４を参照して説明したように、本実施形態の通話支援ＥＣＵ１１は、車両に搭載され、乗員ＣＲのスマートフォンＳＰによる通話を支援する通話支援ＥＣＵ１１であって、車両に配置されたカメラ１３から乗員ＣＲの画像情報ＰＣを取得する画像取得部１１１と、車両に配置されたマイク１４から乗員ＣＲの音声情報ＳＤを取得する音声取得部１１２と、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する通話判定部１１７と、通話判定部１１７の判定結果に応じて、乗員ＣＲの通話を支援する通話支援部１１９と、を備える。
すなわち、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定し、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定した場合には、乗員ＣＲの通話を支援する。
よって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。したがって、乗員ＣＲの通話を適正に支援できる。
すなわち、画像情報ＰＣと音声情報ＳＤとに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定し、乗員ＣＲがスマートフォンＳＰによる通話を開始したと判定した場合には、乗員ＣＲの通話を支援する。
よって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。したがって、乗員ＣＲの通話を適正に支援できる。
【0050】
また、上記通話支援ＥＣＵ１１において、通話支援部１１９は、乗員ＣＲの通話の妨げとなる音を低減する通話支援処理を実行する。
よって、乗員ＣＲがスマートフォンＳＰによる通話を開始した場合に、乗員ＣＲの通話の妨げとなる音が低減される。したがって、乗員ＣＲの通話を適正に支援できる。
よって、乗員ＣＲがスマートフォンＳＰによる通話を開始した場合に、乗員ＣＲの通話の妨げとなる音が低減される。したがって、乗員ＣＲの通話を適正に支援できる。
【0051】
また、上記通話支援ＥＣＵ１１において、通話支援処理は、車両に配置された音響機器２から出力される音量を低減する処理、車両に配置された空調機器４のファン４１の回転速度を低減する処理、及び、車両に配置された窓ＷＤを閉める処理を含む。
よって、乗員ＣＲの通話の妨げとなる音を効果的に低減できる。したがって、乗員ＣＲの通話を適正に支援できる。
よって、乗員ＣＲの通話の妨げとなる音を効果的に低減できる。したがって、乗員ＣＲの通話を適正に支援できる。
【0052】
また、上記通話支援ＥＣＵ１１において、画像情報ＰＣに基づいて、乗員ＣＲの耳とスマートフォンＳＰとの距離Ｌを算出する距離算出部１１４を更に備え、通話判定部１１７は、距離算出部１１４の算出結果に基づいて、乗員ＣＲが前記スマートフォンＳＰによる通話を開始したか否かを判定する。
したがって、距離Ｌに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定するため、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
したがって、距離Ｌに基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定するため、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0053】
また、上記通話支援ＥＣＵ１１において、画像情報ＰＣに基づいて、乗員ＣＲの口が通話のために動いているか否かを判定する動作判定部１１５を更に備え、通話判定部１１７は、動作判定部１１５の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。
したがって、乗員ＣＲの口が通話のために動いているか否かの判定に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定するため、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
したがって、乗員ＣＲの口が通話のために動いているか否かの判定に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定するため、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0054】
また、上記通話支援ＥＣＵ１１において、音声情報ＳＤに基づいて、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、を判定する音声判定部１１６を更に備え、通話判定部１１７は、音声判定部１１６の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。
すなわち、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
すなわち、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、の判定結果に基づいて、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを判定する。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0055】
また、上記通話支援ＥＣＵ１１において、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、車両の運転者に対して、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を通知する通知部１１８を更に備える。
したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合であっても、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合であっても、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0056】
また、上記通話支援ＥＣＵ１１において、音声情報ＳＤに含まれる機器音声情報ＳＤＡを音声情報ＳＤから除外することによって、音声情報ＳＤＡを補正する除外部１１３を更に備える。機器音声情報ＳＤＡは、車両に配置された音響機器２から出力される音声に対応する。
よって、音声情報ＳＤに含まれる機器音声情報ＳＤＡを音声情報ＳＤから除外することによって、音声情報ＳＤを補正するため、音声情報ＳＤを適正に補正できる。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
よって、音声情報ＳＤに含まれる機器音声情報ＳＤＡを音声情報ＳＤから除外することによって、音声情報ＳＤを補正するため、音声情報ＳＤを適正に補正できる。したがって、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを適正に判定できる。
【0057】
上述した本実施形態は、あくまでも本発明の一実施形態を例示したものであって、本発明の主旨を逸脱しない範囲で任意に変形、及び応用が可能である。
例えば、図１は、本発明の理解を容易にするために、構成要素を主な処理内容に応じて分類して示した図であり、構成要素は、処理内容に応じて、更に多くの構成要素に分類することもできる。また、１つの構成要素が更に多くの処理を実行するように分類することもできる。
また、各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。
また、各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。
例えば、図１は、本発明の理解を容易にするために、構成要素を主な処理内容に応じて分類して示した図であり、構成要素は、処理内容に応じて、更に多くの構成要素に分類することもできる。また、１つの構成要素が更に多くの処理を実行するように分類することもできる。
また、各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。
また、各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。
【0058】
また、本実施形態では、「通話支援装置」が、通話支援ＥＣＵ１１である場合について説明したが、これに限定されない。「通話支援装置」が、プロセッサとメモリとを備えればよい。例えば、「通話支援装置」が、パーソナルコンピュータでもよいし、タブレット型コンピュータでもよいし、スマートフォンＳＰでもよい。
【0059】
また、本実施形態では、「携帯電話機器」がスマートフォンＳＰである場合について説明するがこれに限定されない。「携帯電話機器」が携帯電話でもよい。また、「携帯電話機器」が通話機能を有するノートパソコン、タブレット端末でもよい。
ノートパソコン、タブレット端末は、例えば、ＳＮＳを介して通話機能が実現される。また、ノートパソコン、タブレット端末は、例えば、Ｓｋｙｐｅ（登録商標）、Ｍｉｃｒｏｓｏｆｔ Ｔｅａｍｓ（登録商標）、ＺＯＯＭ（登録商標）等のアプリケーションソフトウェアを実行することによって、通話機能が実現される。
ノートパソコン、タブレット端末は、例えば、ＳＮＳを介して通話機能が実現される。また、ノートパソコン、タブレット端末は、例えば、Ｓｋｙｐｅ（登録商標）、Ｍｉｃｒｏｓｏｆｔ Ｔｅａｍｓ（登録商標）、ＺＯＯＭ（登録商標）等のアプリケーションソフトウェアを実行することによって、通話機能が実現される。
【0060】
また、本実施形態では、カメラ１３が、第１カメラ１３１、及び第２カメラ１３２で構成される場合について説明するが、これに限定されない。カメラ１３が、１台でもよいし、カメラ１３が、３台以上でもよい。
【0061】
また、本実施形態では、マイク１４が、第１マイク１４１、及び第２マイク１４２で構成される場合について説明するが、これに限定されない。マイク１４が、１台でもよいし、マイク１４が、３台以上でもよい。
【0062】
また、本実施形態では、「通話支援処理」が、車両に配置された音響機器２から出力される音量を低減する処理、車両に配置された空調機器４のファン４１の回転速度を低減する処理、及び、車両に配置された窓ＷＤを閉める処理を含む場合について説明するが、これに限定されない。「通話支援処理」が、車両に配置された音響機器２から出力される音量を低減する処理、車両に配置された空調機器４のファン４１の回転速度を低減する処理、及び、車両に配置された窓ＷＤを閉める処理、の少なくとも１つを含めばよい。
【0063】
また、本実施形態では、音声判定部１１６は、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、を判定する場合について説明したが、これに限定されない。音声判定部１１６は、発話者の人数、スマートフォンＳＰの発信音の有無、スマートフォンＳＰの着信音の有無、及び、スマートフォンＳＰによる通話を示唆する特定の文言の発話の有無、の少なくとも１つを判定すればよい。
【0064】
また、本実施形態では、通知部１１８が、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、通話開始判定ボタン６のＬＥＤを点滅させる場合について説明したが、これに限定されない。通知部１１８が、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かを通話判定部１１７が判定できない場合に、車両の運転者ＤＶに対して、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を通知すればよい。例えば、カーナビゲーションシステムのＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）に、乗員ＣＲがスマートフォンＳＰによる通話を開始したか否かの判定を促す旨を表示してもよい。
【0065】
また、本実施形態では、制御プログラムを通話支援ＥＣＵ１１のメモリ１１Ｂに記憶するが、制御プログラムを他の記録媒体、又はこの制御プログラムを伝送する伝送媒体の態様で構成することも可能である。
記録媒体には、磁気的、光学的記録媒体又は半導体メモリーデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリ、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。また、上記記録媒体は、通話支援ＥＣＵ１１が備えるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。
また、制御プログラムを、通話支援ＥＣＵ１１とネットワークを介して通信可能に接続されたサーバ装置から通話支援ＥＣＵ１１がダウンロードしてもよい。
記録媒体には、磁気的、光学的記録媒体又は半導体メモリーデバイスを用いることができる。具体的には、フレキシブルディスク、ＨＤＤ、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ、光磁気ディスク、フラッシュメモリ、カード型記録媒体等の可搬型、或いは固定式の記録媒体が挙げられる。また、上記記録媒体は、通話支援ＥＣＵ１１が備えるＲＡＭ、ＲＯＭ、ＨＤＤ等の不揮発性記憶装置であってもよい。
また、制御プログラムを、通話支援ＥＣＵ１１とネットワークを介して通信可能に接続されたサーバ装置から通話支援ＥＣＵ１１がダウンロードしてもよい。
【0066】
また、例えば、図３及び図４に示すフローチャートの処理単位は、通話支援ＥＣＵ１１の処理の理解を容易にするために、主な処理内容に応じて分割したものであり、処理単位の分割の仕方や名称によって、本発明が限定されることはない。通話支援ＥＣＵ１１の処理は、処理内容に応じて、更に多くの処理単位に分割してもよい。また、通話支援ＥＣＵ１１の処理は、１つの処理単位が更に多くの処理を含むように分割してもよい。
【符号の説明】
【0067】
１ 通話支援システム
１１ 通話支援ＥＣＵ（通話支援装置）
１１Ａ プロセッサ
１１Ｂ メモリ
１１１ 画像取得部
１１２ 音声取得部
１１３ 除外部
１１４ 距離算出部
１１５ 動作判定部
１１６ 音声判定部
１１７ 通話判定部
１１８ 通知部
１１９ 通話支援部
１２１ 距離評点情報
１２２ 動作評点情報
１２３ 人数評点情報
１２４ 発信音評点情報
１２５ 着信音評点情報
１２６ 文言評点情報
１２７ 総合評点情報
１３ カメラ（撮像装置）
１３１ 第１カメラ
１３２ 第２カメラ
１４ マイク（音声取得装置）
１４１ 第１マイク
１４２ 第２マイク
２ 音響機器
３ スピーカ
３１ 第１スピーカ
３２ 第２スピーカ
３３ 第３スピーカ
３４ 第４スピーカ
４ 空調機器
４１ ファン
５ 窓開閉制御ＥＣＵ
６ 通話開始判定ボタン
ＣＲ 乗員
Ｌ 距離
ＰＣ 画像情報
ＰＣ１ 第１画像情報
ＰＣ２ 第２画像情報
ＳＤ 音声情報
ＳＤ１ 第１音声情報
ＳＤ２ 第２音声情報
ＳＤＡ、ＳＤＡ１、ＳＤＡ２ 機器音声情報
ＳＧ 音声信号
ＳＨ１ 第１閾値
ＳＨ２ 第２閾値
ＳＰ スマートフォン
ＷＤ 窓
Ｘ 総合評点
Ｘ１１ 距離評点
Ｘ１２ 動作評点
Ｘ２１ 人数評点
Ｘ２２ 発信音評点
Ｘ２３ 着信音評点
Ｘ２４ 文言評点
α ノイズレベル
１１ 通話支援ＥＣＵ（通話支援装置）
１１Ａ プロセッサ
１１Ｂ メモリ
１１１ 画像取得部
１１２ 音声取得部
１１３ 除外部
１１４ 距離算出部
１１５ 動作判定部
１１６ 音声判定部
１１７ 通話判定部
１１８ 通知部
１１９ 通話支援部
１２１ 距離評点情報
１２２ 動作評点情報
１２３ 人数評点情報
１２４ 発信音評点情報
１２５ 着信音評点情報
１２６ 文言評点情報
１２７ 総合評点情報
１３ カメラ（撮像装置）
１３１ 第１カメラ
１３２ 第２カメラ
１４ マイク（音声取得装置）
１４１ 第１マイク
１４２ 第２マイク
２ 音響機器
３ スピーカ
３１ 第１スピーカ
３２ 第２スピーカ
３３ 第３スピーカ
３４ 第４スピーカ
４ 空調機器
４１ ファン
５ 窓開閉制御ＥＣＵ
６ 通話開始判定ボタン
ＣＲ 乗員
Ｌ 距離
ＰＣ 画像情報
ＰＣ１ 第１画像情報
ＰＣ２ 第２画像情報
ＳＤ 音声情報
ＳＤ１ 第１音声情報
ＳＤ２ 第２音声情報
ＳＤＡ、ＳＤＡ１、ＳＤＡ２ 機器音声情報
ＳＧ 音声信号
ＳＨ１ 第１閾値
ＳＨ２ 第２閾値
ＳＰ スマートフォン
ＷＤ 窓
Ｘ 総合評点
Ｘ１１ 距離評点
Ｘ１２ 動作評点
Ｘ２１ 人数評点
Ｘ２２ 発信音評点
Ｘ２３ 着信音評点
Ｘ２４ 文言評点
α ノイズレベル
【図1】
【図2】
【図3】
【図4】