ホーム > 特許ランキング > 日本電信電話株式会社
知財求人 - 知財ポータルサイト「IP Force」
▶ 日本電信電話株式会社の特許一覧 ▶ 学校法人慶應義塾の特許一覧
特許7578239多地点会議制御装置、信号変換装置、端末装置及びこれらのプログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-10-28
(45)【発行日】2024-11-06
(54)【発明の名称】多地点会議制御装置、信号変換装置、端末装置及びこれらのプログラム
(51)【国際特許分類】
H04M 3/56 20060101AFI20241029BHJP
H04N 7/15 20060101ALI20241029BHJP
【ＦＩ】
H04M3/56 C
H04N7/15
H04N7/15 120
【請求項の数】
17
(21)【出願番号】P 2021128208
(22)【出願日】2021-08-04
(65)【公開番号】P2023023045
(43)【公開日】2023-02-16
【審査請求日】2023-09-29
(73)【特許権者】
【識別番号】000004226
【氏名又は名称】日本電信電話株式会社
(73)【特許権者】
【識別番号】598121341
【氏名又は名称】慶應義塾
(74)【代理人】
【識別番号】100121706
【弁理士】
【氏名又は名称】中尾 直樹
(74)【代理人】
【識別番号】100128705
【弁理士】
【氏名又は名称】中村 幸雄
(74)【代理人】
【識別番号】100147773
【弁理士】
【氏名又は名称】義村 宗洋
(72)【発明者】
【氏名】渡邊 淳司
(72)【発明者】
【氏名】鎌本 優
(72)【発明者】
【氏名】駒▲崎▼ 掲
(72)【発明者】
【氏名】南澤 孝太
(72)【発明者】
【氏名】加藤 大弥
(72)【発明者】
【氏名】谷地 卓
【審査官】山中 実
(56)【参考文献】
【文献】特開２０２１－０４７７５６（ＪＰ，Ａ）
【文献】特開２００６－１９１４６０（ＪＰ，Ａ）
【文献】特開２０２２－０２４６４９（ＪＰ，Ａ）
【文献】国際公開第２０１９／２２５１００（ＷＯ，Ａ１）
【文献】特表２０１８－５０２４８６（ＪＰ，Ａ）
【文献】米国特許出願公開第２０２０／０１６８２０５（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０２１／００５９４２２（ＵＳ，Ａ１）
【文献】国際公開第２０２１／１３１７６７（ＷＯ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｍ ３／５６
Ｈ０４Ｎ ７／１５
(57)【特許請求の範囲】
【請求項1】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示でき振動を提示できない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項2】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの振動を提示でき音を提示できない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項3】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示でき振動を提示できない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの振動を提示でき音を提示できない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの音も振動も提示できる端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項4】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示し振動を提示しない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項5】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの振動を提示し音を提示しない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項6】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる多地点会議制御装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示し振動を提示しない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの振動を提示し音を提示しない端末装置に対する信号として、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とし、無信号または前記端末装置から前記通信路を介して入力された振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの音も振動も提示する端末装置に対する信号として、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号生成部
を含むことを特徴とする多地点会議制御装置。
【請求項7】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得て出力するものであり、
前記端末装置のうちの音を提示でき振動を提示できない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項8】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得て出力するものであり、
前記端末装置のうちの振動を提示でき音を提示できない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項9】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、音響伝送方式の信号を得て出力するものであり、
前記多地点会議システムは、前記音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示でき振動を提示できない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの振動を提示でき音を提示できない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの音も振動も提示できる端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項10】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得て出力するものであり、
前記端末装置のうちの音を提示し振動を提示しない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項11】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得て出力するものであり、
前記端末装置のうちの振動を提示し音を提示しない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得る会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項12】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システムにおいて、端末装置と多地点会議制御装置の間に配置される信号変換装置であって、前記多地点会議制御装置は、前記端末装置から前記通信路を介して入力された音響信号を前記音響信号用のチャネルの信号とし、前記端末装置から前記通信路を介して入力された振動信号を前記振動信号用のチャネルの信号とした、音響伝送方式の信号を得て出力するものであり、
前記多地点会議システムは、前記音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
前記端末装置のうちの音を提示し振動を提示しない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの振動を提示し音を提示しない端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とし、無信号または前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記音響信号用のチャネルの信号とした、前記音響伝送方式の信号を得、
前記端末装置のうちの音も振動も提示する端末装置に対する信号として、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる音響信号を前記音響信号用のチャネルの信号とし、前記多地点会議制御装置が出力した前記音響伝送方式の信号に含まれる振動信号を前記振動信号用のチャネルの信号とした、前記音響伝送方式の信号を得る
会議信号変換部
を含むことを特徴とする信号変換装置。
【請求項13】
複数の端末装置と、各端末装置と通信路を介して接続された多地点会議制御装置と、を含んで構成される多地点会議システム、に含まれる端末装置であって、前記多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの１チャネル以上を音響信号用のチャネルとして用い、前記音響伝送方式の前記複数チャネルのうちの前記音響信号用のチャネルとは異なる１チャネル以上を振動信号用のチャネルとして用いるものであり、
表示用の画面を備え、
前記表示用の画面に、
振動を提示せずに音を提示する状態と、音と振動の両方を提示する状態と、音を提示せずに振動を提示する状態と、の少なくとも３つの状態を含んだ巡回的な状態切り替えによる選択を、押下を受け付けた際に行うメディア群切り替えボタンと、
当該メディア群切り替えボタンの押下により何れかの状態が選択された際に、振動を提示せずに音を提示する状態であるか、音と振動の両方を提示する状態であるか、音を提示せずに振動を提示する状態であるか、が視認可能なように表示するメディア表示群と、
を含む提示信号選択ユーザインタフェース領域を表示する
ことを特徴とする端末装置。
【請求項14】
請求項１３に記載の端末装置であって、前記メディア表示群は、
音を提示する状態であるか否かをボタン（以下、「音用ボタン」という）の色または／および輝度で表示するものであり、
振動を提示する状態であるか否かをボタン（以下、「振動用ボタン」という）の色または／および輝度で表示するものであり、
前記端末装置は、
前記音用ボタンが押下されたときには、音を提示するか否かが切り替え、
前記振動用ボタンが押下されたときには、振動を提示するか否かが切り替える
ことを特徴とする端末装置。
【請求項15】
請求項１から６のいずれかに記載の多地点会議制御装置としてコンピュータを機能させるためのプログラム。
【請求項16】
請求項７から１２のいずれかに記載の信号変換装置としてコンピュータを機能させるためのプログラム。
【請求項17】
請求項１３または１４に記載の端末装置としてコンピュータを機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、通信を介して触覚を含む会議を実現する会議システムに関する。
【背景技術】
【0002】
インターネットなどの通信を介して音と映像を用いた多地点での会議を実現するシステムとしては、様々なものが実用化されており、代表的なものとしては非特許文献１の多地点会議システムがある。非特許文献１のような多地点会議システムでは、接続された各地点からの音響信号と映像信号と画面情報を選択して再生用の音響信号と映像信号と画面情報を生成し、生成した音響信号と映像信号と画面情報を接続された各地点で再生することで、通信を介して複数地点での会議を実現している。
【0003】
従来から伝送されている音と映像に加えて振動も通信を介して伝送する技術としては、非特許文献２の技術がある。非特許文献２には、通信回線に接続された各地点の端末装置が、当該地点の音と映像と振動のそれぞれを取得して音響信号と映像信号と振動信号として通信回線に出力し、通信回線から入力された音響信号と映像信号と振動信号のそれぞれから音と映像と振動を再生することで、通信を介して触覚を含む会議を実現する技術が開示されている。非特許文献２には、通信回線での伝送においては、音響信号の伝送用に用意された２チャネルのうちの１チャネルを音響信号の伝送に用い、音響信号の伝送用に用意された２チャネルのうちの音響信号の伝送に用いるチャネルではないほうの１チャンネルを振動信号の伝送に用いることが開示されている。
【先行技術文献】
【非特許文献】
【0004】
【文献】Ciscoおよび/またはその関連会社、"Cisco Webex"、[online］、［令和3年6月28日検索］、インターネット<URL: https://www.webex.com/ja/all-new-webex.html>
【文献】早川裕彦、外７名、「高実在感を伴う遠隔コミュニケーションのための双方向型視聴触覚メディア「公衆触覚伝話」の提案」、日本バーチャルリアリティ学会論文誌
【発明の概要】
【発明が解決しようとする課題】
【0005】
非特許文献１の多地点会議システムでは、音響信号と映像信号と画面情報を用いて複数地点での会議を実施することができるが、触覚を伝えるための振動信号の伝送は考慮されておらず、振動信号を含む複数地点での会議を実施することはできない。非特許文献１の多地点会議システムに非特許文献２の技術を適用すれば、振動信号を含む複数地点での会議を実施することはできる。しかしながら、非特許文献１の多地点会議システムに非特許文献２の技術を適用した複数地点での会議では、本来は音響信号用の複数チャネルのうちの１チャネルを振動信号用のチャネルとして用いることから、複数チャネルの音響信号を通常通りに再生する端末装置が用いられてしまった場合には、端末装置は振動信号用のチャネルの振動信号をスピーカに出力してしまうことになり、スピーカが想定外の音を発してしまったり、スピーカが故障してしまったり、スピーカが破壊されてしまったりするなどの不具合が発生する課題がある。本発明は、本来は音響信号用の複数チャネルのうちの１チャネル以上を振動信号用に用いる構成において、前述したような再生時の不具合の発生を抑えた複数地点での会議を実現可能とすることを目的とする。
【課題を解決するための手段】
【0006】
上述した課題を解決するために、本発明では、複数の端末装置と、通信路を介して各端末装置と接続された多地点会議制御装置と、を含んで構成され、本来は音響信号用の複数チャネルのうちの１チャネル以上を振動信号用に代用する多地点会議システムにおいて、端末装置に信号を入力する装置が、振動信号を提示できない端末装置または振動信号を提示しない端末装置向けには、振動信号用に代用したチャネルに振動信号を含まないように信号を変換し、音響信号を提示できない端末装置または音響信号を提示しない端末装置向けには、振動信号用に代用しない音響信号用のチャネルに音響信号を含まないように信号を変換する。
【0007】
また、本発明では、端末装置は、表示用の画面に、振動を提示せずに音を提示する状態と、音と振動の両方を提示する状態と、音を提示せずに振動を提示する状態と、の少なくとも３つの状態を含んだ巡回的な状態切り替えによる選択を、押下を受け付けた際に行うメディア群切り替えボタンと、メディア群切り替えボタンの押下により何れかの状態が選択された際に、振動を提示せずに音を提示する状態であるか、音と振動の両方を提示する状態であるか、振動を提示する状態であるか、が視認可能なように表示するメディア表示群と、を含む提示信号選択ユーザインタフェース領域を表示する。
【発明の効果】
【0008】
本発明によれば、本来は音響信号用の複数チャネルのうちの１チャネル以上を振動信号用に用いる構成において、再生時の不具合の発生を抑えた複数地点での会議を実現することができる。
【図面の簡単な説明】
【0009】
【発明を実施するための形態】
【0010】
＜参考形態＞
本発明の実施形態を説明する前に、本発明の前提となる多地点会議システムについて、参考形態として説明する。参考形態の多地点会議システムは、非特許文献１の多地点会議システムに非特許文献２の技術を適用したものであり、既存の音響伝送方式において音響信号用に用意された複数チャネルのうちの１チャネル以上を用いて、触覚として知覚されるための振動を表す信号（以下、「振動信号」という）を伝送し、映像信号と音響信号を多地点接続するために用意された多地点会議制御装置を用いて、映像信号と音響信号に加えて振動信号の多地点接続を行うことで、触覚情報も含む多地点会議の実現を可能とするものである。すなわち、参考形態の多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの予め定めた１チャネル以上を音響信号用のチャネルとして用い、所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネル以上を振動信号用のチャネルとして用いる。以下、参考形態の多地点会議システムと当該システムに含まれる各装置について説明する。
本発明の実施形態を説明する前に、本発明の前提となる多地点会議システムについて、参考形態として説明する。参考形態の多地点会議システムは、非特許文献１の多地点会議システムに非特許文献２の技術を適用したものであり、既存の音響伝送方式において音響信号用に用意された複数チャネルのうちの１チャネル以上を用いて、触覚として知覚されるための振動を表す信号（以下、「振動信号」という）を伝送し、映像信号と音響信号を多地点接続するために用意された多地点会議制御装置を用いて、映像信号と音響信号に加えて振動信号の多地点接続を行うことで、触覚情報も含む多地点会議の実現を可能とするものである。すなわち、参考形態の多地点会議システムは、所定の音響伝送方式の複数チャネルのうちの予め定めた１チャネル以上を音響信号用のチャネルとして用い、所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネル以上を振動信号用のチャネルとして用いる。以下、参考形態の多地点会議システムと当該システムに含まれる各装置について説明する。
【0011】
参考形態の多地点会議システム１０は、図１に例示する通り、多地点会議制御装置１００と端末装置２００－ｍを含む。多地点会議システム１０においては、Ｍは２以上の整数であり、ｍは１以上Ｍ以下の各整数である。多地点会議制御装置１００と各端末装置２００－ｍは、通信網の各伝送路３００－ｍを介して接続されている。通信網は、例えばインターネットであり、複数の装置の間で信号をほぼリアルタイムに相互に伝送できるものである。以下では、端末装置２００－ｍが配置されている地点を地点ｍとよぶ。なお、“－”を伴う参照番号は、数字と数字を“－”で繋げて表記したものであり、数字から数字を減算したものを表すわけではない。
【0012】
［端末装置２００－ｍ］
端末装置２００－ｍは、地点ｍに配置された端末装置であり、例えばPCと当該PCに接続された周辺機器で構成されるものであり、図２に例示する通り、送信側装置２１０－ｍと受信側装置２２０－ｍを含む。ここではまず送信側装置２１０－ｍについて説明する。受信側装置２２０－ｍについては多地点会議制御装置１００を説明した後に説明する。
端末装置２００－ｍは、地点ｍに配置された端末装置であり、例えばPCと当該PCに接続された周辺機器で構成されるものであり、図２に例示する通り、送信側装置２１０－ｍと受信側装置２２０－ｍを含む。ここではまず送信側装置２１０－ｍについて説明する。受信側装置２２０－ｍについては多地点会議制御装置１００を説明した後に説明する。
【0013】
［送信側装置２１０－ｍ］
送信側装置２１０－ｍは、図２に例示する通り、映像取得部２１１－ｍと音響取得部２１２－ｍと振動取得部２１３－ｍと送出信号生成部２１４－ｍを含む。送信側装置２１０－ｍは、所定の時間区間ごとに、図３に例示するステップＳ２１１、Ｓ２１２、Ｓ２１３、Ｓ２１４の各処理を行う。所定の時間区間とは、符号化の処理単位やパケット化の処理単位などにより決まる端末送出信号ＳＡ－ｍを生成する時間区間のことであり、例えば数十msの時間長の区間である。
送信側装置２１０－ｍは、図２に例示する通り、映像取得部２１１－ｍと音響取得部２１２－ｍと振動取得部２１３－ｍと送出信号生成部２１４－ｍを含む。送信側装置２１０－ｍは、所定の時間区間ごとに、図３に例示するステップＳ２１１、Ｓ２１２、Ｓ２１３、Ｓ２１４の各処理を行う。所定の時間区間とは、符号化の処理単位やパケット化の処理単位などにより決まる端末送出信号ＳＡ－ｍを生成する時間区間のことであり、例えば数十msの時間長の区間である。
【0014】
［映像取得部２１１－ｍ］
映像取得部２１１－ｍは、例えば、PCに内蔵されたカメラまたはPCに接続されたカメラである。映像取得部２１１－ｍは、地点ｍの映像を撮像して、撮像した映像に対応する映像信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１１）。
映像取得部２１１－ｍは、例えば、PCに内蔵されたカメラまたはPCに接続されたカメラである。映像取得部２１１－ｍは、地点ｍの映像を撮像して、撮像した映像に対応する映像信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１１）。
【0015】
［音響取得部２１２－ｍ］
音響取得部２１２－ｍは、例えば、PCに内蔵されたマイクロホンまたはPCに接続されたマイクロホンである。音響取得部２１２－ｍは、地点ｍで発せられた音を収音して、収音した音に対応する音響信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１２）。
音響取得部２１２－ｍは、例えば、PCに内蔵されたマイクロホンまたはPCに接続されたマイクロホンである。音響取得部２１２－ｍは、地点ｍで発せられた音を収音して、収音した音に対応する音響信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１２）。
【0016】
［振動取得部２１３－ｍ］
振動取得部２１３－ｍは、例えば、PCに接続された振動計測センサである。振動取得部２１３－ｍは、地点ｍで発せられた振動を取得して、取得した振動に対応する振動信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１３）。
振動取得部２１３－ｍは、例えば、PCに接続された振動計測センサである。振動取得部２１３－ｍは、地点ｍで発せられた振動を取得して、取得した振動に対応する振動信号を送出信号生成部２１４－ｍに対して出力する（ステップＳ２１３）。
【0017】
［送出信号生成部２１４－ｍ］
送出信号生成部２１４－ｍには、映像取得部２１１－ｍが出力した映像信号と、音響取得部２１２－ｍが出力した音響信号と、振動取得部２１３－ｍが出力した振動信号と、が入力される。送出信号生成部２１４－ｍは、入力された映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成し、入力された音響信号と入力された振動信号を含む複数チャネルに対応した所定の音響伝送方式のビット列である音響振動ビット列を生成し、生成した映像ビット列と生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを得て多地点会議制御装置１００に対して出力する（ステップＳ２１４）。
送出信号生成部２１４－ｍには、映像取得部２１１－ｍが出力した映像信号と、音響取得部２１２－ｍが出力した音響信号と、振動取得部２１３－ｍが出力した振動信号と、が入力される。送出信号生成部２１４－ｍは、入力された映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成し、入力された音響信号と入力された振動信号を含む複数チャネルに対応した所定の音響伝送方式のビット列である音響振動ビット列を生成し、生成した映像ビット列と生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを得て多地点会議制御装置１００に対して出力する（ステップＳ２１４）。
【0018】
所定の映像伝送方式とは、例えば、１チャネルの映像信号を伝送するための規格であり、MPEG-2 VisualやMPEG-4 Visualのようにロッシー符号化するものであってもよいし、ロスレス符号化するものであってもよいし、非圧縮であってもよい。送出信号生成部２１４－ｍは、例えば、入力された映像信号に対して所定の映像伝送方式に対応する符号化処理またはビット列への格納処理を行うことで映像ビット列を生成する。
【0019】
複数チャネルに対応した所定の音響伝送方式とは、例えば２チャネルステレオの音響信号や５．１チャネルサラウンドの音響信号を伝送するための規格であり、MPEG-4 AACのようにロッシー符号化するものであってもよいし、MPEG-4 ALSのようにロスレス符号化するものであってもよいし、非圧縮であってもよい。送出信号生成部２１４－ｍは、入力された音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めたチャネル（以下、「音響信号用のチャネル」ともいう）の信号とし、入力された振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネル以外の予め定めたチャネル（以下、「振動信号用のチャネル」ともいう）の信号とし、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成する。なお、音響振動ビット列は、上述したように実際には所定の音響伝送方式のビット列であるものの、音響信号と振動信号の両方を含むビット列であることから、本明細書では便宜的に「音響振動ビット列」とよんでいる。２チャネルステレオの音響伝送方式を用いる例と５．１チャネルサラウンドの音響伝送方式を用いる例を後述するが、要するに、送出信号生成部２１４－ｍは、所定の音響伝送方式の複数チャネルのうちの予め定めた１チャネル以上を音響信号用のチャネルとし、所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネル以上を振動信号用のチャネルとし、音響信号用のチャネルに音響信号を格納し、振動信号用のチャネルに振動信号を格納した端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力する。
【0020】
［２チャネルステレオの音響伝送方式を用いる例］
２チャネルステレオの音響伝送方式を用いる場合には、例えば、２チャネルのうちの予め定めた１チャネルである左チャネル（Ｌチャネル）を音響信号用のチャネルとし、２チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネルである右チャネル（Ｒチャネル）を振動信号用のチャネルとすればよい。すなわち、２チャネルステレオの音響伝送方式を用いる場合には、送出信号生成部２１４－ｍは、図４に例示するように、音響信号を左チャネルの信号とし、振動信号を右チャネルの信号とすればよい。
２チャネルステレオの音響伝送方式を用いる場合には、例えば、２チャネルのうちの予め定めた１チャネルである左チャネル（Ｌチャネル）を音響信号用のチャネルとし、２チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネルである右チャネル（Ｒチャネル）を振動信号用のチャネルとすればよい。すなわち、２チャネルステレオの音響伝送方式を用いる場合には、送出信号生成部２１４－ｍは、図４に例示するように、音響信号を左チャネルの信号とし、振動信号を右チャネルの信号とすればよい。
【0021】
２チャネルステレオの音響伝送方式を用いる場合には音響信号用のチャネル自体は１チャネルではあるが、音響取得部２１２－ｍは１個のマイクロホンであっても２個以上のマイクロホンであってもよい。すなわち、音響取得部２１２－ｍに含まれるマイクロホンの個数と音響信号用のチャネル数は同じであってもよいし異なっていてもよい。音響取得部２１２－ｍが１個のマイクロホンである場合には、送出信号生成部２１４－ｍは、入力された１個の音響信号をそのまま左チャネルの信号とすればよい。音響取得部２１２－ｍが２個以上のマイクロホンである場合には、例えば、送出信号生成部２１４－ｍは、入力された２個以上の音響信号を混合した信号を左チャネルの信号としてもよいし、入力された２個以上の音響信号から選択した信号を左チャネルの信号としてもよい。
【0022】
同様に、２チャネルステレオの音響伝送方式を用いる場合には振動信号用のチャネル自体は１チャネルではあるが、振動取得部２１３－ｍは１個の振動計測センサであっても２個以上の振動計測センサであってもよい。すなわち、振動取得部２１３－ｍに含まれる振動計測センサの個数と振動信号用のチャネル数は同じであってもよいし異なっていてもよい。振動取得部２１３－ｍが１個の振動計測センサである場合には、送出信号生成部２１４－ｍは、入力された１個の振動信号をそのまま右チャネルの信号とすればよい。振動取得部２１３－ｍが２個以上の振動計測センサである場合には、例えば、送出信号生成部２１４－ｍは、入力された２個以上の振動信号を混合した信号を右チャネルの信号としてもよいし、入力された２個以上の振動信号から選択した信号を右チャネルの信号としてもよい。
【0023】
［５．１チャネルサラウンドの音響伝送方式を用いる例］
５．１チャネルサラウンドの音響伝送方式を用いる場合には、例えば、６チャネルのうちの予め定めた２チャネルである左前チャネルと右前チャネルを音響信号用のチャネルとし、６チャネルのうちの音響信号用のチャネルとは異なる予め定めた４チャネルである正面チャネルと左後チャネルと右後チャネルと重低音チャネルを振動信号用のチャネルとすればよい。すなわち、５．１チャネルサラウンドの音響伝送方式を用いる場合には、図５に例示するように、送出信号生成部２１４－ｍは、左チャネルと右チャネルの２個の音響信号それぞれを左前チャネルと右前チャネルの信号とし、第１から第４の４個の振動信号それぞれを正面チャネルの信号と左後チャネルの信号と右後チャネルの信号と重低音チャネルの信号とすればよい。５．１チャネルサラウンドの音響伝送方式を用いる場合も、２チャネルステレオの音響伝送方式を用いる場合と同様に、音響取得部２１２－ｍに含まれるマイクロホンの個数と音響信号用のチャネル数は同じであってもよいし異なっていてもよいし、振動取得部２１３－ｍに含まれる振動計測センサの個数と振動信号用のチャネル数は同じであってもよいし異なっていてもよい。なお、送出信号生成部２１４－ｍは、音響信号用の複数のチャネルのうちの何れかのチャネルに信号を格納しないでもよいし、振動信号用の複数のチャネルのうちの何れかのチャネルに信号を格納しないでもよい。
５．１チャネルサラウンドの音響伝送方式を用いる場合には、例えば、６チャネルのうちの予め定めた２チャネルである左前チャネルと右前チャネルを音響信号用のチャネルとし、６チャネルのうちの音響信号用のチャネルとは異なる予め定めた４チャネルである正面チャネルと左後チャネルと右後チャネルと重低音チャネルを振動信号用のチャネルとすればよい。すなわち、５．１チャネルサラウンドの音響伝送方式を用いる場合には、図５に例示するように、送出信号生成部２１４－ｍは、左チャネルと右チャネルの２個の音響信号それぞれを左前チャネルと右前チャネルの信号とし、第１から第４の４個の振動信号それぞれを正面チャネルの信号と左後チャネルの信号と右後チャネルの信号と重低音チャネルの信号とすればよい。５．１チャネルサラウンドの音響伝送方式を用いる場合も、２チャネルステレオの音響伝送方式を用いる場合と同様に、音響取得部２１２－ｍに含まれるマイクロホンの個数と音響信号用のチャネル数は同じであってもよいし異なっていてもよいし、振動取得部２１３－ｍに含まれる振動計測センサの個数と振動信号用のチャネル数は同じであってもよいし異なっていてもよい。なお、送出信号生成部２１４－ｍは、音響信号用の複数のチャネルのうちの何れかのチャネルに信号を格納しないでもよいし、振動信号用の複数のチャネルのうちの何れかのチャネルに信号を格納しないでもよい。
【0024】
［映像の送出の有無］
送出信号生成部２１４－ｍが端末送出信号ＳＡ－ｍに映像ビット列を含めるのは必須ではない。例えば、送信側装置２１０－ｍが映像取得部２１１－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１１を行わずに、送出信号生成部２１４－ｍは、映像ビット列を含まない端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、送信側装置２１０－ｍが映像を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが映像を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「映像送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの映像送出ON/OFFスイッチが受け付けた入力に従って、映像ビット列を端末送出信号ＳＡ－ｍに含めるか否かの動作をするようにしてもよい。
送出信号生成部２１４－ｍが端末送出信号ＳＡ－ｍに映像ビット列を含めるのは必須ではない。例えば、送信側装置２１０－ｍが映像取得部２１１－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１１を行わずに、送出信号生成部２１４－ｍは、映像ビット列を含まない端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、送信側装置２１０－ｍが映像を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが映像を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「映像送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの映像送出ON/OFFスイッチが受け付けた入力に従って、映像ビット列を端末送出信号ＳＡ－ｍに含めるか否かの動作をするようにしてもよい。
【0025】
なお、スイッチは、端末装置２００－ｍに備えられたハードウェアによるスイッチであってもよいが、端末装置２００－ｍに内蔵されるか接続されたディスプレイ装置に表示される画面内に設けたソフトウェアによるスイッチとすればよく、端末装置２００－ｍに備えらえたマウスによって利用者に操作されるか、タッチスクリーンであるディスプレイ装置に対するタッチ操作で利用者に操作されるようにすればよい。このことは以降の各スイッチについても同様である。
【0026】
［音の送出の有無］
送出信号生成部２１４－ｍが音響振動ビット列に音響信号を含めるのは必須ではない。例えば、送信側装置２１０－ｍが音響取得部２１２－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１２を行わずに、送出信号生成部２１４－ｍは、入力された振動信号を含み音響信号を含まない音響振動ビット列を生成し、生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、送信側装置２１０－ｍが音を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが音を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「音響送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの音響送出ON/OFFスイッチが受け付けた入力に従って、音響信号を音響振動ビット列に含めるか否かの動作をするようにしてもよい。なお、送出信号生成部２１４－ｍは、音を送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めればよい。
送出信号生成部２１４－ｍが音響振動ビット列に音響信号を含めるのは必須ではない。例えば、送信側装置２１０－ｍが音響取得部２１２－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１２を行わずに、送出信号生成部２１４－ｍは、入力された振動信号を含み音響信号を含まない音響振動ビット列を生成し、生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、送信側装置２１０－ｍが音を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが音を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「音響送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの音響送出ON/OFFスイッチが受け付けた入力に従って、音響信号を音響振動ビット列に含めるか否かの動作をするようにしてもよい。なお、送出信号生成部２１４－ｍは、音を送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めればよい。
【0027】
［振動の送出の有無］
送出信号生成部２１４－ｍが音響振動ビット列に振動信号を含めるのは必須ではない。例えば、送信側装置２１０－ｍが振動取得部２１３－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１３を行わずに、送出信号生成部２１４－ｍは、入力された音響信号を含み振動信号を含まない音響振動ビット列を生成し、生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、送信側装置２１０－ｍが振動を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが振動を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「振動送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの振動送出ON/OFFスイッチが受け付けた入力に従って、振動信号を音響振動ビット列に含めるか否かの動作をするようにしてもよい。なお、送出信号生成部２１４－ｍは、振動を送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた振動信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めればよい。
送出信号生成部２１４－ｍが音響振動ビット列に振動信号を含めるのは必須ではない。例えば、送信側装置２１０－ｍが振動取得部２１３－ｍを備えずに、送信側装置２１０－ｍがステップＳ２１３を行わずに、送出信号生成部２１４－ｍは、入力された音響信号を含み振動信号を含まない音響振動ビット列を生成し、生成した音響振動ビット列を含む端末送出信号ＳＡ－ｍを多地点会議制御装置１００に対して出力するようにしてもよい。また例えば、送信側装置２１０－ｍが振動を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、送信側装置２１０－ｍが振動を送出するか否か、についての利用者による入力を受け付けるスイッチ（以下、「振動送出ON/OFFスイッチ」という）を含む送出信号選択部２１５－ｍを送信側装置２１０－ｍが備えるようにして、送出信号生成部２１４－ｍが、送出信号選択部２１５－ｍの振動送出ON/OFFスイッチが受け付けた入力に従って、振動信号を音響振動ビット列に含めるか否かの動作をするようにしてもよい。なお、送出信号生成部２１４－ｍは、振動を送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた振動信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めればよい。
【0028】
［音も振動も送出しない場合］
送出信号生成部２１４－ｍは、音も振動も送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルと所定の音響伝送方式の複数チャネルのうちの予め定めた振動信号用のチャネルの両方にオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めるようにしてもよいし、出力する端末送出信号ＳＡ－ｍに音響振動ビット列を含まないようにしてもよい。
送出信号生成部２１４－ｍは、音も振動も送出しない場合には、所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルと所定の音響伝送方式の複数チャネルのうちの予め定めた振動信号用のチャネルの両方にオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響振動ビット列を生成して、生成した音響振動ビット列を端末送出信号ＳＡ－ｍに含めるようにしてもよいし、出力する端末送出信号ＳＡ－ｍに音響振動ビット列を含まないようにしてもよい。
【0029】
［多地点会議制御装置１００］
多地点会議制御装置１００は、図６に例示する通り、会議信号生成部１１０を含む。多地点会議制御装置１００には、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。多地点会議制御装置１００は、所定の時間区間ごとに、図７に例示するステップＳ１１０の処理を行うことで端末向け信号ＳＢを得て出力する。
多地点会議制御装置１００は、図６に例示する通り、会議信号生成部１１０を含む。多地点会議制御装置１００には、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。多地点会議制御装置１００は、所定の時間区間ごとに、図７に例示するステップＳ１１０の処理を行うことで端末向け信号ＳＢを得て出力する。
【0030】
［会議信号生成部１１０］
会議信号生成部１１０には、端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。会議信号生成部１１０は、例えば、図８に示すステップＳ１１０－１からステップＳ１１０－６の各処理を行うことで、入力された端末送出信号ＳＡ－１～ＳＡ－Ｍから端末向け信号ＳＢを得て出力する（ステップＳ１１０）。
会議信号生成部１１０には、端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。会議信号生成部１１０は、例えば、図８に示すステップＳ１１０－１からステップＳ１１０－６の各処理を行うことで、入力された端末送出信号ＳＡ－１～ＳＡ－Ｍから端末向け信号ＳＢを得て出力する（ステップＳ１１０）。
【0031】
会議信号生成部１１０は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の映像ビット列に含まれる映像信号を含む出力用の映像信号を生成する（ステップＳ１１０－１）。会議信号生成部１１０は、例えば、非特許文献１の多地点会議システムと同様に、各地点の映像のサイズを縮小した縮小映像を得て、各地点の縮小映像を含む１つの映像を生成して、生成した映像に対応する映像信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍに映像ビット列が含まれない端末送出信号がある場合には、会議信号生成部１１０は、映像ビット列が含まれる端末送出信号のみを対象として、各地点の映像信号を含む出力用の映像信号を生成すればよい。会議信号生成部１１０は、ステップＳ１１０－１を行った後に、ステップＳ１１０－１で得た映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成する（ステップＳ１１０－２）。
【0032】
また、会議信号生成部１１０は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる音響信号を含む出力用の音響信号を生成する（ステップＳ１１０－３）。会議信号生成部１１０は、例えば、非特許文献１の多地点会議システムと同様に、各地点の音響信号を混合して１つの音響信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に音響信号が含まれない端末送出信号がある場合には、会議信号生成部１１０は、音響振動ビット列に音響信号が含まれる端末送出信号のみを対象として、各地点の音響信号を含む出力用の音響信号を生成すればよい。音響信号用のチャネルが複数個ある場合には、会議信号生成部１１０は、チャネルごとに、各地点の音響信号を含む出力用の音響信号を生成すればよい。
【0033】
また、会議信号生成部１１０は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる振動信号を含む出力用の振動信号を生成する（ステップＳ１１０－４）。会議信号生成部１１０は、例えば、各地点の振動信号を混合して１つの振動信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に振動信号が含まれない端末送出信号がある場合には、会議信号生成部１１０は、音響振動ビット列に振動信号が含まれる端末送出信号のみを対象として、各地点の振動信号を含む出力用の振動信号を生成すればよい。振動信号用のチャネルが複数個ある場合には、会議信号生成部１１０は、チャネルごとに、各地点の振動信号を含む出力用の振動信号を生成すればよい。
【0034】
会議信号生成部１１０は、ステップＳ１１０－３とＳ１１０－４を行った後に、ステップＳ１１０－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、ステップＳ１１０－４で得た振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響振動ビット列を生成する（ステップＳ１１０－５）。会議信号生成部１１０は、ステップＳ１１０－２とＳ１１０－５を行った後に、ステップＳ１１０－２で生成した映像ビット列とステップＳ１１０－５で生成した音響振動ビット列を含む端末向け信号ＳＢを得て、各端末装置に対して出力する、すなわち、端末装置２００－１～２００－Ｍのそれぞれに対して各伝送路３００－１～３００－Ｍを介して出力する（ステップＳ１１０－６）。
【0035】
会議信号生成部１１０は、何れの端末送出信号にも映像信号が含まれない場合には、ステップＳ１１０－１とステップＳ１１０－２を行わずに、ステップＳ１１０－５を行った後に、ステップＳ１１０－６として、ステップＳ１１０－５で生成した音響振動ビット列を含む端末向け信号ＳＢを得て各端末装置に対して出力すればよい。要するに、会議信号生成部１１０は、所定の音響伝送方式の複数チャネルのうちの予め定めた１チャネル以上である音響信号用のチャネルに、各地点から入力された音響信号に基づく音響信号を格納し、所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネル以上の振動信号用のチャネルに、各地点から入力された振動信号に基づく振動信号を格納した、端末向け信号ＳＢを各端末装置に対して出力する。
【0036】
［受信側装置２２０－ｍ］
受信側装置２２０－ｍは、図２に例示する通り、提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍとを含む。受信側装置２２０－ｍには、各伝送路３００－ｍを介して接続された多地点会議制御装置１００が出力した端末向け信号ＳＢが入力される。受信側装置２２０－ｍは、所定の時間区間ごとに、図９に例示するステップＳ２２４、Ｓ２２１、Ｓ２２２、Ｓ２２３の各処理を行う。
受信側装置２２０－ｍは、図２に例示する通り、提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍとを含む。受信側装置２２０－ｍには、各伝送路３００－ｍを介して接続された多地点会議制御装置１００が出力した端末向け信号ＳＢが入力される。受信側装置２２０－ｍは、所定の時間区間ごとに、図９に例示するステップＳ２２４、Ｓ２２１、Ｓ２２２、Ｓ２２３の各処理を行う。
【0037】
［提示信号生成部２２４－ｍ］
提示信号生成部２２４－ｍには端末向け信号ＳＢが入力される。提示信号生成部２２４－ｍは、端末向け信号ＳＢに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＢに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＢに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する（ステップＳ２２４）。
提示信号生成部２２４－ｍには端末向け信号ＳＢが入力される。提示信号生成部２２４－ｍは、端末向け信号ＳＢに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＢに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＢに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する（ステップＳ２２４）。
【0038】
［映像提示部２２１－ｍ］
映像提示部２２１－ｍは、例えば、PCに内蔵されたディスプレイ装置またはPCに接続されたディスプレイ装置である。映像提示部２２１－ｍには、提示信号生成部２２４－ｍが出力した映像信号が入力される。映像提示部２２１－ｍは、入力された映像信号に対応する映像を表示する、すなわち、映像を提示する（ステップＳ２２１）。
映像提示部２２１－ｍは、例えば、PCに内蔵されたディスプレイ装置またはPCに接続されたディスプレイ装置である。映像提示部２２１－ｍには、提示信号生成部２２４－ｍが出力した映像信号が入力される。映像提示部２２１－ｍは、入力された映像信号に対応する映像を表示する、すなわち、映像を提示する（ステップＳ２２１）。
【0039】
［音響提示部２２２－ｍ］
音響提示部２２２－ｍは、例えば、PCに内蔵されたスピーカまたはPCに接続されたスピーカである。音響提示部２２２－ｍには、提示信号生成部２２４－ｍが出力した音響信号が入力される。音響提示部２２２－ｍは、入力された音響信号に対応する音を発生する、すなわち、音を提示する（ステップＳ２２２）。
音響提示部２２２－ｍは、例えば、PCに内蔵されたスピーカまたはPCに接続されたスピーカである。音響提示部２２２－ｍには、提示信号生成部２２４－ｍが出力した音響信号が入力される。音響提示部２２２－ｍは、入力された音響信号に対応する音を発生する、すなわち、音を提示する（ステップＳ２２２）。
【0040】
［振動提示部２２３－ｍ］
振動提示部２２３－ｍは、例えば、PCに接続された振動子である。振動提示部２２３－ｍには、提示信号生成部２２４－ｍが出力した振動信号が入力される。振動提示部２２３－ｍは、入力された振動信号に対応する振動を発生する、すなわち、振動を提示する（ステップＳ２２３）。
振動提示部２２３－ｍは、例えば、PCに接続された振動子である。振動提示部２２３－ｍには、提示信号生成部２２４－ｍが出力した振動信号が入力される。振動提示部２２３－ｍは、入力された振動信号に対応する振動を発生する、すなわち、振動を提示する（ステップＳ２２３）。
【0041】
［映像の提示の有無］
受信側装置２２０－ｍが映像を提示するのは必須ではない。例えば、受信側装置２２０－ｍが映像提示部２２１－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから映像信号を得ずに、受信側装置２２０－ｍがステップＳ２２１を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが映像を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、受信側装置２２０－ｍが映像を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「映像提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの映像提示ON/OFFスイッチが受け付けた入力に従って、映像信号を出力するか否かの動作をするようにしてもよい。
受信側装置２２０－ｍが映像を提示するのは必須ではない。例えば、受信側装置２２０－ｍが映像提示部２２１－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから映像信号を得ずに、受信側装置２２０－ｍがステップＳ２２１を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが映像を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、受信側装置２２０－ｍが映像を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「映像提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの映像提示ON/OFFスイッチが受け付けた入力に従って、映像信号を出力するか否かの動作をするようにしてもよい。
【0042】
［音の提示の有無］
受信側装置２２０－ｍが音を提示するのは必須ではない。例えば、受信側装置２２０－ｍが音響提示部２２２－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから音響信号を得ずに、受信側装置２２０－ｍがステップＳ２２２を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが音を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、受信側装置２２０－ｍが音を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「音響提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの音響提示ON/OFFスイッチが受け付けた入力に従って、音響信号を出力するか否かの動作をするようにしてもよい。
受信側装置２２０－ｍが音を提示するのは必須ではない。例えば、受信側装置２２０－ｍが音響提示部２２２－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから音響信号を得ずに、受信側装置２２０－ｍがステップＳ２２２を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが音を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、受信側装置２２０－ｍが音を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「音響提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの音響提示ON/OFFスイッチが受け付けた入力に従って、音響信号を出力するか否かの動作をするようにしてもよい。
【0043】
［振動の提示の有無］
受信側装置２２０－ｍが振動を提示するのは必須ではない。例えば、受信側装置２２０－ｍが振動提示部２２３－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから振動信号を得ずに、受信側装置２２０－ｍがステップＳ２２３を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが振動を提示するか否か、を利用者が選択できるようにしてもよい。受信側装置２２０－ｍが振動を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「振動提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの振動提示ON/OFFスイッチが受け付けた入力に従って、振動信号を出力するか否かの動作をするようにしてもよい。
受信側装置２２０－ｍが振動を提示するのは必須ではない。例えば、受信側装置２２０－ｍが振動提示部２２３－ｍを備えずに、提示信号生成部２２４－ｍは端末向け信号ＳＢから振動信号を得ずに、受信側装置２２０－ｍがステップＳ２２３を行わないようにしてもよい。また例えば、受信側装置２２０－ｍが振動を提示するか否か、を利用者が選択できるようにしてもよい。受信側装置２２０－ｍが振動を提示するか否か、についての利用者による入力を受け付けるスイッチ（以下、「振動提示ON/OFFスイッチ」という）を含む提示信号選択部２２５－ｍを受信側装置２２０－ｍが備えるようにして、提示信号生成部２２４－ｍが、提示信号選択部２２５－ｍの振動提示ON/OFFスイッチが受け付けた入力に従って、振動信号を出力するか否かの動作をするようにしてもよい。
【0044】
＜第１実施形態＞
参考形態の多地点会議システム１０は、所定の音響伝送方式において本来は音響信号用として用意されたチャネルを振動信号用のチャネルとして代用する。したがって、参考形態の多地点会議システム１０の端末装置として、上述した端末装置２００－ｍではなく、所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置が用いられてしまった場合には、端末装置は振動信号用のチャネルの振動信号を音響信号用のスピーカに出力してしまうことになり、スピーカが想定外の音を発してしまったり、スピーカが故障してしまったり、スピーカが破壊されてしまったりする可能性がある。これらの可能性をなくすために、多地点会議制御装置が各端末装置に適した端末向け信号を出力するのが第１実施形態の多地点会議システムである。以下、第１実施形態の多地点会議システムと当該システムに含まれる各装置について、参考形態と異なる点を中心に説明する。
参考形態の多地点会議システム１０は、所定の音響伝送方式において本来は音響信号用として用意されたチャネルを振動信号用のチャネルとして代用する。したがって、参考形態の多地点会議システム１０の端末装置として、上述した端末装置２００－ｍではなく、所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置が用いられてしまった場合には、端末装置は振動信号用のチャネルの振動信号を音響信号用のスピーカに出力してしまうことになり、スピーカが想定外の音を発してしまったり、スピーカが故障してしまったり、スピーカが破壊されてしまったりする可能性がある。これらの可能性をなくすために、多地点会議制御装置が各端末装置に適した端末向け信号を出力するのが第１実施形態の多地点会議システムである。以下、第１実施形態の多地点会議システムと当該システムに含まれる各装置について、参考形態と異なる点を中心に説明する。
【0045】
第１実施形態の多地点会議システム１１は、図１０に例示する通り、多地点会議制御装置１０１と触覚対応端末装置２００－ｍと触覚非対応端末装置４００－ｎを含む。第１実施形態においては、Ｍは１以上の整数であり、ｍは１以上Ｍ以下の各整数であり、Ｎは１以上の整数であり、ｎはＭ＋１以上Ｍ＋Ｎ以下の各整数である。多地点会議制御装置１０１と各触覚対応端末装置２００－ｍは、通信網の各伝送路３００－ｍを介して接続されている。多地点会議制御装置１０１と各触覚非対応端末装置４００－ｎは、通信網の各伝送路５００－ｎを介して接続されている。通信網は、例えばインターネットであり、複数の装置の間で信号をほぼリアルタイムに相互に伝送できるものである。以下では、触覚対応端末装置２００－ｍが配置されている地点を地点ｍとよび、触覚非対応端末装置４００－ｎが配置されている地点を地点ｎとよぶ。
【0046】
［触覚対応端末装置２００－ｍ］
触覚対応端末装置２００－ｍは、参考形態の端末装置２００－ｍと同様であり、触覚対応端末装置２００－ｍの構成及び各部の動作は、参考形態の端末装置２００－ｍの説明箇所で説明したのと同様である。「触覚対応端末装置」との呼称は、第１実施形態の多地点会議システム１１に含まれる「触覚非対応端末装置」との区別を明瞭にするために採用したものである。同様の理由で、参考形態の送信側装置２１０－ｍを第１実施形態では触覚対応送信側装置２１０－ｍとよび、参考形態の受信側装置２２０－ｍを第１実施形態では触覚対応受信側装置２２０－ｍとよび、参考形態における端末送出信号ＳＡ－ｍを第１実施形態では触覚対応端末送出信号ＳＡ－ｍとよび、参考形態における端末向け信号ＳＢを第１実施形態では触覚対応端末向け信号ＳＢとよぶ。すなわち、触覚対応送信側装置２１０－ｍは、触覚対応端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０１に対して出力する。また、触覚対応受信側装置２２０－ｍには、多地点会議制御装置１０１から伝送路３００－ｍを介して触覚対応端末向け信号ＳＢが入力される。
触覚対応端末装置２００－ｍは、参考形態の端末装置２００－ｍと同様であり、触覚対応端末装置２００－ｍの構成及び各部の動作は、参考形態の端末装置２００－ｍの説明箇所で説明したのと同様である。「触覚対応端末装置」との呼称は、第１実施形態の多地点会議システム１１に含まれる「触覚非対応端末装置」との区別を明瞭にするために採用したものである。同様の理由で、参考形態の送信側装置２１０－ｍを第１実施形態では触覚対応送信側装置２１０－ｍとよび、参考形態の受信側装置２２０－ｍを第１実施形態では触覚対応受信側装置２２０－ｍとよび、参考形態における端末送出信号ＳＡ－ｍを第１実施形態では触覚対応端末送出信号ＳＡ－ｍとよび、参考形態における端末向け信号ＳＢを第１実施形態では触覚対応端末向け信号ＳＢとよぶ。すなわち、触覚対応送信側装置２１０－ｍは、触覚対応端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０１に対して出力する。また、触覚対応受信側装置２２０－ｍには、多地点会議制御装置１０１から伝送路３００－ｍを介して触覚対応端末向け信号ＳＢが入力される。
【0047】
［触覚非対応端末装置４００－ｎ］
触覚非対応端末装置４００－ｎは、地点ｎに配置された端末装置であり、例えばPCと当該PCの接続された周辺機器、または、PC単体で構成されるものであり、図１１に例示する通り、触覚非対応送信側装置４１０－ｎと触覚非対応受信側装置４２０－ｎを含む。ここではまず触覚非対応送信側装置４１０－ｎについて説明する。触覚非対応受信側装置４２０－ｎについては多地点会議制御装置１０１を説明した後に説明する。
触覚非対応端末装置４００－ｎは、地点ｎに配置された端末装置であり、例えばPCと当該PCの接続された周辺機器、または、PC単体で構成されるものであり、図１１に例示する通り、触覚非対応送信側装置４１０－ｎと触覚非対応受信側装置４２０－ｎを含む。ここではまず触覚非対応送信側装置４１０－ｎについて説明する。触覚非対応受信側装置４２０－ｎについては多地点会議制御装置１０１を説明した後に説明する。
【0048】
［触覚非対応送信側装置４１０－ｎ］
触覚非対応送信側装置４１０－ｎは、図１１に例示する通り、映像取得部４１１－ｎと音響取得部４１２－ｎと送出信号生成部４１４－ｎを含む。触覚非対応送信側装置４１０－ｎは、所定の時間区間ごとに、図１２に例示するステップＳ４１１、Ｓ４１２、Ｓ４１４の各処理を行う。
触覚非対応送信側装置４１０－ｎは、図１１に例示する通り、映像取得部４１１－ｎと音響取得部４１２－ｎと送出信号生成部４１４－ｎを含む。触覚非対応送信側装置４１０－ｎは、所定の時間区間ごとに、図１２に例示するステップＳ４１１、Ｓ４１２、Ｓ４１４の各処理を行う。
【0049】
［映像取得部４１１－ｎ］
映像取得部４１１－ｎは、例えば、PCに内蔵されたカメラまたはPCに接続されたカメラである。映像取得部４１１－ｎは、地点ｎの映像を撮像して、撮像した映像に対応する映像信号を送出信号生成部４１４－ｎに対して出力する（ステップＳ４１１）。
映像取得部４１１－ｎは、例えば、PCに内蔵されたカメラまたはPCに接続されたカメラである。映像取得部４１１－ｎは、地点ｎの映像を撮像して、撮像した映像に対応する映像信号を送出信号生成部４１４－ｎに対して出力する（ステップＳ４１１）。
【0050】
［音響取得部４１２－ｎ］
音響取得部４１２－ｎは、例えば、PCに内蔵されたマイクロホンまたはPCに接続されたマイクロホンである。音響取得部４１２－ｎは、地点ｎで発せられた音を収音して、収音した音に対応する音響信号を送出信号生成部４１４－ｎに対して出力する（ステップＳ４１２）。
音響取得部４１２－ｎは、例えば、PCに内蔵されたマイクロホンまたはPCに接続されたマイクロホンである。音響取得部４１２－ｎは、地点ｎで発せられた音を収音して、収音した音に対応する音響信号を送出信号生成部４１４－ｎに対して出力する（ステップＳ４１２）。
【0051】
［送出信号生成部４１４－ｎ］
送出信号生成部４１４－ｎには、映像取得部４１１－ｎが出力した映像信号と、音響取得部４１２－ｎが出力した音響信号と、が入力される。送出信号生成部４１４－ｎは、入力された映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成し、入力された音響信号を含む複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成し、生成した映像ビット列と生成した音響ビット列を含む触覚非対応端末送出信号ＳＣ－ｎを得て多地点会議制御装置１０１に対して出力する（ステップＳ４１４）。
送出信号生成部４１４－ｎには、映像取得部４１１－ｎが出力した映像信号と、音響取得部４１２－ｎが出力した音響信号と、が入力される。送出信号生成部４１４－ｎは、入力された映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成し、入力された音響信号を含む複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成し、生成した映像ビット列と生成した音響ビット列を含む触覚非対応端末送出信号ＳＣ－ｎを得て多地点会議制御装置１０１に対して出力する（ステップＳ４１４）。
【0052】
送出信号生成部４１４－ｎは、触覚対応送信装置２１０－ｍの送出信号生成部２１４－ｍと同様に、入力された映像信号に対して所定の映像伝送方式に対応する符号化処理またはビット列への格納処理を行うことで映像ビット列を生成する。
【0053】
送出信号生成部４１４－ｎは、入力された音響信号を所定の音響伝送方式の複数チャネルのうちの上述した音響信号用のチャネルの信号とし、所定の音響伝送方式の複数チャネルのうちの上述した振動信号用のチャネルには実質的な信号を含めずに、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響ビット列を生成する。例えば、所定の音響伝送方式が設定された複数個のチャネルの情報を必ず含む音響ビット列を生成するものである場合には、送出信号生成部４１４－ｎは、入力された音響信号を所定の音響伝送方式の複数チャネルのうちの上述した音響信号用のチャネルの信号とし、オールゼロの信号を所定の音響伝送方式の複数チャネルのうちの上述した振動信号用のチャネルの信号として、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響ビット列を生成する。また例えば、所定の音響伝送方式が必要なチャネルのみの情報を含む音響ビット列を生成するものである場合には、送出信号生成部４１４－ｎは、入力された音響信号を所定の音響伝送方式の複数チャネルのうちの上述した音響信号用のチャネルの信号とし、音響信号用のチャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行い、音響信号用のチャネルのみが必要なチャネルであることを表す情報を含めることで音響ビット列を生成する。
【0054】
［映像の送出の有無］
送出信号生成部４１４－ｎが触覚非対応端末送出信号ＳＣ－ｎに映像ビット列を含めるのは必須ではない。例えば、触覚非対応送信側装置４１０－ｎが映像取得部４１１－ｎを備えずに、触覚非対応送信側装置４１０－ｎがステップＳ４１１を行わずに、送出信号生成部４１４－ｎは、映像ビット列を含まない触覚非対応端末送出信号ＳＣ－ｎを多地点会議制御装置１０１に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、触覚非対応送信側装置４１０－ｎが映像を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応送信側装置４１０－ｎが映像を送出するか否か、についての利用者による入力を受け付けるスイッチである映像送出ON/OFFスイッチ」を含む送出信号選択部４１５－ｎを触覚非対応送信側装置４１０－ｎが備えるようにして、送出信号生成部４１４－ｎが、送出信号選択部４１５－ｎの映像送出ON/OFFスイッチが受け付けた入力に従って、映像ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めるか否かの動作をするようにしてもよい。
送出信号生成部４１４－ｎが触覚非対応端末送出信号ＳＣ－ｎに映像ビット列を含めるのは必須ではない。例えば、触覚非対応送信側装置４１０－ｎが映像取得部４１１－ｎを備えずに、触覚非対応送信側装置４１０－ｎがステップＳ４１１を行わずに、送出信号生成部４１４－ｎは、映像ビット列を含まない触覚非対応端末送出信号ＳＣ－ｎを多地点会議制御装置１０１に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、触覚非対応送信側装置４１０－ｎが映像を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応送信側装置４１０－ｎが映像を送出するか否か、についての利用者による入力を受け付けるスイッチである映像送出ON/OFFスイッチ」を含む送出信号選択部４１５－ｎを触覚非対応送信側装置４１０－ｎが備えるようにして、送出信号生成部４１４－ｎが、送出信号選択部４１５－ｎの映像送出ON/OFFスイッチが受け付けた入力に従って、映像ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めるか否かの動作をするようにしてもよい。
【0055】
［音の送出の有無］
送出信号生成部４１４－ｎが触覚非対応端末送出信号ＳＣ－ｎに音響ビット列を含めるのは必須ではない。例えば、触覚非対応送信側装置４１０－ｎが音響取得部４１２－ｎを備えずに、触覚非対応送信側装置４１０－ｎがステップＳ４１２を行わずに、送出信号生成部４１４－ｎは、音響ビット列を含まない触覚非対応端末送出信号ＳＣ－ｎを多地点会議制御装置１０１に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、触覚非対応送信側装置４１０－ｎが音を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応送信側装置４１０－ｎが音を送出するか否か、についての利用者による入力を受け付けるスイッチである音響送出ON/OFFスイッチを含む送出信号選択部４１５－ｎを触覚非対応送信側装置４１０－ｎが備えるようにして、送出信号生成部４１４－ｎが、送出信号選択部４１５－ｎの音響送出ON/OFFスイッチが受け付けた入力に従って、音響ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めるか否かの動作をするようにしてもよい。なお、送出信号生成部４１４－ｎは、音を送出しない場合には、音響信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響ビット列を生成して、生成した音響ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めてもよい。
送出信号生成部４１４－ｎが触覚非対応端末送出信号ＳＣ－ｎに音響ビット列を含めるのは必須ではない。例えば、触覚非対応送信側装置４１０－ｎが音響取得部４１２－ｎを備えずに、触覚非対応送信側装置４１０－ｎがステップＳ４１２を行わずに、送出信号生成部４１４－ｎは、音響ビット列を含まない触覚非対応端末送出信号ＳＣ－ｎを多地点会議制御装置１０１に対して出力するようにしてもよい。また例えば、非特許文献１の多地点会議システムと同様に、触覚非対応送信側装置４１０－ｎが音を送出するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応送信側装置４１０－ｎが音を送出するか否か、についての利用者による入力を受け付けるスイッチである音響送出ON/OFFスイッチを含む送出信号選択部４１５－ｎを触覚非対応送信側装置４１０－ｎが備えるようにして、送出信号生成部４１４－ｎが、送出信号選択部４１５－ｎの音響送出ON/OFFスイッチが受け付けた入力に従って、音響ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めるか否かの動作をするようにしてもよい。なお、送出信号生成部４１４－ｎは、音を送出しない場合には、音響信号用のチャネルにオールゼロの信号を含めてから、複数チャネルの信号に対して所定の音響伝送方式に対応する符号化処理またはビット列への格納処理を行うことで音響ビット列を生成して、生成した音響ビット列を触覚非対応端末送出信号ＳＣ－ｎに含めてもよい。
【0056】
［多地点会議制御装置１０１］
多地点会議制御装置１０１は、図１３に例示する通り、会議信号生成部１１１を含む。多地点会議制御装置１０１には、各伝送路３００－１～３００－Ｍを介して接続された各触覚対応端末装置２００－１～２００－Ｍが出力した触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと、各伝送路５００－（Ｍ＋１）～５００－（Ｍ＋Ｎ）を介して接続された各触覚非対応端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）が出力した触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）と、が入力される。多地点会議制御装置１０１は、所定の時間区間ごとに、図１４に例示するステップＳ１１１の処理を行う。
多地点会議制御装置１０１は、図１３に例示する通り、会議信号生成部１１１を含む。多地点会議制御装置１０１には、各伝送路３００－１～３００－Ｍを介して接続された各触覚対応端末装置２００－１～２００－Ｍが出力した触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと、各伝送路５００－（Ｍ＋１）～５００－（Ｍ＋Ｎ）を介して接続された各触覚非対応端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）が出力した触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）と、が入力される。多地点会議制御装置１０１は、所定の時間区間ごとに、図１４に例示するステップＳ１１１の処理を行う。
【0057】
［会議信号生成部１１１］
会議信号生成部１１１には、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）が入力される。会議信号生成部１１１は、例えば図１５に示すステップＳ１１１－１からステップＳ１１１－８の各処理を行うことで、入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢと触覚非対応端末向け信号ＳＤを得て出力する（ステップＳ１１１）。
会議信号生成部１１１には、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）が入力される。会議信号生成部１１１は、例えば図１５に示すステップＳ１１１－１からステップＳ１１１－８の各処理を行うことで、入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢと触覚非対応端末向け信号ＳＤを得て出力する（ステップＳ１１１）。
【0058】
会議信号生成部１１１は、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）のそれぞれに含まれる各地点の映像ビット列に含まれる映像信号を含む出力用の映像信号を生成する（ステップＳ１１１－１）。会議信号生成部１１１は、例えば、非特許文献１の多地点会議システムと同様に、各地点の映像のサイズを縮小した縮小映像を得て、各地点の縮小映像を含む１つの映像を生成して、生成した映像に対応する映像信号を生成すればよい。触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍに映像ビット列が含まれない触覚対応端末送出信号がある場合や触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）に映像ビット列が含まれない触覚非対応端末送出信号がある場合には、会議信号生成部１１１は、映像ビット列が含まれる触覚対応端末送出信号と触覚非対応端末送出信号のみを対象として、各地点の映像信号を含む出力用の映像信号を生成すればよい。会議信号生成部１１１は、ステップＳ１１１－１を行った後に、ステップＳ１１１－１で得た映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成する（ステップＳ１１１－２）。
【0059】
また、会議信号生成部１１１は、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる音響信号と、触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）のそれぞれに含まれる各地点の音響ビット列に含まれる音響信号と、を含む出力用の音響信号を生成する（ステップＳ１１１－３）。会議信号生成部１１１は、例えば、非特許文献１の多地点会議システムと同様に、各地点の音響信号を混合して１つの音響信号を生成すればよい。触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に音響信号が含まれない触覚対応端末送出信号がある場合や触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）に音響ビット列が含まれない触覚非対応端末送出信号（すなわち、音響信号が含まれない触覚非対応端末送出信号）がある場合には、会議信号生成部１１１は、音響振動ビット列に音響信号が含まれる触覚対応端末送出信号と音響ビット列が含まれる触覚対応非端末送出信号のみ（すなわち、音響信号が含まれる触覚対応端末送出信号と音響信号が含まれる触覚対応非端末送出信号のみ）を対象として、各地点の音響信号を含む出力用の音響信号を生成すればよい。音響信号用のチャネルが複数個ある場合には、会議信号生成部１１１は、チャネルごとに、各地点の音響信号を含む出力用の音響信号を生成すればよい。
【0060】
また、会議信号生成部１１１は、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる振動信号を含む出力用の振動信号を生成する（ステップＳ１１１－４）。会議信号生成部１１１は、例えば、各地点の振動信号を混合して１つの振動信号を生成すればよい。触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に振動信号が含まれない触覚対応端末送出信号がある場合には、会議信号生成部１１１は、音響振動ビット列に振動信号が含まれる触覚対応端末送出信号のみを対象として、各地点の振動信号を含む出力用の振動信号を生成すればよい。振動信号用のチャネルが複数個ある場合には、会議信号生成部１１１は、チャネルごとに、各地点の振動信号を含む出力用の振動信号を生成すればよい。
【0061】
会議信号生成部１１１は、ステップＳ１１１－３とＳ１１１－４を行った後に、ステップＳ１１１－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、ステップＳ１１１－４で得た振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響振動ビット列を生成する（ステップＳ１１１－５）。会議信号生成部１１１は、ステップＳ１１１－２とＳ１１１－５を行った後に、ステップＳ１１１－２で生成した映像ビット列とステップＳ１１１－５で生成した音響振動ビット列を含む触覚対応端末向け信号ＳＢを得て、各触覚対応端末装置に対して出力する、すなわち、触覚対応端末装置２００－１～２００－Ｍのそれぞれに対して各伝送路３００－１～３００－Ｍを介して出力する（ステップＳ１１１－６）。
【0062】
会議信号生成部１１１が行うステップＳ１１１－１からＳ１１１－６までは、参考形態の会議信号生成部１１０が行うステップＳ１１０－１からＳ１１０－６までと同様であるが、会議信号生成部１１１は更に以下のステップＳ１１１－７とＳ１１１－８も行う。会議信号生成部１１１は、ステップＳ１１１－３を行った後に、ステップＳ１１１－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、オールゼロの信号またはステップＳ１１１－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成する（ステップＳ１１１－７）。会議信号生成部１１１は、ステップＳ１１１－２とＳ１１１－７を行った後に、ステップＳ１１１－２で生成した映像ビット列とステップＳ１１１－７で生成した音響ビット列を含む触覚非対応端末向け信号ＳＤを得て、各触覚非対応端末装置に対して出力する、すなわち、触覚対応非端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）のそれぞれに対して各伝送路５００－（Ｍ＋１）～５００－（Ｍ＋Ｎ）を介して出力する（ステップＳ１１１－８）。なお、オールゼロの信号とは、全ての時刻において振幅が０の信号のことであり、音響提示部や振動提示部に入力しても音や振動が実質的に発生しない信号の一例である。すなわち、会議信号生成部１１０は、音響提示部や振動提示部に入力しても音や振動が実質的に発生しない信号であれば、オールゼロの信号ではなく、微小な振幅を持つ信号などの実質的に無信号に相当する信号を用いてもよい。以降のオールゼロの信号についても同様である。
【0063】
会議信号生成部１１１は、何れの触覚対応端末送出信号及び触覚非対応端末信号にも映像信号が含まれない場合には、ステップＳ１１１－１とステップＳ１１１－２を行わずに、ステップＳ１１１－５を行った後に、ステップＳ１１１－６として、ステップＳ１１１－５で生成した音響振動ビット列を含む触覚対応端末向け信号ＳＢを得て各触覚対応端末装置に対して出力し、ステップＳ１１１－７を行った後に、ステップＳ１１１－８として、ステップＳ１１１－７で生成した音響ビット列を含む触覚非対応端末向け信号ＳＤを得て各触覚非対応端末装置に対して出力すればよい。要するに、会議信号生成部１１１は、所定の音響伝送方式の複数チャネルのうちの予め定めた１チャネル以上である音響信号用のチャネルに、各地点から入力された音響信号に基づく音響信号を格納し、所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた１チャネル以上の振動信号用のチャネルに、各地点から入力された振動信号に基づく振動信号を格納した、触覚対応端末向け信号ＳＢを各触覚対応端末装置に対して出力するとともに、音響信号用のチャネルに各地点から入力された音響信号に基づく音響信号を格納し、振動信号用のチャネルにオールゼロの信号または各地点から入力された音響信号に基づく音響信号を格納した、触覚非対応端末向け信号ＳＤを各触覚非対応端末装置に対して出力する。
【0064】
［触覚非対応受信側装置４２０－ｎ］
触覚非対応受信側装置４２０－ｎは、図１１に例示する通り、提示信号生成部４２４－ｎと映像提示部４２１－ｎと音響提示部４２２－ｎを含む。触覚非対応受信側装置４２０－ｎには、各伝送路５００－ｎを介して接続された多地点会議制御装置１０１が出力した触覚非対応端末向け信号ＳＤが入力される。触覚非対応受信側装置４２０－ｎは、所定の時間区間ごとに、図１６に例示するステップＳ４２４、Ｓ４２１、Ｓ４２２の各処理を行う。
触覚非対応受信側装置４２０－ｎは、図１１に例示する通り、提示信号生成部４２４－ｎと映像提示部４２１－ｎと音響提示部４２２－ｎを含む。触覚非対応受信側装置４２０－ｎには、各伝送路５００－ｎを介して接続された多地点会議制御装置１０１が出力した触覚非対応端末向け信号ＳＤが入力される。触覚非対応受信側装置４２０－ｎは、所定の時間区間ごとに、図１６に例示するステップＳ４２４、Ｓ４２１、Ｓ４２２の各処理を行う。
【0065】
［提示信号生成部４２４－ｎ］
提示信号生成部４２４－ｎには触覚非対応端末向け信号ＳＤが入力される。提示信号生成部４２４－ｎは、触覚非対応端末向け信号ＳＤに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部４２１－ｎに対して出力し、触覚非対応端末向け信号ＳＤに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部４２２－ｎに対して音響信号として出力する（ステップＳ４２４）。
提示信号生成部４２４－ｎには触覚非対応端末向け信号ＳＤが入力される。提示信号生成部４２４－ｎは、触覚非対応端末向け信号ＳＤに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部４２１－ｎに対して出力し、触覚非対応端末向け信号ＳＤに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部４２２－ｎに対して音響信号として出力する（ステップＳ４２４）。
【0066】
触覚非対応端末装置４００－ｎは、所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置であってもよい。触覚非対応端末装置４００－ｎが所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置である場合には、提示信号生成部４２４－ｎは、ステップＳ４２４として、触覚非対応端末向け信号ＳＤに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部４２２－ｎに対して音響信号として出力し、触覚非対応端末向け信号ＳＤに含まれる所定の音響伝送方式のビット列である音響ビット列から振動信号用のチャネルの信号を得て音響提示部４２２－ｎに対して音響信号として出力することになる。
【0067】
［映像提示部４２１－ｎ］
映像提示部４２１－ｎは、例えば、PCに内蔵されたディスプレイ装置またはPCに接続されたディスプレイ装置である。映像提示部４２１－ｎには、提示信号生成部４２４－ｎが出力した映像信号が入力される。映像提示部４２１－ｎは、入力された映像信号に対応する映像を表示する、すなわち、映像を提示する（ステップＳ４２１）。
映像提示部４２１－ｎは、例えば、PCに内蔵されたディスプレイ装置またはPCに接続されたディスプレイ装置である。映像提示部４２１－ｎには、提示信号生成部４２４－ｎが出力した映像信号が入力される。映像提示部４２１－ｎは、入力された映像信号に対応する映像を表示する、すなわち、映像を提示する（ステップＳ４２１）。
【0068】
［音響提示部４２２－ｎ］
音響提示部４２２－ｎは、例えば、PCに内蔵されたスピーカまたはPCに接続されたスピーカである。音響提示部４２２－ｎには、提示信号生成部４２４－ｎが出力した音響信号が入力される。音響提示部４２２－ｎは、入力された音響信号に対応する音を発生する、すなわち、音を提示する（ステップＳ４２２）。
音響提示部４２２－ｎは、例えば、PCに内蔵されたスピーカまたはPCに接続されたスピーカである。音響提示部４２２－ｎには、提示信号生成部４２４－ｎが出力した音響信号が入力される。音響提示部４２２－ｎは、入力された音響信号に対応する音を発生する、すなわち、音を提示する（ステップＳ４２２）。
【0069】
触覚非対応端末装置４００－ｎが所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置である場合にも、音響提示部４２２－ｎは、ステップＳ４２２として、入力された音響信号に対応する音を発生する。すなわち、この場合には、音響提示部４２２－ｎは、音響ビット列に含まれていた音響信号用のチャネルの信号に対応する音に加えて振動信号用のチャネルの信号に対応する音も発生することになる。しかし、振動信号用のチャネルには、多地点会議制御装置１０１の会議信号生成部１１１がオールゼロの信号または各地点から入力された音響信号に基づく音響信号を格納している。このため、触覚非対応端末装置４００－ｎが所定の音響伝送方式に従って複数チャネルの音響信号を再生する端末装置である場合であっても、スピーカが想定外の音を発してしまうことはなく、スピーカが故障してしまったり、スピーカが破壊されてしまったりする可能性は無い。
【0070】
［映像の提示の有無］
触覚非対応受信側装置４２０－ｎが映像を提示するのは必須ではない。例えば、触覚非対応受信側装置４２０－ｎが映像提示部４２１－ｎを備えずに、提示信号生成部４２４－ｎは触覚非対応端末向け信号ＳＤから映像信号を得ずに、触覚非対応受信側装置４２０－ｎがステップＳ４２１を行わないようにしてもよい。また例えば、触覚非対応受信側装置４２０－ｎが映像を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応受信側装置４２０－ｎが映像を提示するか否か、についての利用者による入力を受け付けるスイッチである映像提示ON/OFFスイッチを含む提示信号選択部４２５－ｎを触覚非対応受信側装置４２０－ｎが備えるようにして、提示信号生成部４２４－ｎが、提示信号選択部４２５－ｎの映像提示ON/OFFスイッチが受け付けた入力に従って、映像信号を出力するか否かの動作をするようにしてもよい。
触覚非対応受信側装置４２０－ｎが映像を提示するのは必須ではない。例えば、触覚非対応受信側装置４２０－ｎが映像提示部４２１－ｎを備えずに、提示信号生成部４２４－ｎは触覚非対応端末向け信号ＳＤから映像信号を得ずに、触覚非対応受信側装置４２０－ｎがステップＳ４２１を行わないようにしてもよい。また例えば、触覚非対応受信側装置４２０－ｎが映像を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応受信側装置４２０－ｎが映像を提示するか否か、についての利用者による入力を受け付けるスイッチである映像提示ON/OFFスイッチを含む提示信号選択部４２５－ｎを触覚非対応受信側装置４２０－ｎが備えるようにして、提示信号生成部４２４－ｎが、提示信号選択部４２５－ｎの映像提示ON/OFFスイッチが受け付けた入力に従って、映像信号を出力するか否かの動作をするようにしてもよい。
【0071】
［音の提示の有無］
触覚非対応受信側装置４２０－ｎが音を提示するのは必須ではない。例えば、触覚非対応受信側装置４２０－ｎが音響提示部４２２－ｎを備えずに、提示信号生成部４２４－ｎは触覚非対応端末向け信号ＳＤから音響信号を得ずに、触覚非対応受信側装置４２０－ｎがステップＳ４２２を行わないようにしてもよい。また例えば、触覚非対応受信側装置４２０－ｎが音を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応受信側装置４２０－ｎが音を提示するか否か、についての利用者による入力を受け付けるスイッチである音響提示ON/OFFスイッチを含む提示信号選択部４２５－ｎを触覚非対応受信側装置４２０－ｎが備えるようにして、提示信号生成部４２４－ｎが、提示信号選択部４２５－ｎの音響提示ON/OFFスイッチが受け付けた入力に従って、音響信号を出力するか否かの動作をするようにしてもよい。
触覚非対応受信側装置４２０－ｎが音を提示するのは必須ではない。例えば、触覚非対応受信側装置４２０－ｎが音響提示部４２２－ｎを備えずに、提示信号生成部４２４－ｎは触覚非対応端末向け信号ＳＤから音響信号を得ずに、触覚非対応受信側装置４２０－ｎがステップＳ４２２を行わないようにしてもよい。また例えば、触覚非対応受信側装置４２０－ｎが音を提示するか否か、を利用者が選択できるようにしてもよい。すなわち、触覚非対応受信側装置４２０－ｎが音を提示するか否か、についての利用者による入力を受け付けるスイッチである音響提示ON/OFFスイッチを含む提示信号選択部４２５－ｎを触覚非対応受信側装置４２０－ｎが備えるようにして、提示信号生成部４２４－ｎが、提示信号選択部４２５－ｎの音響提示ON/OFFスイッチが受け付けた入力に従って、音響信号を出力するか否かの動作をするようにしてもよい。
【0072】
＜第１実施形態の変形例１＞
多地点会議制御装置１０１が上述した動作をするためには、多地点会議制御装置１０１は、各伝送路を介して接続されている各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを識別できる必要がある。多地点会議制御装置１０１は、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを、インターネット経由での接続における識別情報や初期設定などによって識別してもよいが、各端末装置が出力した情報に基づいて識別するようにしてもよい。各端末装置が出力した情報に基づいて、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを多地点会議制御装置１０１が識別する例を、第１実施形態の変形例１として、第一実施形態と異なる点について説明する。
多地点会議制御装置１０１が上述した動作をするためには、多地点会議制御装置１０１は、各伝送路を介して接続されている各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを識別できる必要がある。多地点会議制御装置１０１は、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを、インターネット経由での接続における識別情報や初期設定などによって識別してもよいが、各端末装置が出力した情報に基づいて識別するようにしてもよい。各端末装置が出力した情報に基づいて、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを多地点会議制御装置１０１が識別する例を、第１実施形態の変形例１として、第一実施形態と異なる点について説明する。
【0073】
［触覚対応受信側装置２２０－ｍ、対応メディア情報送信部２２６－ｍ］
触覚対応受信側装置２２０－ｍは、図２に破線で示すように、対応メディア情報送信部２２６－ｍも備える。対応メディア情報送信部２２６－ｍは、端末装置ｍが触覚対応端末装置であることを表す情報、すなわち、受信側装置ｍが振動信号を提示可能な受信側装置であることを表す情報、を対応メディア情報Ｉ－ｍとして多地点会議制御装置１０１に対して出力する（ステップＳ２２６）。
触覚対応受信側装置２２０－ｍは、図２に破線で示すように、対応メディア情報送信部２２６－ｍも備える。対応メディア情報送信部２２６－ｍは、端末装置ｍが触覚対応端末装置であることを表す情報、すなわち、受信側装置ｍが振動信号を提示可能な受信側装置であることを表す情報、を対応メディア情報Ｉ－ｍとして多地点会議制御装置１０１に対して出力する（ステップＳ２２６）。
【0074】
［触覚非対応受信側装置４２０－ｎ、対応メディア情報送信部４２６－ｎ］
触覚非対応受信側装置４２０－ｎは、図１１に破線で示すように、対応メディア情報送信部４２６－ｎも備える。対応メディア情報送信部４２６－ｎは、端末装置ｎが触覚非対応端末装置であることを表す情報、すなわち、受信側装置ｎが振動信号を提示不可能な端末装置であることを表す情報、を対応メディア情報Ｉ－ｎとして多地点会議制御装置１０１に対して出力する（ステップＳ４２６）。
触覚非対応受信側装置４２０－ｎは、図１１に破線で示すように、対応メディア情報送信部４２６－ｎも備える。対応メディア情報送信部４２６－ｎは、端末装置ｎが触覚非対応端末装置であることを表す情報、すなわち、受信側装置ｎが振動信号を提示不可能な端末装置であることを表す情報、を対応メディア情報Ｉ－ｎとして多地点会議制御装置１０１に対して出力する（ステップＳ４２６）。
【0075】
［多地点会議制御装置１０１、会議信号生成部１１１］
多地点会議制御装置１０１には、各伝送路を介して接続された各端末装置が出力した対応メディア情報Ｉ－ｋ（ｋは１以上Ｍ＋Ｎ以下の各整数）も入力される。対応メディア情報が多地点会議制御装置１０１に入力される時点では、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを多地点会議制御装置１０１は把握できないので、ここでは対応メディア情報をＩ－ｍとＩ－ｎではなくＩ－ｋと表記している。多地点会議制御装置１０１に入力された対応メディア情報Ｉ－ｋは会議信号生成部１１１に入力される。会議信号生成部１１１は、１以上Ｍ＋Ｎ以下の各ｋについて、対応メディア情報Ｉ－ｋが、端末装置ｋが触覚対応端末装置であることを表す情報、すなわち、受信側装置ｋが振動信号を提示可能な受信側装置であることを表す情報、である場合には、端末装置ｋが触覚対応端末装置であると識別するとともに、端末装置ｋから伝送路を介して入力された端末送出信号が触覚対応端末送出信号であると識別し、対応メディア情報Ｉ－ｋが、端末装置ｋが触覚非対応端末装置であることを表す情報、すなわち、受信側装置ｋが振動信号を提示不可能な受信側装置であることを表す情報、である場合には、端末装置ｋが触覚非対応端末装置であると識別するとともに、端末装置ｋから伝送路を介して入力された端末送出信号が触覚非対応端末送出信号であると識別して（ステップＳ１１１－０）から、第１実施形態で説明したステップＳ１１１の処理を行う。
多地点会議制御装置１０１には、各伝送路を介して接続された各端末装置が出力した対応メディア情報Ｉ－ｋ（ｋは１以上Ｍ＋Ｎ以下の各整数）も入力される。対応メディア情報が多地点会議制御装置１０１に入力される時点では、各端末装置が触覚対応端末装置であるか触覚非対応端末装置であるかを多地点会議制御装置１０１は把握できないので、ここでは対応メディア情報をＩ－ｍとＩ－ｎではなくＩ－ｋと表記している。多地点会議制御装置１０１に入力された対応メディア情報Ｉ－ｋは会議信号生成部１１１に入力される。会議信号生成部１１１は、１以上Ｍ＋Ｎ以下の各ｋについて、対応メディア情報Ｉ－ｋが、端末装置ｋが触覚対応端末装置であることを表す情報、すなわち、受信側装置ｋが振動信号を提示可能な受信側装置であることを表す情報、である場合には、端末装置ｋが触覚対応端末装置であると識別するとともに、端末装置ｋから伝送路を介して入力された端末送出信号が触覚対応端末送出信号であると識別し、対応メディア情報Ｉ－ｋが、端末装置ｋが触覚非対応端末装置であることを表す情報、すなわち、受信側装置ｋが振動信号を提示不可能な受信側装置であることを表す情報、である場合には、端末装置ｋが触覚非対応端末装置であると識別するとともに、端末装置ｋから伝送路を介して入力された端末送出信号が触覚非対応端末送出信号であると識別して（ステップＳ１１１－０）から、第１実施形態で説明したステップＳ１１１の処理を行う。
【0076】
＜第２実施形態＞
所定の音響伝送方式において本来は音響信号用として用意されたチャネルを振動信号用のチャネルとして代用する多地点会議システムにおいて、各端末装置の利用者が音と振動のうちの再生したいものを選択できるようにして、多地点会議制御装置が各端末装置での選択に対応する端末向け信号を生成して各端末装置に対して出力するようにしてもよい。この形態を第２実施形態として、第２実施形態の多地点会議システムと当該システムに含まれる各装置について、参考形態と異なる点を中心に説明する。
所定の音響伝送方式において本来は音響信号用として用意されたチャネルを振動信号用のチャネルとして代用する多地点会議システムにおいて、各端末装置の利用者が音と振動のうちの再生したいものを選択できるようにして、多地点会議制御装置が各端末装置での選択に対応する端末向け信号を生成して各端末装置に対して出力するようにしてもよい。この形態を第２実施形態として、第２実施形態の多地点会議システムと当該システムに含まれる各装置について、参考形態と異なる点を中心に説明する。
【0077】
第２実施形態の多地点会議システム１２は、図１に例示する通り、多地点会議制御装置１０２と端末装置２００－ｍを含む。第２実施形態においては、Ｍは２以上の整数であり、ｍは１以上Ｍ以下の各整数である。多地点会議制御装置１０２と各端末装置２００－ｍは、通信網の各伝送路３００－ｍを介して接続されている。通信網は、例えばインターネットであり、複数の装置の間で信号をほぼリアルタイムに相互に伝送できるものである。以下では、端末装置２００－ｍが配置されている地点を地点ｍとよぶ。
【0078】
［端末装置２００－ｍ］
端末装置２００－ｍは、地点ｍに配置された端末装置であり、例えばPCと当該PCの接続された周辺機器で構成されるものであり、図２に例示する通り、送信側装置２１０－ｍと受信側装置２２０－ｍを含む。
端末装置２００－ｍは、地点ｍに配置された端末装置であり、例えばPCと当該PCの接続された周辺機器で構成されるものであり、図２に例示する通り、送信側装置２１０－ｍと受信側装置２２０－ｍを含む。
【0079】
［送信側装置２１０－ｍ］
送信側装置２１０－ｍは参考形態の送信側装置２１０－ｍと同様である。ただし、送信側装置２１０－ｍは、端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０２に対して出力する。
送信側装置２１０－ｍは参考形態の送信側装置２１０－ｍと同様である。ただし、送信側装置２１０－ｍは、端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０２に対して出力する。
【0080】
［受信側装置２２０－ｍ］
受信側装置２２０－ｍは、図２に例示する通り、提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍと提示信号選択部２２５－ｍと対応メディア情報送信部２２６－ｍを含む。ここではまず提示信号選択部２２５－ｍと対応メディア情報送信部２２６－ｍについて説明する。提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍについては多地点会議制御装置１０２を説明した後に説明する。
受信側装置２２０－ｍは、図２に例示する通り、提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍと提示信号選択部２２５－ｍと対応メディア情報送信部２２６－ｍを含む。ここではまず提示信号選択部２２５－ｍと対応メディア情報送信部２２６－ｍについて説明する。提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍについては多地点会議制御装置１０２を説明した後に説明する。
【0081】
［提示信号選択部２２５］
提示信号選択部２２５は、音と振動についての、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りを少なくとも含む選択肢の何れかについての利用者による選択を受け付けて、選択された選択肢についての情報を対応メディア情報送信部２２６－ｍに出力する。もちろん、受信側装置２２０－ｍが音も振動も提示しない、も選択肢に含めてもよい。２チャネルステレオの音響伝送方式を用いる上述した例の場合は、２チャネルのうちの１チャネルが音響信号用のチャネルであり、２チャネルのうちの音響信号用のチャネルとは異なる１チャネルが振動信号用のチャネルであり、音響信号用のチャネルも振動信号用のチャネルも１個ずつであるので、選択肢には、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りのみを含めればよい。５．１チャネルサラウンドの音響伝送方式を用いる上述した例の場合は、６チャネルのうちの２チャネルが音響信号用のチャネルであり、６チャネルのうちの音響信号用のチャネルとは異なる４チャネルが振動信号用のチャネルであり、音響信号用のチャネルも振動信号用のチャネルも複数個あるので、選択肢には、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りに加えて、受信側装置２２０－ｍが音を提示する場合には、２チャネルの音響信号用のチャネルのうちのどのチャネルを提示するのか、受信側装置２２０－ｍが振動を提示する場合には、４チャネルの振動信号用のチャネルのうちのどのチャネルを提示するのか、も含めてもよい。
提示信号選択部２２５は、音と振動についての、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りを少なくとも含む選択肢の何れかについての利用者による選択を受け付けて、選択された選択肢についての情報を対応メディア情報送信部２２６－ｍに出力する。もちろん、受信側装置２２０－ｍが音も振動も提示しない、も選択肢に含めてもよい。２チャネルステレオの音響伝送方式を用いる上述した例の場合は、２チャネルのうちの１チャネルが音響信号用のチャネルであり、２チャネルのうちの音響信号用のチャネルとは異なる１チャネルが振動信号用のチャネルであり、音響信号用のチャネルも振動信号用のチャネルも１個ずつであるので、選択肢には、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りのみを含めればよい。５．１チャネルサラウンドの音響伝送方式を用いる上述した例の場合は、６チャネルのうちの２チャネルが音響信号用のチャネルであり、６チャネルのうちの音響信号用のチャネルとは異なる４チャネルが振動信号用のチャネルであり、音響信号用のチャネルも振動信号用のチャネルも複数個あるので、選択肢には、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りに加えて、受信側装置２２０－ｍが音を提示する場合には、２チャネルの音響信号用のチャネルのうちのどのチャネルを提示するのか、受信側装置２２０－ｍが振動を提示する場合には、４チャネルの振動信号用のチャネルのうちのどのチャネルを提示するのか、も含めてもよい。
【0082】
提示信号選択部２２５は、受信側装置２２０－ｍが映像を提示するか否か、も利用者が選択できるようにしてもよい。すなわち、提示信号選択部２２５は受信側装置２２０－ｍが映像を提示するか否か、についての利用者による入力を受け付けるスイッチである映像提示ON/OFFスイッチも備えて、映像提示ON/OFFスイッチが受け付けた情報も対応メディア情報送信部２２６－ｍに出力してもよい。
【0083】
［対応メディア情報送信部２２６－ｍ］
対応メディア情報送信部２２６－ｍは、提示信号選択部２２５から入力された、音と振動についての上述した選択肢に対応する情報を含む対応メディア情報Ｉ－ｍを多地点会議制御装置１０２に対して出力する。すなわち、選択肢が、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りである場合には、対応メディア情報送信部２２６－ｍは、「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報、「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報、「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報、の何れかを含む対応メディア情報Ｉ－ｍを出力する。また、選択肢が、受信側装置２２０－ｍが音も振動も提示しない、も含む４通りである場合には、対応メディア情報送信部２２６－ｍは、前述した３つの情報に「受信側装置２２０－ｍが音も振動も提示しない」旨の情報も加えた４つの情報のうちの何れかを含む対応メディア情報Ｉ－ｍを出力する。
対応メディア情報送信部２２６－ｍは、提示信号選択部２２５から入力された、音と振動についての上述した選択肢に対応する情報を含む対応メディア情報Ｉ－ｍを多地点会議制御装置１０２に対して出力する。すなわち、選択肢が、受信側装置２２０－ｍが音と振動の両方を提示する、受信側装置２２０－ｍが振動を提示せずに音を提示する、受信側装置２２０－ｍが音を提示せずに振動を提示する、の３通りである場合には、対応メディア情報送信部２２６－ｍは、「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報、「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報、「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報、の何れかを含む対応メディア情報Ｉ－ｍを出力する。また、選択肢が、受信側装置２２０－ｍが音も振動も提示しない、も含む４通りである場合には、対応メディア情報送信部２２６－ｍは、前述した３つの情報に「受信側装置２２０－ｍが音も振動も提示しない」旨の情報も加えた４つの情報のうちの何れかを含む対応メディア情報Ｉ－ｍを出力する。
【0084】
対応メディア情報送信部２２６－ｍは、映像提示ON/OFFスイッチが受け付けた情報も提示信号選択部２２５から入力された場合には、映像提示ON/OFFスイッチが受け付けた情報も含む対応メディア情報Ｉ－ｍを多地点会議制御装置１０２に対して出力する。すなわち、対応メディア情報送信部２２６－ｍは、「受信側装置２２０－ｍが映像を提示する」旨の情報、「受信側装置２２０－ｍが映像を提示しない」旨の情報、の何れかも含む対応メディア情報Ｉ－ｍを多地点会議制御装置１０２に対して出力する。
【0085】
なお、対応メディア情報送信部２２６－ｍは、少なくとも、端末装置２００－ｍが多地点会議制御装置１０２に接続されたときと、受信側装置２２０－ｍの対応メディア情報Ｉ－ｍが変わったときと、に対応メディア情報Ｉ－ｍを出力する必要があるが、その他のときにも対応メディア情報Ｉ－ｍを出力してもよい。例えば、対応メディア情報送信部２２６－ｍは、対応メディア情報Ｉ－ｍを所定の時間区間ごとに出力してもよいし、対応メディア情報Ｉ－ｍを所定の時間区間よりも長い時間間隔で出力してもよい。
【0086】
［多地点会議制御装置１０２］
多地点会議制御装置１０２は、図１７に例示する通り、会議信号生成部１１２を含む。多地点会議制御装置１０２には、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した対応メディア情報Ｉ－１～Ｉ－Ｍと、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した端末送出信号ＳＡ－１～ＳＡ－Ｍと、が入力される。多地点会議制御装置１０２は、所定の時間区間ごとに、図１８に例示するステップＳ１１２の処理を行う。
多地点会議制御装置１０２は、図１７に例示する通り、会議信号生成部１１２を含む。多地点会議制御装置１０２には、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した対応メディア情報Ｉ－１～Ｉ－Ｍと、各伝送路３００－１～３００－Ｍを介して接続された各端末装置２００－１～２００－Ｍが出力した端末送出信号ＳＡ－１～ＳＡ－Ｍと、が入力される。多地点会議制御装置１０２は、所定の時間区間ごとに、図１８に例示するステップＳ１１２の処理を行う。
【0087】
［会議信号生成部１１２］
会議信号生成部１１２には、対応メディア情報Ｉ－１～Ｉ－Ｍと端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。会議信号生成部１１２は、例えば図１９のステップＳ１１２－１からステップＳ１１２－７の各処理を行うことで、端末向け信号ＳＥ－１～ＳＥ－Ｍを得て出力する（ステップＳ１１２）。
会議信号生成部１１２には、対応メディア情報Ｉ－１～Ｉ－Ｍと端末送出信号ＳＡ－１～ＳＡ－Ｍが入力される。会議信号生成部１１２は、例えば図１９のステップＳ１１２－１からステップＳ１１２－７の各処理を行うことで、端末向け信号ＳＥ－１～ＳＥ－Ｍを得て出力する（ステップＳ１１２）。
【0088】
会議信号生成部１１２は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の映像ビット列に含まれる映像信号を含む出力用の映像信号を生成する（ステップＳ１１２－１）。会議信号生成部１１２は、例えば、非特許文献１の多地点会議システムと同様に、各地点の映像のサイズを縮小した縮小映像を得て、各地点の縮小映像を含む１つの映像を生成して、生成した映像に対応する映像信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍに映像ビット列が含まれない端末送出信号がある場合には、会議信号生成部１１２は、映像ビット列が含まれる端末送出信号のみを対象として、各地点の映像信号を含む出力用の映像信号を生成すればよい。会議信号生成部１１２は、ステップＳ１１２－１を行った後に、ステップＳ１１２－１で得た映像信号を含む所定の映像伝送方式のビット列である映像ビット列を生成する（ステップＳ１１２－２）。また、会議信号生成部１１２は、ステップＳ１１２－２を行った後に、ステップＳ１１２－２で生成した映像ビット列を含む端末向け信号ＳＥ－Ｇを得る（ステップＳ１１２－６Ｇ）。
【0089】
また、会議信号生成部１１２は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる音響信号を含む出力用の音響信号を生成する（ステップＳ１１２－３）。会議信号生成部１１２は、例えば、非特許文献１の多地点会議システムと同様に、各地点の音響信号を混合して１つの音響信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に音響信号が含まれない端末送出信号がある場合には、会議信号生成部１１２は、音響振動ビット列に音響信号が含まれる端末送出信号のみを対象として、各地点の音響信号を含む出力用の音響信号を生成すればよい。音響信号用のチャネルが複数個ある場合には、会議信号生成部１１２は、チャネルごとに、各地点の音響信号を含む出力用の音響信号を生成すればよい。
【0090】
また、会議信号生成部１１２は、端末送出信号ＳＡ－１～ＳＡ－Ｍのそれぞれに含まれる各地点の音響振動ビット列に含まれる振動信号を含む出力用の振動信号を生成する（ステップＳ１１２－４）。会議信号生成部１１２は、例えば、各地点の振動信号を混合して１つの振動信号を生成すればよい。端末送出信号ＳＡ－１～ＳＡ－Ｍの音響振動ビット列に振動信号が含まれない端末送出信号がある場合には、会議信号生成部１１２は、音響振動ビット列に振動信号が含まれる端末送出信号のみを対象として、各地点の振動信号を含む出力用の振動信号を生成すればよい。振動信号用のチャネルが複数個ある場合には、会議信号生成部１１２は、チャネルごとに、各地点の振動信号を含む出力用の振動信号を生成すればよい。
【0091】
会議信号生成部１１２は、ステップＳ１１２－３とＳ１１１－４を行った後に、ステップＳ１１２－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、ステップＳ１１２－４で得た振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響振動ビット列を生成する（ステップＳ１１２－５Ａ）。会議信号生成部１１２は、ステップＳ１１２－２とＳ１１２－５Ａを行った後に、ステップＳ１１２－２で生成した映像ビット列とステップＳ１１２－５Ａで生成した音響振動ビット列を含む端末向け信号ＳＥ－Ａを得る（ステップＳ１１２－６Ａ）。また、会議信号生成部１１２は、ステップＳ１１２－５Ａを行った後に、ステップＳ１１２－５Ａで生成した音響振動ビット列を含む端末向け信号ＳＥ－Ｄを得る（ステップＳ１１２－６Ｄ）。
【0092】
また、会議信号生成部１１２は、ステップＳ１１２－３を行った後に、ステップＳ１１２－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、オールゼロの信号またはステップＳ１１２－３で得た音響信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成する（ステップＳ１１２－５Ｂ）。会議信号生成部１１２は、ステップＳ１１２－２とＳ１１２－５Ｂを行った後に、ステップＳ１１２－２で生成した映像ビット列とステップＳ１１２－５Ｂで生成した音響ビット列を含む端末向け信号ＳＥ－Ｂを得る（ステップＳ１１２－６Ｂ）。また、会議信号生成部１１２は、ステップＳ１１２－５Ｂを行った後に、ステップＳ１１２－５Ｂで生成した音響ビット列を含む端末向け信号ＳＥ－Ｅを得る（ステップＳ１１２－６Ｅ）。なお、振動信号用のチャネルに音響信号を格納する場合で、予め定めた音響信号用のチャネルが複数個ある場合には、会議信号生成部１１２は、何れかのチャネルの音響信号を振動信号用のチャネルに格納してもよいし、複数個のチャネルの音響信号を混合したものを振動信号用のチャネルに格納してもよい。
【0093】
また、会議信号生成部１１２は、ステップＳ１１２－４を行った後に、オールゼロの信号またはステップＳ１１２－４で得た振動信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、ステップＳ１１２－４で得た振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である振動ビット列を生成する（ステップＳ１１２－５Ｃ）。会議信号生成部１１２は、ステップＳ１１２－２とＳ１１２－５Ｃを行った後に、ステップＳ１１２－２で生成した映像ビット列とステップＳ１１２－５Ｃで生成した振動ビット列を含む端末向け信号ＳＥ－Ｃを得る（ステップＳ１１２－６Ｃ）。また、会議信号生成部１１２は、ステップＳ１１２－５Ｃを行った後に、ステップＳ１１２－５Ｃで生成した振動ビット列を含む端末向け信号ＳＥ－Ｆを得る（ステップＳ１１２－６Ｆ）。なお、音響信号用のチャネルに振動信号を格納する場合で、予め定めた振動信号用のチャネルが複数個ある場合には、会議信号生成部１１２は、何れかのチャネルの振動信号を音響信号用のチャネルに格納してもよいし、複数個のチャネルの振動信号を混合したものを音響信号用のチャネルに格納してもよい。
【0094】
また、会議信号生成部１１２は、映像ビット列も音響振動ビット列も音響ビット列も振動ビット列も含まない端末向け信号ＳＥ－Ｈを得る（ステップＳ１１２－６Ｈ）。なお、会議信号生成部１１２は、端末向け信号ＳＥ－Ｈが映像ビット列も音響振動ビット列も含まない場合でも、端末向け信号ＳＥ－Ｈが映像でも音でも振動でもない情報を含む場合には、端末向け信号ＳＥ－Ｈを得る必要があるが、端末向け信号ＳＥ－Ｈに含めて送る必要がある情報が無い場合には、端末向け信号ＳＥ－Ｈを得ないでよいし、後述する処理、すなわち、端末向け信号ＳＥ－Ｈを端末向け信号ＳＥ－ｍとして端末装置に対して出力する処理、も行わないでよい。
【0095】
会議信号生成部１１２は、ステップＳ１１２－６ＡからＳ１１２－６Ｈを行った後に、各端末向け信号ＳＥ－１～ＳＥ－Ｍを以下の（Ａ）から（Ｈ）の８通りのいずれかによって得て、各端末装置に対して出力する、すなわち、端末装置２００－１～２００－Ｍのそれぞれに対して各伝送路３００－１～３００－Ｍを介して出力する（ステップＳ１１２－７）。
【0096】
（Ａ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ａを端末向け信号ＳＥ－ｍとする。
（Ｂ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｂを端末向け信号ＳＥ－ｍとする。
（Ｃ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｃを端末向け信号ＳＥ－ｍとする。
（Ｄ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｄを端末向け信号ＳＥ－ｍとする。
（Ｅ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｅを端末向け信号ＳＥ－ｍとする。
（Ｆ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｆを端末向け信号ＳＥ－ｍとする。
（Ｇ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｇを端末向け信号ＳＥ－ｍとする。
（Ｈ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｈを端末向け信号ＳＥ－ｍとする。
（Ｂ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｂを端末向け信号ＳＥ－ｍとする。
（Ｃ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｃを端末向け信号ＳＥ－ｍとする。
（Ｄ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｄを端末向け信号ＳＥ－ｍとする。
（Ｅ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｅを端末向け信号ＳＥ－ｍとする。
（Ｆ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｆを端末向け信号ＳＥ－ｍとする。
（Ｇ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＥ－Ｇを端末向け信号ＳＥ－ｍとする。
（Ｈ）会議信号生成部１１２は、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、端末向け信号ＳＥ－Ｈを端末向け信号ＳＥ－ｍとする。
【0097】
なお、上記の（Ａ）から（Ｈ）の中に対応メディア情報Ｉ－１～Ｉ－Ｍの何れも該当しないものがある場合には、会議信号生成部１１２は、対応メディア情報Ｉ－１～Ｉ－Ｍの何れも該当しない端末向け信号ＳＥ－Ａ～ＳＥ－Ｈは生成しないでよいので、この場合には、会議信号生成部１１２はステップＳ１１２－６Ａ～Ｓ１１２－６Ｈやそれ以前の各ステップのうちの不要なステップは行わないでよい。会議信号生成部１１２が実際に出力する端末向け信号をＳＥ－ｍとしていることからすると、端末向け信号ＳＥ－Ａ～ＳＥ－Ｈは会議信号生成部１１２内にある暫定的な端末向け信号であり、端末向け信号ＳＥ－Ａ～ＳＥ－Ｈは「端末向け暫定信号ＳＥ－Ａ～ＳＥ－Ｈ」であるともいえる。
【0098】
［受信側装置２２０－ｍの提示信号生成部２２４－ｍ、映像提示部２２１－ｍ、音響提示部２２２－ｍ、振動提示部２２３－ｍ］
提示信号生成部２２４－ｍには端末向け信号ＳＥ－ｍが入力される。提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍは、提示信号選択部２２５が受け付けた選択に従って、下記の８通りの何れかの動作をする。
提示信号生成部２２４－ｍには端末向け信号ＳＥ－ｍが入力される。提示信号生成部２２４－ｍと映像提示部２２１－ｍと音響提示部２２２－ｍと振動提示部２２３－ｍは、提示信号選択部２２５が受け付けた選択に従って、下記の８通りの何れかの動作をする。
【0099】
（Ａ）提示信号選択部２２５が受け付けた選択が、音を提示し振動を提示し映像を提示する旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。
【0100】
（Ｂ）提示信号選択部２２５が受け付けた選択が、音を提示し振動を提示せず映像を提示する旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。なお、提示信号生成部２２４－ｍは、音響ビット列から振動信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる振動信号用のチャネルの信号を音として提示してもよい。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。なお、提示信号生成部２２４－ｍは、音響ビット列から振動信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる振動信号用のチャネルの信号を音として提示してもよい。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
【0101】
（Ｃ）提示信号選択部２２５が受け付けた選択が、音を提示せず振動を提示し映像を提示する旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。なお、提示信号生成部２２４－ｍは、振動ビット列から音響信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる音響信号用のチャネルの信号を振動として提示してもよい。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。なお、提示信号生成部２２４－ｍは、振動ビット列から音響信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる音響信号用のチャネルの信号を振動として提示してもよい。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。
【0102】
（Ｄ）提示信号選択部２２５が受け付けた選択が、音を提示し振動を提示し映像を提示しない旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。
【0103】
（Ｅ）提示信号選択部２２５が受け付けた選択が、音を提示し振動を提示せず映像を提示しない旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。なお、提示信号生成部２２４－ｍは、音響ビット列から振動信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる振動信号用のチャネルの信号を音として提示してもよい。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である音響ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力する。音響提示部２２２－ｍは、入力された音響信号に対応する音を提示する。なお、提示信号生成部２２４－ｍは、音響ビット列から振動信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる振動信号用のチャネルの信号を音として提示してもよい。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
【0104】
（Ｆ）提示信号選択部２２５が受け付けた選択が、音を提示せず振動を提示し映像を提示しない旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。なお、提示信号生成部２２４－ｍは、振動ビット列から音響信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる音響信号用のチャネルの信号を振動として提示してもよい。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の音響伝送方式のビット列である振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力する。振動提示部２２３－ｍは、入力された振動信号に対応する振動を提示する。なお、提示信号生成部２２４－ｍは、振動ビット列から音響信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力してもよい。すなわち、受信側装置２２０－ｍは、端末向け信号ＳＥ－ｍに含まれる音響信号用のチャネルの信号を振動として提示してもよい。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。
【0105】
（Ｇ）提示信号選択部２２５が受け付けた選択が、音を提示せず振動を提示せず映像を提示する旨の選択である場合
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
提示信号生成部２２４－ｍは、端末向け信号ＳＥ－ｍに含まれる所定の映像伝送方式のビット列である映像ビット列から映像信号を得て映像提示部２２１－ｍに対して出力する。映像提示部２２１－ｍは、入力された映像信号に対応する映像を提示する。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
【0106】
（Ｈ）提示信号選択部２２５が受け付けた選択が、音を提示せず振動を提示せず映像を提示しない旨の選択である場合
提示信号生成部２２４－ｍは映像信号も音響信号も振動信号も出力しない。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
提示信号生成部２２４－ｍは映像信号も音響信号も振動信号も出力しない。映像提示部２２１－ｍには信号が入力されないので、映像提示部２２１－ｍは映像を提示しない。音響提示部２２２－ｍには信号が入力されないので、音響提示部２２２－ｍは音を提示しない。振動提示部２２３－ｍには信号が入力されないので、振動提示部２２３－ｍは振動を提示しない。
【0107】
＜第２実施形態の変形例１と変形例２＞
提示信号選択部２２５は、例えば、端末装置２００－ｍの映像提示部２２１－ｍの画面上に表示されて利用者の入力を受け付けてその結果を表示する提示信号選択ユーザインタフェース領域を備えていてもよい。利用者による入力は、端末装置２００－ｍに備えらえたマウス、タッチスクリーンであるディスプレイ装置に対するタッチ操作、などの周知の手段で受け付けるようにすればよい。２チャネルステレオの音響伝送方式を用いる場合の一例を変形例１として説明し、５．１チャネルサラウンドの音響伝送方式を用いる場合の一例を変形例２として説明する。
提示信号選択部２２５は、例えば、端末装置２００－ｍの映像提示部２２１－ｍの画面上に表示されて利用者の入力を受け付けてその結果を表示する提示信号選択ユーザインタフェース領域を備えていてもよい。利用者による入力は、端末装置２００－ｍに備えらえたマウス、タッチスクリーンであるディスプレイ装置に対するタッチ操作、などの周知の手段で受け付けるようにすればよい。２チャネルステレオの音響伝送方式を用いる場合の一例を変形例１として説明し、５．１チャネルサラウンドの音響伝送方式を用いる場合の一例を変形例２として説明する。
【0108】
＜第２実施形態の変形例１＞
映像提示部２２１－ｍの画面２２１１－ｍには、例えば図２０Ａから図２０Ｃに示すように、映像を表示する領域である映像表示領域２２１２－ｍと、提示信号選択ユーザインタフェース領域２２５１－ｍと、を含む。提示信号選択ユーザインタフェース領域２２５１－ｍには、振動を提示せずに音を提示する状態の表示である図２０Ａと、音と振動の両方を提示する状態の表示である図２０Ｂと、音を提示せずに振動を提示する状態の表示である図２０Ｃと、の間での巡回的な切り替えを行うための「＋」ボタンと「－」ボタンによるメディア群切り替えボタン群２２５２－ｍと、各状態のときに提示する各メディアを表示するメディア表示群２２５３－ｍと、を備える。
映像提示部２２１－ｍの画面２２１１－ｍには、例えば図２０Ａから図２０Ｃに示すように、映像を表示する領域である映像表示領域２２１２－ｍと、提示信号選択ユーザインタフェース領域２２５１－ｍと、を含む。提示信号選択ユーザインタフェース領域２２５１－ｍには、振動を提示せずに音を提示する状態の表示である図２０Ａと、音と振動の両方を提示する状態の表示である図２０Ｂと、音を提示せずに振動を提示する状態の表示である図２０Ｃと、の間での巡回的な切り替えを行うための「＋」ボタンと「－」ボタンによるメディア群切り替えボタン群２２５２－ｍと、各状態のときに提示する各メディアを表示するメディア表示群２２５３－ｍと、を備える。
【0109】
メディア群切り替えボタン群２２５２－ｍは、画面２２１１－ｍが図２０Ａの表示をしている状態で「＋」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ｂの表示をさせ、画面２２１１－ｍが図２０Ｂの表示をしている状態で「＋」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ｃの表示をさせ、画面２２１１－ｍが図２０Ｃの表示をしている状態で「＋」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ａの表示をさせ、画面２２１１－ｍが図２０Ａの表示をしている状態で「－」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ｃの表示をさせ、画面２２１１－ｍが図２０Ｃの表示をしている状態で「－」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ｂの表示をさせ、画面２２１１－ｍが図２０Ｂの表示をしている状態で「－」ボタンの押下を受け付けたときには提示信号選択部２２５が画面２２１１－ｍに図２０Ａの表示をさせる、ように機能するものである。
【0110】
この「＋」ボタンと「－」ボタンによるメディア群切り替えボタン群２２５２－ｍは、所定の音響伝送方式において本来は音響信号用として用意されたチャネルを振動信号用のチャネルとして代用する多地点会議システムの端末装置において、音と振動の提示についての取り得る３通りの組み合わせの間を容易に巡回的に切り替えられるようにしたものである。なお、メディア群切り替えボタン群２２５２－ｍは、上述した「＋」ボタンのみを備えて上述した「－」ボタンを備えないでもよいし、上述した「－」ボタンのみを備えて上述した「＋」ボタンを備えないでもよい。メディア群切り替えボタン群２２５２－ｍは、１つのボタンのみを備える場合には「群」ではないので、メディア群切り替えボタン２２５２－ｍであるといえる。
【0111】
メディア表示群２２５３－ｍは、メディア群切り替えボタン群２２５２－ｍによる選択結果を表示するためのものである。例えば、「映像」と「音L」と「音R」を含む図２０Ａのメディア表示群２２５３－ｍは、映像を提示し音を提示し振動を提示しない状態であることを視認可能とする表示である。図２０Ａの「音L」と「音R」の表示は、音響提示部２２２－ｍが２つのチャネルで音を提示することを意味するものであり、この場合には、例えば、提示信号生成部２２４－ｍは、音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して左チャネル用の音響信号として出力するとともに、音響振動ビット列から振動信号用のチャネルの信号を得て音響提示部２２２－ｍに対して右チャネル用の音響信号として出力し、音響提示部２２２－ｍは、入力された２つのチャネルそれぞれの音響信号に対応する音を提示する。上述したように、受信側装置２２０－ｍが音を提示し振動を提示しない場合には、振動信号用のチャネルの信号はオールゼロの信号または音響信号用のチャネルの信号と同じ音響信号であるので、振動信号用のチャネルの信号に対応する音を提示しても不具合は生じない。
【0112】
また、例えば、「映像」と「音L」と「振動1」を含む図２０Ｂのメディア表示群２２５３－ｍは、映像を提示し音を提示し振動を提示する状態であることを視認可能とする表示である。図２０Ｂの「音L」との表示は、音響提示部２２２－ｍが１つのチャネルの音を提示することを意味するものであり、この場合には、提示信号生成部２２４－ｍは、音響振動ビット列から音響信号用のチャネルの信号を得て音響提示部２２２－ｍに対して音響信号として出力し、音響提示部２２２－ｍは、入力された１つのチャネルの音響信号に対応する音を提示する。図２０Ｂの「振動1」との表示は、音響提示部２２２－ｍが１つのチャネルの振動を提示することを意味するものであり、この場合には、提示信号生成部２２４－ｍは、音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２３－ｍに対して振動信号として出力し、振動提示部２２３－ｍは、入力された１つのチャネルの振動信号に対応する振動を提示する。
【0113】
また、例えば、「映像」と「振動1」と「振動2」を含む図２０Ｃのメディア表示群２２５３－ｍは、映像を提示し音を提示せず振動を提示する状態であることを視認可能とする表示である。図２０Ｃの「振動1」と「振動2」の表示は、振動提示部２２３－ｍが２つのチャネルの振動を提示することを意味するものであり、この場合には、提示信号生成部２２４－ｍは、音響振動ビット列から振動信号用のチャネルの信号を得て振動提示部２２２－ｍに対して第１のチャネルの振動信号として出力するとともに、音響振動ビット列から音響信号用のチャネルの信号を得て振動提示部２２３－ｍに対して第２のチャネルの振動信号として出力し、振動提示部２２３－ｍは、入力された２つのチャネルの振動信号それぞれに対応する振動を提示する。上述したように、受信側装置２２０－ｍが音を提示せず振動を提示する場合には、音響信号用のチャネルの信号はオールゼロの信号または振動信号用のチャネルの信号と同じ振動信号であるので、音響信号用のチャネルの信号に対応する振動を提示しても不具合は生じない。
【0114】
なお、メディア表示群２２５３－ｍは、メディア群切り替えボタン群２２５２－ｍによる選択結果において各メディアや各チャネルを提示するか否かを切り替えるボタンとして機能するものであってもよい。例えば、メディア表示群２２５３－ｍのうちの「映像」との表示は、受信側装置２２０－ｍが映像を提示するか否か、についての利用者による入力を受け付けるボタンとして機能させてもよい。「音L」、「音R」、「振動1」、「振動2」についても同様であり、メディア表示群２２５３－ｍのうちの「音L」、「音R」との表示は、受信側装置２２０－ｍが音を提示するか否か、についての利用者による入力を受け付けるボタンとして機能させてもよく、メディア表示群２２５３－ｍのうちの「振動1」、「振動2」との表示は、受信側装置２２０－ｍが振動を提示するか否か、についての利用者による入力を受け付けるボタンとして機能させてもよい。また例えば、メディア表示群２２５３－ｍのうちの「音L」と「音R」の表示それぞれを、受信側装置２２０－ｍがそれぞれのチャネルで音を提示するか否か、についての利用者による入力を受け付けるボタンとして機能させてもよい。同様に、メディア表示群２２５３－ｍのうちの「振動1」と「振動2」の表示それぞれを、受信側装置２２０－ｍがそれぞれのチャネルで振動を提示するか否か、についての利用者による入力を受け付けるボタンとして機能させてもよい。メディア表示群２２５３－ｍを各メディアや各チャネルを提示するか否かを切り替えるボタンとして機能をさせる場合には、映像を提示する状態であるか否か、音を提示する状態であるか否か、振動を提示する状態であるか否か、を各ボタンの色または／および輝度で表示するとよい。なお、メディア表示群２２５３－ｍは、各メディアや各チャネルを提示するか否かを切り替えるボタンとして機能する場合には、メディアON/OFFボタン群２２５３－ｍであるといえる。
【0115】
＜第２実施形態の変形例２＞
提示信号選択ユーザインタフェース領域２２５１－ｍは、５．１チャネルサラウンドの音響伝送方式を用いる場合も２チャネルステレオの音響伝送方式を用いる場合の変形例１と同様に機能するように、メディア群切り替えボタン群２２５２－ｍまたはメディア群切り替えボタン２２５２－ｍと、メディア表示群２２５３－ｍまたはメディアON/OFFボタン群２２５３－ｍと、を含めばよい。
提示信号選択ユーザインタフェース領域２２５１－ｍは、５．１チャネルサラウンドの音響伝送方式を用いる場合も２チャネルステレオの音響伝送方式を用いる場合の変形例１と同様に機能するように、メディア群切り替えボタン群２２５２－ｍまたはメディア群切り替えボタン２２５２－ｍと、メディア表示群２２５３－ｍまたはメディアON/OFFボタン群２２５３－ｍと、を含めばよい。
【0116】
例えば、図２１Ａから図２１Ｃに示すメディア群切り替えボタン群２２５２－ｍは、音と振動の提示についての取り得る３通りの組み合わせと、振動を提示する場合に振動信号用の４つのチャネルのうちのどのチャネルの振動を提示するのかと、の組み合わせの間を容易に巡回的に切り替えられるようにしたものである。例えば、メディア群切り替えボタン群２２５２－ｍは、画面２２１１－ｍが図２１Ａの表示をしている状態で「＋」ボタンの押下を受け付けたときには図２１Ａのメディア表示群２２５３－ｍに「振動1」を加えた画面を表示させ、図２１Ａのメディア表示群２２５３－ｍに「振動1」を加えた画面をしている状態で「＋」ボタンの押下を受け付けたときには図２１Ｂを表示させ、画面２２１１－ｍが図２１Ｂの表示をしている状態で「＋」ボタンの押下を受け付けたときには図２１Ｂのメディア表示群２２５３－ｍに「振動3」を加えた画面を表示させ、図２１Ｂのメディア表示群２２５３－ｍに「振動3」を加えた画面をしている状態で「＋」ボタンの押下を受け付けたときには図２１Ｃを表示させる、などのように機能するものである。図２１Ａから図２１Ｃに例示するメディア表示群２２５３－ｍは、メディア群切り替えボタン群２２５２－ｍによる選択結果を表示するためのものであり、変形例１のメディア表示群２２５３－ｍと同様である。すなわち、メディア表示群２２５３－ｍを各メディアや各チャネルを提示するか否かを切り替えるボタンとして機能させて、メディアON/OFFボタン群２２５３－ｍとしてもよい。
【0117】
＜第３実施形態＞
第１実施形態と同様に機能する多地点会議システムは、多地点会議制御装置と各端末装置の間に信号を変換する装置を設けることで、参考形態の多地点会議システム１０と同様に１種類の端末向け信号を得て出力する多地点会議制御装置を用いて実現することができる。この形態を第３実施形態として、第１実施形態と異なる点を中心に説明する。
第１実施形態と同様に機能する多地点会議システムは、多地点会議制御装置と各端末装置の間に信号を変換する装置を設けることで、参考形態の多地点会議システム１０と同様に１種類の端末向け信号を得て出力する多地点会議制御装置を用いて実現することができる。この形態を第３実施形態として、第１実施形態と異なる点を中心に説明する。
【0118】
第３実施形態の多地点会議システム１３は、図２２に例示する通り、多地点会議制御装置１０３と触覚対応端末装置２００－ｍと触覚非対応端末装置４００－ｎと信号変換装置６０３－ｎを含む。第３実施形態においては、Ｍは１以上の整数であり、ｍは１以上Ｍ以下の各整数であり、Ｎは１以上の整数であり、ｎはＭ＋１以上Ｍ＋Ｎ以下の各整数である。多地点会議制御装置１０３と各触覚対応端末装置２００－ｍは、通信網の各伝送路３００－ｍを介して接続されている。多地点会議制御装置１０３と各信号変換装置６０３－ｎは、通信網の各伝送路５０１－ｎを介して接続されている。各信号変換装置６０３－ｎと各触覚非対応端末装置４００－ｎは、各伝送路５０２－ｎを介して接続されている。各伝送路５０２－ｎは、通信網の伝送路であることは必須ではなく、同じ地点ｎに配置された信号変換装置６０３－ｎと触覚非対応端末装置４００－ｎを接続するLANなどの伝送路であってもよいし、信号変換装置６０３－ｎと触覚非対応端末装置４００－ｎが一体化された装置の内部にある信号を伝送する経路であってもよい。多地点会議制御装置１０３と各触覚非対応端末装置５００－ｎは、図２２に破線で示すように、通信網の各伝送路５００－ｎを介して接続されていてもよい。
【0119】
［触覚対応端末装置２００－ｍ］
触覚対応端末装置２００－ｍは、第１実施形態の触覚対応端末装置２００－ｍと同様である。ただし、触覚対応送信側装置２１０－ｍは、触覚対応端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０３に対して出力する。また、触覚対応受信側装置２２０－ｎには、多地点会議制御装置１０３から伝送路３００－ｍを介して触覚対応端末向け信号ＳＢが入力される。
触覚対応端末装置２００－ｍは、第１実施形態の触覚対応端末装置２００－ｍと同様である。ただし、触覚対応送信側装置２１０－ｍは、触覚対応端末送出信号ＳＡ－ｍを伝送路３００－ｍを介して多地点会議制御装置１０３に対して出力する。また、触覚対応受信側装置２２０－ｎには、多地点会議制御装置１０３から伝送路３００－ｍを介して触覚対応端末向け信号ＳＢが入力される。
【0120】
［触覚非対応端末装置４００－ｎ］
触覚非対応端末装置４００－ｎは、第１実施形態の触覚非対応端末装置４００－ｎと同様である。ただし、触覚非対応送信側装置４１０－ｎは、触覚非対応端末送出信号ＳＣ－ｎを、伝送路５０２－ｎと信号変換装置６０３－ｎと伝送路５０１－ｎを介して多地点会議制御装置１０３に対して出力するか、信号変換装置６０３－ｎを介さずに伝送路５００－ｎを介して多地点会議制御装置１０３に対して出力する。また、触覚非対応受信側装置４２０－ｎには、信号変換装置６０３－ｎから伝送路５０２－ｎを介して触覚非対応端末向け信号ＳＤが入力される。
触覚非対応端末装置４００－ｎは、第１実施形態の触覚非対応端末装置４００－ｎと同様である。ただし、触覚非対応送信側装置４１０－ｎは、触覚非対応端末送出信号ＳＣ－ｎを、伝送路５０２－ｎと信号変換装置６０３－ｎと伝送路５０１－ｎを介して多地点会議制御装置１０３に対して出力するか、信号変換装置６０３－ｎを介さずに伝送路５００－ｎを介して多地点会議制御装置１０３に対して出力する。また、触覚非対応受信側装置４２０－ｎには、信号変換装置６０３－ｎから伝送路５０２－ｎを介して触覚非対応端末向け信号ＳＤが入力される。
【0121】
［多地点会議制御装置１０３］
多地点会議制御装置１０３は、図２３に例示する通り、会議信号生成部１１３を含む。多地点会議制御装置１０３には、各触覚対応端末装置２００－１～２００－Ｍが出力した触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと、各触覚非対応端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）が出力した触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）と、が入力される。多地点会議制御装置１０３は、所定の時間区間ごとに、図２４に例示するステップＳ１１３の処理を行うことで触覚対応端末向け信号ＳＢを得て出力する。
多地点会議制御装置１０３は、図２３に例示する通り、会議信号生成部１１３を含む。多地点会議制御装置１０３には、各触覚対応端末装置２００－１～２００－Ｍが出力した触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと、各触覚非対応端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）が出力した触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）と、が入力される。多地点会議制御装置１０３は、所定の時間区間ごとに、図２４に例示するステップＳ１１３の処理を行うことで触覚対応端末向け信号ＳＢを得て出力する。
【0122】
［会議信号生成部１１３］
会議信号生成部１１３には、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）が入力される。会議信号生成部１１３は、入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢを得て出力する（ステップＳ１１３）。会議信号生成部１１３が入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢを得る処理は、第１実施形態の会議信号生成部１１１と同様である。また、会議信号生成部１１３は、触覚非対応端末向け信号ＳＤは得ずに出力しない。すなわち、会議信号生成部１１３は、第１実施形態の会議信号生成部１１１と同じステップＳ１１１－１からＳ１１１－６までを行い、第１実施形態の会議信号生成部１１１が行うステップＳ１１１－７とＳ１１１－８は行わない。また、会議信号生成部１１３は、触覚対応端末向け信号ＳＢを、各触覚対応端末装置と各信号変換装置に対して出力する。すなわち、会議信号生成部１１３は、触覚対応端末向け信号ＳＢを、触覚対応端末装置２００－１～２００－Ｍのそれぞれに対して各伝送路３００－１～３００－Ｍを介して出力し、信号変換装置６０３－（Ｍ＋１）～６０３－（Ｍ＋Ｎ）のそれぞれに対して各伝送路５０１－（Ｍ＋１）～５０１－（Ｍ＋Ｎ）を介して出力する。
会議信号生成部１１３には、触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）が入力される。会議信号生成部１１３は、入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢを得て出力する（ステップＳ１１３）。会議信号生成部１１３が入力された触覚対応端末送出信号ＳＡ－１～ＳＡ－Ｍと触覚非対応端末送出信号ＳＣ－（Ｍ＋１）～ＳＣ－（Ｍ＋Ｎ）とから触覚対応端末向け信号ＳＢを得る処理は、第１実施形態の会議信号生成部１１１と同様である。また、会議信号生成部１１３は、触覚非対応端末向け信号ＳＤは得ずに出力しない。すなわち、会議信号生成部１１３は、第１実施形態の会議信号生成部１１１と同じステップＳ１１１－１からＳ１１１－６までを行い、第１実施形態の会議信号生成部１１１が行うステップＳ１１１－７とＳ１１１－８は行わない。また、会議信号生成部１１３は、触覚対応端末向け信号ＳＢを、各触覚対応端末装置と各信号変換装置に対して出力する。すなわち、会議信号生成部１１３は、触覚対応端末向け信号ＳＢを、触覚対応端末装置２００－１～２００－Ｍのそれぞれに対して各伝送路３００－１～３００－Ｍを介して出力し、信号変換装置６０３－（Ｍ＋１）～６０３－（Ｍ＋Ｎ）のそれぞれに対して各伝送路５０１－（Ｍ＋１）～５０１－（Ｍ＋Ｎ）を介して出力する。
【0123】
［信号変換装置６０３－ｎ］
信号変換装置６０３－ｎは、図２５に例示する通り、会議信号変換部６１３－ｎを含む。信号変換装置６０３－ｎには、伝送路５０１－ｎを介して接続された多地点会議制御装置１０３が出力した触覚対応端末向け信号ＳＢが入力される。信号変換装置６０３－ｎは、所定の時間区間ごとに、図２６に例示するステップＳ６１３の処理を行う。
信号変換装置６０３－ｎは、図２５に例示する通り、会議信号変換部６１３－ｎを含む。信号変換装置６０３－ｎには、伝送路５０１－ｎを介して接続された多地点会議制御装置１０３が出力した触覚対応端末向け信号ＳＢが入力される。信号変換装置６０３－ｎは、所定の時間区間ごとに、図２６に例示するステップＳ６１３の処理を行う。
【0124】
会議信号変換部６１３－ｎには、触覚対応端末向け信号ＳＢが入力される。会議信号変換部６１３－ｎは、例えば図２７に示すステップＳ６１３－１からＳ６１３－４の各処理を行うことで、入力された触覚対応端末向け信号ＳＢから触覚非対応端末向け信号ＳＤを得て出力する（ステップＳ６１３）。
【0125】
会議信号変換部６１３－ｎは、触覚対応端末向け信号ＳＢに含まれる音響振動ビット列に含まれる音響信号を取り出す（ステップＳ６１３－１）。会議信号変換部６１３－ｎは、ステップＳ６１３－１を行った後に、ステップ６１３－１で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、オールゼロの信号またはステップＳ６１３－１で得た音響信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成する（ステップＳ６１３－２）。
【0126】
会議信号変換部６１３－ｎは、触覚対応端末向け信号ＳＢに含まれる映像ビット列を取り出す（ステップＳ６１３－３）。会議信号変換部６１３－ｎは、ステップＳ６１３－２とＳ６１３－３を行った後に、ステップ６１３－２で得た音響ビット列とステップ６１３－３で得た映像ビット列を含む触覚非対応端末向け信号ＳＤを得て、対応する触覚非対応端末装置に対して出力する、すなわち、伝送路５０２－ｎを介して接続された触覚対応非端末装置４００－ｎに対して、伝送路５０２－ｎを介して出力する（ステップＳ６１３－４）。
【0127】
なお、伝送路への接続の都合などにより、図２５に破線で示すように、信号変換装置６０３－ｎには、伝送路５０２－ｎを介して接続された触覚非対応端末装置４００－ｎから触覚非対応端末送出信号ＳＣ－ｎが入力されるようにして、入力された触覚非対応端末送出信号ＳＣ－ｎをそのまま伝送路５０１－ｎを介して接続された多地点会議制御装置１０３に対して出力するようにしてもよい。信号変換装置６０３－ｎが触覚非対応端末送出信号ＳＣ－ｎの入力と出力を行わない場合には、信号変換装置６０３－（Ｍ＋１）から６０３－（Ｍ＋Ｎ）は全て同じ処理を行うことから、多地点会議システム１３には、触覚対応非端末装置４００－（Ｍ＋１）～４００－（Ｍ＋Ｎ）それぞれに対応させて信号変換装置６０３－（Ｍ＋１）～６０３－（Ｍ＋Ｎ）を備える必要はなく、複数個の触覚対応非端末装置に対して１つの信号変換装置を備えてもよく、信号変換装置を１つだけ備えてもよい。
【0128】
＜第４実施形態＞
第２実施形態と同様に機能する多地点会議システムは、多地点会議制御装置と各端末装置の間に信号を変換する装置を設けることで、参考形態の多地点会議システム１０と同様に１種類の端末向け信号を得て出力する多地点会議制御装置を用いて実現することができる。この形態を第４実施形態として、第２実施形態と異なる点を中心に、参考形態との異同も適宜用いて、説明する。
第２実施形態と同様に機能する多地点会議システムは、多地点会議制御装置と各端末装置の間に信号を変換する装置を設けることで、参考形態の多地点会議システム１０と同様に１種類の端末向け信号を得て出力する多地点会議制御装置を用いて実現することができる。この形態を第４実施形態として、第２実施形態と異なる点を中心に、参考形態との異同も適宜用いて、説明する。
【0129】
第４実施形態の多地点会議システム１４は、図２８に例示する通り、多地点会議制御装置１００と端末装置２００－ｍと信号変換装置６０４－ｍを含む。第４実施形態においては、Ｍは２以上の整数であり、ｍは１以上Ｍ以下の各整数である。多地点会議制御装置１００と各信号変換装置６０４－ｍは、通信網の各伝送路３０１－ｍを介して接続されている。各信号変換装置６０４－ｍと各端末装置２００－ｍは、各伝送路３０２－ｍを介して接続されている。各伝送路３０２－ｍは、通信網の伝送路であることは必須ではなく、同じ地点ｍに配置された信号変換装置６０４－ｍと端末装置２００－ｍを接続するLANなどの伝送路であってもよいし、信号変換装置６０４－ｍと端末装置２００－ｍが一体化された装置の内部にある信号を伝送する経路であってもよい。多地点会議制御装置１００と各端末装置２００－ｍは、図２８に破線で示すように、通信網の各伝送路３００－ｍを介して接続されていてもよい。
【0130】
［端末装置２００－ｍ］
端末装置２００－ｍは、第２実施形態の端末装置２００－ｍと同様である。ただし、端末装置２００－ｍは、端末送出信号ＳＡ－ｍを、伝送路３０２－ｍと信号変換装置６０４－ｍと伝送路３０１－ｍを介して多地点会議制御装置１００に対して出力するか、信号変換装置６０４－ｍを介さずに伝送路３００－ｍを介して多地点会議制御装置１００に対して出力する。また、端末装置２００－ｍは、対応メディア情報Ｉ－ｍを伝送路３０２－ｍを介して信号変換装置６０４－ｍに対して出力する。また、端末装置２００－ｍには、信号変換装置６０４－ｍから伝送路３０２－ｍを介して端末向け信号ＳＥ－ｍが入力される。
端末装置２００－ｍは、第２実施形態の端末装置２００－ｍと同様である。ただし、端末装置２００－ｍは、端末送出信号ＳＡ－ｍを、伝送路３０２－ｍと信号変換装置６０４－ｍと伝送路３０１－ｍを介して多地点会議制御装置１００に対して出力するか、信号変換装置６０４－ｍを介さずに伝送路３００－ｍを介して多地点会議制御装置１００に対して出力する。また、端末装置２００－ｍは、対応メディア情報Ｉ－ｍを伝送路３０２－ｍを介して信号変換装置６０４－ｍに対して出力する。また、端末装置２００－ｍには、信号変換装置６０４－ｍから伝送路３０２－ｍを介して端末向け信号ＳＥ－ｍが入力される。
【0131】
［多地点会議制御装置１００］
多地点会議制御装置１００は、参考形態の多地点会議制御装置１００と同様である。ただし、多地点会議制御装置１００は、端末向け信号ＳＢを各伝送路３０１－１～３０１－Ｍを介して各信号変換装置６０４－１～６０４－Ｍに対して出力する。すなわち、本実施形態においては、「端末向け信号ＳＢ」は、端末装置向けの信号ではなく信号変換装置向けの信号であることから「信号変換装置向け信号ＳＢ」であるともいえる。
多地点会議制御装置１００は、参考形態の多地点会議制御装置１００と同様である。ただし、多地点会議制御装置１００は、端末向け信号ＳＢを各伝送路３０１－１～３０１－Ｍを介して各信号変換装置６０４－１～６０４－Ｍに対して出力する。すなわち、本実施形態においては、「端末向け信号ＳＢ」は、端末装置向けの信号ではなく信号変換装置向けの信号であることから「信号変換装置向け信号ＳＢ」であるともいえる。
【0132】
［信号変換装置６０４－ｍ］
信号変換装置６０４－ｍは、図２９に例示する通り、会議信号変換部６１４－ｍを含む。信号変換装置６０４－ｍには、多地点会議制御装置１００が出力した端末向け信号ＳＢと、端末装置２００－ｍが出力した対応メディア情報Ｉ－ｍと、が入力される。信号変換装置６０４－ｍは、所定の時間区間ごとに、図１８に例示するステップＳ６１４の処理を行うことで端末向け信号ＳＥ－ｍを得て、端末装置２００－ｍに出力する、すなわち、各伝送路３０１－ｍを介して端末装置２００－ｍに対して出力する。
信号変換装置６０４－ｍは、図２９に例示する通り、会議信号変換部６１４－ｍを含む。信号変換装置６０４－ｍには、多地点会議制御装置１００が出力した端末向け信号ＳＢと、端末装置２００－ｍが出力した対応メディア情報Ｉ－ｍと、が入力される。信号変換装置６０４－ｍは、所定の時間区間ごとに、図１８に例示するステップＳ６１４の処理を行うことで端末向け信号ＳＥ－ｍを得て、端末装置２００－ｍに出力する、すなわち、各伝送路３０１－ｍを介して端末装置２００－ｍに対して出力する。
【0133】
会議信号変換部６１４－ｍには、端末向け信号ＳＢと対応メディア情報Ｉ－ｍが入力される。会議信号変換部６１４－ｍは、例えば下記のステップＳ６１４－ＡからＳ６１４－Ｈのいずれか処理を行うことで、入力された端末向け信号ＳＢから端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４）。
【0134】
（Ａ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、端末向け信号ＳＢをそのまま端末向け信号ＳＥ－ｍとして出力する（ステップＳ６１４－Ａ）。
【0135】
（Ｂ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、下記のステップＳ６１４－Ｂ１からＳ６１４－Ｂ３を行うことで、端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｂ）。
【0136】
会議信号変換部６１４－ｍは、端末向け信号ＳＢに含まれる音響振動ビット列から音響信号用のチャネルの信号である音響信号を得る（ステップＳ６１４－Ｂ１）。会議信号変換部６１４－ｍは、ステップＳ６１４－Ｂ１を行ったあとに、ステップＳ６１４－Ｂ１で得た音響信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、オールゼロの信号またはステップＳ６１４－Ｂ１で得た音響信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である音響ビット列を生成する（ステップＳ６１４－Ｂ２）。会議信号変換部６１４－ｍは、ステップＳ６１４－Ｂ２を行ったあとに、端末向け信号ＳＢに含まれる映像ビット列と、ステップＳ６１４－Ｂ２で得た音響ビット列と、を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｂ３）。
【0137】
（Ｃ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、下記のステップＳ６１４－Ｃ１からＳ６１４－Ｃ３を行うことで、端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｃ）。
【0138】
会議信号変換部６１４－ｍは、端末向け信号ＳＢに含まれる音響振動ビット列から振動信号用のチャネルの信号である振動信号を得る（ステップＳ６１４－Ｃ１）。会議信号変換部６１４－ｍは、ステップＳ６１４－Ｃ１を行ったあとに、オールゼロの信号またはステップＳ６１４－Ｃ１で得た振動信号を所定の音響伝送方式の複数チャネルのうちの予め定めた音響信号用のチャネルに格納し、ステップＳ６１４－Ｃ１で得た振動信号を所定の音響伝送方式の複数チャネルのうちの音響信号用のチャネルとは異なる予め定めた振動信号用のチャネルに格納することで、複数チャネルに対応した所定の音響伝送方式のビット列である振動ビット列を生成する（ステップＳ６１４－Ｃ２）。会議信号変換部６１４－１は、ステップＳ６１４－Ｃ２を行ったあとに、端末向け信号ＳＢに含まれる映像ビット列と、ステップＳ６１４－Ｃ２で得た振動ビット列と、を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｃ３）。
【0139】
（Ｄ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音と振動の両方を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、映像ビット列を含まずに、端末向け信号ＳＢに含まれる音響振動ビット列を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｄ）。
【0140】
（Ｅ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが振動を提示せずに音を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、上述したステップＳ６１４－Ｂ１とＳ６１４－Ｂ２を行い、ステップ６１４－Ｂ２を行ったあとに、映像ビット列を含まずに、ステップＳ６１４－Ｂ２で得た音響ビット列を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｅ）。
【0141】
（Ｆ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音を提示せずに振動を提示する」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、上述したステップＳ６１４－Ｃ１とＳ６１４－Ｃ２を行い、ステップ６１４－Ｃ２を行ったあとに、映像ビット列を含まずに、ステップＳ６１４－Ｃ２で得た振動ビット列を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｆ）。
【0142】
（Ｇ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示する」旨の情報を含む場合には、音響振動ビット列も音響ビット列も振動ビット列も含まずに、端末向け信号ＳＢに含まれる映像ビット列を含む端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｇ）。
【0143】
（Ｈ）会議信号変換部６１４－ｍは、対応メディア情報Ｉ－ｍが「受信側装置２２０－ｍが音も振動も提示しない」旨の情報と「受信側装置２２０－ｍが映像を提示しない」旨の情報を含む場合には、映像ビット列も音響振動ビット列も音響ビット列も振動ビット列も含まない端末向け信号ＳＥ－ｍを得て出力する（ステップＳ６１４－Ｈ）。なお、会議信号変換部６１４－ｍは、端末向け信号ＳＥ－ｍが映像ビット列も音響振動ビット列も音響ビット列も振動ビット列も含まない場合でも、端末向け信号ＳＥ－ｍが映像でも音でも振動でもない情報を含む場合には、端末向け信号ＳＥ－ｍを得て出力する必要があるが、端末向け信号ＳＥ－ｍに含めて送る必要がある情報が無い場合には、端末向け信号ＳＥ－ｍを得ずに出力しないでよい。
【0144】
＜プログラム及び記録媒体＞
上述した各多地点会議制御装置と各端末装置と各信号変換装置との各部の処理をコンピュータにより実現してもよく、この場合は各装置が有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムを図３０に例示するコンピュータ１０００の記憶部１０２０に読み込ませ、演算処理部１０１０、入力部１０３０、出力部１０４０などに動作させることにより、上記各装置における各種の処理機能がコンピュータ上で実現される。
上述した各多地点会議制御装置と各端末装置と各信号変換装置との各部の処理をコンピュータにより実現してもよく、この場合は各装置が有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムを図３０に例示するコンピュータ１０００の記憶部１０２０に読み込ませ、演算処理部１０１０、入力部１０３０、出力部１０４０などに動作させることにより、上記各装置における各種の処理機能がコンピュータ上で実現される。
【0145】
この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体は、例えば、非一時的な記録媒体であり、具体的には、磁気記録装置、光ディスク、等である。
【0146】
また、このプログラムの流通は、例えば、そのプログラムを記録したDVD、CD-ROM等の可搬型記録媒体を販売、譲渡、貸与等することによって行う。さらに、このプログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することにより、このプログラムを流通させる構成としてもよい。
【0147】
このようなプログラムを実行するコンピュータは、例えば、まず、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、一旦、自己の非一時的な記憶装置である補助記録部１０５０に格納する。そして、処理の実行時、このコンピュータは、自己の非一時的な記憶装置である補助記録部１０５０に格納されたプログラムを記憶部１０２０に読み込み、読み込んだプログラムに従った処理を実行する。また、このプログラムの別の実行形態として、コンピュータが可搬型記録媒体から直接プログラムを記憶部１０２０に読み込み、そのプログラムに従った処理を実行することとしてもよく、さらに、このコンピュータにサーバコンピュータからプログラムが転送されるたびに、逐次、受け取ったプログラムに従った処理を実行することとしてもよい。また、サーバコンピュータから、このコンピュータへのプログラムの転送は行わず、その実行指示と結果取得のみによって処理機能を実現する、いわゆるASP（Application Service Provider）型のサービスによって、上述の処理を実行する構成としてもよい。なお、本形態におけるプログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるもの（コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータ等）を含むものとする。
【0148】
また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、本装置を構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。
【0149】
その他、この発明の趣旨を逸脱しない範囲で適宜変更が可能であることはいうまでもない。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
【図30】