知財求人 - 知財ポータルサイト「IP Force」
特許7114908情報処理システム、情報処理装置、情報処理方法、および情報処理プログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-08-01
(45)【発行日】2022-08-09
(54)【発明の名称】情報処理システム、情報処理装置、情報処理方法、および情報処理プログラム
(51)【国際特許分類】
G11B 27/02 20060101AFI20220802BHJP
G10L 19/00 20130101ALI20220802BHJP
G11B 20/10 20060101ALI20220802BHJP
G11B 27/00 20060101ALI20220802BHJP
G10L 15/10 20060101ALI20220802BHJP
G10L 15/04 20130101ALI20220802BHJP
H04N 5/92 20060101ALI20220802BHJP
【ＦＩ】
G11B27/02 A
G10L19/00 312E
G11B20/10 301Z
G11B27/02 H
G11B27/00 D
G10L15/10 200W
G10L15/04 300A
H04N5/92 010
【請求項の数】
14
(21)【出願番号】P 2018007643
(22)【出願日】2018-01-19
(65)【公開番号】P2019128967
(43)【公開日】2019-08-01
【審査請求日】2020-09-16
(73)【特許権者】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(74)【代理人】
【識別番号】100089118
【弁理士】
【氏名又は名称】酒井 宏明
(72)【発明者】
【氏名】佃 友介
(72)【発明者】
【氏名】安中 英邦
【審査官】川中 龍太
(56)【参考文献】
【文献】特開２００８－１４８３２８（ＪＰ，Ａ）
【文献】特開２００７－０６６０１８（ＪＰ，Ａ）
【文献】特開平０８－１１１８５０（ＪＰ，Ａ）
【文献】特開２００９－１１７９８９（ＪＰ，Ａ）
【文献】国際公開第２００７／０３９９９４（ＷＯ，Ａ１）
【文献】特開２０１５－１０９６１２（ＪＰ，Ａ）
【文献】特開２００８－０５４１５０（ＪＰ，Ａ）
【文献】特開２００７－２８２２６８（ＪＰ，Ａ）
【文献】特開２００１－２８３５６９（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ１１Ｂ ２７／００ － ２７／０２
Ｇ１１Ｂ ２０／１０ － ２０／１６
Ｈ０４Ｎ ５／９１ － ５／９８
Ｇ１０Ｌ １５／０４
Ｇ１０Ｌ １５／１０
Ｇ１０Ｌ １９／００
(57)【特許請求の範囲】
【請求項1】
予め設定された認識する対象である要素を含む要素区間に前記要素が時系列に沿って変化する第１の記録データを取得する取得部と、前記第１の記録データの種類に応じた前記要素の活性量の閾値に基づいて、前記第１の記録データの前記要素区間における、再生対象の活性区間を特定する特定部と、
前記第１の記録データの前記活性区間の活性区間データに応じて、前記第１の記録データを再生制御する再生制御部と、
を備え、
前記取得部は、
少なくとも一部が重複する期間に記録された複数の第１の記録データを取得し、
前記特定部は、
複数の前記第１の記録データの各々の種類に応じた前記活性量の前記閾値に基づいて、複数の前記第１の記録データの各々の前記要素区間における前記活性区間を特定し、
前記再生制御部は、
前記第１の記録データに含まれる前記活性区間の活性区間データを、記録時の速度より速い再生速度で再生制御し、
複数の前記第１の記録データの各々の前記活性区間データに応じて、複数の前記第１の記録データを再生制御し、
複数の前記第１の記録データの前記活性区間に、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する前記活性区間の数に応じて、記録タイミングごとに再生速度を調整する、
情報処理システム。
【請求項2】
前記活性量は、前記要素が継続して含まれる継続時間および前記要素の変化量を示し、前記特定部は、
前記要素区間における、前記継続時間および前記変化量の少なくとも一方が各々に対応する前記閾値以上の区間を、前記活性区間として特定する、
請求項１に記載の情報処理システム。
【請求項3】
前記特定部は、前記要素区間における、前記継続時間および前記変化量の少なくとも一方が各々に対応する前記閾値未満の区間を、再生対象外の非活性区間として特定する、
請求項２に記載の情報処理システム。
【請求項4】
前記第１の記録データの種類が音声データである場合、前記変化量は前記要素を示す音量であり、前記第１の記録データの種類が動画像データである場合、前記変化量はフレーム間の画面変化量である、
請求項２または請求項３に記載の情報処理システム。
【請求項5】
前記再生制御部は、記録タイミングが互いに重複する前記活性区間の数が少ないほど、より速い再生速度で、重複する複数の前記活性区間データを再生制御する、
請求項１に記載の情報処理システム。
【請求項6】
前記取得部は、前記要素区間内に、前記要素が静止した静止区間を含む１または複数の第２の記録データを取得し、
前記特定部は、
前記第２の記録データにおける前記要素区間を、前記活性区間として特定し、
前記再生制御部は、
１または複数の前記第１の記録データの各々の前記活性区間データおよび１または複数の前記第２の記録データの前記活性区間の前記活性区間データに応じて、１または複数の前記第１の記録データおよび１または複数前記第２の記録データを再生制御する、
請求項１～請求項５の何れか１項に記載の情報処理システム。
【請求項7】
前記再生制御部は、前記第２の記録データに含まれる前記活性区間について、含まれる前記静止区間の特定の記録タイミングに記録された前記要素を、該静止区間に応じた再生期間、再生制御する、
請求項６に記載の情報処理システム。
【請求項8】
前記再生制御部は、前記第２の記録データに含まれる前記活性区間が、前記静止区間と、記録時の時系列に沿って順番に再生されなければ情報として理解されない性質の区間である変化区間と、の双方を含む場合、前記静止区間を再生制御し、前記変化区間を再生制御の対象外とする、
請求項７に記載の情報処理システム。
【請求項9】
前記再生制御部は、前記第２の記録データに含まれる前記活性区間が、前記静止区間と、記録時の時系列に沿って順番に再生されなければ情報として理解されない性質の区間である変化区間と、の双方を含む場合、前記変化区間を記録時の速度より速い再生速度で再生制御する、
請求項７に記載の情報処理システム。
【請求項10】
前記再生制御部は、前記第１の記録データの前記活性区間と、前記第２の記録データの前記活性区間と、の間に、記録タイミングが互いに重複する重複区間が存在する場合、
該重複区間における、前記第１の記録データの前記活性区間と、前記第２の記録データの前記活性区間における前記変化区間と、の第１重複区間については、前記第１の記録データの前記活性区間データと前記第２の記録データの前記変化区間の変化区間データとが、同じ記録タイミングごとに同じ再生タイミングで、記録時の速度より速い再生速度で再生されるように再生制御し、
該重複区間における、前記第１の記録データの前記活性区間と、前記第２の記録データの前記活性区間における前記静止区間との第２重複区間については、前記第１の記録データにおける前記活性区間の前記活性区間データを、該活性区間データの記録時の速度より速い再生速度で再生制御すると共に、前記第２の記録データにおける前記静止区間の特定の記録タイミングに記録された前記要素を再生制御する、
請求項９に記載の情報処理システム。
【請求項11】
前記要素は、言語を示す音、文字、記号、画像、の少なくとも１つである、請求項１～請求項１０の何れか１項に記載の情報処理システム。
【請求項12】
予め設定された認識する対象である要素を含む要素区間に前記要素が時系列に沿って変化する第１の記録データを取得する取得部と、前記第１の記録データの種類に応じた前記要素の活性量の閾値に基づいて、前記第１の記録データの前記要素区間における、再生対象の活性区間を特定する特定部と、
前記第１の記録データの前記活性区間の活性区間データに応じて、前記第１の記録データを再生制御する再生制御部と、
を備え、
前記取得部は、
少なくとも一部が重複する期間に記録された複数の第１の記録データを取得し、
前記特定部は、
複数の前記第１の記録データの各々の種類に応じた前記活性量の前記閾値に基づいて、複数の前記第１の記録データの各々の前記要素区間における前記活性区間を特定し、
前記再生制御部は、
前記第１の記録データに含まれる前記活性区間の活性区間データを、記録時の速度より速い再生速度で再生制御し、
複数の前記第１の記録データの各々の前記活性区間データに応じて、複数の前記第１の記録データを再生制御し、
複数の前記第１の記録データの前記活性区間に、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する前記活性区間の数に応じて、記録タイミングごとに再生速度を調整する、
情報処理装置。
【請求項13】
予め設定された認識する対象である要素を含む要素区間に前記要素が時系列に沿って変化する第１の記録データを取得する取得ステップと、前記第１の記録データの種類に応じた前記要素の活性量の閾値に基づいて、前記第１の記録データの前記要素区間における、再生対象の活性区間を特定する特定ステップと、
前記第１の記録データの前記活性区間の活性区間データに応じて、前記第１の記録データを再生制御する再生制御ステップと、
を含み、
前記取得ステップは、
少なくとも一部が重複する期間に記録された複数の第１の記録データを取得し、
前記特定ステップは、
複数の前記第１の記録データの各々の種類に応じた前記活性量の前記閾値に基づいて、複数の前記第１の記録データの各々の前記要素区間における前記活性区間を特定し、
前記再生制御ステップは、
前記第１の記録データに含まれる前記活性区間の活性区間データを、記録時の速度より速い再生速度で再生制御し、
複数の前記第１の記録データの各々の前記活性区間データに応じて、複数の前記第１の記録データを再生制御し、
複数の前記第１の記録データの前記活性区間に、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する前記活性区間の数に応じて、記録タイミングごとに再生速度を調整する、
情報処理方法。
【請求項14】
予め設定された認識する対象である要素を含む要素区間に前記要素が時系列に沿って変化する第１の記録データを取得する取得ステップと、前記第１の記録データの種類に応じた前記要素の活性量の閾値に基づいて、前記第１の記録データの前記要素区間における、再生対象の活性区間を特定する特定ステップと、
前記第１の記録データの前記活性区間の活性区間データに応じて、前記第１の記録データを再生制御する再生制御ステップと、
をコンピュータに実行させるための情報処理プログラムであって、
前記取得ステップは、
少なくとも一部が重複する期間に記録された複数の第１の記録データを取得し、
前記特定ステップは、
複数の前記第１の記録データの各々の種類に応じた前記活性量の前記閾値に基づいて、複数の前記第１の記録データの各々の前記要素区間における前記活性区間を特定し、
前記再生制御ステップは、
前記第１の記録データに含まれる前記活性区間の活性区間データを、記録時の速度より速い再生速度で再生制御し、
複数の前記第１の記録データの各々の前記活性区間データに応じて、複数の前記第１の記録データを再生制御し、
複数の前記第１の記録データの前記活性区間に、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する前記活性区間の数に応じて、記録タイミングごとに再生速度を調整する、
情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理システム、情報処理装置、情報処理方法、および情報処理プログラムに関する。
【背景技術】
【0002】
所定期間中に記録された、板書の板書データ、発話された音声の音声データ、表示された表示画面、などの記録データを記録し、後から再生するシステムが知られている。
【0003】
例えば、特許文献１には、記録したホワイトボードの板書の再生を、会議や授業の映像と同期再生させる方法が開示されている。具体的には、特許文献１には、ある描画操作を記録し始めてから一定時間以内に描画操作が終わらない場合には、決められた時間後に操作終了時の状態にすることで、記録した内容を効率的に振り返る方法が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、従来では、再生対象のデータに音声や映像が含まれる場合、効率的な再生を行うことは困難であった。すなわち、従来のように、板書データにあわせて他の記録データの再生を調整する方法を用いると、意味の通じなくなる段階で音声や映像が区切られて省略再生される場合があり、効率的な再生を行う事は出来なかった。すなわち、従来では、記録データを効率的に再生することは困難であった。
【0005】
本発明は、上記に鑑みてなされたものであって、記録データを効率的に再生することを目的とする。
【課題を解決するための手段】
【0006】
上述した課題を解決するために、情報処理システムは、予め設定された認識する対象である要素を含む要素区間に前記要素が時系列に沿って変化する第１の記録データを取得する取得部と、前記第１の記録データの種類に応じた前記要素の活性量の閾値に基づいて、前記第１の記録データの前記要素区間における、再生対象の活性区間を特定する特定部と、前記第１の記録データの前記活性区間の活性区間データに応じて、前記第１の記録データを再生制御する再生制御部と、を備える。前記取得部は、少なくとも一部が重複する期間に記録された複数の第１の記録データを取得し、前記特定部は、複数の前記第１の記録データの各々の種類に応じた前記活性量の前記閾値に基づいて、複数の前記第１の記録データの各々の前記要素区間における前記活性区間を特定する。前記再生制御部は、前記第１の記録データに含まれる前記活性区間の活性区間データを、記録時の速度より速い再生速度で再生制御し、複数の前記第１の記録データの各々の前記活性区間データに応じて、複数の前記第１の記録データを再生制御し、複数の前記第１の記録データの前記活性区間に、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する前記活性区間の数に応じて、記録タイミングごとに再生速度を調整する。
【発明の効果】
【0007】
本発明によれば、記録データを効率的に再生することができる。
【図面の簡単な説明】
【0008】
【発明を実施するための形態】
【0009】
以下、添付図面を参照しながら、本実施の形態の情報処理システム、情報処理装置、情報処理方法、および情報処理プログラムの実施の形態を詳細に説明する。なお、本明細書において、同じ構成および機能を示す部分には、同じ符号を付与し、詳細な説明を省略する場合がある。
【0010】
本実施の形態の情報処理システム、情報処理装置、情報処理方法、および情報処理プログラムの適用対象は、限定されない。例えば、本実施の形態の情報処理システム、および情報処理プログラムは、教育システム、会議システム、などに適用される。
【0011】
図１は、本実施の形態の情報処理システム１０００の構成の一例を示す模式図である。
【0012】
本実施の形態の情報処理システム１０００は、情報処理装置１０と、記録装置１８と、を備える。
【0013】
情報処理装置１０と記録装置１８とは、ネットワーク２０を介して通信可能に接続されている。なお、本実施の形態では、情報処理システム１０００は、複数の記録装置１８を含む場合を説明する。情報処理装置１０、および複数の記録装置１８の少なくとも１つは、無線または有線によりに接続されている。無線により接続する場合、例えば、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、４Ｇ（４ｔｈ Ｇｅｎｅｒａｔｉｏｎ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）などを用いればよい。
【0014】
記録装置１８は、記録データを記録する。記録データは、記録装置１８で記録されたデータである。記録とは、録音、録画、記憶、などを示す。記録データは、例えば、板書データ、動画像データ、静止画像データ、および音声データなどである。板書データは、電子黒板における板書領域の描画内容を、記録タイミング毎に規定したデータである。
【0015】
記録装置１８は、記録データを記録する装置であればよい。本実施の形態では、一例として、記録装置１８が、投影装置１２、電子黒板１４、マイク１６の各々である場合を説明する。
【0016】
投影装置１２は、画像を投影する装置である。投影装置１２は、例えば、プロジェクタである。本実施の形態では、投影装置１２は、ある期間、継続して投影された投影画像を時系列に沿って順次記録し、投影画像の動画像データを記録する。すなわち、投影装置１２は、記録タイミングごとに、投影された投影画像を規定した、動画像データを得る。そして、投影装置１２は、動画像データを、記録データとして情報処理装置１０へ送信する。
【0017】
電子黒板１４は、所定の板書領域に記入された記入軌跡を、時系列にそって順次記録し、板書画像の板書データを記録する。板書画像は、板書領域上の記入内容を示す画像である。すなわち、電子黒板１４は、記録タイミングごとに記入内容を規定した、板書データを得る。そして、電子黒板１４は、板書データを、記録データとして情報処理装置１０へ送信する。
【0018】
マイク１６は、集音可能な範囲の音を、時系列に沿って順次記録し、音声データを記録する。すなわち、マイク１６は、記録タイミングごとの音を規定した、音声データを得る。そして、マイク１６は、音声データを、記録データとして情報処理装置１０へ送信する。
【0019】
なお、図１には、投影装置１２、電子黒板１４、およびマイク１６の各々を１つ示した。しかし、情報処理システム１０００は、投影装置１２、電子黒板１４、およびマイク１６の少なくとも１種を、２つ以上含む構成であってもよい。また、１つの記録装置１８が、投影装置１２の投影機能、電子黒板１４の機能、およびマイク１６の録音機能の少なくとも２つ以上を備えた構成であってもよい。
【0020】
また、投影装置１２、電子黒板１４、およびマイク１６の少なくとも１つの機能を搭載した端末装置を、記録装置１８として用いてもよい。
【0021】
情報処理装置１０は、複数の記録データの再生制御を行う（詳細後述）。情報処理装置１０は、例えば、パーソナルコンピュータなどで実現する。再生とは、画像などの表示、および、音の出力、の少なくとも一方を示す。
【0022】
次に、情報処理装置１０の、ハードウェア構成の一例を説明する。図２は、情報処理装置１０のハードウェア構成の一例を示す模式図である。
【0023】
情報処理装置１０および記録装置１８の各々は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２５と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２６と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２７と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）２８と、通信Ｉ／Ｆ（インターフェース）２４と、外部Ｉ／Ｆ２３と、操作パネル２９と、を備え、バス２１を介して相互に接続されている。
【0024】
ＣＰＵ２５は、情報処理装置１０および記録装置１８の動作を統括的に制御する。ＣＰＵ２５は、ＲＡＭ２７をワークエリアとし、ＲＯＭ２６またはＨＤＤ２８などに格納されたプログラムを実行することで、情報処理装置１０全体の動作を制御し、後述する各種機能部を実現する。
【0025】
ＨＤＤ２８は、プログラムやデータなどを格納する。操作パネル２９は、ユーザの操作に応じた各種の操作入力を受付けるとともに、各種の情報や各種の画像を表示する。
【0026】
本実施の形態では、操作パネル２９は、各種操作指示を受付ける受付機能を実現する操作受付部２９Ａと、各種情報の表示を行う表示機能を実現する表示部２９Ｂと、の双方を一体的に備えたタッチパネルである場合を説明する。しかし、操作パネル２９の構成は、このような構成に限定されない。例えば、操作パネル２９は、操作受付部２９Ａと、表示部２９Ｂと、を別体として構成してもよい。
【0027】
通信Ｉ／Ｆ２４は、ネットワーク２０を介して他の装置や機器と通信するためのインターフェースである。外部Ｉ／Ｆ２３は、スピーカ２３Ａや、記録媒体などの外部メモリなどと通信するためのインターフェースである。スピーカ２３Ａは、音を出力する出力機能を実現する。
【0028】
次に、本実施の形態の情報処理装置１０の機能について、詳細に説明する。
【0029】
図３は、情報処理装置１０の機能的構成例を示すブロック図である。
【0030】
情報処理装置１０は、制御部３０と、通信部３２と、記憶部３４と、再生部３６と、操作部３８と、を備える。通信部３２、記憶部３４、再生部３６、および操作部３８と、制御部３０と、は、データや信号を授受可能に接続されている。
【0031】
通信部３２は、記録装置１８と通信する。
【0032】
情報処理装置１０の通信部３２は、受信機能と送信機能とを有する。通信部３２の受信機能は、記録装置１８から、各種のデータや信号を受信する機能である。通信部３２の送信機能は、記録装置１８へ、各種のデータや信号を送信する機能である。
【0033】
記憶部３４は、各種データを記憶する。記憶部３４は、例えば、ＨＤＤ２８（図２参照）によって実現する。本実施の形態では、記憶部３４は、記録データ管理ＤＢ３４Ａを記憶する。
【0034】
記録データ管理ＤＢ３４Ａは、記録データ４０を管理するためのデータベースである。なお、記録データ管理ＤＢ３４Ａのデータ形式は、データベースに限定されない。記録データ管理ＤＢ３４Ａのデータ形式は、例えば、テーブルであってもよい。
【0035】
図４は、記録データ管理ＤＢ３４Ａのデータ構成の一例を示す模式図である。記録データ管理ＤＢ３４Ａは、装置ＩＤと、記録データ４０と、記録開始タイミングと、記録期間と、を対応付けたものである。
【0036】
装置ＩＤは、記録装置１８の各々を識別するための識別情報である。なお、記録データ管理ＤＢ３４Ａは、装置ＩＤを含まない構成であってもよい。
【0037】
記録データ４０は、記録装置１８の各々で記録された記録データである。記録データ４０は、上述したように、板書データ、動画像データ、静止画像データ、および音声データなどである。
【0038】
図４には、記録データ４０の一例として、音声データＡ、音声データＢ、板書データＡ、静止画像データＢを示した。しかし、記録データ管理ＤＢ３４Ａに登録される記録データ４０は、これらに限定されない。
【0039】
また、記録データ４０のデータ形式は限定されない。例えば、記録データ４０は、ＪＰＧ、ＪＰＥＧ、ＧＩＦ、ＰＮＧ、ＢＭＰ、ＰＤＦ、ＭＰ３、ＷＡＶ、などの何れのデータ形式であってもよい。
【0040】
記録データ管理ＤＢ３４Ａにおける記録開始タイミングは、対応する記録データ４０の記録が開始されたタイミングを示す。
【0041】
なお、本実施の形態では、記録データ４０の記録されたタイミングを、記録タイミングと称して説明する。すなわち、記録開始タイミングは、記録データ４０の記録タイミングの内、記録の開始された記録タイミングを示す。また、本実施の形態では、記録データ４０の記録が終了したタイミングを、記録終了タイミングと称して説明する。
【0042】
記録タイミングは、例えば、年，月，日，時，分，秒（ｙｙｙｙｍｍｄｄ／ｈｈｍｍｓｓ）で表される。なお、記録タイミングは、各記録データ４０の記録されたタイミングを示すものであればよく、ある基準時間からの経過時間などで表してもよい。
【0043】
記録データ管理ＤＢ３４Ａにおける記録期間は、対応する記録データ４０のデータ長を時間で表したものである。
【0044】
記録データ管理ＤＢ３４Ａは、記録装置１８から記録データ４０を受信するごとに、制御部３０によって更新される。すなわち、情報処理装置１０の制御部３０は、記録装置１８から新たな記録データ４０を受信すると、記録データ管理ＤＢ３４Ａに順次登録する。
【0045】
図３に戻り説明を続ける。再生部３６は、記録データ４０を再生する。再生部３６による再生は、制御部３０によって制御される。再生制御については後述する。
【0046】
再生部３６は、表示部３６Ａと、音声出力部３６Ｂと、を備える。表示部３６Ａは、各種画像を表示する。表示部３６Ａは、例えば、ディスプレイである。表示部３６Ａは、例えば、表示部２９Ｂ（図２参照）によって実現する。音声出力部３６Ｂは、音を出力する。音声出力部３６Ｂは、例えば、スピーカである。音声出力部３６Ｂは、例えば、スピーカ２３Ａ（図２参照）によって実現する。
【0047】
操作部３８は、ユーザによる操作指示を受付ける。操作部３８は、例えば、キーボード、マウス、などである。操作部３８は、操作受付部２９Ａによって実現する（図２参照）。
【0048】
次に、情報処理装置１０の制御部３０について説明する。制御部３０は、情報処理装置１０を制御する。制御部３０は、ＣＰＵ２５、ＲＯＭ２６、およびＲＡＭ２７（図２参照）などによって実現する。なお、制御部３０は、回路などによって実現してもよい。
【0049】
制御部３０は、通信制御部３０Ａと、記憶制御部３０Ｂと、取得部３０Ｃと、特定部３０Ｄと、再生制御部３０Ｅと、受付部３０Ｆと、を有する。通信制御部３０Ａ、記憶制御部３０Ｂ、取得部３０Ｃ、特定部３０Ｄ、再生制御部３０Ｅ、および受付部３０Ｆの一部または全ては、例えば、ＣＰＵ２５などのプロセッサ回路にプログラムを実行させること、すなわち、ソフトウェアにより実現してもよいし、ＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）などの専用の処理回路を用いてハードウェアにより実現してもよいし、ソフトウェアおよびハードウェアを併用して実現してもよい。処理回路は、物理的に１つであってもよいし、複数であってもよい。
【0050】
通信制御部３０Ａは、通信部３２による記録装置１８との通信を制御する。本実施の形態では、通信制御部３０Ａは、通信部３２を介して記録装置１８から、記録データ４０を受信する。
【0051】
記憶制御部３０Ｂは、記憶部３４への記憶を制御する。本実施の形態では、記憶制御部３０Ｂは、通信制御部３０Ａが通信部３２を介して記録装置１８から記録データ４０を受信するごとに、受信した記録データ４０を、装置ＩＤ、記録開始タイミング、および記録期間に対応づけて記録データ管理ＤＢ３４Ａへ登録する。
【0052】
なお、装置ＩＤ、記録データ４０の記録開始タイミング、および記録期間は、該記録データ４０の送信元の記録装置１８から記録データ４０と共に受信すればよい。
【0053】
取得部３０Ｃは、記録データ４０を取得する。本実施の形態では、少なくとも一部が重複する期間に記録された、複数の記録データ４０を取得する。記録データ４０は、第１の記録データ４２と、第２の記録データ４４と、に分類される(詳細後述)。
【0054】
本実施の形態では、取得部３０Ｃは、１または複数の第１の記録データ４２を少なくとも取得する。なお、取得部３０Ｃは、１または複数の第１の記録データ４２と、１または複数の第２の記録データ４４と、を取得してもよい。
【0055】
本実施の形態では、取得部３０Ｃは、１または複数の第１の記録データ４２と、１または複数の第２の記録データ４４と、を複数の記録データ４０として取得する場合を、一例として説明する。なお、第１の記録データ４２および第２の記録データ４４を総称して説明する場合には、単に、記録データ４０と称して説明する。
【0056】
本実施の形態では、取得部３０Ｃは、該重複する期間として、再生対象の再生対象期間を用いる。そして、取得部３０Ｃは、再生対象の再生対象期間に記録された、複数の記録データ４０を記録データ管理ＤＢ３４Ａから読取ることによって、複数の記録データ４０を取得する。
【0057】
再生対象期間は、予め設定すればよい。また、取得部３０Ｃは、操作部３８から、再生対象期間を取得し、該再生対象期間を含む期間に記録された複数の記録データ４０を、記憶部３４から読取ってもよい。
【0058】
この場合、例えば、ユーザは、操作部３８を操作することで、再生対象の再生対象期間を入力する。受付部３０Ｆは、操作部３８による操作指示信号を受付ける。受付部３０Ｆは、操作部３８から、再生対象期間を受付けると、取得部３０Ｃへ出力する。取得部３０Ｃは、受付部３０Ｆを介して操作部３８から受付けた再生対象期間を含む期間に記録された、複数の記録データ４０を、記憶部３４から取得する。
【0059】
なお、取得部３０Ｃは、通信制御部３０Ａおよび通信部３２を介して、記録装置１８から直接記録データ４０を取得してもよい。この場合、取得部３０Ｃは、再生対象期間を含む期間に記録された記録データ４０の取得要求信号を、通信制御部３０Ａおよび通信部３２を介して、記録装置１８へ送信すればよい。記録装置１８は、取得要求信号に含まれる再生対象期間を含む期間に記録された記録データ４０を保持している場合、該記録データ４０を、情報処理装置１０へ送信すればよい。これによって、取得部３０Ｃは、再生対象期間を含む期間に記録された、複数の記録データ４０を、記録装置１８から直接取得してもよい。
【0060】
特定部３０Ｄは、取得部３０Ｃで取得した複数の記録データ４０の各々について、要素区間Ｅを特定し、要素区間Ｅにおける少なくとも一部の区間を、活性区間として特定する。
【0061】
【0062】
要素区間Ｅとは、記録データ４０における、意味を成す要素７２を含む区間である。言い換えると、要素区間Ｅとは、記録データ４０の全体の記録期間における、要素７２を含む期間である。
【0063】
要素７２とは、情報伝達において意味を成すものである。要素７２は、具体的には、意味を成すものとして認識されうる、言語を示す音、文字、記号、画像、などである。意味を成す情報として認識されうる画像には、例えば、グラフ、表、物体の画像、などがある。物体の画像は、例えば、人、車、資料、などを示す画像である。
【0064】
まず、特定部３０Ｄは、取得部３０Ｃで取得した複数の記録データ４０の各々を解析し、複数の記録データ４０の各々について、要素７２が含まれる要素区間Ｅを解析する。これによって、特定部３０Ｄは、要素区間Ｅを特定する。
【0065】
例えば、記録データ４０における、ある区間に、単語の組合せによって形成される意味を成す言葉の音声が含まれていたと仮定する。この場合、特定部３０Ｄは、該音声の含まれる区間を、要素区間Ｅとして特定する。
【0066】
また、例えば、記録データ４０におけるある区間に、意味を成す文字を示す要素７２が含まれていたと仮定する。この場合、特定部３０Ｄは、該文字の含まれる区間を、要素区間Ｅとして特定する。また、例えば、記録データ４０が板書データである場合、該記録データ４０が、文字の描かれていないホワイトボードに、順次、文字が描かれていったことを示す記録データ４０であったと仮定する。この場合、特定部３０Ｄは、記録データ４０における、描かれていく文字を含む区間を、要素区間Ｅとして特定する。
【0067】
なお、特定部３０Ｄは、要素７２として認識する対象を、予め設定すればよい。例えば、特定部３０Ｄは、要素７２として認識する対象として、文字、言語、を予め設定すればよい。要素７２として認識する対象は、操作部３８によるユーザの操作指示などによって、適宜、変更可能としてもよい。
【0068】
また、記録データ４０を解析することで、要素７２を特定する方法には、公知の画像処理方法や音声データ解析方法を用いればよい。
【0069】
このようにして、特定部３０Ｄは、記録データ４０における、要素区間Ｅを特定する。特定部３０Ｄによって、例えば、音声で説明中の区間と、黙っている間の区間を分けることができる。
【0070】
ここで、記録データ４０における要素区間Ｅは、上述したように、要素７２を含む区間である。この要素７２は、要素区間Ｅにおいて時系列に沿って変化する場合と、変化せずに固定である場合と、がある。すなわち、要素区間Ｅにおいて、時系列に沿って、要素７２が増加、減少、位置変動、形状変化、などの変化を示す場合と、要素区間Ｅの間、要素７２が同じ形態（形、位置、などが同じ形態）で継続して存在する場合と、がある。
【0071】
本実施の形態では、要素区間Ｅにおける、要素７２が時系列に沿って継続して変化する区間を、変化区間と称して説明する。変化区間は、言い換えると、音声や動画など、記録時の時系列に沿って順番に再生されなければ、情報として理解されない性質の区間である。
【0072】
また、本実施の形態では、要素区間Ｅにおける、要素７２が静止した区間を、静止区間と称して説明する。静止区間は、言い換えると、静止画や板書のように、１つの記録タイミングのみを再生した場合であっても、該区間の情報が理解される性質の区間である。
【0073】
ここで、上述したように、記録データ４０は、第１の記録データ４２と第２の記録データ４４に分類される。
【0074】
第１の記録データ４２は、意味を成す要素７２を含む要素区間Ｅに、要素７２が時系列に沿って変化する記録データ４０である。詳細には、第１の記録データ４２は、要素区間Ｅが、変化区間のみから構成され、要素区間Ｅに静止区間が含まれない、記録データ４０である。
【0075】
第２の記録データ４４は、要素区間Ｅ内に静止区間を含む、記録データ４０である。
【0076】
図６は、第１の記録データ４２および第２の記録データ４４のデータ構成の一例を示す模式図である。
【0077】
図６（Ａ）は、第１の記録データ４２のデータ構成の一例を示す模式図である。第１の記録データ４２に含まれる要素区間Ｅは、変化区間ＥＡである。第１の記録データ４２は、例えば、音声データ、動画像データ、である。
【0078】
図６（Ｂ）および図６（Ｃ）は、第２の記録データ４４のデータ構成の一例を示す模式図である。第２の記録データ４４に含まれる要素区間Ｅは、静止区間ＥＢを含む。本実施の形態では、第２の記録データ４４を、第２の記録データ４４Ａと第２の記録データ４４Ｂとに分類して説明する。
【0079】
図６（Ｂ）に示すように、第２の記録データ４４Ａの要素区間Ｅは、変化区間ＥＡと静止区間ＥＢとから構成される。なお、第２の記録データ４４Ａの要素区間Ｅは、変化区間ＥＡと静止区間ＥＢとから構成されていればよく、１つの要素区間Ｅに含まれる変化区間ＥＡおよび静止区間ＥＢの数、および、１つの要素区間Ｅにおける変化区間ＥＡと静止区間ＥＢとの位置関係は、限定されない。
【0080】
例えば、第２の記録データ４４Ａの要素区間Ｅは、変化区間ＥＡより後の記録タイミングに静止区間ＥＢの配置された構成であってもよい。また、例えば、第２の記録データ４４Ａの要素区間Ｅは、変化区間ＥＡ、静止区間ＥＢ、および変化区間ＥＡ、をこの順に時系列に配置した構成であってもよい。また、第２の記録データ４４Ａの要素区間Ｅは、静止区間ＥＢおよび変化区間ＥＡを、この順に時系列に配置した構成であってもよい。第２の記録データ４４Ａは、例えば、板書データ、動画像データ、である。
【0081】
図６（Ｃ）に示すように、第２の記録データ４４Ｂの要素区間Ｅは、静止区間ＥＢである。また、第２の記録データ４４Ｂは、例えば、静止画像データである。
【0082】
特定部３０Ｄは、記録データ４０の要素区間Ｅにおける、活性区間を特定する。
【0083】
活性区間とは、記録データ４０における、再生対象の区間を示す。言い換えると、活性区間は、記録データ４０における、意味を成す要素７２を含む要素区間Ｅにおける、再生対象の区間を示す。
【0084】
すなわち、特定部３０Ｄは、記録データ４０における、要素区間Ｅの少なくとも一部の区間を、再生対象の活性区間として特定する。
【0085】
本実施の形態では、特定部３０Ｄは、第１の記録データ４２と第２の記録データ４４で、異なる手法を用いて、活性区間を特定する。
【0086】
まず、第１の記録データ４２における活性区間の特定方法を説明する。
【0087】
特定部３０Ｄは、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２の要素区間Ｅにおける活性区間Ｐを特定する。
【0088】
第１の記録データ４２の種類は、例えば、音声データ、動画像データ、である。なお、第１の記録データ４２は、上述したように、要素区間Ｅが変化区間ＥＡである記録データ４０であればよく、第１の記録データ４２の種類は、これらに限定されない。本実施の形態では、一例として、第１の記録データ４２の種類は、音声データ、動画像データ、である場合を説明する。
【0089】
活性量は、要素７２が継続して含まれる継続時間および要素７２の変化量を示す。継続時間は、要素７２が継続して含まれる時間を示す。
【0090】
変化量は、要素７２が変化する量を示す。具体的には、第１の記録データ４２の種類が音声データである場合、変化量は、要素７２を示す音量である。この場合、変化量は、例えば、下記式（１）で表される。
【0091】
変化量＝時間ｔの音量－０ ・・・式（１）
【0092】
なお、音量は、音の大きさを示す物理量で表されればよく、音量の単位は、Ｐａ（音圧）、ｄＢ（音の強さレベル）、ｐｈｏｎ（音の大きさレベル）、ｓｏｎｅ（音の大きさ）の何れであってもよい。
【0093】
また、第１の記録データ４２の種類が動画像データである場合、変化量は、フレーム間の画面変化量である。画面変化量は、例えば、含まれる要素７２の少なくとも一部に変化の発生し始めた時間（変化開始時間と称する）に撮影されたフレームを基準フレームとし、該基準フレームと、変化開始時間より後の記録タイミングに撮影されたフレームと、の差分を示す。第１の記録データ４２の種類が動画像データである場合、変化量は、下記式（２）で表される。
【0094】
変化量＝変化開始時のフレームと時間ｔのフレームとの間で差分を示すピクセル数／１フレームのピクセル数 ・・・式（２）
【0095】
特定部３０Ｄは、第１の記録データ４２の種類ごとに、継続時間および変化量の各々の閾値を予め定める。
【0096】
例えば、第１の記録データ４２の種類が音声データである場合、継続時間の閾値は、例えば、５００ｍｓである。５００ｍｓは、「あ」や「え」などの間投詞よりも長い継続時間の一例である。
【0097】
また、第１の記録データ４２の種類が音声データである場合、変化量の閾値は、例えば、６０ｄｂである。６０ｄｂは、普通の会話の音の大きさの一例である。
【0098】
また、例えば、第１の記録データ４２の種類が動画像データである場合、継続時間の閾値は、例えば、６６ｍｓである。６０ｍｓは、一般的な動画像のフレームレート３０ｆｐｓにおいて、２フレーム以上の数、含まれる要素７２が変化したときの継続時間を示す。２フレーム以上のフレームにおいて含まれる要素７２が継続して変化すると、ユーザによって要素７２の変化が認識可能となる。
【0099】
また、第２の記録データ４４の種類が動画像データである場合、変化量の閾値は、例えば、０．０３である。０．０３は、マウスのポインタの変化などを省いた、画面変化の閾値の一例である。
【0100】
なお、第１の記録データ４２の種類ごとの上記閾値は、予め定めればよいが、ユーザによる操作部３８の操作指示などによって、適宜変更可能としてもよい。
【0101】
特定部３０Ｄは、第１の記録データ４２に含まれる要素区間Ｅにおける、継続時間および変化量の少なくとも一方が、各々に対応する閾値以上の区間を、活性区間として特定する。
【0102】
本実施の形態では、特定部３０Ｄは、第１の記録データ４２に含まれる要素区間Ｅにおける、継続時間および変化量の双方が、各々に対応する閾値以上の区間を、再生対象の活性区間として特定する場合を説明する。なお、特定部３０Ｄは、第１の記録データ４２に含まれる要素区間Ｅにおける、継続時間または変化量が、各々に対応する閾値以上の区間を、活性区間として特定してもよい。
【0103】
図７は、第１の記録データ４２における活性区間Ｐの特定の一例の説明図である。
【0104】
例えば、第１の記録データ４２の種類が動画像データであり、継続時間の閾値がＳ１、変化量の閾値がＳ２、であったと仮定する。また、第１の記録データ４２には、要素区間Ｅ１～要素区間Ｅ３の３つの要素区間Ｅが含まれていたと仮定する。
【0105】
図７に示す例では、第１の記録データ４２に含まれる要素区間Ｅ（要素区間Ｅ１～要素区間Ｅ３）の内、要素区間Ｅ１は、変化量が閾値Ｓ２以上であるが継続時間は閾値Ｓ１未満である。要素区間Ｅ１は、第１の記録データ４２が音声データである場合、例えば、物体の落下音や、ペンのノック音、「あ」「え」等の短い発話、などの要素７２を含む区間である。また、第１の記録データ４２が動画像データである場合、要素区間Ｅ１は、例えば、一瞬だけフレームが真っ黒になった区間などである。
【0106】
要素区間Ｅ２は、変化量が閾値Ｓ２以上であり、継続時間も閾値Ｓ１以上である。要素区間Ｅ２は、例えば、記録した内容を効率的に振り返ることが要求される区間である。
【0107】
要素区間Ｅ３は、変化量が閾値Ｓ２未満であり、継続時間は閾値Ｓ１以上である。要素区間Ｅ３は、第１の記録データ４２が音声データである場合、例えば、ユーザの独り言や、物体をたたく音、等の要素７２を含む区間である。また、要素区間Ｅ３は、第１の記録データ４２が動画像データである場合、例えば、画面上を移動するポインタなどの要素７２を含む区間である。
【0108】
図７に示す第１の記録データ４２の場合、特定部３０Ｄは、第１の記録データ４２に含まれる要素区間Ｅ（要素区間Ｅ１～要素区間Ｅ３）の内、要素区間Ｅ３を、活性区間Ｐとして特定する。
【0109】
そして、特定部３０Ｄは、要素区間Ｅにおける、継続時間および変化量の少なくとも一方が各々に対応する閾値Ｓ（Ｓ１、Ｓ２）未満の区間を、再生対象外の非活性区間Ｑとして特定する。図７に示す例の場合、特定部３０Ｄは、要素区間Ｅ（要素区間Ｅ１～要素区間Ｅ３）の内、要素区間Ｅ１および要素区間Ｅ３を、非活性区間Ｑとして特定する。
【0110】
一方、第２の記録データ４４については、特定部３０Ｄは、第２の記録データ４４における要素区間Ｅを、活性区間Ｐとして特定する。
【0111】
図８は、記録データ４０における、活性区間Ｐおよび非活性区間Ｑの一例の説明図である。
【0112】
図８（Ａ）は、第１の記録データ４２における活性区間Ｐと非活性区間Ｑの一例の説明図である。上記処理によって、特定部３０Ｄは、第１の記録データ４２における、変化区間ＥＡである要素区間Ｅの内、要素７２の活性量が上記閾値以上の区間を、活性区間Ｐとして特定する。また、特定部３０Ｄは、第１の記録データ４２における、要素区間Ｅ以外の区間Ｑ１と、要素区間Ｅにおける活性区間Ｐ以外の区間Ｑ２と、を非活性区間Ｑとして特定する。
【0113】
図８（Ｂ）は、第２の記録データ４４Ａにおける、活性区間Ｐと非活性区間Ｑの一例の説明図である。上記処理によって、特定部３０Ｄは、第２の記録データ４４Ａにおける、変化区間ＥＡと静止区間ＥＢを含む要素区間Ｅの全区間を、活性区間Ｐとして特定する。そして、特定部３０Ｄは、第２の記録データ４４Ａにおける、要素区間Ｅ以外の区間Ｑを、非活性区間Ｑとして特定する。
【0114】
図８（Ｃ）は、第２の記録データ４４Ｂにおける、活性区間Ｐと非活性区間Ｑの一例の説明図である。上記処理によって、特定部３０Ｄは、第２の記録データ４４Ｂにおける、静止区間ＥＢからなる要素区間Ｅの全区間を、活性区間Ｐとして特定する。そして、特定部３０Ｄは、第２の記録データ４４Ｂにおける、要素区間Ｅ以外の区間Ｑを、非活性区間Ｑとして特定する。
【0115】
以下では、記録データ４０における、活性区間Ｐのデータを、活性区間データ８０と称して説明する。すなわち、活性区間データ８０は、記録データ４０における、特定部３０Ｄによって特定された、一部の区間のデータである。
【0116】
図３に戻り、説明を続ける。次に、再生制御部３０Ｅについて説明する。
【0117】
再生制御部３０Ｅは、取得部３０Ｃで取得した、複数の記録データ４０の各々の活性区間Ｐの活性区間データ８０に応じて、複数の記録データ４０を再生制御する。
【0118】
取得部３０Ｃが、記録データ４０として複数の第１の記録データ４２を取得した場合、再生制御部３０Ｅは、複数の第１の記録データ４２の各々の活性区間Ｐの活性区間データ８０に応じて、複数の第１の記録データ４２を再生制御する。また、取得部３０Ｃが、記録データ４０として、第１の記録データ４２と第２の記録データ４４の双方を取得した場合、再生制御部３０Ｅは、複数の第１の記録データ４２の各々の活性区間データ８０、および、第２の記録データ４４の活性区間Ｐの活性区間データ８０に応じて、複数の第１の記録データ４２および第２の記録データ４４を再生制御する。
【0119】
本実施の形態では、再生制御部３０Ｅは、記録データ４０の各々について、特定部３０Ｄによって特定された活性区間データ８０を再生し、非活性区間Ｑについては再生対象外とする。
【0120】
このため、取得部３０Ｃで取得した複数の記録データ４０が、板書データ、議論の音声や表示された資料を撮影した動画像データ、音声データ、などの複数種類の記録データ４０である場合であっても、意味不明の箇所で省略再生されることが抑制され、意味を成す区間が効率的に再生される。
【0121】
また、本実施の形態では、特定部３０Ｄが、第１の記録データ４２については、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２に含まれる要素区間Ｅにおける、再生対象の活性区間Ｐを特定する。
【0122】
このため、本実施の形態の情報処理装置１０では、含まれる要素区間Ｅが、要素７２が時系列に沿って継続して変化する変化区間ＥＡである第１の記録データ４２について、要素区間Ｅに含まれる、効率的な再生を阻害する区間を再生対象外とする。
【0123】
効率的な再生を阻害する区間とは、第１の記録データ４２が音声データである場合には「あ」や「え」などのようなほぼ意味を持たない短い発話、ユーザの独り言、物体をたたく音などである。また、効率的な再生を阻害する区間とは、第１の記録データ４２が動画像データである場合には、一瞬だけフレームが真っ黒になった区間や、画面上を移動するポインタを含む区間など、目視では確認し難い画面変化を示す区間である。
【0124】
よって、本実施の形態の情報処理装置１０では、効率的な再生に適した区間を、再生対象の活性区間Ｐとすることができる。
【0125】
次に、再生制御部３０Ｅによる記録データ４０の再生制御について、詳細に説明する。本実施の形態では、再生制御部３０Ｅは、記録データ４０を再生するように再生装置を制御する。具体的には、再生制御部３０Ｅは、記録データ４０に含まれる活性区間データ８０を再生するように、再生装置を制御する（詳細後述）。
【0126】
記録データ４０を再生する再生装置には、情報処理装置１０に搭載された再生部３６や、情報処理装置１０の外部に設置された再生装置２２を用いればよい。
【0127】
再生装置２２は、音や画像を再生する装置である。再生装置２２は、表示部２２Ａと、音声出力部２２Ｂと、通信部２２Ｃと、を備える。表示部２２Ａは、各種画像を表示する。表示部２２Ａは、例えば、ディスプレイである。音声出力部２２Ｂは、音を出力する。音声出力部２２Ｂは、例えば、スピーカである。通信部２２Ｃは、情報処理装置１０と通信する。
【0128】
情報処理装置１０と再生装置２２とは、データや信号を授受可能に、ケーブルを介して直接接続されている。なお、情報処理装置１０と再生装置２２とは、ネットワーク２０を介して通信可能に接続されていてもよい。そして、通信部３２を、記録装置１８や再生装置２２と通信する構成とすればよい。
【0129】
なお、本実施の形態では、再生制御部３０Ｅは、再生部３６を再生制御する形態を一例として説明する。
【0130】
また、本実施の形態では、再生制御部３０Ｅは、ストリーミング再生するように、再生部３６を制御する場合を一例として説明する。
【0131】
すなわち、本実施の形態では、再生制御部３０Ｅは、取得部３０Ｃで取得した複数の記録データ４０について、記録タイミングに沿って順に、活性区間Ｐの活性区間データ８０を読取りながら、読取った活性区間データ８０を再生するように、再生部３６を再生制御する場合を一例として説明する。
【0132】
再生制御部３０Ｅは、取得部３０Ｃで取得した、複数の記録データ４０の各々の活性区間データ８０が、記録タイミングに応じた再生タイミングで再生されるように再生制御する。すなわち、再生制御部３０Ｅは、記録タイミングに沿って、複数の記録データ４０を解析し、何れか１つの記録データ４０の活性区間Ｐの現れた記録タイミングの各々を、再生対象とし、再生制御を行う。
【0133】
具体的には、再生制御部３０Ｅは、取得部３０Ｃで取得した、複数の記録データ４０の各々の活性区間データ８０が、同じ記録タイミングごとに、該記録タイミングに応じた同じ再生タイミングで再生されるように、再生制御する。
【0134】
すなわち、取得部３０Ｃで取得した再生対象期間における、単独の記録データ４０の活性区間Ｐのみが出現する区間（非重複区間）については、該記録データ４０の活性区間Ｐの活性区間データ８０のみが、記録タイミングに応じた再生タイミングで再生制御される。
【0135】
一方、取得部３０Ｃで取得した再生対象期間において、複数の記録データ４０の活性区間Ｐが重複する区間（重複区間）については、重複する複数の活性区間Ｐの活性区間データ８０が、記録タイミングごとに同じ再生タイミングで再生制御される。
【0136】
図３に戻り説明を続ける。再生制御部３０Ｅは、第１の記録データ４２に含まれる活性区間Ｐの活性区間データ８０については、該活性区間Ｐの記録時の速度より速い再生速度で再生するように、再生制御する。
【0137】
このため、例えば、第１の記録データ４２に含まれる活性区間Ｐの活性区間データ８０が、何等かの音声を示す音声データである場合、再生制御部３０Ｅは、該活性区間Ｐの音声データを、記録時の速度より速い再生速度で再生制御する。また、第１の記録データ４２に含まれる活性区間Ｐの活性区間データ８０が、動画像データである場合、再生制御部３０Ｅは、該活性区間Ｐの動画像データを、記録時の速度より速い再生速度で再生制御する。
【0138】
上述したように、第１の記録データ４２における活性区間Ｐでは、要素７２が時系列に沿って継続して変化する。また、変化区間ＥＡは、記録時の時系列に沿って順番に再生されなければ、情報として理解されない性質の区間である。このため、変化区間ＥＡについては、記録された記録タイミングの時系列順に再生されれば、記録時の再生速度より速い再生速度で再生しても、意味が通じる状態で再生の成される可能性が高い。
【0139】
このため、再生制御部３０Ｅが、第１の記録データ４２に含まれる活性区間Ｐ（変化区間ＥＡ）の活性区間データ８０については、該活性区間Ｐの記録時の速度より速い再生速度で再生するように、再生制御する。これによって、再生制御部３０Ｅは、複数の記録データ４０を効率的に再生することができる。また、再生時間の短縮を図ることもできる。
【0140】
なお、再生制御部３０Ｅは、第１の記録データ４２に含まれる活性区間Ｐの活性区間データ８０については、記録時の速度より速い再生速度で再生すればよく、その再生速度は限定されない。例えば、再生制御部３０Ｅは、該記録時の速度より速い再生速度で、且つ、該活性区間Ｐに含まれる要素７２が人によって認識可能な程度の再生速度で、再生制御すればよい。再生速度は、予め設定してもよいし、ユーザによる操作部３８の操作指示によって変更可能としてもよい。
【0141】
また、再生制御部３０Ｅは、複数の第１の記録データ４２の活性区間Ｐに、記録タイミングが互いに重複する重複区間が存在する場合、記録タイミングが重複する活性区間Ｐの数に応じて、記録タイミングごとに再生速度を調整してもよい。例えば、再生制御部３０Ｅは、重複する活性区間Ｐの数が少ないほど、より速い再生速度で、重複する複数の活性区間データ８０を再生制御する。
【0142】
一方、再生制御部３０Ｅは、第２の記録データ４４に含まれる活性区間Ｐについては、含まれる静止区間ＥＢの特定の記録タイミングに記録された要素７２を、該静止区間ＥＢに応じた再生期間、再生制御する。
【0143】
特定の記録タイミングは、例えば、静止区間ＥＢにおける最初の記録タイミングを示す。なお、特定の記録タイミングは、静止区間ＥＢにおける１つの記録タイミングであればよく、最初の記録タイミングに限定されない。但し、再生制御のしやすさの観点から、静止区間ＥＢにおける最初の記録タイミングを、特定の記録タイミングとして用いることが好ましい。
【0144】
このため、第２の記録データ４４が静止画像データである場合、活性区間Ｐ（静止区間ＥＢ）における最初の記録タイミングに対応するフレームに含まれる要素７２が、該活性区間Ｐに応じた再生期間、継続して表示される。このため、第２の記録データ４４における活性区間Ｐを構成する、複数の記録タイミングの各々に対応するフレームの内、１つのフレームに含まれる要素７２のみを用いて再生制御が行われることとなる。
【0145】
上述したように、静止区間ＥＢは、要素７２が所定時間以上停止する区間である。このため、該区間における１つの記録タイミングにおいて記録された要素７２を再生すれば、該静止区間ＥＢに記録された全内容の意味が把握可能である可能性が高い。このため、再生制御部３０Ｅが、第２の記録データ４４に含まれる活性区間Ｐ（静止区間ＥＢ）については、含まれる静止区間ＥＢの特定の記録タイミングに記録された要素７２を、該静止区間ＥＢに応じた再生期間、再生制御することによって、活性区間Ｐの種類に応じて、複数の記録データ４０を更に効率的に再生することができる。
【0146】
なお、第２の記録データ４４に含まれる活性区間Ｐが、静止区間ＥＢと変化区間ＥＡの双方を含む場合（図８（Ｃ）の第２の記録データ４４Ｂ参照）、再生制御部３０Ｅは、静止区間ＥＢのみを上記と同様にして再生制御し、変化区間ＥＡについては再生制御の対象外としてもよい。
【0147】
これによって、再生制御部３０Ｅは、例えば、単独で板書などが記載されている途中の変化区間ＥＡを再生対象外とし、記載の終わった状態の板書を示す静止区間ＥＢを再生対象とすることができる。また、これにより、再生時間の短縮を図ることができる。
【0148】
また、再生制御部３０Ｅは、第２の記録データ４４に含まれる活性区間Ｐが、静止区間ＥＢと変化区間ＥＡの双方を含む場合（図８（Ｂ）の第２の記録データ４４Ａ参照）、変化区間ＥＡについては記録時の速度より速い再生速度で再生制御してもよい。そして、再生制御部３０Ｅは、活性区間Ｐにおける静止区間ＥＢについては、上記と同様に、特定の記録タイミングに記録された要素７２を該静止区間ＥＢに応じた再生期間、再生制御してもよい。
【0149】
また、第１の記録データ４２の活性区間Ｐと、第２の記録データ４４の活性区間Ｐと、の間に、記録タイミングが互いに重複する重複区間が存在する場合がある。この場合、再生制御部３０Ｅは、以下の再生制御を行うことが好ましい。
【0150】
具体的には、再生制御部３０Ｅは、該重複区間における、第１の記録データ４２の活性区間Ｐと、第２の記録データ４４の活性区間Ｐにおける変化区間ＥＡと、の第１重複区間については、第１の記録データ４２の活性区間データ８０と第２の記録データ４４の変化区間ＥＡの変化区間データとが、同じ記録タイミングごとに同じ再生タイミングで、記録時の速度より速い再生速度で再生されるように再生制御する。
【0151】
そして、再生制御部３０Ｅは、該重複区間における、第１の記録データ４２の活性区間Ｐと、第２の記録データ４４の活性区間Ｐにおける静止区間ＥＢとの第２重複区間については、第１の記録データ４２における活性区間Ｐの活性区間データ８０を、該活性区間データ８０の記録時の速度より速い再生速度で再生制御すると共に、第２の記録データ４４における静止区間ＥＢの特定の記録タイミングに記録された要素７２を再生制御する。
【0152】
再生制御部３０Ｅによる再生制御について、説明図を用いて具体的に説明する。
【0153】
図９は、再生制御部３０Ｅによる再生制御の一例を示す、説明図である。
【0154】
例えば、ある会議において、複数の音声データ（第１の記録データ４２Ａ、第１の記録データ４２Ｂ）と、板書データ（第２の記録データ４４Ａ）と、静止画像データ（第２の記録データ４４Ｂ）と、が記録されたと仮定する。そして、これらの記録データ４０について、再生制御する場合を説明する。なお、図９中、矢印Ｔは、記録タイミングの時間の流れを示す。
【0155】
第１の記録データ４２Ａは、記録タイミングｔ１～ｔ３の活性区間Ｐと、記録タイミングｔ１５～ｔ１６の活性区間Ｐと、を含む。記録タイミングｔ１～ｔ３の活性区間Ｐには、要素７２として、要素７２ａ１である音声「問題です」と、要素７２ａ２である音声「始めます」と、が時系列にそって異なる記録タイミングで記録されている。記録タイミングｔ１５～ｔ１６の活性区間Ｐには、要素７２として、要素７２ａ３である音声「終了します」が記録されている。
【0156】
第１の記録データ４２Ｂは、記録タイミングｔ２～ｔ４、ｔ６～ｔ７、ｔ９～ｔ１０、ｔ１２～ｔ１３、の各々の活性区間Ｐを含む。第１の記録データ４２Ｂの複数の活性区間Ｐには、それぞれ、要素７２ｂ１である音声「メモして下さい」および要素７２ｂ２である音声「始め」、要素７２ｂ３である音声「ここは注意して」、要素７２ｂ４である音声「いいですよ」、要素７２ｂ５である音声「分かりましたか」、が記録されていたと仮定する。
【0157】
第２の記録データ４４Ａは、記録タイミングｔ６～ｔ１１の活性区間Ｐを含む。第２の記録データ４４Ａの活性区間Ｐは、記録タイミングｔ６～ｔ８の変化区間ＥＡと、記録タイミングｔ８～ｔ１１の静止区間ＥＢと、から構成されている。
【0158】
また、第２の記録データ４４Ａにおける、記録タイミングｔ６～ｔ８の変化区間ＥＡは、変化区間データ８１から構成されている。変化区間データ８１は、文字としての要素７２（要素７２ｃ１である文字「Ｄ＿」、要素７２ｃ２である文字「１」、要素７２ｃ３である文字「ＣＣＡ」）が順次追加記載されていく状態を示す、複数のフレーム８１Ｃ１～８１Ｃｎからなる。第２の記録データ４４Ａにおける、記録タイミングｔ８～ｔ１１の静止区間ＥＢは、複数のフレーム８１Ｄからなる活性区間データ８０から構成されている。これらの複数のフレーム８１Ｄの各々は、同じ要素７２（要素７２ｃ１である文字「Ｄ＿」、要素７２ｃ２である文字「１」、要素７２ｃ３である文字「ＣＣＡ」）を含む、同じフレームである。
【0159】
第２の記録データ４４Ｂは、記録タイミングｔ５～ｔ１４の活性区間Ｐを含む。第２の記録データ４４Ｂの活性区間Ｐは、静止区間ＥＢである。第２の記録データ４４Ｂにおける、記録タイミングｔ５～ｔ１４の静止区間ＥＢは、同じ要素７２（要素７２ｄ１である文字「Ａ＋Ｂ」）を含む、複数の同じフレームから構成されている。
【0160】
これらの複数の記録データ４０（第１の記録データ４２Ａ、第１の記録データ４２Ｂ、第２の記録データ４４Ａ、第２の記録データ４４Ｂ）について、再生制御部３０Ｅは、以下の再生制御を行う。
【0161】
【0162】
なお、記録タイミングのスケールおよびタイミングと、再生タイミングのスケールおよびタイミングと、は完全に一致していなくてもよい。すなわち、記録タイミングに応じたい再生タイミングとは、対応するタイミングであればよく、同一の時刻に限定されない。また、複数の記録タイミングによって示される区間の時間的な長さと、対応する複数の再生タイミングによって示される区間の時間的な長さと、は、同じであってもよいし、異なっていてもよい。
【0163】
再生制御部３０Ｅの再生制御について、具体的に説明する。
【0164】
再生制御部３０Ｅは、これらの複数の記録データ４０について、記録タイミングの時間の流れ（矢印Ｔ方向参照）の上流側から下流側に向かって、順に、未再生の活性区間Ｐを特定する。このとき、再生制御部３０Ｅは、未再生で且つ最も記録タイミングの早い活性区間Ｐを、順次特定する。
【0165】
図９に示す場合、再生制御部３０Ｅは、まず、未再生の活性区間Ｐの内、最も記録タイミングの早い、第１の記録データ４２Ａにおける記録タイミングｔ１～ｔ３の活性区間Ｐを特定する。そして、再生制御部３０Ｅは、該活性区間Ｐに含まれる、要素７２ａ１である音声「問題です」と、要素７２ａ２である音声「始めます」と、をこれらの要素７２の各々の記録タイミングに応じた再生タイミングＳ１～Ｓ２、再生タイミングＳ２～Ｓ３の各々で、記録時の速度より速い再生速度で再生するように、再生部３６を制御する。
【0166】
なお、記録タイミングｔ１～ｔ３の活性区間Ｐの内、記録タイミングｔ１～ｔ２の区間Ｔａは、他の記録データ４０における活性区間Ｐと非重複な非重複区間である。
【0167】
このため、この区間Ｔａに応じた再生タイミング（再生タイミングＳ１～Ｓ２の区間）においては、再生制御部３０Ｅは、第１の記録データ４２Ａにおけるこの区間Ｔａに含まれる要素７２ａ１である音声「問題です」を、単独で、対応する再生タイミングＳ１～Ｓ２に、記録時の速度より速い再生速度で再生するように、再生部３６を制御する。
【0168】
また、記録タイミングｔ２～ｔ３の区間Ｔｂは、第１の記録データ４２Ａにおける活性区間Ｐと第１の記録データ４２Ｂにおける活性区間Ｐとが重複する重複区間である。
【0169】
このため、この区間Ｔｂに応じた再生タイミング（再生タイミングＳ２～Ｓ３の区間）においては、再生制御部３０Ｅは、第１の記録データ４２Ａにおける区間Ｔｂに含まれる要素７２ａ２である音声「始めます」と、第１の記録データ４２Ｂにおける区間Ｔｂに含まれる要素７２ｂ１である音声「メモして下さい」と、の双方を、記録時の速度より速い再生速度で再生するように、再生部３６を制御する。
【0170】
一方、第１の記録データ４２Ｂにおける、記録タイミングｔ３～ｔ４の区間Ｔｃは、他の記録データ４０における活性区間Ｐと非重複な非重複区間である。
【0171】
このため、この区間Ｔｃに応じた再生タイミング（再生タイミングＳ２～Ｓ４の区間）においては、再生制御部３０Ｅは、第１の記録データ４２Ｂにおける区間Ｔｃに含まれる要素７２ｂ２である音声「始め」を、単独で、対応する再生タイミングＳ２～Ｓ４に、記録時の速度より速い再生速度で再生するように、再生部３６を制御する。
【0172】
なお、区間Ｔａ、区間Ｔｂ、および区間Ｔｃにおいては、第２の記録データ４４には活性区間Ｐが含まれないため、区間Ｔａ、区間Ｔｂ、区間Ｔｃに応じた再生タイミングにおいては、再生部３６の表示部３６Ａに表示される表示画像７０Ａには、何れの第２の記録データ４４の要素７２も含まれない。
【0173】
次に、記録タイミングｔ４～ｔ５の区間Ｔｄについて説明する。この区間Ｔｄには、何れの記録データ４０にも活性区間Ｐが含まれないため、再生制御部３０Ｅは再生制御を行わない。
【0174】
次に、再生制御部３０Ｅは、未再生で且つ最も記録タイミングの早い活性区間Ｐとして、第２の記録データ４４Ｂの記録タイミングｔ５を記録開始タイミングとする、活性区間Ｐを特定する。図９に示す例では、第２の記録データ４４Ｂにおける該活性区間Ｐは、記録タイミングｔ５～ｔ１４の区間である。
【0175】
ここで、第２の記録データ４４Ｂの活性区間Ｐは、静止区間ＥＢである。すなわち、第２の記録データ４４Ｂの活性区間Ｐは、同じ要素７２（要素７２ｄ１である文字「Ａ＋Ｂ」）が継続して含まれる区間である。
【0176】
このため、再生制御部３０Ｅは、記録タイミングｔ５～ｔ１４に応じた再生タイミング（再生タイミングＳ５～Ｓ１４の区間）においては、第２の記録データ４４Ｂにおける、該静止区間ＥＢの特定の記録タイミングに記録された要素７２（ここでは、要素７２ｄ１である文字「Ａ＋Ｂ」）を、継続して再生するように、再生部３６を制御する。
【0177】
すなわち、再生部３６は、記録タイミングｔ５～ｔ１４に応じた再生タイミング（再生タイミングＳ５～Ｓ１４の区間）においては、第２の記録データ４４Ｂにおける複数フレームの全てを用いるのではなく、ある記録タイミングに対応する１つのフレームのみを、継続して再生する。具体的には、再生部３６には、第２の記録データ４４Ｂにおける、１つの該フレームに含まれる要素７２ｄ１である文字「Ａ＋Ｂ」が、表示画像７０として表示される。
【0178】
ここで、第２の記録データ４４Ｂの記録タイミングｔ５～ｔ１４の活性区間Ｐには、他の記録データ４０の活性区間Ｐと重複する重複区間が含まれる。すなわち、複数の記録データ４０の各々の活性区間Ｐは、他の記録データ４０の少なくとも１つの活性区間Ｐと重複する重複期間を含む場合がある。そこで、再生制御部３０Ｅは、以下の制御を行う。ここでは、複数の記録データ４０の各々における活性区間Ｐの記録開始タイミングと記録終了タイミングの各々を区切りとした区間（区間Ｔｅ～区間Ｔｏ）ごとの、再生制御を順に説明する。
【0179】
まず、記録タイミングｔ５～ｔ６の区間Ｔｅについて説明する。第２の記録データ４４Ｂにおける区間Ｔｅでは、第２の記録データ４４Ｂの静止区間ＥＢは、他の記録データ４０における活性区間Ｐと非重複である。このため、再生制御部３０Ｅは、この区間Ｔｅついては、第２の記録データ４４Ｂの要素７２ｄ１である文字「Ａ＋Ｂ」のみを再生するように、再生部３６を制御する。このため、この区間Ｔｅに応じた再生タイミングにおいては、再生部３６には、第２の記録データ４４Ｂにおける、１つの該フレームに含まれる要素７２ｄ１である文字「Ａ＋Ｂ」が、表示画像７０Ｂとして表示される。
【0180】
次に、記録タイミングｔ６～ｔ７の区間Ｔｆについて説明する。この区間Ｔｆは、第２の記録データ４４Ｂの静止区間ＥＢと、第１の記録データ４２Ｂの活性区間Ｐと、第２の記録データ４４Ａの変化区間ＥＡと、が重複した重複区間である。
【0181】
このため、再生制御部３０Ｅは、該区間Ｔｆにおいては、第１の記録データ４２Ｂにおける該区間Ｔｆに含まれる要素７２ｂ３である音声「ここは注意して」を、記録時の速度より早い再生速度で再生するように再生制御する。また、再生制御部３０Ｅは、第２の記録データ４４Ａにおける該区間Ｔｆに含まれる要素７２および第２の記録データ４４Ｂにおける該区間Ｔｆに含まれる要素７２の双方を含む表示画像７０Ｃを、表示するように再生部３６を制御する。
【0182】
このため、区間Ｔｆに応じた再生タイミング（再生タイミングＳ６～Ｓ７の区間）においては、再生部３６には、第１の記録データ４２Ｂにおける区間Ｔｆに含まれる要素７２ｂ３である音声「ここは注意して」が、記録時の速度より速い再生速度で再生される。また、該区間Ｔｆに応じた再生タイミング（再生タイミングＳ６～Ｓ７）においては、再生部３６の表示部３６Ａには、第２の記録データ４４Ｂにおける静止区間ＥＢにおける最初の記録タイミングｔ５に記録された要素７２ｄ１である文字「Ａ＋Ｂ」が継続して表示されると共に、第２の記録データ４４における変化区間ＥＡに含まれる要素７２（要素７２ｃ１～７２ｃ３）が、記録タイミングに応じて、記録時の速度より速い再生速度で変化しながら表示される。
【0183】
このため、例えば、板書に追記されながら形成されていく文字が、記録時の速度より速い再生速度で再生部３６に再生されると共に、静止画像に含まれる文字は、変化しないまま再生部３６に再生される。また、同時期に記録された音声や動画については、記録時の速度より速い再生速度で再生されることとなる。
【0184】
次に、記録タイミングｔ７～ｔ８の区間Ｔｇについて説明する。区間Ｔｇでは、第２の記録データ４４Ｂの静止区間ＥＢと、第２の記録データ４４Ａの変化区間ＥＡと、が重複し、第１の記録データ４２の活性区間Ｐについては非重複な区間である。
【0185】
このため、再生制御部３０Ｅは、該区間Ｔｇにおいては、第１の記録データ４２における要素７２を再生しない以外は、区間Ｔｆと同様の再生制御を継続する。
【0186】
次に、記録タイミングｔ８～ｔ９の区間Ｔｈについて説明する。区間Ｔｈでは、第２の記録データ４４Ｂの静止区間ＥＢと、第２の記録データ４４Ａの静止区間ＥＢと、が重複する。
【0187】
このため、この場合、再生制御部３０Ｅは、記録タイミングｔ８～ｔ９の区間Ｔｈに応じた再生タイミング（再生タイミングＳ８～Ｓ９の区間）においては、第２の記録データ４４Ａおよび第２の記録データ４４Ｂの各々における、静止区間ＥＢの最初の記録タイミングに記録された要素７２を再生するように、再生部３６を制御する。
【0188】
このため、再生部３６は、該区間Ｔｈに応じた再生タイミング（再生タイミングＳ８～Ｓ９）については、要素７２ｄ１である文字「Ａ＋Ｂ」、要素７２ｃ１である文字「Ｄ＿」、要素７２ｃ２である文字「１」、および要素７２ｃ３である文字「ＣＣＡ」を含む表示画像７０Ｄを、継続して表示する。例えば、板書に対する追記が終了した状態の板書を示す画像が、再生部３６の表示部３６Ａに表示される。
【0189】
次に、記録タイミングｔ９～ｔ１０の区間Ｔｉについて説明する。区間Ｔｉでは、第２の記録データ４４Ｂの静止区間ＥＢと、第２の記録データ４４Ａの静止区間ＥＢと、第１の記録データ４２Ｂの活性区間Ｐと、が重複する。
【0190】
この場合、再生制御部３０Ｅは、第２の記録データ４４Ａおよび第２の記録データ４４Ｂについては、区間Ｔｈと同様の再生制御を行う。そして、再生制御部３０Ｅは、第１の記録データ４２Ｂにおける区間Ｔｉの変化区間ＥＡについては、変化区間ＥＡに含まれる要素７２である要素７２ｂ４である音声「いいですよ」を、該要素７２の記録タイミングｔ９に応じた再生タイミングに、記録速度より速い再生速度で、再生制御する。
【0191】
このため、再生部３６は、該区間Ｔｉに応じた再生タイミング（再生タイミングＳ９～Ｓ１０）については、要素７２ｄ１である文字「Ａ＋Ｂ」、要素７２ｃ１である文字「Ｄ＿」、要素７２ｃ２である文字「１」、および要素７２ｃ３である文字「ＣＣＡ」を含む表示画像７０Ｄを、継続して表示すると共に、要素７２ｂ４である音声「いいですよ」を記録時より速い再生速度で再生する。
【0192】
次に、記録タイミングｔ１０～ｔ１１の区間Ｔｊについて説明する。区間Ｔｊでは、第２の記録データ４４Ａの静止区間ＥＢと、第２の記録データ４４Ｂの静止区間ＥＢと、が重複する。このため、再生制御部３０Ｅは、区間Ｔｊに応じた再生タイミング（再生タイミングＳ１０～Ｓ１１の区間）においては、第２の記録データ４４Ａおよび第２の記録データ４４Ｂの各々における、各静止区間ＥＢの最初の記録タイミングに記録された要素７２を再生するように、再生部３６を制御する。
【0193】
このため、再生部３６は、該区間Ｔｊに応じた再生タイミング（再生タイミングＳ１０～Ｓ１１）については、要素７２ｄ１である文字「Ａ＋Ｂ」、要素７２ｃ１である文字「Ｄ＿」、要素７２ｃ２である文字「１」、および要素７２ｃ３である文字「ＣＣＡ」を含む表示画像７０Ｄを、継続して表示する。このため、区間Ｔｈと同様に、この区間Ｔｊには、例えば、板書に対する追記が終了した状態の板書を示す画像が、再生部３６の表示部３６Ａに表示される。
【0194】
次に、記録タイミングｔ１１～ｔ１２の区間Ｔｋについて説明する。区間Ｔｋについては、第２の記録データ４４Ｂの静止区間ＥＢは、他の記録データ４０における活性区間Ｐと非重複である。このため、この区間Ｔｋに応じた再生タイミングＳ１１～Ｓ１２の区間は、要素７２ｄ１である文字「Ａ＋Ｂ」のみが、再生部３６に再生される。すなわち、再生部３６には、文字「Ａ＋Ｂ」のみを含む表示画像７０Ｅが表示される。
【0195】
すなわち、区間Ｔｋに応じた再生タイミングにおいては、前段の区間Ｔｊで表示されていた、第２の記録データ４４Ａの要素７２である、文字「Ｄ＿」、文字「１」、および文字「ＣＣＡ」が削除され、区間Ｔｅに記録された文字である文字「Ａ＋Ｂ」のみが、再生部３６の表示部３６Ａに表示される。
【0196】
次に、記録タイミングｔ１１～ｔ１２の区間Ｔｋについて説明する。この区間Ｔｋは、何れの記録データ４０の活性区間Ｐも含まれない。このため、再生制御部３０Ｅは、この区間Ｔｋについては、再生対象外とする。
【0197】
次に、記録タイミングｔ１２～ｔ１３の区間Ｔｌについて説明する。区間Ｔｌでは、第１の記録データ４２Ｂの活性区間Ｐと、第２の記録データ４４Ｂの静止区間ＥＢと、が重複する。
【0198】
このため、再生制御部３０Ｅは、区間Ｔｌに応じた再生タイミング（再生タイミングＳ１２～Ｓ１３の区間）においては、第１の記録データ４２Ｂにおける該区間Ｔｌの要素７２ｂ５である音声「分かりましたか」を、記録時より速い再生速度で再生する。また、再生制御部３０Ｅは、該区間Ｔｌに応じた再生タイミング（再生タイミングＳ１２～Ｓ１３の区間）においては、第２の記録データ４４Ｂにおける、該静止区間ＥＢの最初の記録タイミングに記録された要素７２ｄ１である文字「Ａ＋Ｂ」を再生するように、再生部３６を制御する。
【0199】
このため、区間Ｔｌに応じた再生タイミングにおいては、該区間Ｔｌに記録された文字である文字「Ａ＋Ｂ」を含む表示画像７０Ｅが、再生部３６の表示部３６Ａに表示され、且つ、音声「分かりましたか」が記録時より速い再生速度で再生制御される。
【0200】
次に、記録タイミングｔ１３～ｔ１４の区間Ｔｍについて説明する。区間Ｔｍでは、第２の記録データ４４Ｂの静止区間ＥＢは、他の記録データ４０における活性区間Ｐと非重複である。このため、この区間Ｔｍに応じた再生タイミングＳ１３～Ｓ１４の区間は、要素７２ｄ１である文字「Ａ＋Ｂ」のみが、再生部３６に再生される。すなわち、再生部３６には、文字「Ａ＋Ｂ」のみを含む表示画像７０Ｅが表示される。
【0201】
次に、記録タイミングｔ１４～ｔ１５の区間Ｔｎについて説明する。区間Ｔｎについては、何れの記録データ４０についても、活性区間Ｐではない。このため、区間Ｔｎに応じた再生タイミングＳ１４～Ｓ１５には、何の要素７２も再生されない。
【0202】
次に、記録タイミングｔ１５～ｔ１６の区間Ｔｏについて説明する。区間Ｔｏでは、第１の記録データ４２Ａの活性区間Ｐのみが、活性区間Ｐである。このため、この区間Ｔｏに応じた再生タイミング（再生タイミングＳ１５～Ｓ１６の区間）においては、再生制御部３０Ｅは、第１の記録データ４２Ａにおけるこの区間Ｔｏに含まれる要素７２ａ３である音声「終了します」を、単独で、対応する再生タイミングＳ１５～Ｓ１６に、記録時の速度より速い再生速度で再生するように、再生部３６を制御する。
【0203】
このように、本実施の形態では、再生制御部３０Ｅは、複数の記録データ４０の各々の活性区間Ｐの活性区間データ８０が、記録タイミングに応じた再生タイミングで再生されるように再生制御する。このため、複数の記録データ４０の各々の活性区間Ｐが重複する重複区間については、複数の記録データ４０の各々の活性区間Ｐに含まれる複数の要素７２が、記録タイミングに応じて同時に再生されることとなる。
【0204】
また、活性区間Ｐの種類（変化区間ＥＡであるか静止区間ＥＢであるか）に応じて、再生速度や、再生内容が調整される。
【0205】
なお、図９には、再生制御部３０Ｅは、取得部３０Ｃで取得した複数の記録データ４０について、記録タイミングの時間の流れ（矢印Ｔ）に沿って、活性区間Ｐの活性区間データ８０を順に読取りながら、記録データ４０の各々の活性区間データ８０を再生するように、再生部３６を再生制御した。
【0206】
しかし、再生制御部３０Ｅは、受付部３０Ｆから再生指示信号を受付けるごとに、未再生の活性区間Ｐを時系列に沿って順次特定し、特定した活性区間Ｐの記録タイミングごとに、複数の記録データ４０の各々の活性区間Ｐの活性区間データ８０が再生されるように、再生制御してもよい。
【0207】
この場合、ユーザは、操作部３８を操作することで、再生指示を入力する。すると、受付部３０Ｆは、操作部３８から再生指示を示す再生指示信号を受付ける。再生制御部３０Ｅは、受付部３０Ｆから再生指示信号を受付けるごとに、上記再生制御を行えばよい。
【0208】
具体的には、再生制御部３０Ｅは、図９に示す複数の記録データ４０の各々に含まれる活性区間Ｐの先頭の記録タイミングを順に特定し、上記と同様の再生制御を行う。すなわち、この場合、再生制御部３０Ｅは、再生指示信号を受付けるごとに、複数の記録データ４０の各々に含まれる活性区間Ｐの先頭の記録タイミングから、次の他の活性区間Ｐの先頭の記録タイミングまでを１つの制御単位として、順次再生制御を行うこととなる。
【0209】
なお、図９には、複数の第２の記録データ４４の各々の活性区間Ｐに含まれる要素７２を、同じ表示画像７０に合成して表示する形態を示した。しかし、再生制御部３０Ｅは、記録データ４０ごとに、異なる表示領域に要素７２が表示されるように、再生制御してもよい。
【0210】
図１０は、再生部３６に表示される表示画像７６の一例を示す模式図である。例えば、表示画像７６は、表示領域７６Ａと、表示領域７６Ｂと、表示領域７６Ｃと、を含む。表示領域７６Ａ、表示領域７６Ｂ、および、表示領域７６Ｃは、互いに異なる記録データ４０の要素７２を表示するための表示領域である。
【0211】
例えば、再生対象の記録データ４０として３つの記録データ４０を取得した場合、１つの記録データ４０に含まれる活性区間Ｐの動画像が表示領域７６Ａに表示される。また、他の１つの記録データ４０に含まれる活性区間Ｐの要素７２ｄ１としての文字「Ａ＋Ｂ」が表示領域７６Ｂに表示される。また、他の１つの記録データ４０に含まれる活性区間Ｐの要素７２ｃ１～７２ｃ３の各々としての文字「Ｄ＿」、「１」、「ＣＣＡ」が、表示領域７６Ｃに表示される。
【0212】
このように、再生制御部３０Ｅは、記録データ４０ごとに、異なる表示領域に要素７２が表示されるように、再生部３６を再生制御してもよい。
【0213】
次に、制御部３０で実行する情報処理の手順の一例を説明する。
【0214】
図１１は、本実施の形態の制御部３０で実行する、情報処理の手順の一例を示す、フローチャートである。
【0215】
まず、取得部３０Ｃが、再生対象期間を含む期間に記録された、複数の記録データ４０を取得する（ステップＳ１００）。次に、特定部３０Ｄが、ステップＳ１００で取得した複数の記録データ４０の各々について、含まれる要素区間Ｅを特定する（ステップＳ１０２）。
【0216】
次に、特定部３０Ｄが、ステップＳ１００で取得した記録データ４０を、第１の記録データ４２と第２の記録データ４４に分類する（ステップＳ１０４）。
【0217】
次に、特定部３０Ｄは、ステップ１０４で分類した第１の記録データ４２および第２の記録データ４４の各々について、要素区間Ｅにおける活性区間Ｐを特定する（ステップＳ１０６）。
【0218】
次に、受付部３０Ｆが、再生指示信号を受付けるまで否定判断を繰返す（ステップＳ１０８：Ｎｏ）。受付部３０Ｆが、再生指示信号を受付けたと判断すると（ステップＳ１０８：Ｙｅｓ）、ステップＳ１１０へ進む。ステップＳ１１０では、記録タイミングの時系列に沿って、未再生の活性区間Ｐを１つ特定する（ステップＳ１１０）。そして、再生制御部３０Ｅは、ステップＳ１１０で特定した、記録データ４０における活性区間Ｐの活性区間データ８０を、再生制御する（ステップＳ１１２）。このとき、上述したように、該記録データ４０の活性区間Ｐに重複する、他の記録データ４０の活性区間Ｐが存在する場合がある。この場合、再生制御部３０Ｅは、上述したように、特定した活性区間Ｐの記録タイミングごとに、複数の記録データ４０の各々の活性区間Ｐの活性区間データ８０が再生されるように、再生制御する。
【0219】
次に、再生制御部３０Ｅは、処理を終了するか否かを判断する（ステップＳ１１４）。例えば、再生制御部３０Ｅは、受付部３０Ｆを介して操作部３８から、処理終了を示す終了信号を受付けたか否かを判別することで、ステップＳ１１４の判断を行う。
【0220】
ステップＳ１１４で否定判断すると（ステップＳ１１４：Ｎｏ）、上記ステップＳ１０８へ戻る。一方、ステップＳ１１４で肯定判断すると（ステップＳ１１４：Ｙｅｓ）、本ルーチンを終了する。
【0221】
以上説明したように、本実施の形態の情報処理システム１０００および情報処理装置１０は、取得部３０Ｃと、特定部３０Ｄと、再生制御部３０Ｅと、を備える。取得部３０Ｃは、意味を成す要素７２を含む要素区間Ｅに要素７２が時系列に沿って変化する第１の記録データ４２を取得する。特定部３０Ｄは、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２の要素区間Ｅにおける、再生対象の活性区間Ｐを特定する。再生制御部３０Ｅは、第１の記録データ４２の活性区間Ｐの活性区間データ８０に応じて、第１の記録データ４２を再生制御する。
【0222】
このように、本実施の形態では、情報処理システム１０００および情報処理装置１０は、第１の記録データ４２における要素７２を含む要素区間Ｅの内、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２の要素区間Ｅにおける、再生対象の活性区間Ｐを特定する。
【0223】
このため、本実施の形態の情報処理装置１０は、第１の記録データ４２における要素７２を含む要素区間Ｅの全区間ではなく、要素区間Ｅに含まれる効率的な再生を阻害する区間以外の区間を、再生対象の活性区間Ｐとして特定することができる。
【0224】
従って、本実施の形態の情報処理装置１０は、記録データ４０（第１の記録データ４２）を効率的に再生することができる。
【0225】
特に本実施の形態の情報処理装置１０は、アクティブラーニングの振り返りの際に効果的である。詳細には、学習者が能動的に学習に取り組むように行われた授業（アクティブラーニング）を振り返る際に、学習者自身が授業の体験を追従するように振り返るためには、授業のタイムラインに沿って授業の記録を振り返ると良い。しかし、授業の記録を全て再生することは、時間がかかる。一方で、アクティブラーニングでは、学習者自身が発表や課題を提起するなど能動的に学習に取り組むため、授業のプログラム（発言者や発表内容等）が画一的でなく、事前に省略すべきところを特定することは難しい。そこで、本実施の形態の情報処理装置１０を用いて記録された記録データを効率的に再生することで、授業を振り返ることが容易となる。
【0226】
また、活性量は、要素７２が継続して含まれる継続時間および要素７２の変化量を示す。特定部３０Ｄは、要素区間Ｅにおける、継続時間および変化量の少なくとも一方が各々に対応する閾値以上の区間を、活性区間Ｐとして特定する。
【0227】
特定部３０Ｄは、要素区間Ｅにおける、継続時間および変化量の少なくとも一方が各々に対応する閾値未満の区間を、再生対象外の非活性区間Ｑとして特定する。
【0228】
また、取得部３０Ｃは、少なくとも一部が重複する期間に記録された複数の第１の記録データ４２を取得する。特定部３０Ｄは、複数の第１の記録データ４２の各々の種類に応じた活性量の閾値に基づいて、複数の第１の記録データ４２の各々の要素区間Ｅにおける活性区間Ｐを特定する。再生制御部３０Ｅは、複数の第１の記録データ４２の各々の活性区間データ８０に応じて、複数の第１の記録データ４２を再生制御する。
【0229】
第１の記録データ４２における活性区間Ｐは、意味を成す要素７２を含む要素区間Ｅの少なくとも一部の区間である。このため、取得部３０Ｃで取得した複数の第１の記録データ４２が、議論の音声や表示された資料を撮影した動画像データ、音声データ、などの複数種類の記録データ４０である場合も、意味不明の箇所で省略再生されることが抑制される。
【0230】
取得部３０Ｃは、要素区間Ｅ内に、要素７２が静止した静止区間ＥＢを含む１または複数の第２の記録データ４４を取得する。特定部３０Ｄは、第２の記録データ４４における要素区間Ｅを、活性区間Ｐとして特定する。再生制御部３０Ｅは、１または複数の第１の記録データ４２の各々の活性区間Ｐの活性区間データ８０および１または複数の第２の記録データ４４の活性区間Ｐの活性区間データ８０に応じて、１または複数の第１の記録データ４２および１または複数の第２の記録データ４４を再生制御する。
【0231】
また、第１の記録データ４２の種類が音声データである場合、変化量は要素７２を示す音量である。第１の記録データ４２の種類が動画像データである場合、変化量はフレーム間の画面変化量である。
【0232】
要素７２は、言語を示す音、文字、記号、画像、の少なくとも１つである。
【0233】
本実施の形態の情報処理方法は、意味を成す要素７２を含む要素区間Ｅに要素７２が時系列に沿って変化する第１の記録データ４２を取得するステップと、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２の要素区間Ｅにおける、再生対象の活性区間Ｐを特定するステップと、第１の記録データ４２の活性区間Ｐの活性区間データ８０に応じて、第１の記録データ４２を再生制御するステップと、を含む。
【0234】
また、本実施の形態の情報処理プログラムは、意味を成す要素７２を含む要素区間Ｅに要素７２が時系列に沿って変化する第１の記録データ４２を取得するステップと、第１の記録データ４２の種類に応じた要素７２の活性量の閾値に基づいて、第１の記録データ４２の要素区間Ｅにおける、再生対象の活性区間Ｐを特定するステップと、第１の記録データ４２の活性区間Ｐの活性区間データ８０に応じて、第１の記録データ４２を再生制御するステップと、をコンピュータに実行させるための情報処理プログラムである。
【0235】
また、再生制御部３０Ｅは、複数の記録データ４０の各々の活性区間データ８０が、記録タイミングに応じた再生タイミングで再生されるように再生制御する。
【0236】
また、再生制御部３０Ｅは、複数の記録データ４０の各々の活性区間データ８０が、同じ記録タイミングごとに同じ再生タイミングで再生されるように再生制御する。
【0237】
また、再生制御部３０Ｅは、複数の記録データ４０の内、第１の記録データ４２について、第１の記録データ４２に含まれる活性区間Ｐの活性区間データ８０を、該活性区間データ８０の記録時の速度より速い再生速度で再生制御する。
【0238】
第１の記録データ４２における活性区間Ｐでは、要素７２が時系列に沿って継続して変化するため、記録時の再生速度より速い再生速度で再生しても、意味が通じる状態で再生の成される可能性が高い。本実施の形態の情報処理装置１０は、活性区間Ｐの種類（変化区間ＥＡ、静止区間ＥＢ）に応じて、上記処理を行うことで、複数の記録データ４０を更に効率的に再生することができる。また、再生時間の短縮を図ることもできる。
【0239】
また、再生制御部３０Ｅは、複数の記録データ４０の内、第２の記録データ４４について、第２の記録データ４４に含まれる活性区間Ｐの各々について、含まれる静止区間ＥＢの特定の記録タイミングに記録された要素７２を、該静止区間ＥＢに応じた再生期間、再生制御する。
【0240】
第２の記録データ４４における活性区間Ｐに含まれる静止区間ＥＢは、要素７２が静止する区間であることから、該区間における１つの記録タイミングにおいて記録された要素７２を再生すれば、該静止区間ＥＢで記録された全内容の意味が把握可能である可能性が高い。このため、本実施の形態の情報処理装置１０は、上記処理を行うことで、活性区間Ｐの種類に応じて、複数の記録データ４０を更に効率的に再生することができる。
【0241】
また、例えば、第２の記録データ４４は、１または時系列に連続する複数の静止画像から構成される。
【0242】
再生制御部３０Ｅは、第１の記録データ４２の活性区間Ｐと、第２の記録データ４４の活性区間Ｐと、の間に、記録タイミングが互いに重複する重複区間が存在する場合、重複区間における、第１の記録データ４２の活性区間Ｐと第２の記録データ４４の活性区間Ｐにおける静止区間ＥＢ以外の変化区間ＥＡとの第１重複区間については、第１の記録データ４２の活性区間データ８０と第２の記録データ４４の変化区間ＥＡの変化区間データとが、同じ記録タイミングごとに同じ再生タイミングで、記録時の速度より速い再生速度で再生されるように再生制御する。
【0243】
そして、再生制御部３０Ｅは、該重複区間における、第１の記録データ４２の活性区間Ｐと第２の記録データ４４の活性区間Ｐにおける静止区間ＥＢとの第２重複区間については、第１の記録データ４２における活性区間Ｐの活性区間データ８０を、記録時の速度より速い再生速度で再生制御すると共に、第２の記録データ４４における静止区間ＥＢの特定の記録タイミングに記録された要素７２を再生制御する。
【0244】
また、受付部３０Ｆは、再生指示信号を受付ける。再生制御部３０Ｅは、再生指示信号を受付ける毎に、複数の記録データ４０に含まれる未再生の活性区間Ｐを順に特定し、特定した活性区間Ｐの記録タイミングごとに、複数の記録データの各々の活性区間の活性区間データ８０が再生されるように再生制御する。
【0245】
このため、本実施の形態の情報処理装置１０は、記録データ４０の特性や重複区間の組合せを考慮した、効率的な再生制御を行うことができる。
【0246】
なお、本実施の形態では、再生制御部３０Ｅは、ストリーミング再生するように、再生部３６を制御する場合を一例として説明した。
【0247】
しかし、再生部３６は、制御部３０から再生データをダウンロードし、再生してもよい。この場合、再生制御部３０Ｅは、複数の記録データ４０の各々の活性区間データ８０を上述した方法と同じ方法で再生させるための、再生データを作成し、該再生データを再生部３６へ送信する。そして、再生部３６は、制御部３０からダウンロードした再生データを、再生すればよい。
【0248】
なお、上述した実施の形態における、情報処理装置１０で実行する上記処理を実行するためのプログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよいし、インターネット等のネットワーク経由で提供または配布するように構成してもよい。また、各種プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。
【0249】
また、上述した実施の形態における、情報処理装置１０の各々で実行されるプログラムは、上記各機能部を含むモジュール構成となっており、実際のハードウェアとしては、例えば、ＣＰＵ２５（プロセッサ回路）がＲＯＭ２６またはＨＤＤ２８からプログラムを読み出して実行することにより、上述した各機能部がＲＡＭ２７（主記憶）上にロードされ、上述した各機能部がＲＡＭ２７（主記憶）上に生成されるようになっている。なお、情報処理装置１０は、上述した各機能部の一部または全部を、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）などの専用のハードウェアを用いて実現することも可能である。
【0250】
なお、上記には、実施の形態を説明したが、上記実施の形態は、例として提示したものであり、発明の範囲を限定することは意図していない。上記新規な実施の形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施の形態および変形例は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【0251】
１０ 情報処理装置
３０Ｃ 取得部
３０Ｄ 特定部
３０Ｅ 再生制御部
３０Ｆ 受付部
３６ 再生部
１０００ 情報処理システム
３０Ｃ 取得部
３０Ｄ 特定部
３０Ｅ 再生制御部
３０Ｆ 受付部
３６ 再生部
１０００ 情報処理システム
【先行技術文献】
【特許文献】
【0252】
【文献】特開２００７－０６６３１５号公報
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】