特許 7556214 電子黒板、音声再生方法、プログラム及び画像処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-09-17

(45)【発行日】2024-09-26

(54)【発明の名称】電子黒板、音声再生方法、プログラム及び画像処理システム

(51)【国際特許分類】

   H04N 1/00 20060101AFI20240918BHJP

   G06F 3/04883 20220101ALI20240918BHJP

   G06F 3/16 20060101ALI20240918BHJP

   G06F 3/0483 20130101ALI20240918BHJP

   G06F 3/01 20060101ALI20240918BHJP

【ＦＩ】

H04N1/00 H

G06F3/04883

G06F3/16 530

G06F3/16 620

G06F3/16 610

G06F3/0483

G06F3/01 510

【請求項の数】 4

(21)【出願番号】P 2020099494

(22)【出願日】2020-06-08

(65)【公開番号】P2021193774

(43)【公開日】2021-12-23

【審査請求日】2023-04-12

(73)【特許権者】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(72)【発明者】

【氏名】剣持 栄治

【審査官】豊田 好一

(56)【参考文献】

【文献】特開２０１９－１６１５１６（ＪＰ，Ａ）

【文献】特開２０１４－１０２６６４（ＪＰ，Ａ）

【文献】特開２０１３－１２５５５３（ＪＰ，Ａ）

【文献】特開２００３－２６０８９６（ＪＰ，Ａ）

【文献】特開２０１７－１１２５８１（ＪＰ，Ａ）

【文献】特開２０１６－１３４０５４（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ １／００

Ｇ０６Ｆ ３／０４８８３

Ｇ０６Ｆ ３／１６

Ｇ０６Ｆ ３／０４８３

Ｇ０６Ｆ ３／０１

(57)【特許請求の範囲】

【請求項1】

ユーザから入力された入力データを表示する電子黒板であって、
前記ユーザを識別するためのユーザ識別情報、前記入力データ、及び該入力データに関連する音声データ、を対応付けて記憶するデータ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データを読み出して、前記ユーザからの手書き入力を受け付ける複数の領域が設けられているページ画面の前記領域に、前記入力データを映像表示部に表示させる表示処理手段と、
前記領域ごとに設けられ、前記ユーザからの音声再生指示を受け付ける音声再生ボタンが押下された場合に、前記データ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データに関連する音声データを読み出して音声再生部に再生させる音声処理手段と、
を有する電子黒板。

【請求項2】

ユーザから入力された入力データを表示する電子黒板の音声再生方法であって、
前記ユーザを識別するためのユーザ識別情報、前記入力データ、及び該入力データに関連する音声データ、を対応付けて記憶するデータ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データを読み出して、前記ユーザからの手書き入力を受け付ける複数の領域が設けられているページ画面の前記領域に、前記入力データを映像表示部に表示させる表示処理ステップと、
前記領域ごとに設けられ、前記ユーザからの音声再生指示を受け付ける音声再生ボタンが押下された場合に、前記データ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データに関連する音声データを読み出して音声再生部に再生させる音声処理ステップと、
を有する音声再生方法。

【請求項3】

ユーザから入力された入力データを表示するコンピュータを、
前記ユーザを識別するためのユーザ識別情報、前記入力データ、及び該入力データに関連する音声データ、を対応付けて記憶するデータ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データを読み出して、前記ユーザからの手書き入力を受け付ける複数の領域が設けられているページ画面の前記領域に、前記入力データを映像表示部に表示させる表示処理手段、
前記領域ごとに設けられ、前記ユーザからの音声再生指示を受け付ける音声再生ボタンが押下された場合に、前記データ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データに関連する音声データを読み出して音声再生部に再生させる音声処理手段、
として機能させるためのプログラム。

【請求項4】

ユーザから入力された入力データを表示する電子黒板と、前記電子黒板とネットワークを介して接続可能なサーバと、を有する画像処理システムであって、
前記ユーザを識別するためのユーザ識別情報、前記入力データ、及び該入力データに関連する音声データ、を対応付けて記憶するデータ記録手段と、
前記ユーザを認証するユーザ認証手段と、
認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データを前記データ記録手段から読み出して、前記ユーザからの手書き入力を受け付ける複数の領域が設けられているページ画面の前記領域に、前記入力データを映像表示部に表示させる表示処理手段と、
前記領域ごとに設けられ、前記ユーザからの音声再生指示を受け付ける音声再生ボタンが押下された場合に、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データに関連する音声データを前記データ記録手段から読み出して音声再生部に再生させる音声処理手段と、
を有する画像処理システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、電子黒板、音声再生方法、プログラム及び画像処理システムに関する。

【背景技術】

【0002】

近年、大型のフラットパネルディスプレイにタッチパネルを搭載した電子黒板が知られている。電子黒板は、画面をフラットパネルディスプレイに表示し、タッチパネルを介して電子ペンや指などの軌跡を取り込んで、軌跡を手書き入力としてフラットパネルディスプレイの画面に描画する。

【0003】

例えば授業等において、電子黒板等に二次元表示される板書データと、音声を含むストリームデータとを自動的に関連付けて記録し、授業内容を再生することができる、データ記録装置およびデータ再生装置は従来から知られている（例えば特許文献１参照）。

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来の電子黒板では、過去に記録した授業内容のデータをユーザが取得して電子黒板に表示させたうえで、所望の授業内容を自ら選択し板書や音声を再生させていたため、記録した授業内容からユーザが再生したい授業内容を効率的に検索する仕組みがなく、所望の授業内容を再生するまでに手間が掛かるという問題があった。

【0005】

本発明の実施の形態は、ユーザから入力された入力データの表示と、その入力データに関連する音声データの再生と、を行う手間を軽減できる電子黒板を提供することを目的とする。

【課題を解決するための手段】

【0006】

上記した課題を達成するために本願請求項１は、ユーザから入力された入力データを表示する電子黒板であって、前記ユーザを識別するためのユーザ識別情報、前記入力データ、及び該入力データに関連する音声データ、を対応付けて記憶するデータ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データを読み出して、前記ユーザからの手書き入力を受け付ける複数の領域が設けられているページ画面の前記領域に、前記入力データを映像表示部に表示させる表示処理手段と、前記領域ごとに設けられ、前記ユーザからの音声再生指示を受け付ける音声再生ボタンが押下された場合に、前記データ記録部から、認証に成功した前記ユーザのユーザ識別情報に対応付けられている前記入力データに関連する音声データを読み出して音声再生部に再生させる音声処理手段と、を有することを特徴とする。

【発明の効果】

【0007】

本発明の実施の形態によれば、ユーザの認証に応じてユーザに対応付いている入力データの表示や音声データの再生を行うため、ユーザから入力された入力データの表示と、その入力データに関連する音声データの再生と、を行う手間を軽減できる。

【図面の簡単な説明】

【0008】

【図1】本実施形態に係る画像処理システムの一例の構成図である。

【図2】本実施形態に係るコンピュータの一例のハードウェア構成図である。

【図3】本実施形態に係る電子黒板の一例のハードウェア構成図である。

【図4】本実施形態に係る電子黒板の一例の機能構成図である。

【図5】ユーザテーブルの一例の構成図である。

【図6】ホワイトボードテーブルの一例の構成図である。

【図7】ページデータテーブルの一例の構成図である。

【図8】音声データテーブルの一例の構成図である。

【図9】手書きデータテーブルの一例の構成図である。

【図10】電子黒板のページ表示の処理手順の一例のフローチャートである。

【図11】ユーザ認証画面の一例のイメージ図である。

【図12】ＵＩ画面の一例のイメージ図である。

【図13】まとめページ画面の一例のイメージ図である。

【図14】電子黒板の手書きデータの入力及び音声データの録音の処理手順の一例のフローチャートである。

【図15】電子黒板の音声データの再生の処理手順の一例のフローチャートである。

【図16】電子黒板の音声データの再生の処理手順の一例のフローチャートである。

【図17】発話データの一例のイメージ図である。

【発明を実施するための形態】

【0009】

以下、本発明の実施形態について図面を参照しながら説明する。本実施形態では電子黒板装置を利用する会議の例を説明するが、会議に限定するものでなく、セミナーや講義など、様々な状況に適用できる。

【0010】

［第１の実施形態］
＜システム構成＞
図１は、本実施形態に係る画像処理システムの一例の構成図である。図１の画像処理システム１０は、サーバ１２と、１台以上の電子黒板１４とが、通信ネットワーク１８を介して通信可能に接続されている。通信ネットワーク１８は、例えばインターネット、ＬＡＮ（Local Area Network）又は携帯電話通信網等が含まれる。

【0011】

サーバ１２は電子黒板１４と連携して動作することで、電子黒板１４に関連した後述のような機能を提供する。サーバ１２は、後述する電子黒板１４のユーザ認証部４２の機能や、データ記録部４６の機能を有していてもよい。サーバ１２は、オンプレミスでの運用であっても、クラウドでの運用であってもよい。なお、サーバ１２はＰＣ（Personal Computer）に限定されず、携帯電話、スマートフォン、タブレット端末、ＰＤＡ（Personal Digital Assistant）等であってもよい。

【0012】

電子黒板１４には、後述の電子ペン６９０によって生じたイベント（後述のディスプレイ６８０に電子ペン６９０のペン先、又は、電子ペン６９０のペン尻のタッチ）による描画された画像を、ディスプレイ６８０に表示させることができる。電子黒板１４は、電子ペン６９０だけでなく、ユーザの手Ｈ等によって生じたイベント（拡大、縮小、ページめくり等のジェスチャ）に基づいて、ディスプレイ６８０上に表示されている画像を変更させることもできる。

【0013】

また、電子黒板１４には、後述のＵＳＢ（Universal Serial Bus）メモリ６３０が接続可能である。電子黒板１４はＵＳＢメモリ６３０からＰＤＦ等の電子ファイルを読み出したり、ＵＳＢメモリ６３０に電子ファイルを記録したり、することができる。また、電子黒板１４には、ＤｉｓｐｌａｙＰｏｒｔ、ＤＶＩ（Digital Visual Interface）、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）、及びＶＧＡ（Video Graphics Array）等の規格による通信が可能なケーブルを介して、後述のノートＰＣ６７０を接続できる。

【0014】

電子黒板１４は、ディスプレイ６８０に対する接触によってイベントを発生させる。電子黒板１４は、このイベントを示すイベント情報を、マウスやキーボード等の入力装置からのイベントと同様に、ノートＰＣ６７０に送信できる。同じく、電子黒板１４には、上記規格による通信が可能なケーブルを介して、テレビ（ビデオ）会議端末が接続されていてもよい。なお、ノートＰＣ６７０、及びテレビ会議端末は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の各種無線通信プロトコルに準拠した無線通信により、電子黒板１４と通信してもよい。

【0015】

また、通信ネットワーク１８を介して通信可能に接続された異なる拠点などに設置されている電子黒板１４は、他の電子黒板１４でユーザの手Ｈ等によって生じたイベントに基づいて、ディスプレイ６８０上に表示されている画像を変更させることもできる。

【0016】

これにより、例えば一の拠点で電子黒板１４のディスプレイ６８０上に描画された画像は他の拠点で電子黒板１４のディスプレイ６８０上にも表示される。また、逆に他の拠点で電子黒板１４のディスプレイ６８０上に描画された画像は、一の拠点で電子黒板１４のディスプレイ６８０上に表示される。このように、画像処理システム１０では、遠隔地において同じ画像を共有する遠隔共有処理を行うことができるため、遠隔地での会議等に用いると、非常に便利である。

【0017】

なお、電子黒板１４は一例であり、画像を録画及び表示する機能と、音声を録音及び再生する機能と、を備えた装置であれば、電子看板（デジタルサイネージ）、スポーツや天気予報等で利用されるテレストレータ、遠隔画像（映像）診断装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、自動車（Connected Car）、ＰＣ、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ、デジタルカメラ、デジタルビデオカメラ等であってもよい。なお、ＵＳＢメモリ６３０は記録媒体の一例であって、ＳＤカード等の各種記録メディアであってもよい。

【0018】

図１に示す画像処理システム１０の構成は一例である。例えばサーバ１２は複数台で構成されてもよいし、サーバ１２の機能を電子黒板１４に備えるようにすることで、省略されてもよい。また、電子黒板１４の機能の少なくとも一部はサーバ１２に備えるようにしてもよい。このように、サーバ１２及び電子黒板１４の機能は、サーバ１２及び電子黒板１４の何れかが備えていればよい。また、サーバ１２及び電子黒板１４の機能は、サーバ１２及び電子黒板１４以外の他の装置で実現する構成であってもよい。

【0019】

＜ハードウェア構成＞
《コンピュータ》
図１に示すサーバ１２は、例えば図２に示すようなハードウェア構成のコンピュータ５００により実現される。図２は、本実施形態に係るコンピュータの一例のハードウェア構成図である。

【0020】

図２に示されているように、コンピュータ５００はＣＰＵ（Central Processing Unit）５０１、ＲＯＭ（Read Only Memory）５０２、ＲＡＭ（Random Access Memory）５０３、ＨＤ５０４、ＨＤＤ（Hard Disk Drive）コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ（Interface）５０８、ネットワークＩ／Ｆ５０９、データバス５１０、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ－ＲＷ（Digital Versatile Disk Rewritable）ドライブ５１４、メディアＩ／Ｆ５１６を備えている。

【0021】

これらのうち、ＣＰＵ５０１は、プログラムに従ってコンピュータ５００全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＨＤ５０４はプログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。

【0022】

ディスプレイ５０６は、カーソル、メニュー、ウインドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。外部機器は、例えば、ＵＳＢメモリやプリンタ等である。ネットワークＩ／Ｆ５０９は、通信ネットワーク１８を利用してデータ通信をするためのインターフェースである。データバス５１０は、ＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0023】

キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ－ＲＷドライブ５１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ５１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

【0024】

《電子黒板》
図３は本実施形態に係る電子黒板の一例のハードウェア構成図である。図３に示すように、電子黒板１４は、ＣＰＵ６０１、ＲＯＭ２０２、ＲＡＭ６０３、ＳＳＤ（Solid State Drive）６０４、ネットワークＩ／Ｆ６０５、及び外部機器接続Ｉ／Ｆ６０６を備えている。

【0025】

ＣＰＵ６０１は、プログラムに従って電子黒板１４全体の動作を制御する。ＲＯＭ６０２は、ＣＰＵ６０１やＩＰＬ等のＣＰＵ６０１の駆動に用いられるプログラムを記憶する。ＲＡＭ６０３は、ＣＰＵ６０１のワークエリアとして使用される。ＳＳＤ６０４は電子黒板１４用のプログラム等の各種データを記憶する。

【0026】

ネットワークＩ／Ｆ６０５は、通信ネットワーク１８との通信を制御する。外部機器接続Ｉ／Ｆ６０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢメモリ６３０、外付け機器（マイク６４０、スピーカ６５０、カメラ６６０等）である。

【0027】

また、電子黒板１４は、キャプチャデバイス６１１、ＧＰＵ（Graphics Processing Unit）６１２、ディスプレイコントローラ６１３、接触センサ６１４、センサコントローラ６１５、電子ペンコントローラ６１６、ＩＣカードリーダ６１７、近距離通信回路６１９、近距離通信回路６１９のアンテナ６１９ａ、電源スイッチ６２２、及び選択スイッチ類６２３を備えている。

【0028】

キャプチャデバイス６１１は、外付けのＰＣ６７０のディスプレイに対して映像情報を静止画または動画として表示させる。ＧＰＵ６１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ６１３はＧＰＵ６１２からの出力画像をディスプレイ６８０等へ出力するために画面表示の制御及び管理を行う。

【0029】

接触センサ６１４はディスプレイ６８０上に電子ペン６９０やユーザの手Ｈ等が接触したことを検知する。センサコントローラ６１５は接触センサ６１４の処理を制御する。接触センサ６１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ６８０の上側両端部に設置された２つ受発光装置が、ディスプレイ６８０に平行して複数の赤外線を放射し、ディスプレイ６８０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。

【0030】

接触センサ６１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ６１５に出力し、センサコントローラ６１５が、物体の接触位置である座標位置を特定する。電子ペンコントローラ６１６は、電子ペン６９０と通信することで、ディスプレイ６８０へのペン先のタッチやペン尻のタッチの有無を判断する。

【0031】

ＩＣカードリーダ６１７はＩＣカード７００に埋め込まれたＲＦタグからＩＣカード７００に固有の識別情報を無線通信で読み取る。ＩＣカードリーダ６１７は電子黒板１４に内蔵されていても、電子黒板１４に外付けされていてもよい。なお、ＩＣカード７００はスマートフォンなどのスマートデバイスが内蔵するものでもよい。また、電子黒板１４はユーザを識別可能な識別情報を取得できるのであればＩＣカードリーダ６１７以外を利用してもよく、生体認証装置（指紋、掌紋、虹彩、顔など）やバーコード読み取り装置等を利用してもよい。

【0032】

また、近距離通信回路６１９はＮＦＣやＢｌｕｅｔｏｏｔｈ等の通信回路である。電源スイッチ６２２は、電子黒板１４の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類６２３は、例えば、ディスプレイ６８０の表示の明暗や色合い等を調整するためのスイッチ群である。

【0033】

更に、電子黒板１４はバスライン６１０を備えている。バスライン６１０は、図３に示されているＣＰＵ６０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0034】

なお、接触センサ６１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ６１６が、電子ペン６９０のペン先及びペン尻だけでなく、電子ペン６９０のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

【0035】

なお、電子黒板１４用のプログラムは、ＣＤ－ＲＯＭ等のコンピュータで読み取り可能な記録媒体に記録して流通させることで提供するようにしてもよいし、オンプレミスやクラウドで運用されるサーバからのダウンロードで提供するようにしてもよい。サーバ１２は電子黒板１４用のプログラムを電子黒板１４にダウンロードさせる機能を有していてもよい。

【0036】

＜機能構成＞
本実施形態に係る電子黒板１４は例えば図４に示す機能構成により実現される。図４は本実施形態に係る電子黒板の一例の機能構成図である。図４の機能構成は、本実施形態の説明に不要な構成について適宜省略している。

【0037】

図４の電子黒板１４は図３に示されているハードウェア構成及び電子黒板用のプログラムによって、図４に示す各機能構成を実現する。電子黒板１４は、音声再生部２０、音声入力部２２、音声処理部２４、データリンク部２６、映像表示部２８、表示処理部３０、ページ処理部３２、操作入力部３４、操作処理部３６、ストローク処理部３８、カード情報取得部４０、ユーザ認証部４２、状態管理部４４、及びデータ記録部４６を有する。

【0038】

音声再生部２０、音声入力部２２、及び音声処理部２４は電子黒板１４用のプログラムが動作するＯＳ（オペレーティングシステム）の機能を利用する。音声再生部２０は音声処理部２４から送信された音声データをスピーカ６５０で再生する。音声入力部２２はマイク６４０から入力された音声データを音声処理部２４に送信する。

【0039】

音声処理部２４は再生する音声データをデータ記録部４６から読み出し、読み出した音声データを音声再生部２０に送信してスピーカ６５０で再生させる。また、音声処理部２４は音声入力部２２から受信した音声データを録音し、データ記録部４６に記憶させる。

【0040】

映像表示部２８は表示処理部３０から送信された画像データをタッチディスプレイ７１０に表示する。なお、タッチディスプレイ７１０は図３のディスプレイ６８０及び接触センサ６１４に対応する。操作入力部３４はタッチディスプレイ７１０上でユーザにより生じたイベント（タッチディスプレイ７１０上にユーザの手Ｈがタッチされた動作など）を検出し、検出したイベントの座標位置を操作処理部３６に送信する。

【0041】

操作処理部３６は、操作入力部３４から座標位置を受信したイベントを、ストローク描画、ＵＩ操作、及びジェスチャ操作の各イベントに振り分ける。ストローク描画はタッチディスプレイ７１０上で例えば電子ペン６９０を押下し、押下した状態で電子ペン６９０を移動させ、最終的にタッチディスプレイ７１０から電子ペン６９０を離すまでのイベントである。

【0042】

このストローク描画により、例えば、手書き入力のアルファベット「Ｓ」や「Ｔ」等がタッチディスプレイ７１０上に描画される。なお、ストローク描画には、手書き入力の画像を描画するだけでなく、既に描画された画像を削除したり、描画された画像を編集したり、するイベントも含まれる。

【0043】

ＵＩ操作は、タッチディスプレイ７１０上に例えば後述のＵＩ画面１１００が表示されている場合に、ユーザが例えば電子ペン６９０又は手Ｈによって所定の座標位置を押下したイベントである。このＵＩ操作により、例えば、電子ペン６９０により描画される線の色や幅等が設定される。

【0044】

ジェスチャ操作は、タッチディスプレイ７１０上にストローク画像等の画像が表示されている場合に、ユーザが手Ｈでタッチディスプレイ７１０上をタッチしたり移動させたりするイベントである。このジェスチャ操作により、ユーザはタッチディスプレイ７１０に手Ｈをタッチさせた状態で手Ｈを移動させることで、画像の拡大（若しくは縮小）、表示領域の変更、又は、ページ切り換え等を行うことができる。

【0045】

操作処理部３６は、ＵＩ操作と判断されたものから、イベントが発生されたＵＩ画面１１００等の要素（表示部品）に従って、各種操作を実行する。このＵＩ画面１１００等の要素としては、例えば、ボタン、リスト、チェックボックス、テキストボックス等が挙げられる。また、操作処理部３６は、ジェスチャ操作と判断したものに対応した操作を実行する。

【0046】

表示処理部３０は、ページ処理部３２が生成したＵＩ画面１１００などの画像データを映像表示部２８に送信してタッチディスプレイ７１０に表示させる。ストローク処理部３８は、操作処理部３６によって割り振られたストローク描画のイベントに基づいて、画像を描画したり、描画された画像を削除したり、描画された画像を編集する。

【0047】

ページ処理部３２は、ストローク処理部３８からの手書き入力の画像、データ記録部４６に記憶されている各種データなどを用いて、ＵＩ画面１１００、後述のまとめページ画面１２００などの画面の画像データを生成する。カード情報取得部４０はＩＣカード７００からＩＣカード７００に固有の識別情報の一例であるカードＩＤを取得し、ユーザ認証部４２に送信する。

【0048】

ユーザ認証部４２は、カード情報取得部４０から受信したカードＩＤ及び後述のユーザテーブルに基づいてユーザ認証を行う。例えばユーザ認証部４２は、カード情報取得部４０から受信したカードＩＤが後述のユーザテーブルに登録されていれば、認証が成功と判定する。ユーザ認証部４２はユーザから入力されたユーザＩＤ及びパスワードに基づいてユーザ認証を行ってもよい。また、ユーザ認証部４２はカメラ６６０、生体認証装置等を用いて認証情報等を取得し、認証情報等に基づいてユーザ認証を行うこともできる。電子黒板１４は、ユーザ認証を自装置が行ってもよく、又はユーザ認証を外部装置に行わせてもよい。

【0049】

状態管理部４４はユーザ認証部４２によるユーザ認証の結果に基づく状態（ユーザ認証成功前の状態やユーザ認証成功後の状態など）を管理し、管理している状態を操作処理部３６に提供する。

【0050】

データリンク部２６は後述のユーザデータ、ホワイトボードデータ、ページデータ、音声データ、及び手書きデータを、ユーザテーブル、ホワイトボードテーブル、ページデータテーブル、音声データテーブル、及び手書きデータテーブルを用いて対応付け、データ記録部４６に記憶させる。データ記録部４６は、図５に示すようなユーザテーブル、図６に示すようなホワイトボードテーブル、図７に示すようなページデータテーブル、図８に示すような音声データテーブル、及び図９に示すような手書きデータテーブルを記憶している。なお、図５～図９のテーブルではデータをＧＵＩＤ（ＵＵＩＤ）で管理する例を示している。ＧＵＩＤは例えば｛104110D9-7794-4C82-95C1-694A0F164F81｝のような形式となる。

【0051】

図５はユーザテーブルの一例の構成図である。図５のユーザテーブルは、ユーザＩＤ、カードＩＤ、及びパスワードを項目として有するユーザデータを管理する。ユーザＩＤはユーザを識別する識別情報の一例である。カードＩＤはＩＣカード７００を識別する識別情報の一例である。パスワードはユーザ認証に用いる認証情報の一例である。

【0052】

図６はホワイトボードテーブルの一例の構成図である。図６のホワイトボードテーブルは、ホワイトボードＩＤ、ユーザＩＤ、及び終了時刻を項目として有するホワイトボードデータを管理する。ホワイトボードＩＤは、電子黒板１４を識別する識別情報の一例である。ユーザＩＤは、ユーザを識別する識別情報の一例である。終了時刻はユーザＩＤにより識別されるユーザが、ホワイトボードＩＤにより識別される電子黒板１４を最後に使用した際の使用終了時刻を表す。

【0053】

図７はページデータテーブルの一例の構成図である。図７のページデータテーブルは、ページデータＩＤ、ユーザＩＤ、ホワイトボードＩＤ、サマリーページＦｌａｇ、録音Ｆｌａｇ、及びページデータパスを項目として有するページデータを管理する。

【0054】

ページデータＩＤはページデータを識別する識別情報の一例である。ユーザＩＤはユーザを識別する識別情報の一例である。ホワイトボードＩＤは電子黒板１４を識別する識別情報の一例である。サマリーページＦｌａｇは、後述のまとめページであるか否かを示す情報の一例である。サマリーページＦｌａｇは、まとめページの場合に「ＴＲＵＥ」となり、まとめページ以外の場合に「ＦＡＬＳＥ」となる。

【0055】

録音Ｆｌａｇは、音声データを録音するか否かを示す情報の一例である。録音Ｆｌａｇは音声データを録音する状態の場合に「ＴＲＵＥ」となり、音声データを録音しない状態の場合に「ＦＡＬＳＥ」となる。ページデータパスはページデータの所在を表す情報の一例である。

【0056】

図８は音声データテーブルの一例の構成図である。図８の音声データテーブルは、音声データＩＤ、ページデータＩＤ、開始時刻、終了時刻、及び音声データパスを項目として有する音声データを管理する。

【0057】

音声データＩＤは音声データを識別する識別情報の一例である。ページデータＩＤはページデータを識別する識別情報の一例である。開始時刻は音声データの録音開始時刻を表している。終了時刻は音声データの録音終了時刻を表している。音声データパスは音声データの所在を表す情報の一例である。例えば音声データはＭＰ３形式で記憶・再生できる。一例として、音声データＩＤ「ＧＵＩＤ♯３００１」が示す音声データを説明する。本音声データは、ページデータＩＤ「ＧＵＩＤ♯２００３」が示すページデータを電子黒板１４に表示させた際に録音された音声データである。本音声データは、２０２０年０１月１１日１３時３０分００秒から録音を開始して、１３時３７分００秒に録音を終了した音声データである。

【0058】

図９は手書きデータテーブルの一例の構成図である。図９の手書きデータテーブルは、手書きデータＩＤ、ページデータＩＤ、音声データＩＤ、経過時間、領域ＩＤ、手書きデータパスを項目として有する手書きデータを管理する。

【0059】

手書きデータＩＤは手書きデータを識別する識別情報の一例である。ページデータＩＤはページデータを識別する識別情報の一例である。音声データＩＤは音声データを識別する識別情報の一例である。経過時間は音声データの録音を開始してから手書き開始までに経過した時間を表している。領域ＩＤは、まとめページの手書きを行った後述の領域を表している。手書きデータパスは手書きデータの所在を表す情報の一例である。例えば手書きデータはインクシリアル化形式（ＩＳＦ）で記憶・表示できる。

【0060】

一例として、手書きデータＩＤ「ＧＵＩＤ♯５１０１」が示す手書きデータを説明する。本手書きデータは、ページデータＩＤ「ＧＵＩＤ♯２００３」が示すページデータを電子黒板１４に表示させた際に手書きしたデータである。音声データ「ＧＵＩＤ♯３００１」は、１３時３０分００秒から録音を開始する音声データである。手書きデータＩＤ「ＧＵＩＤ♯５１０１」は、領域ＩＤが１を示す領域に対して、録音を開始した３１５秒後である１３時３５分１５秒から、手書きが開始された手書きデータである。同様にして、手書きデータＩＤ「ＧＵＩＤ♯５１０２」は、領域ＩＤが１を示す領域に対して、録音を開始した３１６秒後である１３時３５分１６秒から、手書きが開始された手書きデータである。また、手書きデータＩＤ「ＧＵＩＤ♯５１１５」は、領域ＩＤが２を示す領域に対して、録音を開始した３２２秒後である１３時３５分２２秒から、手書きが開始された手書きデータである。

【0061】

＜処理＞
本実施形態に係る画像処理システム１０は、例えば図１０に示すような手順でページ表示の処理を行う。図１０は、電子黒板のページ表示の処理手順の一例のフローチャートである。図１０のページ表示の処理は、ユーザがユーザ認証を行い、ユーザ認証に成功した場合に、ユーザが前回使用したページを表示する処理の一例である。ユーザが電子黒板１４の前回の使用で、まとめページを作成していた場合に、電子黒板１４は、まとめページを表示する。

【0062】

ステップＳ１０において、電子黒板１４の映像表示部２８は図１１に示すようなユーザ認証画面１０００をタッチディスプレイ７１０に表示し、ＩＣカード７００によるログインを待ち受ける。図１１はユーザ認証画面の一例のイメージ図である。電子黒板１４を使用するユーザは、自分のＩＣカード７００をＩＣカードリーダ６１７にかざす。

【0063】

ステップＳ１２において、カード情報取得部４０はＩＣカード７００のカードＩＤを取得し、ユーザ認証部４２に送信する。ユーザ認証部４２はカード情報取得部４０から受信したカードＩＤ及び図５のユーザテーブルに基づいてユーザ認証を行う。ステップＳ１４において、ユーザ認証部４２はユーザ認証が成功か失敗かを判定する。ユーザ認証部４２はカード情報取得部４０から受信したカードＩＤが図５のユーザテーブルに登録されていれば認証が成功と判定する。また、ユーザ認証部４２は、カード情報取得部４０から受信したカードＩＤが図５のユーザテーブルに登録されていなければ認証が失敗と判定する。

【0064】

認証が失敗と判定した場合、電子黒板１４はステップＳ１０に戻り、ＩＣカード７００によるログインを待ち受ける状態に戻る。また、認証が成功と判定した場合、電子黒板１４のページ処理部３２はステップＳ１６に進み、図５のユーザテーブルから認証に成功したユーザのユーザＩＤ（ＧＵＩＤ）を取得する。

【0065】

ステップＳ１８において、ページ処理部３２はステップＳ１６で取得したユーザＩＤ及び図６のホワイトボードテーブルに基づいて、認証に成功したユーザが最後に使用した電子黒板１４のホワイトボードＩＤ（ＧＵＩＤ）を取得する。

【0066】

ステップＳ２０において、ページ処理部３２は、ステップＳ１６で取得したユーザＩＤと、ステップＳ１８で取得したホワイトボードＩＤと、図７のページデータテーブルとに基づいて、認証に成功したユーザが最後に使用した電子黒板１４のページデータＩＤ（ＧＵＩＤ）を取得する。

【0067】

ステップＳ２２において、ページ処理部３２はステップＳ２０で取得したページデータＩＤのページデータと、ステップＳ２０で取得したページデータＩＤに対応する図９の手書きデータとに基づいて、ホワイトボードページデータを復元する。

【0068】

ステップＳ２４において表示処理部３０は図１２のＵＩ画面１１００又は図１３のまとめページ画面１２００をタッチディスプレイ７１０に表示させる。例えば表示処理部３０はステップＳ２０で取得したページデータの項目「サマリーページＦｌａｇ」が「ＴＲＵＥ」でなければ、図１２のようなＵＩ画面１１００をタッチディスプレイ７１０に表示させる。また、例えば表示処理部３０はステップＳ２０で取得したページデータの項目「サマリーページＦｌａｇ」が「ＴＲＵＥ」であれば、図１３のようなまとめページ画面１２００をタッチディスプレイ７１０に表示させる。

【0069】

図１２はＵＩ画面の一例のイメージ図である。図１２のＵＩ画面１１００はユーザからの指示を受け付ける表示部品の一例として、ページ追加ボタン１１０２、ページ削除ボタン１１０４、まとめページ作成ボタン１１０６、全ページ削除ボタン１１０８、ページ選択ボタン１１１０、ページリストスクロールボタン１１１２、ページ読み込みボタン１１１４、手書きボタン１１１６、終了ボタン１１１８、及び手書き削除ボタン１１２０が設けられている。

【0070】

ページ追加ボタン１１０２はユーザからのページ追加指示を受け付ける。ページ削除ボタン１１０４はユーザからのページ削除指示を受け付ける。まとめページ作成ボタン１１０６はユーザからの、まとめページ作成指示を受け付ける。全ページ削除ボタン１１０８はユーザからの全ページ削除指示を受け付ける。ページ選択ボタン１１１０はユーザからのページ選択指示を受け付ける。ページリストスクロールボタン１１１２はユーザからのページリストのスクロール指示を受け付ける。

【0071】

ページ読み込みボタン１１１４はユーザからのページの読み込み指示を受け付ける。手書きボタン１１１６はユーザからの手書き指示を受け付ける。終了ボタン１１１８はユーザからの終了指示を受け付ける。また、手書き削除ボタン１１２０はユーザからの手書き削除指示を受け付ける。

【0072】

図１３はまとめページ画面の一例のイメージ図である。図１３のまとめページ画面１２００は図１２の表示部品に加えて、領域１２０２、音声再生ボタン１２０４、すべての音声再生ボタン１２０６、音声削除ボタン１２０８、及びまとめページのページ選択ボタン１２１０が設けられている。

【0073】

図１３のまとめページ画面１２００の画像データは図１２のまとめページ作成ボタン１１０６がユーザに押下されることにより作成され、図７のページデータテーブルに新規のレコードとして追加される。１つ以上の領域１２０２はユーザからの手書き入力を受け付ける画面上の領域である。音声再生ボタン１２０４は領域１２０２ごとに設けられ、ユーザからの音声再生指示を受け付ける。

【0074】

すべての音声再生ボタン１２０６は、まとめページ画面１２００と対応付けられている全ての音声データを再生する音声再生指示をユーザから受け付ける。まとめページのページ選択ボタン１２１０はユーザからのまとめページ選択指示を受け付ける。

【0075】

例えば図１２のＵＩ画面１１００又は図１３のまとめページ画面１２００で、ページ選択ボタン１１１０が押下されるなど、ページが切り替わるイベントを受け取ると、電子黒板１４のページ処理部３２は図１４に示すような手順で手書きデータの入力や音声データの録音の処理を行う。図１４は電子黒板の手書きデータの入力及び音声データの録音の処理手順の一例のフローチャートである。

【0076】

ステップＳ３０において、ページ処理部３２はページが切り替わるイベントをユーザから受け取ったものとする。ステップＳ３２において、ページ処理部３２は音声データの録音中であるか否かを判定する。すでに音声データが録音されている場合、電子黒板１４の音声処理部２４はステップＳ３４において音声データの録音を停止し、図８の音声データテーブルの対応するレコードに終了時刻を設定する。音声データが録音されていない場合はステップＳ３４の処理がスキップされる。

【0077】

また、ページ処理部３２は切り替わるページのページデータテーブルのサマリーページＦｌａｇが「ＴＲＵＥ」であるか否かを判定する。切り替わるページのページデータテーブルのサマリーページＦｌａｇが「ＴＲＵＥ」でなければ、ページ処理部３２はページの切り替えにより表示される画面が、まとめページ画面１２００でないため、図１４の処理を終了する。

【0078】

切り替わるページのページデータテーブルのサマリーページＦｌａｇが「ＴＲＵＥ」であればページ処理部３２はページの切り替えにより表示される画面が、まとめページ画面１２００であるため、ステップＳ３８に進み、まとめページ画面１２００のページデータテーブルの録音Ｆｌａｇが「ＴＲＵＥ」であるか否かを判定する。

【0079】

まとめページ画面１２００のページデータテーブルの録音Ｆｌａｇが「ＴＲＵＥ」でなければ、ページ処理部３２は音声データが録音済みであるため、図１４の処理を終了する。まとめページ画面１２００のページデータテーブルの録音Ｆｌａｇが「ＴＲＵＥ」であれば、ページ処理部３２は音声データが録音されていないため、ステップＳ４２に進み、音声再生ボタン１２０４及びすべての音声再生ボタン１２０６を使用不可にする。

【0080】

ステップＳ４４において、ページ処理部３２は音声データテーブルに新規のレコードを追加し、音声データＩＤ、ページデータＩＤ、開始時刻を設定する。ステップＳ４６において音声処理部２４は音声データの録音を開始する。また、ページ処理部３２は音声データの保存先を音声データパスとして設定する。

【0081】

まとめページ画面１２００への手書き入力が開始されると、ステップＳ４８からステップＳ５０に進み、ページ処理部３２は手書き入力が開始された手書き開始位置が領域１２０２内にあるか否かを判定する。手書き入力が開始された手書き開始位置が領域１２０２内でなければページ処理部３２はステップＳ４８に戻り、次の手書き入力まで待機する。

【0082】

手書き入力が開始された手書き開始位置が領域１２０２内であれば、ページ処理部３２はステップＳ５２に進み、図９の手書きテーブルに新規のレコードを追加し、手書きデータＩＤ、ページデータＩＤ、及び領域ＩＤを設定する。また、ページ処理部３２は録音の開始時刻を記録する。

【0083】

ステップＳ５４において、ページ処理部３２は、まとめページ画面１２００への手書き入力が終了すると、ステップＳ５４からステップＳ５６に進み、手書きデータを保存し、図９の手書きデータテーブルの手書きデータパスに、手書きデータの保存先を設定する。ページ処理部３２はステップＳ４８に戻り、次の手書き入力まで待機する。

【0084】

また、例えば図１３の音声再生ボタン１２０４又はすべての音声再生ボタン１２０６が押下されると、電子黒板１４のページ処理部３２は図１５又は図１６に示すような手順で音声データを再生する。図１５及び図１６は、電子黒板の音声データの再生の処理手順の一例のフローチャートである。なお、図１５では、まとめページ画面１２００の領域ＩＤ「１」の領域の音声再生ボタン１２０４が押下された例を示している。図１６では、まとめページ画面１２００のすべての音声再生ボタン１２０６が押下された例を示している。

【0085】

ステップＳ６０において、ページ処理部３２は図９の手書きデータテーブルから、対象のページデータＩＤで領域ＩＤが「１」のレコードを抽出する。ページ処理部３２はステップＳ６２において、ステップＳ６０で抽出したレコードの音声データＩＤを抽出し、抽出した音声データＩＤが設定されているレコードを図８の音声データテーブルから抽出する。

【0086】

ステップＳ６４に進み、ページ処理部３２は領域ＩＤ「１」の手書きデータテーブルのレコードを消去する。ページ処理部３２はステップＳ６２で抽出した音声データテーブルのレコードを録音の開始時間で降順に並び替え、ステップＳ６８～Ｓ７０においてレコードごとに音声データを再生する。音声データの再生の開始からＮ秒経過後に、経過時間がＮの手書きデータがあれば、ページ処理部３２は、その手書きデータを領域ＩＤ「１」の領域に描画する。

【0087】

例えば領域ＩＤ「１」の領域に、図１７の発話データに示す音声データが録音されているものとして説明する。図１７は発話データの一例のイメージ図である。図１７に示す発話データは、発話者、発話時間、及び発話内容を表している。例えば図１７の発話データに示す音声データが録音されている場合、発話者「サトウ」の発話時間「１３：３５：１３－１３：３５：２２」の音声再生中に、領域ＩＤ「１」の領域には図９の手書きデータＩＤ「ＧＵＩＤ＃５１０１」「ＧＵＩＤ＃５１０２」「ＧＵＩＤ＃５１０３」が、それぞれの経過時間「３１５」「３１６」「３１７」に従って表示される。

【0088】

図１６のステップＳ８０において、ページ処理部３２は図９の手書きデータテーブルから、対象のページデータＩＤのレコードを抽出する。ページ処理部３２はステップＳ８２において、ステップＳ８０で抽出したレコードの音声データＩＤを抽出し、抽出した音声データＩＤが設定されているレコードを図８の音声データテーブルから抽出する。

【0089】

ステップＳ８４に進み、ページ処理部３２は対象のページデータＩＤの手書きデータテーブルのレコードを消去する。ページ処理部３２はステップＳ８２で抽出した音声データテーブルのレコードを録音の開始時間で降順に並び替え、ステップＳ８８～Ｓ９０においてレコードごとに音声データを再生する。音声データの再生の開始からＮ秒経過後に、経過時間がＮの手書きデータがあれば、ページ処理部３２は、その手書きデータを領域ＩＤの領域に描画する。

【0090】

［他の実施形態］
なお、本実施形態の画像処理システム１０は図１５又は図１６に示すような手順で音声データを再生したあと、音声データ及び手書きデータを自動的に削除して、サーバ１２又は電子黒板１４の記憶容量の逼迫を避けるようにしてもよい。また、図１５又は図１６に示すような手順で音声データを再生したあと、本実施形態の画像処理システム１０は音声データ及び手書きデータを削除するか否かをユーザに問い合わせる表示を行い、ユーザから音声データ及び手書きデータを削除する操作を受け付けるようにしてもよい。

【0091】

また、音声データ及び手書きデータを削除するタイミングは再生時に限られない。例えば、音声データ及び手書きデータを新たに録音／記録した際に、電子黒板１４の記憶容量の残量を算出する。その残量が今回録音／記録した音声データ及び手書きデータの容量よりも少ない（仮に同じ音声データ及び手書きデータを改めて録音／記録しようとしても実行できない）と判断される場合に、音声データ及び手書きデータを削除するか否かをユーザに問い合わせる表示を行ってもよい。

【0092】

本発明は、具体的に開示された上記の実施形態に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。なお、本実施形態で説明した画像処理システム１０は一例であって、用途や目的に応じて様々なシステム構成例があることは言うまでもない。

【0093】

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

【0094】

実施例に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。

【0095】

ある実施形態では、サーバ１２は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、通信ネットワーク１８や共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様に、電子黒板１４は、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。

【0096】

さらに、サーバ１２、及び電子黒板１４は開示された処理ステップを様々な組み合わせで共有するように構成できる。例えば、電子黒板１４によって実行されるプロセスは、サーバ１２によって実行され得る。同様に、サーバ１２によって実行されるプロセスは、電子黒板１４によって実行することができる。また、サーバ１２と電子黒板１４の各要素は、１つの装置にまとめられていてもよいし、複数の装置に分けられていてもよい。

【0097】

なお、手書きデータはユーザから入力された入力データの一例である。入力データとはユーザにより入力され、タッチディスプレイ７１０に表示されるデータであって、例えばストロークデータである。また、入力データに関連する音声データとは、入力データと対応付けられて記憶される音声データであって、例えば入力データの入力時に録音された音声データである。表示処理部３０は表示処理手段の一例である。音声処理部２４は音声処理手段の一例である。ページ処理部３２はページ処理手段の一例である。ユーザＩＤはユーザ識別情報の一例である。データ記録部４６はデータ記録手段の一例である。ユーザ認証部４２はユーザ認証手段の一例である。

【符号の説明】

【0098】

１０ 画像処理システム
１２ サーバ
１４ 電子黒板
１８ 通信ネットワーク
２０ 音声再生部
２２ 音声入力部
２４ 音声処理部
２６ データリンク部
２８ 映像表示部
３０ 表示処理部
３２ ページ処理部
３４ 操作入力部
３６ 操作処理部
３８ ストローク処理部
４０ カード情報取得部
４２ ユーザ認証部
４４ 状態管理部
４６ データ記録部
６１４ 接触センサ
６１７ ＩＣカードリーダ
６４０ マイク
６５０ スピーカ
６８０ ディスプレイ
６９０ 電子ペン
７００ ＩＣカード
７１０ タッチディスプレイ
１１０６ まとめページ作成ボタン
１２００ まとめページ画面
１２０２ 領域
１２０４ 音声再生ボタン

【先行技術文献】

【特許文献】

【0099】

【文献】特開２００５－２８４４９０号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】