ホーム > 特許ランキング > ソニーグループ株式会社
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-11-11
(45)【発行日】2024-11-19
(54)【発明の名称】情報処理装置、情報処理方法及びプログラム
(51)【国際特許分類】
G06F 3/041 20060101AFI20241112BHJP
G06F 3/042 20060101ALI20241112BHJP
G06F 3/0346 20130101ALI20241112BHJP
G06F 3/038 20130101ALI20241112BHJP
【ＦＩ】
G06F3/041 560
G06F3/042 473
G06F3/0346 422
G06F3/038 310Y
【請求項の数】
11
(21)【出願番号】P 2021569828
(86)(22)【出願日】2020-12-23
(86)【国際出願番号】 JP2020048295
(87)【国際公開番号】W WO2021140921
(87)【国際公開日】2021-07-15
【審査請求日】2023-11-27
(31)【優先権主張番号】P 2020001790
(32)【優先日】2020-01-09
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】000002185
【氏名又は名称】ソニーグループ株式会社
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】池田 拓也
【審査官】野田 洋平
(56)【参考文献】
【文献】特開２０１７－１５７９１６（ＪＰ，Ａ）
【文献】国際公開第２０１４／０３４０４９（ＷＯ，Ａ１）
【文献】特開２０１８－１５６４６６（ＪＰ，Ａ）
【文献】国際公開第２０１８／１１６４６２（ＷＯ，Ａ１）
【文献】特開２０１０－１５２７１７（ＪＰ，Ａ）
【文献】特開２０１１－１２３５８０（ＪＰ，Ａ）
【文献】特開２０１６－１８４２６８（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｆ ３／０４１
Ｇ０６Ｆ ３／０４２
Ｇ０６Ｆ ３／０３４６
Ｇ０６Ｆ ３／０３８
(57)【特許請求の範囲】
【請求項1】
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
を備え、
前記発光制御部は、
前記検出部が検出した前記発光部に応じた位置が、閾値距離以内に接近した場合に、複数の前記操作体が接近したと判定し、
所定時間を前記閾値距離以内に接近している前記操作体の数で除した、少なくも画像入力に要する時間を超える時間毎に、前記操作体の発光部を互いに異なるタイミングで点滅させ、
前記操作体が実行しているタスクの内容に応じて、前記所定時間内における各操作体の前記発光部の点灯時間の割合を制御する、
情報処理装置。
【請求項2】
前記発光制御部は、前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態である場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
請求項１に記載の情報処理装置。
【請求項3】
前記発光制御部は、前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態であって、前記別の操作体が情報入力状態でない場合に、
前記操作体の発光部を点灯させて、前記別の操作体の発光部を消灯させる、
請求項１に記載の情報処理装置。
【請求項4】
前記発光制御部は、前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態でなく、前記別の操作体が情報入力状態である場合に、
前記操作体の発光部を消灯させて、前記別の操作体の発光部を点灯させる、
請求項１に記載の情報処理装置。
【請求項5】
前記発光制御部は、前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態でない場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
請求項１に記載の情報処理装置。
【請求項6】
前記表示制御部は、異なる前記操作体の前記発光部に応じた位置が前記閾値距離以内に接近した際に、前記操作体を遠ざけることを促す情報を表示させる、
請求項１に記載の情報処理装置。
【請求項7】
前記閾値距離は、前記操作体の移動速度又は移動方向に基づいて設定される、
請求項１に記載の情報処理装置。
【請求項8】
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、前記発光制御部は、前記操作体の前記発光部に応じた位置から前記閾値距離以内に接近している全ての前記操作体の前記発光部を、互いに異なるタイミングで点滅させる、
請求項１に記載の情報処理装置。
【請求項9】
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、前記発光制御部は、少なくとも、前記閾値距離以内に接近している前記位置に係る前記発光部を、互いに異なるタイミングで点滅させる、
請求項１に記載の情報処理装置。
【請求項10】
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御プロセスと、前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出プロセスと、
前記操作体が情報入力状態にある場合に、前記検出プロセスによって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御プロセスと、
を備え、
前記発光制御プロセスは、
前記検出プロセスが検出した前記発光部に応じた位置が、閾値距離以内に接近した場合に、複数の前記操作体が接近したと判定し、
所定時間を前記閾値距離以内に接近している前記操作体の数で除した、少なくも画像入力に要する時間を超える時間毎に、前記操作体の発光部を互いに異なるタイミングで点滅させ、
前記操作体が実行しているタスクの内容に応じて、前記所定時間内における各操作体の前記発光部の点灯時間の割合を制御する、
情報処理方法。
【請求項11】
コンピュータを、情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、
前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
して機能させ、
前記発光制御部は、
前記検出部が検出した前記発光部に応じた位置が、閾値距離以内に接近した場合に、複数の前記操作体が接近したと判定し、
所定時間を前記閾値距離以内に接近している前記操作体の数で除した、少なくも画像入力に要する時間を超える時間毎に、前記操作体の発光部を互いに異なるタイミングで点滅させ、
前記操作体が実行しているタスクの内容に応じて、前記所定時間内における各操作体の前記発光部の点灯時間の割合を制御する、
プログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、情報処理装置、情報処理方法及びプログラムに関し、特に、複数の電子ペンが近接している場合であっても、各電子ペンに対応する位置を確実に捕捉することが可能な情報処理装置、情報処理方法及びプログラムに関する。
【背景技術】
【0002】
従来、電子ペンを用いて表示画面上に図形や文字を書き込んだり、ＵＩ（User Interface）操作をしたりするインタラクティブプロジェクタが製品化されている。このようなシステムでは、通常電子ペンから発光される光、主に赤外光（ＩＲ光）をカメラで撮像して、その撮像画像を解析することによって電子ペンの位置を検出している（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【0003】
【文献】国際公開第２０１９／１３０６９６号
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献１では、複数の電子ペンが発光するＩＲ光が互いに近接した場合に、これらのＩＲ光を分離して検出するのが難しいという問題があった。これは、ＩＲ光を撮像するカメラが、互いに近接したＩＲ光を、同一の輝点であると認識してしまうためである。
【0005】
本開示では、複数の電子ペンが近接している場合であっても、各電子ペンに対応する位置を確実に捕捉することが可能な情報処理装置、情報処理方法及びプログラムを提案する。
【課題を解決するための手段】
【0006】
上記の課題を解決するために、本開示に係る一形態の情報処理装置は、当該情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出部と、前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、を備える情報処理装置である。
【図面の簡単な説明】
【0007】
【図1】第１の実施形態に係るインタラクティブプロジェクタのシステム構成図である。
【図2】電子ペンの概略構造を示す概略構造図である。
【図3】インタラクティブプロジェクタの機能構成の一例を示す機能ブロック図である。
【図4】第１の実施形態の情報処理装置及び電子ペンが行う処理の流れの一例を示すフローチャートである。
【図5】電子ペンの入力位置検出処理及びＩＤ識別処理の流れの一例を示すフローチャートである。
【図6】第１の実施形態に係るインタラクティブプロジェクタが電子ペンを識別する処理の流れを示すタイムチャートである。
【図7】輝点検出方法を説明する図である。
【図8】輝点の距離に基づくＩＤ入れ替わり判定処理の概要を説明する図である。
【図9】輝点の距離が閾値距離以内である場合に、発光制御部が発行するＩＲ ＬＥＤ制御命令を説明する図である。
【図10】電子ペン２本の場合のＩＤ入れ替わり防止例を示すタイムチャートである。
【図11】電子ペン３本の場合のＩＤ入れ替わり防止例を示すタイムチャートである。
【図12】電子ペンのＩＤ入れ替わり防止判定処理の流れの一例を示すフローチャートである。
【図13】電子ペンの状態遷移の一例を示す状態遷移図である。
【図14】検出された輝点位置を、カメラ座標系からプロジェクタスクリーン座標系に変換する処理の流れを説明する図である。
【図15】閾値距離以内に接近した複数の電子ペンを含むグループの一部が重複した状態の一例を示す図である。
【図16】和集合に属する全ての電子ペンのＩＲ ＬＥＤを時分割発光させる例を示すタイムチャートである。
【図17】各グループ内で発光パターンが重複しないように電子ペンのＩＲ ＬＥＤを点滅させる例を示すタイムチャートである。
【図18】本開示の応用例であるシューティングシステムの概要図である。
【図19】本開示の応用例であるミニカー走行競技システムの概要を示す第１の図である。
【図20】本開示の応用例であるミニカー走行競技システムの概要を示す第２の図である。
【図21】本開示の応用例であるベーゴマ競技システムの概要を示す図である。
【図22】本開示の応用例であるエアーホッケーシステムの概要を示す図である。
【図23】本開示の応用例であるボルダリングシステムの概要を示す図である。
【図24】本開示の応用例である群ロボット制御システムの概要を示す図である。
【図25】本開示の応用例であるＡＲ／ＶＲ応用システムの概要を示す図である。
【発明を実施するための形態】
【0008】
以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、以下の各実施形態において、同一の部位には同一の符号を付することにより、重複する説明を省略する。
【0009】
また、以下に示す項目順序に従って本開示を説明する。
１．第１の実施形態
１－１．第１の実施形態に係るインタラクティブプロジェクタの説明
１－２．電子ペンの構造の説明
１－３．インタラクティブプロジェクタの機能構成の説明
１－４．情報処理装置及び電子ペンが行う処理の流れの説明
１－５．電子ペンの入力位置検出処理及びＩＤ識別処理の説明
１－６．輝点検出方法の説明
１－７．電子ペンの入れ替わり防止判定処理の説明
１－８．電子ペンの状態遷移の説明
１－９．電子ペン入力結果反映方法の説明
１－１０．第１の実施形態の効果
２．第２の実施形態
３．第３の実施形態
４．第４の実施形態
５．第５の実施形態
６．本開示の応用例（１）
７．本開示の応用例（２）
８．本開示の応用例（３）
９．本開示の応用例（４）
１０．本開示の応用例（５）
１１．本開示の応用例（６）
１２．本開示の応用例（７）
１．第１の実施形態
１－１．第１の実施形態に係るインタラクティブプロジェクタの説明
１－２．電子ペンの構造の説明
１－３．インタラクティブプロジェクタの機能構成の説明
１－４．情報処理装置及び電子ペンが行う処理の流れの説明
１－５．電子ペンの入力位置検出処理及びＩＤ識別処理の説明
１－６．輝点検出方法の説明
１－７．電子ペンの入れ替わり防止判定処理の説明
１－８．電子ペンの状態遷移の説明
１－９．電子ペン入力結果反映方法の説明
１－１０．第１の実施形態の効果
２．第２の実施形態
３．第３の実施形態
４．第４の実施形態
５．第５の実施形態
６．本開示の応用例（１）
７．本開示の応用例（２）
８．本開示の応用例（３）
９．本開示の応用例（４）
１０．本開示の応用例（５）
１１．本開示の応用例（６）
１２．本開示の応用例（７）
【0010】
（１．第１の実施形態）
まず、本開示の第１の実施形態である情報処理装置１０ａについて説明する。
まず、本開示の第１の実施形態である情報処理装置１０ａについて説明する。
【0011】
［１－１．第１の実施形態に係るインタラクティブプロジェクタの説明］
第１の実施形態は、本開示の情報処理装置１０ａを、ホワイトボード２６に複数の電子ペンで描画された位置情報を取得して、取得された位置情報に対応する位置に、プロジェクタによって情報を投影する、インタラクティブプロジェクタ５ａに適用した例である。図１は、第１の実施形態に係るインタラクティブプロジェクタのシステム構成図である。インタラクティブプロジェクタ５ａは、情報処理装置１０ａと、複数の電子ペン１２（１２ａ，１２ｂ，１２ｃ，…）と、カメラ２０と、プロジェクタ２２と、無線通信モジュール２４とを備える。
第１の実施形態は、本開示の情報処理装置１０ａを、ホワイトボード２６に複数の電子ペンで描画された位置情報を取得して、取得された位置情報に対応する位置に、プロジェクタによって情報を投影する、インタラクティブプロジェクタ５ａに適用した例である。図１は、第１の実施形態に係るインタラクティブプロジェクタのシステム構成図である。インタラクティブプロジェクタ５ａは、情報処理装置１０ａと、複数の電子ペン１２（１２ａ，１２ｂ，１２ｃ，…）と、カメラ２０と、プロジェクタ２２と、無線通信モジュール２４とを備える。
【0012】
電子ペン１２は、ホワイトボード等に接触させた状態で移動させることによって、文字や図形等の情報入力を行う情報入力デバイスである。電子ペン１２は、各々が異なる識別番号（ＩＤ）を有して、複数のユーザによって同時に使用され得る。なお、電子ペン１２は、本開示における操作体の一例である。
【0013】
カメラ２０は、電子ペン１２が照射する赤外光を観測可能なカメラである。なお、カメラ２０は、電子ペン１２が照射する赤外光の波長帯の光のみを通す光学フィルタを装着してもよい。カメラ２０は、プロジェクタ２２の近傍に設置されて、少なくともプロジェクタ２２の投影範囲を網羅する領域を撮像する。なお、カメラ２０の光軸と、プロジェクタ２２の光軸とは、略平行に設置されるのが望ましい。
【0014】
プロジェクタ２２は、ホワイトボード２６に対して、電子ペン１２によって情報入力がなされた位置に、当該電子ペン１２の軌跡に応じた情報を投影する。電子ペン１２の軌跡に応じた位置とは、例えば電子ペン１２のペン先とホワイトボード２６との接触位置である。電子ペン１２に応じた情報とは、例えば、当該電子ペン１２によって設定された線の色、線の太さ、線の種類等である。
【0015】
無線通信モジュール２４は、情報処理装置１０ａと電子ペン１２とを無線接続する。無線接続の形態は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）接続であるが、これに限定されるものではなく、例えば、無線ＬＡＮ（Local Area Network）やＺｉｇＢｅｅ（登録商標）等であってもよい。
【0016】
情報処理装置１０ａは、カメラ２０が撮像した画像の中から、ホワイトボード２６と電子ペン１２との接触位置を検出する。具体的には、ホワイトボード２６と電子ペン１２との接触は、電子ペン１２に搭載されたスイッチ１４（図２参照）のＯＮ／ＯＦＦ状態に応じて決定される。そして、ホワイトボード２６と電子ペン１２との接触位置は、カメラ２０が撮像した画像に含まれる、電子ペン１２に搭載されたＩＲ ＬＥＤ１３（図２参照）による輝点の位置に基づいて検出される。また、情報処理装置１０ａは、プロジェクタ２２に対して、検出された接触位置に応じた位置に、電子ペン１２に応じた情報を投影させる。
【0017】
なお、図１に示すプロジェクタ２２の代わりに、ホワイトボード２６の代用となるディスプレイを用いて、電子ペン１２によってディスプレイの表面に情報入力を行う構成としてもよい。また、プロジェクタ２２の代わりに、ホワイトボード２６の位置にスクリーンを設置して、当該スクリーンの裏面側から情報を投影するリアプロジェクションを用いてもよい。更に、スピーカ等の音出力装置を組み合わせてもよい。また、プロジェクタ２２は、例えば駆動機構を有して、任意の方向へ投影可能な装置であってもよい。このような機構を有することで、１カ所だけでなく、様々な箇所に映像を表示でき、かつインタラクティブ機能を実現することが可能になる。
【0018】
【0019】
電子ペン１２は、ＩＲ ＬＥＤ１３と、スイッチ１４と、ＣＰＵ（Central Processing Unit）１５と、無線通信モジュール１６とを備える。
【0020】
ＩＲ ＬＥＤ１３は、電子ペン１２のペン先に内蔵された、人間には不可視で、カメラ２０（図１参照）が備える撮像素子が感度を有する波長の赤外光を発するＬＥＤである。ＩＲ ＬＥＤ１３は、例えば、ＬＥＤのチップの前面が、ペン先の方向を向く砲弾型の樹脂モールド１７で封止された形状を有する。樹脂モールド１７がレンズの役割を果たすため、ＩＲ ＬＥＤ１３から出射した光は、ペン先の近傍に、砲弾の形状に応じたサイズの輝点を形成する。したがって、電子ペン１２のペン先をホワイトボード２６に押し付けた状態にある場合にＩＲ ＬＥＤ１３を点灯させると、前記したカメラ２０は、ホワイトボード２６の表面に、ＩＲ ＬＥＤ１３から放射されたＩＲ光による輝点を観測する（図８参照）。なお、ＩＲ ＬＥＤ１３は、本開示における発光部の一例である。
【0021】
なお、電子ペン１２は、可視光を照射するＬＥＤを備えても、以下に説明するのと同様の作用を実現することができる。但し、可視光を照射するＬＥＤを用いる場合は、カメラ２０が備える撮像素子は、ＬＥＤの発光波長の光に対して感度を持っている必要がある。さらに、カメラ２０が観測した画像に中に、ＬＥＤの発光波長と同色の物体が存在する場合はノイズとなるため、場合によってはこのようなノイズを除去する信号処理を行う必要がある。
【0022】
また、樹脂モールド１７の側面は拡散面になっており、ＩＲ ＬＥＤ１３を点灯させると、電子ペン１２のペン先自体も拡散光を放射する。したがって、ＩＲ ＬＥＤ１３が点灯した状態で、電子ペン１２をホワイトボード２６の表面から離した場合、カメラ２０は、電子ペン１２のペン先がＩＲ光を放射して光っている状態を観測する。これによって、後述するように、情報処理装置１０ａは、ホワイトボード２６の表面から離れた電子ペン１２のペン先の位置をトラッキングすることができる（図１３の状態Ｓｇ参照）。なお、ＩＲ ＬＥＤ１３は、本開示における発光部の一例である。
【0023】
なお、複数の電子ペン１２（１２ａ，１２ｂ，１２ｃ，…）が備えるＩＲ ＬＥＤ１３は、いずれも同じ波長の赤外光を発するものとする。
【0024】
スイッチ１４は、電子ペン１２のペン先に作用する押圧力に応じて作動するスイッチである。即ち、電子ペン１２のペン先をホワイトボード２６や壁等の固定物に押し付けると、スイッチ１４が押されてＯＮ状態となり、離すと元に戻ってＯＦＦ状態となる機構を備える。情報処理装置１０ａは、スイッチ１４の作動状態に基づいて、電子ペン１２がホワイトボード２６に押し付けられているかどうか、即ち、電子ペン１２が入力状態かどうかを判定する。
【0025】
ＣＰＵ１５は、情報処理装置１０ａから受信した制御指令に基づいて、ＩＲ ＬＥＤ１３の点灯状態を制御する。また、ＣＰＵ１５は、スイッチ１４の状態を検出する。更に、ＣＰＵ１５は、情報処理装置１０ａから、ＩＲ ＬＥＤ１３の点灯状態に係る制御指令を受信するとともに、ＩＲ ＬＥＤ１３の点灯状態とスイッチ１４の状態とを情報処理装置１０ａに送信する。
【0026】
無線通信モジュール１６は、情報処理装置１０ａと無線通信を行い、スイッチ１４やＩＲ ＬＥＤ１３の状態を情報処理装置１０ａに送信する。
【0027】
なお、本実施形態では、電子ペン１２は、図２に示すように、ペンの形状をしたデバイスを想定する。しかし、電子ペン１２は、異なる形状のデバイスで構築されていてもよい。例えば、電子ペン１２は、スプレー缶のように、ユーザが吹きかけるように動作させるものとしてもよいし、手足に身に着けるデバイスとしてもよい。
【0028】
［１－３．インタラクティブプロジェクタの機能構成の説明］
次に、図３を用いて、インタラクティブプロジェクタ５ａの機能構成について説明する。図３は、インタラクティブプロジェクタの機能構成の一例を示す機能ブロック図である。
次に、図３を用いて、インタラクティブプロジェクタ５ａの機能構成について説明する。図３は、インタラクティブプロジェクタの機能構成の一例を示す機能ブロック図である。
【0029】
まず、情報処理装置１０ａの機能構成について説明する。情報処理装置１０ａは、カメラ２０の撮影画像や電子ペン１２からの無線情報を受信し、内部処理を行った後、プロジェクタ２２から投影する情報を生成してプロジェクタ２２へ送信する。また、各電子ペン１２へ、ＩＲ ＬＥＤ１３の点灯状態を制御する制御命令を送信する。
【0030】
情報処理装置１０ａは、ＩＤ管理部３０と、通信管理部３１と、発光認識部３２と、座標変換部３３と、電子ペン制御部３４と、記憶部３５と、入出力制御部３６とを備える。
【0031】
ＩＤ管理部３０は、電子ペン１２の識別番号（ＩＤ）と、当該電子ペン１２が備えるＩＲ ＬＥＤ１３の発光状態とを管理する。
【0032】
通信管理部３１は、各電子ペン１２の通信デバイス情報、例えば、電子ペン１２ａの識別番号は「ＡＡ」であり、電子ペン１２ｂの識別番号は「ＢＢ」である等の情報を管理する。
【0033】
発光認識部３２は、カメラ２０で撮像された画像を解析し、電子ペン１２が形成した輝点の位置（カメラ座標系における座標値）を検出する。なお、発光認識部３２は、本開示における検出部の一例である。
【0034】
座標変換部３３は、カメラ２０で撮像された画像の中から検出された輝点の位置を、プロジェクタ２２が投影するプロジェクタスクリーン座標系における座標値へと変換する。具体的には、カメラ２０とプロジェクタ２２とホワイトボード２６との位置関係に基づいて決定する射影行列を用いて、座標変換を行う。
【0035】
電子ペン制御部３４は、電子ペン１２が備えるＩＲ ＬＥＤ１３の発光状態の制御、及び複数の電子ペン１２が近接にある時のＩＤ入れ替わり防止判定等を行う。電子ペン制御部３４は、更に、発光制御部３４ａと、ＩＤ入れ替わり防止判定部３４ｂと、通信制御部３４ｃと、紐付け処理部３４ｄとを備える。
【0036】
発光制御部３４ａは、情報処理装置１０ａと通信を確立した電子ペン１２（操作体）が備えるＩＲ ＬＥＤ１３（発光部）を点灯させる。また、発光制御部３４ａは、異なる電子ペン１２が、所定の閾値距離以内に接近した際に、当該電子ペン１２が備えるＩＲ ＬＥＤ１３（発光部）を、互いに異なるタイミングで点滅させる。
【0037】
ＩＤ入れ替わり防止判定部３４ｂは、複数のＩＲ ＬＥＤ１３が所定距離以内に接近した場合に、ある電子ペン１２による輝点を、別の電子ペン１２による輝点であると誤認識して、輝点の位置に対応付けた電子ペン１２のＩＤが入れ替わってしまうのを防止する入れ替わり防止判定処理を行う。具体的な処理の内容は後述する。
【0038】
通信制御部３４ｃは、電子ペン１２から情報処理装置１０ａに送信された、スイッチ１４の状態の受信、及び情報処理装置１０ａから電子ペン１２へのＩＲ ＬＥＤ１３の発光命令の送信を行う。
【0039】
紐付け処理部３４ｄは、カメラ２０が検出したＩＲ ＬＥＤ１３の輝点の位置と電子ペン１２のＩＤとを紐付けて、記憶部３５に記憶させる。
【0040】
記憶部３５は、ＩＲ ＬＥＤ１３の輝点の位置と電子ペン１２のＩＤとを紐付けた情報等を記憶する。記憶部３５は、例えば、フラッシュＲＯＭ等で構成される。
【0041】
入出力制御部３６は、電子ペン１２から送信されるスイッチ１４の状態に基づいて、電子ペン１２が情報入力状態にあるかを判定する。また、入出力制御部３６は、情報処理装置１０ａと、当該情報処理装置１０ａに接続されたカメラ２０、プロジェクタ２２、無線通信モジュール２４との間における情報の入出力を制御する。なお、入出力制御部３６は、本開示における表示制御部の一例である。
【0042】
電子ペン１２は、通信制御部４０と、発光状態切替処理部４１と、入出力制御部４２とを備える。
【0043】
通信制御部４０は、情報処理装置１０ａへの電子ペン１２のスイッチ１４の状態の送信、及び情報処理装置１０ａから送信されるＩＲ ＬＥＤ１３の発光命令の受信等を行う。
【0044】
発光状態切替処理部４１は、情報処理装置１０ａから受信したＩＲ ＬＥＤ１３の発光命令に応じて、ＩＲ ＬＥＤ１３の点灯状態（消灯、点灯、点滅）を切り替える。
【0045】
入出力制御部４２は、スイッチ１４とＩＲ ＬＥＤ１３と無線通信モジュール１６と、ＣＰＵ１５との間における情報の入出力を制御する。
【0046】
［１－４．情報処理装置及び電子ペンが行う処理の流れの説明］
次に、情報処理装置１０ａ及び電子ペン１２が行う一連の処理の流れを説明する。図４は、第１の実施形態の情報処理装置及び電子ペンが行う処理の流れの一例を示すフローチャートである。
次に、情報処理装置１０ａ及び電子ペン１２が行う一連の処理の流れを説明する。図４は、第１の実施形態の情報処理装置及び電子ペンが行う処理の流れの一例を示すフローチャートである。
【0047】
まず、電子ペン１２が行う処理の流れを説明する。無線通信モジュール１６は、無線通信モジュール２４と通信を行い、Ｂｌｕｅ Ｔｏｏｔｈ接続（以下ＢＴ接続と呼ぶ）が完了したかを判定する（ステップＳ１１）。ＢＴ接続が完了したと判定されるとステップＳ１２に進む。一方、ＢＴ接続が完了したと判定されないとステップＳ１１を繰り返す。
【0048】
通信制御部４０は、情報処理装置１０ａに対して、電子ペン１２のＩＤを送信する（ステップＳ１２）。
【0049】
入出力制御部４２は、情報処理装置１０ａからＩＲ ＬＥＤ制御命令を受信したかを判定する（ステップＳ１３）。ＩＲ ＬＥＤ制御命令を受信したと判定される（ステップＳ１３：Ｙｅｓ）とステップＳ１４に進む。一方、ＩＲ ＬＥＤ制御命令を受信したと判定されない（ステップＳ１３：Ｎｏ）とステップＳ１５に進む。
【0050】
ステップＳ１３においてＹｅｓと判定されると、発光状態切替処理部４１は、情報処理装置１０ａから受信したＩＲ ＬＥＤ制御命令に応じて、ＩＲ ＬＥＤ１３の点灯状態（消灯、点灯、点滅）を切り替える（ステップＳ１４）。その後、ステップＳ１５に進む。
【0051】
ステップＳ１３においてＮｏと判定されるか、又はステップＳ１４の実行に引き続いて、入出力制御部４２は、電子ペン１２のスイッチ状態の変化を検知したかを判定する（ステップＳ１５）。電子ペン１２のスイッチ状態の変化を検知したと判定される（ステップＳ１５：Ｙｅｓ）とステップＳ１６に進む。一方、電子ペン１２のスイッチ状態の変化を検知したと判定されない（ステップＳ１５：Ｎｏ）とステップＳ１７に進む。
【0052】
ステップＳ１５においてＹｅｓと判定されると、通信制御部４０は、電子ペン１２のスイッチ状態変化イベント、即ち、スイッチ１４がＯＦＦからＯＮに変化したか、又はＯＮからＯＦＦに変化したかを示す情報を、情報処理装置１０ａに送信する（ステップＳ１６）。その後、ステップＳ１７に進む。
【0053】
ステップＳ１５においてＮｏと判定されるか、又はステップＳ１６の実行に引き続いて、入出力制御部４２は、情報処理装置１０ａとの通信結果に基づいて、情報処理装置１０ａが実行しているアプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったかを判定する（ステップＳ１７）。情報処理装置１０ａが実行しているアプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったと判定される（ステップＳ１７：Ｙｅｓ）と電子ペン１２は、図４の処理を終了する。一方、情報処理装置１０ａが実行しているアプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったと判定されない（ステップＳ１７：Ｎｏ）と、ステップＳ１３に戻って、前記した各処理を繰り返す。
【0054】
次に、情報処理装置１０ａが行う処理の流れを説明する。まず、ＩＤ管理部３０は、新たな電子ペン１２が接続されたかを判定する（ステップＳ２１）。新たな電子ペン１２が接続されたと判定される（ステップＳ２１：Ｙｅｓ）とステップＳ２２に進む。一方、新たな電子ペン１２が接続されたと判定されない（ステップＳ２１：Ｎｏ）とステップＳ２１を繰り返す。
【0055】
ステップＳ２１においてＹｅｓと判定されると、発光認識部３２及び紐付け処理部３４ｄは、電子ペン１２の入力位置検出処理及びＩＤ識別処理を行う（ステップＳ２２）。なお、ステップＳ２２で行われる処理の内容について、詳しくは後述する（図５参照）。
【0056】
ＩＤ入れ替わり防止判定部３４ｂは、ＩＤ入れ替わり防止判定処理を行う（ステップＳ２３）。なお、ステップＳ２３で行われる処理の内容について、詳しくは後述する（図１２参照）。
【0057】
通信制御部３４ｃは、判定結果に応じたＩＲ ＬＥＤ１３の制御命令を、電子ペン１２に送信する（ステップＳ２４）。
【0058】
座標変換部３３は、電子ペン１２によって入力された、カメラ座標系における輝点の位置を、プロジェクタ２２が生成する投影像のプロジェクタスクリーン座標系に変換する座標変換処理を行う（ステップＳ２５）。
【0059】
入出力制御部３６は、プロジェクタ２２に対して、ステップＳ２５で座標変換した映像を投影させる（ステップＳ２６）。その後、ステップＳ２７に進む。
【0060】
ステップＳ２６に続いて、入出力制御部３６は、アプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったかを判定する（ステップＳ２７）。アプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったと判定される（ステップＳ２７：Ｙｅｓ）と情報処理装置１０ａは、図４の処理を終了する。一方、アプリケーションが終了したか、又は情報処理装置１０ａの電源がＯＦＦになったと判定されない（ステップＳ２７：Ｎｏ）とステップＳ２１に戻る。
【0061】
［１－５．電子ペンの入力位置検出処理及びＩＤ識別処理の説明］
次に、図５を用いて、電子ペンの入力位置検出処理及びＩＤ識別処理の流れを説明する。図５は、電子ペンの入力位置検出処理及びＩＤ識別処理の流れの一例を示すフローチャートである。
次に、図５を用いて、電子ペンの入力位置検出処理及びＩＤ識別処理の流れを説明する。図５は、電子ペンの入力位置検出処理及びＩＤ識別処理の流れの一例を示すフローチャートである。
【0062】
ＩＤ管理部３０は、未検出の電子ペン１２が存在するかを判定する（ステップＳ３１）。未検出の電子ペン１２が存在すると判定される（ステップＳ３１：Ｙｅｓ）とステップＳ３２に進む。一方、未検出の電子ペン１２が存在すると判定されない（ステップＳ３１：Ｎｏ）とステップＳ３３に進む。なお、未検出の電子ペン１２が存在するかは、ＢＴ接続された電子ペン１２のうち、当該電子ペン１２のＩＤと輝点位置とが対応付いていない電子ペン１２が存在するかによって判定される。
【0063】
ステップＳ３１においてＹｅｓと判定されると、発光制御部３４ａは、未検出の電子ペン１２に対して、ＩＲ ＬＥＤ１３を点灯させる制御命令を送信する（ステップＳ３２）。
【0064】
次に、発光認識部３２は、ステップＳ３２の処理によって点灯したＩＲ ＬＥＤ１３による輝点位置を検出する（ステップＳ３３）。
【0065】
紐付け処理部３４ｄは、現在着目している電子ペン１２を表す変数ｉを、ｉ＝０にセットする（ステップＳ３４）。例えば、電子ペン１２が３本ある場合、変数ｉはｉ＝０，１，２の値をとる。
【0066】
紐付け処理部３４ｄは、変数ｉが、画像解析によって検出された輝点の総数ｎよりも小さいかを判定する（ステップＳ３５）。変数ｉが輝点の総数ｎよりも小さいと判定される（ステップＳ３５：Ｙｅｓ）とステップＳ３６に進む。一方、変数ｉが輝点の総数ｎよりも小さいと判定されない（ステップＳ３５：Ｎｏ）と、図５の処理を終了してメインルーチン（図４のステップＳ２３）に戻る。
【0067】
ステップＳ３５においてＹｅｓと判定されると、ＩＤ管理部３０は、ＩＲ ＬＥＤ１３の状態を判定する（ステップＳ３６）。ＩＲ ＬＥＤ１３が点灯状態にあると判定されると、ステップＳ３７に進む。一方、ＩＲ ＬＥＤ１３が点滅状態にあると判定されると、ステップＳ４０に進む。
【0068】
ステップＳ３６において、ＩＲ ＬＥＤ１３が点灯状態にあると判定されると、紐付け処理部３４ｄは、当該ＩＲ ＬＥＤ１３に対して、前フレームでＩＤ付与済かを判定する（ステップＳ３７）。前フレームでＩＤ付与済であると判定される（ステップＳ３７：Ｙｅｓ）と、ステップＳ３８に進む。一方、前フレームでＩＤ付与済であると判定されない（ステップＳ３７：Ｎｏ）と、ステップＳ４２に進む。
【0069】
ステップＳ３６に戻り、ＩＲ ＬＥＤ１３が点滅状態にあると判定されると、ＩＤ管理部３０は、ＩＲ ＬＥＤ１３の発光パターンを解析する（ステップＳ４０）。
【0070】
次に、ＩＤ管理部３０は、発光パターンに該当する電子ペンＩＤを付与する（ステップＳ４１）。その後、ステップＳ３９に進む。
【0071】
ステップＳ３７に戻り、ステップＳ３７においてＹｅｓと判定されると、紐付け処理部３４ｄは、前フレームのＩＤを付与する（ステップＳ３８）。その後、ステップＳ３９に進む。
【0072】
一方、ステップＳ３７においてＮｏと判定されると、紐付け処理部３４ｄは、最後にＩＲ ＬＥＤ１３に対して点灯命令を送信した電子ペンＩＤを付与する（ステップＳ４２）。その後、ステップＳ３９に進む。
【0073】
ステップＳ３８、Ｓ４１、Ｓ４２に続いて、紐付け処理部３４ｄは、変数ｉをインクリメントする（ステップＳ３９）。その後、ステップＳ３５に戻る。
【0074】
このように、図５のフローチャートを実行することによって、新たな輝点が検出される度に、電子ペン１２の新たなＩＤが付与されるとともに、一度ＩＤが付与された輝点は、同じＩＤが付与された状態でトラッキングされる。
【0075】
次に、図６を用いて、インタラクティブプロジェクタ５ａが電子ペン１２を識別する処理の流れをタイムチャートで説明する。図６は、第１の実施形態に係るインタラクティブプロジェクタが電子ペンを識別する処理の流れを示すタイムチャートである。
【0076】
図６に示すように、２本の電子ペン（電子ペン１２ａ及び電子ペン１２ｂ）が存在する場合を想定する。２本のペンそれぞれには、識別番号（ＩＤ）が記憶されている。ここでは、識別番号の例として、電子ペン１２ａの識別番号が「ＡＡ」であり、電子ペン１２ｂの識別番号が「ＢＢ」であるとする。
【0077】
時刻ｔ１において、電子ペン１２ａと情報処理装置１０ａとがＢＴ接続される。
【0078】
時刻ｔ２において、情報処理装置１０ａは、ＢＴ接続された電子ペン１２ａに対して、ＩＲ ＬＥＤ１３を点灯させる制御命令を送信する。電子ペン１２ａは、この制御命令を受信して、ＩＲ ＬＥＤ１３を点灯させる。このとき、カメラ２０が撮像したカメラ画像には、電子ペン１２ａのＩＲ ＬＥＤ１３の発光によって生じた輝点が観測される。
【0079】
時刻ｔ３において、電子ペン１２ａがホワイトボード２６に押し当てられて、ペン先のスイッチ１４がＯＮになる。このとき、電子ペン１２ａから情報処理装置１０ａに、電子ペン１２ａの識別番号「ＡＡ」と、スイッチ１４がＯＮになったことを示す情報が送られる。このとき、カメラ２０が撮像したカメラ画像には、電子ペン１２ａのＩＲ ＬＥＤ１３の発光によって生じた輝点が観測される。その後、電子ペン１２ａはホワイトボード２６に描画を行う。
【0080】
時刻ｔ４において、電子ペン１２ｂと情報処理装置１０ａとがＢＴ接続される。
【0081】
時刻ｔ５において、情報処理装置１０ａは、ＢＴ接続された電子ペン１２ｂに対して、ＩＲ ＬＥＤ１３を点灯させる制御命令を送信する。電子ペン１２ｂは、この制御命令を受信して、ＩＲ ＬＥＤ１３を点灯させる。このとき、カメラ２０が撮像したカメラ画像には、電子ペン１２ａのＩＲ ＬＥＤ１３の発光によって生じた輝点と、電子ペン１２ｂのＩＲ ＬＥＤ１３の発光によって生じた輝点とが観測される。
【0082】
時刻ｔ６において、電子ペン１２ｂがホワイトボード２６に押し当てられて、ペン先のスイッチ１４がＯＮになる。このとき、電子ペン１２ｂから情報処理装置１０ａに、電子ペン１２ｂの識別番号「ＢＢ」と、スイッチ１４がＯＮになったことを示す情報が送られる。このとき、カメラ２０が撮像したカメラ画像には、電子ペン１２ａのＩＲ ＬＥＤ１３の発光によって生じた輝点と、電子ペン１２ｂのＩＲ ＬＥＤ１３の発光によって生じた輝点とが観測される。その後、電子ペン１２ａ、１２ｂはホワイトボード２６に描画を行う。
【0083】
なお、情報処理装置１０ａは、電子ペン１２のＩＲ ＬＥＤ１３の輝点が検出されて、当該電子ペン１２のＩＤが識別されて、電子ペン１２のスイッチ１４がＯＮになっているときのみ、電子ペン１２による描画入力を受け付けて、アプリケーションに対して描画入力結果を反映させる。
【0084】
【0085】
発光認識部３２は、カメラ２０が撮像した画像Ｉａを、所定の明るさ閾値で２値化することによって、２値画像Ｉｂを生成する。
【0086】
次に、発光認識部３２は、２値画像Ｉｂの輪郭を抽出する（画像Ｉｃ）。
【0087】
そして、発光認識部３２は、画像Ｉｃにおける輪郭の重心位置Ｇを求める（画像Ｉｄ）。このようにして求めた重心位置Ｇを、輝点の位置とする。
【0088】
なお、輝点の位置を算出する方法は、図７の方法に限定されるものではない。例えば、２値画像Ｉｂにおける輝点の領域の面積重心を求めて、輝点の位置としてもよい。
【0089】
また、複数の電子ペン１２が同時に使用されている場合、画像Ｉａの中には、複数の輝点が観測される。そのため、発光認識部３２は、２値画像Ｉｂに対して、各領域に番号を付与するラベリング処理を行う。そして、ラベリングされた各領域に対して、図７に示す画像処理を適用することによって、各輝点の位置を求める。
【0090】
［１－７．電子ペンのＩＤ入れ替わり防止判定処理の説明］
次に、図８を用いて、電子ペン１２のＩＤ入れ替わり防止判定処理について説明する。図８は、輝点の距離に基づくＩＤ入れ替わり判定処理の概要を説明する図である。
次に、図８を用いて、電子ペン１２のＩＤ入れ替わり防止判定処理について説明する。図８は、輝点の距離に基づくＩＤ入れ替わり判定処理の概要を説明する図である。
【0091】
複数の電子ペン１２（例えば電子ペン１２ａ（ＩＤ：ＡＡ）と電子ペン１２ｂ（ＩＤ：ＢＢ））で同時に描画を行う場合、図８に示すように、電子ペン１２ａと電子ペン１２ｂとが近接する場合がある。このような場合、情報処理装置１０ａは、電子ペン１２ａによって生じた輝点の位置を、電子ペン１２ｂによって生じた輝点の位置であると誤認識する可能性がある。例えば、図８において、電子ペン１２ａと電子ペン１２ｂとが接触する直前で、それぞれＵターンしたとする。この場合、情報処理装置１０ａは、電子ペン１２ａと電子ペン１２ｂとがクロスしたものと判断して、電子ペン１２ａによって生じた輝点を電子ペン１２ｂによって生じた輝点であると誤認識する可能性がある。そして、同様に、電子ペン１２ｂによって生じた輝点を電子ペン１２ａによって生じた輝点であると誤認識する可能性がある。このような誤認識が発生すると、電子ペン１２ａによって生じた輝点にＩＤ：ＢＢが付与されて、電子ペン１２ｂによって生じた輝点にＩＤ：ＡＡが付与される。即ち、ＩＤ入れ替わりが発生する。
【0092】
本実施形態の情報処理装置１０ａは、このようなＩＤ入れ替わりを防止するために、複数の電子ペン１２によって生じた輝点の位置が閾値距離ｄ以内である場合に、それぞれの電子ペン１２の状態に応じたＩＲ ＬＥＤ制御命令を発行する。具体的には、例えば、２本の電子ペン１２ａ，１２ｂがともに入力状態（描画状態）にあって、閾値距離ｄ以内に接近した場合には、電子ペン１２ａ，１２ｂを時分割で点滅させることによって、各電子ペンによって生じた輝点の位置を確実に検出できるようにする。なお、閾値距離ｄ以内に接近するのは、複数の電子ペン１２のＩＲ ＬＥＤ１３の発光によって生じた、複数の輝点位置であるが、以下、簡単のため、「複数の電子ペン１２が閾値距離ｄ以内に接近した場合」と表現する。
【0093】
なお、閾値距離ｄは、カメラ２０が撮像した画像における検出位置の差ではなく、プロジェクタ２２が投影する実寸サイズに座標変換した値に基づいて判定するのが望ましい。情報処理装置１０ａは、後述するように、電子ペン１２の入力結果をプロジェクタ２２によってホワイトボード２６に投影する際に、検出された輝点位置をプロジェクタスクリーン座標系に変換する。この時、ホワイトボード２６の実寸サイズを計測しておくことで、カメラ２０が撮像した画像における輝点位置の距離を、実寸サイズにスケール倍する事が可能であり、変換後の座標値が閾値距離ｄ以内に接近しているかの閾値判定を行うことができる。なお、閾値距離ｄは、ユーザが自由に設定できるパラメータとしても良いし、製造時に固定の閾値距離ｄを設定してもよい。また、第４の実施形態で説明するように、電子ペン１２の描画状態に応じて、閾値距離ｄを動的に変化させても良い。
【0094】
閾値距離ｄを、ＩＲ ＬＥＤ１３の輝点をカメラ２０から観測したサイズを、実寸に変換して設定した例を示す。例えば、実寸サイズに変換したＩＲ ＬＥＤ１３による輝点の直径が５ｃｍであった場合、閾値距離ｄをｄ＝２０ｃｍ（輝点の直径＋１０ｃｍ）に設定する。これは、ＩＲ ＬＥＤ１３が観測された時の輝点領域の最小距離が１０ｃｍとなるようした例であり、ＩＲ ＬＥＤ１３の発光パターンを変更して、カメラ２０で検知した際に、発光パターンからＩＤ識別ができるまでのバッファとして１０ｃｍ分付与して設定した例である。
【0095】
次に、図９を用いて、複数の電子ペン１２によって生じた輝点の位置が閾値距離ｄ以内である場合に、発光制御部３４ａ（図３参照）が発行するＩＲ ＬＥＤ制御命令の内容を説明する。図９は、輝点の距離が閾値距離以内である場合に、発光制御部が発行するＩＲ ＬＥＤ制御命令を説明する図である。
【0096】
図９において、電子ペン１２の状態が「入力中」とは、ＩＲ ＬＥＤ１３による輝点が検出されて、当該輝点を形成したＩＲ ＬＥＤ１３を発光している電子ペン１２の識別番号が識別されて、尚且つ、当該電子ペン１２のスイッチ１４がＯＮになっている状態を示す。そして、「非入力中」とは、ＩＲ ＬＥＤ１３による輝点が検出されて、当該輝点を形成したＩＲ ＬＥＤ１３を発光している電子ペン１２の識別番号が識別されて、尚且つ、当該電子ペン１２のスイッチ１４がＯＦＦになっている状態を示す。
【0097】
以下、図９に示す（ａ）から（ｄ）の４通りの場合について、具体的に説明する。なお、説明を簡単にするため、着目している電子ペン１２（制御対象の電子ペン１２）に対して、他の電子ペン１２が閾値距離ｄ以内に接近した場合を想定する。
【0098】
状態（ａ）は、制御対象の電子ペン１２と、他の電子ペン１２が、ともに「入力中」の場合である。この場合、情報処理装置１０ａは、双方の電子ペン１２に対して、時分割で交互に点滅する制御命令を送信する。
【0099】
状態（ｂ）は、制御対象の電子ペン１２が「入力中」で、他の電子ペン１２が「非入力中」の場合である。この場合、情報処理装置１０ａは、制御対象の電子ペン１２に対して、ＩＲ ＬＥＤ１３を点灯させる制御命令を送信する。また、他の電子ペン１２に対して、ＩＲ ＬＥＤ１３を消灯させる制御命令を送信する。
【0100】
状態（ｃ）は、制御対象の電子ペン１２が「非入力中」で、他の電子ペン１２が「入力中」の場合である。この場合、情報処理装置１０ａは、制御対象の電子ペン１２に対して、ＩＲ ＬＥＤ１３を消灯させる制御命令を送信する。また、他の電子ペン１２に対して、ＩＲ ＬＥＤ１３を点灯させる制御命令を送信する。
【0101】
状態（ｄ）は、制御対象の電子ペン１２と、他の電子ペン１２が、ともに「非入力中」の場合である。この場合、情報処理装置１０ａは、双方の電子ペン１２に対して、時分割で交互に点滅する制御命令を送信する。
【0102】
状態（ａ）のようにＩＲ ＬＥＤ１３を時分割で交互に点滅させると、特定の電子ペン１２に係る輝点の発生時間が短くなるため、輝点位置を検出する際のフレームレートが低下する。したがって、状態（ｂ）、状態（ｃ）のように、「入力中」の電子ペン１２が１本である場合は、「非入力中」の電子ペン１２のＩＲ ＬＥＤ１３は消灯することによって、ロスト状態とする。このように、「入力中」の電子ペン１２が１本しかない状態を作り出すことによって、フレームレートの低下を抑えることができる。
【0103】
また、状態（ｄ）のように２本の電子ペン１２がともに「非入力中」である場合は、ＩＤ識別を継続するために、ＩＲ ＬＥＤ１３を時分割で点滅させる。この場合、フレームレートは低下するが、各電子ペン１２に係る輝点位置のトラッキングを継続することができる。
【0104】
次に、図１０と図１１を用いて、具体的なＩＤ入れ替わり防止例を説明する。図１０は、電子ペン２本の場合のＩＤ入れ替わり防止例を示すタイムチャートである。図１１は、電子ペン３本の場合のＩＤ入れ替わり防止例を示すタイムチャートである。
【0105】
図１０のタイムチャートは、３本の電子ペン１２ａ（ＩＤ：ＡＡ），１２ｂ（ＩＤ：ＢＢ），１２ｃ（ＩＤ：ＣＣ）がともに入力状態にあるときに、そのうちの２本の電子ペン１２ａ，１２ｂが、閾値距離ｄ以内に接近した場合の、ＩＲ ＬＥＤ１３の発光状態を示す。
【0106】
図１０の時刻ｔａにおいて、電子ペン１２ａ，１２ｂは閾値距離ｄ以内に接近して、図９で説明した状態（ａ）の条件に合致する。そして、時刻ｔａ以降は、電子ペン１２ａのＩＲ ＬＥＤ１３と、電子ペン１２ｂのＩＲ ＬＥＤ１３は時分割で交互に点滅を繰り返す。より具体的には、電子ペン１２ａのＩＲ ＬＥＤ１３と、電子ペン１２ｂのＩＲ ＬＥＤ１３は、所定の認識期間ｔ０を２分割した時間間隔で交互に点滅を繰り返す。なお、認識期間ｔ０は、ＩＲ ＬＥＤ１３を点滅させた場合に、当該ＩＲ ＬＥＤ１３が点灯している間に、カメラ２０が少なくとも１回以上の撮像を行って、発光認識部３２が輝点位置を認識できる時間に設定される。即ち、点滅を繰り返す間、情報処理装置１０ａは、電子ペン１２ａ，１２ｂが発光するタイミングを把握することができるため、情報処理装置１０ａは、発光認識部３２が認識した輝点位置に基づいて、電子ペン１２ａ，１２ｂに係る輝点位置のトラッキングを継続することができる。
【0107】
そして、図１０の時刻ｔｂにおいて、電子ペン１２ａ，１２ｂが閾値距離ｄよりも離れた場合に、情報処理装置１０ａは、電子ペン１２ａ，１２ｂに点灯コマンドを送信する。これによって、時刻ｔｂ以降は、電子ペン１２ａのＩＲ ＬＥＤ１３と、電子ペン１２ｂのＩＲ ＬＥＤ１３は、ともに点灯状態になる。
【0108】
図１１のタイムチャートは、３本の電子ペン１２ａ（ＩＤ：ＡＡ），１２ｂ（ＩＤ：ＢＢ），１２ｃ（ＩＤ：ＣＣ）がともに入力状態にあるときに、それら３本の電子ペン１２ａ，１２ｂ，１２ｃが閾値距離ｄ以内に接近した場合の、ＩＲ ＬＥＤ１３の発光状態を示す。
【0109】
図１１の時刻ｔｃにおいて、電子ペン１２ａ，１２ｂ，１２ｃは閾値距離ｄ以内に接近して、図９で説明した状態（ａ）の条件に合致する。そして、時刻ｔｃ以降は、電子ペン１２ａのＩＲ ＬＥＤ１３と、電子ペン１２ｂのＩＲ ＬＥＤ１３と、電子ペン１２ｃのＩＲ ＬＥＤ１３は時分割で交互に点滅を繰り返す。より具体的には、電子ペン１２ａのＩＲ ＬＥＤ１３と、電子ペン１２ｂのＩＲ ＬＥＤ１３と、電子ペン１２ｃのＩＲ ＬＥＤ１３は、認識期間ｔ０を３分割した時間間隔で交互に点滅を繰り返す。ＩＲ ＬＥＤ１３が点滅を繰り返す間、情報処理装置１０ａは、電子ペン１２ａ，１２ｂ，１２ｃが発光するタイミングを把握することができるため、情報処理装置１０ａは、発光認識部３２が認識した輝点位置に基づいて、電子ペン１２ａ，１２ｂ，１２ｃに係る輝点位置のトラッキングを継続することができる。
【0110】
そして、図１１の時刻ｔｄにおいて、電子ペン１２ａが、電子ペン１２ｂ，１２ｃに対して閾値距離ｄよりも離れた場合に、情報処理装置１０ａは、電子ペン１２ａに点灯コマンドを送信する。これによって、時刻ｔｄ以降は、電子ペン１２ａのＩＲ ＬＥＤ１３は点灯状態になる。そして、電子ペン１２ｂ，１２ｃは閾値距離ｄ以内に接近したままになっているため、電子ペン１２ｂのＩＲ ＬＥＤ１３と、電子ペン１２ｃのＩＲ ＬＥＤ１３は、認識期間ｔ０を２分割した時間間隔で交互に点滅を繰り返す。なお、図１１の例では、ＩＲ ＬＥＤ１３を点滅させた際の点滅時間が一定になるようにしている。そのため、３本の電子ペン１２が接近した時刻ｔｃから時刻ｔｄの間の認識期間ｔ０は、２本の電子ペン１２が接近した時刻ｔｄ以降の認識期間ｔ０よりも長く設定される。
【0111】
【0112】
発光認識部３２は、着目する輝点から閾値距離ｄ以内に別の輝点があるかを判定する（ステップＳ５１）。着目する輝点から閾値距離ｄ以内に別の輝点があると判定される（ステップＳ５１：Ｙｅｓ）とステップＳ５２に進む。一方、着目する輝点から閾値距離ｄ以内に別の輝点があると判定されない（ステップＳ５１：Ｎｏ）とステップＳ５８に進む。
【0113】
ステップＳ５１においてＹｅｓと判定されると、ＩＤ入れ替わり防止判定部３４ｂは、着目する輝点（に係る電子ペン１２）は入力状態かを判定する（ステップＳ５２）。着目する輝点（に係る電子ペン１２）が入力状態であると判定される（ステップＳ５２：Ｙｅｓ）とステップＳ５３に進む。一方、着目する輝点（に係る電子ペン１２）が入力状態であると判定されない（ステップＳ５２：Ｎｏ）とステップＳ５４に進む。
【0114】
ステップＳ５２においてＹｅｓと判定されると、ＩＤ入れ替わり防止判定部３４ｂは、別の輝点（に係る電子ペン１２）は入力状態かを判定する（ステップＳ５３）。別の輝点（に係る電子ペン１２）は入力状態であると判定される（ステップＳ５３：Ｙｅｓ）とステップＳ５５に進む。一方、別の輝点（に係る電子ペン１２）は入力状態であると判定されない（ステップＳ５３：Ｎｏ）とステップＳ５６に進む。
【0115】
ステップＳ５２に戻り、ステップＳ５２においてＮｏと判定されると、ＩＤ入れ替わり防止判定部３４ｂは、別の輝点（に係る電子ペン１２）は入力状態かを判定する（ステップＳ５４）。別の輝点（に係る電子ペン１２）は入力状態であると判定される（ステップＳ５４：Ｙｅｓ）とステップＳ５７に進む。一方、別の輝点（に係る電子ペン１２）は入力状態であると判定されない（ステップＳ５４：Ｎｏ）とステップＳ５５に進む。
【0116】
ステップＳ５３においてＹｅｓと判定されるか、ステップＳ５４においてＮｏと判定されると、発光制御部３４ａは、着目する輝点に係る電子ペン１２と、別の輝点に係る電子ペン１２を時分割で点滅させる制御命令を設定する（ステップＳ５５）。その後、図１２の処理を終了してメインルーチン（図４のステップＳ２４）に戻る。
【0117】
ステップＳ５３においてＮｏと判定されると、発光制御部３４ａは、着目する輝点に係る電子ペン１２を点灯させて、別の輝点に係る電子ペン１２を消灯させる制御命令を設定する（ステップＳ５６）。その後、図１２の処理を終了してメインルーチン（図４のステップＳ２４）に戻る。
【0118】
ステップＳ５４においてＹｅｓと判定されると、発光制御部３４ａは、着目する輝点に係る電子ペン１２を消灯させて、別の輝点に係る電子ペン１２を点灯させる制御命令を設定する（ステップＳ５７）。その後、図１２の処理を終了してメインルーチン（図４のステップＳ２４）に戻る。
【0119】
ステップＳ５１においてＮｏと判定されると、発光制御部３４ａは、着目する輝点に係る電子ペン１２を点灯させる制御命令を設定する（ステップＳ５８）。その後、図１２の処理を終了してメインルーチン（図４のステップＳ２４）に戻る。
【0120】
【0121】
図１３に示す状態Ｓａにおいて、インタラクティブプロジェクタ５ａは、電源が切断された初期状態にある。状態Ｓａにおいてインタラクティブプロジェクタ５ａの電源が投入されると、情報処理装置１０ａと電子ペン１２との間のＢＴ接続がＯＮになる。その結果、インタラクティブプロジェクタ５ａは状態Ｓｂに遷移する。状態Ｓｂにおいて、ＩＲ ＬＥＤ１３は消灯しており、電子ペン１２の識別番号も不定である。
【0122】
情報処理装置１０ａの入出力制御部３６が、電子ペン１２から、ＩＲ ＬＥＤ１３を点灯させるＢＴイベントを受信すると、発光制御部３４ａは、電子ペン１２に対して、ＩＲ ＬＥＤ１３の発光指示を送信する。これによって、電子ペン１２のＩＲ ＬＥＤ１３が点灯する。しかし、電子ペン１２の識別番号は不定のままである（状態Ｓｃ）。
【0123】
情報処理装置１０ａの発光認識部３２は、電子ペン１２のＩＲ ＬＥＤ１３が点灯又は点滅するのに伴って生じた輝点の位置を取得する。そして、発光認識部３２が輝点の位置を検出した場合、紐付け処理部３４ｄは、輝点の位置と電子ペン１２の識別番号とを紐付ける。これによって、ＩＲ ＬＥＤ１３の点灯又は点滅は継続されて、電子ペン１２の識別番号が確定する（状態Ｓｄ）。
【0124】
一方、発光認識部３２が、所定時間内に輝点の位置を取得できない場合、電子ペン１２の識別番号は不定のままとする（状態Ｓｅ）。
【0125】
状態Ｓｄにあるとき、電子ペン１２のペン先がホワイトボード２６に接触してスイッチ１４がＯＮになると、電子ペン１２は、スイッチＯＮのＢＴイベントを送信する。その後、ＩＲ ＬＥＤ１３は点灯又は点滅を継続して、逐次的に認識される輝点の位置が電子ペン１２の識別番号に紐付けられ、プロジェクタ２２によって、検出された輝点の位置に映像（電子ペン１２の筆跡）が投影されることによって、描画がなされる（状態Ｓｆ）。
【0126】
状態Ｓｆにあるとき、電子ペン１２のペン先がホワイトボード２６から離れると、スイッチ１４がＯＦＦになる。すると、電子ペン１２は、スイッチＯＦＦのＢＴイベントを送信する。その後、ＩＲ ＬＥＤ１３は点灯又は点滅を継続して、逐次的に認識される輝点の位置が電子ペン１２の識別番号に紐付けられ、電子ペン１２の位置がトラッキングされる（状態Ｓｇ）。
【0127】
なお、状態Ｓｄ，Ｓｆ，Ｓｇにあるとき、情報処理装置１０ａの発光認識部３２が輝点の位置を検出できない場合（ＩＲ ＬＥＤ１３をロストした場合）、輝点の位置と電子ペン１２の識別番号との紐付けが解除されて、状態Ｓｅに遷移する。
【0128】
［１－９．電子ペンの入力結果反映方法の説明］
次に、図１４を用いて、電子ペン１２による入力結果を、プロジェクタ２２によってホワイトボード２６に投影する、電子ペンの入力結果反映方法について説明する。図１４は、検出された輝点位置を、カメラ座標系からプロジェクタスクリーン座標系に変換する処理の流れを説明する図である。
次に、図１４を用いて、電子ペン１２による入力結果を、プロジェクタ２２によってホワイトボード２６に投影する、電子ペンの入力結果反映方法について説明する。図１４は、検出された輝点位置を、カメラ座標系からプロジェクタスクリーン座標系に変換する処理の流れを説明する図である。
【0129】
電子ペン１２によって筆記された情報は、輝点位置検出、ＩＤ識別、スイッチ１４がＯＮの時に反映されて、プロジェクタ２２からホワイトボード２６に投影される。これは、電子ペン１２の状態が、図１３の状態Ｓｆの時に該当する。
【0130】
検出された輝点位置の座標（ｘ，ｙ）はカメラ座標系であるため、図１４に示すようにカメラから検出された座標に対して、２次元から２次元への射影変換行列（Homography行列）を乗算して、カメラ座標系からプロジェクタ２２で投影しているスクリーン座標系に変換する。変換後の座標（ｘ’，ｙ’）は、入力座標としてアプリケーションに反映される。
【0131】
［１－１０．第１の実施形態の効果］
以上説明したように、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、情報処理装置１０ａと通信を確立した電子ペン１２（操作体）が備えるＩＲ ＬＥＤ１３（発光部）を点灯させるとともに、異なる電子ペン１２（操作体）が接近した際に、当該電子ペン１２が備えるＩＲ ＬＥＤ１３を、互いに異なるタイミングで点滅させる。そして発光認識部３２（検出部）は、各電子ペン１２が備えるＩＲ ＬＥＤ１３に応じた位置を、当該電子ペン１２と関連付けて検出する。入出力制御部３６（表示制御部）は、電子ペン１２が情報入力状態にある場合に、発光認識部３２によって検出されたＩＲ ＬＥＤ１３に対応する位置に、電子ペン１２と関連付いた情報を表示させる。
以上説明したように、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、情報処理装置１０ａと通信を確立した電子ペン１２（操作体）が備えるＩＲ ＬＥＤ１３（発光部）を点灯させるとともに、異なる電子ペン１２（操作体）が接近した際に、当該電子ペン１２が備えるＩＲ ＬＥＤ１３を、互いに異なるタイミングで点滅させる。そして発光認識部３２（検出部）は、各電子ペン１２が備えるＩＲ ＬＥＤ１３に応じた位置を、当該電子ペン１２と関連付けて検出する。入出力制御部３６（表示制御部）は、電子ペン１２が情報入力状態にある場合に、発光認識部３２によって検出されたＩＲ ＬＥＤ１３に対応する位置に、電子ペン１２と関連付いた情報を表示させる。
【0132】
これにより、複数の電子ペン１２が近接している場合であっても、各電子ペン１２に対応する位置を識別して、確実に捕捉することができる。
【0133】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、発光認識部３２（検出部）が検出したＩＲ ＬＥＤ１３（発光部）に応じた位置が、閾値距離ｄ以内に接近した場合に、複数の電子ペン１２（操作体）が接近したと判定する。
【0134】
これにより、簡単な処理で、複数の電子ペン１２が接近したことを認識することができる。
【0135】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、所定時間を閾値距離ｄ以内に接近している電子ペン１２（操作体）の数で除した、少なくとも画像入力に要する時間を超える時間毎に、電子ペン１２のＩＲ ＬＥＤ１３（発光部）を互いに異なるタイミングで点滅させる。
【0136】
これにより、閾値距離ｄ以内に接近した複数の電子ペン１２のＩＲ ＬＥＤ１３は、時分割で点滅するため、各電子ペン１２が点灯したタイミングにおける当該電子ペン１２のＩＲ ＬＥＤ１３によって生じた輝点の位置を特定することができる。したがって、各電子ペン１２に付与された識別番号（ＩＤ）の入れ替わりを防止することができる。
【0137】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）から閾値距離ｄ以内に、別の電子ペン１２のＩＲ ＬＥＤ１３による輝点位置（操作体の発光部に応じた位置）が検出されて、尚且つ、電子ペン１２及び別の電子ペン１２が、ともに情報入力状態である場合に、電子ペン１２のＩＲ ＬＥＤ１３、及び別の電子ペン１２のＩＲ ＬＥＤ１３を互いに異なるタイミングで点滅させる。
【0138】
これにより、複数の電子ペン１２（操作体）のＩＤが入れ替わるのを防止することができる。
【0139】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）から閾値距離ｄ以内に、別の電子ペン１２のＩＲ ＬＥＤ１３による輝点位置（操作体の発光部に応じた位置）が検出されて、尚且つ、電子ペン１２が情報入力状態であって、別の電子ペン１２が情報入力状態でない場合に、電子ペン１２のＩＲ ＬＥＤ１３を点灯させて、別の電子ペン１２のＩＲ ＬＥＤ１３を消灯させる。
【0140】
これにより、情報入力状態にある電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を、フレームレートを低下させることなく確実にトラッキングすることができる。
【0141】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）から閾値距離ｄ以内に、別の電子ペン１２のＩＲ ＬＥＤ１３による輝点位置（操作体の発光部に応じた位置）が検出されて、尚且つ、電子ペン１２が情報入力状態でなく、別の電子ペン１２が情報入力状態である場合に、電子ペン１２のＩＲ ＬＥＤ１３を消灯させて、別の電子ペン１２のＩＲ ＬＥＤ１３を点灯させる。
【0142】
これにより、情報非入力状態にある電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を、フレームレートを低下させることなく確実にトラッキングすることができる。
【0143】
また、第１の実施形態の情報処理装置１０ａによると、発光制御部３４ａは、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）に応じた位置から閾値距離ｄ以内に、別の電子ペン１２のＩＲ ＬＥＤ１３に応じた位置が検出されて、尚且つ、電子ペン１２及び別の電子ペン１２が、ともに情報入力状態でない場合に、電子ペン１２のＩＲ ＬＥＤ１３、及び別の電子ペン１２のＩＲ ＬＥＤ１３を互いに異なるタイミングで点滅させる。
【0144】
これにより、情報入力状態でない電子ペン１２の位置のトラッキングを継続することができる。
【0145】
（２．第２の実施形態）
電子ペン１２が行っているタスクが、ボタン操作等の単純なものである場合、第１の実施形態で説明したように、複数の電子ペン１２が接近した場合に各ＩＲ ＬＥＤ１３を時分割で点滅させた際のフレームレートの低下はそれほど問題ではない。それに対して、電子ペン１２が文字の筆記や絵の描画を行っている場合には、フレームレートの低下をできるだけ抑えるのが望ましい。
電子ペン１２が行っているタスクが、ボタン操作等の単純なものである場合、第１の実施形態で説明したように、複数の電子ペン１２が接近した場合に各ＩＲ ＬＥＤ１３を時分割で点滅させた際のフレームレートの低下はそれほど問題ではない。それに対して、電子ペン１２が文字の筆記や絵の描画を行っている場合には、フレームレートの低下をできるだけ抑えるのが望ましい。
【0146】
本開示の第２の実施形態である情報処理装置１０ｂ（非図示）は、このような課題に対応するために、電子ペン１２が行っているタスクの内容に応じて、複数の電子ペン１２が閾値距離ｄ以内に接近した際のＩＲ ＬＥＤ１３の発光制御の方法を異ならせる機能を付加した例である。
【0147】
即ち、情報処理装置１０ｂは、情報入力状態にある複数の電子ペン１２のＩＲ ＬＥＤ１３を時分割で点滅させる際に、各電子ペン１２が実行しているタスクの種別に応じて、電子ペン１２毎に時分割の割合を変更する。
【0148】
具体的には、文字の筆記や絵の描画を行っている電子ペン１２は、時間経過に伴う描画位置の変化を捉えることが重要であるため、ＩＲ ＬＥＤ１３をより長い時間点灯させることによって、フレームレートの低下を少なく抑える。一方、ボタン操作等の用途に使用している電子ペン１２は、瞬間的な位置を捉えることが重要であるため、フレームレートが低くてもそれほど問題はない。そのため、ＩＲ ＬＥＤ１３の点灯時間を短く設定することが可能である。
【0149】
そのため、情報処理装置１０ｂは、電子ペン１２が行っているタスクの内容を判定する機能を備える。実行されるタスクの内容は、例えば、操作メニューの操作内容を参照することによって判定することができる。図示はしないが、情報処理装置１０ｂは、例えば、ホワイトボード２６に投影された操作メニューを電子ペン１２で選択した後で、選択した操作を行う。その際、「描画」や「筆記」等の操作メニューが選択された場合、当該メニューを選択した電子ペン１２の識別番号（ＩＤ）に、「描画」や「筆記」に対応するタスク種別を示す情報を付与する。一方、「ボタン操作」等の操作メニューが選択された場合、当該メニューを選択した電子ペン１２の識別番号（ＩＤ）に、「ボタン操作」に対応するタスク種別を示す情報を付与する。
【0150】
そして、前記したＩＤ入れ替わり防止判定処理（図１２）によって、複数の電子ペン１２が閾値距離ｄ以内に接近していると判定された場合に、発光制御部３４ａは、図１０や図１１に示す認識期間ｔ０（所定時間）を、接近した電子ペン１２に付与されたタスク種別の情報に応じて時分割する。
【0151】
以上説明したように、第２の実施形態の情報処理装置１０ｂによると、発光制御部３４ａは、電子ペン１２（操作体）が実行しているタスクの内容に応じて、認識期間ｔ０（所定時間）内における各電子ペン１２のＩＲ ＬＥＤ１３（発光部）の点灯時間の割合を制御する。
【0152】
これにより、例えば、文字の筆記や絵の描画を行っている場合には、ＩＲ ＬＥＤ１３を時分割で点灯する際の点灯時間を長く設定して、ボタン操作のような操作指示を行っている場合には、ＩＲ ＬＥＤ１３を時分割で点灯する際の点灯時間を短く設定することができる。したがって、描画位置のトラッキングを必要とするタスクを行っている場合に、フレームレートの低下を少なく抑えることができる。
【0153】
（３．第３の実施形態）
図１に示すように、複数の操作者が電子ペン１２を持って、同じホワイトボード２６に筆記を行っていると、操作者が意識しない間に複数の電子ペン１２が閾値距離ｄ以内に接近してしまう場合がある。このような場合に、前記したＩＤ入れ替わり防止判定処理を行う前に、電子ペン１２が接近したことを、操作者に注意喚起することができるのが望ましい。
図１に示すように、複数の操作者が電子ペン１２を持って、同じホワイトボード２６に筆記を行っていると、操作者が意識しない間に複数の電子ペン１２が閾値距離ｄ以内に接近してしまう場合がある。このような場合に、前記したＩＤ入れ替わり防止判定処理を行う前に、電子ペン１２が接近したことを、操作者に注意喚起することができるのが望ましい。
【0154】
本開示の第３の実施形態である情報処理装置１０ｃ（非図示）は、このような課題に対応するために、第１の実施形態で説明した情報処理装置１０ａに対して、複数の電子ペン１２が閾値距離ｄ以内に接近した際に、電子ペン１２の操作者に対して、離れるように促す注意喚起を行う機能を付加した例である。
【0155】
具体的には、発光制御部３４ａが、複数の電子ペン１２が閾値距離ｄ以内に接近したと判定した場合に、入出力制御部３６は、プロジェクタ２２に対して、接近した電子ペン１２によって描画された筆跡が点滅した形態の情報を投影させるように指示してもよい。また、電子ペン１２に内蔵したバイブレータ等の振動手段を振動させることによって、他の電子ペン１２と接近していることを報知してもよい。
【0156】
以上説明したように、第３の実施形態の情報処理装置１０ｃによると、入出力制御部３６（表示制御部）は、異なる電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）が閾値距離ｄ以内に接近した際に、プロジェクタ２２に対して、電子ペン１２を遠ざけることを促す情報を表示させる。
【0157】
これにより、他の電子ペン１２と接近していることを直感的に報知することができる。
【0158】
（４．第４の実施形態）
前記した各実施形態において、複数の電子ペン１２が接近したか否かを判定する際に、予め設定された固定値である閾値距離ｄを使用した。そのため、電子ペン１２の動きが速い場合には、複数の電子ペン１２が閾値距離ｄ以内に接近している状態を検出するのが困難な場合があった。
前記した各実施形態において、複数の電子ペン１２が接近したか否かを判定する際に、予め設定された固定値である閾値距離ｄを使用した。そのため、電子ペン１２の動きが速い場合には、複数の電子ペン１２が閾値距離ｄ以内に接近している状態を検出するのが困難な場合があった。
【0159】
本開示の第４の実施形態である情報処理装置１０ｄ（非図示）は、このような課題に対応するために、複数の電子ペン１２が接近しているか否かを判定する際に使用する閾値距離ｄを、電子ペン１２の移動速度や移動方向に応じて可変にする機能を備えた例である。
【0160】
具体的には、情報処理装置１０ｄは、各電子ペン１２の移動速度のモニタを継続的に行って、電子ペン１２の移動速度が大きいときや加速度が増加している場合に、閾値距離ｄを増加させる。即ち、発光認識部３２が検出した輝点の位置を中心とする半径ｄ／２の円形領域が絶えず大きさを変更しながら、電子ペン１２の筆跡に沿って移動する状態となる。そして、発光制御部３４ａは、他の電子ペン１２による輝点の位置が、半径ｄ／２の円形領域に入った場合に、他の電子ペン１２が接近したと判定する。
【0161】
なお、自身の近くにある電子ペン１２の動きも考慮して、閾値距離ｄを変更してもよい。即ち、２つの電子ペン１２が、互いに近づく方向に移動している場合は、閾値距離ｄを更に大きく変更してもよい。また、２つの電子ペン１２が、互いに離れる方向に移動している場合は、閾値距離ｄを小さく変更してもよい。
【0162】
即ち、情報処理装置１０ｄは、各電子ペン１２の移動速度と移動方向のモニタを継続的に行い、その都度、各輝点の位置を中心とする半径ｄ／２の円形領域を設定する。
【0163】
以上説明したように、第４の実施形態の情報処理装置１０ｄによると、閾値距離ｄは、電子ペン１２（操作体）の移動速度又は移動方向に基づいて設定される。
【0164】
これにより、電子ペン１２が使われている状況に応じて、適切な閾値距離ｄを設定することができる。そのため、ＩＤ入れ替わり防止判定処理のロバスト性をより一層向上させることができる。
【0165】
（５．第５の実施形態）
本開示の第５の実施形態である情報処理装置１０ｅ（非図示）は、閾値距離ｄ以内に接近した複数の電子ペン１２を含むグループが複数形成されて、各グループが同じ電子ペン１２を含んでいる場合に対応する機能を備えた例である。
本開示の第５の実施形態である情報処理装置１０ｅ（非図示）は、閾値距離ｄ以内に接近した複数の電子ペン１２を含むグループが複数形成されて、各グループが同じ電子ペン１２を含んでいる場合に対応する機能を備えた例である。
【0166】
図１５は、閾値距離以内に接近した複数の電子ペンを含むグループの一部が重複した状態の一例を示す図である。図１５に示すように、識別番号「ＡＡ」を有する電子ペン１２による輝点Ｐ１と、識別番号「ＢＢ」を有する電子ペン１２による輝点Ｐ２とが閾値距離ｄ以内に接近しているとする。そして、更に、識別番号「ＢＢ」を有する電子ペン１２による輝点Ｐ２と、識別番号「ＣＣ」を有する電子ペン１２による輝点Ｐ３と、識別番号「ＤＤ」を有する電子ペン１２による輝点Ｐ４とが閾値距離ｄ以内に接近しているとする。即ち、識別番号「ＡＡ」と「ＢＢ」を有する電子ペン１２による輝点Ｐ１，Ｐ２は、グループＵ１に属して、識別番号「ＢＢ」と「ＣＣ」と「ＤＤ」を有する電子ペン１２による輝点Ｐ２，Ｐ３，Ｐ４は、グループＵ２に属しているとする。
【0167】
このような場合、発光制御部３４ａは、グループＵ１とグループＵ２の和集合（Ｕ１∪Ｕ２）に属する４つの電子ペン１２のＩＲ ＬＥＤ１３を時分割で点滅させてもよい（図１６参照）。また、発光制御部３４ａは、グループＵ１に属する電子ペン１２のＩＲ ＬＥＤ１３を、点灯期間が重複しないようにして点滅させて、尚且つ、グループＵ２に属する電子ペン１２のＩＲ ＬＥＤ１３を、点灯期間が重複しないように点滅させてもよい。即ち、異なるグループに属する電子ペン１２のＩＲ ＬＥＤ１３、例えば、グループＵ１に属する、識別番号「ＡＡ」を有する電子ペン１２のＩＲ ＬＥＤ１３と、グループＵ２に属する、識別番号「ＤＤ」を有する電子ペン１２のＩＲ ＬＥＤ１３とを同じタイミングで点滅させてもよい（図１７参照）。或いは、グループＵ１に属する、識別番号「ＡＡ」を有する電子ペン１２のＩＲ ＬＥＤ１３と、グループＵ２に属する、識別番号「ＣＣ」を有する電子ペン１２のＩＲ ＬＥＤ１３とを同じタイミングで点滅させてもよい。
【0168】
図１６は、和集合に属する全ての電子ペンのＩＲ ＬＥＤを時分割発光させる例を示すタイムチャートである。
【0169】
図１６に示すように、グループＵ１とグループＵ２の和集合（Ｕ１∪Ｕ２）に属する４つの電子ペン１２のＩＲ ＬＥＤ１３を、認識期間ｔ０を４分割したタイミングで点滅させることによって、和集合に属する全ての電子ペン１２に応じた位置を、確実に特定することができる。
【0170】
図１７は、各グループ内で発光パターンが重複しないように電子ペンのＩＲ ＬＥＤを点滅させる例を示すタイムチャートである。
【0171】
図１７に示すように、グループＵ１に属する、識別番号「ＡＡ」を有する電子ペン１２のＩＲ ＬＥＤ１３と、グループＵ２に属する、識別番号「ＤＤ」を有する電子ペン１２のＩＲ ＬＥＤ１３とを同じタイミングで点滅させる。これによって、グループＵ１に属する２つの電子ペン１２のＩＲ ＬＥＤ１３は異なるタイミングで点滅するため、情報処理装置１０ｅは、グループＵ１に属する各電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を確実に特定することができる。また、グループＵ２に属する３つの電子ペン１２のＩＲ ＬＥＤ１３は異なるタイミングで点滅するため、情報処理装置１０ｅは、グループＵ２に属する各電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を確実に特定することができる。
【0172】
以上説明したように、第５の実施形態の情報処理装置１０ｅによると、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）と、電子ペン１２とは別の複数の電子ペン１２のＩＲ ＬＥＤ１３による輝点位置と、が閾値距離ｄ以内に接近して、尚且つ、電子ペン１２とは別の複数の電子ペン１２のＩＲ ＬＥＤ１３に応じた位置の中に、閾値距離ｄよりも離れた位置がある場合に、発光制御部３４ａは、電子ペン１２のＩＲ ＬＥＤ１３に応じた位置から閾値距離ｄ以内に接近している全ての電子ペン１２のＩＲ ＬＥＤ１３を、互いに異なるタイミングで点滅させる。
【0173】
これにより、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置から閾値距離ｄ以内に、複数の別の電子ペン１２による輝点位置が観測されて、尚且つ、複数の別の電子ペン１２による輝点位置の中に、閾値距離ｄよりも離れた輝点位置がある場合であっても、各電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を確実に特定することができる。
【0174】
また、第５の実施形態の情報処理装置１０ｅによると、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置（操作体の発光部に応じた位置）と、電子ペン１２とは別の複数の電子ペン１２のＩＲ ＬＥＤ１３による輝点位置と、が閾値距離ｄ以内に接近して、尚且つ、電子ペン１２とは別の複数の電子ペン１２のＩＲ ＬＥＤ１３に応じた位置の中に、閾値距離ｄよりも離れた位置がある場合に、発光制御部３４ａは、少なくとも、閾値距離ｄ以内に接近している輝点位置に係るＩＲ ＬＥＤ１３を、互いに異なるタイミングで点滅させる。
【0175】
これにより、電子ペン１２（操作体）のＩＲ ＬＥＤ１３（発光部）による輝点位置から閾値距離ｄ以内に、複数の別の電子ペン１２による輝点位置が観測されて、尚且つ、複数の別の電子ペン１２による輝点位置の中に、閾値距離ｄよりも離れた輝点位置がある場合であっても、各電子ペン１２のＩＲ ＬＥＤ１３による輝点位置を確実に特定することができる。また、フレームレートの低下を少なく抑えることができる。
【0176】
（６．本開示の応用例（１））
ここでは、本開示の応用例について述べる。本開示は電子ペン１２以外の情報入力デバイスにも応用可能である。即ち、任意空間において、カメラなどのセンサから位置検出を行う機能と通信機能とを併せ持つコントローラ形式のデバイスが利用可能であれば、当該デバイスを前記した各実施形態で記載した電子ペン１２と同様に入力装置として扱うことが可能である。なお、前記した各実施形態では、電子ペン１２の入力状態を検知するために、スイッチ１４を組み込んでいたが、対象デバイスの位置とＩＤ識別を行うことが可能であれば、スイッチ１４は必須ではない。
ここでは、本開示の応用例について述べる。本開示は電子ペン１２以外の情報入力デバイスにも応用可能である。即ち、任意空間において、カメラなどのセンサから位置検出を行う機能と通信機能とを併せ持つコントローラ形式のデバイスが利用可能であれば、当該デバイスを前記した各実施形態で記載した電子ペン１２と同様に入力装置として扱うことが可能である。なお、前記した各実施形態では、電子ペン１２の入力状態を検知するために、スイッチ１４を組み込んでいたが、対象デバイスの位置とＩＤ識別を行うことが可能であれば、スイッチ１４は必須ではない。
【0177】
図１８は、本開示の応用例であるシューティングシステムの概要図である。シューティングシステム５０は、ユーザ自身が把持している、本開示における操作体の一例である銃型コントローラ５２（５２ａ，５２ｂ）を使用して、壁面に向けて表示された物体（例えば敵キャラクター）を打つことができる。このようなゲームアプリケーションでは、銃型コントローラ５２に指向性の高いＩＲ ＬＥＤをマウントし、ＩＲ ＬＥＤが照射された壁面をカメラで観測することによって、本開示の内容を適用することができる。複数ユーザが近接した場所、又は同じ場所に銃を向けた場合、つまりカメラから観測される輝点５４ａ，５４ｂが同一場所に観測された場合であっても、どの銃によって照射された輝点であるかを識別することが可能である。
【0178】
（７．本開示の応用例（２））
図１９は、本開示の応用例であるミニカー走行競技システムの概要を示す第１の図である。図２０は、本開示の応用例であるミニカー走行競技システムの概要を示す第２の図である。本例は、本開示を、ミニ四駆（登録商標）やラジコンカーのようなミニカーで走行競技を行うレーシングシステム６０に適用した例である。本開示における操作体の一例である車６２（６２ａ，６２ｂ）にＩＲ ＬＥＤと通信モジュールを搭載し、ＩＲ ＬＥＤを検出するためのカメラ（例えば、車が走行する道路を俯瞰的に撮像するカメラ）を設置することによって、複数の車６２を識別することが可能である。このようなケースで車同士が近接するようなシーンでも本発明では識別することができる。本開示を適用することで、車６２の位置に、情報をリアルタイムでプロジェクションすることによってビジュアルエフェクトを加えた演出を行うことが可能である。また、複数の車６２の位置が分かっているため、車６２に前面投影プロジェクタを搭載することによって、図２０に示すように、前面投影プロジェクタによる表示映像によって、他方の車に対する攻撃エフェクトやパワーアップエフェクトなどの効果を演出することができる。
図１９は、本開示の応用例であるミニカー走行競技システムの概要を示す第１の図である。図２０は、本開示の応用例であるミニカー走行競技システムの概要を示す第２の図である。本例は、本開示を、ミニ四駆（登録商標）やラジコンカーのようなミニカーで走行競技を行うレーシングシステム６０に適用した例である。本開示における操作体の一例である車６２（６２ａ，６２ｂ）にＩＲ ＬＥＤと通信モジュールを搭載し、ＩＲ ＬＥＤを検出するためのカメラ（例えば、車が走行する道路を俯瞰的に撮像するカメラ）を設置することによって、複数の車６２を識別することが可能である。このようなケースで車同士が近接するようなシーンでも本発明では識別することができる。本開示を適用することで、車６２の位置に、情報をリアルタイムでプロジェクションすることによってビジュアルエフェクトを加えた演出を行うことが可能である。また、複数の車６２の位置が分かっているため、車６２に前面投影プロジェクタを搭載することによって、図２０に示すように、前面投影プロジェクタによる表示映像によって、他方の車に対する攻撃エフェクトやパワーアップエフェクトなどの効果を演出することができる。
【0179】
（８．本開示の応用例（３））
図２１は、本開示の応用例であるベーゴマ競技システムの概要を示す図である。本例は、本開示をベーゴマ競技システム７０に応用した例である。本開示における操作体の一例であるコマ７２（７２ａ，７２ｂ）の内部にＩＲ ＬＥＤと通信モジュールを組み込むことで、カメラ２０は、複数のコマを識別することができる。また、ステージ上で対戦する時に衝突や接近するようなケースにおいても、コマ７２を識別することができる。本開示を適用することで、検出されたコマ７２の位置やコマ７２同士が衝突したタイミングで、プロジェクションマッピングのようにビジュアルエフェクトを加えた演出を行うことも可能である。
図２１は、本開示の応用例であるベーゴマ競技システムの概要を示す図である。本例は、本開示をベーゴマ競技システム７０に応用した例である。本開示における操作体の一例であるコマ７２（７２ａ，７２ｂ）の内部にＩＲ ＬＥＤと通信モジュールを組み込むことで、カメラ２０は、複数のコマを識別することができる。また、ステージ上で対戦する時に衝突や接近するようなケースにおいても、コマ７２を識別することができる。本開示を適用することで、検出されたコマ７２の位置やコマ７２同士が衝突したタイミングで、プロジェクションマッピングのようにビジュアルエフェクトを加えた演出を行うことも可能である。
【0180】
（９．本開示の応用例（４））
図２２は、本開示の応用例であるエアーホッケーシステムの概要を示す図である。本例は、本開示をエアーホッケーシステム８０に応用した例である。この応用例では、ユーザが把持する、本開示における操作体の一例であるマレット８２（８２ａ，８２ｂ）にＩＲ ＬＥＤと通信モジュールを組み込むことで、ユーザのマレット８２を識別することができる。ユーザが協力してプレイする時は、異なるマレット８２が近接することがあるが、本開示を適用することによって、そのようなケースでも、それぞれのマレット８２を識別することが可能である。また、同様の仕組みをパックに組み込んで複数のパックを識別することも可能である。更に、パックとマレットの位置を検出することによって、ビジュアルエフェクトを加えた演出や、パックとマレットの衝突判定を行い、そのイベントに応じた演出を行うことが可能である。また、プロジェクションされた仮想パックを打ち合う等のゲームへ適用することも可能である。
図２２は、本開示の応用例であるエアーホッケーシステムの概要を示す図である。本例は、本開示をエアーホッケーシステム８０に応用した例である。この応用例では、ユーザが把持する、本開示における操作体の一例であるマレット８２（８２ａ，８２ｂ）にＩＲ ＬＥＤと通信モジュールを組み込むことで、ユーザのマレット８２を識別することができる。ユーザが協力してプレイする時は、異なるマレット８２が近接することがあるが、本開示を適用することによって、そのようなケースでも、それぞれのマレット８２を識別することが可能である。また、同様の仕組みをパックに組み込んで複数のパックを識別することも可能である。更に、パックとマレットの位置を検出することによって、ビジュアルエフェクトを加えた演出や、パックとマレットの衝突判定を行い、そのイベントに応じた演出を行うことが可能である。また、プロジェクションされた仮想パックを打ち合う等のゲームへ適用することも可能である。
【0181】
（１０．本開示の応用例（５））
図２３は、本開示の応用例であるボルダリングシステムの概要を示す図である。ユーザは、自身の手足に、本開示における操作体の一例であるデバイス９１，９２を身に着けて、手足の位置を検出できるように応用したボルダリングシステム９０の例である。なお、デバイス９１，９２には、ＩＲ ＬＥＤと通信モジュールが搭載されている。具体的には、一人のユーザは、デバイス９１ａ，９１ｂ，９１ｃ，９１ｄを、それぞれ、右手、左手、右足、左足に装着している。別のユーザは、デバイス９２ａ，９２ｂ，９２ｃ，９２ｄを、それぞれ、右手、左手、右足、左足に装着している。
図２３は、本開示の応用例であるボルダリングシステムの概要を示す図である。ユーザは、自身の手足に、本開示における操作体の一例であるデバイス９１，９２を身に着けて、手足の位置を検出できるように応用したボルダリングシステム９０の例である。なお、デバイス９１，９２には、ＩＲ ＬＥＤと通信モジュールが搭載されている。具体的には、一人のユーザは、デバイス９１ａ，９１ｂ，９１ｃ，９１ｄを、それぞれ、右手、左手、右足、左足に装着している。別のユーザは、デバイス９２ａ，９２ｂ，９２ｃ，９２ｄを、それぞれ、右手、左手、右足、左足に装着している。
【0182】
図２３において、デバイス９１，９２を身に着けたユーザは、ボルダリングのプレイを行っている。このとき、非図示のカメラによって検出されたデバイス９１，９２の位置からユーザの手足の位置がわかるため、ボルダリングシステム９０は、ユーザが利用しているホールドを認識し、その結果に応じたエフェクトを行う事ができる。本発明により、ユーザの動きによって手足につけたＩＲ ＬＥＤが、カメラから見て重なるようなケースであっても、各デバイス９１，９２を識別して検出することができる。また、複数のユーザを識別し、各ユーザが登った場所を陣取りゲームのように識別してもよい。この場合、各ユーザに使用するデバイスのグルーピング（例えば、右手、左手、右足、左足に身に着ける４つのデバイスのＩＤをグループ化）を事前にしておくことで、ユーザ情報と検出している部位を識別することができる。
【0183】
（１１．本開示の応用例（６））
図２４は、本開示の応用例である群ロボット制御システムの概要を示す図である。群ロボット制御システム９４は、上方に下向きに設置された複数のカメラ２０ａ，２０ｂによって、本開示における操作体の一例である、同一形態の複数のロボット９５（９５ａ，９５ｂ，９５ｃ，…）の位置検出を行って、各ロボットの行動制御を行うものである。各ロボット９５には、上方に向けて発光するＩＲ ＬＥＤが内蔵されており、カメラ２０ａ，２０ｂが、ＩＲ ＬＥＤによる輝点の位置を検出することによって、各ロボット９５の現在位置が検出される。
図２４は、本開示の応用例である群ロボット制御システムの概要を示す図である。群ロボット制御システム９４は、上方に下向きに設置された複数のカメラ２０ａ，２０ｂによって、本開示における操作体の一例である、同一形態の複数のロボット９５（９５ａ，９５ｂ，９５ｃ，…）の位置検出を行って、各ロボットの行動制御を行うものである。各ロボット９５には、上方に向けて発光するＩＲ ＬＥＤが内蔵されており、カメラ２０ａ，２０ｂが、ＩＲ ＬＥＤによる輝点の位置を検出することによって、各ロボット９５の現在位置が検出される。
【0184】
図２４の例では、群ロボットと呼ばれる同一形態をしたロボット９５に対して、本開示の内容を用いて、各ロボット９５の位置とＩＤ識別とを行う。そのため、複数のロボット９５が密集しているケース、つまり各ロボット９５に設置されたＩＲ ＬＥＤが近接した状態においても、個々のロボット９５の位置を識別してトラッキングすることが可能である。このような群ロボット制御システム９４は、ドローンなどの他の機器に適用してもよいし、人間などの生物に適用してもよい。
【0185】
（１２．本開示の応用例（７））
図２５は、本開示の応用例であるＡＲ／ＶＲ応用システムの概要を示す図である。本開示の内容は、ＨＭＤ（Head Mount Display）に代表される、ユーザが装着するデバイスの位置検出に応用してもよい。具体的には、図２５に示すように、本開示における操作体の一例であるＨＭＤ９７（９７ａ，９７ｂ，９７ｃ，…）にＩＲ ＬＥＤと通信モジュールを搭載することで、ＨＭＤ９７を身に着けた複数のユーザが同一空間にいるシーンにおいて、各ユーザの位置とＨＭＤ９７に付与されたＩＤ（ユーザＩＤ）とを識別することが可能である。これにより、例えば、仮想空間を体験するユーザの位置を、現実世界の位置に反映することができる。また、ユーザ同士の衝突を防止するために、近接しているユーザに対して、他のユーザと接触する可能性があることを注意喚起することができる。
図２５は、本開示の応用例であるＡＲ／ＶＲ応用システムの概要を示す図である。本開示の内容は、ＨＭＤ（Head Mount Display）に代表される、ユーザが装着するデバイスの位置検出に応用してもよい。具体的には、図２５に示すように、本開示における操作体の一例であるＨＭＤ９７（９７ａ，９７ｂ，９７ｃ，…）にＩＲ ＬＥＤと通信モジュールを搭載することで、ＨＭＤ９７を身に着けた複数のユーザが同一空間にいるシーンにおいて、各ユーザの位置とＨＭＤ９７に付与されたＩＤ（ユーザＩＤ）とを識別することが可能である。これにより、例えば、仮想空間を体験するユーザの位置を、現実世界の位置に反映することができる。また、ユーザ同士の衝突を防止するために、近接しているユーザに対して、他のユーザと接触する可能性があることを注意喚起することができる。
【0186】
なお、本明細書に記載された効果は、あくまで例示であって限定されるものではなく、他の効果があってもよい。また、本開示の実施形態は、上述した実施形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【0187】
例えば、本開示は、以下のような構成もとることができる。
【0188】
（１）
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、
前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
を備える情報処理装置。
（２）
前記発光制御部は、前記検出部が検出した前記発光部に応じた位置が、閾値距離以内に接近した場合に、複数の前記操作体が接近したと判定する、
前記（１）に記載の情報処理装置。
（３）
前記発光制御部は、
所定時間を前記閾値距離以内に接近している前記操作体の数で除した、少なくも画像入力に要する時間を超える時間毎に、前記操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）に記載の情報処理装置。
（４）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態である場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）又は（３）に記載の情報処理装置。
（５）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態であって、前記別の操作体が情報入力状態でない場合に、
前記操作体の発光部を点灯させて、前記別の操作体の発光部を消灯させる、
前記（２）乃至（４）のいずれか一つに記載の情報処理装置。
（６）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態でなく、前記別の操作体が情報入力状態である場合に、
前記操作体の発光部を消灯させて、前記別の操作体の発光部を点灯させる、
前記（２）乃至（５）のいずれか一つに記載の情報処理装置。
（７）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態でない場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）乃至（６）のいずれか一つに記載の情報処理装置。
（８）
前記発光制御部は、
前記操作体が実行しているタスクの内容に応じて、前記所定時間内における各操作体の前記発光部の点灯時間の割合を制御する、
前記（３）に記載の情報処理装置。
（９）
前記表示制御部は、
異なる前記操作体の前記発光部に応じた位置が前記閾値距離以内に接近した際に、前記操作体を遠ざけることを促す情報を表示させる、
前記（２）乃至（８）のいずれか一つに記載の情報処理装置。
（１０）
前記閾値距離は、
前記操作体の移動速度又は移動方向に基づいて設定される、
前記（２）乃至（９）のいずれか一つに記載の情報処理装置。
（１１）
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、
前記発光制御部は、前記操作体の前記発光部に応じた位置から前記閾値距離以内に接近している全ての前記操作体の前記発光部を、互いに異なるタイミングで点滅させる、
前記（２）乃至（１０）のいずれか一つに記載の情報処理装置。
（１２）
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、
前記発光制御部は、少なくとも、前記閾値距離以内に接近している前記位置に係る前記発光部を、互いに異なるタイミングで点滅させる、
前記（２）乃至（１０）のいずれか一つに記載の情報処理装置。
（１３）
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御プロセスと、
前記各操作体が備える前記発光部の位置を、当該操作体と関連付けて検出する検出プロセスと、
前記操作体が情報入力状態にある場合に、前記検出プロセスによって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御プロセスと、
を備える情報処理方法。
（１４）
コンピュータを、
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、
前記各操作体が備える前記発光部の位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
して機能させるプログラム。
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、
前記各操作体が備える前記発光部に応じた位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
を備える情報処理装置。
（２）
前記発光制御部は、前記検出部が検出した前記発光部に応じた位置が、閾値距離以内に接近した場合に、複数の前記操作体が接近したと判定する、
前記（１）に記載の情報処理装置。
（３）
前記発光制御部は、
所定時間を前記閾値距離以内に接近している前記操作体の数で除した、少なくも画像入力に要する時間を超える時間毎に、前記操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）に記載の情報処理装置。
（４）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態である場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）又は（３）に記載の情報処理装置。
（５）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態であって、前記別の操作体が情報入力状態でない場合に、
前記操作体の発光部を点灯させて、前記別の操作体の発光部を消灯させる、
前記（２）乃至（４）のいずれか一つに記載の情報処理装置。
（６）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体が情報入力状態でなく、前記別の操作体が情報入力状態である場合に、
前記操作体の発光部を消灯させて、前記別の操作体の発光部を点灯させる、
前記（２）乃至（５）のいずれか一つに記載の情報処理装置。
（７）
前記発光制御部は、
前記操作体の発光部に応じた位置から前記閾値距離以内に、別の操作体の発光部に応じた位置が検出されて、尚且つ、前記操作体及び前記別の操作体が、ともに情報入力状態でない場合に、
前記操作体の発光部、及び前記別の操作体の発光部を互いに異なるタイミングで点滅させる、
前記（２）乃至（６）のいずれか一つに記載の情報処理装置。
（８）
前記発光制御部は、
前記操作体が実行しているタスクの内容に応じて、前記所定時間内における各操作体の前記発光部の点灯時間の割合を制御する、
前記（３）に記載の情報処理装置。
（９）
前記表示制御部は、
異なる前記操作体の前記発光部に応じた位置が前記閾値距離以内に接近した際に、前記操作体を遠ざけることを促す情報を表示させる、
前記（２）乃至（８）のいずれか一つに記載の情報処理装置。
（１０）
前記閾値距離は、
前記操作体の移動速度又は移動方向に基づいて設定される、
前記（２）乃至（９）のいずれか一つに記載の情報処理装置。
（１１）
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、
前記発光制御部は、前記操作体の前記発光部に応じた位置から前記閾値距離以内に接近している全ての前記操作体の前記発光部を、互いに異なるタイミングで点滅させる、
前記（２）乃至（１０）のいずれか一つに記載の情報処理装置。
（１２）
前記操作体の前記発光部に応じた位置と、前記操作体とは別の複数の操作体の前記発光部に応じた位置と、が前記閾値距離以内に接近して、尚且つ、前記別の複数の操作体の前記発光部に応じた位置の中に、前記閾値距離よりも離れた位置がある場合に、
前記発光制御部は、少なくとも、前記閾値距離以内に接近している前記位置に係る前記発光部を、互いに異なるタイミングで点滅させる、
前記（２）乃至（１０）のいずれか一つに記載の情報処理装置。
（１３）
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御プロセスと、
前記各操作体が備える前記発光部の位置を、当該操作体と関連付けて検出する検出プロセスと、
前記操作体が情報入力状態にある場合に、前記検出プロセスによって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御プロセスと、
を備える情報処理方法。
（１４）
コンピュータを、
情報処理装置と通信を確立した操作体が備える発光部を点灯させるとともに、異なる前記操作体が接近した際に、当該操作体が備える前記発光部を、互いに異なるタイミングで点滅させる発光制御部と、
前記各操作体が備える前記発光部の位置を、当該操作体と関連付けて検出する検出部と、
前記操作体が情報入力状態にある場合に、前記検出部によって検出された前記発光部に対応する位置に、前記操作体と関連付いた情報を表示させる表示制御部と、
して機能させるプログラム。
【符号の説明】
【0189】
５ａ…インタラクティブプロジェクタ、１０ａ，１０ｂ，１０ｃ，１０ｄ，１０ｅ…情報処理装置、１２，１２ａ，１２ｂ，１２ｃ…電子ペン（操作体）、１３…ＩＲ ＬＥＤ（発光部）、１４…スイッチ、２０…カメラ、２２…プロジェクタ、２６…ホワイトボード、３２…発光認識部（検出部）、３４ａ…発光制御部、３６…入出力制御部（表示制御部）、ｄ…閾値距離、ｔ０…認識期間（所定時間）
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】