特開 2022-118465 情報処理装置および情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022118465

(43)【公開日】2022-08-15

(54)【発明の名称】情報処理装置および情報処理プログラム

(51)【国際特許分類】

   G09G 5/00 20060101AFI20220805BHJP

   G09G 5/377 20060101ALI20220805BHJP

   G06F 3/0484 20220101ALI20220805BHJP

   H04N 5/66 20060101ALI20220805BHJP

【ＦＩ】

G09G5/00 510V

G09G5/00 550C

G09G5/00 530M

G09G5/36 520L

G06F3/0484

H04N5/66 D

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2021015024

(22)【出願日】2021-02-02

(71)【出願人】

【識別番号】518133201

【氏名又は名称】富士通クライアントコンピューティング株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】特許業務法人酒井国際特許事務所

(72)【発明者】

【氏名】吉川 健一

(72)【発明者】

【氏名】川上 耕平

(72)【発明者】

【氏名】青木 範行

(72)【発明者】

【氏名】成毛 正治

(72)【発明者】

【氏名】柳 芳治

(72)【発明者】

【氏名】山田 雅登

(72)【発明者】

【氏名】関 大輔

【テーマコード（参考）】

5C058

5C182

5E555

【Ｆターム（参考）】

5C058AA05

5C058AB07

5C058BA35

5C182AB02

5C182AB11

5C182AC02

5C182AC03

5C182AC32

5C182BA14

5C182BA46

5C182BA47

5C182BA75

5C182BB02

5C182BB03

5C182BB12

5C182CA21

5C182CB32

5C182CB52

5C182CC21

5C182DA62

5E555AA04

5E555AA12

5E555AA26

5E555AA63

5E555BA02

5E555BB02

5E555BC13

5E555CA42

5E555CB48

5E555DA04

5E555DA23

5E555DB53

5E555DC13

5E555DC24

5E555DC35

5E555DC59

5E555DD02

5E555FA00

(57)【要約】

【課題】複数のディスプレイに接続して利用する場合に、各ディスプレイのレイアウトを容易に認識させ、正しい表示を行わせるためのセッティングを容易に行うことができる、情報処理装置を提供する。
【解決手段】情報処理装置は、処理ユニットに接続された複数の表示装置を個別に識別する識別情報を、複数の表示装置のそれぞれに表示させる表示制御部と、複数の表示装置およびそれぞれの表示装置に表示された識別情報を撮像して得られた撮像情報を取得する取得部と、撮像情報に基づき、複数の表示装置の配置態様を認識する認識部と、を備える。
【選択図】図５

【特許請求の範囲】

【請求項1】

処理ユニットに接続された複数の表示装置を個別に識別する識別情報を、複数の前記表示装置のそれぞれに表示させる表示制御部と、
複数の前記表示装置およびそれぞれの前記表示装置に表示された前記識別情報を撮像して得られた撮像情報を取得する取得部と、
前記撮像情報に基づき、複数の前記表示装置の配置態様を認識する認識部と、
を備える、情報処理装置。

【請求項2】

前記識別情報は、前記表示装置の表示領域の四隅近傍のうち少なくとも一箇所に表示され、配列された他の前記表示装置に対する相対位置の判定に用いる指標を含む、請求項１に記載の情報処理装置。

【請求項3】

前記指標は、前記表示領域の対角位置に表示される、請求項２に記載の情報処理装置。

【請求項4】

前記指標は、前記表示領域の四隅に表示される、請求項２に記載の情報処理装置。

【請求項5】

前記認識部は、複数の前記表示装置のうち、基準となる基準表示装置における一対の対角線の延長線で区切られる四領域のいずれか一つの領域に他の前記表示装置の前記識別情報が検出された場合、前記領域に含まれる前記基準表示装置の縁部に、検出された前記表示装置の縁部を隣接させるような配置態様を認識する、請求項１から請求項４のいずれか１項に記載の情報処理装置。

【請求項6】

処理ユニットに接続された複数の表示装置を個別に識別する識別情報を、複数の前記表示装置のそれぞれに表示させることと、
複数の前記表示装置およびそれぞれの前記表示装置に表示された前記識別情報を撮像して得られる撮像情報を取得することと、
前記撮像情報に基づき、複数の前記表示装置の配置態様を認識することと、
をコンピュータに実行させるための、情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、情報処理装置および情報処理プログラムに関する。

【背景技術】

【0002】

近年、情報処理装置（例えば、パーソナルコンピュータ（以下、「ＰＣ」という場合もある）に複数のディスプレイ（表示装置）を接続して利用する、マルチディスプレイシステムを利用可能な環境が増えている。また、例えば、フリーアドレスオフィスやレンタルオフィス等の利用の増加に伴い、移動した先でマルチディスプレイシステムを利用する機会が増えている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２０－０１３０１６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、複数のディスプレイをＰＣに接続して利用する場合、ディスプレイの設置場所（オフィス等）によって、複数のディスプレイの配列状態が異なる場合がある。また、複数のディスプレイをＰＣに接続する場合、ＰＣ側では、複数のディスプレイの配列状態（レイアウト）を自動的に識別することはできない。その結果、ディスプレイ配列とＰＣ側の出力信号の割当が不一致となり、出力するコンテンツ（情報）を適切な位置（適切なディスプレイ）に表示することができない場合がある。そのため、ＰＣの利用者は、複数のディスプレイの配列（レイアウト）が変わるたび、またはＰＣの利用場所が変更されるたびに、ＰＣのＯＳ（Operating System）から各ディスプレイの位置を調整（整理）する必要があり、セッティング作業が繁雑になり、ＰＣを正常に利用可能（表示可能）な状態にするまで長時間要してしまうという問題があった。

【0005】

従って、本発明が解決する課題の一例は、複数のディスプレイを接続して利用する場合に、各ディスプレイのレイアウトを容易に認識させ、正しい表示を行わせるためのセッティングを容易に行うことができる、情報処理装置を提供することにある。

【課題を解決するための手段】

【0006】

本発明の第１態様に係る情報処理装置は、処理ユニットに接続された複数の表示装置を個別に識別する識別情報を、複数の前記表示装置のそれぞれに表示させる表示制御部と、複数の前記表示装置およびそれぞれの前記表示装置に表示された前記識別情報を撮像して得られた撮像情報を取得する取得部と、前記撮像情報に基づき、複数の前記表示装置の配置態様を認識する認識部と、を備える。

【0007】

また、前記識別情報は、例えば、前記表示装置の表示領域の四隅近傍のうち少なくとも一箇所に表示され、配列された他の前記表示装置に対する相対位置の判定に用いる指標を含む。

【0008】

また、前記指標は、例えば、前記表示領域の対角位置に表示される。

【0009】

また、前記指標は、例えば、前記表示領域の四隅に表示される。

【0010】

また、前記認識部は、例えば、複数の前記表示装置のうち、基準となる基準表示装置における一対の対角線の延長線で区切られる四領域のいずれか一つの領域に他の前記表示装置の前記識別情報が検出された場合、前記領域に含まれる前記基準表示装置の縁部に、検出された前記表示装置の縁部を隣接させるような配置態様を認識する。

【0011】

本発明の第２態様に係る情報処理プログラムは、処理ユニットに接続された複数の表示装置を個別に識別する識別情報を、複数の前記表示装置のそれぞれに表示させることと、複数の前記表示装置およびそれぞれの前記表示装置に表示された前記識別情報を撮像して得られる撮像情報を取得することと、前記撮像情報に基づき、複数の前記表示装置の配置態様を認識することと、をコンピュータに実行させる。

【発明の効果】

【0012】

本発明の上記態様によれば、複数の表示装置の実際のレイアウトを撮像した撮像情報に含まれる識別情報に基づき、各表示装置の配列態様を認識することが可能となる。その結果、複数の表示装置を情報処理装置に接続して利用する場合に、各表示装置のレイアウト（位置関係、配置態様）を容易に認識させ、正しい表示を行わせるためのセッティングを容易に行うことができる。

【図面の簡単な説明】

【0013】

【図1】図１は、実施形態にかかる情報処理装置および情報処理装置と接続するディスプレイの実際のレイアウトを示す例示的かつ模式的な説明図である。

【図2】図２は、情報処理装置に複数のディスプレイを接続した場合のＯＳにおける通常の認識状態を示す例示的かつ模式的な説明図である。

【図3】図３は、実施形態にかかる情報処理装置により、各ディスプレイに表示させる識別情報を示す例示的かつ模式的な説明図である。

【図4】図４は、実施形態にかかる情報処理装置が各ディスプレイのレイアウトを認識するために撮像および撮像情報の提供の様子を示す例示的かつ模式的な説明図である。

【図5】図５は、実施形態にかかる情報処理装置の制御部の構成を示す例示的かつ模式的のブロック図である。

【図6】図６は、実施形態にかかる情報処理装置において、各ディスプレイのレイアウトを認識する際に用いる識別情報の表示バリエーションを示す例示的かつ模式的な説明図である。

【図7】図７は、実施形態にかかる情報処理装置において、隣接するディスプレイのレイアウトを決定する方法を示す例示的かつ模式的な説明図である。

【図8】図８は、図７に示す決定方法に基づいて決定されたレイアウトを示す例示的かつ模式的な説明図である。

【図9】図９は、実施形態にかかる情報処理装置におけるディスプレイのレイアウトを認識、決定するときの処理の流れを示す例示的なフローチャートである。

【発明を実施するための形態】

【0014】

以下、本発明の例示的な実施形態が開示される。以下に示される実施形態の構成、ならびに当該構成によってもたらされる作用、結果、および効果は、一例である。本発明は、以下の実施形態に開示される構成以外によっても実現可能であるとともに、基本的な構成に基づく種々の効果や、派生的な効果のうち、少なくとも一つを得ることが可能である。

【0015】

図１は、実施形態にかかる情報処理装置１０および情報処理装置１０と接続するディスプレイ１２（表示装置、モニタ）の実際のレイアウトを示す例示的かつ模式的な説明図である。

【0016】

情報処理装置１０は、例えば、中央演算処理装置（ＣＰＵ、処理ユニット）、リードオンリーメモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、マザーボード（Ｍ／Ｂ）及びドーターボードのような種々の回路基板、ハードディスクドライブ（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）のような記録装置、電源ユニット等を備える。また、複数のディスプレイ１２を接続可能なインターフェース等を備える。なお、図１では、情報処理装置１０の一例として、いわゆるデスクトップ型の情報処理装置１０を示しているが、いわゆるノート型の情報処理装置１０でもよい。

【0017】

図１では、ディスプレイ１２として、第１ディスプレイ１２ａ、第２ディスプレイ１２ｂ、第３ディスプレイ１２ｃ、第４ディスプレイ１２ｄを示しているが、ディスプレイ１２の数は、２以上であれば適宜配置可能である。図１の場合、大型の第３ディスプレイ１２ｃを中心とした複数のディスプレイ１２のレイアウトが示されている。例えば、横置きの第３ディスプレイ１２ｃの左側辺の上端に位置合わせされた小型の第１ディスプレイ１２ａが横置き配置されている。また、第３ディスプレイ１２ｃの上側辺中央には、中型の第２ディスプレイ１２ｂが横置き配置されている。また、第３ディスプレイ１２ｃの右側辺上端に位置合わせされた中型の第４ディスプレイ１２ｄ（第１ディスプレイ１２ａと第２ディスプレイ１２ｂの間のサイズ）が縦置き配置されている。なお、このレイアウトは、一例であり、適宜変更可能である。

【0018】

ところで、情報処理装置１０のＯＳは、複数のディスプレイ１２が接続可能で、各ディスプレイ１２を表示制御することが可能であるが、ディスプレイ１２のレイアウトを認識することができない。例えば、情報処理装置１０は、当該情報処理装置１０に設けられたディスプレイ１２の接続ポートの配列順に、ディスプレイ１２を順次認識する。その結果、情報処理装置１０は、図２に示されるように、例えば左から右に横置き状態で配列された第１ディスプレイ１２ａ、第２ディスプレイ１２ｂ、第３ディスプレイ１２ｃ、第４ディスプレイ１２ｄとして認識する。なお、この場合、情報処理装置１０は複数のディスプレイ１２に対して同じ表示内容を表示する、いわゆる「クローンモード」で表示を行う。つまり、情報処理装置１０の利用者は、ＯＳ上でディスプレイ１２のレイアウトを実際のレイアウト（図１参照）になるように、並べ替えや縦横の回転操作、接続ポートの差し替え等を行う必要がある。また、「クローンモード」から各ディスプレイ１２をそれぞれ独立した表示装置として個別の表示が可能になるように、いわゆる「拡張モード」に、表示制御状態を切り替える作業を行う必要があった。

【0019】

そこで、本実施形態の情報処理装置１０では、接続された複数のディスプレイ１２を個別に識別する識別情報１４を、複数のディスプレイ１２のそれぞれに表示させる。例えば、情報処理装置１０は、電源が投入されＯＳが起動すると、接続された各ディスプレイ１２に、例えば、図３に示されるような識別情報１４を表示する。そして、複数のディスプレイ１２およびそれぞれのディスプレイ１２に表示された識別情報１４を、カメラ等の撮像装置で撮像して、その撮像情報をＯＳに提供する（取得させる）。そして、撮像情報（識別情報１４）に基づき、複数のディスプレイ１２の配置態様（配列位置や回転状態等）をＯＳに認識させて、各ディスプレイ１２において適切な表示を実行する。

【0020】

図３の場合、識別情報１４として、例えば、二次元バーコード１４ａや、「Ｄｉｓｐｌａｙ＃１」等のディスプレイ番号１４ｂ等をディスプレイ１２に表示している例示的かつ模式的な図である。前述したように、情報処理装置１０に複数のディスプレイ１２が接続されている場合に、ＯＳは「クローンモード」で起動する場合がある。その場合、後述するが、各ディスプレイ１２には、図３と同様な識別情報が一度表示された後、「拡張モード」に切り替わり、再度、各ディスプレイ１２が個別の識別情報１４を表示することにより、情報処理装置１０のＯＳは、各ディスプレイ１２の位置や回転状態（レイアウト）を認識可能となる。なお、二次元バーコード１４ａには、少なくともディスプレイ番号が含まれている。したがって、識別情報１４をディスプレイ１２に表示する場合は、二次元バーコード１４ａまたはディスプレイ番号１４ｂを表示すればよい。また、二次元バーコード１４ａには、ディスプレイ番号に代えて、ディスプレイ名、ディスプレイＩＤ等ディスプレイを識別する情報を保持させてもよい。また、二次元バーコード１４ａには、複数の情報を含ませることが可能であり、例えば、ディスプレイ１２ごとの仕様（ディスプレイサイズやアスペクト比、解像度等の情報）を含ませてもよい。別の実施形態では、ディスプレイ１２ごとの仕様は、当該ディスプレイ１２を情報処理装置１０に接続する接続ケーブルを介して別途ＯＳに提供されてもよい。

【0021】

なお、図３に示す例の場合、複数のディスプレイ１２が配列された場合、上下左右等に隣接するディスプレイ１２同士の位置合わせをする場合に利用可能なグリッド線１６（１６ａ，１６ｂ，１６ｃ，１６ｄ）を併せて表示している。グリッド線１６の併用により、隣接するディスプレイ１２同士の位置関係をより容易に把握させることができる。例えば、基準となるディスプレイ１２の側方のどの位置(側方辺の上部や下部、中央部等)に隣接するディスプレイ１２が存在するかをＯＳに把握させ易くなる。

【0022】

図４は、情報処理装置１０が各ディスプレイ１２のレイアウトを認識するために撮像装置１８で実際のディスプレイ１２およびディスプレイ１２に表示された識別情報１４（図３参照）を撮像し、その撮像情報２０を情報処理装置１０に提供する様子を示す例示的かつ模式的な説明図である。

【0023】

撮像装置１８は、例えば、ＣＣＤ（Charge Coupled Device）やＣＩＳ（CMOS image sensor）等の撮像素子を内蔵するデジタルカメラである。撮像装置１８は、所定のフレームレートで動画データ（撮像画像データ）を出力することができる。撮像装置１８は、例えば、ＵＳＢ（Universal Serial Bus）、ＢｌｕｅＴｏｏｔｈ（登録商標）、ＷｉＦｉ（Wireless Fidelity）等を介して情報処理装置１０と接続可能である。

【0024】

情報処理装置１０は、ＯＳが起動したときに、複数のディスプレイ１２が接続されていることを検出した場合、各ディスプレイ１２に識別情報１４（図３参照）を表示させる。されに、撮像装置１８にディスプレイ１２およびディスプレイ１２に表示された識別情報１４を撮像させるとともに、撮像した撮像情報２０を取得する処理を実行する。情報処理装置１０のＯＳは、取得した撮像情報２０を解析することにより複数のディスプレイ１２の実際のレイアウト（配列関係や回転状態）を認識する。なお、図４の場合、撮像装置１８は、ディスプレイ１２および識別情報１４に加えて情報処理装置１０やキーボード等も併せて同じ画像の中に撮像している。この場合、情報処理装置１０を基準として各ディスプレイ１２のレイアウトの認識が容易になり、ディスプレイ１２の実際のレイアウトをより正確に認識することができる。なお、撮像装置１８は、ディスプレイ１２および識別情報１４のみを撮像対象としてもよい。また、撮像装置１８は、シャッター操作を伴うことなく、撮像した動画を逐次、情報処理装置１０に提供する構成としてもよいし、シャッター操作により静止画を撮像して静止画情報を情報処理装置１０に提供するようにしてもよい。

【0025】

図５は、情報処理装置１０のＣＰＵで実現される制御部２２の構成を示す例示的かつ模式的のブロック図である。

【0026】

情報処理装置１０のＣＰＵは、ＲＯＭ等の不揮発性の記憶装置にインストールされ記憶された情報処理プログラムを読み出し、当該プログラムにしたがって各種制御や演算処理を実行するモジュールを実現する。ＣＰＵは、例えば、表示制御部２４、取得部２６、認識部２８等のモジュールを実現する。表示制御部２４は、コード表示部２４ａ、マーカー表示部２４ｂ等を含む。認識部２８は、コード認識部２８ａ、マーカー認識部２８ｂ、レイアウト認識決定部２８ｃ等を含む。

【0027】

表示制御部２４は、情報処理装置１０のＯＳが起動したときに、複数のディスプレイ１２が接続されていること検出した場合、接続された複数のディスプレイ１２を識別する識別情報１４を、複数のディスプレイ１２のそれぞれに表示させる。コード表示部２４ａは、識別情報１４の一例として、例えば、二次元バーコード１４ａを各ディスプレイ１２の例えば表示領域の中央位置に表示させる。二次元バーコード１４ａは、前述したように例えば、ディスプレイ番号を含む。また、コード表示部２４ａは、二次元バーコード１４ａに代えてディスプレイ番号１４ｂを表示してもよい。

【0028】

前述したように、ＯＳが「クローンモード」で動作している場合、各ディスプレイ１２には、同一の識別情報１４が表示され、「拡張モード」に切り替わった場合、各ディスプレイ１２には、それぞれ異なる識別情報１４が表示される。

【0029】

マーカー表示部２４ｂは、ディスプレイ１２（表示画面）の回転角度を認識する場合に利用可能、または、拡張表示時の各ディスプレイ１２の並べ方を認識、決定する際に必要な表示画面の対角線（実際に表示されても、非表示でもよい）を引く際に利用可能な識別情報１４の一例として、マーカー１４ｄ（図６参照）の表示制御を行う。

【0030】

図６は、各ディスプレイ１２のレイアウトを認識する際に用いる識別情報１４の表示バリエーション１２Ａを示す例示的かつ模式的な説明図である。なお、図６の場合、コード認識部２８ａは、識別情報１４の一例としての二次元バーコード１４ａに代えて、一次元バーコード１４ｃを表示領域の略中央部に表示している例である。マーカー表示部２４ｂは、例えば、ディスプレイ１２の表示領域の四隅近傍のうち少なくとも一箇所に表示され、配列された他のディスプレイ１２に対する相対位置(上下左右の位置や回転状態等)の判定に用いる識別情報１４の一例である指標としてのマーカー１４ｄ（１４ｄ１～１４ｄ４）の表示制御を行う。マーカー１４ｄは、図６に示されるように、１個から４個のいずれかの態様で利用することができる。マーカー１４ｄの利用方法の詳細は後述する。

【0031】

取得部２６は、複数のディスプレイ１２およびそれぞれのディスプレイ１２に表示された識別情報１４を撮像装置１８によって撮像した結果として得られた撮像情報２０を取得する。取得部２６は撮像情報２０をＵＳＢ、ＢｌｕｅＴｏｏｔｈ、ＷｉＦｉ等を経由して取得可能である。取得部２６は、表示制御部２４によって識別情報１４が表示された場合、撮像装置１８に対してディスプレイ１２および識別情報１４の撮像指示および撮像した撮像情報２０を送信させる送信指示を実行する。

【0032】

なお、取得部２６は、撮像装置１８によってディスプレイ１２および識別情報１４を撮像させる場合、表示制御部２４を介して、少なくとも一つのディスプレイ１２に対して、撮像装置１８による撮像を実行することを案内する撮影案内を表示するようにしてもよい。例えば、「利用する全てのディスプレイおよびそのディスプレイに表示された識別情報を１画像として撮像できるようにカメラを向けてください。」等のメッセージを表示させてもよい。また、取得部２６は、同様な内容を音声メッセージとして、情報処理装置１０のスピーカーから出力するようにしてもよい。

【0033】

認識部２８は、取得部２６が取得した撮像情報２０に基づき、複数のディスプレイ１２の配置態様（レイアウト）を認識し決定する。

【0034】

コード認識部２８ａは、撮像情報２０から二次元バーコード１４ａや一次元バーコード１４ｃを抽出し、解析することで各ディスプレイ１２のディスプレイ番号を認識する。なお、ディスプレイ番号１４ｂが示される場合、コード認識部２８ａは、画像処理等により直接ディスプレイ番号を認識する。

【0035】

マーカー認識部２８ｂは、マーカー１４ｄの表示されている位置に基づいて、マーカー１４ｄが表示されているディスプレイ１２の回転状態を認識する。

【0036】

また、レイアウト認識決定部２８ｃは、コード認識部２８ａが認識した一次元バーコード１４ｃ（または二次元バーコード１４ａまたはディスプレイ番号１４ｂ）に基づき、各ディスプレイ１２の左右上下の相対関係を認識する。例えば、第１ディスプレイ１２ａに対して第２ディスプレイ１２ｂがどの位置に存在するかを認識する。同様に、例えば、第１ディスプレイ１２ａに対して第３ディスプレイ１２ｃ、第４ディスプレイ１２ｄがどの位置に存在するかを認識する。

【0037】

さらに、レイアウト認識決定部２８ｃは、マーカー認識部２８ｂが認識したマーカー１４ｄに基づき各ディスプレイ１２の回転状態、つまり、各ディスプレイ１２の姿勢を認識する。例えば、マーカー１４ｄは、ディスプレイ１２を標準状態で設置した場合に予め定められた位置に表示される。図６の最上段に示されるように、マーカー１４ｄが１つのみ表示される場合、マーカー１４ｄ１は、例えば、横向きに配置されたディスプレイ１２の表示領域において、略中央部に表示された一次元バーコード１４ｃに対して左上隅に表示される。つまり、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して左上隅の位置に検出した場合、ディスプレイ１２が横置き姿勢で配置されていると認識する。また、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して右上隅の位置に検出した場合、ディスプレイ１２が９０°右回転した状態（縦置き姿勢）で設置されていると認識する。同様に、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して右下隅の位置に検出した場合、ディスプレイ１２が１８０°右回転した状態（天地逆転の横置き姿勢）で設置されていると認識する。また、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して左下隅の位置に検出した場合、ディスプレイ１２が２７０°右回転した状態（天地逆転の縦置き姿勢）で設置されていると認識する。

【0038】

また、図６において、第二段目に示されるように、マーカー１４ｄが２つ表示される場合、マーカー１４ｄ１は、例えば、横向きに配置されたディスプレイ１２の表示領域において、略中央部に表示された一次元バーコード１４ｃに対して左上隅に表示される。また、マーカー１４ｄ２は、例えば、横向きに配置されたディスプレイ１２の表示領域において、一次元バーコード１４ｃに対して右上隅に表示される。この場合、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して左上隅の位置に検出し、マーカー１４ｄ２を一次元バーコード１４ｃに対して右上隅の位置に検出した場合、ディスプレイ１２が横置き姿勢で配置されていると認識する。また、レイアウト認識決定部２８ｃは、マーカー１４ｄ１を一次元バーコード１４ｃに対して右上隅の位置に検出し、マーカー１４ｄ２を一次元バーコード１４ｃに対して右下隅の位置に検出した場合、ディスプレイ１２が９０°右回転した状態（縦置き姿勢）で設置されていると認識する。同様に、レイアウト認識決定部２８ｃは、一次元バーコード１４ｃに対するマーカー１４ｄ１とマーカー１４ｄ２の位置に基づいて、ディスプレイ１２の回転状態（１８０°回転、２７０°回転）を認識する。

【0039】

また、図６において、第三段目に示されるように、マーカー１４ｄが３つ表示される場合、マーカー１４ｄ１は、例えば、横向きに配置されたディスプレイ１２の表示領域において、略中央部に表示された一次元バーコード１４ｃに対して左上隅に表示される。マーカー１４ｄ２は、例えば、横向きに配置されたディスプレイ１２の表示領域において、一次元バーコード１４ｃに対して右上隅に表示される。マーカー１４ｄ３は、例えば、横向きに配置されたディスプレイ１２の表示領域において、一次元バーコード１４ｃに対して左下隅に表示される。この場合もレイアウト認識決定部２８ｃは、一次元バーコード１４ｃに対するマーカー１４ｄ１、マーカー１４ｄ２、マーカー１４ｄ３の位置に基づいて、ディスプレイ１２の回転状態を認識する。なお、マーカー１４ｄが１つ～３つの場合、マーカー１４ｄが存在しない表示領域の隅部を検出してもよく、同様な効果を得ることができる。

【0040】

このように、ディスプレイ１２に表示されるマーカー１４ｄの数が増加する程、レイアウト認識決定部２８ｃのディスプレイ１２の回転状態の認識精度が向上する。なお、図６の第四段目に示されるように、マーカー１４ｄが４つ、つまり、ディスプレイ１２の表示領域の四隅に配置される場合、さらにディスプレイ１２の回転状態の認識精度が向上する。なお、ディスプレイ１２の四隅にマーカー１４ｄ（１４ｄ１，１４ｄ２，１４ｄ３，１４ｄ４）を配置する場合、各マーカー１４ｄを異なる態様のマーカーにする必要がある。例えば、異なる色としたり、異なる形状としたりすることにより、ディスプレイ１２が回転した場合に各マーカー１４ｄが、一次元バーコード１４ｃに対してどの位置に存在かを容易に検出することができる。なお、マーカー１４ｄの形状は一例であり、適宜選択可能であり、同様の効果を得ることができる。また、図６に示されるように、単純な形状のマーカー１４ｄを用いることにより、マーカー１４ｄ自体の認識が容易になり、ディスプレイ１２の回転状態（縦置き、横置き、天地方向等）の認識精度を向上することができる。

【0041】

このように、一次元バーコード１４ｃによって示されるディスプレイ番号の認識位置と、一次元バーコード１４ｃに対するマーカー１４ｄの位置に基づいて、複数のディスプレイ１２の配置態様（配列位置、回転状体等のレイアウト）をレイアウト認識決定部２８ｃで自動的に認識することができる。このように、制御部２２（ＯＳ）が各ディスプレイ１２の実際のレイアウトを認識できれば、ＯＳは、各ディスプレイ１２にコンテンツを正確に表示することができる。

【0042】

なお、マーカー１４ｄを４つ、ディスプレイ１２の表示領域の四隅に配置する場合、図７に示すように、マーカー１４ｄ１とマーカー１４ｄ４に基づいて対角線３０ａを引くことができる。同様に、マーカー１４ｄ２とマーカー１４ｄ３に基づいて対角線３０ｂを引くことができる。なお、図７の場合、二次元バーコード１４ａに代えて、ディスプレイ番号１４ｂが表示領域の略中央部に表示されている例が示されている。この場合、レイアウト認識決定部２８ｃは、複数のディスプレイ１２のうち、基準となるディスプレイ１２、例えば第１ディスプレイ１２ａ（基準ディスプレイ、基準表示装置）における一対の対角線３０（３０ａ，３０ｂ）の延長線で区切られる四領域（第１ディスプレイ１２ａの上の領域、右の領域、下の領域、左の領域）を認識できる。そして、レイアウト認識決定部２８ｃは、四領域のいずれの領域に他のディスプレイ１２の中心（ディスプレイ番号１４ｂの位置）が存在するか否か認識することができる。他のディスプレイ１２（例えば、第２ディスプレイ１２ｂ）が右の領域に存在することを認識した場合、レイアウト認識決定部２８ｃは、図８に示すように、基準となる第１ディスプレイ１２ａの右側に第２ディスプレイ１２ｂが配置されていると認識することができる。その結果、第２ディスプレイ１２ｂの識別情報１４が第１ディスプレイ１２ａの右上の位置で検出された場合に、第１ディスプレイ１２ａの上側に配置されていると誤認識してしまうことが防止できる。なお、３以上のディスプレイ１２（ディスプレイ番号１４ｂ）が検出された場合も同様に、基準となるディスプレイ１２の対角線３０で定まるいずれの領域にディスプレイ１２（ディスプレイ番号１４ｂ）が存在するかを検出することにより、基準となるディスプレイ１２に対して、そのディスプレイ１２がどの位置に配置されるかを認識することができる。

【0043】

なお、この場合、図３に示すように、各ディスプレイ１２に表示されるグリッド線１６を用いることにより、基準となるディスプレイ１２の側辺のどの位置に隣接するディスプレイ１２の側辺が配置されるかを容易に認識することができる。例えば、基準となる第１ディスプレイ１２ａの右側に第２ディスプレイ１２ｂが配置される場合、例えば第１ディスプレイ１２ａ上側のグリッド線１６ａおよび下側のグリッド線１６ｂの位置と、第２ディスプレイ１２ｂの上側のグリッド線１６ａおよび下側のグリッド線１６ｂの位置関係に基づき、第２ディスプレイ１２ｂのより詳細な位置を認識することができる。例えば、第１ディスプレイ１２ａの側辺の上側に片寄って第２ディスプレイ１２ｂが配置されるか、下側に片寄って第２ディスプレイ１２ｂが配置されるかを認識することができる。また、グリッド線１６に代えて、またはグリッド線１６に加えて、各ディスプレイ１２の額縁（外縁フレーム）を認識して、隣接するディスプレイ１２の位置関係の詳細を認識するようにしてもよい。

【0044】

このように構成される情報処理装置１０におけるディスプレイ１２のレイアウトを認識、決定するときの処理の流れを図９に示す例示的なフローチャートを用いて説明する。

【0045】

まず、情報処理装置１０の制御部２２は、ＯＳが起動したときに複数のディスプレイ１２が使用（接続）されていない場合（Ｓ１００のＮｏ）、例えば、１つのディスプレイ１２のみが情報処理装置１０に接続されている場合、一旦このフローを終了する。つまり、接続された１つのディスプレイ１２に対して表示制御を行う。

【0046】

Ｓ１００において、制御部２２において複数のディスプレイ１２が接続されていることが検出された場合（Ｓ１００のＹｅｓ）、コード表示部２４ａが各ディスプレイ１２に、例えば二次元バーコード１４ａを表示する。また、マーカー表示部２４ｂが予め設定された数のマーカー１４ｄを各ディスプレイ１２に表示する（Ｓ１０２）。そして、取得部２６は、撮像装置１８に対して、各ディスプレイ１２および各ディスプレイ１２に示される二次元バーコード１４ａやマーカー１４ｄを一つの撮像領域で撮像するように指示を出すとともに、撮像した撮像情報２０を情報処理装置１０（制御部２２）に送信するように送信指示を出す（Ｓ１０４）。

【0047】

そして、取得部２６は、撮像情報２０の取得が完了したか否か確認し（Ｓ１０６）、取得が完了していない場合（Ｓ１０６のＮｏ）、Ｓ１０２に移行し、再度各ディスプレイ１２に二次元バーコード１４ａやマーカー１４ｄを表示させて、撮像装置１８による撮像処理、および撮像情報２０の送信処理を実行させる。

【0048】

Ｓ１０６において、取得部２６が、撮像情報２０の取得を完了した場合（Ｓ１０６のＹｅｓ）、コード認識部２８ａは、同一の二次元バーコード１４ａのディスプレイ１２が存在するか否か確認する（Ｓ１０８）。同一のコードのディスプレイ１２が存在する場合（Ｓ１０８のＹｅｓ）、ＯＳの表示モードは、「クローンモード」である。そのため、制御部２２は、「クローンモード」を解除し（Ｓ１１０）、表示モードを「拡張モード」に切り替え（Ｓ１１２）、Ｓ１０２に移行し、再度各ディスプレイ１２に二次元バーコード１４ａやマーカー１４ｄを表示する。この場合、各ディスプレイ１２には、二次元バーコード１４ａが表示されることになる。

【0049】

Ｓ１０８において、同一の二次元バーコード１４ａのディスプレイ１２が存在しない場合（Ｓ１０８のＮｏ）、すなわち、ＯＳの表示モードが「拡張モード」に切り替わっている場合、マーカー認識部２８ｂは、取得部２６が取得した撮像情報２０のマーカー１４ｄの位置に基づいて、各ディスプレイ１２の回転状態を検出する（Ｓ１１４）。ディスプレイ１２が回転している場合（Ｓ１１４のＹｅｓ）、認識部２８は、回転を検出したディスプレイ１２の回転をＯＳ上で行い（Ｓ１１６）、Ｓ１０２に移行する。表示制御部２４は、ＯＳ上で回転姿勢を修正したディスプレイ１２を含む各ディスプレイ１２に再度二次元バーコード１４ａおよびマーカー１４ｄを表示させ、撮像装置１８により撮像情報２０を取得させて、撮像情報２０を送信させる。

【0050】

Ｓ１１４において、回転しているディスプレイ１２が存在しない場合（Ｓ１１４のＮｏ）、レイアウト認識決定部２８ｃは、上述したように撮像情報２０に含まれる二次元バーコード１４ａの位置に基づいて、各ディスプレイ１２の互いの位置関係を認識するレイアウトの決定処理を行い（Ｓ１１８）、このフローを終了する。

【0051】

その結果、ＯＳは、各ディスプレイ１２の実際のレイアウト（相対位置や回転状態）を自動的に認識し（ＯＳ上で各ディスプレイ１２のレイアウト変更を実行し）、各ディスプレイ１２に適切なコンテンツを表示させることができる。

【0052】

このように、本実施形態の情報処理装置１０によれば、複数のディスプレイ１２が情報処理装置１０に接続される場合でも、撮像装置１８で撮像して得た撮像情報２０に基づいて、ディスプレイ１２の実際のレイアウトを迅速かつ容易に自動的に認識し、ＯＳ上に各ディスプレイ１２の並べ替えを行い、ＯＳの起動後、直ちに各ディスプレイ１２に対して正しい表示を行うことができる。

【0053】

例えば、情報処理装置１０（処理ユニット）は、表示制御部２４、取得部２６、認識部２８を含む。表示制御部２４は、情報処理装置１０に接続された複数のディスプレイ１２を個別に識別する識別情報１４を、複数のディスプレイ１２のそれぞれに表示させる。また、取得部２６は、複数のディスプレイ１２およびそれぞれのディスプレイ１２に表示された識別情報１４を撮像して得られた撮像情報２０を取得する。認識部２８は、撮像情報２０に基づき、複数のディスプレイ１２の配置態様を認識する。この構成によれば、例えば、複数のディスプレイ１２の実際のレイアウトを撮像した撮像情報２０に含まれる識別情報１４に基づき、各ディスプレイ１２の配列態様をＯＳ上で認識することが可能となる。その結果、複数のディスプレイ１２が情報処理装置１０に接続されて利用する場合に、各ディスプレイ１２のレイアウトを容易に認識させ、正しい表示を行わせるためのセッティングを迅速かつ容易に行うことができる。

【0054】

また、識別情報１４は、ディスプレイ１２の表示領域の四隅近傍のうち少なくとも一箇所に表示され、配列された他のディスプレイ１２に対する相対位置の判定に用いる指標（マーカー１４ｄ）を含む。この構成によれば、実際に設置されているディスプレイ１２の回転状態（姿勢）を容易に認識することができる。

【0055】

また、マーカー１４ｄ（指標）は、ディスプレイ１２の対角位置に表示される。この構成によれば、ディスプレイ１２の回転状態の認識精度を向上することができる。

【0056】

また、マーカー１４ｄ（指標）は、ディスプレイ１２表示領域の四隅に表示される。この構成によれば、ディスプレイ１２の回転状態の認識精度をさらに向上することができる。

【0057】

また、認識部２８は、複数のディスプレイ１２のうち、基準となるディスプレイ１２（基準ディスプレイ）における一対の対角線３０（対角線３０ａ、対角線３０ｂ）の延長線で区切られる四領域のいずれか一つの領域に他のディスプレイ１２の識別情報１４が検出された場合、その領域に含まれる基準のディスプレイ１２の縁部に、検出されたディスプレイ１２の縁部を隣接させるような配置態様を認識する。この構成によれば、例えば基準となるディスプレイ１２における一対の対角線３０（対角線３０ａ、対角線３０ｂ）の延長線で区切られる四領域（ディスプレイ１２の上の領域、右の領域、下の領域、左の領域）を認識できる。そして、レイアウト認識決定部２８ｃは、四領域のいずれの領域に他のディスプレイ１２の中心が存在するか否か認識することが容易になり、実際に設置されているディスプレイ１２の相対位置をより正確に認識することができる。

【0058】

また、情報処理装置１０（処理ユニット）で実行される情報処理プログラムは、情報処理装置１０に接続された複数のディスプレイ１２を個別に識別する識別情報１４を、複数のディスプレイ１２のそれぞれに表示させることと、複数のディスプレイ１２およびそれぞれのディスプレイ１２に表示された識別情報１４を撮像して得られる撮像情報２０を取得することと、撮像情報２０に基づき、複数のディスプレイ１２の配置態様を認識することと、を制御部２２（ＣＰＵ、コンピュータ）に実行させる。この構成によれば、例えば、複数のディスプレイ１２の実際のレイアウトを撮像した撮像情報２０に含まれる識別情報１４に基づき、各ディスプレイ１２の配列態様をＯＳ上で認識することが可能となる。その結果、複数のディスプレイ１２が情報処理装置１０に接続されて利用する場合に、各ディスプレイ１２のレイアウトを容易に認識させ、正しい表示を行わせるためのセッティングを迅速かつ容易に行うことができる。

【0059】

なお、上述した実施形態では、撮像情報２０を取得するデバイスとして、情報処理装置１０にＵＳＢ、Ｂｌｕｅｔｏｏｔｈ、ＷｉＦｉ等を介して接続された撮像装置１８（カメラ）を用いる例を示した。別の実施形態では、取得部２６から送信される、ディスプレイ１２や識別情報１４の撮像指示や撮像情報２０の送信指示に対応する処理を実行するアプリケーションをインストールしたスマートフォン等の携帯端末を利用してもよく、上述した実施形態と同様の効果を得ることができる。

【0060】

また、上述した実施形態は、例えば、デジタルサイネージを行うために配列された複数のディスプレイ１２に対しても利用可能であり、同様な効果を得ることができる。つまり、デジタルサイネージの実行場所において、迅速に各ディスプレイ１２のレイアウトを認識し、煩雑なセッティングを行うことなく、情報処理装置１０による表示制御を迅速かつ容易に実行可能にすることができる。

【0061】

本発明の実施形態及び変形例を説明したが、これらの実施形態及び変形例は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0062】

１０…情報処理装置、１２…ディスプレイ、１２ａ…第１ディスプレイ、１２ｂ…第２ディスプレイ、１２ｃ…第３ディスプレイ、１２ｄ…第４ディスプレイ、１４…識別情報、１４ａ…二次元バーコード、１４ｂ…ディスプレイ番号、１４ｃ…一次元バーコード、１４ｄ，１４ｄ１，１４ｄ２，１４ｄ３，１４ｄ４…マーカー、１６…グリッド線、１８…撮像装置、２０…撮像情報、２２…制御部、２４…表示制御部、２４ａ…コード表示部、２４ｂ…マーカー表示部、２６…取得部、２８…認識部、２８ａ…コード認識部、２８ｂ…マーカー認識部、２８ｃ…レイアウト認識決定部、３０，３０ａ，３０ｂ…対角線。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】