特許 5796747 情報処理装置及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5796747

(24)【登録日】2015年8月28日

(45)【発行日】2015年10月21日

(54)【発明の名称】情報処理装置及びプログラム

(51)【国際特許分類】

   H04N 5/225 20060101AFI20151001BHJP

   H04N 5/232 20060101ALI20151001BHJP

   H04N 5/91 20060101ALI20151001BHJP

   G06F 1/16 20060101ALI20151001BHJP

   G06T 5/00 20060101ALI20151001BHJP

【ＦＩ】

   H04N5/225 F

   H04N5/232 Z

   H04N5/91 J

   G06F1/16 312E

   G06F1/16 312Z

   G06F1/16 313Z

   G06T5/00 725

【請求項の数】7

【全頁数】14

(21)【出願番号】特願2012-141036(P2012-141036)

(22)【出願日】2012年6月22日

(65)【公開番号】特開2014-7508(P2014-7508A)

(43)【公開日】2014年1月16日

【審査請求日】2014年9月22日

(73)【特許権者】

【識別番号】000001443

【氏名又は名称】カシオ計算機株式会社

(74)【代理人】

【識別番号】100096699

【弁理士】

【氏名又は名称】鹿嶋 英實

(72)【発明者】

【氏名】黒松 哲也

(72)【発明者】

【氏名】谷岡 恵一

(72)【発明者】

【氏名】小川 泰明

【審査官】 藤原 敬利

(56)【参考文献】

【文献】 特開２０１１−０７６２６７（ＪＰ，Ａ）

【文献】 特開２００９−２６５６９２（ＪＰ，Ａ）

【文献】 特開２００９−２６０８１９（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００９／０１４４５７４（ＵＳ，Ａ１）

【文献】 米国特許出願公開第２０１２／００１５６７１（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２２２−５／２５７

Ｇ０６Ｆ １／００，１／１６−１／１８

Ｇ０６Ｔ ５／００

Ｈ０４Ｎ １／００，１／０４−１／２０７

Ｈ０４Ｎ １／３８−１／４０９

Ｈ０４Ｎ １／４６，１／６０

Ｈ０４Ｎ ５／７６５，５／９１−５／９５６

(57)【特許請求の範囲】

【請求項1】

第１の筐体と第２の筐体とを開閉可能に連結した情報処理装置であって、
読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する検出手段と、
前記検出手段により第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記検出手段により検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う歪補正手段と、
前記歪補正手段により補正された撮影画像を記録保存する保存手段と、
を備えたことを特徴とする情報処理装置。

【請求項2】

前記検出手段は、そのいずれか一つの検出方法として、前記第１の筐体と前記第２の筐体とを開閉可能に連結するヒンジ部に設けられていて前記第１の筐体と前記第２の筐体との角度を検出する方法を含む、
ことを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記複数の検出手段は、そのいずれか一つの検出方法として、前記撮像手段による撮影画像を解析してその画像内に映っている所定の指標を認識し、その認識結果から前記第１の筐体と前記第２の筐体との閉じ状態を検出する方法を含む、
ことを特徴とする請求項１あるいは請求項２に記載の情報処理装置。

【請求項4】

前記複数の検出手段は、そのいずれか一つの検出方法として、前記第１の筐体と前記第２の筐体との相対的な姿勢から前記第１の筐体と前記第２の筐体との閉じ状態を検出する方法を含む、
ことを特徴とする請求項１〜請求項３のいずれかに記載の情報処理装置。

【請求項5】

前記取得手段は、前記検出手段により第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが検出された際に、前記撮像手段によって撮影された複数の撮影画像を順次取得し、
前記歪補正手段は、前記取得手段によって取得した複数の撮影画像を前記検出手段により検出された第１の筐体と第２の筐体との閉じ状態に基づいてそれぞれ歪補正処理を行い、
前記歪補正手段により補正された複数の撮影画像を重ね合わせる合成処理を行う合成手段を更に備え、
前記保存手段は、前記合成手段により合成処理された画像を記録保存する、
ようにしたことを特徴とする請求項１〜請求項４のいずれかに記載の情報処理装置。

【請求項6】

前記取得手段は、第１の筐体と前記第２の筐体との開閉角度が複数の異なる開閉角度である際に、夫々の開閉角度で前記撮像手段から撮影画像を取得し、
前記歪補正手段は、第１の筐体と前記第２の筐体との開閉角度に応じた歪補正処理を行う、
ようにしたことを特徴とする請求項１〜請求項５のいずれかに記載の情報処理装置。

【請求項7】

コンピュータに対して、
読取対象の紙媒体が配置される第１の筐体に対向し、かつ前記第１の筐体に開閉可能に連結されている第２の筐体に設けられた撮像手段により前記紙媒体を撮影する場合において、前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する機能と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する機能と、
前記取得した撮影画像を前記検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う機能と、
前記補正された撮影画像を記録保存する機能と、
を実現させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、紙媒体（例えば、ノートブックや書籍）に記載されている情報を撮影する撮像手段を備えた情報処理装置及びプログラムに関する。

【背景技術】

【0002】

一般に、紙媒体（例えば、ノートブックや書籍）に記載されている情報を読み取る情報処理装置としては、その紙媒体をスキャナで走査することによってイメージデータとして読み取ったり、デジタルカメラで撮影することによって撮影画像として読み取ったりするようにしている。そして、従来、紙媒体をデジタルカメラによって読み取る技術としては、例えば、第１の筐体と第２の筐体とがヒンジ部を介して回動可能（開閉可能）に取り付けられているノートパソコンにおいて、第１の筐体のキートップに資料を置き、撮像部を備えた第２の筐体がキートップの全体を撮影可能となる位置で所定時間保持されたときに、撮像部を動作させて資料の撮影を開始するようにした技術が提案されている（特許文献１参照）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１１−７６２６７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、上述した特許文献１の技術にあっては、キートップ上に置いた資料を撮影するためには、第１の筐体と第２の筐体とを所定のヒンジ角度に厳密に調整する必要があり、その角度で資料を撮影するようにしているが、上述のように所定時間保持という特別な操作を行わずに第１の筐体と第２の筐体とを完全に閉じてしまったときには、資料の撮影も行われないままとなり、また、特別な操作を行ったつもりでも、その操作が不完全であれば、資料の撮影が行われないままとなり、更には、鮮明な撮影画像であるかを目視確認しなければならず、撮り直しがきかない場合には資料を保存することができなくなってしまう。

【0005】

本発明の課題は、第１の筐体と第２の筐体とを閉める操作が行われるだけで、読取対象の紙媒体を鮮明に撮影して保存できるようにすることである。

【課題を解決するための手段】

【0006】

上述した課題を解決するために本発明の情報処理装置は、
第１の筐体と第２の筐体とを開閉可能に連結した情報処理装置であって、
読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する検出手段と、
前記検出手段により第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記検出手段により検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う歪補正手段と、
前記歪補正手段により補正された撮影画像を記録保存する保存手段と、
を備えたことを特徴とする情報処理装置である。

【0007】

上述した課題を解決するために本発明のプログラムは、
コンピュータに対して、
読取対象の紙媒体が配置される第１の筐体に対向し、かつ前記第１の筐体に開閉可能に連結されている第２の筐体に設けられた撮像手段により前記紙媒体を撮影する場合において、前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する機能と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する機能と、
前記取得した撮影画像を前記検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う機能と、
前記補正された撮影画像を記録保存する機能と、
を実現させるためのプログラムである。

【発明の効果】

【0008】

本発明によれば、第１の筐体と第２の筐体とを閉める操作が行われるだけで、読取対象の紙媒体を鮮明に撮影して保存することができ、簡単かつ確実な保存が可能となる。

【図面の簡単な説明】

【0009】

【図1】情報処理装置として適用したカメラ付きタブレット端末装置１１の基本的な構成要素を示したブロック図。

【図2】カメラ付きタブレット端末装置１１、紙媒体１２をバインダ１３に装着した状態における外観斜視図。

【図3】バインダ１３を構成する第１の筐体１３ａと第２の筐体１３ｂとを閉じる際に撮像部６によって紙媒体１２を撮影したときの撮影画角と紙媒体１２との関係を示した図。

【図4】第１の筐体１３ａと第２の筐体１３ｂとの角度を撮影画像内に映っている角度認識用マークの位置から認識する場合を説明するための図。

【図5】タブレット端末装置１１の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャート。

【図6】複数の撮影画像を重ね合わせる場合に、角度認識用マークを基準にして重ね合わせることを説明するための図。

【図7】本実施形態の変形例を説明するための図で、第２の筐体１３ｂに加速度センサ１６を装着した状態を示した図。

【図8】本実施形態の変形例を説明するための図で、撮影画像を解析することにより第１の筐体１３ａと第２の筐体１３ｂとの角度を検出する場合を説明するための図。

【発明を実施するための形態】

【0010】

以下、図１〜図６を参照して本発明の実施形態を説明する。
本実施形態は、情報処理装置として撮像機能（デジタルカメラ）を備えたタブレット端末装置に適用した場合を例示したもので、図１は、このカメラ付きタブレット端末装置の基本的な構成要素を示したブロック図である。
タブレット端末装置は、その筐体全体が、例えば、Ａ５サイズの携帯型情報端末装置であり、タッチ入力機能、無線通信機能などの基本機能のほか、後で詳述するが、このタブレット端末装置に接近配置されている紙媒体（例えば、ノート、リポート用紙、書籍など）を撮影することによりその紙媒体に記載されている情報（文字や図表など）を光学的に読み取る画像読取機能を備えている。なお、本実施形態において、紙媒体とは、撮影すべき情報が記載されている媒体を示すものであり、素材が紙であることを特定するものではない。即ち、本実施形態において、紙媒体とは情報が記載されている被写体を意味している。また、本実施形態において、紙媒体には、情報を電子的に表示可能な電子ペーパーも含まれる。

【0011】

制御部１は、電源部（二次電池）２からの電力供給によって動作し、記憶部３内の各種のプログラムに応じてこのタブレット端末装置の全体動作を制御するもので、この制御部１には図示しないＣＰＵ（中央演算処理装置）やメモリなどが設けられている。記憶部３は、例えば、ＲＯＭ、フラッシュメモリなどを有する構成で、図５に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ３ａと、このタブレット端末装置が動作するために必要となる各種の情報（例えば、フラグなど）を一時的に記憶するワークメモリ３ｂなどを有している。なお、記憶部３は、例えば、ＳＤカード、ＩＣカードなど、着脱自在な可搬型メモリ（記録メディア）を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。

【0012】

操作部４は、押しボタン式のキーとして、図示省略したが、電源をオン／オフさせる電源キーなどを備え、制御部１は、この操作部４から操作キーに対応して出力される入力操作信号に応じた処理を行う。タッチ表示部５は、表示パネル５ａにタッチパネル５ｂを積層配設した構成で、表示パネル５ａは、縦横比（例えば、横４：縦３）の異なる画面を有した高精細液晶ディスプレイであり、タッチパネル５ｂは、撮影者の指などでタッチ操作された位置を検知してその座標データを入力するタッチスクリーンを構成するもので、例えば、静電容量方式あるいは抵抗膜方式を採用しているが、その他の方式であってもよい。

【0013】

撮像部６は、画像読取機能を構成するもので、図示省略したが、光学レンズからの被写体像が撮像素子（ＣＣＤやＣＭＯＳなど）に結像されることにより被写体を高精細に撮影可能なデジタルカメラ部で、撮影レンズ、撮像素子、各種のセンサ、アナログ処理部、デジタル処理部を有している。撮像部６は、オートフォーカス機能などを備え、画像読取機能の動作時に、例えば、フレームレートが秒１５コマ（１５ｆｐｓ）の連続撮影（高速撮影）が可能となっている。無線ＬＡＮ（Local Area Network）通信部７は、高速大容量の通信が可能な無線通信モジュールで、最寄りの無線ＬＡＮルータ（図示省略）を介してインターネットに接続可能となっている。開閉角度センサ８は、後述する開閉可能な筐体の開閉角を検出するセンサであり、制御部１は、この開閉角度センサ８によって検出された開閉角に応じて撮像部６から撮影画像を取得するようにしている。

【0014】

図２は、カメラ付きタブレット端末装置１１、紙媒体１２をバインダ１３に装着した状態における外観斜視図である。
タブレット端末装置１１と紙媒体（例えば、ノート、リポート用紙、書籍）１２とは、バインダ１３に装着されている。バインダ１３は、第１の筐体１３ａと第２の筐体１３ｂとをヒンジ部１３ｃを介して見開き状に開閉可能となるように取り付けた構成で、図示の例では、右側に第１の筐体１３ａが配置され、左側に第２の筐体１３ｂが配置されている。なお、第１の筐体１３ａと第２の筐体１３ｂとは、図示の場合とは逆の関係であってもよい。第１の筐体１３ａ及び第２の筐体１３ｂは、厚い平板状長方形（同形同大）の紙部材（厚紙）で、縦長の第１の筐体１３ａ及び第２の筐体１３ｂを左右に配置した状態においてヒンジ部１３ｃを介して開閉可能に連結されている。即ち、第１の筐体１３ａと第２の筐体１３ｂとは、ヒンジ部１３ｃを回転軸として開閉可能に構成されている。

【0015】

そして、第１の筐体１３ａと第２の筐体１３ｂとは、図示のように１８０°開いた状態から第１の筐体１３ａの上に第２の筐体１３ｂが重なり合う状態（完全に閉じた状態）まで開閉可能なもので、ユーザにあってはバインダ１３を１８０°開いた状態においてタブレット端末装置１１を使用したり、紙媒体１２に文字や図表などを書き入れたりするようにしている。また、タブレット端末装置１１及び紙媒体１２を使用しないときには、第１の筐体１３ａと第２の筐体１３ｂとを閉じてバインダ１３を完全に閉じるようにしている。

【0016】

タブレット端末装置１１は、その全体が薄型の直方体で、バインダ１３を構成する第２の筐体１３ｂ上に装着されていると共に、縦長の第２の筐体１３ｂに対してタブレット端末装置１１も縦長となる向きに配設されている。また、バインダ１３を構成する他方の筐体（第１の筐体）１３ａ上には、紙媒体１２が配置されている。紙媒体１２は、一枚のシート状の用紙であってもよいし、書籍のように冊子の状態（製本状態）であってもよい。なお、バインダ１３上において、タブレット端末装置１１と紙媒体１２との配置関係は、上述とは逆の関係であってもよい。また、タブレット端末装置１１、紙媒体１２は、バインダ１３に着脱可能に装着されているが、その装着の仕方は、例えば、留め具、フックを使用するなど、任意である。

【0017】

このようにバインダ１３の第２の筐体１３ｂにタブレット端末装置１１が装着されている状態において、タブレット端末装置１１の撮像部６は、タブレット端末装置１１の表面側の一端中央部（図示の例では表面左端中央部）に位置するように配設されている。また、ヒンジ部１３ｃには開閉角度センサ８が配設されている。この開閉角度センサ８は、第１の筐体１３ａと第２の筐体１３ｂとを開閉可能に連結するヒンジ部１３ｃに設けられ、第１の筐体１３ａと第２の筐体１３ｂとの開閉角度を検出するもので、例えば、ヒンジ部１３ｃの軸（図示省略）が一定量回転する毎に２相のパルスを出力するロータリーエンコーダ、あるいはホール素子あるいは磁気抵抗素子を使用して開閉検出を行う磁気センサによって構成されている。なお、図２は、開閉角度センサ８の構成を示す概略拡大図を含み、開閉角度センサ８は、ヒンジ部１３ｃを構成する回転軸側の円板に磁石８ａを配設し、その円板に対面する円板側にホール素子８ｂを配設した磁気センサによって構成した場合を例示している。

【0018】

また、バインダ１３を構成する第１の筐体１３ａの表面角部には、開閉角度認識用の指標としてマーク１４が装着されている。この閉じ角認識用のマーク１４は、例えば、十字形の黒マークで、第１の筐体１３ａの上面に印刷されたものであるが、印刷に限らず、マーク付シールを貼り付けるようにしてもよい。制御部１は、開閉角度センサ８によって所定の角度、つまり、紙媒体１２を撮影するのに適した角度（撮影に最適な角度）として略７０°が検出された際に、撮像部６から撮影画像を取得し、その撮影画像を解析することによりマーク１４を認識し、そのマークの認識結果に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにしている。

【0019】

図３は、バインダ１３を構成する第１の筐体１３ａと第２の筐体１３ｂとを閉じる際に撮像部６によって紙媒体１２を撮影したときの撮影画角と紙媒体１２との関係を示した図である。
制御部１は、開閉角度センサ８によって第１の筐体１３ａと第２の筐体１３ｂとの角度（撮影に最適な角度）として略７０°が検出された際に、撮像部６から撮影画像を取得するが、この撮影に最適な角度（略７０°）に合わせてフォーカス、露出などの撮影条件が設定されており、その条件で撮影された画像を撮像部６から取得するようにしている。

【0020】

図４は、第１の筐体１３ａと第２の筐体１３ｂとの角度に応じて撮影画像内の認識用マーク１４の映り具合が変化している様子を説明するための図で、その一部拡大図を含む。
開閉角度が略１２０°、略９０°、略７０°の場合での閉じ角認識用マーク１４の映り具合を示し、バインダ１３が次第に閉じられるにしたがって開閉角度は略１２０°、略９０°、略７０°のように変化していくが、この角度変化に応じて撮影画像内のマーク１４の位置が変化し、図中、上方向へ移動するようになる。制御部１は、撮影画像内のマーク１４の位置変化を認識し、その位置から所定の状態（閉じ角度：略７０°）まで閉じられたか否かを判別するようにしている。この場合、撮影画像内の固定的に決められている位置（例えば、図示の例では、左角部付近）にマーク検出エリア１５を設け、このマーク検出エリア１５内にマーク１４が収まったか否かに基づいて所定の状態（閉じ角度：略７０°）まで閉じられたか否かを判別するようにしている。

【0021】

このように種類の異なる複数の検出方法で第１の筐体１３ａと第２の筐体１３ｂとが所定の状態（閉じ角度：略７０°）まで閉じられたか否かを判別するようにしている。すなわち、開閉角度センサ８によって第１の筐体１３ａと第２の筐体１３ｂとの角度（撮影に最適な角度）として略７０°が検出された際に、撮像部６から撮影画像を取得して、撮影画像内の認識用マーク１４の映り具合を認識し、撮影画像内の固定的に決められているマーク検出エリア１５内にマーク１４が収まったか否かに基づいて所定の状態（閉じ角度：略７０°）まで閉じられたか否かを判別するようにしている。

【0022】

次に、本実施形態におけるタブレット端末装置１１の動作概念を図５に示すフローチャートを参照して説明する。ここで、このフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。

【0023】

図５は、タブレット端末装置１１の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、電源投入に応じて実行開始される。
先ず、制御部１は、ユーザ操作によって画像読み取りモード（動作モード）に切り換えられているかを調べ（ステップＳ１）、画像読み取りモード以外の他の動作モードに切り換えられているときには（ステップＳ１でＮＯ）、そのモードに応じた処理へ移るが、画像読み取りモードに切り換えられているときには（ステップＳ１でＹＥＳ）、初期化処理としてメモリなどをクリアすると共に、撮影に最適な角度（略７０°）に合わせてフォーカス、露出などの撮影条件を撮像部６に設定する（ステップＳ２）

【0024】

そして、撮像部６を動作させて撮影を開始（ステップＳ３）させた後、制御部１は、電源オフ操作が行われたかを調べ（ステップＳ４）、電源オフ操作が行われたときには（ステップＳ４でＹＥＳ）、撮像部６を停止させると共に（ステップＳ５）、電源オフ処理（ステップＳ６）を行った後、図５のフローから抜けるが、電源オフ操作が行われなければ（ステップＳ４でＮＯ）、開閉角度センサ８から第１の筐体１３ａと第２の筐体１３ｂとの開閉角度を取得して（ステップＳ７）、その開閉角度は略７０°以下であるかを調べる（ステップＳ８）。

【0025】

いま、開閉角度が略７０°以下でなければ（ステップＳ８でＮＯ）、上述のステップＳ４に戻るが、開閉角度が略７０°以下であれば（ステップＳ８でＹＥＳ）、撮像部６から１フレーム分の撮影画像を取得し（ステップＳ９）、この取得画像を解析することによって閉じ角認識用マーク１４を認識する（ステップＳ１０）。そして、取得画像内のマーク１４を認識すると、そのマーク１４の位置は、マーク検出エリア１５内に収まっているか否かに基づいて所定の状態まで閉じられたか否かの判別を行う（ステップＳ１１）。

【0026】

いま、開閉角度センサ８によって検出された開閉角度が、図４に示すように、例えば、略１２５°や略９０°である場合には、マーク１４の位置はその検出エリア１５から大きく外れているために（ステップＳ１１でＮＯ）、所定の状態まで閉じられていない場合であると判別して、上述のステップＳ４に戻るが、開閉角度が略７０°以下であれば（ステップＳ１１でＹＥＳ）、マーク１４の位置はその検出エリア１５内に収まるために所定の状態まで閉じられた場合であると判別する（ステップＳ１１でＹＥＳ）。

【0027】

このようにして種類の異なる複数の検出方法によって第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたことが検出された場合には（ステップ１１でＹＥＳ）、その取得画像を保存候補としてワークメモリ３ｂ内に一時記憶させる（ステップＳ１２）。そして、この一時記憶の画像数を計数し、その値は所定数（例えば、３枚）に達したかを調べ（ステップＳ１３）、一時記憶の画像数が所定数に達するまで上述のステップＳ４に戻り、以下、上述の動作を繰り返す（ステップＳ４〜Ｓ１３）。なお、上述の所定数は、３枚に限らず、任意であり、ユーザ操作により任意に設定可能としてもよい。

【0028】

これによって一時記憶の画像数が所定数に達すると（ステップＳ１３でＹＥＳ）、一時記憶の各画像を順次読み出し、各画像に対して台形歪を補正する処理を行う（ステップＳ１４）。この場合、開閉角度が略７０°に基づいてその台形歪を補正する処理を行う。なお、一時記憶した複数枚の画像を取得した際の開閉角度が夫々異なる場合に、夫々の開閉角度に応じた台形歪補正を行うようにしても良い。即ち、画像取得時の開閉角度に応じて歪補正のパラメータを変更し、開閉角度に応じた台形歪補正を行う。これによって全ての画像に対して補正処理か終わると、歪補正した各画像を重ね合わせる合成処理を行う（ステップＳ１５）。この場合、図７に示す１枚目、２枚目、…、ｎ枚目の各画像内に設けられている各マーク１４を位置合わせの基準点として精密な位置合わせを行うことにより各画像を重ね合わせる。

【0029】

これによって重ね合わせた合成画像は、記憶部３のＳＤカードなどに記録保存される（ステップＳ１６）。そして、開閉角度センサ８から開閉角度を取得して（ステップＳ１７）、バインダ１３は閉じられたか、つまり開閉角度は略０°であるかを調べ（ステップＳ１８）、バインダ１３が閉じられていなければ（ステップＳ１８でＮＯ）、上述のステップＳ１７に戻る。以下、バインダ１３が閉じられるまでステップＳ１７〜Ｓ１８の動作を繰り返し実行する。また、バインダ１３が閉じられたときには（ステップＳ１８でＹＥＳ）、撮像部６を停止させて（ステップＳ５）、電源オフ処理（ステップＳ６）を行った後、図５のフローから抜ける。

【0030】

以上のように、本実施形態においてタブレット端末装置１１は、第１の筐体１３ａに配置されている読取対象の紙媒体１２を第２の筐体１３ｂに設けられた撮像部６により撮影すると共に、第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたことを複数種の方法で検出すると、撮像部６から取得した撮影画像を歪補正してから記録保存するようにしたので、第１の筐体１３ａと第２の筐体１３ｂとを閉める操作が行われるだけで、読取対象の紙媒体１２を鮮明に撮影して保存することができ、簡単かつ確実な保存が可能となる。

【0031】

第１の筐体１３ａと第２の筐体１３ｂとを開閉可能に連結するヒンジ部１３ｃに開閉角度センサ８を設けたので、閉じ状態を確実に検出することができる。

【0032】

制御部１は、撮像部６による撮影画像を解析してその画像内に映っているマーク１４を認識し、その認識結果から閉じ状態を検出するようにしたので、画像処理によって閉じ状態を検出することができる。

【0033】

第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたことが検出された際に、撮像部６によって撮影された複数の撮影画像に対して歪補正処理を行い、補正した複数の撮影画像を重ね合わせて合成処理された画像を記録保存するようにしたので、より鮮明な画像を撮影して保存することができる。すなわち、複数の画像を重ね合わせることによりノイズを低減して画像の明るさをアップすることができるために各撮影時でのシャッタースピードを速くすることができ、手ブレを抑えることが可能となり、また、１フレーム毎の撮影時にゲインを変化させて撮影した各画像を重ね合わせることにより、ダイナミックレンジを広げた画像を撮影することが可能となり、より鮮明な画像を撮影して保存することができる。

【0034】

なお、上述した実施形態においては、開閉角度センサ（例えは、磁気センサ）８によって開閉角度を検出するようにしたが、図７に示すように第２の筐体１３ｂ内に加速度センサ１６を設けることによって第１の筐体１３ａと第２の筐体１３ｂとの閉じ状態を検出するようにしてもよい。すなわち、加速度センサ１６によって重力の方向を検出して、第１の筐体１３ａと第２の筐体１３ｂとの相対的な姿勢（角度）から閉じ状態を検出するようにしてもよい。この場合、実装上の制約として開閉角度センサ８をヒンジ部１３ｃに取り付けらない場合などに有効なものとなる。

【0035】

なお、上述した実施形態においては、マーク１４を認識することにより閉じ状態を検出するようにしたが、撮影画像を解析することによってマーク１４以外の指標を認識することによって閉じ状態を検出するようにしてもよい。図８は、マーク１４以外の指標を認識することによって閉じ状態を検出する場合を説明するための図である。制御部１は、撮影画像を解析することにより第１の筐体１３ａの端部が画角線から外れた際の端部の切れ方として、その端部の位置を認識し、その端部の切れ方（端部の位置）が所定の切れ方（位置）であるか否かに基づいて第１の筐体１３ａと第２の筐体１３ｂとの閉じ状態を認識するようにしている。

【0036】

図示の例は、第１の筐体１３ａと第２の筐体１３ｂとの開閉角度に応じて第１の筐体１３ａの外郭線の映り具合が変化する様子を示した図で、第１の筐体１３ａの外郭線を示す実線は、閉じ角度が略７０°の場合を示し、一点破線は、閉じ角度が略９０°の場合を示し、二点破線は、閉じ角度が略１２５°の場合を示している。このように第１の筐体１３ａの端部が撮像部６の画角から外れた際の端部の切れ方、つまり、第１の筐体１３ａの端部と画角線とが交差する位置は、開閉角度に応じて変化するようになる。この場合、撮影画像の縦方向において、開閉角度が略７０°、略９０°、略１２５°の順にその縦方向中央部に近づくようになるため、その位置から第１の筐体１３ａと第２の筐体１３ｂとの開閉角度を検出することが可能となる。

【0037】

上述した実施形態においては、情報処理装置としてタブレット端末装置１１に適用した場合を示したが、これに限らず、カメラ機能付きパーソナルコンピュータ・ＰＤＡ（個人向け携帯型情報通信機器）・デジタルカメラ・音楽プレイヤーなどであってもよく、勿論、デジタルカメラ自体であってもよい。

【0038】

また、上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。

【0039】

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
第１の筐体と第２の筐体とを開閉可能に連結した情報処理装置であって、
読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する検出手段と、
前記検出手段により第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記検出手段により検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う歪補正手段と、
前記歪補正手段により補正された撮影画像を記録保存する保存手段と、
を備えたことを特徴とする情報処理装置である。
（請求項２）
請求項２に記載の発明は、請求項１に記載の情報処理装置において、
前記検出手段は、そのいずれか一つの検出方法として、前記第１の筐体と前記第２の筐体とを開閉可能に連結するヒンジ部に設けられていて前記第１の筐体と前記第２の筐体との角度を検出する方法を含む、
ことを特徴とする情報処理装置である。
（請求項３）
請求項３に記載の発明は、請求項１あるいは請求項２に記載の情報処理装置において、
前記複数の検出手段は、そのいずれか一つの検出方法として、前記撮像手段による撮影画像を解析してその画像内に映っている所定の指標を認識し、その認識結果から前記第１の筐体と前記第２の筐体との閉じ状態を検出する方法を含む、
ことを特徴とする情報処理装置である。
（請求項４）

請求項４に記載の発明は、請求項１〜請求項３のいずれかに記載の情報処理装置において、
前記複数の検出手段は、そのいずれか一つの検出方法として、前記第１の筐体と前記第２の筐体との相対的な姿勢から前記第１の筐体と前記第２の筐体との閉じ状態を検出する方法を含む、
ことを特徴とする情報処理装置である。
（請求項５）
請求項５に記載の発明は、請求項１〜請求項４のいずれかに記載の情報処理装置において、
前記取得手段は、前記検出手段により第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが検出された際に、前記撮像手段によって撮影された複数の撮影画像を順次取得し、
前記歪補正手段は、前記取得手段によって取得した複数の撮影画像を前記検出手段により検出された第１の筐体と第２の筐体との閉じ状態に基づいてそれぞれ歪補正処理を行い、
前記歪補正手段により補正された複数の撮影画像を重ね合わせる合成処理を行う合成手段を更に備え、
前記保存手段は、前記合成手段により合成処理された画像を記録保存する、
ようにしたことを特徴とする情報処理装置である。
（請求項６）
請求項６に記載の発明は、請求項１〜請求項５のいずれかに記載の情報処理装置において、
前記取得手段は、第１の筐体と前記第２の筐体との開閉角度が複数の異なる開閉角度である際に、夫々の開閉角度で前記撮像手段から撮影画像を取得し、
前記歪補正手段は、第１の筐体と前記第２の筐体との開閉角度に応じた歪補正処理を行う、
ようにしたことを特徴とする情報処理装置である。
（請求項７）
請求項７に記載の発明は、
コンピュータに対して、
読取対象の紙媒体が配置される第１の筐体に対向し、かつ前記第１の筐体に開閉可能に連結されている第２の筐体に設けられた撮像手段により前記紙媒体を撮影する場合において、前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことを複数種の方法で検出する機能と、
前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが複数種の方法で検出された際に、前記撮像手段から撮影画像を取得する機能と、
前記取得した撮影画像を前記検出された第１の筐体と第２の筐体との閉じ状態に基づいて歪補正処理を行う機能と、
前記補正された撮影画像を記録保存する機能と、
を実現させるためのプログラムである。

【符号の説明】

【0040】

１ 制御部
３ 記憶部
３ａ プログラムメモリ
４ 操作部
５ タッチ表示部
６ 撮像部
８ 開閉角度センサ
１１ タブレット端末装置
１２ 紙媒体
１３ バインダ
１３ａ 第１の筐体
１３ｂ 第２の筐体
１４ 閉じ角認識用マーク
１５ マーク検出エリア
１６ 加速度センサ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】