特許 6399135 画像入出力装置及び画像入出力方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6399135

(24)【登録日】2018年9月14日

(45)【発行日】2018年10月3日

(54)【発明の名称】画像入出力装置及び画像入出力方法

(51)【国際特許分類】

   H04N 5/222 20060101AFI20180920BHJP

   H04N 1/10 20060101ALI20180920BHJP

【ＦＩ】

   H04N5/222 300

   H04N1/10

【請求項の数】5

【全頁数】13

(21)【出願番号】特願2017-66832(P2017-66832)

(22)【出願日】2017年3月30日

【審査請求日】2017年3月30日

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100106909

【弁理士】

【氏名又は名称】棚井 澄雄

(74)【代理人】

【識別番号】100134544

【弁理士】

【氏名又は名称】森 隆一郎

(74)【代理人】

【識別番号】100149548

【弁理士】

【氏名又は名称】松沼 泰史

(74)【代理人】

【識別番号】100162868

【弁理士】

【氏名又は名称】伊藤 英輔

(72)【発明者】

【氏名】▲瀬▼川 哲

【審査官】 益戸 宏

(56)【参考文献】

【文献】 特開２０１５−１８０９８８（ＪＰ，Ａ）

【文献】 特開２０１６−１８９５１７（ＪＰ，Ａ）

【文献】 特開２０１３−２５４４３７（ＪＰ，Ａ）

【文献】 特開２０１５−１９１３８２（ＪＰ，Ａ）

【文献】 特開２０１６−０９９７０１（ＪＰ，Ａ）

【文献】 特開２０１７−１６７８１０（ＪＰ，Ａ）

【文献】 特開２０１６−１０５５４４（ＪＰ，Ａ）

【文献】 特開２０１４−２３９４４１（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２２２

Ｈ０４Ｎ １／１０

(57)【特許請求の範囲】

【請求項1】

原稿が載置される載置面を有する原稿載置台の斜め上方に配置される画像入出力装置であって、
前記原稿載置台の載置面に載置された原稿上の記述情報を撮像して該原稿のイメージ画像データを取得する撮影手段と、
前記載置面に載置された原稿上の記述情報に向けて、前記撮影手段で取得したイメージ画像データを投影用データとして重ねて投影及び／又は他の投影用データを重ねて投影する投影手段と、
前記原稿上の記述情報の位置データに基づき、前記投影手段に対して、前記投影用データを前記原稿上の記述情報に重ねて投影させる制御手段とを具備し、
前記制御手段は、前記撮影手段のイメージ画像データに基づき、前記原稿上の記述情報を指し示す指示物体の先端を認識し、その認識結果に基づきデータ入力箇所を特定し、
前記撮影手段のイメージ画像データに基づき前記指示物体の輪郭と、該指示物体の影の輪郭とを検出することにより、該指示物体の先端位置を認識して前記原稿載置台上の原稿又は投影画像へのタッチの有無を検出するものであって、
前記指示物体の影の輪郭と影でないところの明度の変化が急峻に生じた後、コントラストが鮮明になった否かによってタッチの有無を検出することを特徴とする画像入出力装置。

【請求項2】

前記制御手段は、前記原稿載置台上の原稿が移動した場合に、その移動量に基づき、前記投影手段に対して、前記原稿上の記述情報に重なるように前記投影用データを移動させることを特徴とする請求項１に記載の画像入出力装置。

【請求項3】

作業者により操作指示がなされる操作部を有し、
前記制御手段は、前記操作部からの操作指示に基づき、前記投影手段からの投影を調整することを特徴とする請求項１または２のいずれか１項に記載の画像入出力装置。

【請求項4】

前記制御手段は、前記操作部からの操作指示に基づき、画像入力動作の際には、前記投影手段に対して画像投影を停止又は均一の光を照明として照射するように切り替えることを特徴とする請求項３に記載の画像入出力装置。

【請求項5】

原稿載置台の斜め上方から、該原稿載置台に載置された原稿上の記述情報を撮像して該原稿のイメージ画像データを取得した後、該イメージ画像データを投影用データとして前記原稿上に投影するとともに、該投影用データ及び／又は他の投影用データを前記原稿載置台の原稿上の記述情報に重ねて投影し、
前記原稿上の記述情報の位置データに基づき、投影手段を制御して前記投影用データを前記原稿上の記述情報に重ねて投影させ、
前記イメージ画像データに基づき、前記原稿上の記述情報を指し示す指示物体の先端を認識し、その認識結果に基づきデータ入力箇所を特定し、
前記イメージ画像データに基づき前記指示物体の輪郭と、該指示物体の影の輪郭とを検出することにより、該指示物体の先端位置を認識して前記原稿載置台上の原稿又は投影画像へのタッチの有無を検出し、
前記指示物体の影の輪郭と影でないところの明度の変化が急峻に生じた後、コントラストが鮮明になった否かによってタッチの有無を検出することを特徴とする画像入出力方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、原稿上の記述情報をイメージ画像データとして取り込みかつ出力する画像入出力装置及び画像入出力方法に関する。

【背景技術】

【0002】

例えば金融機関などの相談窓口などでは、銀行員と顧客とがテーブルを挟んで対面で話をする場合がある。
このとき、テーブル上には、タブレット端末を含むＰＣ、ＰＣからのデータを表示する表示装置、顧客が持参した資料やその場で署名した書類等を画像入力する入力装置などが設置されている。
入力装置としては、原稿面とは距離をおいて画像入力するスタンド式画像入力装置などが使用される。

【0003】

このような場で使用できる画像入出力装置として特許文献１及び２に示される技術が提供されている。
例えば、特許文献１には、読取面に存在する被写体を撮像すると同時に映像を投影面に結像させることが可能な画像入出力装置についての技術が示されている。
この画像入出力装置では、被写体である原稿を撮像する撮像素子と、映像を生成する光変調素子と、撮像光路を経由して被写体像を撮像素子に結像させ、かつ撮像光路とは異なる投影光路を経由して光変調素子が生成した映像を投影面に投影するレンズ群と、が設けられている。

【0004】

また、特許文献２では、記述情報が表示されている被写体を撮像し、その被写体に関する撮像データを取得する撮影手段と、その撮影手段で取得した撮像データから記述情報を認識する記述情報認識手段と、その記述情報認識手段によって認識された記述情報に関する関連情報を被写体に投影する投影手段とを備えた、画像入出力装置についての技術が示されている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２００８−９２２３４号公報

【特許文献2】特開２００６−３１５０６号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、上記特許文献１に示される画像入出力装置は、撮像素子により被写体が撮像される読取面と、レンズ群により映像が投影される投影面とが、互いに隣接するように配置された構成であるので、被写体であるオリジナル原稿と、映像が投影される投影面という２つの表示体が存在することになる。
このため、銀行員及び顧客は、状況によってはこれら２つの表示体を見比べる必要もあり、作業効率が悪くなるという問題も生じていた。

【0007】

また、上記特許文献２に示される画像入出力装置では、記述情報認識手段によって認識された記述情報に関連した関連情報を、被写体に投影するように構成されているので、オリジナル原稿からなる記述情報と、関連情報という２つの情報が存在することになり、状況によっては混乱が生じていた。

【0008】

この発明は、上述した事情に鑑みてなされたものであって、原稿に記載される記述情報と、原稿を撮像することにより得た画像情報とを同一の画面上に表示することで、記述情報又は画像情報、又はこれら双方の情報修正があった場合でも、原稿を閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図ることができる画像入出力装置及び画像入出力方法を提供する。

【課題を解決するための手段】

【0009】

上記課題を解決するために、この発明は以下の手段を提案している。
本発明の第１態様に示す画像入出力装置では、原稿が載置される載置面を有する原稿載置台と、該原稿載置台の載置面に載置された原稿上の記述情報を撮像して該原稿のイメージ画像データを取得する撮影手段と、前記載置面に載置された原稿上の記述情報に向けて、前記撮影手段で取得したイメージ画像データを投影用データとして重ねて投影及び／又は他の投影用データを重ねて投影する投影手段と、を具備する。

【0010】

本発明の第２態様に示す画像入出力方法では、原稿載置台に載置された原稿上の記述情報を撮像して該原稿のイメージ画像データを取得した後、該イメージ画像データを投影用データとして前記原稿上に投影するとともに、該投影用データ又は他の投影用データを前記原稿載置台の原稿上の記述情報に重ねて投影することを特徴とする。

【発明の効果】

【0011】

本発明によれば、原稿を閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図ることができる。

【図面の簡単な説明】

【0012】

【図1】（Ａ）は本発明に係る画像入力出力装置の概略構成図、（Ｂ）は原稿上の記述情報にイメージ画像を投影した状態を示す図である。

【図2】本発明の第１実施形態に係る画像入力出力装置の概略構成図である。

【図3】指示物体認識部の制御フローを示す図である。

【図4】（Ａ）は指示物体と影部分とが離れた状態、（Ｂ）は指示物体と影部分とが接触した状態を示す図である。

【図5】本発明の第２実施形態に係る画像入力出力装置の概略構成図である。

【図6】センサ装置の断面図である。

【図7】本発明の第３実施形態に係る画像入力出力装置の概略構成図である。

【図8】原稿がずれた状態を示す説明図である。

【図9】本発明の第４実施形態に係る画像入力出力装置の概略構成図である。

【図10】画像処理ユニットの制御フローを示す図である。

【発明を実施するための形態】

【0013】

本発明について図１を参照して説明する。
図１（Ａ）は本発明の最少構成に係る画像入力出力装置１００の概略構成図であって、符号１は、原稿Ｐが載置される載置面１Ａを有する原稿載置台である。
原稿載置台１の上方には、該原稿載置台１に載置された原稿Ｐ上の記述情報Ｗを撮像して、原稿Ｐのイメージ画像データＤ１を取得する撮影手段２が設置されている。

【0014】

また、原稿載置台１の上方でかつ撮影手段２の近傍には、撮影手段２で取得したイメージ画像データＤ１を投影用データＤ２として載置面１Ａに向けて投影する投影手段３が設置されている。
さらに、撮影手段２と投影手段３との間には、投影手段３に対して、投影用データＤ２を原稿Ｐ上の記述情報Ｗに重ねて投影させる制御手段４が設置されている。
なお、投影手段３からは、撮影手段２で取得したイメージ画像データＤ１を投影用データＤ２として載置面１Ａに向けて投影する以外に、他の投影用データＤ３を載置面１Ａに向けて投影することができる。

【0015】

そして、以上のように構成された画像入力出力装置１００によれば、原稿載置台１に載置された原稿Ｐ上の記述情報Ｗを撮像して該原稿Ｐのイメージ画像データＤ１を取得した後、該イメージ画像データＤ１を投影用データＤ２として載置面１Ａに向けて投影する。その際、図１（Ｂ）に示すように、投影用データＤ２及び／又は他の投影用データＤ３で示されるイメージ画像Ｍを、原稿Ｐ上の記述情報Ｗに重ねて投影させるようにした。
また、このような原稿Ｐのイメージ画像データＤ１を取得する作業では、一定時間毎に行うようにする。これによりイメージ画像データＤ１及び投影用データＤ２を最新のものに更新するフィーバック処理を行う。

【0016】

そして、本発明の画像入力出力装置１００では、原稿載置台１の載置面１Ａ上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像とを同一面上に表示することができ、記述情報Ｗ又はイメージ画像Ｍ、又は これら双方の情報修正があった場合でも、上述したフィードバック処理により修正結果が即座に画面上に反映される。
例えば、ボールペン等の筆記具により原稿Ｐ上の記述情報Ｗを直接的に修正した場合、又はタッチセンサ、ＰＣ操作により原稿Ｐ上に投影されたイメージ画像を修正した場合でも、これら修正結果が、同一面上に即座に反映されることで、複数人の閲覧者の理解を同じくして作業の共通化、効率化を図ることができる。

【0017】

なお、本発明に係る画像入力出力装置１００では、「原稿載置台１１に載置された原稿Ｐ上の記述情報Ｗを撮像して該原稿Ｐのイメージ画像データＤ１を取得した後、該イメージ画像データＤ１を投影用データＤ２として原稿Ｐ上に投影するとともに、該投影用データＤ２及び／又は他の投影用データＤ３を原稿載置台１１の原稿Ｐ上の記述情報Ｗに重ねて投影する画像入出力方法」が採用されている。
また、投影用データＤ２、Ｄ３を原稿載置台１１の原稿Ｐ上の記述情報Ｗに重ねて投影する際、これら投影用データＤ２、Ｄ３は記述情報Ｗに一致させる他、記述情報Ｗとは別の箇所に投影しても良く、様々な投影パターンが採用される。

【0018】

（第１実施形態）
本発明の第１実施形態について図２〜図４を参照して説明する。
図２は、本発明の第１実施形態に係る画像入力出力装置１０１の構成図であって、符号１１は、原稿Ｐが載置される載置面１１Ａを有する原稿載置台である。
原稿載置台１１の上方には、該原稿載置台１１の載置面１１Ａに載置された原稿Ｐ上の記述情報Ｗを撮像して、原稿Ｐのイメージ画像データＤ１を取得する画像入力部としての撮影手段１２が設置されている。

【0019】

撮影手段１２は、原稿載置台１１の載置面１１Ａに載置された原稿Ｐに対して一定の距離をおき間接的に画像を入力ができるカメラ型のものであって、原稿載置台１１に置かれた原稿Ｐに応じた反射光を結像させるレンズと、結像面にはＣＣＤやＣＭＯＳ等の光電変換素子であるイメージセンサとを有している（図示略）。
そして、このイメージセンサからは電気信号が信号処理部に送られ、デジタル処理がなされ、原稿画像がイメージ画像データＤ１のデジタルデータとして獲得される。

【0020】

また、原稿載置台１１の上方でかつ撮影手段１２の近傍には、撮影手段１２で取得したイメージ画像データＤ１を投影用データＤ２として、及び／又は他の投影用データＤ３を載置面１１Ａに向けて投影する投影手段１３が設置されている。
この投影手段１３は、ＬＥＤなどの３色の発光体、マイククロミラー半導体、光学レンズ、および曲面ミラーからなるプロジェクター部により構成される。
プロジェクター部では画像入力装置と同じ原稿載置台１１を含む投影面へ投影されるように装置の部品配置および投影方向が設定されている。

【0021】

そして、この投影手段１３では、赤・青・緑、３色のＬＥＤを点灯させておき、ＰＣなどから画像信号をマイクロミラーＬＳＩへ入力し、画像に応じて画素単位でマイクロミラーを開閉させることによって、ＬＥＤからの光のＯＮ／ＯＦＦと光量を調整する。画像信号に対応して光量が調整された光線は、レンズにより屈折しミラーで反射して、載置面１１Ａと同一の投影面に向かう。

【0022】

さらに、撮影手段１２と投影手段１３との間には、画像データに関する複数の機能、例えば、画像位置決め部１４Ａ、指示物体認識部１４Ｂを有する画像処理ユニット１４が設置されている。
画像位置決め部１４Ａでは、投影手段１３に対して、投影用データＤ２又は他の投影用データＤ３で示されるイメージ画像Ｍを、原稿Ｐ上の記述情報Ｗに重ねて投影させる、具体的には、撮影手段１２で得たイメージ画像データＤ１から原稿Ｐ上の記述情報Ｗの位置データを求め、該位置データに基づき、投影手段１３に対して、投影用データＤ２又は他の投影用データＤ３を原稿Ｐ上の記述情報Ｗに重ねて投影させるようにしている。

【0023】

また、指示物体認識部１４Ｂでは、図３及び図４に示されるように、撮影手段１２のイメージ画像データＤ１に基づき、原稿Ｐ上の記述情報Ｗを指し示す指示物体２０の先端を認識し、その認識結果に基づきデータ入力箇所を特定する。具体的には、指示物体認識部１４Ｂでは、撮影手段１２のイメージ画像データＤ１に基づき指示物体２０及びその影の輪郭を検出することにより、該指示物体２０の先端位置を認識する。
なお、指示物体２０としては、先が細くなっている棒、ペン先、および作業者や相談者の指先など、プロジェクターで投影された画像の一部を特定できる手段が用いられる。

【0024】

指示物体認識部１４Ｂの処理内容について図３及び図４を参照して説明する。
指示物体認識部１４Ｂでは、図３のフローチャートのステップ（Ｓ）に示すように、撮影手段１２にてイメージ画像データＤ１を取得した後（ステップ１）、指示物体２０を認識する指示物体認識工程（ステップ２）と、指示物体２０が投影用データＤ２又は他の投影用データＤ３の投影光を遮ることにより生じる影部分２１を検知する影認識工程（ステップ３）とを実行する。
その後、比較工程（ステップ４）にて、ステップ２及び３を実行することで得た、指示物体２０の位置と、影部分２１の位置との比較を行い、その比較結果から、判定工程（ステップ５）において図４（Ａ）及び（Ｂ）で示すように指示物体２０が原稿Ｓに接触したか否かを判定する。
なお、図４（Ａ）には指示物体２０と影部分２１とが離れた状態（離間距離を符号ａで示す）、図４（Ｂ）には指示物体２０と影部分２１とが接触した状態が示されている。

【0025】

また、図３での処理を利用する場面としては、操作者と相談者が画像入力出力装置１０１を置いたテーブルを挟んで着席している状況を想定している。
原稿載置台１１上にて、投影手段１３から投影されたボタン画像を、あたかもマウス、タッチペンや指等で、クリックするのと同等の処理を行うために、次の様に動作させる。
すなわち、画像入力出力装置１０１にて、投影手段１３による投影と同時に、撮影手段１２による画像撮影とを連続して行うフィードバック処理を実行し、そのフィードバック処理中に、指示物体２０の輪郭と、指示物体２０が投影光を遮ったことによる該指示物体２０の影部分２１の輪郭とを、撮影手段１２での撮影によってとらえておく。
そして、双方の輪郭が接触した場合にはおいては、指示物体２０が原稿載置台１１に接触したと判定し、指示物体２０によりボタンがクリックされたことと同等としての処理を実施するようにする。
このとき、双方の輪郭が接触したか否かは、上記処理に代えて、影の輪郭と影でないところとの明度の変化が急峻に生じた後、コントラストが鮮明になったか否かで判定しても良い。

【0026】

そして、以上のように構成された画像入力出力装置１０１によれば、原稿載置台１１に載置された原稿Ｐ上の記述情報Ｗを撮像して該原稿Ｐのイメージ画像データＤ１を取得した後、該イメージ画像データＤ１を投影用データＤ２として、又は他の投影用データＤ３を載置面１１Ａに向けて投影する。その際、投影用データＤ２又は他の投影用データＤ３を原稿Ｐ上の記述情報Ｗに重ねて投影させるようにした。

【0027】

これにより、上記画像入力出力装置１０１では、原稿載置台１１の載置面１１Ａ上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像Ｍとを同一面上に表示することができ、記述情報Ｗ又はイメージ画像Ｍ、又はこれら双方の情報修正があった場合でも、原稿Ｐを閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図ることができる。
例えば、ボールペン等の筆記具により原稿Ｐ上の記述情報Ｗを直接的に修正した場合、又はタッチセンサ、ＰＣ操作により原稿Ｐ上に投影されたイメージ画像を修正した場合でも、これら修正結果が、同一面上に反映されることで、複数人の閲覧者の理解を同じくして作業の共通化、効率化を図ることができる。

【0028】

また、本実施形態の画像入力出力装置１０１では、テーブルを挟んで２人以上で相談等をしている場合に、そのテーブル上に原稿載置台１１を設置することで、同じテーブル上にある表示画面を 双方の人が確認することができる。
また、双方で確認した原稿Ｐを画像入力することができるので、情報の共有に効果がある。また、ディスプレー等で表示した例に比べ視線を横に向けることなく、正面を向いて話をすることができるので、円滑に商談や相談が処理できることに効果がある。

【0029】

さらに、本実施形態の画像入力出力装置１０１では、原稿載置台１１に撮影手段１２から投影表示されたボタン等を、指示物体２０であるペン先や指などで押すようにすることで、画像入力装置が読み込み、処理をマウスやタッチペン等でクリックしたのと同等機能が得られる。このため、専用のタッチセンサを設けなくてもよいことから、部品点数の削減や装置の簡素化に効果がある。

【0030】

（第２実施形態）
本発明の第２実施形態について図５及び図６を参照して説明する。
第２実施形態に示される画像入力出力装置１０２が、第１実施形態に示される画像入力出力装置１０１と構成を異にするのは、原稿載置台１１の構成である。
すなわち、第２実施形態に示される原稿載置台１１の載置面１１Ａには、投影手段１３から投影された投影光を乱反射するとともに、指示物体２０の先端の接触を検知するセンサ装置３０が設けられている。
このセンサ装置３０は、図６に示されるように、下層に位置するベース部材３１と、ベース部材３１上に位置するタッチセンサ３２と、タッチセンサ３２上に位置する表面シート３３とを有し、表面シート３３の表面は投影光を乱反射する加工がされている。

【0031】

具体的な表面シート３３として、投影光が入射する側は光を細かく乱反射する表面素材が望まれ、安価には白色の用紙素材や、白色のプラスチックス系素材、又は、プラスチックス素材に白色のマッド調の塗装を施したものが使用される。
また、タッチセンサ３２の感知部としては、例として静電容量検知方式か、又は、抵抗膜検知方式による検知シートが用いられる。
このタッチセンサ３２の検知シートでは、静電容量では容量の変化を検知し、抵抗膜検知では抵抗の変化を検知し、これらの変化を示す検知信号は、接触感知処理部３４に供給される。
そして、この接触感知処理部３４において、タッチセンサ３２の二次元平面内にてどの部分が指示物体２０の接触により指し示されたかを感知することができる。このとき、静電容量検知方式の場合には、指など水分を有する指示物体２０、又は静電的な容量を変化させる指示物体２０である必要がある。抵抗膜検知方式である場合には、指示する部分に直接圧力を加える必要がある。

【0032】

そして、以上のように構成された第２実施形態の画像入力出力装置１０２では、第１実施形態と同様、原稿載置台１１の載置面１１Ａ上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像Ｍとを同一面上に表示することができ、記述情報Ｗ又はイメージ画像Ｍ、又はこれら双方の情報修正があった場合でも、原稿Ｐを閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図ることができる。
また、画像入力出力装置１０２では、原稿載置台１１の載置面１１Ａに指示物体２０の先端の接触を直接検知するセンサ装置３０が設けられているので、投影画像上に現れるボタン等の投影画像をタッチした場合には、ボタンをマウス等でクリックしたのと同等の機能を得ることができる。これにより、表示画面を対座したテーブル上に原稿載置台１１を設けた場合には、双方で確認しながらクリック操作が行えるので情報共有が簡便に行える効果がある。

【0033】

（第３実施形態）
本発明の第３実施形態について図７及び図８を参照して説明する。
第３実施形態に示される画像入力出力装置１０３が、他の実施形態に示される画像入力出力装置１０１，１０２と構成を異にするのは、投影手段１３を制御する画像処理ユニット１４の制御内容についての詳細である。
すなわち、画像処理ユニット１４では、図７（Ａ）及び（Ｂ）に示すように、原稿載置台１１上の原稿Ｐが移動（矢印（イ）で示すような平行移動、回転移動を）した場合に、その移動量に基づき、投影手段１３に対して、原稿Ｐ上の記述情報Ｗに重なるように投影用データＤ２又は他の投影用データＤ３を移動させる処理を行う。

【0034】

具体的には、画像処理ユニット１４では、撮影手段１２による画像撮影で得たイメージ画像データＤ１を、原稿載置台１１上の実際の原稿Ｐの移動量に応じて、平行および回転移動させる処理を行う。投影画像を平行／回転移動させるには、基準となる原稿Ｐに記載される記述情報Ｗの位置情報を取得して、デジタル画像の２次元データを平行／回転移動させる処理を行う。
また、原稿Ｐの移動を検知する処理としては、画像入力を一秒間に数枚から数十枚画像を取得するようにしておき、また、画像からはその都度原稿Ｐの特徴量の位置座標を記録し、位置を座標に変化がある場合には、位置変化のデータを、撮影手段１２の基準の位置変化として与える。その結果、撮影手段１２からの投影画像は、原稿Ｐの位置の変化に対応して移動する画像となる。

【0035】

例えば相談に来た人の氏名や生年月日を前記の罫線枠を投影している場で記入する場合を考える。
氏名や生年月日の記入欄を設けた表の罫線枠は撮影手段１２より投影画像として原稿載置台１１に投影しておく。そして、相談者にその罫線枠の内側に、実際に記入をしてもらう。
例えば、図８に示すように、記入している原稿Ｐである用紙が、原稿Ｐ´で示すようにずれてしまった場合にも、第３実施形態に示される画像入力出力装置１０３であれば、記入している原稿Ｐのずれを検知して投影画像も対応して移動するため、実際の記入に際しては支障が無いものとなる。

【0036】

そして、以上のように構成された第３実施形態の画像入力出力装置１０３では、第１及び第２実施形態と同様、原稿載置台１１の載置面１１Ａ上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像Ｍとを同一面上に表示することができ、記述情報Ｗ又はイメージ画像Ｍ、又はこれら双方の情報修正があった場合でも、原稿Ｐを閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図ることができる。
また、画像入力出力装置１０３では、原稿Ｐを移動させても、投影画像も原稿Ｐとともに移動するため、例えば氏名や生年月日を前記の罫線枠を投影し、相談に来た人が原稿Ｐに罫線枠の中身を記入する際に、原稿Ｐがずれてしまっても支障が生じない。すなわち、第３実施形態に示される画像入力出力装置１０３であれば、記入している原稿Ｐのずれを検知し、投影画像もずれに応じて移動し、これにより実際の記入と投影画像が重なり、記入と罫線枠との整合が常にとり続けられる効果がある。

【0037】

（第４実施形態）
本発明の第４実施形態について図９及び図１０を参照して説明する。
第４実施形態に示される画像入力出力装置１０４が、他の実施形態に示される画像入力出力装置１０１〜１０３と構成を異にするのは、投影手段１３を制御する画像処理ユニット１４の制御内容である。
第４実施形態に示される画像入力出力装置１０４では、図９に示されるように、作業者により操作指示がなされる操作部３０を有し、画像処理ユニット１４にて、操作部３０からの操作指示に基づき、投影手段１３の画像投影を調整する。
具体的には、画像処理ユニット１４において、操作部３０からの操作指示に基づき、画像入力動作の際には、画像投影を停止するか 又は、符号４０で示す均一の光を照明として照射するように切り替えるようにしている。

【0038】

画像処理ユニット１４の制御内容としては、図１０のフローチャートに示すように、まず、操作部３０にて原稿載置部１１上の原稿Ｐを単純読み込みにするモードが選択されているか否かを判定する（ステップ１１）。
そして、ステップ１１において、単純読み込みするモードが選択されたＹＥＳの場合に、撮影手段１２による原稿載置部１１上の原稿Ｐの読み取りにより、該原稿Ｐの大きさを検知した後（ステップ１２）、該原稿Ｐ上に投影手段１３からの光線４０を照明として照射し（ステップ１３）、この状態で、再度、撮影手段１２による原稿載置部１１上の原稿Ｐの読み取りを実施する（ステップ１４）。
なお、ステップ１３では、操作部３０において、単純読み込みにするモードが選択され、かつ照明機能停止の選択がなされている場合に投影手段１３による照明を停止する。
その後、撮影手段１２による原稿載置部１１上の原稿Ｐの読み取り作業が終了したか否かを判定し（ステップ１５）、ＹＥＳの場合に本フローを終了し、ＮＯの場合に先のステップ１１に戻る。

【0039】

一方、ステップ１１において、通常モードが選択されたＮＯの場合に、撮影手段１２による原稿載置部１１上の原稿Ｐの読み取りを実施し（ステップ１６）、投影手段１３にて、撮影手段１２で取得したイメージ画像データＤ１を投影用データＤ２として原稿載置部１１上の原稿Ｐに向けて投影する処理を行う（ステップ１７）。
これにより上述したように原稿載置台１１上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像Ｍとを同一面上に表示する。

【0040】

そして、以上のように構成された第４実施形態の画像入力出力装置１０４では、第１〜第３実施形態と同様、原稿載置台１１上の原稿Ｐに記載される記述情報Ｗと、原稿Ｐを撮像することにより得たイメージ画像Ｍとを同一面上に表示することができ、記述情報Ｗ又はイメージ画像Ｍ、又はこれら双方の情報修正があった場合でも、原稿Ｐを閲覧している複数人の閲覧者の理解を同じくして、作業の共通化及び効率化を図ることができる。

【0041】

また、第４実施形態の画像入力出力装置１０４では、装置が暗い場所や不安定な場所に設置されることがあり、明るさが不足している場合や、影がある場合であっても、撮影手段１２からの光線４０を利用して画像取得ができ、画像入力を安定して行うことができるという効果がある。
また、第４実施形態の画像入力出力装置１０４は、装置自体を可搬型とすることで、どこにでも持っていっても安心して画像取得できることとなり、利便性が向上可能との効果を有するものである。

【0042】

以上、本発明の実施形態について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。

【産業上の利用可能性】

【0043】

本発明は、原稿上の記述情報をイメージ画像データとして取り込みかつ出力する画像入出力装置及び画像入出力方法に関する。

【符号の説明】

【0044】

１ 原稿載置部
１Ａ 載置面
２ 撮影手段
３ 投影手段
４ 制御手段
１１ 原稿載置部
１１Ａ 載置面
１２ 撮影手段
１３ 投影手段
１４ 画像処理ユニット
１４Ａ 画像位置決め部
１４Ｂ 指示物体認識部
２０ 指示物体
２１ 影部分
３０ センサ装置
３２ タッチセンサ
１００ 画像入出力装置
１０１ 画像入出力装置
１０２ 画像入出力装置
１０３ 画像入出力装置
１０４ 画像入出力装置
Ｐ 原稿
Ｍ イメージ画像
Ｗ 記述情報

【要約】

【課題】原稿に記載される記述情報と、原稿を撮像することにより得た画像情報とを同一の画面上に表示することで、記述情報又は画像情報、又はこれら双方の情報修正があった場合でも、原稿を閲覧している複数人の閲覧者の理解を同じくして、作業の共通化、効率化を図る。
【解決手段】原稿Ｐが載置される載置面１Ａを有する原稿載置台１と、原稿載置台１に載置された原稿Ｐ上の記述情報Ｗを撮像して該原稿Ｐのイメージ画像データＤ１を取得する撮影手段２と、載置面１Ａに載置された原稿Ｐ上の記述情報Ｗに向けて、撮影手段２で取得したイメージ画像データＤ１を投影用データＤ２として重ねて投影及び／又は他の投影用データＤ３を重ねて投影する投影手段３とを具備する。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】