特許 6331380 通信装置、通信方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6331380

(24)【登録日】2018年5月11日

(45)【発行日】2018年5月30日

(54)【発明の名称】通信装置、通信方法及びプログラム

(51)【国際特許分類】

   H04N 21/431 20110101AFI20180521BHJP

   H04N 7/14 20060101ALI20180521BHJP

   H04M 1/00 20060101ALI20180521BHJP

【ＦＩ】

   H04N21/431

   H04N7/14

   H04M1/00 R

【請求項の数】7

【全頁数】13

(21)【出願番号】特願2013-263089(P2013-263089)

(22)【出願日】2013年12月19日

(65)【公開番号】特開2015-119423(P2015-119423A)

(43)【公開日】2015年6月25日

【審査請求日】2016年11月7日

(73)【特許権者】

【識別番号】000001443

【氏名又は名称】カシオ計算機株式会社

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100109830

【弁理士】

【氏名又は名称】福原 淑弘

(74)【代理人】

【識別番号】100103034

【弁理士】

【氏名又は名称】野河 信久

(74)【代理人】

【識別番号】100075672

【弁理士】

【氏名又は名称】峰 隆司

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100140176

【弁理士】

【氏名又は名称】砂川 克

(74)【代理人】

【識別番号】100158805

【弁理士】

【氏名又は名称】井関 守三

(74)【代理人】

【識別番号】100172580

【弁理士】

【氏名又は名称】赤穂 隆雄

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100124394

【弁理士】

【氏名又は名称】佐藤 立志

(74)【代理人】

【識別番号】100112807

【弁理士】

【氏名又は名称】岡田 貴志

(74)【代理人】

【識別番号】100111073

【弁理士】

【氏名又は名称】堀内 美保子

(72)【発明者】

【氏名】村山 大河

(72)【発明者】

【氏名】本荘 太一

【審査官】 長谷川 素直

(56)【参考文献】

【文献】 特開平０８−２０５１９７（ＪＰ，Ａ）

【文献】 特開２００９−００５２５４（ＪＰ，Ａ）

【文献】 特開２００３−３４８５５６（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ２１／００−２１／８５８

Ｈ０４Ｎ ７／１４−７／１５

Ｈ０４Ｍ １／００

(57)【特許請求の範囲】

【請求項1】

通信先の装置から画像の出力形状を示す情報を取得する形状取得手段と、
送信すべき画像のデータを取得する画像取得手段と、
上記形状取得手段で得た出力形状を示す情報が矩形か否かを判断する判断手段と、
上記判断手段で上記出力形状を示す情報が矩形でないと判断した場合、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工する画像加工手段と、
上記画像加工手段で加工した画像のデータを上記通信先の装置に送信する送信手段と
を備えることを特徴とする通信装置。

【請求項2】

上記画像加工手段は、上記画像取得手段で得た画像中から顔認識技術により顔画像の範囲を認識し、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲を含むように画像のデータを加工することを特徴とする請求項１記載の通信装置。

【請求項3】

上記画像加工手段は、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲の大きさを調整することを特徴とする請求項２記載の通信装置。

【請求項4】

上記画像加工手段は、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲の傾きを調整することを特徴とする請求項２又は３記載の通信装置。

【請求項5】

上記通信先の装置は投影装置であり、
上記出力形状を示す情報は、上記投影装置のパネル形状を示す情報であり、
上記画像加工手段は、上記パネル形状を示す情報に基づいて、上記画像取得手段で得た画像のデータを加工する
ことを特徴とする請求項１乃至４いずれか記載の通信装置。

【請求項6】

通信先の装置から画像の出力形状を示す情報を取得する形状取得工程と、
送信すべき画像のデータを取得する画像取得工程と、
上記形状取得工程で得た出力形状を示す情報が矩形か否かを判断する判断工程と、
上記判断工程で上記出力形状を示す情報が矩形でないと判断した場合、上記形状取得工程で得た出力形状を示す情報に基づき、上記画像取得工程で得た画像のデータを加工する画像加工工程と、
上記画像加工工程で加工した画像のデータを上記通信先の装置に送信する送信工程と
を有したことを特徴とする通信方法。

【請求項7】

通信先の装置と画像のデータを送受する装置が内蔵するコンピュータが実行するプログラムであって、上記コンピュータを、
上記通信先の装置から画像の出力形状を示す情報を取得する形状取得手段、
送信すべき画像のデータを取得する画像取得手段、
上記形状取得手段で得た出力形状を示す情報が矩形か否かを判断する判断手段、
上記判断手段で上記出力形状を示す情報が矩形でないと判断した場合、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工する画像加工手段、及び
上記画像加工手段で加工した画像のデータを上記通信先の装置に送信する送信手段
として機能させることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、テレビ電話機能を有する通信装置、通信方法及びプログラムに関する。

【背景技術】

【0002】

従来、テレビ電話機能付き携帯電話装置を、通常の携帯電話として使用するときには、撮像・表示ユニットと通話ユニットとは一体に結合されており、撮像・表示ユニットの表示部は通常の携帯電話としての情報（電話帳、時刻等）の表示を行なう一方で、テレビ電話として使用するときには、撮像・表示ユニットと通話ユニットに分離し、使用者は撮像・表示ユニットのカメラにより自分を撮影し、表示部により相手側から送信された画像を見るとともに、通話ユニットを耳に当てて通話を行なうようにした技術が考えられている。（例えば、特許文献１）

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００４−１２００５６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

上記特許文献は、きわめて一般的な矩形の表示部を有する携帯電話装置において考えられた技術である。

【0005】

ところで、近時、商店の店頭などに載置し、商品の広告画像等を任意形状、例えば人型の半透明板をスクリーンとしてそのリヤ側から投影するデジタルサイネージ装置が徐々に普及しつつある。この種のデジタルサイネージ装置に撮像機能と通信機能とを備えさせ、例えば老人福祉施設などに常設するテレビ電話装置として利用することが考えられている。

【0006】

このような装置を考えた場合、スクリーンには通話相手の画像が投影されることになる。もし通話相手から矩形の画像データが送られてくる際に、受け手側のデジタルサイネージ装置のスクリーンが上述した如く矩形以外の形状をしていた場合、スクリーン外部に漏れた投影光が通話を行なっている利用者に照射される虞がある。

【0007】

本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、投影対象となる部材の形状に合致した画像を送受してテレビ電話機能での通話を実現することが可能な通信装置、通信方法及びプログラムを提供することにある。

【課題を解決するための手段】

【0008】

本発明の一態様は、通信先の装置から画像の出力形状を示す情報を取得する形状取得手段と、送信すべき画像のデータを取得する画像取得手段と、上記形状取得手段で得た出力形状を示す情報が矩形か否かを判断する判断手段と、上記判断手段で上記出力形状を示す情報が矩形でないと判断した場合、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工する画像加工手段と、上記画像加工手段で加工した画像のデータを上記通信先の装置に送信する送信手段とを備えることを特徴とする。

【発明の効果】

【0009】

本発明によれば、投影対象となる部材の形状に合致した画像を送受してテレビ電話機能での通話を実現することが可能となる。

【図面の簡単な説明】

【0010】

【図1】本発明の一実施形態に係るテレビ電話装置の外観構成を示す斜視図。

【図2】同実施形態に係るテレビ電話装置の装置筐体１上部に設けられた、投影光学系の構成を右側面から見た図。

【図3】同実施形態に係る矩形の投影可能領域内のスクリーン投影領域を示す図。

【図4】同実施形態に係るテレビ電話装置の主として電子回路の機能構成を説明するブロック図。

【図5】同実施形態に係る待ち受け状態から発呼がある場合の受信処理の内容を示すフローチャート。

【図6】同実施形態に係るテレビ電話装置側から発呼を行なう場合の発信処理の内容を示すフローチャート。

【図7】同実施形態に係る図５のステップＳ１０８、図６のステップＳ２０９の通話処理のサブルーチンの詳細な内容を示すフローチャート。

【発明を実施するための形態】

【0011】

以下、本発明をデジタルサイネージ方式のテレビ電話装置に適用した場合の一実施形態について、図面を参照して詳細に説明する。なお、デジタルサイネージとは、人型のスクリーンを用いたバーチャルマネキンとして、説明を行なう。

【0012】

図１は、本実施形態に係るテレビ電話装置１０の外観構成を示す斜視図である。装置筐体１０Ａの上面前端側に、交換可能なサイネージボードＳＢが立設される。このサイネージボードＳＢは、テレビ電話装置１０の本来は矩形の投影可能領域内に収まるように設置された、任意形状を有する半透過板状の構成を有する。

【0013】

このサイネージボードＳＢの前面下部中央に撮影部ＩＭが設けられ、前方側の斜め上方の画像を取得する。さらに撮影部ＩＭの下方には、一対のスピーカ部ＳＰ，ＳＰと一対のマイクロホン部ＭＣ，ＭＣが設けられ、ステレオ音声による受話と送話が可能となる。

【0014】

また上記装置筐体１０Ａの上面後端側に、ミラーＭＲが立設され、後述する投影レンズ部から出射した光像を前面側に全反射して、上記サイネージボードＳＢに結像させる。

【0015】

図２は、上記テレビ電話装置１０の装置筐体１０Ａ上部に設けられた、投影光学系の構成を右側面から見た図である。
投影レンズ部１１から斜め上後方に向けて出射した投影光束は、ミラーＭＲで前方側に反射された後にフレネルレンズシート１２で水平方向の平行な光束に偏向され、半透過幕状のリヤプロジェクトスクリーン１３に投影される。

【0016】

このリヤプロジェクトスクリーン１３の前方側には透明ボード１４が一体に形成される。上記フレネルレンズシート１２、リヤプロジェクトスクリーン１３、及び透明ボード１４の３層が一体となって上記サイネージボードＳＢを構成している。

【0017】

上記図１に示した如くサイネージボードＳＢが人型などの不定形である一方で、上記投影レンズ部１１から出射する光像を形成するための表示素子、例えばＤＬＰ（Ｄｉｇｉｔａｌ Ｌｉｇｈｔ Ｐｒｏｃｅｓｓｉｎｇ）（登録商標）方式の投影装置であればマイクロミラー素子、は矩形の表示領域を有する。そのため、サイネージボードＳＢ外の領域への不要な投影光の出射を抑えるために、サイネージボードＳＢの形状を正確に認識する必要がある。

【0018】

本実施形態では、送信する画像データを一時的に記憶しておく記憶媒体に、予め登録しておいた複数の形状タイプのいずれに相当するサイネージボードＳＢであるかを示す情報が合わせて記憶されており、通話相手の装置に対して、画像データとサイネージボードＳＢの形状タイプの情報を合わせて送信する。

【0019】

したがって、通話相手の装置で取得された画像は、相手側の装置において、送信した形状タイプの情報に基づいて加工された後に、このテレビ電話装置１０に送られてくることとなり、その時点でテレビ電話装置１０に装着されているサイネージボードＳＢの形状に合致した、受信した画像データをそのまま投影すれば良いことになる。

【0020】

図３は、後述するＣＰＵ２８が、矩形の投影可能領域ＰＡ内でサイネージボードＳＢの形状を認識してスクリーン投影領域ＳＡとして設定した状態を示している。

【0021】

次に図４によりテレビ電話装置１０の主として電子回路の機能構成を説明する。同図中、無線通信技術としては例えば第４世代携帯電話システムに対応するものとする。ここでは図示しない上記電話システムの基地局から、アンテナ２１を介して無線通信部２２が通話データを受信する。無線通信部２２は、受信データを復調して画像データ、音声データ及びその他の制御データに分離する。得られた画像データはバスＢを介して投影画像駆動部２３に送られる。

【0022】

投影画像駆動部２３は、送られてきた画像データに応じて、所定のフォーマットに従ったフレームレート、例えば１２０［フレーム／秒］と色成分の分割数、及び表示階調数を乗算した、より高速な時分割駆動により、表示素子であるマイクロミラー素子２４を表示駆動する。

【0023】

このマイクロミラー素子２４は、アレイ状に配列された複数個の微小ミラーの各傾斜角度を個々に高速でオン／オフ動作して表示動作することで、その反射光により光像を形成する。

【0024】

一方で、光源部２５から時分割でＲ，Ｇ，Ｂの原色光が循環的に出射される。光源部２５は、半導体発光素子であるＬＥＤを有し、Ｒ，Ｇ，Ｂの原色光を時分割で繰返し出射する。光源部２５が有するＬＥＤは、広義でのＬＥＤとして、ＬＤ（半導体レーザ）や有機ＥＬ素子を含むものとしても良い。

【0025】

また、ＬＥＤから出射された光を蛍光体に照射することで励起される、元の光とは波長が異なる原色光を用いるものとしても良い。この光源部２５からの原色光が、ミラー２６で全反射して上記マイクロミラー素子２４に照射される。

【0026】

そして、マイクロミラー素子２４での反射光で光像が形成され、形成された光像が上記投影レンズ部１１を介して、ここでは図示しない上記ミラーＭＲで反射された後にサイネージボードＳＢに投射される。

【0027】

また、上記無線通信部２２で復調、分離された音声データは、バスＢを介して音声処理部２７へ送信される。この音声処理部２７は、例えばＰＣＭ音源などの音源回路を有し、送られてきた音声データに基づいてアナログの音声信号を再生して、上記スピーカ部ＳＰ，ＳＰより放音させる。

【0028】

一方で、このテレビ電話装置１０での通話時に受話器となる上記マイクロホン部ＭＣ，ＭＣから入力されたアナログの音声信号は、上記音声処理部２７によりサンプリングされ、デジタルの音声データに変換、圧縮される。当該音声データは、バスＢを介して無線通信部２２よりアンテナ２１から通話相手先の装置に向けて送信される。

【0029】

上記各回路の動作すべてをＣＰＵ２８が制御する。このＣＰＵ２８は、メインメモリ２９及びプログラムメモリ３０と直接接続される。メインメモリ２９は、例えばＳＲＡＭで構成され、ＣＰＵ２８のワークメモリとして機能する。プログラムメモリ３０は、電気的書換可能な不揮発性メモリ、例えばフラッシュＲＯＭで構成され、ＣＰＵ２８が実行する動作プログラムや各種定型データ等を記憶する。

【0030】

ＣＰＵ２８は、上記プログラムメモリ３０に記憶されている動作プログラムや定型データ等を読出し、メインメモリ２９に展開して記憶させた上で当該プログラムを実行することにより、このテレビ電話装置１０を統括して制御する。

【0031】

上記ＣＰＵ２８は、操作部３１からの操作信号に応じて各種投影動作を実行する。この操作部３１は、テレビ電話装置１０の本体に備える、オンフックキー、オフフックキー、ダイヤルキー（テンキー、「＊」キー、「♯」キー）を含むいくつかの操作キーのキー操作信号を上記ＣＰＵ２８へ送出する。

【0032】

上記ＣＰＵ２８はさらに、上記バスＢを介して撮影画像処理部３２、画像メモリ３３と接続される。
撮影画像処理部３２は、上記撮影部ＩＭの一部を構成する撮影レンズ部３４の合焦位置に配置された固体撮像素子、例えばＣＭＯＳイメージセンサ３５を走査駆動して、テレビ電話装置１０の前方を撮影した画像信号を得る。

【0033】

このＣＭＯＳイメージセンサ３５の出力する画像信号は、Ａ／Ｄ変換回路３６でデジタル化された後に上記撮影画像処理部３２に送られる。撮影画像処理部３２は、得られた画像データを適宜画像メモリ３３に一時的に保存し、後述する顔認識技術により画像中から人物の顔を認識してその範囲を切出すような処理を実行する。

【0034】

さらに撮影画像処理部３２は、切出した顔部分を含む画像データを圧縮してファイル化した上で、バスＢを介して上記無線通信部２２に送る。無線通信部２２では、ＣＰＵ２８の制御の下に、撮影画像処理部３２からの画像データを音声処理部２７からの音声データや制御データ等と取り纏めて、通話相手側の装置に対して送信する。

【0035】

次に上記実施形態の動作について説明する。
なお以下に示す動作は、上述した如くＣＰＵ２８がプログラムメモリ３０から読出した動作プログラム等をメインメモリ２９に展開した上で実行するものである。プログラムメモリ３０に記憶される動作プログラム等は、このテレビ電話装置１０の工場出荷時にプログラムメモリ３０に記憶されていたもののみならず、ユーザがこのテレビ電話装置１０を購入後にバージョンアップ用のプログラム等をインストールした内容を含む。

【0036】

図５は、待ち受け状態で、通話相手の装置から発呼がある場合のテレビ電話機能による受信処理の処理手順を示す。待ち受け状態においてＣＰＵ２８は、通話相手の装置からの発呼を受信したか否かを繰返し判断することにより（ステップＳ１０１）、発呼がなされるのを待機している。

【0037】

そして発呼があった時点で受信ありと判断すると、ＣＰＵ２８は次に操作部３１のオフフックキーが操作されたか否かにより、このテレビ電話装置１０のユーザが発呼に応答したか否かを判断し、当該操作がなければ再び上記ステップＳ１０１からの待ち受け状態に戻る。

【0038】

発呼された状態からユーザがオフフックキーを操作すると、ＣＰＵ２８はその操作を上記ステップＳ１０２で判断し、次にその時点で装着しているサイネージボードＳＢの形状情報を画像メモリ３３から読出して、無線通信部２２により通話相手の装置に送信する（ステップＳ１０３）。また、上記ステップＳ１０２でユーザがオフフックキーを操作し、通信相手装置から形状情報を付加されていた場合、形状情報を受信する。

【0039】

その後にＣＰＵ２８は、撮影画像処理部３２によりＣＭＯＳイメージセンサ３５を走査駆動させて撮影動作を開始させる（ステップＳ１０４）。撮影画像処理部３２は、例えばＣＭＯＳイメージセンサ３５によりＶＧＡ（縦４８０画素×横６４０画素）の画像サイズ、３０［フレーム／秒］のフレームレートで動画撮影を開始し、得られる画像データを順次画像メモリ３３に保持する。

【0040】

ここでＣＰＵ２８は、上記ステップＳ１０３でこのテレビ電話装置１０のサイネージボードＳＢの形状情報を送信したのと同様に、上記ステップＳ１０２でオフフックを判断した際に通話相手の装置から、画像を投影する対象に関する形状情報を受信したか否かを判断する（ステップＳ１０５）。

【0041】

ここで通話相手の装置から形状情報を受信したと判断した場合、通話相手はこのテレビ電話装置１０と同様に不定形の投影対象を有しているものとして、受信した形状情報を設定する（ステップＳ１０６）。

【0042】

また上記ステップＳ１０６で通話相手の装置から形状情報を受信していないと判断した場合、通話相手はこのテレビ電話装置１０などとは異なり、不定形の投影対象を有していないものとし、投影対象として矩形の形状を設定する（ステップＳ１０７）。

【0043】

上記ステップＳ１０６またはＳ１０７での設定後、ＣＰＵ２８はその設定内容に基づいて通話相手の装置との通話処理を実行しながら（ステップＳ１０８）、操作部３１のオンフックキーが操作されたか否かを判断し（ステップＳ１０９）、操作されていなければ上記ステップＳ１０８からの通話処理を続行する。

【0044】

こうしてステップＳ１０８，Ｓ１０９の処理を繰返し実行することで、通話動作を続行しながら、通話を打ち切るためのオンフックキーの操作がなされるのを待機する。

【0045】

そしてオンフックキーが操作された時点で上記ステップＳ１０９に通話を打ち切ると判断し、通話を終了するとともに、次の待ち受け状態に移行するべく、上記ステップＳ１０１からの処理に戻る。

【0046】

次に、図６によりこのテレビ電話装置１０側から発呼を行なう場合のテレビ電話機能による発信処理の処理手順を示す。その処理当初にＣＰＵ２８は、オフフックキーとダイヤルキーの操作による、通話相手を特定するための宛先入力がなされたか否かを繰返し判断することで（ステップＳ２０１）、発信処理の開始を待機する。

【0047】

そして宛先が入力されたと判断した場合、ＣＰＵ２８はその時点で装着しているサイネージボードＳＢの形状情報を画像メモリ３３から読出し、通話相手を特定する電話番号の情報とともに無線通信部２２により送信する（ステップＳ２０２）。

【0048】

その後にＣＰＵ２８は、通話回線が接続されて、通話相手の装置からの応答があるか否か（ステップＳ２０３）、オンフックキーが操作された否か（ステップＳ２０４）を繰り返し判断しながら、通話相手からの応答があるか、またはこのテレビ電話装置１０のユーザが通話の開始を諦めるかを待機する。

【0049】

上記ステップＳ２０４でオンフックキーが操作されたと判断した場合、ＣＰＵ２８は通話の開始を諦めたものとして、再び上記ステップＳ２０１からの処理に戻る。

【0050】

また上記ステップＳ２０３で通話相手の装置からの応答があったと判断した場合、ＣＰＵ２８は、撮影画像処理部３２によりＣＭＯＳイメージセンサ３５を走査駆動させて撮影動作を開始させる（ステップＳ２０５）。撮影画像処理部３２は、例えばＣＭＯＳイメージセンサ３５によりＶＧＡ（縦４８０画素×横６４０画素）の画像サイズ、３０［フレーム／秒］のフレームレートで動画撮影を開始し、得られる画像データを順次画像メモリ３３に保持する。また、上記ステップＳ２０３で通話相手の装置から応答があり、通信相手装置から形状情報を付加されていた場合、形状情報を受信する。

【0051】

ここでＣＰＵ２８は、通話相手の装置から、画像を投影する対象に関する形状情報を受信したか否かを判断する（ステップＳ２０６）。

【0052】

ここで通話相手の装置から形状情報を受信したと判断した場合、通話相手はこのテレビ電話装置１０と同様に不定形の投影対象を有しているものとして、受信した形状情報を設定する（ステップＳ２０７）。

【0053】

また上記ステップＳ２０６で通話相手の装置から形状情報を受信していないと判断した場合、通話相手はこのテレビ電話装置１０などとは異なり、不定形の投影対象を有していない（矩形である）ものと判断し、投影対象として矩形の形状を設定する（ステップ２０８）。

【0054】

上記ステップＳ２０７またはＳ２０８での設定後、ＣＰＵ２８はその設定内容に基づいて通話相手の装置との通話処理を実行しながら（ステップＳ２０９）、操作部３１のオンフックキーが操作されたか否かを判断し（ステップＳ２１０）、操作されていなければ上記ステップＳ２０９からの通話処理を続行する。

【0055】

こうしてステップＳ２０９，Ｓ２１０の処理を繰返し実行することで、通話動作を続行しながら、通話を打ち切るためのオンフックキーの操作がなされるのを待機する。

【0056】

そしてオンフックキーが操作された時点で上記ステップＳ２１０に通話を打ち切ると判断し、通話を終了するとともに、次の待ち受け状態に移行するべく、上記ステップＳ２０１からの処理に戻る。

【0057】

次に図７により、上記図５のステップＳ１０８及び図６のステップＳ２０９における通話処理のサブルーチンの詳細な内容を説明する。

【0058】

その当初にＣＰＵ２８は、上記無線通信部２２を介して通話相手の装置から受信した音声データに基づく音声を音声処理部２７によりスピーカ部ＳＰ，ＳＰから、投影画像駆動部２３により画像データに基づく投影画像を投影レンズ部１１からそれぞれ出力させる（ステップＳ３０１）。

【0059】

その後、ＣＰＵ２８はまず上記マイクロホン部ＭＣ，ＭＣから入力した音声に基づく、圧縮した音声データファイルを通話相手の装置に向けて無線通信部２２より送信する（ステップＳ３０２）。

【0060】

ここでＣＰＵ２８は、上記ＣＭＯＳイメージセンサ３５で撮影し、撮影画像処理部３２により画像メモリ３３に一時的に保持させた画像データに対し、顔認識処理を行なう設定が事前になされているか否かを判断する（ステップＳ３０３）。

【0061】

顔認識処理が事前に設定されていると判断した場合、ＣＰＵ２８は画像メモリ３３で保持している画像データ中から顔認識処理を実行し、人物の顔に相当する範囲の大きさと位置とを示す情報を取得する（ステップＳ３０４）。

【0062】

次いでこの取得した顔の大きさと位置とを基準として、通話相手の装置から得た形状情報と相似形となるように画像の切り出し処理を実行する（ステップＳ３０５）。

【0063】

さらにＣＰＵ２８は、切出した画像データを、通話相手の装置から得た形状情報及び画像サイズに合致するように倍率を算出し、その算出した倍率に基づいた画像データの拡大／縮小処理を施すことで、通話相手の装置が要求している画像データを作成する（ステップＳ３０６）。

【0064】

一方、上記ステップＳ３０３で顔認識処理が事前に設定されていていないと判断した場合、ＣＰＵ２８は、通話相手の装置から得た形状情報及び画像サイズに合致するべく、画像データの中心位置が切り出し後の中心となるように画像の切り出し処理を実行する（ステップＳ３０７）。

【0065】

その後、上記ステップＳ３０６またはＳ３０７での処理の後に、ＣＰＵ２８は切り出し後の画像データを圧縮した画像データファイル化して通話相手の装置に向けて無線通信部２２より送信し（ステップＳ３０８）、以上で図７の一連の通話処理を一旦終了するとともに、図５または図６のメインルーチンに復帰する。

【0066】

なお上記ステップＳ３０４での顔認識処理後、例えば被写体の人物が首をかしげるなど、顔部分が画像中で傾いているか否かを判断し、傾いていると判断した場合には、その傾いていると判断した角度分だけ当該顔部分の画像を傾きとは反対方向に回転処理することで、傾いた顔の画像を補正するようにしてもよく、またそのような補正処理をユーザが任意にモード設定できるようにしても良い。
このような傾き補正処理を合わせて実行することで、常に正しい姿勢での画像が通話相手の装置に対して送信されることになるので、通話中の姿勢が何らかの理由により一時的に乱れたとしても、通話相手に無用の心配をかけることなく、通話を続行することができる。

【0067】

以上詳述した如く本実施形態によれば、投影対象となる部材形状に合った画像を送受してテレビ電話機能の通話を実現することが可能になると同時に、特に不定型な形状をしている対象に対して画像を投影する場合の送受データ量を大幅に削減しながら、確実な防眩効果を奏することができる。

【0068】

また上記実施形態では、特に撮影した画像から顔認識処理により被写体となる人物、すなわち通話を行なうユーザ本人の顔位置を正確に判断することができるため、テレビ電話機能での通話時に通話を行なう者どうしが確実に相手の表情等を把握しながら通話を続行できる。

【0069】

その場合、顔認識処理での結果に基づき、相手側が要求している形状に合わせて顔の大きさを拡大または縮小する調整を施した後に送信を行なうことで、通話相手側では適切な大きさの顔画像が出力されることになり、テレビ電話機能での通話をより快適に続行させることができる。

【0070】

なお上記実施形態では示さなかったが、顔認識処理に加えて、被写体となる人物の上半身の位置及び大きさを認識することにより、通話相手先の装置での出力形状に合わせて、より適切な撮影画像を加工して送信させることも可能となる。

【0071】

また上記実施形態は、ＤＬＰ（登録商標）方式の投影を行なうデジタルサイネージ装置を利和したテレビ電話装置に適用した場合について説明したが、投影の方式等を限定するものではない。

【0072】

また上記実施形態は、通話相手の装置から形状の情報を取得した場合、送信する画像を加工していたが、これに限らず、毎回通話相手の装置から形状の情報を取得し、その形状の情報が矩形であるか否かを判定し、矩形でなければ送信する画像を加工して送信するようにしてもよい。また、この時の形状の情報はアスペクト比を示す情報も含まれる。

【0073】

さらに、例えばスマートフォンのような通信端末において、矩形のディスプレイ画面に、通話相手が任意に選択した不定形の装飾フレーム、例えばハート型やクリスマスの時期であれば略円型のクリスマスリースの形状などに合わせて、送信側で画像の切り出し処理を行なうことで、適切なテレビ電話機能での通話を行なうことも考えられる。

【0074】

その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。

【0075】

以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
請求項１記載の発明は、通信先の装置から画像の出力形状を示す情報を取得する形状取得手段と、送信すべき画像のデータを取得する画像取得手段と、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工する画像加工手段と、上記画像加工手段で加工した画像のデータを上記通信先の装置に送信する送信手段とを備えることを特徴とする。

【0076】

請求項２記載の発明は、上記請求項１記載の発明において、上記形状取得手段で得た出力形状を示す情報が矩形か否かを判断する判断手段をさらに備え、上記画像加工手段は、上記判断手段で上記出力形状を示す情報が矩形でないと判断した場合、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工することを特徴とする。

【0077】

請求項３記載の発明は、上記請求項１または２記載の発明において、上記画像加工手段は、上記画像取得手段で得た画像中から顔認識技術により顔画像の範囲を認識し、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲を含むように画像のデータを加工することを特徴とする。

【0078】

請求項４記載の発明は、上記請求項３記載の発明において、上記画像加工手段は、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲の大きさを調整することを特徴とする。

【0079】

請求項５記載の発明は、上記請求項３または４記載の発明において、上記画像加工手段は、上記形状取得手段で得た出力形状を示す情報に基づき、顔画像の範囲の傾きを調整することを特徴とする。

【0080】

請求項６記載の発明は、上記請求項１乃至５いずれか記載の発明において、上記通信先の装置は投影装置であり、上記出力形状を示す情報は、上記投影装置のパネル形状を示す情報であり、上記画像加工手段は、上記パネル形状を示す情報に基づいて、上記画像取得手段で得た画像のデータを加工することを特徴とする。

【0081】

請求項７記載の発明は、通信先の装置の宛先を指定する指定手段と、上記指定手段で通信先の装置の宛先を指定した場合、上記通信先の装置へ自装置の出力手段が出力する出力形状を示す情報を送信する送信手段とを備えたことを特徴とする。

【0082】

請求項８記載の発明は、通信先の装置から画像の出力形状を示す情報を取得する形状取得工程と、送信すべき画像のデータを取得する画像取得工程と、上記形状取得工程で得た出力形状を示す情報に基づき、上記画像取得工程で得た画像のデータを加工する画像加工工程と、上記画像加工工程で加工した画像のデータを上記通信先の装置に送信する送信工程とを有したことを特徴とする。

【0083】

請求項９記載の発明は、通信先の装置の宛先を指定する指定工程と、上記指定工程で通信先の装置の宛先を指定した場合、上記通信先の装置へ自装置の出力部が出力する出力形状を示す情報を送信する送信工程とを備えたことを特徴とする。

【0084】

請求項１０記載の発明は、通信先の装置と画像のデータを送受する装置が内蔵するコンピュータが実行するプログラムであって、上記コンピュータを、上記通信先の装置から画像の出力形状を示す情報を取得する形状取得手段、送信すべき画像のデータを取得する画像取得手段、上記形状取得手段で得た出力形状を示す情報に基づき、上記画像取得手段で得た画像のデータを加工する画像加工手段、及び上記画像加工手段で加工した画像のデータを上記通信先の装置に送信する送信手段として機能させることを特徴とする。

【0085】

請求項１１記載の発明は、通信先の装置と画像のデータを送受する装置が内蔵するコンピュータが実行するプログラムであって、上記コンピュータを、通信先の装置の宛先を指定する指定手段、及び上記指定手段で通信先の装置の宛先を指定した場合、上記通信先の装置へ自装置の出力部が出力する出力形状を示す情報を送信する送信手段として機能させることを特徴とする。

【符号の説明】

【0086】

１０…テレビ電話装置、１０Ａ…装置筐体、１１…投影レンズ部、１２…フレネルレンズシート、１３…リヤプロジェクトスクリーン、１４…透明ボード、２１…アンテナ、２２…無線通信部、２３…投影画像駆動部、２４…マイクロミラー素子、２５…光源部、２６…ミラー、２７…音声処理部、２８…ＣＰＵ、２９…メインメモリ、３０…プログラムメモリ、３１…操作部、３２…撮影画像処理部、３３…画像メモリ、３４…撮影レンズ部、３５…ＣＭＯＳイメージセンサ、３６…Ａ／Ｄ変換回路、Ｂ…バス、ＩＭ…撮影部、ＭＣ…マイクロホン部、ＭＲ…ミラー、ＰＡ…投影可能領域、ＳＡ…スクリーン投影領域、ＳＢ…サイネージボード、ＳＰ…スピーカ部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】