特許 7418110 通信装置、その制御方法、およびそのプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-11

(45)【発行日】2024-01-19

(54)【発明の名称】通信装置、その制御方法、およびそのプログラム

(51)【国際特許分類】

   H04N 25/10 20230101AFI20240112BHJP

   H04N 23/60 20230101ALI20240112BHJP

   H04L 67/06 20220101ALI20240112BHJP

   G06T 3/4015 20240101ALI20240112BHJP

【ＦＩ】

H04N25/10

H04N23/60

H04L67/06

G06T3/40 705

【請求項の数】 8

(21)【出願番号】P 2019199105

(22)【出願日】2019-10-31

(65)【公開番号】P2021072571

(43)【公開日】2021-05-06

【審査請求日】2022-10-19

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100126240

【弁理士】

【氏名又は名称】阿部 琢磨

(74)【代理人】

【識別番号】100223941

【弁理士】

【氏名又は名称】高橋 佳子

(74)【代理人】

【識別番号】100159695

【弁理士】

【氏名又は名称】中辻 七朗

(74)【代理人】

【識別番号】100172476

【弁理士】

【氏名又は名称】冨田 一史

(74)【代理人】

【識別番号】100126974

【弁理士】

【氏名又は名称】大朋 靖尚

(72)【発明者】

【氏名】米田 直人

(72)【発明者】

【氏名】橘内 健浩

【審査官】三沢 岳志

(56)【参考文献】

【文献】特開２００９－０４４２５６（ＪＰ，Ａ）

【文献】特開２００９－０８１７０９（ＪＰ，Ａ）

【文献】特開２０１７－１６２０８７（ＪＰ，Ａ）

【文献】特開２００８－２１９５２２（ＪＰ，Ａ）

【文献】特開２０１０－０８１０２５（ＪＰ，Ａ）

【文献】特開２００７－１４２５５１（ＪＰ，Ａ）

【文献】特開２０１４－１５８１０２（ＪＰ，Ａ）

【文献】特開２０１５－１７１０４２（ＪＰ，Ａ）

【文献】特開２０１６－００５０８６（ＪＰ，Ａ）

【文献】特開２０１６－１８４９２１（ＪＰ，Ａ）

【文献】特開２０１６－１２７５６４（ＪＰ，Ａ）

【文献】特開２０１９－０３６７８９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２５／１０

Ｈ０４Ｎ ２３／６０

Ｈ０４Ｌ ６７／０６

Ｇ０６Ｔ ３／４０

(57)【特許請求の範囲】

【請求項1】

他の通信装置と通信する通信手段と、
画像処理手段と、
制御手段と、を有し、
前記制御手段は、ＲＡＷ画像データから第一の画像データを前記画像処理手段によって生成する機能、および前記第一の画像データから第二の画像データを前記画像処理手段によって生成する機能を制御し、
前記制御手段は、ＲＡＷ画像データから生成した前記第一の画像データから前記第二の画像データを前記画像処理手段によって生成することによってＲＡＷ画像データを現像し、
前記制御手段は、ＲＡＷ画像データを前記他の通信装置から前記通信手段を介して受信し、
前記制御手段は、前記他の通信装置から受信したＲＡＷ画像データから前記第一の画像データを前記画像処理手段によって生成し、
前記制御手段は、前記他の通信装置の画像処理性能が所定の性能以上と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データを前記通信手段を介して前記他の通信装置へ送信し、
前記制御手段は、前記他の通信装置の画像処理性能が前記所定の性能未満と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データから前記第二の画像データを前記画像処理手段によって生成し、生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信し、
前記制御手段は、前記第二の画像データを前記他の通信装置へ送信する場合、前記他の通信装置から前記第二の画像データを生成する際に利用するパラメータを前記通信手段を介して受信したことに応じて、前記パラメータを用いて再度前記第二の画像データを前記画像処理手段によって生成し、再度生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信する
ことを特徴とする通信装置。

【請求項2】

前記制御手段は、前記他の通信装置との接続を確立したことに応じて、前記他の通信装置の画像処理性能を前記通信手段を介して受信する
ことを特徴とする請求項１に記載の通信装置。

【請求項3】

前記他の通信装置から受信したＲＡＷ画像データを現像する場合、前記他の通信装置の画像処理性能に基づいて、前記他の通信装置の画像処理性能が前記所定の性能以上か所定の性能未満かを判断する
ことを特徴とする請求項２に記載の通信装置。

【請求項4】

前記制御手段は、処理状況が負荷の大きい状態と判断した場合、前記他の通信装置の画像処理性能にかかわらず、前記他の通信装置から受信したＲＡＷ画像データから前記第一の画像データを前記画像処理手段によって生成し、生成した前記第一の画像データを前記通信手段を介して前記他の通信装置へ送信する
ことを特徴とする請求項１から３のいずれか１項に記載の通信装置。

【請求項5】

前記制御手段は、前記第一の画像データを前記他の通信装置へ送信した場合、前記第一の画像データを削除することを特徴とする請求項１から４のいずれか１項に記載の通信装置。

【請求項6】

前記制御手段は、前記第二の画像データを前記他の通信装置へ送信した場合、前記第一の画像データおよび前記第二の画像データを削除することを特徴とする請求項１から５のいずれか１項に記載の通信装置。

【請求項7】

他の通信装置と通信する通信手段と、
画像処理手段と、
を有する通信装置の制御方法であって、
ＲＡＷ画像データから第一の画像データを前記画像処理手段によって生成する第一の画像処理ステップと、
前記第一の画像データから第二の画像データを前記画像処理手段によって生成する第二の画像処理ステップと、
前記第一の画像処理ステップおよび前記第二の画像処理ステップの処理を実行することによってＲＡＷ画像データを現像するステップと、
ＲＡＷ画像データを前記他の通信装置から前記通信手段を介して受信するステップと、
前記他の通信装置から受信したＲＡＷ画像データから前記第一の画像データを前記画像処理手段によって生成するステップと、
前記他の通信装置の画像処理性能が所定の性能以上と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データを前記通信手段を介して前記他の通信装置へ送信するステップと、
前記他の通信装置の画像処理性能が所定の性能未満と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データから生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信するステップと、
前記第二の画像データを前記他の通信装置へ送信する場合、前記他の通信装置から前記第二の画像データを生成する際に利用するパラメータを前記通信手段を介して受信したことに応じて、前記パラメータを用いて再度前記第二の画像データを前記画像処理手段によって生成し、再度生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信するステップと、
を有することを特徴とする制御方法。

【請求項8】

コンピュータを請求項１から６のいずれか１項に記載の通信装置の各手段として機能させるための、コンピュータが読み取り可能なプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像データを現像する通信装置に関する。

【背景技術】

【0002】

デジタルカメラやスマートフォンなどの撮像装置は、ＣＣＤやＣＭＯＳ等の撮像素子から入力されたデータを、ＪＰＥＧやＴＩＦＦ等の画像フォーマットに基づいて圧縮し、メモリカード等に画像データとして記録する。前述の圧縮処理は一般的に非可逆符号化であるため、ユーザは後から画像データに対して大きく再調整することができない。

【0003】

しかし近年、スマートフォンやデジタルカメラなどの撮像装置は撮像素子から読み出した電気信号をそのままデジタル化し、画像データとして記録することができるようになってきている。このように記録した画像データをＲＡＷ画像データという。ユーザはこのＲＡＷ画像データをＰＣ等で現像することにより、撮像装置で現像するよりも意図通りの画像に仕上げることができる。特許文献１では、ＲＡＷ画像データの現像処理方法が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００５－２５１１６６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ＲＡＷ画像データの現像処理は計算量が多いため、一般的なＰＣやスマートフォン等はその現像処理を実行するには長い時間を必要とする。一方で、近年いわゆるクラウドサービスを利用することで、ユーザはクラウドにあるサーバを利用してＲＡＷ画像データを比較的に短い時間で現像することができる。しかしこの場合でも、現像処理に利用するパラメータの微調整等の計算量の少ない処理であってもクラウドにあるサーバが現像処理を実行するため、例えば高性能なＰＣを有するユーザにとっては効率の悪い側面が存在する。

【0006】

そこで本発明は、ＲＡＷ画像データの現像処理を効率的に行うことを目的とする。

【課題を解決するための手段】

【0007】

上記課題を解決するために、本発明の通信装置は他の通信装置と通信する通信手段と、画像処理手段制御手段と、を有し、前記制御手段は、ＲＡＷ画像データから第一の画像データを前記画像処理手段によって生成する機能、および前記第一の画像データから第二の画像データを前記画像処理手段によって生成する機能を制御し、前記制御手段は、ＲＡＷ画像データから生成した前記第一の画像データから前記第二の画像データを前記画像処理手段によって生成することによってＲＡＷ画像データを現像し、前記制御手段は、ＲＡＷ画像データを前記他の通信装置から前記通信手段を介して受信前記制御手段は、前記他の通信装置から受信したＲＡＷ画像データから前記第一の画像データを前記画像処理手段によって生成し、前記制御手段は、前記他の通信装置の画像処理性能が所定の性能以上と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データを前記通信手段を介して前記他の通信装置へ送信前記制御手段は、前記他の通信装置の画像処理性能が前記所定の性能未満と判断した場合、前記他の通信装置より受信したＲＡＷ画像データから生成した前記第一の画像データから前記第二の画像データを前記画像処理手段によって生成し、生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信し、前記制御手段は、前記第二の画像データを前記他の通信装置へ送信する場合、前記他の通信装置から前記第二の画像データを生成する際に利用するパラメータを前記通信手段を介して受信したことに応じて、前記パラメータを用いて再度前記第二の画像データを前記画像処理手段によって生成し、再度生成した前記第二の画像データを前記通信手段を介して前記他の通信装置へ送信することを特徴とする。

【発明の効果】

【0008】

本発明によれば、ユーザはＲＡＷ画像データの現像処理を効率的に行うことができる。

【図面の簡単な説明】

【0009】

【図1】第一の実施形態におけるシステム構成の一例を示す図である。

【図2】第一の実施形態におけるＰＣの構成の一例を示すブロック図である。

【図3】第一の実施形態におけるスマートフォンの構成の一例を示すブロック図である。

【図4】第一の実施形態におけるサーバの構成の一例を示すブロック図である。

【図5】第一の実施形態におけるＲＡＷ画像データを現像する処理の一例を示すフローチャートである。

【図6】（Ａ）第一の実施形態におけるＰＣの中間画像データの彩度を調整する画面の一例である。（Ｂ）第一の実施形態におけるＰＣの中間画像データの階調を調整する画面の一例である。

【図7】第一の実施形態におけるＲＡＷ現像処理の一例を示すフローチャートである。

【図8】第一の実施形態におけるＲＧＢ調整処理の一例を示すフローチャートである。

【図9】（Ａ）第一の実施形態におけるＰＣおよびサーバが接続する処理の一例を示すシーケンス図である。（Ｂ）第一の実施形態におけるスマートフォンおよびサーバが接続する処理の一例を示すシーケンス図である。

【図10】第一の実施形態におけるＰＣがサーバへＲＡＷ画像データをアップロードする手順の一例を示すシーケンス図である。

【図11】第一の実施形態におけるＰＣがサーバを利用してＲＡＷ画像データの現像処理を実行する手順の一例を示すシーケンス図である。

【図12】第一の実施形態におけるスマートフォンがサーバを利用してＲＡＷ画像データの現像処理を実行する手順の一例を示すシーケンス図である。

【図13】第一の実施形態におけるＰＣの動作の一例を示すフローチャートである。

【図14】第一の実施形態におけるサーバの動作の一例を示すフローチャートである。

【図15】第二の実施形態におけるＰＣの動作の一例を示すフローチャートである。

【発明を実施するための形態】

【0010】

以下、本発明の実施形態について、添付の図面を用いて詳細に説明する。

【0011】

なお、以下に説明する実施形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されてもよい。また、各実施形態を適宜組み合せることも可能である。

【0012】

＜第一の実施形態＞
＜システム構成図＞
図１は本実施形態におけるシステム構成の一例を示す図である。ＰＣ１００およびスマートフォン２００はサーバ３００とデータ通信する。各装置の構成については後述する。このデータ通信では特に、画像データおよび動画データ等のデジタルカメラ等によって撮像されたデータが送受信される。例えばＰＣ１００およびスマートフォン２００はそれぞれ画像データや動画データをサーバ３００へ送信する。サーバ３００はＰＣ１００およびスマートフォン２００から受信した画像データや動画データを現像する。またサーバ３００はその現像した画像データや動画データを、それぞれの装置へ返送する。このようにＰＣ１００およびスマートフォン２００はサーバ３００を利用して画像データや動画データを現像することができる。

【0013】

＜ＰＣ１００の構成＞
図２は本実施形態の通信装置の一例であるＰＣ１００の構成の一例を示すブロック図である。本実施形態では特に、パソコンのように据え置いて使う通信装置を例に説明する。

【0014】

制御部１０１は、入力された信号や、後述のプログラムに従ってＰＣ１００の各部を制御する。なお、制御部１０１が装置全体を制御する代わりに、複数のハードウェアが処理を分担することで、装置全体を制御してもよい。

【0015】

不揮発性メモリ１０３は、電気的に消去・記録可能な不揮発性のメモリである。不揮発性メモリ１０３には、制御部１０１が実行する基本的なソフトウェアであるＯＳ（オペレーティングシステム）や、このＯＳと協働して応用的な機能を実現するアプリケーションが記録されている。不揮発性メモリ１０３は例えばＨＤＤ，ＳＳＤ等である。また、本実施形態では、不揮発性メモリ１０３には、ＲＡＷ画像データ等の画像データを画像処理可能なアプリケーション（以降、画像処理アプリという）が格納されている。ＲＡＷ画像データについては後述する。

【0016】

作業用メモリ１０４は、揮発性メモリである。作業用メモリ１０４は、制御部１０１のワーク領域、エラー処理時のデータの退避領域等として使用される。

【0017】

操作部１０５は、ＰＣ１００に対する指示をユーザから受け付けるために用いられる。操作部１０５は例えば、ユーザがＰＣ１００の電源のオン／オフを指示するための電源ボタンや、キーボードやマウス等の入力装置等を含む。また、後述する表示部１０６に形成されるタッチパネルも操作部１０５に含まれる。なお、操作部１０５は必ずしもＰＣ１００が内蔵する必要はない。ＰＣ１００は内部または外部の操作部１０５と接続することができる。

【0018】

表示部１０６は、対話的な操作のための文字や画像表示などを行う。表示部１０６は例えば、液晶ディスプレイや有機ＥＬディスプレイ等である。また、画像処理アプリのＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）も表示部１０６に表示される。なお、表示部１０６は必ずしもＰＣ１００が内蔵する必要はない。ＰＣ１００は内部または外部の表示部１０６と接続することができ、表示部１０６による表示を制御する機能を少なくとも有していればよい。

【0019】

ＧＰＵ１０８は、画像処理に特化した画像処理部である。ＧＰＵはＧｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略語である。制御部１０１はＧＰＵ１０８を利用することで、表示部１０６に画像データを表示することおよび画像データの現像処理等の画像処理を実行できる。

【0020】

外部記録装置１１０は、外部記録媒体に対して読み出しおよび書き込みを行う装置である。プログラムや画像データが外部記録媒体に記録されている場合、これらは外部記録装置１１０を介して作業用メモリ１０４に読み込まれる。外部記録媒体は、例えば、ＤＶＤ－ＲＷ、ＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ－ＲＡＭなどの光ディスクや、フレキシブルディスク、ＭＯなどの磁気ディスク、着脱可能なフラッシュメモリ等のＰＣ１００に着脱可能な不揮発性メモリである。

【0021】

接続部１１１は、外部装置と接続するためのインターフェースである。本実施形態のＰＣ１００は、接続部１１１を介して、外部装置とデータを送受信することができる。また、ＰＣ１００は接続部１１１を介してデジタルカメラ等の撮像装置とも接続し、データの送受信ができる。この接続部１１１による通信は有線通信および無線通信のどちらでもよい。

【0022】

以上、ＰＣ１００の構成例について説明した。

【0023】

＜スマートフォン２００の構成＞
図３は、本実施形態における通信装置の一例であるスマートフォン２００の構成例を示すブロック図である。本実施形態では特に、スマートフォンのようにユーザが携帯できる通信装置を例に説明する。またこのような携帯できる通信装置としては他にもタブレットデバイス、およびデジタルカメラ等がある。

【0024】

制御部２０１は、入力された信号や、後述のプログラムに従ってスマートフォン２００の各部を制御する。なお、制御部２０１が装置全体を制御する代わりに、複数のハードウェアが処理を分担することで、装置全体を制御してもよい。

【0025】

撮像部２０２は、例えば、光学レンズユニットと絞り・ズーム・フォーカスなど制御する光学系と、光学レンズユニットを経て導入された光（映像）を電気的な映像信号に変換するための撮像素子などで構成される。撮像素子は、例えば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）および、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）である。撮像部２０２は、制御部２０１に制御されることにより、撮像部２０２に含まれるレンズで結像された被写体光を、撮像素子により電気信号に変換し、ノイズ低減処理などを行いデジタルデータを画像データとして出力する。本実施形態では、当該画像データを撮像し出力するための一連の処理を「撮影」という。また、撮像部２０２は連続して撮影した画像データを１つのデータとして記録することで動画データを生成できる。本実施形態のスマートフォン２００では、画像データおよび動画データは、ＤＣＦ（Ｄｅｓｉｇｎ Ｒｕｌｅ ｆｏｒ Ｃａｍｅｒａ Ｆｉｌｅ ｓｙｓｔｅｍ）の規格に従って、記録媒体２１０に記録される。また、撮像部２０２は撮像素子から出力された電気信号に対して、画像処理を加えずに記録媒体に２１０に記録することもできる。このように撮像素子から読み出した電気信号をそのままデジタル化し記録することで得られる記録形式の画像をＲＡＷ画像データという。同様にこのような記録形式の動画をＲＡＷ動画という。なお、ＲＡＷ画像データは、撮像素子から読み出した電気信号をそのままデジタル化し保存した画像であるため、そのままでは画像として見たり、画像補正等を施したりすることができない。

【0026】

不揮発性メモリ２０３は、電気的に消去・記録可能な不揮発性のメモリであり、制御部２０１で実行される後述のプログラム等が格納される。また、本実施形態では、不揮発性メモリ２０３には、画像処理アプリが格納されている。

【0027】

作業用メモリ２０４は、撮像部２０２で撮影された画像データおよび動画データを一時的に保持するバッファメモリや、表示部２０６の画像表示用メモリ、制御部２０１の作業領域等として使用される。

【0028】

操作部２０５は、ユーザがスマートフォン２００に対する指示をユーザから受け付けるために用いられる。操作部２０５は例えば、ユーザがスマートフォン２００の電源のオン／オフを指示するための電源ボタンや、撮影を指示するためのレリーズスイッチ、画像データの再生を指示するための再生ボタンを含む。さらに、後述の接続部２１１を介して外部機器との通信を開始するための専用の接続ボタンなどの操作部材を含む。また、後述する表示部２０６に形成されるタッチパネルも操作部２０５に含まれる。

【0029】

表示部２０６は、撮影の際のビューファインダ画像の表示、撮影した画像データの表示、対話的な操作のための文字表示などを行う。また、画像処理アプリのＧＵＩも表示部１０６に表示される。なお、表示部２０６は必ずしもスマートフォン２００が内蔵する必要はない。スマートフォン２００は内部または外部の表示部２０６と接続することができ、表示部２０６の表示を制御する表示制御機能を少なくとも有していればよい。また、制御部２０１は、作業用メモリ２０４に蓄積された画像データまたは動画データを表示部２０６に逐次転送して表示することで、表示部２０６は電子ビューファインダとして機能する。これによってスマートフォン２００はスルー画像表示（ライブビュー表示）を実行することができる。

【0030】

マイク２０７は、音や音声等の音波をスマートフォン２００に入力するために用いられる。マイク２０７は音や音声を電気信号に変換してスマートフォン２００に入力する。制御部２０１は入力された電気信号から音声データを生成する。制御部２０１はこの音声データと撮像部２０２が撮影した映像データとを同期させて記録することで動画データを記録できる。なお、マイク２０７はスマートフォン２００に着脱可能なよう構成してもよいし、スマートフォン２００に内蔵されていてもよい。すなわち、スマートフォン２００は少なくともマイク２０７から電気信号を受け取るための手段を有していればよい。

【0031】

ＧＰＵ２０８は、画像処理に特化した画像処理部である。制御部２０１はＧＰＵ２０８を利用することで、表示部２０６に画像データを表示することおよび現像処理等の画像処理を実行できる。なお、本実施形態においてＧＰＵ２０８はＧＰＵ１０８よりも処理性能は低いとする。

【0032】

記録媒体２１０は、撮像部２０２から出力された画像データおよび動画データを記録することができる。記録媒体２１０は例えばＳＤカード、およびＳｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ（ＳＳＤ）等である。記録媒体２１０は、スマートフォン２００に着脱可能なよう構成してもよいし、スマートフォン２００に内蔵されていてもよい。すなわち、スマートフォン２００は少なくとも記録媒体２１０にアクセスする手段を有していればよい。

【0033】

接続部２１１は、外部装置と通信するためのインターフェースである。制御部２０１は、接続部２１１を制御することで外部装置との通信を実現する。本実施形態のスマートフォン２００は、接続部１１１を介して、サーバ３００とデータのやりとりを行うことができる。例えば、スマートフォン２００は撮像部２０２で生成した画像データを、接続部２１１を介してサーバ３００に送信することができる。なお、本実施形態では、接続部２１１はＩＥＥＥ８０２．１１の規格に従った、いわゆる無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）で通信するためのインターフェースを含む。なお、通信方式は無線ＬＡＮに限定されるものではなく、例えば４ＧやＬＴＥなどの公衆無線通信方式や、Ｅｔｈｅｒｎｅｔ等の規格に従った有線通信方式を含む。

【0034】

以上、スマートフォン２００の構成例について説明した。

【0035】

＜サーバ３００の構成＞
図４は本実施形態の通信装置の一例であるサーバ３００の構成の一例を示すブロック図である。

【0036】

制御部３０１は、入力された信号や、後述のプログラムに従ってサーバ３００の各部を制御する。なお、制御部３０１が装置全体を制御する代わりに、複数のハードウェアが処理を分担することで、装置全体を制御してもよい。

【0037】

不揮発性メモリ３０３は、電気的に消去・記録可能な不揮発性のメモリである。不揮発性メモリ３０３には、制御部３０１が実行する基本的なソフトウェアであるＯＳ（オペレーティングシステム）や、このＯＳと協働して応用的な機能を実現するアプリケーションが記録されている。また、本実施形態では、不揮発性メモリ３０３には、画像処理アプリが格納されている。不揮発性メモリ３０３は例えばＨＤＤ，ＳＳＤ，ＲＯＭ，フラッシュメモリ、および光ディスク等である。

【0038】

作業用メモリ３０４は、揮発性メモリである。作業用メモリ３０４は、制御部３０１のワーク領域、エラー処理時のデータの退避領域等として使用される。

【0039】

操作部３０５は、サーバ３００に対する指示をユーザから受け付けるために用いられる。操作部３０５は例えば、ユーザがサーバ３００の電源のオン／オフを指示するための電源ボタンや、キーボードやマウス等の入力装置等を含む。なお、操作部３０５は必ずしもサーバ３００が内蔵する必要はない。サーバ３００は内部または外部の操作部３０５と接続することができる。

【0040】

ＧＰＵ３０８は、画像処理に特化した画像処理部である。制御部３０１はＧＰＵ３０８を利用することで、表示部３０６に画像表示することや計算処理を実行できる。本実施形態ではＧＰＵ３０８はＧＰＵ１０８およびＧＰＵ２０８よりも処理性能が高い。

【0041】

外部記録装置３１０は、外部記録媒体に対して読み出しおよび書き込みを行う装置である。プログラムや画像データが外部記録媒体に記録されている場合、これらは外部記録装置３１０を介して作業用メモリ３０４に読み込まれる。外部記録媒体は、例えば、ＤＶＤ－ＲＷ、ＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ－ＲＡＭなどの光ディスクや、フレキシブルディスク、ＭＯなどの磁気ディスク、着脱可能なフラッシュメモリ等のサーバ３００に着脱可能な不揮発性メモリである。

【0042】

接続部３１１は、外部装置と接続するためのインターフェースである。本実施形態のサーバ３００は、接続部３１１を介して、外部装置とデータを送受信することができる。また、サーバ３００は接続部３１１を介してデジタルカメラ等の撮像装置とも接続し、データの送受信ができる。この接続部３１１による通信は有線通信および無線通信のどちらでもよい。

【0043】

以上、サーバ３００の構成例について説明した。

【0044】

なお、本実施形態ではＧＰＵ１０８、ＧＰＵ２０８、およびＧＰＵ３０８の性能は高いものから順番に並べると、ＧＰＵ３０８、ＧＰＵ１０８、ＧＰＵ２０８である。一般的にＰＣのような据え置きの装置はスマートフォンのような携帯可能な装置よりも画像処理の性能が高い部材を有するため、本実施形態では上記のように性能を定めている。

【0045】

＜現像処理＞
本実施形態におけるＲＡＷ画像データの現像処理について説明する。本実施形態では便宜上、ＲＡＷ画像データの現像処理をＲＡＷ現像処理およびＲＧＢ調整処理の２つの処理に区別する。図５はＰＣ１００がＲＡＷ画像データを現像する処理の一例を示すフローチャートである。本処理は、不揮発性メモリ１０３に記録されたプログラムを作業用メモリ１０４に展開して制御部１０１が実行することで実現する。本フローチャートの処理は、制御部１０１が画像処理アプリによってＲＡＷ画像データを読み込んだことをトリガに開始される。

【0046】

ステップＳ５０１において、制御部１０１はＧＰＵ１０８によってＲＡＷ画像データを現像する現像処理のうちのＲＡＷ現像処理を実行する。本実施形態では制御部１０１はＲＡＷ画像データに含まれる属性情報に基づいてＲＡＷ現像する。属性情報は、ＲＡＷ画像データの撮影時に決定される撮像条件である。属性情報は例えばビット深度、露出時間、シャッター速度、絞り値、輝度値、露光補正値、レンズ最小Ｆ値、被写体距離、測光方式、光源、フラッシュの有無、レンズ焦点距離、Ｆナンバー、ＩＳＯスピードレート、フラッシュ強度などである。このＲＡＷ現像処理によって、ＲＡＷ画像データから中間画像データが生成される。中間画像データは現像処理が一部実行された画像データであり、ＲＡＷ画像データおよび後述の汎用画像データとは異なるファイル形式のデータである。このＲＡＷ現像処理については後述する。

【0047】

ステップＳ５０２において、制御部１０１はステップＳ５０１において生成された中間画像データを表示部１０６に表示する。

【0048】

ステップＳ５０３において、制御部１０１はステップＳ５０４において実行するＲＧＢ調整処理に利用するパラメータの調整操作をユーザから操作部１０５を介して受け付ける。本実施形態では、ユーザは画像処理アプリのＧＵＩを介してＲＧＢ調整処理に利用するパラメータを調整する。例えば図６（Ａ），（Ｂ）はそれぞれ画像処理アプリにおける彩度調整用の画面および階調調整用の画面の一例である。例えば図６（Ａ）において、ユーザは操作部１０５を介して表示部１０６に表示されたスライダ６０２をカーソル６０１を用いて操作し、中間画像データの彩度を調整する。また例えば図６（Ｂ）に示すように、ユーザは操作部１０５を介して表示部１０６に表示されたトーンカーブ６０３をカーソル６０１を用いて操作し、中間画像データの階調を調整する。他にも本ステップにおいてユーザは例えばホワイトバランス、色相、コントラスト、明るさ、鮮鋭度、およびリサイズ等のパラメータ調整ができる。ユーザは画像処理アプリのメニュー等を操作し、それぞれのパラメータを調整する画面を選択的に切り替えることができる。このようにユーザは画像処理アプリを用いてＲＧＢ調整処理に利用するパラメータを調整する。そして例えば１つのパラメータの調整が完了したと制御部１０１が判断した場合、処理はステップＳ５０４に進む。

【0049】

ステップＳ５０４において、制御部１０１はＧＰＵ１０８によってステップＳ５０１において生成された中間画像データに、ＲＡＷ画像データの現像処理のうちのＲＧＢ調整処理を実行する。このＲＧＢ調整処理によって中間画像データから汎用画像データが生成される。この汎用画像データは例えばＪＰＥＧ、ＰＮＧ、ＨＥＶＣ、およびＴＩＦＦ等の画像フォーマットに基づいて圧縮された画像データである。ＲＧＢ調整処理については後述する。

【0050】

ステップＳ５０５において、制御部１０１はステップＳ５０４において生成された汎用画像データを表示部１０６に表示する。

【0051】

ステップＳ５０６において、制御部１０１はＲＧＢ調整処理をやり直すか否かを判断する。例えばユーザが操作部１０５によって再度ＲＧＢ調整するよう操作した場合、制御部１０１はＲＧＢ調整をやり直すと判断し、処理はステップＳ５０１に戻る。例えばユーザが操作部１０５によってＲＧＢ調整を終了するよう操作した場合、制御部１０１はＲＧＢ調整が完了したと判断し、処理はステップＳ５０７に進む。

【0052】

ステップＳ５０７において、制御部１０１はステップＳ５０４において生成された汎用画像データを不揮発性メモリ１０３に記録する。

【0053】

以上、本実施形態における現像処理の一例について説明した。なお、スマートフォン２００もこの現像処理を実行できる。また、サーバ３００はＰＣ１００およびスマートフォン２００と同様のパラメータを用いて、ＲＡＷ画像データの現像処理としてＲＡＷ現像処理およびＲＧＢ調整処理を実行できる。なおサーバ３００はＲＡＷ画像データの現像処理に必要なパラメータを適宜ＰＣ１００やスマートフォン２００から受信する。

【0054】

本実施形態のＲＡＷ画像データの現像処理におけるＲＡＷ現像処理は、画像データの補正処理やノイズ低減処理などのユーザの指示したパラメータによらない画像処理である。そのためＲＡＷ現像処理によって生成される中間画像データは、同じＲＡＷ画像データに通常何度実行しても同様のデータとなる。したがって本実施形態においてはＲＡＷ現像処理を、サーバ３００がＲＡＷ画像データに対して一度だけ実施する。一方、本実施形態のＲＡＷ画像データの現像処理におけるＲＧＢ調整処理は、汎用画像データの見た目がユーザの目的や嗜好に合わせた画像データになるように、ユーザの指示したパラメータに基づいて実行される画像処理である。そのため、ユーザは中間画像データが目的や嗜好に合わせた汎用画像データに仕上がるまでこのＲＧＢ調整処理を繰り返すことがある。そこで、本実施形態においてはＲＧＢ調整処理を、ＰＣ１００およびスマートフォン２００が実行する場合と、サーバ３００が実行する場合とに分ける。この具体的な処理については後述する。これにより、ＰＣ１００およびスマートフォン２００は後述のＲＡＷ画像データの現像処理を効率的に実行できる。

【0055】

なお、ステップＳ５０３において、処理が次のステップに進む判断の条件は、制御部１０１が１つのパラメータの調整が完了したと判断した場合以外でもよい。例えば制御部１０１が表示部１０６にＲＧＢ調整処理を開始するためのボタンを表示する場合、制御部１０１が操作部１０５を介してユーザからＲＧＢ調整処理を開始するよう指示を受け付けることを条件にしてもよい。

【0056】

なお、ステップＳ５０７において、制御部１０１は汎用画像データを不揮発性メモリ１０３に記録したが、制御部１０１は汎用画像データを外部記録装置１１０を介して外部記録媒体に記録してもよい。

【0057】

なお、ステップＳ５０１の説明において、中間画像データはＲＡＷ画像データとはファイル形式が異なるデータと記載したが、中間画像データはＲＡＷ画像データと同じファイル形式であってもよい。

【0058】

＜ＲＡＷ現像処理＞
図７は本実施形態におけるＲＡＷ現像処理の一例を示すフローチャートである。本フローチャートの処理は、図５のステップＳ５０１の処理に相当する。なお、本実施形態では制御部１０１はＲＡＷ画像データに含まれる属性情報に基づいてＲＡＷ画像データを補正する。

【0059】

ステップＳ７０１において、制御部１０１はＲＡＷ画像データの収差や撮像部１０２の撮像素子に起因する傷データに対する補正等である。

【0060】

ステップＳ７０２において、制御部１０１はＲＡＷ画像データの黒レベルを調整する。

【0061】

ステップＳ７０３において、制御部１０１はＲＡＷ画像データのホワイトバランスを調整する。ここで、本実施形態では制御部１０１はＲＡＷ画像データに対してオートホワイトバランス機能によってホワイトバランスを調整する。これにより、後のＲＧＢ調整処理においてもホワイトバランスを調整できるようになる。

【0062】

ステップＳ７０４において、制御部１０１はＲＡＷ画像データにおける撮像部１０２の撮像素子に起因するノイズを低減する。

【0063】

ステップＳ７０５において、制御部１０１はＲＡＷ画像データに画素補間処理を実行する。

【0064】

ステップＳ７０６において、制御部１０１はステップＳ７０１～ステップＳ７０５において処理されたＲＡＷ画像データを中間画像データとして作業用メモリ１０４に記録する。

【0065】

以上、本実施形態におけるＲＡＷ現像処理について説明した。なお、スマートフォン２００およびサーバ３００もこのＲＡＷ現像処理を実行できる。

【0066】

＜ＲＧＢ調整処理＞
図８は本実施形態に係るＲＧＢ調整処理の一例を示すフローチャートである。本フローチャートの処理は、図５のステップＳ５０４の処理に相当する。ここで、制御部１０１は、図５のステップＳ５０３においてユーザから入力されたパラメータに基づいて中間画像データを調整する。

【0067】

ステップＳ８０１において、制御部１０１は、中間画像データのホワイトバランスを調整する。

【0068】

ステップＳ８０２において、制御部１０１は中間画像データにガンマ調整する。ステップＳ８０３において、制御部１０１は中間画像データに色調整する。ステップＳ８０４において、制御部１０１は中間画像データに明るさ調整する。

【0069】

ステップＳ８０５において、制御部１０１は中間画像データの色空間を変換する。

【0070】

ステップＳ８０６において、制御部１０１は中間画像データから汎用画像データを生成する。例えば制御部１０１はＪＰＥＧ、ＰＮＧ、ＨＥＶＣ、およびＴＩＦＦ等の画像フォーマットに基づいて中間画像データを圧縮し、汎用画像データを生成する。

【0071】

ステップＳ８０７において、制御部１０１は汎用画像データを不揮発性メモリ１０３に記録する。

【0072】

以上、本実施形態におけるＲＧＢ調整処理について説明した。なお、スマートフォン２００およびサーバ３００もこのＲＧＢ調整処理を実行できる。

【0073】

なお、本実施形態のＲＧＢ調整処理ではホワイトバランス調整、ガンマ調整、色調整、明るさ調整等の画像処理を一例に用いて説明した。他にもＲＧＢ調整処理では、制御部１０１は色相、コントラスト、鮮鋭度、および画像サイズなどの調整処理を図５のステップＳ５０３においてユーザによって入力されたパラメータに基づいて実行してもよい。

【0074】

ここで、本実施形態におけるＲＡＷ現像処理の収差補正およびノイズ補正の処理は、ＲＧＢ調整処理における画像処理よりも計算量が多い。なぜならＲＧＢ調整処理における画像処理は１画素自身のデータを利用して１画素を調整する処理であることに対し、収差補正およびノイズ補正は例えば２次元の空間フィルタリングを用いて、複数の画素のデータを利用して１画素を調整する処理であるからである。

【0075】

また、ＲＡＷ現像処理は頻繁に実行する処理ではないが、ＲＧＢ調整処理はユーザによって頻繁に実行することがある画像処理である。そこで本実施形態のＰＣ１００は計算量の多いＲＡＷ現像処理はサーバ３００を利用して計算し、頻繁に実行しうるＲＧＢ調整処理はＧＰＵ１０８を利用して処理する。一方で、スマートフォン２００のように画像処理能力が低いデバイスは、ＲＡＷ現像処理より計算量の少ないＲＧＢ調整処理であっても、画像処理に時間がかかる。そのため、スマートフォン２００はＲＡＷ現像処理およびＲＧＢ調整処理の両方をサーバ３００を利用して計算する。これにより、ＰＣ１００およびスマートフォン２００は、それぞれの画像処理性能に応じてサーバ３００を利用することで、ＲＡＷ画像データの現像処理にかかる時間を低減できる。このようにデバイスの画像処理能力に応じてサーバ３００を利用することで、ユーザはＲＡＷ画像データの現像処理を効率的に実行することができる。以下、その具体的な処理の一例について説明する。

【0076】

＜サーバ３００との接続処理＞
図９（Ａ），（Ｂ）を用いてＰＣ１００およびスマートフォン２００がそれぞれサーバ３００と接続する処理について説明する。図９（Ａ）はＰＣ１００およびサーバ３００が接続する処理の一例を示すシーケンス図である。図９（Ｂ）はスマートフォン２００およびサーバ３００が接続する処理の一例を示すシーケンス図である。

【0077】

まず図９（Ａ）を用いてＰＣ１００およびサーバ３００が接続する処理について説明する。本シーケンスの処理はユーザがＰＣ１００にサーバ３００と接続させるようＰＣ１００を操作したことに応じて開始される。

【0078】

ステップＳ９０１において、ＰＣ１００はサーバ３００と接続を確立する。

【0079】

ステップＳ９０２において、ＰＣ１００は自身の性能情報をサーバ３００へ送信する。この性能情報は例えば、ＰＣ（据え置きの装置）であること、ＧＰＵ１０８のスペック、および現在の通信速度等である。

【0080】

ステップＳ９０３において、サーバ３００はＲＧＢ調整処理をＰＣ１００が実行するかサーバ３００が実行するかを判断する。ここでサーバ３００はステップＳ９０２において受信したＰＣ１００の性能情報に基づいて、ＲＧＢ調整処理を実行するデバイスを判断する。本実施形態ではサーバ３００はステップＳ９０２において受信した性能情報から、ＰＣ１００が据え置きの装置であること、ＧＰＵ１０８のスペックが所定の性能以上であること、およびＰＣ１００の通信速度が所定の閾値より速いこと等が判断できる。この所定の性能および所定の閾値はそれぞれサーバ３００の管理者が任意に決定する値である。本実施形態ではサーバ３００はＰＣ１００の性能が所定の性能以上であると判断し、ＰＣ１００がＲＧＢ調整処理を実行すると判断する。

【0081】

ステップＳ９０４において、サーバ３００はステップＳ９０３において判断したＲＧＢ調整処理を実行するデバイスについての通知を送信する。本実施形態ではサーバ３００はＰＣ１００がＲＧＢ調整処理を実行する旨の通知をＰＣ１００へ送信する。

【0082】

以上、ＰＣ１００およびサーバ３００が接続する処理について説明した。

【0083】

次に図９（Ｂ）を用いてスマートフォン２００およびサーバ３００が接続する処理について説明する。本シーケンスの処理はユーザがスマートフォン２００にサーバ３００と接続させるようスマートフォン２００を操作したことに応じて開始される。

【0084】

ステップＳ９５１において、スマートフォン２００はサーバ３００と接続を確立する。

【0085】

ステップＳ９５２において、スマートフォン２００は自身の性能情報をサーバ３００へ送信する。この性能情報は例えば、スマートフォン（携帯可能な装置）であること、ＧＰＵ２０８のスペック、および現在の通信速度等である。

【0086】

ステップＳ９５３において、サーバ３００はＲＧＢ調整処理をスマートフォン２００が実行するかサーバ３００が実行するかを判断する。ここでサーバ３００はステップＳ９５２において受信したスマートフォン２００の性能情報に基づいて、ＲＧＢ調整処理を実行するデバイスを判断する。本実施形態ではサーバ３００はステップＳ９５２において受信した性能情報から、ＰＣ１００が携帯可能な装置であること、ＧＰＵ１０８のスペックが所定の性能未満であること、およびＰＣ１００の通信速度が所定の閾値より遅いこと等が判断できる。この所定の性能および所定の閾値はそれぞれサーバ３００の管理者が任意に決定する値である。本実施形態ではサーバ３００はスマートフォン２００の性能が所定の性能未満であると判断し、サーバ３００がＲＧＢ調整処理を実行すると判断する。

【0087】

ステップＳ９５４において、サーバ３００はステップＳ９５３における判断の結果を送信する。本実施形態ではサーバ３００はサーバ３００がＲＧＢ調整処理を実行する旨の通知をスマートフォン２００へ送信する。

【0088】

以上、スマートフォン２００およびサーバ３００が接続する処理について説明した。

【0089】

なお、ステップＳ９０２およびステップＳ９５２において、ＰＣ１００およびスマートフォン２００は、現在の通信速度の実効値や従量制課金通信であること等を通知してもよい。サーバ３００はステップＳ９０３およびステップＳ９５３において、この情報も利用してＲＧＢ調整処理をサーバ３００が実行するか否かを判断する。

【0090】

なお、ステップＳ９０３およびステップＳ９５３において、サーバ３００はサーバ３００自身の処理状況に基づいてＲＧＢ調整処理を実行するデバイスを判断してもよい。サーバ３００の処理状況は例えば、ＧＰＵ３０８の使用率、接続を確立しているデバイス数、および画像処理を実行する予定であるＲＡＷ画像データの総容量等である。この場合、サーバ３００は自身の処理状況が負荷の大きい状態と判断した場合、接続を確立している対向機器の性能情報にかかわらず、対向機器がＲＧＢ調整処理を実行すると判断してもよい。負荷の大きい状態は例えば、ＧＰＵ３０８の使用率が所定の閾値より高いこと、接続を確立しているデバイス数が所定の閾値より多いこと、画像処理を実行する予定であるＲＡＷ画像データの総容量が所定の閾値より大きいこと等である。またこの場合、サーバ３００は自身の処理状況が負荷の小さい状態と判断した場合、接続を確立している対向機器の性能情報に応じて、ＲＧＢ調整処理を実行する機器を判断する。負荷の小さい状態は例えば、ＧＰＵ３０８の使用率が所定の閾値より低いこと、接続を確立しているデバイス数が所定の閾値より少ないこと、画像処理を実行する予定であるＲＡＷ画像データの総容量が所定の閾値より小さいこと等である。この閾値はそれぞれサーバ３００の管理者が任意に決定する値である。

【0091】

＜ＲＡＷ画像データのアップロード＞
図１０を用いてＰＣ１００がサーバ３００へＲＡＷ画像データをアップロードする手順について説明する。図１０はＰＣ１００がサーバ３００へＲＡＷ画像データをアップロードする手順の一例を示すシーケンス図である。本シーケンスの処理はユーザがサーバ３００へＲＡＷ画像データをアップロードするようＰＣ１００を操作したことに応じて開始される。

【0092】

ステップＳ１００１において、ＰＣ１００はサーバ３００へ送信するＲＡＷ画像データを読み込む。

【0093】

ステップＳ１００２において、ＰＣ１００は読み込んだＲＡＷ画像データをサーバ３００へ送信する。

【0094】

ステップＳ１００３において、サーバ３００はＰＣ１００から受信したＲＡＷ画像データを記録する。

【0095】

以上、ＰＣ１００がサーバ３００へＲＡＷ画像データをアップロードする手順の一例について説明した。

【0096】

＜ＰＣ１００およびサーバ３００による現像処理＞
図１１を用いてＰＣ１００がサーバ３００を利用してＲＡＷ画像データの現像処理を実行する処理について説明する。図１１はＰＣ１００がサーバ３００を利用してＲＡＷ画像データの現像処理を実行する手順の一例を示すシーケンス図である。本シーケンスの処理は例えば、ユーザがＰＣ１００にＲＡＷ画像データの現像を指示した場合に開始される。なお、ＰＣ１００は本シーケンスの処理を開始する前に現像処理を実行するＲＡＷ画像データをサーバ３００へ送信済みであるとする。

【0097】

ステップＳ１１０１において、ＰＣ１００は図１０のステップＳ１００２において送信したＲＡＷ画像データのＲＡＷ現像処理をサーバ３００に指示する。

【0098】

ステップＳ１１０２において、サーバ３００はステップＳ１１０１においてＲＡＷ現像処理を指示されたＲＡＷ画像データのＲＡＷ現像処理を実行する。このＲＡＷ現像処理は例えば図７に示すフローチャートに従った処理である。

【0099】

ステップＳ１１０３において、サーバ３００はステップＳ１１０２におけるＲＡＷ現像処理によって生成した中間画像データをＰＣ１００へ送信する。

【0100】

ステップＳ１１０４において、ＰＣ１００はステップＳ１１０３において受信した中間画像データを表示する。

【0101】

ステップＳ１１０５において、ＰＣ１００はＲＧＢ調整処理におけるパラメータ調整操作をユーザから受け付ける。

【0102】

ステップＳ１１０６において、ＰＣ１００はステップＳ１１０５において受け付けたユーザ操作に基づいて、ステップＳ１１０３において受信した中間画像データにＲＧＢ調整処理を実行する。このＲＧＢ調整処理は例えば図８に示すフローチャートに従った処理である。

【0103】

ステップＳ１１０７において、ＰＣ１００はステップＳ１１０６におけるＲＧＢ調整処理によって生成された汎用画像データを表示する。

【0104】

ステップＳ１１０８において、ＰＣ１００はステップＳ１１０６におけるＲＧＢ調整処理によって生成された汎用画像データを記録する。

【0105】

以上、ＰＣ１００およびサーバ３００による現像処理の一例について説明した。

【0106】

＜スマートフォン２００およびサーバ３００による現像処理＞
図１２を用いてスマートフォン２００がサーバ３００を利用してＲＡＷ画像データの現像処理を実行する処理について説明する。図１２はスマートフォン２００がサーバ３００を利用してＲＡＷ画像データの現像処理を実行する手順の一例を示すシーケンス図である。本シーケンスの処理は例えば、ユーザがスマートフォン２００にＲＡＷ画像データの現像を指示した場合に開始される。なお、スマートフォン２００は本シーケンスの処理を開始する前に現像処理を実行するＲＡＷ画像データをサーバ３００へ送信済みであるとする。

【0107】

ステップＳ１２０１において、スマートフォン２００は図１０のステップＳ１００２において送信したＲＡＷ画像データのＲＡＷ現像処理をサーバ３００に指示する。

【0108】

ステップＳ１２０２において、サーバ３００はステップＳ１２０１においてＲＡＷ現像処理を指示されたＲＡＷ画像データのＲＡＷ現像処理を実行する。このＲＡＷ現像処理は例えば図７に示すフローチャートに従った処理である。

【0109】

ステップＳ１２０３において、サーバ３００はステップＳ１２０２におけるＲＡＷ現像処理によって生成された中間画像データにＲＧＢ調整処理を実行する。このＲＧＢ調整処理は例えば図８に示すフローチャートに従った処理である。なお、本ステップにおけるＲＧＢ調整処理のパラメータはサーバ３００が決定する。

【0110】

ステップＳ１２０４において、サーバ３００はステップＳ１２０２におけるＲＧＢ現像処理によって生成した汎用画像データをスマートフォン２００へ送信する。

【0111】

ステップＳ１２０５において、スマートフォン２００はステップＳ１２０４において受信した汎用画像データを表示する。

【0112】

ステップＳ１２０６において、スマートフォン２００はＲＧＢ調整処理におけるパラメータ調整操作をユーザから受け付ける。

【0113】

ステップＳ１２０７において、スマートフォン２００はステップＳ１２０６において受け付けたユーザ操作に基づいて、再度ＲＧＢ調整処理を実行するようサーバ３００に指示する。

【0114】

ステップＳ１２０８において、サーバ３００はステップＳ１２０２におけるＲＡＷ現像処理によって生成された中間画像データにＲＧＢ調整処理を実行する。このＲＧＢ調整処理は例えば図８に示すフローチャートに従った処理である。なお、本ステップにおけるＲＧＢ調整処理のパラメータはステップＳ１２０７においてスマートフォン２００から受信した指示に基づく。

【0115】

ステップＳ１２０９において、サーバ３００はステップＳ１２０８におけるＲＧＢ現像処理によって生成した汎用画像データをスマートフォン２００へ送信する。

【0116】

ステップＳ１２１０において、スマートフォン２００はステップＳ１２０９におけるＲＧＢ調整処理によって生成された汎用画像データを表示する。

【0117】

ステップＳ１２１１において、スマートフォン２００はステップＳ１２０９におけるＲＧＢ調整処理によって生成された汎用画像データを記録する。

【0118】

以上、スマートフォン２００およびサーバ３００による現像処理の一例について説明した。

【0119】

＜ＰＣおよびスマートフォンの動作＞
本実施形態の通信装置の一例であるＰＣ１００およびスマートフォン２００の動作の一例について説明する。以下、ＰＣ１００の動作を一例に説明する。図１３はＰＣ１００の動作の一例を示すフローチャートである。本フローチャートの処理は、不揮発性メモリ１０３に記録されたソフトウェアを作業用メモリ１０４に展開して制御部１０１が実行することで実現する。また本フローチャートの処理は、制御部１０１がユーザからサーバ３００に接続するよう指示する操作を操作部１０５を介して受け付けたことをトリガに開始される。

【0120】

ステップＳ１３０１において、制御部１０１は接続部１１１を介してサーバ３００と接続を確立する。本ステップの処理は、例えば図９（Ａ）のステップＳ９０１およびステップＳ９５１の処理に相当する。

【0121】

ステップＳ１３０２において、制御部１０１は接続部１１１を介してサーバ３００へ自身の性能情報をサーバ３００へ送信する。この性能情報は例えば、ＰＣ（据え置きの装置）かスマートフォン（携帯可能な装置）かであること、ＧＰＵ１０８のスペック、および現在の通信速度等である。本ステップの処理は、例えば図９（Ａ）のステップＳ９０２およびステップＳ９５２の処理に相当する。

【0122】

ステップＳ１３０３において、制御部１０１はＲＧＢ調整処理を実行するデバイスに関する通知を接続部１１１を介して受信する。この通知は例えば、中間画像データに対してＲＧＢ調整処理を実行するデバイスがＰＣ１００であるかサーバ３００であるかについての通知である。本ステップの処理は、例えば図９（Ａ）のステップＳ９０４およびステップＳ９５４の処理に相当する。

【0123】

ステップＳ１３０４において、制御部１０１はＲＡＷ画像データを不揮発性メモリ１０３から読み込む。不揮発性メモリ１０３から読み込むＲＡＷ画像データは、例えば操作部１０５を介してユーザがサーバ３００へ送信するよう選択したデータである。本ステップの処理は、例えば図１０のステップＳ１００１の処理に相当する。

【0124】

ステップＳ１３０５において、制御部１０１はステップＳ１３０４において読み込んだＲＡＷ画像データをサーバ３００へ接続部１１１を介して送信する。本ステップの処理は、例えば図１０のステップＳ１００２の処理に相当する。

【0125】

ステップＳ１３０６において、制御部１０１はサーバ３００へ送信したＲＡＷ画像データの現像処理を開始するよう指示する操作をユーザから受け付けたか否かを判断する。制御部１０１は現像処理を開始するよう指示する操作を例えば操作部１０５を介して受け付ける。制御部１０１はＲＡＷ画像データの現像処理を開始するよう指示する操作をユーザから受け付けるまで待機する。制御部１０１がＲＡＷ画像データの現像処理を開始するよう指示する操作をユーザから受け付けたと判断した場合、処理はステップＳ１３０７に進む。

【0126】

ステップＳ１３０７において、制御部１０１はステップＳ１３０３において受信した通知に基づいて、ＲＧＢ調整処理を実行するデバイスがサーバ３００か否かを判断する。ＲＧＢ調整処理を実行するデバイスがサーバ３００である場合、処理はステップＳ１３１６に進む。ＲＧＢ調整処理を実行するデバイスがサーバ３００ではない場合、すなわち、ＲＧＢ調整処理を実行するデバイスがＰＣ１００である場合、処理はステップＳ１３０８に進む。まず制御部１０１がＲＧＢ調整処理を実行するデバイスがＰＣ１００であると判断した場合について説明する。

【0127】

ステップＳ１３０８において、制御部１０１はステップＳ１３０５において送信したＲＡＷ画像データに対してＲＡＷ現像処理を実行することを指示するパケットを接続部１１１を介してサーバ３００へ送信する。本ステップの処理は、例えば図１１のステップＳ１１０１の処理に相当する。

【0128】

ステップＳ１３０９において、制御部１０１は中間画像データをサーバ３００から受信したか否かを判断する。制御部１０１は中間画像データをサーバ３００から受信するまで待機する。制御部１０１が中間画像データをサーバ３００から受信したと判断した場合、処理はステップＳ１３１０に進む。本ステップの処理は、例えば図１１のステップＳ１１０３の処理に相当する。

【0129】

ステップＳ１３１０において、制御部１０１はステップＳ１３０９において受信した中間画像データを表示部１０６によって表示する。ここで制御部１０１は例えば不揮発性メモリ３０３に記録されている画像処理アプリを利用して、中間画像データを表示部１０６に表示する。本ステップの処理は、例えば図１１のステップＳ１１０４の処理に相当する。

【0130】

ステップＳ１３１１において、制御部１０１はステップＳ１３１２のＲＧＢ調整処理におけるパラメータ調整の指示をユーザから受け付けたか否かを判断する。制御部１０１はこのパラメータ調整の指示を例えば操作部１０５を介して受け付ける。制御部１０１はパラメータ調整の指示をユーザから受け付けるまで待機する。制御部１０１がパラメータ調整の指示をユーザから受け付けたと判断した場合、処理はステップＳ１３１２に進む。本ステップの処理は、例えば図１１のステップＳ１１０５の処理に相当する。

【0131】

ステップＳ１３１２において、制御部１０１はステップＳ１３１１において受け付けたパラメータ調整に基づいてステップＳ１３０９において受信した中間画像データに対してＲＧＢ調整処理を実行する。ＲＧＢ調整処理は例えば図８のフローチャートを用いて説明した処理である。本ステップにおいて、制御部１０１は中間画像データから汎用画像データを生成する。本ステップの処理は、例えば図１１のステップＳ１１０６の処理に相当する。

【0132】

ステップＳ１３１３において、制御部１０１はステップＳ１３１２において生成された汎用画像データを表示部１０６によって表示する。本ステップの処理は、例えば図１１のステップＳ１１０７の処理に相当する。

【0133】

ステップＳ１３１４において、制御部１０１はＲＧＢ調整処理をやり直すか否かを判断する。例えば制御部１０１はＲＧＢ調整処理におけるパラメータ調整の指示を操作部１０５を介してさらに受け付けた場合、ＲＧＢ調整処理をやり直すと判断する。また例えば制御部１０１は汎用画像データを記録する指示を操作部１０５を介してユーザから受け付けた場合、ＲＧＢ調整処理をやり直さないと判断する。制御部１０１がＲＧＢ調整処理をやり直すと判断した場合、処理はステップＳ１３１１に戻る。制御部１０１がＲＧＢ調整処理をやり直さないと判断した場合、処理はステップＳ１３１５に進む。

【0134】

ステップＳ１３１５において、制御部１０１は汎用画像データを不揮発性メモリ１０３に記録する。本ステップの処理は、例えば図１１のステップＳ１１０８および図１２のステップＳ１２１１の処理に相当する。

【0135】

次にステップＳ１３０７において、制御部１０１がＲＧＢ調整処理を実行するデバイスがサーバ３００であると判断した場合について説明する。

【0136】

ステップＳ１３１６において、制御部１０１はステップＳ１３０５において送信したＲＡＷ画像データに対してＲＡＷ現像処理およびＲＧＢ調整処理を実行することを指示するパケットを接続部１１１を介してサーバ３００へ送信する。本ステップの処理は、例えば図１２のステップＳ１２０１の処理に相当する。

【0137】

ステップＳ１３１７において、制御部１０１は汎用画像データをサーバ３００から受信したか否かを判断する。制御部１０１は汎用画像データをサーバ３００から受信するまで待機する。制御部１０１が汎用画像データをサーバ３００から受信したと判断した場合、処理はステップＳ１３１０に進む。本ステップの処理は、例えば図１２のステップＳ１２０４の処理に相当する。

【0138】

ステップＳ１３１８において、制御部１０１はステップＳ１３１７において受信した汎用画像データを表示部１０６によって表示する。本ステップの処理は、例えば図１２のステップＳ１２０５およびステップＳ１２１０の処理に相当する。

【0139】

ステップＳ１３１９において、制御部１０１はＲＧＢ調整処理をやり直すか否かを判断する。例えば制御部１０１はＲＧＢ調整処理におけるパラメータ調整の指示を操作部１０５を介してさらに受け付けた場合、ＲＧＢ調整処理をやり直すと判断する。また例えば制御部１０１は汎用画像データを記録する指示を操作部１０５を介してユーザから受け付けた場合、ＲＧＢ調整処理をやり直さないと判断する。制御部１０１がＲＧＢ調整処理をやり直すと判断した場合、処理はステップＳ１３２０に進む。制御部１０１がＲＧＢ調整処理をやり直さないと判断した場合、処理はステップＳ１３１５に進む。

【0140】

ステップＳ１３２０において、制御部１０１はステップＳ１３１７において受信した汎用画像データのＲＧＢ調整処理におけるパラメータ調整の指示をユーザから受け付けたか否かを判断する。制御部１０１はこのパラメータ調整の指示を例えば操作部１０５を介して受け付ける。制御部１０１はパラメータ調整の指示をユーザから受け付けるまで待機する。制御部１０１がパラメータ調整の指示をユーザから受け付けたと判断した場合、処理はステップＳ１３２１に進む。本ステップの処理は、例えば図１２のステップＳ１２０６の処理に相当する。

【0141】

ステップＳ１３２１において、制御部１０１はステップＳ１３２０において受け付けたパラメータ調整に基づいてＲＧＢ調整処理を再度実行すること指示するパケットをサーバ３００へ接続部１１１を介して送信する。このパケットは、制御部１０１がステップＳ１３２０において受け付けたＲＧＢ調整処理において利用するパラメータを含む。本ステップの処理は、例えば図１２のステップＳ１２０７の処理に相当する。

【0142】

以上、本実施形態における通信装置の一例であるＰＣ１００の動作について説明した。なお、本実施形態のスマートフォン２００もＰＣ１００と同様に動作する。

【0143】

＜サーバの動作＞
本実施形態のサーバ３００の動作の一例について説明する。図１４はサーバ３００の動作の一例を示すフローチャートである。本フローチャートの処理は、不揮発性メモリ３０３に記録されたソフトウェアを作業用メモリ３０４に展開して制御部３０１が実行することで実現する。また本フローチャートの処理は、制御部３０１が通信装置から接続要求パケットを接続部３１１を介して受信したことをトリガに開始される。なお本フローチャートの処理では、サーバ３００はＰＣ１００と接続する場合について説明する。

【0144】

ステップＳ１４０１において、制御部３０１はＰＣ１００と接続部３１１を介して接続を確立する。本ステップの処理は、例えば図９（Ａ）のステップＳ９０１およびステップＳ９５１の処理に相当する。

【0145】

ステップＳ１４０２において、制御部３０１はＰＣ１００からＰＣ１００の性能情報を接続部３１１を介して受信する。この性能情報は例えば、ＰＣ（据え置きの装置）かスマートフォン（携帯可能な装置）かであること、ＧＰＵ１０８のスペック、および現在の通信速度等である。本ステップの処理は、例えば図９（Ａ）のステップＳ９０２およびステップＳ９５２の処理に相当する。

【0146】

ステップＳ１４０３において、制御部３０１はＲＧＢ調整処理を実行するデバイスを判断する。本実施形態では制御部３０１はＲＧＢ調整処理をＰＣ１００が実行するかサーバ３００が実行するかを判断する。ここで制御部３０１はステップＳ１４０２において受信したＰＣ１００の性能情報に基づいて、ＲＧＢ調整処理を実行するデバイスを判断する。ＰＣ１００の性能情報が所定の性能以上であると判断した場合、制御部３０１はＲＧＢ調整処理をＰＣ１００が実行すると判断する。ＰＣ１００の性能情報が所定の性能未満であると判断した場合、制御部３０１はＲＧＢ調整処理をサーバ３００が実行すると判断する。本ステップの処理は、例えば図９（Ａ）のステップＳ９０３およびステップＳ９５３の処理に相当する。

【0147】

ステップＳ１４０４において、制御部３０１はステップＳ１４０３において判断したＲＧＢ調整処理を実行するデバイスについての通知を接続部３１１を介してＰＣ１００へ送信する。本ステップの処理は、例えば図９（Ａ）のステップＳ９０４およびステップＳ９５４の処理に相当する。

【0148】

ステップＳ１４０５において、制御部３０１はＰＣ１００からＲＡＷ画像データを受信したか否かを判断する。制御部３０１はＲＡＷ画像データをＰＣ１００から受信するまで待機する。制御部３０１がＲＡＷ画像データをＰＣ１００から受信したと判断した場合、処理はステップＳ１４０６に進む。本ステップの処理は、例えば図１０のステップＳ１００２の処理に相当する。

【0149】

ステップＳ１４０６において、制御部３０１はステップＳ１４０５において受信したＲＡＷ画像データを不揮発性メモリ３０３に記録する。本ステップの処理は、例えば図１０のステップＳ１００３の処理に相当する。

【0150】

ステップＳ１４０７において、制御部３０１はＲＡＷ画像データの現像処理を開始する旨の指示をＰＣ１００から受信したか否かを判断する。例えば制御部３０１はステップＳ１４０６において受信したＲＡＷ画像データに対する現像処理を開始する旨の指示をＰＣ１００から受信するまで待機する。制御部３０１がＲＡＷ画像データに対する現像処理を開始する旨の指示をＰＣ１００から受信したと判断した場合、処理はステップＳ１４０８に進む。本ステップの処理は、例えば図１１のステップＳ１１０１の処理および図１２のステップＳ１２０１の処理に相当する。

【0151】

ステップＳ１４０８において、制御部３０１はＲＧＢ調整処理をサーバ３００が実行するか否かを判断する。例えば制御部３０１は、ステップＳ１４０７においてＰＣ１００からＲＡＷ現像処理を実行するよう指示された場合、ＲＧＢ調整処理をサーバ３００が実行しないと判断する。また例えば制御部３０１は、ステップＳ１４０７においてＰＣ１００からＲＡＷ現像処理およびＲＧＢ現像処理を実行するよう指示された場合、ＲＧＢ調整処理をサーバ３００が実行すると判断する。制御部３０１がＲＧＢ調整処理をサーバ３００が実行しないと判断した場合、処理はステップＳ１４０９に進む。制御部３０１がＲＧＢ調整処理をサーバ３００が実行すると判断した場合、処理はステップＳ１４１２に進む。まず、ＲＧＢ調整処理をサーバ３００が実行しない場合について説明する。

【0152】

ステップＳ１４０９において、制御部３０１はステップＳ１４０５において受信したＲＡＷ画像データに対してＲＡＷ現像処理を実行する。例えば制御部３０１は図７に示すフローチャートの処理に従ってＲＡＷ画像データに対してＲＡＷ現像処理を実行する。本ステップにおいて制御部３０１は中間画像データを生成する。本ステップの処理は、例えば図１１のステップＳ１１０２の処理に相当する。

【0153】

ステップＳ１４１０において、制御部３０１は中間画像データを接続部３１１を介してＰＣ１００へ送信する。本ステップの処理は、例えば図１１のステップＳ１１０３の処理に相当する。

【0154】

ステップＳ１４１１において、制御部３０１はＰＣ１００へ送信した中間画像データを削除し、処理を終了する。

【0155】

次にＲＧＢ調整処理をサーバ３００が実行する場合について説明する。

【0156】

ステップＳ１４１２において、制御部３０１はステップＳ１４０５において受信したＲＡＷ画像データに対してＲＡＷ現像処理を実行する。例えば制御部３０１は図７に示すフローチャートの処理に従ってＲＡＷ画像データに対してＲＡＷ現像処理を実行する。本ステップにおいて制御部３０１は中間画像データを生成する。本ステップの処理は、例えば図１２のステップＳ１２０２の処理に相当する。

【0157】

ステップＳ１４１３において、制御部３０１はステップＳ１４１２において生成した中間画像データに対してＲＧＢ調整処理を実行する。例えば制御部３０１は図８に示すフローチャートの処理に従って中間画像データに対してＲＧＢ調整処理を実行する。本ステップにおいて制御部３０１は汎用画像データを生成する。本ステップの処理は、例えば図１２のステップＳ１２０３の処理に相当する。

【0158】

ステップＳ１４１４において、制御部３０１は汎用画像データを接続部３１１を介してＰＣ１００へ送信する。本ステップの処理は、例えば図１２のステップＳ１２０４の処理およびステップＳ１２０９の処理に相当する。

【0159】

ステップＳ１４１５において、制御部３０１はＲＧＢ調整処理をやり直すか否かを判断する。例えば制御部３０１はＲＧＢ調整処理におけるパラメータ調整の指示をＰＣ１００から接続部３１１を介して受け付けた場合、ＲＧＢ調整処理をやり直すと判断する。また例えば制御部３０１は所定時間ＰＣ１００からＲＧＢ調整処理におけるパラメータ調整の指示を受信しない場合、ＲＧＢ調整処理をやり直さないと判断する。この所定時間は例えば１時間や１日である。この時間は少なくともユーザがＲＧＢ調整処理におけるパラメータを調整することができる程度の時間である。制御部１０１がＲＧＢ調整処理をやり直すと判断した場合、処理はステップＳ１４１３に戻る。制御部１０１がＲＧＢ調整処理をやり直さないと判断した場合、処理はステップＳ１４１６に進む。

【0160】

ステップＳ１４１６において、制御部３０１はステップＳ１４１２において生成した中間画像データおよびステップＳ１４１３において生成した汎用画像データを削除し、処理を終了する。

【0161】

以上、本実施形態における外部装置の一例であるサーバ３００の動作について説明した。なお、本実施形態ではサーバ３００はＰＣ１００と接続する場合について説明したが、サーバ３００がスマートフォン２００と接続した場合も同様に動作する。

【0162】

なお、ステップＳ１４０８において、制御部３０１はステップＳ１４０３において判断した結果を利用して、ＲＡＷ現像処理を実行するか、またはＲＡＷ現像処理およびＲＧＢ調整処理を実行するかを判断してもよい。

【0163】

なお、ＰＣ１００およびスマートフォン２００の通信速度が遅い場合や従量制課金通信である場合、サーバ３００は接続を確立している通信装置の処理性能にかかわらずＲＧＢ調整処理をサーバ３００が実行すると判断する。一般的に汎用画像データは中間画像データよりもデータ容量が小さいため、サーバ３００は１回のデータの送受信にかかるデータ容量が少ないように通信することができるためである。

【0164】

以上、本実施形態で説明したように、ＰＣ１００およびスマートフォン２００は自身の性能情報に基づいたＲＡＷ画像データの現像処理をサーバ３００を利用して実行する。これにより、ＰＣ１００およびスマートフォン２００はＲＡＷ画像データの現像処理を効率的に実行できる。

【0165】

＜第二の実施形態＞
第一の実施形態では、ＲＧＢ調整処理を実行するデバイスをサーバ３００が決定した。第二の実施形態では、ＲＧＢ調整処理を実行するデバイスをＰＣ１００およびスマートフォン２００が決定する処理について説明する。なお、ＰＣ１００、スマートフォン２００、およびサーバ３００の装置構成は第一の実施形態同様である。またシステム構成についても第一の実施形態と同様である。

【0166】

図１５は第二の実施形態におけるＰＣ１００の動作の一例を示すフローチャートである。

【0167】

ステップＳ１５０１において、制御部１０１は接続部１１１を介してサーバ３００と接続を確立する。

【0168】

ステップＳ１５０２において、制御部１０１は自身の性能情報に基づいてＲＧＢ調整処理を実行するデバイスを判断する。本実施形態では制御部１０１はＲＧＢ調整処理をＰＣ１００が実行するかサーバ３００が実行するかを判断する。この性能情報は例えば、ＰＣ（据え置きの装置）かスマートフォン（携帯可能な装置）かであること、ＧＰＵ１０８のスペック、および現在の通信速度等である。ＰＣ１００の性能情報が所定の性能以上であると判断した場合、制御部１０１はＲＧＢ調整処理をＰＣ１００が実行すると判断する。ＰＣ１００の性能情報が所定の性能未満であると判断した場合、制御部１０１はＲＧＢ調整処理をサーバ３００が実行すると判断する。

【0169】

ステップＳ１５０３において、制御部１０１はステップＳ１５０２において判断したＲＧＢ調整処理を実行するデバイスについての通知を接続部１１１を介してサーバ３００へ送信する。本実施形態では制御部１０１はＲＧＢ調整処理をＰＣ１００が実行するかサーバ３００が実行するかについての通知をサーバ３００へ送信する。

【0170】

ステップＳ１５０４からステップＳ１５２１の処理はそれぞれ図１３のステップＳ１３０４からステップＳ１３２１の処理と同様であるため説明を省略する。

【0171】

以上、第二の実施形態におけるＰＣ１００の動作の一例について説明した。なお、スマートフォン２００も同様に動作する。このように、ＰＣ１００およびスマートフォン２００は自身の性能情報に基づいてＲＡＷ画像データの現像処理をサーバ３００を利用して実行する。これにより、ＰＣ１００およびスマートフォン２００はＲＡＷ画像データの現像処理を効率的に実行できる。

【0172】

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【0173】

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】