特許 7531314 情報処理装置、情報処理装置の制御方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-01

(45)【発行日】2024-08-09

(54)【発明の名称】情報処理装置、情報処理装置の制御方法、およびプログラム

(51)【国際特許分類】

   H04N 5/93 20060101AFI20240802BHJP

   H04N 5/92 20060101ALI20240802BHJP

   G06F 3/0484 20220101ALI20240802BHJP

【ＦＩ】

H04N5/93

H04N5/92 010

G06F3/0484

【請求項の数】 14

(21)【出願番号】P 2020099615

(22)【出願日】2020-06-08

(65)【公開番号】P2021193778

(43)【公開日】2021-12-23

【審査請求日】2023-06-07

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】深田 昌敬

【審査官】大西 宏

(56)【参考文献】

【文献】特開２００７－０３６５８５（ＪＰ，Ａ）

【文献】特開２００９－１８８８７０（ＪＰ，Ａ）

【文献】特開２０１０－０７４８６１（ＪＰ，Ａ）

【文献】特開２０１０－２０６５０８（ＪＰ，Ａ）

【文献】特開２０１４－１４０１１２（ＪＰ，Ａ）

【文献】特開２０２０－０７１７８４（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／０３３５９０１（ＵＳ，Ａ１）

【文献】国際公開第２０１９／１９３０９７（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／９１ － ５／９５６

Ｇ０６Ｆ ３／０４８－ ３／０４８９５

(57)【特許請求の範囲】

【請求項1】

画像データを格納する画像データ領域と、前記画像データに関する情報であるメタデータを格納するメタデータ領域とを有するＩＳＯＢＭＦＦ（ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルに基づく画像を、表示部に表示させる情報処理装置であって、前記画像ファイルには代表の画像データが含まれ、
前記画像ファイルに、ＩＳＯＢＭＦＦ標準で定められたグループ化構造を用いてグループ化された１つ以上の画像グループが格納されているかを判定する判定手段と、
前記画像ファイルに、前記１つ以上の画像グループが格納されていると判定された場合に、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを選択する選択手段と、
前記表示部に、選択された画像データに基づく画像を表示させるように制御する表示制御手段と、
を有することを特徴とする情報処理装置。

【請求項2】

前記画像ファイルは、ユーザーの操作により指定された画像ファイルであることを特徴とする請求項１に記載の情報処理装置。

【請求項3】

画像データを格納する画像データ領域と、前記画像データに関する情報であるメタデータを格納するメタデータ領域とを有するＩＳＯＢＭＦＦ（ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルに基づく画像を、表示部に表示させる情報処理装置であって、前記画像ファイルには代表の画像データが含まれ、
ユーザーの第１の操作により前記画像ファイルが指定された場合に、前記画像ファイルに、ＩＳＯＢＭＦＦ標準で定められたグループ化構造を用いてグループ化された１つ以上の画像グループが格納されているかを判定する判定手段と、
（１）ユーザーの前記第１の操作により前記画像ファイルが指定された場合は、前記画像ファイルに、前記１つ以上の画像グループが格納されていると判定された場合に、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを選択し、（２）ユーザーの第２の操作により前記画像ファイルが指定された場合は、前記代表の画像データを選択する選択手段と、
前記表示部に、選択された画像データに基づく画像を表示させるように制御する表示制御手段と、
を有することを特徴とする情報処理装置。

【請求項4】

ユーザーの前記第２の操作により前記画像ファイルが指定された場合に、前記選択手段は、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを、ユーザーの操作に基づいて選択する、
ことを特徴とする請求項３に記載の情報処理装置。

【請求項5】

前記グループ化構造は、画像の切り替え表示を行うグループ化タイプ情報を含むことを特徴とする請求項１から４のいずれか１項に記載の情報処理装置。

【請求項6】

前記判定手段は、前記画像ファイルに、前記１つ以上の画像グループが格納されているかを、前記メタデータに基づいて判定することを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。

【請求項7】

前記判定手段は、前記画像ファイルに、前記１つ以上の画像グループが格納されているかを、前記情報処理装置における設定に基づいて判定することを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。

【請求項8】

前記画像ファイルは、ＨＥＩＦ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルであることを特徴とする請求項１から７のいずれか１項に記載の情報処理装置。

【請求項9】

前記代表の画像データは、前記メタデータにおけるｐｉｔｍで識別される画像であることを特徴とする請求項１から８のいずれか１項に記載の情報処理装置。

【請求項10】

前記画像グループは、前記メタデータにおけるグルーピングタイプであるｓｌｉｄ、ｉａｕｇ、ｆａｖｃ、ａｌｂｃ、ｓｔｅｒのいずれかで識別される画像グループであることを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。

【請求項11】

前記画像グループは、前記メタデータにおける（１）スライドショーに関するグルーピングタイプ、（２）画像と音声のトラックの関連付けに関するグルーピングタイプ、（３）お気に入りの画像コレクションに関するグルーピングタイプ、（４）アルバムコレクションに関するグルーピングタイプ、（５）立体ペアに関するグルーピングタイプのいずれかで識別される画像グループであることを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。

【請求項12】

画像データを格納する画像データ領域と、前記画像データに関する情報であるメタデータを格納するメタデータ領域とを有するＩＳＯＢＭＦＦ（ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルに基づく画像を、表示部に表示させる情報処理装置の制御方法であって、前記画像ファイルには代表の画像データが含まれ、
前記画像ファイルに、ＩＳＯＢＭＦＦ標準で定められたグループ化構造を用いてグループ化された１つ以上の画像グループが格納されているかを判定する判定工程と、
前記画像ファイルに、前記１つ以上の画像グループが格納されていると判定された場合に、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを選択する選択工程と、
前記表示部に、選択された画像データに基づく画像を表示させるように制御する表示制御工程と、
を有することを特徴とする制御方法。

【請求項13】

画像データを格納する画像データ領域と、前記画像データに関する情報であるメタデータを格納するメタデータ領域とを有するＩＳＯＢＭＦＦ（ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルに基づく画像を、表示部に表示させる情報処理装置の制御方法であって、前記画像ファイルには代表の画像データが含まれ、
ユーザーの第１の操作により前記画像ファイルが指定された場合に、前記画像ファイルに、ＩＳＯＢＭＦＦ標準で定められたグループ化構造を用いてグループ化された１つ以上の画像グループが格納されているかを判定する判定工程と、
（１）ユーザーの前記第１の操作により前記画像ファイルが指定された場合は、前記画像ファイルに、前記１つ以上の画像グループが格納されていると判定された場合に、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを選択し、（２）ユーザーの第２の操作により前記画像ファイルが指定された場合は、前記代表の画像データを選択する選択工程と、
前記表示部に、選択された画像データに基づく画像を表示させるように制御する表示制御工程と、
を有することを特徴とする制御方法。

【請求項14】

コンピュータを、請求項１から１１のいずれか１項に記載の情報処理装置として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、１つ以上の画像のデータが格納された画像ファイルを再生するための技術に関する。

【背景技術】

【0002】

ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅｓ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）では、単一の静止画、複数の静止画、又は、画像シーケンス（静止画のバースト等）を１つのファイルに格納するための標準化を行っている。本標準は、ＨＥＩＦ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）と呼ばれ、画像と画像シーケンスの交換、編集、及び表示を可能とする。また、ＨＥＩＦは、ＩＳＯベースメディアファイルフォーマット（ＩＳＯＢＭＦＦ：ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）で定められるツールを基に拡張された格納フォーマットである。ＨＥＩＦは、ＩＳＯ／ＩＥＣ２３００８―１２（Ｐａｒｔ１２）において「Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ」という名称で標準化が進行している。また、ＨＥＩＦは、メタデータを含む規範的な構造を定めており、メタデータと画像を関連付けする方法、特定の形式のメタデータの構成について定めている。

【0003】

一方、カメラやスマートフォン等、画像生成機能を備えた画像生成装置は近年様々な機能を有しており、撮影日時や、画像サイズ、画像品質だけでなく、撮影時の情報や、撮影した画像データのメタデータなど様々な情報を生成可能となっている。例えば、撮影時の被写体やシーンを識別する情報、各種の撮影設定情報などが画像データとともに生成される。また、撮影した画像を整理したり、画像のグループを作成したりするためのモードも用意されている。ユーザーは、自分の好みの画像、または、ある特定の興味に対応する画像の集合を識別するために、画像のグループを作成することができる。画像のグループとしては、例えば、任意の種類の画像のグループ、画像のシーケンス、またはその両方等が考えられる。カメラで撮影された画像は、例えばメモリカード等の記憶装置に記憶される。画像は通常、記憶装置上のデータのサイズを縮小するために符号化される。ＪＰＥＧやＨＥＶＣ標準など、多くの符号化標準を使用できる。このような画像データに関する情報は、メタデータとして画像データと一緒にＨＥＩＦファイルに格納することができる。また、ＨＥＩＦファイルに格納された複数の画像等をグループとして格納し、ファイル生成、編集時の意図等をファイル読み出し時に識別可能とする識別子を格納することが可能となっている。特許文献１では、ブラケット撮影した複数の画像（画像データ）を１つのＨＥＩＦファイルに格納する方法が記載されている。

【0004】

ＨＥＩＦでは、複数の画像を格納してスライドショーでの表示を意図する画像ファイルを作成することも可能とされている。Ｔｅｃｈｎｏｌｏｇｙ ｕｎｄｅｒ Ｃｏｎｓｉｄｅｒａｔｉｏｎ ｏｎ ＩＳＯ／ＩＥＣ ２３００８－１２（ｗ１８８１９）では、ＨＥＩＦファイルに格納された複数の画像のスライドショー表示を目的としたメタデータを画像グループとして格納することが検討されている。また、複数の画像を１つのＨＥＩＦファイルに格納し、それら画像をアルバムコレクションやお気に入りコレクションといったグループとして格納することも可能とされている。Ｔｅｘｔ ｏｆ ＩＳＯ／ＩＥＣ ２３００８－１２：２０１７／ＤＡＭ２（ｗ１８８４５）では、ＨＥＩＦファイルに格納された複数の画像のアルバムやお気に入りコレクション格納を目的としたメタデータを、画像グループとして格納することが検討されている。

【先行技術文献】

【特許文献】

【0005】

【文献】国際公開第２０１９／１９３０９７号

【発明の概要】

【発明が解決しようとする課題】

【0006】

ＩＳＯ／ＩＥＣ２３００８－１２では、ＨＥＩＦファイル内にメタデータとして第一優先画像（主画像）を示す識別子（識別情報）を格納し、当該識別子はファイル再生時に表示等する画像を識別する目的で利用される。この第一優先画像を示す識別子は、ＨＥＩＦ標準を満たすファイルには必ず１つだけ格納される。また、当該識別子は、単一の画像を指定することができるが、前述した画像のグループを指定することができない規定となっている。そのため、スライドショー表示を目的としたグループや画像のコレクションとしてのグループが格納されていたとしても、表示する画像は第一優先画像として指定された画像となる。

【0007】

このように、従来では、ＨＥＩＦファイルに、格納された複数の画像に対するグループ識別子が格納されていた際に、第一優先画像を表示するのか、画像グループを表示するのかについては明確な規定がない。このため、ＨＥＩＦファイル内に特有の表示が必要なグループが格納されていたとして、効果的に表示することができないという課題があった。

【0008】

本発明は上記課題に鑑みてなされたものであり、ＨＥＩＦファイルに画像グループが格納されていた場合の表示の仕組みを提供することを目的とする。

【課題を解決するための手段】

【0009】

上記課題を解決するための一手段として、本発明の情報処理装置は、以下の構成を有する。すなわち、画像データを格納する画像データ領域と、前記画像データに関する情報であるメタデータを格納するメタデータ領域とを有するＩＳＯＢＭＦＦ（ＩＳＯ Ｂａｓｅ Ｍｅｄｉａ Ｆｉｌｅ Ｆｏｒｍａｔ）標準に従った画像ファイルに基づく画像を、表示部に表示させる情報処理装置であって、前記画像ファイルには代表の画像データが含まれ、
前記画像ファイルに、ＩＳＯＢＭＦＦ標準で定められたグループ化構造を用いてグループ化された１つ以上の画像グループが格納されているかを判定する判定手段と、
前記画像ファイルに、前記１つ以上の画像グループが格納されていると判定された場合に、前記代表の画像データ、または前記１つ以上の画像グループの画像データのいずれかを選択する選択手段と、
前記表示部に、選択された画像データに基づく画像を表示させるように制御する表示制御手段と、
を有することを特徴とする。

【発明の効果】

【0010】

ＨＥＩＦファイルに画像グループが格納されていた場合の表示の仕組みが提供される。

【図面の簡単な説明】

【0011】

【図1】情報処理装置の構成を示すブロック図である。

【図2】画像ファイル再生処理のフローチャートの一例である。

【図3】ＨＥＩＦファイルのスライドショー再生処理のフローチャートである。

【図4】画像ファイル再生処理のフローチャートの別の例である。

【図5】ＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘの構文構造を示す。

【図6】情報処理装置における表示画面の一例を示す図である。

【図7】情報処理装置における表示画面の一例を示す図である。

【図8】ＨＥＩＦファイルの構造を示す図である。

【図9】画像ファイル再生処理のフローチャートの別の例である。

【発明を実施するための形態】

【0012】

以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

【0013】

＜実施形態１＞
［情報処理装置の構成］
図１は、本実施形態における情報処理装置１００の構成の一例を示す。情報処理装置１００では、システムバス１０１にＣＰＵ（Central Processing Unit）１０２、システムプログラム実行時の一時記憶装置であるＲＡＭ（Random Access Memory）１０３、システムプログラムが格納される不揮発性記憶装置であるＲＯＭ（Read Only Memory）１０４が接続されている。システムプログラムやアプリケーションプログラムが、ＲＯＭ１０４からＲＡＭ１０３に読み込まれ、ＣＰＵ１０２によって実行される。また、システムバス１０１には、符号化／復号化部１０５、メタデータ処理部１０６、表示部１０７、ユーザーインターフェース部１０８、通信制御部１０９が接続されている。システムバス１０１は、これらの各ブロック間でデータを伝達する。またＲＡＭ１０３は、出力バッファを有し、スライドショー表示処理のデータバッファや、画像ファイルのメタデータ解析時に一時保存するデータの出力先としても使用される。なお、ＣＰＵ１０２、ＲＡＭ１０３、ＲＯＭ１０４はそれぞれ複数であってもよい。

【0014】

符号化／復号化部１０５は、Ｈ．２６５（ＨＥＶＣ）、Ｈ．２６４（ＡＶＣ）、ＡＶ１、ＪＰＥＧなどに従う動画や静止画のビデオコーデックであり、静止画や動画のデータの符号化および復号化の処理を実行する。メタデータ処理部１０６は、ファイルに格納されたメタデータ（メタデータ領域におけるデータ／情報）を解析し、静止画や動画の再生時のメタデータ処理を行う。具体的には、メタデータ処理部１０６は、所定のファイルフォーマット（例えばＨＥＩＦ）に準拠して格納された画像ファイルであることを解析し、メタデータの取得（静止画や動画に関する情報の取得や、符号化データに関するパラメータ情報の取得）を行う。メタデータ処理部１０６によって取得されたメタデータと、符号化データ（画像データ）を用いて、符号化／復号化部１０５においてデータの復号化が行われる。メタデータ処理部１０６は、データ（復号データ）を取得し、バッファに格納し表示のための前処理を実行する。また、メタデータ処理部１０６は、所定のイメージファイルフォーマットに格納されたメタデータの解析処理を行う。

【0015】

表示部１０７は、情報処理装置１００で実行されるアプリケーション／機能に関する表示処理を行う。表示部１０７は例えば液晶ディスプレイ装置といった画面で、または当該画面を含んで構成される。また、表示部１０７は、ユーザーによるＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）によるアプリケーションの操作を可能にするように、画面タッチセンサを備えてもよい。また、表示部１０７は、再生を行う際の候補の表示や設定情報を指定するための表示を行うように構成されてもよい。ユーザーインターフェース部１０８は、ユーザーによる情報処理装置１００への操作（入力）を受け付けるためのインターフェースである。ユーザーインターフェース部１０８は例えば、ボタンやスイッチ、マウス、キーボード、タッチパネル等の物理的な操作インターフェースで構成される。

【0016】

通信制御部１０９は、ネットワークに接続して伝送フレームの送受信を行うネットワークインタフェースである。通信制御部１０９は、例えば、有線ＬＡＮのイーサネット（登録商標）のＰＨＹおよびＭＡＣ（伝送メディア制御処理）である。あるいは、情報処理装置１００が無線ＬＡＮに接続可能な場合、通信制御部１０９にはＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ／ａｃ／ａｘ等の無線ＬＡＮ制御を実行するコントローラ、ＲＦ回路、アンテナが含まれる。

【0017】

［画像ファイルの再生処理の流れ］
次に、情報処理装置１００の画像ファイルの再生処理の流れについて、図２～図９を参照しながら説明する。まず、図８を参照して、ＨＥＩＦファイルの構造について説明する。図８は、本実施形態において情報処理装置１００が再生表示するファイルの内、ＨＥＩＦファイルフォーマットに準拠した画像ファイルの一例であるＨＥＩＦファイル８００の構造を示している。ＨＥＩＦファイル８００は、メタデータ格納領域（ＭｅｔａＢｏｘ８０２（ｍｅｔａ））（メタデータ領域）と符号化データ格納領域（ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ））（画像データ領域）を有する。また、ファイルのタイプを識別するメタデータ構造であるＦｉｌｅＴｙｐｅＢｏｘ８０１（ｆｔｙｐ）を有する。メタデータ領域には、いくつかのトラックを記述するメタデータ構造 ＭｏｖｉｅＢｏｘ（ｍｏｏｖ）を含んでもよい。これらトラックは、一連の画像サンプルを記述する。画像サンプルは、例えばビデオシーケンスのフレームなど、同時に取り込まれたピクセルのセットである。これらのサンプルに対応するデータは、ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ）に格納される。

【0018】

ＨＥＩＦファイル８００では、いくつかの単一の画像を、ＭｅｔａＢｏｘ８０２（ｍｅｔａ）に異なるアイテムとして記述される。ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ）は、これらのアイテムに対応する符号化画像データを格納する（例えば符号化データ８１２～８１５）。アイテムは、ＩｔｅｍＩｎｆｏｒｍａｔｉｏｎＢｏｘ８０６（ｉｉｎｆ）内のエントリとして定義される。具体的には、各エントリにアイテムの識別子となるアイテムＩＤ、アイテムの種別を示すアイテムタイプ等の情報が記述される。また、アイテムに対応する符号化データの格納位置を示すＩｔｅｍＬｏｃａｔｉｏｎＢｏｘ８０５（ｉｌｏｃ）、アイテム間の参照関係を示すＩｔｅｍＲｅｆｅｒｅｎｃｅＢｏｘ８０７（ｉｒｅｆ）が記述される。また、ＨＥＩＦでは、第一優先画像（主画像／代表画像）を示すための識別子としてＰｒｉｍａｒｙＩｔｅｍＢｏｘ８０４（ｐｉｔｍ）が格納される。ＰｒｉｍａｒｙＩｔｅｍＢｏｘ８０４（ｐｉｔｍ）に指定されたｉｔｅｍ＿ｉｄが指し示す画像データが第一優先画像であることを示す。

【0019】

ＨＥＩＦファイルでは、画像に関連付けられたプロパティを指定するためのデータ構造が定義されている。より一般的には、アイテム (あらゆる種類のメディアの) のプロパティを指定するためのいくつかのメカニズムが用意されている。例えば、ＨＥＩＦファイル８００において、ＩｔｅｍＰｒｏｐｅｒｔｉｅｓＢｏｘ８０８(ｉｐｒｐ) 内にＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ８０９（ｉｐｃｏ）が用意されており、イメージアイテムなどのアイテムのプロパティを格納または記述する。ＩｔｅｍＰｒｏｐｅｒｔｙＡｓｓｏｃｉａｔｉｏｎＢｏｘ８１０（ｉｐｍａ）では、１つまたは複数のプロパティを特定のアイテムに関連付ける。なお、同じプロパティを複数のアイテムに関連付けることもできる。この場合、複数のアイテムとそのプロパティ間の関連づけを記述するため、各アイテム識別子（Ｉｔｅｍ＿ＩＤ）にＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ８０９（ｉｐｃｏ）内のプロパティインデックスのリストを記述する。

【0020】

ＩＳＯＢＭＦＦおよびＨＥＩＦ標準では、アイテムまたはトラックをグループ化として意味のある単位で扱うことを可能とするため、メタデータ構造が存在する。アイテムまたはトラックを参照するため、「エンティティ」という用語で記述される。エンティティのグループ化を指定するためのメタデータ構造として。ＧｒｏｕｐＬｉｓｔＢｏｘ内にＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘ構造が定義される。

【0021】

ＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘの構文構造を図５に示す。グルーピングタイプを示すｇｒｏｕｐｉｎｇ＿ｔｙｐｅ５０１は、グループ化の種類を指定するために使用される。ＨＥＩＦでは、ｇｒｏｕｐｉｎｇ＿ｔｙｐｅの値がいくつか定義されている。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ａｌｔｒ’は、異なるエンティティがアプリケーションで代替的に使用できる代替エンティティであることを示す。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｓｔｅｒ’ は、立体視アプリケーションにおいて、２つのエンティティが立体ペア (通常は左右のビュー) であることを指定する。また、Ｔｅｃｈｎｏｌｏｇｙ ｕｎｄｅｒ Ｃｏｎｓｉｄｅｒａｔｉｏｎ ｏｎ ＩＳＯ／ＩＥＣ ２３００８－１２（ｗ１８８１９）およびＴｅｘｔ ｏｆ ＩＳＯ／ＩＥＣ ２３００８－１２：２０１７／ＤＡＭ２（ｗ１８８４５）では、その他のｇｒｏｕｐｉｎｇ＿ｔｙｐｅの検討が行われている。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｂｒｓｔ’は、バースト撮影した画像を撮影した順にエンティティをリスト化して格納されていることを示す。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｔｓｙｎ’は、時刻を同期して撮影された画像エンティティであることを示す。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｉａｕｇ’は、画像と音声トラックを関連づけ、画像再生と同時に音声トラックを再生することを示す。ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｐａｎｏ’は、リスト化されたエンティティがパノラマ撮影された画像であることを示す。また、いくつかのブラケット撮影の種別に応じたｇｒｏｕｐｉｎｇ＿ｔｙｐｅが定義されており、例えばｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ａｅｂｒ’は、自動露出ブラケット撮影されたエンティティであることを示す。その他、ホワイトバランスブラケット撮影やフォーカスブラケット撮影、フラッシュブラケット撮影、深度ブラケット撮影の各ｇｒｏｕｐｉｎｇ＿ｔｙｐｅの定義が検討されている。また、ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｓｌｉｄ’は、スライドショーを形成する一連のエンティティを示す。スライドショー表示を行う順にエンティティをリスト化して格納する。また、ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ｆａｖｃ’は、お気に入りの画像コレクションとして、ｇｒｏｕｐｉｎｇ＿ｔｙｐｅ‘ａｌｂｃ’は、アルバムコレクションとしてファイル生成・編集時に作成者（ユーザー）が定義した画像のグループを示す。

【0022】

ｇｒｏｕｐ＿ｉｄ５０２は、エンティティグループの一意の識別子である。ｅｎｔｉｔｙ＿ｉｄ５０３のリストは、グループに関連するすべてのエンティティを示す。

【0023】

図２は、情報処理装置１００により実行される、画像ファイル再生表示処理のフローチャートである。具体的には、選択されたＨＥＩＦファイルから再生表示を行う画像をファイルフォーマットに従って再生表示する処理の流れを示している。図２のフローチャートの各ステップは、ＣＰＵ１０２によるソフトウェア、符号化／復号化部１０５、メタデータ処理部１０６の何れかによって実行される処理を示す。なお、以下の説明において、ＣＰＵ１０２という記述はＣＰＵ１０２で実行するソフトウェア処理であるものとする。なお、本説明において、再生表示、再生、表示という語は、画像ファイルに格納された画像／画像グループを再生するために表示することを意味し、同義に用いられる。

【0024】

画像ファイルの再生処理は、まずステップＳ２０１において、ＣＰＵ１０２が、ユーザーインターフェース部１０８等を介したユーザー指示に基づいて、再生を行う画像ファイルの指定（選択）を受け付ける。これは例えば、ＲＡＭ１０３もしくはＲＯＭ１０４に記憶されている画像ファイルの直接的な指定でありうる。また、ＲＡＭ１０３もしくはＲＯＭ１０４に記憶されているフォルダ等に格納されたすべてのファイルといった指定や、特定の期間のファイル生成日時の画像ファイルすべてといった指定、または再生を行うためのリスト等による指定であってもよい。または、特定のネットワークフォルダやクラウド等に格納された画像ファイルが指定されてもよい。本実施形態では、指定する画像ファイルはＨＥＩＦであることを想定する。当該指定の受付処理は、予め所定の格納場所に格納された画像ファイルをＣＰＵ１０２が自動的に取得することにより行われてよい。

【0025】

次にステップＳ２０２において、メタデータ処理部１０６は、ステップＳ２０１で指定（選択）された画像ファイル（ＨＥＩＦファイル）を取得し、当該ファイルに格納されたメタデータを解析する。そして、メタデータ処理部１０６は、当該ファイルに、所定の用途に応じてグループ化された（画像グループ特有の再生処理を行う必要のある）画像グループが格納されているかを判定する。当該判定はＣＰＵ１０２により行われてもよい。なお、ステップＳ２０１で複数ファイルが指定された場合は、ファイル毎に順次本処理が行われる。解析するメタデータ構造は、図８に一例を示した構造のファイルフォーマットである。まずメタデータ処理部１０６は、図８のＦｉｌｅＴｙｐｅＢｏｘ８０１（ｆｔｙｐ）と、ＨａｎｄｌｅｒＢｏｘ８０３（ｈｄｌｒ）に格納されているメタデータを読み出し解析を行う。解析を行うＨＥＩＦファイルのｈｄｌｒに指定するＭｅｔａＤａｔａＢｏｘ（ｍｅｔａ）のハンドラタイプは‘ｐｉｃｔ’であることが想定される。続いてメタデータ処理部１０６は、ＭｅｔａＢｏｘ８０２（ｍｅｔａ）に格納されたメタデータを読み出して解析を行う。なおここで解析したメタデータは、ＲＡＭ１０３上に展開して保持され、ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ）に格納された符号化データとともにステップＳ２０５、Ｓ２０７、Ｓ２０８のいずれかにおける画像再生表示時の画像データの復号処理や表示処理において利用される。メタデータ処理部１０６は、図８のＧｒｏｕｐＬｉｓｔＢｏｘ８１６（ｇｒｐｌ）がＨＥＩＦファイルに格納されているかを解析する。ＧｒｏｕｐＬｉｓｔＢｏｘ８１６（ｇｒｐｌ）が格納されていた場合は、メタデータ処理部１０６は、さらにそのｇｒｐｌの中に、所定の用途に応じてグループ化された画像グループが格納されているかを確認する。図２の例では、Ｓ２０２では、メタデータ処理部１０６は、ｇｒｐｌの中に、再生表示の切り替えが必要となる画像グループ（スライドショー表示のような切り替え表示が必要な（意図される）画像グループ）が格納されているかを確認する。例えば、ｇｒｐｌにＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘ８１７（ｓｌｉｄ）が格納されていた（画像グループがグルーピングタイプ‘ｓｌｉｄ’で識別される）場合は、メタデータ処理部１０６は再生表示の切り替えが必要な画像グループが格納されていると判断し（Ｓ２０２でＹｅｓ）、当該画像グループを再生する候補として決定し、処理はステップＳ２０３へ進む。また、前述したグルーピングタイプ‘ｉａｕｇ’、グルーピングタイプ‘ｆａｖｃ’、グルーピングタイプ‘ａｌｂｃ’で識別される画像グループが格納されていると判断される場合も、処理はステップＳ２０３へ進んでもよい。画像グループが格納されていないか、または再生表示の切り替えが必要ではない画像グループが格納されていると判断した場合は（Ｓ２０２でＮｏ）、処理はステップＳ２０５へ進む。

【0026】

再生表示の切り替えが必要ではない画像グループとは、例えばパノラマ撮影グループのような画像グループを示す。パノラマ撮影グループは、パノラマ画像を構成するためのもととなる画像の集合を示す。なお、本実施形態では、パノラマ撮影グループを再生表示の切り替えが必要ではない画像グループの一例として示したが、情報処理装置１００のアプリケーション処理や、予め行われた設定や入力された設定等に応じて再生表示の切り替えが必要な画像グループか否かを切り替えるようにしてもよい。具体的には、パノラマ合成等、パノラマ撮影画像処理に特化した処理を行うためのアプリケーションであった場合は、ＣＰＵ１０２は、パノラマ画像グループを再生表示の切り替えが必要な画像グループとして扱うようにしてもよい。また、ＣＰＵ１０２は、ステレオ画像グループの場合ステレオ表示ができるアプリケーションか否かで、ステレオ画像グループの表示を切り替える必要があるか否かを判断してもよい。

【0027】

その他、ＣＰＵ１０２は、前述したグルーピングタイプ‘ｉａｕｇ’の画像グループに対して、音楽再生をできる設定ないし環境であるかを判断してもよい。音楽再生できない設定ないし環境であった場合は、‘ｉａｕｇ’の画像グループは格納されていない場合と同等に処理を行うこととしてもよい。音楽再生できない設定ないし環境とは、例えばスマートフォン等においてマナーモードに設定されている場合である。同様に、ＣＰＵ１０２は、各画像グループ特有の再生処理を行うか否かを、再生処理を行うアプリケーションに応じて決定するようにしてもよい。例えば、同一の情報処理装置１００であっても異なるアプリケーションによる再生処理であった場合、それぞれ再生表示の切り替えが必要かを判断する画像グループが異なることとなる。これはアプリケーション処理に限らず、異なる情報処理装置（再生処理装置）で行った場合も同様で、情報処理装置毎に、再生する候補となる画像グループを決定するようにしてもよい。

【0028】

また、本処理では画像グループのみを対象としたが、第一優先画像以外の画像が格納されている場合においても、当該画像を再生する候補として決定するように構成してもよい。例えば、メタデータ処理部１０６は、ＨＥＩＦファイルに、ｈｉｄｄｅｎ ｉｍａｇｅではない画像が複数格納されている場合に、当該複数の画像を再生する候補として決定してもよい。また、メタデータ処理部１０６は、ＨＥＩＦファイルに派生画像が複数含まれている場合に、当該画像を再生する候補として決定してもよい。このように、画像グループに限らず、第一優先画像として指定されていない画像を、再生する候補として決定してもよい。

【0029】

次に、ステップＳ２０３において、ＣＰＵ１０２は、表示部１０７に再生する候補を表示させて、ユーザーインターフェース部１０８等を介したユーザーによる選択（指定）を受け付ける。ここで図６、図７を参照して、再生する候補の表示形態について説明する。図６と図７は、情報処理装置１００の表示部１０７上の表示画面の一例を示す図である。図６では、情報処理装置１００の一例としてのスマートフォンやタブレット端末６０１における、表示部１０７の一例としての液晶ディスプレイ等の表示デバイス６０２を表している。表示デバイス６０２は、タッチパネルとして動作する。表示デバイス６０２は、アプリケーションを表示する画面および、ユーザーによるアプリケーションの操作を可能にするように、画面タッチセンサを備えており、ユーザーインターフェース部１０８を兼ねている。ボタン６０３は物理的なボタンを示しており、表示デバイス６０２とは異なるユーザーインターフェースである。

【0030】

表示デバイス６０２上では、現在表示されているフォルダの名称の表示６１２として「画像フォルダ」が示される。また、仮想ボタン６１０は、表示アプリケーションの設定等を行うための仮想ボタンを示しており、タップすることで設定画面が表示される。また仮想ボタン６１３は、画面を戻るための操作を行うための仮想ボタンを示している。ＨＥＩＦファイル名６０４から６１１は、画像フォルダ内に格納されているＨＥＩＦファイル名（ＩＭＧ＿００１．ｈｅｉｃ～ＩＭＧ＿００８．ｈｅｉｃ）を示している。

【0031】

図７は、図２のステップＳ２０１において、ユーザーにより１つのＨＥＩＦファイルが指定（選択）された場合の、図６からの画面遷移を示す。具体的には、図６のＨＥＩＦファイル名６０４のファイル（ＩＭＧ＿００１．ｈｅｉｃ）が、タップ動作等により指定（選択）された際の画面遷移を示している。図７の候補情報７０１は、図２のステップＳ２０３において表示される、再生する候補を示している。候補情報７０１において、ＨＥＩＦファイル名７０２は、選択したＨＥＩＦファイル名であるＩＭＧ＿００１．ｈｅｉｃを示している。候補７０３から７０６は、ＩＭＧ＿００１．ｈｅｉｃファイル内に格納されている、再生する候補である画像または画像グループを示している。候補７０３（「プライマリ画像」）は第一優先画像を示しており、ＨＥＩＦファイルに格納されているＰｒｉｍａｒｙＩｔｅｍＢｏｘ（ｐｉｔｍ）に指定されたｉｔｅｍ＿ｉｄが指し示す画像を示す。候補７０４（「スライドショーグループ［１０１］」）は、ＩＭＧ＿００１．ｈｅｉｃファイル内のＧｒｏｕｐＬｉｓｔＢｏｘ内に格納されたＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘのグループＩＤが１０１のグループを示している。候補７０５（「お気に入りグループ［１０２］」）は、ＩＭＧ＿００１．ｈｅｉｃファイル内にＦａｖｏｒｉｔｅ Ｃｏｌｌｅｃｔｉｏｎ ｅｎｔｉｔｙ ｇｒｏｕｐ‘ｆａｖｃ’のグループＩＤ１０２の画像グループを示している。候補７０６（「スライドショーグループ［１０３］」）は、ＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘのグループＩＤが１０３のグループを示している。なお、ｍｏｏｖボックスを利用してイメージシーケンスが格納されていた場合に、イメージシーケンスを再生する候補として表示してもよい。

【0032】

図７を参照して、ステップＳ２０４以降の処理について説明する。ステップＳ２０４において、ＣＰＵ１０２は、図７の候補７０３～７０６のうち、ユーザーにより選択（指定）された候補を確認する。選択された候補が、代表画像（第一優先画像）を示す候補７０３（「プライマリ画像」）である場合（Ｓ２０４でＹｅｓ）、処理はステップＳ２０５へ進む。選択された候補が、画像グループを示す候補７０４～７０６（「スライドショーグループ［１０１］」、「お気に入りグループ［１０２］」、「スライドショーグループ［１０３］」のいずれか）である場合（Ｓ２０４でＮｏ）、処理はステップＳ２０６へ進む。

【0033】

ステップＳ２０５において、情報処理装置１００は、ＨＥＩＦファイルに格納されているＰｒｉｍａｒｙＩｔｅｍＢｏｘ８０４（ｐｉｔｍ）に指定されたｉｔｅｍ＿ｉｄが指し示す画像データを表示部１０７に表示する。具体的には、まずメタデータ処理部１０６がＰｒｉｍａｒｙＩｔｅｍＢｏｘ８０４（ｐｉｔｍ）に指定されたｉｔｅｍ＿ｉｄで識別される画像アイテムがどのような種類の画像アイテムであるかを、ＩｔｅｍＩｎｆｏｒｍａｔｉｏｎＢｏｘ８０６（ｉｉｎｆ）に示された情報をもとに解析する。例えば‘ｈｖｃ１’が指定されていた場合、画像データはＨＥＶＣ符号化画像であることを示す。そして、メタデータ処理部１０６は、ＩｔｅｍＲｅｆｅｒｅｎｃｅＢｏｘ８０７（ｉｒｅｆ）を解析し、他のｉｔｅｍ＿ｉｄを参照しているかを解析し、参照している場合は参照先の画像アイテムについても同様に解析を行う。例えばｒｅｆｅｒｅｎｃｅ＿ｔｙｐｅが‘ｄｉｍｇ’である場合、画像データは派生画像であることを示し、派生元となる画像の情報を解析して取得する。なお参照関係がない場合は、本情報は利用しない。次に、メタデータ処理部１０６は、ＩｔｅｍＬｏｃａｔｉｏｎＢｏｘ８０５（ｉｌｏｃ）を解析し、各画像データビットストリームのファイル内の格納位置を取得する。そして、メタデータ処理部１０６は、ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ）内のどの位置にデータが存在するかを特定し、対応する符号化データ８１２～８１５を取得する。また、ＩｔｅｍＰｒｏｐｅｒｔｉｅｓＢｏｘ８０８（ｉｐｒｐ）内のＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ８０９（ｉｐｃｏ）には、画像の属性情報を示すＩｔｅｍＰｒｏｐｅｒｔｙが格納されている。また、各画像アイテムと属性情報との関連を示したＩｔｅｍＰｒｏｐｅｒｔｙＡｓｓｏｃｉａｔｉｏｎＢｏｘ８１０（ｉｐｍａ）を示す。各画像アイテムが順にｉｐｃｏ内の属性情報と関連づけが行われる。メタデータ処理部１０６は、これらメタデータを解析することで、画像アイテムの属性情報を取得する。これは例えばＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ８０９（ｉｐｃｏ）にｈｖｃＣが格納されていた場合、ＨＥＶＣ符号化パラメータを示す。また、ｉｓｐｅは画像のサイズを示す属性情報である。これら解析したメタデータに基づいて、および画像データに基づき、復号処理を符号化／復号化部１０５が実行する。生成された復号化データはＲＡＭ１０３上の出力バッファに転送されて保存される。ＣＰＵ１０２は、画像を表示する指示を表示部１０７に行う。本指示に基づき表示部１０７は画像を表示する。

【0034】

ステップＳ２０６、ステップＳ２０７、ステップＳ２０８では、選択された再生候補の画像グループに応じた処理が行われる。ステップＳ２０６およびステップＳ２０７はその一例であり、選択された画像グループがスライドショーグループであった場合の処理を示している。ステップＳ２０６において、ステップＳ２０３でユーザーにより選択（指定）された再生候補が候補７０４（「スライドショーグループ［１０１］」）または候補７０６（「スライドショーグループ［１０３］」）であった場合（Ｓ２０６でＹｅｓ）、処理はステップＳ２０７へ進む。一方、ユーザーにより選択（指定）された再生候補が候補７０５（「お気に入りグループ［１０２］」）であった場合（Ｓ２０６でＮｏ）、処理はステップＳ２０８へ進む。

【0035】

ステップＳ２０７において、情報処理装置１００は、選択されたスライドショーグループのスライドショー表示処理を行う。具体的には、メタデータ処理部１０６は、選択されたスライドショーグループが示すＧｒｏｕｐＬｉｓｔＢｏｘ８１６（ｇｒｐｌ）内のＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘ８１７（ｓｌｉｄ）から、スライドショー再生する対象となる画像のアイテムＩＤを順次取得する。続いて、メタデータ処理部１０６は、取得した画像アイテムに対応する画像データおよび関連メタデータを順次取得する。なお本処理は、ＰｒｉｍａｒｙＩｔｅｍＢｏｘから取得したｉｔｅｍ＿ｉｄの代わりにＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘからリストされたｉｔｅｍ＿ｉｄを順次取得する以外は、ステップ２０５と同様の処理となる。そして、表示部１０７は、ＣＰＵ１０２により実行されるアプリケーション処理により決定された再生条件でスライドショーグループ内の画像を順次表示して処理を終了する。

【0036】

なお、情報処理装置１００は、スライドショーグループ内の画像のスライドショー再生が終了した後は、再度選択されたスライドショーグループのスライドショー再生を実行してもよいし、そのまま再生を終了してもよい。またその他、再度ステップＳ２０４からの処理が実行されてもよい。また、複数の画像グループ候補が選択された場合においても、アプリケーションで決定して再生するようにすればよい。また、複数のファイルが選択された場合は、次のファイルの処理に移行するようにしてもよい。またその他、アプリケーションや情報処理装置１００における設定等に応じて決定した処理を実行するようにしてもよい。例えば、スライドショー再生が終了した後に代表画像であるプライマリ画像を表示するといったことや、選択した画像グループから再生を開始し、すべての候補を順次、所定の画像や画像グループに従った再生を行うことが考えられる。

【0037】

ステップＳ２０８において、情報処理装置１００は、選択された画像グループに応じた再生表示を行う。図７に示した例では、ユーザーにより候補７０５（「お気に入りグループ［１０２］」）が選択された場合の処理となる。メタデータ処理部１０６は、選択されたお気に入りグループが示すＧｒｏｕｐＬｉｓｔＢｏｘ８１６（ｇｒｐｌ）内のＦａｖｏｒｉｔｅ Ｃｏｌｌｅｃｔｉｏｎ ｅｎｔｉｔｙ ｇｒｏｕｐ‘ｆａｖｃ’に格納された画像のアイテムＩＤを順次取得する。続いて、メタデータ処理部１０６は、取得した画像アイテムに対応する画像データおよび関連メタデータを順次取得する。なお本処理は、ＰｒｉｍａｒｙＩｔｅｍＢｏｘから取得したｉｔｅｍ＿ｉｄの代わりにＦａｖｏｒｉｔｅＣｏｌｌｅｃｔｉｏｎＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘから対応するｉｔｅｍ＿ｉｄを取得する以外は、ステップＳ２０５と同様の処理となる。そして、表示部１０７は、画像を一覧表示する。またその他、表示部１０７は、ＣＰＵ１０２により実行されるアプリケーション処理により決定されたお気に入りグループの画像の表示方法に応じた画像の表示を行ってもよい。例えば、表示部１０７は、お気に入りグループに格納されたすべての画像のサムネイル画像を一覧表示したり、すべての画像をグリッドとして構成して表示したりしてもよい。またその他、表示部１０７は、すべての画像をスクロール再生可能なように表示することや、任意のサイズの画像アイコンとして一覧表示することなど複数の画像を一覧表示可能とするように様々なアプリケーションで決定した表示を行ってもよい。また、表示部１０７は、一覧表示に限らず、所定のユーザー操作によって例えばグループにリストされた順に画像を切り替えて表示してもよい。

【0038】

なお、本実施形態では、スライドショーグループの再生以外の画像グループの表示処理をまとめてステップＳ２０８の処理として説明した。Ｓ２０８は、画像グループとして格納され、個別の用途に応じた表示処理が必要な画像グループの表示処理を行うことを示す。よって、Ｓ２０８において、スライドショーグループのように個別にステップを設けて処理するように構成してももちろんよい。またその他、表示するアプリケーションの設定に応じて処理ステップを変更するようにしてもよい。例えば、ステップＳ２０２で判定される、表示を切り替える必要がある画像グループの対象を、アプリケーションの設定で切り替えるようにしてもよい。

【0039】

（ＨＥＩＦファイルスライドショー再生表示処理）
次に、スライドショー再生表示処理について、図３を参照して説明する。図３は、ＨＥＩＦファイルのスライドショー再生表示処理のフローチャートを示す。本処理は、情報処理装置１００で１つのアプリケーション処理として実行されてもよいし、専用のスライドショー再生装置で実行されてもよい。本処理フローは、スライドショーグループのみを、表示の切り替えが必要な画像グループとして扱い、その他の画像グループについては特別識別した処理を行わない、すなわち、スライドショー表示アプリケーションに特化した処理フローとなる。

【0040】

ステップＳ３０１において、メタデータ処理部１０６は、選択したＨＥＩＦファイルに格納されているメタデータを解析する。解析するメタデータの構造は、図８に一例を示した構造のファイルフォーマットである。メタデータ処理部１０６は、図８におけるＦｉｌｅＴｙｐｅＢｏｘ８０１（ｆｔｙｐ）と、ＨａｎｄｌｅｒＢｏｘ８０３（ｈｄｌｒ）に格納されているメタデータを読み出し解析を行う。解析を行うＨＥＩＦファイルのｈｄｌｒに指定するＭｅｔａＤａｔａＢｏｘ（ｍｅｔａ）のハンドラタイプは‘ｐｉｃｔ’であることが想定される。続いてメタデータ処理部１０６は、メタデータ格納（（ＭｅｔａＢｏｘ８０２（ｍｅｔａ））に格納されたメタデータを読み出して解析を行う。なお、ここで解析したメタデータは、ＲＡＭ１０３上に展開して保持され、符号化データ格納領域（ＭｅｄｉａＤａｔａＢｏｘ８１１（ｍｄａｔ））に格納された符号化データとともにステップＳ３０６における画像データの復号処理において利用される。

【0041】

次に、ステップＳ３０２において、メタデータ処理部１０６は、ＨＥＩＦファイルにスライドショーグループ（スライドショー表示を意図した識別情報）が格納されているかどうかを判定する。具体的な処理例として、まず、メタデータ処理部１０６は、図８のＧｒｏｕｐＬｉｓｔＢｏｘ８１６（ｇｒｐｌ）がＨＥＩＦファイルに格納されているかを解析する。格納されていた場合は、メタデータ処理部１０６は、さらにｇｒｐｌの中に、ＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘ８１７（ｓｌｉｄ）が格納されているかを解析する。メタデータ処理部１０６は、ＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘが格納されている場合に、ＨＥＩＦファイルにスライドショーグループが格納されていると判定する。ＨＥＩＦファイルにスライドショーグループが格納されていない場合は、処理はステップＳ３０３へ進み、格納されている場合は、処理はステップＳ３０４へ進む。なお、本実施形態ではＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘが格納されているか否かでスライドショーグループが格納されているか否かが判定されるとしたが、ＭｏｖｉｅＢｏｘ（ｍｏｏｖ）としてスライドショーデータが格納されているか否かが判定されてもよい。これは、ＩＳＯ／ＩＥＣ２３００１－１６として規格化が検討中のＤｅｒｉｖｅｄ ｖｉｓｕａｌ ｔｒａｃｋｓ ｉｎ ｔｈｅ ＩＳＯ ｂａｓｅ Ｍｅｄｉａ ｆｉｌｅ ｆｏｒｍａｔ構造を利用して格納されている場合や、イメージシーケンスとして格納されている場合も含む。

【0042】

ＨＥＩＦファイルにスライドショーグループが格納されていない場合（ステップＳ３０２でＮｏ）、ステップＳ３０３において、表示部１０７は、図８のＰｒｉｍａｒｙＩｔｅｍＢｏｘ８０４（ｐｉｔｍ）に指定されたｉｔｅｍ＿ｉｄが指し示す画像データ（代表画像）を表示する。ここで、ステップＳ３０３の具体的な処理例を説明する。

【0043】

まず、メタデータ処理部１０６は、ＰｒｉｍａｒｙＩｔｅｍＢｏｘに指定されたｉｔｅｍ＿ｉｄで識別される画像アイテムがどのような種類の画像アイテムであるかを、ＩｔｅｍＩｎｆｏｒｍａｔｉｏｎＢｏｘ８０６（ｉｉｎｆ）に示された情報をもとに解析する。例えば‘ｈｖｃ１’が指定されていた場合、画像アイテムの種類はＨＥＶＣ符号化画像であることを示す。続いて、メタデータ処理部１０６は、ＩｔｅｍＲｅｆｅｒｅｎｃｅＢｏｘ８０７（ｉｒｅｆ）を解析し、他のｉｔｅｍ＿ｉｄを参照しているかを解析し、参照している場合は参照先の画像アイテムについても同様に解析を行う。例えばｒｅｆｅｒｅｎｃｅ＿ｔｙｐｅが‘ｄｉｍｇ‘である場合、画像アイテムの種類は派生画像であることを示し、メタデータ処理部１０６は、派生元となる画像の情報を解析して取得する。なお参照関係がない場合は、本情報は利用しない。次に、メタデータ処理部１０６は、ＩｔｅｍＬｏｃａｔｉｏｎＢｏｘ８０５（ｉｌｏｃ）を解析し、各画像データビットストリームのファイル内の格納位置を取得する。そしてＭｅｄｉａＤａｔａＢｏｘ８１１内のどの位置に画像データが存在するかを特定し、対応する符号化データ８１２～８１５を取得する。

【0044】

次に、メタデータ処理部１０６は、メタデータを解析することで画像アイテムの属性情報を取得する。ＩｔｅｍＰｒｏｐｅｒｔｉｅｓＢｏｘ８０８（ｉｐｒｐ）内のＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ８０９（ｉｐｃｏ）には、画像の属性情報を示すＩｔｅｍＰｒｏｐｅｒｔｙが格納されている。また、各画像アイテムと属性情報との関連を示した情報は、ＩｔｅｍＰｒｏｐｅｒｔｙＡｓｓｏｃｉａｔｉｏｎＢｏｘ８１０（ｉｐｍａ）に格納されている。ここでは、各画像アイテムが順にｉｐｃｏ内の属性情報と関連づけが行われる。メタデータ処理部１０６は、これらメタデータを解析することで画像アイテムの属性情報を取得する。例えばＩｔｅｍＰｒｏｐｅｒｔｙＣｏｎｔａｉｎｅｒＢｏｘ（ｉｐｃｏ）に格納されているｈｖｃＣは、ＨＥＶＣ符号化パラメータを示す属性情報であり、ｉｓｐｅは画像のサイズを示す属性情報である。メタデータ処理部１０６が解析したメタデータに基づいて画像データが取得され、続いて符号化／復号化部１０５が取得された画像データに対する復号処理を実行し、復号データを生成する。符号化／復号化部１０５は、生成された復号化データをＲＡＭ１０３上の出力バッファに転送して保存しておく。ＣＰＵ１０２は、あらかじめ情報処理装置１００において決定されている表示時間の間、画像を表示部１０７に表示する指示を行う。本指示に基づき表示部１０７は画像を表示する。なお、１つ以上前に表示している画像の表示時間中である場合は、表示部１０７は、１つ前までの表示が終了してから画像を表示する。

【0045】

ＨＥＩＦファイルにスライドショーグループが格納されている場合（ステップＳ３０２でＹｅｓ）、ステップＳ３０４において、情報処理装置１００は、ＨＥＩＦファイルに格納されたスライドショーグループ（スライドショー表示を意図した識別情報で指定された画像群）の再生条件決定処理を行う。本処理におけるスライドショーグループの再生条件決定処理とは、複数のスライドショーグループが格納されていた場合の再生順序や、画像１枚あたりの表示時間、その他再生終了時における繰り返し再生の有無、再生する画像の順序といった条件を決定することである。

【0046】

ステップＳ３０５において、メタデータ処理部１０６は、ステップＳ３０４で決定された再生条件の順序で、ＨＥＩＦファイルから、スライドショーグループにおける画像アイテムに対応する画像データ（スライドショー表示を意図した識別情報で指定された画像群）、および関連メタデータを取得する。本処理は、ステップ３０３においてＰｒｉｍａｒｙＩｔｅｍＢｏｘから取得したｉｔｅｍ＿ｉｄの代わりにＳｌｉｄｅｓｈｏｗＥｎｔｉｔｙＴｏＧｒｏｕｐＢｏｘから対応するｉｔｅｍ＿ｉｄを取得する以外は、ステップＳ３０３と同様の処理となる。

【0047】

ステップＳ３０６において、符号化／復号化部１０５は、ステップＳ３０５で取得されたメタデータおよび画像データに基づき、復号処理を実行して復号化データを生成する。続いて、ステップＳ３０７において、符号化／復号化部１０５は、生成した復号化データをＲＡＭ１０３における出力バッファに転送して保存しておく。ステップＳ３０８において、ＣＰＵ１０２は、ステップＳ３０４で決定された再生条件に基づいて表示部１０７に画像を表示する指示を、表示部１０７に対して実施する。すなわち、ＣＰＵ１０２は、ステップＳ３０４で決定された再生条件に従って、画像群を表示部１０７へ表示するための表示制御を行う。ＣＰＵ１０２からの指示に基づき、表示部１０７は画像を表示する。なお、１つ前に表示している画像の表示時間中である場合は、表示部１０７は、１つ前の表示が終了してから画像を表示する。

【0048】

ステップＳ３０９において、ＣＰＵ１０２は、ステップＳ３０４で決定した再生条件の順で再生するスライドショーグループの画像のうち、未再生の画像がまだあるかを確認する。また未再生の画像がある場合は、処理はステップＳ３０５へ進み、ステップＳ３０５からの処理を繰り返す。未再生の画像が無い場合は、処理はステップＳ３１０へ進み、ＣＰＵ１０２は、同一ファイルのスライドショー再生を継続するかを判定する。本処理によって、未再生のスライドショーグループがあるかが判定される。またその他、情報処理装置１００における設定等に基づいて判定が行われてもよい。同一ファイルのスライドショー再生を継続する場合は、処理はステップＳ３０５へ進み、継続しない場合は処理を終了する。

【0049】

以上の処理フローで、スライドショー再生表示処理が実行される。なお、本処理フローでは、単一のＨＥＩＦファイルを処理する際のフローを示したが、ＨＥＩＦファイルに限らず、複数の画像ファイルをスライドショー再生する処理の中のＨＥＩＦファイル再生処理に本処理フローを適用してもよい。つまり、本処理フローは、複数の画像ファイルをスライドショー再生する際において対象となる画像ファイルにＨＥＩＦファイルが含まれていた場合の再生処理フローとなりうる。また、本処理フローは、ＨＥＩＦファイルにスライドショーを意図した画像グループが含まれていた場合の処理フローとなりうる。

【0050】

図４に、画像ファイル再生表示処理のフローチャートの別の例を示す。図２に示したフローと比較して、ＨＥＩＦファイルの選択方法が異なる。具体的には、ユーザーにより所定の選択操作が行われた場合は代表画像を再生表示し、当該所定の選択操作とは異なる方法で選択操作が行われた場合は再生する候補を表示するといった処理フローである。ここで、所定の選択操作とは、例えばマウスを用いてクリック操作した場合を想定し、所定の選択操作と異なる方法の選択操作とは、例えばマウスを用いて右クリック操作した場合を想定するが、その限りではない。例えば、タッチパネル操作であった場合、クリック操作をタップ操作、右クリック操作をダブルタップ操作やホールド操作等に置き換えてもよい。その他、ユーザーインターフェースに応じた割り当てを、ステップＳ４０２の分岐に対して行うことができる。つまり、図４に示した処理フローでは、ＨＥＩＦファイルの選択方法の種類に応じて、ＨＥＩＦファイルの再生処理ステップを変更する。

【0051】

ステップＳ４０１において、ＣＰＵ１０２が、ユーザーインターフェース部１０８等を介したユーザー指示に基づいて、再生を行う画像ファイル（ＨＥＩＦファイル）の指定を受け付ける。本処理は、図２のステップ２０１の処理と同様である。次にステップＳ４０２において、ＣＰＵ１０２は、ユーザーインターフェース部１０８等を介した、ＨＥＩＦファイルの選択のためのユーザー操作（選択操作）を確認する。選択操作がクリック操作の場合、処理はステップＳ４０５へ進み、選択操作が右クリック操作の場合、処理はステップＳ４０３へ進む。ステップＳ４０３からステップＳ４０８の処理は、図２におけるステップＳ２０３からステップＳ２０８の処理と同様である。なお、Ｓ４０３の前に図２のＳ２０２と同様の処理を行い、Ｙｅｓの場合にＳ４０３へ進み、Ｎｏの場合にＳ４０５に進むように構成されてもよい。なお、Ｓ４０２では、ユーザーの操作の種別以外の条件で判定が行われてもよい。例えば、Ｓ４０１でＨＥＩＦファイルが選択された場合に、ＣＰＵ１０２が表示部１０７にポップアップメニューを出して、代表画像またはスライドショーで再生するかを選択させる方法を用いてもよい。また、メニュー画面などでＨＥＩＦファイルが選択された場合の表示方法として代表画像またはスライドショー再生を行うかを、あらかじめ、例えばユーザーに、選択させておく方法を用いてもよい。

【0052】

図９に、画像ファイル再生表示処理のフローチャートのさらに別の例を示す。本処理フローは、一度、代表画像であるプライマリ画像を表示した後のユーザー操作によって、再生表示の切り替えが必要な画像グループの表示を行う処理フローである。

【0053】

ステップＳ９０１において、ＣＰＵ１０２が、ユーザーインターフェース部１０８等を介したユーザー指示に基づいて、再生を行う画像ファイル（ＨＥＩＦファイル）の指定を受け付ける。本処理は、図２のステップ２０１の処理と同様である。ステップＳ９０２において、情報処理装置１００は、選択されたＨＥＩＦファイルに格納された代表画像となるプライマリ画像を表示する。本処理は、図２のステップＳ２０５に示した処理と同様である。その後ステップＳ９０３において、ＣＰＵ１０２がユーザーインターフェース部１０８を介したユーザーによる再生（表示）中の画像に対するクリック等の操作を検出すると、処理はステップＳ９０４へ進む。ステップＳ９０４において、図２におけるステップＳ２０２同様に、メタデータ処理部１０６はＨＥＩＦファイルを解析し、再生表示の切り替えが必要な画像グループが格納されているかを判定する。再生表示の切り替えが必要な画像グループが格納されている場合（Ｓ９０４でＹｅｓ）、処理はステップＳ９０５へ進み、格納されていない場合は（Ｓ９０４でＮｏ）、処理を終了する。この際、情報処理装置１００は、表示しているプライマリ画像の表示を継続してもよいし、プライマリ画像の表示自体、つまり選択したＨＥＩＦファイルの再生処理自体を終了してもよい。

【0054】

ステップＳ９０５において、ＣＰＵ１０２は、表示部１０７に、再生する候補となる画像グループを表示させる。なお、本処理は図２におけるステップＳ２０３の処理と同様の処理であるが、プライマリ画像は候補として表示しない。しなしながら、アプリケーションや再生処理装置によっては、本処理においてもプライマリ画像を表示候補として表示しても何ら問題ない。

【0055】

ステップＳ９０６において、情報処理装置１００は、選択された画像グループに応じた再生表示を行い、処理を終了する。なお、表示の終了は、画像表示を終了する処理によって行われうる。ステップＳ９０５で表示した、再生する候補となる画像グループ以外が選択された場合は、情報処理装置１００は、代表画像の表示のみを行ってもよい。すなわち、情報処理装置１００は、画像グループに応じた表示処理をキャンセルしたこととして動作しうる。

【0056】

なお、本実施形態では、アプリケーション処理によって再生する画像または画像グループを決定する構成としたが、あらかじめファイル内に関連するメタデータを記述しておき画像グループを優先的に表示するか、第一優先画像を優先的に表示するかを決定できるようにしてもよい。その場合、専用のメタデータ構造を定義して行う方法や、ＵＵＩＤ等を用いて専用のアプリケーション処理によって判別可能なメタデータを格納する方法が考えられる。またその他、現在のＨＥＩＦ標準の規定を改め、第一優先画像に画像グループを指定可能とし、このようなアプリケーション等の判断を不要とする標準規定として定義することも考えられる。

【0057】

以上、本実施形態によればＨＥＩＦファイルに第一優先画像を示す識別子と、１つ以上の画像の所定の用途に応じたグループ識別情報がメタデータ格納領域に格納されているかを判定し、格納されていた場合に再生表示を切り替える必要があるグループであるかをさらに判定する。再生表示を切り替える必要があるグループであると判定した場合に、第一優先画像を表示するか、画像グループの用途に応じたグループの表示を行うかを決定し、決定した画像または画像グループを再生表示するように構成した。これにより、ＨＥＩＦファイルを再生表示するにあたって画像グループがＨＥＩＦファイルに格納されていた場合にどの画像ないし画像グループを表示するかを決定可能となる。また再生する装置やアプリケーションの種別に応じて再生表示を切り替える必要があるか否かの判断を変更することで装置やアプリケーションに特化した判定処理を行うことが可能となる。

【0058】

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【0059】

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

【符号の説明】

【0060】

１００ 画像ファイル作成装置、１０１ システムバス、１０２ ＣＰＵ、１０３ ＲＡＭ、１０４ ＲＯＭ、１０５ 符号化／復号化部、１０６ メタデータ処理部、１０７ 表示部、１０８ 通信制御部、１０９ ユーザーインターフェース部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】