特許 7600988 ファイル処理装置、ファイル処理方法、及び、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-09

(45)【発行日】2024-12-17

(54)【発明の名称】ファイル処理装置、ファイル処理方法、及び、プログラム

(51)【国際特許分類】

   H04N 5/76 20060101AFI20241210BHJP

   G06F 16/71 20190101ALI20241210BHJP

   H04N 5/92 20060101ALI20241210BHJP

   H04N 5/926 20060101ALI20241210BHJP

   H04N 23/60 20230101ALI20241210BHJP

【ＦＩ】

H04N5/76

G06F16/71

H04N5/92 010

H04N5/926 100

H04N23/60 300

【請求項の数】 16

(21)【出願番号】P 2021536926

(86)(22)【出願日】2020-07-16

(86)【国際出願番号】 JP2020027631

(87)【国際公開番号】W WO2021020142

(87)【国際公開日】2021-02-04

【審査請求日】2023-05-25

(31)【優先権主張番号】P 2019139686

(32)【優先日】2019-07-30

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000002185

【氏名又は名称】ソニーグループ株式会社

(74)【代理人】

【識別番号】100121131

【弁理士】

【氏名又は名称】西川 孝

(74)【代理人】

【氏名又は名称】稲本 義雄

(74)【代理人】

【識別番号】100168686

【弁理士】

【氏名又は名称】三浦 勇介

(72)【発明者】

【氏名】舩元 大輔

(72)【発明者】

【氏名】伊藤 亮吾

(72)【発明者】

【氏名】磯部 幸雄

(72)【発明者】

【氏名】石坂 敏弥

(72)【発明者】

【氏名】椎名 裕樹

(72)【発明者】

【氏名】菊池 政吾

【審査官】鈴木 順三

(56)【参考文献】

【文献】米国特許出願公開第２００４／０１３１３３０（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１８／０１６０１５６（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／７６ － ５／９５６

Ｈ０４Ｎ ２３／００ － ２３／９５９

Ｇ０６Ｆ １６／００ － １６／９５８

(57)【特許請求の範囲】

【請求項1】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルを生成し、
生成した複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成する
ファイル制御部を備え、
前記ファイル制御部は、
前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成し、
前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成する
ファイル処理装置。

【請求項2】

前記ファイル制御部は、前記関連画像を特定するアイテムIDと前記特定情報とを対応付けた前記関連付け情報が格納された前記プロキシファイルを生成する
請求項１に記載のファイル処理装置。

【請求項3】

前記ファイル制御部は、前記関連付け情報がmetaボックス、又は、mdatボックスに格納された前記プロキシファイルを生成する
請求項２に記載のファイル処理装置。

【請求項4】

前記ファイル制御部は、
前記特定情報が、アイテムとして前記プロキシファイルのmdatボックスに格納され、
前記関連画像を特定するアイテムIDと、前記mdatボックスに格納された前記特定情報を特定するアイテムIDとを対応付けた前記関連付け情報がmetaボックスに格納された
前記プロキシファイルを生成する
請求項１に記載のファイル処理装置。

【請求項5】

前記関連画像は、前記画像と画質又はデータ量が異なる画像である
請求項１に記載のファイル処理装置。

【請求項6】

前記関連画像は、前記画像と画素数若しくはサイズが異なる同一内容の画像、前記画像と信号フォーマットが異なる同一内容の画像、又は、前記画像と階調が異なる同一内容の画像である
請求項１に記載のファイル処理装置。

【請求項7】

前記HEIFファイルには、前記画像と、前記画像のサムネイル画像とが格納され、
前記関連画像は、前記HEIFファイルに格納された前記サムネイル画像、前記サムネイル画像の圧縮率とは異なる圧縮率の符号化が採用された画像、又は、前記サムネイル画像とは異なるコーデックが採用された画像である
請求項１に記載のファイル処理装置。

【請求項8】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルを生成することと、
生成した複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成することと、
前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成することと、
前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成することと
を含むファイル処理方法。

【請求項9】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルを生成し、
生成した複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成する
ファイル制御部を備え、
前記ファイル制御部は、
前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成し、
前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成する
ファイル処理装置として、コンピュータを機能させるためのプログラム。

【請求項10】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像を、前記選択関連画像に関連付けられた前記特定情報によって特定し、
特定した前記画像を、前記選択関連画像に対応する前記画像として検出する
ファイル制御部を備え、
前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルである
ファイル処理装置。

【請求項11】

前記プロキシファイルには、前記関連画像を特定するアイテムIDと前記特定情報とを対応付けた前記関連付け情報が格納され、
前記ファイル制御部は、前記選択関連画像のアイテムIDに対応付けられた前記特定情報によって特定される前記画像を、前記選択関連画像に対応する前記画像として検出する
請求項１０に記載のファイル処理装置。

【請求項12】

前記関連画像は、前記画像と画質又はデータ量が異なる画像である
請求項１０に記載のファイル処理装置。

【請求項13】

前記関連画像は、前記画像と画素数若しくはサイズが異なる同一内容の画像、前記画像と信号フォーマットが異なる同一内容の画像、又は、前記画像と階調が異なる同一内容の画像である
請求項１０に記載のファイル処理装置。

【請求項14】

前記HEIFファイルには、前記画像と、前記画像のサムネイル画像とが格納され、
前記関連画像は、前記HEIFファイルに格納された前記サムネイル画像、前記サムネイル画像の圧縮率とは異なる圧縮率の符号化が採用された画像、又は、前記サムネイル画像とは異なるコーデックが採用された画像である
請求項１０に記載のファイル処理装置。

【請求項15】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像を、前記選択関連画像に関連付けられた前記特定情報によって特定することと、
特定した前記画像を、前記選択関連画像に対応する前記画像として検出することと
を含み、
前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルである
ファイル処理方法。

【請求項16】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像を、前記選択関連画像に関連付けられた前記特定情報によって特定し、
特定した前記画像を、前記選択関連画像に対応する前記画像として検出する
ファイル制御部を備え、
前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルである
ファイル処理装置として、コンピュータを機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本技術は、ファイル処理装置、ファイル処理方法、及び、プログラムに関し、特に、例えば、インデクス表示を、迅速に行うことができるようにするファイル処理装置、ファイル処理方法、及び、プログラムに関する。

【背景技術】

【0002】

画像を、効率的に格納するファイルフォーマットとして、HEIF(High Efficiency Image File Format)がある（非特許文献１を参照）。

【先行技術文献】

【非特許文献】

【0003】

【文献】ISO/IEC 23008-12:2017, Information technology -- High efficiency coding and media delivery in heterogeneous environments -- Part 12: Image File Format

【発明の概要】

【発明が解決しようとする課題】

【0004】

HEIF(High Efficiency Image File Format)に準拠したHEIFファイルについては、今後、インデクス表示を迅速に行うことが要請されることが予想される。

【0005】

本技術は、このような状況に鑑みてなされたものであり、インデクス表示を、迅速に行うことができるようにするものである。

【課題を解決するための手段】

【0006】

本技術の第１のファイル処理装置、又は、プログラムは、HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルを生成し、生成した複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成するファイル制御部を備え、前記ファイル制御部は、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成し、前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成するファイル処理装置、又は、そのようなファイル処理装置として、コンピュータを機能させるためのプログラムである。

【0007】

本技術の第１のファイル処理方法は、HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルを生成することと、生成した複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成することと、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成することと、前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成することとを含むファイル処理方法である。

【0008】

本技術の第１のファイル処理装置、ファイル処理方法、及び、プログラムにおいては、HEIF(High Efficiency Image File Format)に準拠したHEIFファイルであって、画像が格納された前記HEIFファイルが生成され、生成された複数の前記HEIFファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルが生成され、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルが、前記プロキシファイルとして生成され、前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルが生成される。

【0009】

本技術の第２のファイル処理装置、又は、プログラムは、HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像を、前記選択関連画像に関連付けられた前記特定情報によって特定し、特定した前記画像を、前記選択関連画像に対応する前記画像として検出するファイル制御部を備え、前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるファイル処理装置、又は、そのようなファイル処理装置として、コンピュータを機能させるためのプログラムである。

【0010】

本技術の第２のファイル処理方法は、HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像を、前記選択関連画像に関連付けられた前記特定情報によって特定することと、特定した前記画像を、前記選択関連画像に対応する前記画像として検出することとを含み、前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるファイル処理方法である。

【0011】

本技術の第２のファイル処理装置、ファイル処理方法、及び、プログラムにおいては、HEIF(High Efficiency Image File Format)に準拠したHEIFファイル内の画像に関連する関連画像と前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報とが格納された他のHEIFファイルであるプロキシファイルに格納された複数の前記関連画像の中から選択された選択関連画像に対応する前記画像が、前記選択関連画像に関連付けられた前記特定情報によって特定され、特定された前記画像が、前記選択関連画像に対応する前記画像として検出される。また、前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルとされる。

【0012】

なお、第１及び第２のファイル処理装置は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。

【0013】

また、第１及び第２のプログラムは、記録媒体に記録して、又は、伝送媒体を介して伝送することにより、提供することができる。

【図面の簡単な説明】

【0014】

【図1】本技術を適用したディジタルカメラの一実施の形態の構成例を示すブロック図である。

【図2】JPEG(Joint Photographic Experts Group)に準拠したJPEGファイルのフォーマットの例を示す図である。

【図3】ISOベースメディアファイルフォーマットの例を示す図である。

【図4】HEIFに準拠したHEIFファイルのフォーマットの例を示す図である。

【図5】イメージアイテム形式のHEIFファイルのフォーマットの例を示す図である。

【図6】iprpボックスの例を示す図である。

【図7】イメージシーケンス形式のHEIFファイルのフォーマットの例を示す図である。

【図8】trakボックスの例を示す図である。

【図9】主画像及びサムネイル画像が格納された通常のコレクションファイルの例を示す図である。

【図10】第１の関連付け型コレクションファイルの例を示す図である。

【図11】第２の関連付け型コレクションファイルの例を示す図である。

【図12】第３の関連付け型コレクションファイルの例を示す図である。

【図13】主画像のトラック及びその主画像のサムネイル画像のトラックが格納された通常のシーケンスファイルの例を示す図である。

【図14】関連付け型シーケンスファイルの例を示す図である。

【図15】関連付け型HEIFファイルを生成する生成処理の例の概要を説明するフローチャートである。

【図16】関連付け型HEIFファイルを再生する再生処理の例の概要を説明するフローチャートである。

【図17】コレクションファイルを再生する再生処理の例を説明するフローチャートである。

【図18】ステップＳ３２の再生対象画像の読み出しの処理の例を説明するフローチャートである。

【図19】ステップＳ３１の再生対象アイテムIDの取得の処理の第１の例を説明するフローチャートである。

【図20】ステップＳ３１の再生対象アイテムIDの取得の処理の第２の例を説明するフローチャートである。

【図21】第１の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【図22】第２の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【図23】第３の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【図24】コレクションファイルから主画像のアイテムIDのリストを取得する処理の例を説明するフローチャートである。

【図25】シーケンスファイルから所定の時刻情報に対する主画像（のフレーム）のサムネイル画像を再生する処理の例を説明するフローチャートである。

【図26】関連付け型シーケンスファイルから所定の主画像（のフレーム）のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【図27】外部データとして、主画像のRAWファイルを採用し、関連付け型コレクションファイルを生成する場合の、RAWファイルへのuuidの格納の例を示す図である。

【図28】外部データとして、主画像のRAWファイルを採用し、関連付け型シーケンスファイルを生成する場合の、RAWファイルへのuuidの格納の例を示す図である。

【図29】外部データとして、主画像のWAVファイルを採用し、関連付け型コレクションファイルを生成する場合の、WAVファイルへのuuidの格納の例を示す図である。

【図30】外部データとして、主画像のWAVファイルを採用し、関連付け型シーケンスファイルを生成する場合の、WAVファイルへのuuidの格納の例を示す図である。

【図31】ディジタルカメラ１０でのインデクス表示の例を説明する図である。

【図32】ディジタルカメラ１０以外の外部デバイスでのインデクス表示の例を説明する図である。

【図33】第１の関連付け型コレクションファイルを対象とするインデクス表示の例を示す図である。

【図34】第１の関連付け型コレクションファイルを対象とするインデクス表示の他の例を示す図である。

【図35】関連付け型シーケンスファイルを対象とするインデクス表示の例を示す図である。

【図36】プロキシファイルの第１の例を説明する図である。

【図37】プロキシファイルの第２の例を説明する図である。

【図38】プロキシファイルの第３の例を説明する図である。

【図39】プロキシファイルの第４の例を説明する図である。

【図40】プロキシ対象ファイルとしてのシーケンスファイル#1への、外部データとしての主画像の特定情報としてのuuidの書き込みの例を説明する図である。

【図41】第１の関連付け型コレクションファイルをプロキシ対象ファイルとするプロキシファイルの生成の例を説明する図である。

【図42】第１の関連付け型コレクションファイルをプロキシ対象ファイルとするプロキシファイルの生成の他の例を説明する図である。

【図43】関連付け型シーケンスファイルをプロキシ対象ファイルとするプロキシファイルの生成の例を説明する図である。

【図44】プロキシ対象ファイルと、そのプロキシ対象ファイルを用いたプロキシファイル生成処理により生成されるプロキシファイルとの組がとる形態を説明する図である。

【図45】プロキシ対象ファイルとプロキシファイルとの組がとる第２の形態の詳細例を示す図である。

【図46】プロキシ対象ファイルとプロキシファイルとの組がとる第３の形態の詳細例を示す図である。

【図47】ディジタルカメラ１０でのプロキシファイルを用いたインデクス表示の例を説明する図である。

【図48】ディジタルカメラ１０以外の外部デバイスでのプロキシファイルを用いたインデクス表示の例を説明する図である。

【図49】プロキシ対象ファイルとするHEIFファイルの選択の例を説明する図である。

【図50】プロキシ対象ファイルとするHEIFファイルの選択の他の例を説明する図である。

【図51】第１の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、そのプロキシファイルにサムネイル画像を追加する追加処理を説明する図である。

【図52】第１の形態のプロキシファイルを生成するプロキシファイル生成処理の例を説明するフローチャートである。

【図53】第１の形態のプロキシファイルにサムネイル画像を追加する追加処理の例を説明するフローチャートである。

【図54】第２又は第３の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、そのプロキシファイルにサムネイル画像を追加する追加処理を説明する図である。

【図55】第２又は第３の形態のプロキシファイルを生成するプロキシファイル生成処理の例を説明するフローチャートである。

【図56】第２又は第３の形態のプロキシファイルにサムネイル画像を追加する追加処理の例を説明するフローチャートである。

【図57】第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明する図である。

【図58】第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例をさらに説明する図である。

【図59】第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明するフローチャートである。

【図60】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明する図である。

【図61】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例をさらに説明する図である。

【図62】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第１の例を説明する図である。

【図63】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第１の例を説明するフローチャートである。

【図64】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第２の例を説明する図である。

【図65】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第３の例を説明する図である。

【図66】第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第４の例を説明する図である。

【図67】プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理を説明する図である。

【図68】プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理の例を説明するフローチャートである。

【図69】プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合の追加処理の例を説明するフローチャートである。

【図70】プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理を説明する図である。

【図71】プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理の例を説明するフローチャートである。

【図72】プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合の追加処理の例を説明するフローチャートである。

【図73】既に存在するHEIFファイルをプロキシ対象ファイルとするプロキシファイル生成処理の例を説明するフローチャートである。

【図74】既に存在するHEIFファイルをプロキシ対象ファイルとする追加処理の例を説明するフローチャートである。

【図75】本技術を適用したコンピュータの一実施の形態の構成例を示すブロック図である。

【発明を実施するための形態】

【0015】

＜本技術を適用したディジタルカメラの一実施の形態＞

【0016】

図１は、本技術を適用したディジタルカメラの一実施の形態の構成例を示すブロック図である。

【0017】

ディジタルカメラ１０は、光学系１１、イメージセンサ１２、信号処理部１３、メディア１４、インタフェース１５及び１６、ボタン／キー１７、タッチパネル１８、液晶パネル１９、ビューファインダ２０、並びに、インタフェース２１等を有する。

【0018】

光学系１１は、被写体からの光を、イメージセンサ１２に集光する。

【0019】

イメージセンサ１２は、光学系１１からの光を受光し、光電変換する撮像を行うことで、電気信号としての画像のデータを生成し、信号処理部１３に供給する。

【0020】

信号処理部１３は、光学系／イメージセンサ制御部４１、符号化制御部４２、ファイル制御部４３、メディア制御部４４、操作制御部４５、表示制御部４６、及び、UI制御部４７を有する。

【0021】

光学系／イメージセンサ制御部４１は、光学系１１及びイメージセンサ１２を制御し、その制御に従って行われる撮像により得られる画像（のデータ）を、符号化制御部４２に供給する。

【0022】

符号化制御部４２は、光学系／イメージセンサ制御部４１からの画像を表示制御部４６に供給するとともに、必要に応じて符号化し、ファイル制御部４３に供給する。また、符号化制御部４２は、ファイル制御部４３から供給される画像を必要に応じて復号し、表示制御部４６に供給する。

【0023】

ファイル制御部４３は、符号化制御部４２から供給される画像を格納したファイルを生成し、メディア制御部４４に供給する。また、ファイル制御部４３は、メディア制御部４４から供給されるファイルの再生、すなわち、ファイルに格納された画像等のデータの読み出し等を行う。例えば、ファイルから読み出された画像は、ファイル制御部４３から符号化制御部４２に供給される。

【0024】

メディア制御部４４は、メディア１４、並びに、インタフェース１５及び１６との間でのファイルのやりとりを制御する。例えば、メディア制御部４４は、ファイル制御部４３からのファイルを、メディア１４に記録させ、又は、インタフェース１５及び１６から送信させる。また、メディア制御部４４は、メディア１４からファイルを読み出し、又は、インタフェース１５及び１６にファイルを受信させ、ファイル制御部４３に供給する。

【0025】

操作制御部４５は、ユーザによるボタン／キー１７やタッチパネル１８の操作に応じて、その操作に対応する操作信号を、必要なブロックに供給する。

【0026】

表示制御部４６は、符号化制御部４２から供給される画像等を、液晶パネル１９や、ビューファインダ２０、インタフェース２１に供給して表示させる表示制御等を行う。

【0027】

UI制御部４７は、UI(User Interface)制御をつかさどる。

【0028】

メディア１４は、例えば、SDカード等の記憶媒体である。インタフェース１５は、例えば、WiFi（登録商標）やイーサネット（登録商標）等のLAN(Local Area Network)のインタフェースである。インタフェース１６は、例えば、USB(Universal Serial Bus)のインタフェースである。ボタン／キー１７及びタッチパネル１８は、ディジタルカメラ１０に指令その他の情報を入力するときに、ユーザによって操作される。タッチパネル１８は、液晶パネル１９と一体的に構成することができる。液晶パネル１９及びビューファインダ２０は、表示制御部４６から供給される画像等を表示する。インタフェース２１は、HDMI(High-Definition Multimedia Interface)（登録商標）やDP(Display Port)等の少なくとも画像を伝送するインタフェースである。

【0029】

以上のように構成されるディジタルカメラ１０では、光学系／イメージセンサ制御部４１は、イメージセンサ１２の撮像により得られるRAWデータの画像（以下、RAW画像ともいう）から、例えば、そのRAW画像と同一の解像度（画素数）のYUVの画像を、HEIFファイルの主画像(master image)として生成し、符号化制御部４２に供給する。

【0030】

符号化制御部４２は、YUVの主画像から、液晶パネル１９や外部のディスプレイでの表示の用途用に、主画像に基づく第１の他の画像としての、例えば、主画像よりも解像度が低いYUVの画像（以下、スクリーンネイル画像ともいう）を生成するとともに、インデクス表示（一覧表示）の用途用に、主画像に基づく第２の他の画像としての、例えば、スクリーンネイル画像よりも解像度が低いYUVの画像（以下、サムネイル画像ともいう）を生成する。符号化制御部４２は、例えば、スクリーンネイル画像を、表示制御部４６を介して、液晶パネル１９に供給し、いわゆるスルー画として表示させる。サムネイル画像としては、例えば、長辺が320ピクセル以下のサイズの画像を採用することができる。主画像と、主画像に基づく第１の他の画像としてのスクリーンネイル画像、又は、主画像に基づく第２の他の画像としてのサムネイル画像とのサイズ（ピクセル数）の比率は、例えば、200倍以下にすることができる。主画像に基づく第１の他の画像としてのスクリーンネイル画像と、主画像に基づく第２の他の画像としてのサムネイル画像とのサイズの比率も、同様に、200倍以下とすることができる。スクリーンネイル画像としては、例えば、解像度が4K以上の画像を採用することができる。また、スクリーンネイル画像としては、例えば、ユーザの選択に応じて、4K（QFHD）又はFHDの画像を採用することができる。さらに、主画像とスクリーンネイル画像としては、同一の解像度の画像を採用することができる。主画像とスクリーンネイル画像として、同一の解像度の画像を採用する場合、HEIFファイルには、主画像とスクリーンネイル画像との両方を格納することもできるし、スクリーンネイル画像を格納せずに、主画像を格納することができる。HEIFファイルに、スクリーンネイル画像を格納せずに、主画像を格納する場合には、主画像をリサイズして、スクリーンネイル画像として用いることができる。

【0031】

また、符号化制御部４２は、RAW画像に対応する主画像、スクリーンネイル画像、及び、サムネイル画像（同一のRAW画像から生成された主画像、スクリーンネイル画像、及び、サムネイル画像）を、必要に応じて符号化し、RAW画像とともに、ファイル制御部４３に供給する。

【0032】

ファイル制御部４３は、RAW画像が格納されたRAWファイルを生成するとともに、対応する主画像、スクリーンネイル画像、及び、サムネイル画像（同一のRAW画像から生成された主画像、スクリーンネイル画像、及び、サムネイル画像）が格納されたHEIFファイル、又は、JPEGファイル等を生成し、メディア制御部４４に供給する。HEIFファイルとは、HEIF(High Efficiency Image File Format)に準拠したファイルであり、JPEGファイルとは、JPEG(Joint Photographic Experts Group)に準拠したファイルである。

【0033】

メディア制御部４４は、ファイル制御部４３からのRAWファイルと、HEIFファイル又はJPEGファイルとを、メディア１４に記録し、あるいは、インタフェース１５又は１６から送信させる。

【0034】

ファイル制御部４３において、HEIFファイル、及び、JPEGファイルのうちのいずれを生成するかは、例えば、ユーザの操作に応じて選択することができる。また、HEIFファイルには、後述するように、イメージアイテム形式とイメージシーケンス形式とがあるが、イメージアイテム形式とイメージシーケンス形式とのいずれを採用するかは、例えば、ユーザの操作に応じて選択することができる。さらに、ファイル制御部４３では、ユーザの操作に応じて、HEIFファイルとJPEGファイルとの間の相互変換を行うことができる。

【0035】

さらに、ファイル制御部４３では、HEIFファイルの生成にあたって、HEIFファイル外の外部データ（HEIFファイルに格納されていないデータ）と関連付けるHEIFファイル内の内部データ（HEIFファイルに格納されたデータ）と、その外部データを特定する特定情報とを関連付けて、HEIFファイルに格納することができる。内部データと、その内部データと関連付ける外部データの特定情報とが関連付けられて格納されたHEIFファイルを、関連付け型HEIFファイルともいう。関連付け型HEIFファイルには、例えば、内部データと特定情報とを関連付ける関連付け情報を格納すること等によって、内部データと特定情報とを関連付けて格納することができる。

【0036】

＜JPEGファイル＞

【0037】

図２は、JPEG(Joint Photographic Experts Group)に準拠したJPEGファイルのフォーマットの例を示す図である。

【0038】

JPEGファイルは、例えば、Exifのメタデータ、サムネイル画像、XMP(Extensible Metadata Platform)（登録商標）のメタデータ、主画像及び簡易表示用画像の格納場所（位置）等を表すMPF、主画像、並びに、簡易表示用画像が格納されて構成される。簡易表示用画像としては、例えば、スクリーンネイル画像を採用することができる。

【0039】

＜ISOベースメディアファイルフォーマット＞

【0040】

図３は、ISOベースメディアファイルフォーマットの例を示す図である。

【0041】

HEIF(ISO/IEC 23008-12)は、ISOベースメディアファイルフォーマット(ISO/IEC 14496-12)に準拠したファイルフォーマットであり、したがって、HEIFファイルは、ISOベースメディアファイルフォーマットに準拠する。

【0042】

ISOベースメディアファイルフォーマットは、データを格納するコンテナとしてのボックス(box)と呼ばれる単位で構成され、ボックス構造と呼ばれる構造を有する。

【0043】

ボックスは、タイプ(box type)、及び、実データ(data)等を有する。タイプは、ボックス内の実データの種類を表す。実データとしては、画像（静止画、動画）や、オーディオ、字幕（サブタイトル）等の再生可能なメディアデータ、属性名（フィールド名）とその属性名（で表される変数）の属性値（フィールド値）、その他の各種のデータを採用することができる。

【0044】

さらに、実データとしては、ボックスを採用することができる。すなわち、ボックスは、実データとして、ボックスを持つことができ、これにより、階層構造にすることができる。

【0045】

ISOベースメディアファイルフォーマットに準拠したベースメディアファイルは、ftypボックス、moovボックス(MovieBox)、metaボックス(MetaBox)、及び、mdatボックス(MediaDataBox)等を有することができる。ftypボックスには、ファイルフォーマットを識別する識別情報が格納される。moovボックスは、trakボックス等を格納することができる。metaボックスは、iinfボックス、iprpボックス、irefボックス、ilocボックス等を格納することができる。mdatボックスは、メディアデータ（AVデータ）、その他任意のデータを格納することができる。

【0046】

HEIFは、以上のようなISOベースメディアファイルフォーマットに準拠する。

【0047】

＜HEIFファイル＞

【0048】

図４は、HEIFに準拠したHEIFファイルのフォーマットの例を示す図である。

【0049】

HEIFファイルには、大きく分けて、イメージアイテム形式と、イメージシーケンス形式とがある。さらに、イメージアイテム形式には、後述するアイテムを１つだけ有するシングルイメージ形式と、アイテムを複数有するイメージコレクション形式とがある。

【0050】

イメージアイテム形式のHEIFファイルは、ftypボックス、metaボックス、及び、mdatボックスを有する。

【0051】

イメージシーケンス形式のHEIFファイルは、ftypボックス、moovボックス、及び、mdatボックスを有する。

【0052】

なお、HEIFファイルは、metaボックス及びmoovボックスのうちの一方だけでなく、両方を有することもできる。

【0053】

ftypボックスには、ファイルフォーマットを識別する識別情報、例えば、ファイルがイメージアイテム形式又はイメージシーケンス形式のHEIFファイルであること等が格納される。

【0054】

metaボックス及びmoovボックスには、mdatボックスに格納されるメディアデータの再生や管理等に必要な、例えば、メディアデータの格納場所等のメタデータが格納される。

【0055】

mdatボックスには、メディアデータ（AVデータ）等が格納される。

【0056】

ディジタルカメラ１０において、イメージアイテム形式とイメージシーケンス形式とのHEIFファイルのうちのいずれのHEIFファイルを生成するかは、例えば、ユーザの操作に応じて選択することができる。また、HEIFファイルのmdatボックスに、画像を符号化して格納する場合には、イメージアイテム形式については、イントラ符号化のみが許され、イメージシーケンス形式については、イントラ符号化及びインター符号化が許される。したがって、例えば、HEIFファイルに格納されたデータへの高速アクセスを優先する場合には、イメージアイテム形式のHEIFファイルの生成を選択し、HEIFファイルのサイズ（データ量）を小さくすることを優先する場合には、イメージシーケンス形式のHEIFファイルの生成を選択することができる。

【0057】

図５は、イメージアイテム形式のHEIFファイルのフォーマットの例を示す図である。

【0058】

イメージアイテム形式のHEIFファイルでは、ftypボックスに、イメージアイテム形式のHEIFファイルであることを表す情報、例えば、mif1等が（属性値として）格納される。

【0059】

metaボックスには、iinfボックス、irefボックス、iprpボックス、及び、ilocボックスが格納される。

【0060】

iinfボックスには、mdatボックスに格納されたメディアデータ（AVデータ）であるアイテムの数（を表す属性名と属性値）等が格納される。アイテムとは、イメージアイテム形式のHEIFファイルのmdatボックスに格納される１つのデータであり、例えば、１枚（画面）の画像が、アイテムである。本明細書では、静止画及び動画にかかわらず、画像の１枚を、フレームともいう。１フレームは、１アイテムである。

【0061】

irefボックスには、アイテムどうしの関連を表す情報が格納される。例えば、mdatボックスには、対応する主画像、スクリーンネイル画像、及び、サムネイル画像のそれぞれをアイテムとして格納することができる。mdatボックスに、主画像としてのアイテムI1、スクリーンネイル画像としてのアイテムI2、及び、サムネイル画像としてのアイテムI3が格納される場合、irefボックスには、アイテムI2がアイテムI1としての主画像のスクリーンネイル画像であることを表す情報や、アイテムI3がアイテムI1としての主画像のサムネイル画像であることを表す情報が格納される。

【0062】

iprpボックスには、アイテムのプロパティに関する情報が格納される。

【0063】

ilocボックスには、mdatボックスに格納されたアイテムの格納場所に関する情報が格納される。

【0064】

イメージアイテム形式の（HEIFファイルの）mdatボックスには、アイテムとしての、例えば、画像のフレームが格納される。mdatボックスには、１個以上のアイテムを格納することができる。また、mdatボックスには、アイテムとしてのフレームを符号化して格納することができる。但し、イメージアイテム形式のmdatボックスに格納するアイテムとしてのフレームの符号化は、イントラ符号化に制限される。アイテムとしてのフレームを符号化する符号化方式（コーデック）としては、例えば、HEVC等を採用することができる。

【0065】

図６は、図５のiprpボックスの例を示す図である。

【0066】

iprpボックスには、アイテムのプロパティに関するipcoボックス及びipmaボックスが格納される。ipcoボックスには、mdatボックスに格納されたアイテムのプロパティ、例えば、アイテムとしての画像のコーデックに関するコーデック情報やサイズに関する画サイズ情報が格納される。ipmaボックスには、mdatボックスに格納されたアイテムの、ipcoボックスに格納されたプロパティへのインデクス（ポインタ）が格納される。

【0067】

図７は、イメージシーケンス形式のHEIFファイルのフォーマットの例を示す図である。

【0068】

イメージシーケンス形式のHEIFファイルでは、ftypボックスに、イメージシーケンス形式のHEIFファイルであることを表す情報、例えば、msf1等が格納される。

【0069】

moovボックスには、trakボックスが格納される。trakボックスには、mdatボックスに格納されるトラックに関する情報が格納される。

【0070】

トラックは、画像や音声等の１つの独立した、タイムラインに従って再生されるメディアデータで構成される。例えば、トラックは、エレメンタリストリームとなる１フレーム以上の画像で構成される。mdatボックスに格納されるトラックについては、複数のトラック、例えば、同時に記録された画像及び音声それぞれのトラックを、同時に再生することができる。

【0071】

トラックのメディアデータは、サンプルと呼ばれる単位で構成される。サンプルとは、HEIFファイル内のメディアデータにアクセスする場合の、最小の単位（アクセス単位）である。したがって、サンプルより細かい単位で、HEIFファイル内のメディアデータにアクセスすることはできない。

【0072】

画像のメディアデータについては、例えば、１フレーム等が、１サンプルとなる。また、音声のメディアデータについては、例えば、その音声のメディアデータの規格で定められた１オーディオフレーム等が、１サンプルとなる。

【0073】

イメージシーケンス形式の（HEIFファイルの）mdatボックスにおいて、トラックのメディアデータは、チャンク(chunk)と呼ばれる単位で配置される。チャンクは、論理的に連続したアドレスに配置される１以上のサンプルの集合である。

【0074】

mdatボックスに、メディアデータとしての複数のトラックが格納される場合、その複数のトラックは、チャンク単位で、インターリーブして配置される。

【0075】

以上のように、イメージシーケンス形式のmdatボックスには、画像や音声等のメディアデータで構成される１以上のトラックが格納される。

【0076】

mdatボックスには、トラックを構成する画像のフレームを符号化して格納することができる。イメージシーケンス形式のmdatボックスに格納するトラックを構成するフレームの符号化には、GOP(Group of Picture)として、long GOPを採用するとともに、イントラ符号化及びインター符号化のいずれをも採用することができる。トラックを構成するフレームを符号化するコーデックとしては、例えば、HEVC等を採用することができる。

【0077】

図８は、trakボックスの例を示す図である。

【0078】

trakボックスには、tkhdボックス及びmdiaボックスを格納することができる。tkhdボックスには、trakボックスが管理するトラックの作成日時等の、トラックのヘッダ情報が格納される。mdiaボックスには、minfボックス等が格納される。minfボックスには、stblボックスが格納される。stblボックスには、トラックのサンプル、ひいては、チャンクにアクセスするための情報が格納されるstsdボックス、stscボックス、stszボックス、及び、stcoボックスが格納される。stsdボックスには、トラックのコーデックに関するコーデック情報が格納される。stscボックスには、チャンクサイズ（1チャンクのサンプル数）が格納される。stszボックスには、サンプルサイズが格納される。stcoボックスには、チャンクオフセット、すなわち、mdatボックスに格納されたトラックの各チャンクの配置位置のオフセットが格納される。

【0079】

ここで、イメージアイテム形式のHEIFファイルを、コレクションファイルともいい、イメージシーケンス形式のHEIFファイルを、シーケンスファイルともいう。さらに、イメージアイテム形式の関連付け型HEIFファイルを、関連付け型コレクションファイルともいい、イメージシーケンス形式の関連付け型HEIFファイルを、関連付け型シーケンスファイルともいう。

【0080】

ディジタルカメラ１０では、主画像、さらには、必要なスクリーンネイル画像、及び、サムネイル画像のうちの一方又は両方が格納されたHEIFファイル（関連付け型HEIFファイルを含む）を生成することができる。

【0081】

＜コレクションファイル＞

【0082】

図９は、主画像及びサムネイル画像が格納された通常のコレクションファイルの例を示す図である。

【0083】

ここで、通常のコレクションファイルとは、コレクションファイル内の内部データと、外部データの特定情報とが関連付けられていないコレクションファイルを意味する。

【0084】

いま、コレクションファイルのmdatボックスには、フレーム（アイテム）がHEVCで符号化されて格納されることとする。

【0085】

ftypボックスには、ファイルフォーマットを識別する識別情報として、イメージアイテム形式であることと、コーデックがHEVCであることとを表すheicが格納される。

【0086】

iinfボックスには、mdatボックスに格納されたアイテムの数（アイテム数）が格納される。図９では、アイテムID#1で特定される主画像（以下、主画像Item#1のようにも記載する）、主画像Item#2、アイテムID#101で特定されるサムネイル画像（以下、サムネイル画像Item#101のようにも記載する）、サムネイル画像Item#102の合計で４個のアイテム（フレーム）が、mdatボックスに格納されている。したがって、アイテム数は４である。なお、サムネイル画像Item#101は、主画像Item#1のサムネイル画像であり、サムネイル画像Item#102は、主画像Item#2のサムネイル画像である。

【0087】

iinfボックスには、さらに、例えば、mdatボックスに格納されたアイテムごとに、infeボックスが格納される。infeボックスには、アイテムを特定するアイテムIDと、アイテムタイプとが登録される。図９では、主画像Item#1及びItem#2、並びに、サムネイル画像Item#101及びIteｍ#102それぞれのinfeボックスが存在する。

【0088】

irefボックスには、mdatボックスに格納されたアイテムどうしを関連付ける情報として、例えば、thmbボックスが格納される。thmbボックスは、主画像とその主画像のサムネイル画像とを関連付ける情報としての参照元と参照先とが対応付けられて格納される。thmbボックスにおいて、参照元は、主画像のアイテムIDを表し、参照先は、参照元のアイテムIDで特定される主画像のサムネイル画像のアイテムIDを表す。したがって、参照元に対応付けられている参照先によれば、参照元が表すアイテムIDで特定される主画像のサムネイル画像のアイテムIDを認識することができる。また、参照先に対応付けられている参照元によれば、参照先が表すアイテムIDで特定されるサムネイル画像の主画像のアイテムIDを認識することができる。

【0089】

iprpボックスには、図６で説明したように、ipcoボックス及びipmaボックスが格納される。ipcoボックスには、図６で説明したように、mdatボックスに格納されたアイテムとしてのフレームのプロパティ、例えば、コーデックに関するコーデック情報やサイズに関する画サイズ情報が格納される。ipmaボックスには、図６で説明したように、mdatボックスに格納されたアイテムの、ipcoボックスに格納されたプロパティへのインデクスが格納される。

【0090】

ilocボックスには、図６で説明したようにmdatボックスにおけるアイテムの格納場所に関する情報が格納される。図９では、ilocボックスには、アイテム数が４であることが格納されている。さらに、ilocボックスには、mdatボックスに格納された主画像Item#1及びItem#2、並びに、サムネイル画像Item#101及びIteｍ#102それぞれの格納場所へのオフセット及びサイズがアイテムIDと対応付けられて格納されている。

【0091】

以下、図９の通常のコレクションファイルに、内部データと外部データの特定情報とを関連付けて格納した関連付け型コレクションファイルについて説明する。

【0092】

図１０は、第１の関連付け型コレクションファイルの例を示す図である。

【0093】

ここで、以下では、HEIFファイル内の内部データとしての主画像と関連付ける外部データとして、例えば、その主画像のRAW画像（が格納されたRAWファイル）を採用することとする。

【0094】

第１の関連付け型コレクションファイルには、内部データとしての主画像と、外部データとしてのRAW画像が格納されたRAWファイル（に格納されたRAW画像）の特定情報とを関連付ける関連付け情報を格納することで、主画像とRAW画像が格納されたRAWファイルの特定情報とが関連付けられて格納される。さらに、第１の関連付け型コレクションファイルでは、関連付け情報が、metaボックスに格納される。

【0095】

外部データとしてのRAW画像が格納されたRAWファイルの特定情報としては、RAWファイルのファイル名や、RAWファイルに対して発行されたuuid(Universally Unique Identifier)、URL(Uniform Resource Locator)、その他、RAWファイル（に格納されたRAW画像）を特定することができる任意の情報を採用することができる。

【0096】

第１の関連付け型コレクションファイルについては、metaボックスに格納される新たなボックスとして、関連付け情報が格納される関連付け情報格納ボックスが定義され、metaボックスに格納される。第１の関連付け型コレクションファイルの関連付け情報格納ボックスには、例えば、主画像を特定するアイテムIDと、その主画像に関連付ける（RAW画像が格納された）RAWファイル（に格納されたRAW画像）を特定する特定情報としてのuuidとが対応付けられた関連付け情報が格納される。さらに、関連付け情報格納ボックスには、RAWファイル（に格納されたRAW画像）と関連付けられる主画像の数（主画像数）が格納される。関連付け情報格納ボックスに格納される主画像数は、RAWファイルと関連付けられる主画像の数であるので、mdatボックスに格納されている主画像の数以下の値になる。

【0097】

図１０では、主画像Item#1のRAWファイルのuuid（主画像Item#1と関連付けられたRAW画像のuuid）が、UUID#1になっており、主画像Item#2のRAWファイルのuuidが、UUID#2になっている。いま、uuidがUUID#iのRAWファイルを、RAWファイルUUID#iと記述することとすると、図１０では、主画像Item#1のアイテムID#1とRAWファイルUUID#1のuuidとが対応付けられ、かつ、主画像Item#2のアイテムID#2とRAWファイルUUID#2のuuidとが対応付けられた関連付け情報が、関連付け情報格納ボックスに格納されている。

【0098】

図１１は、第２の関連付け型コレクションファイルの例を示す図である。

【0099】

第２の関連付け型コレクションファイルには、第１の関連付けコレクションファイルと同様に、内部データとしての主画像と、外部データとしてのRAWファイルの特定情報とを関連付ける関連付け情報を格納することで、主画像とRAWファイルの特定情報とが関連付けられて格納される。但し、第２の関連付け型コレクションファイルでは、関連付け情報が、mdatボックスに格納される。

【0100】

第２の関連付け型コレクションファイルについては、例えば、第１の関連付けコレクションファイルの場合と同様の関連付け情報が、アイテムとして、mdatボックスに格納される。図１１では、関連付け情報が、アイテムID#201のアイテムとして、mdatボックスに格納されている。

【0101】

以上のように、第２の関連付け型コレクションファイルでは、アイテムItem#201としての関連付け情報が、mdatボックスに格納されることに応じて、metaボックスに格納される情報が、図９の通常のコレクションファイルの場合と異なる。第２の関連付け型コレクションファイルでは、アイテムItem#201としての関連付け情報のメタデータが、metaボックスに格納される。

【0102】

具体的には、第２の関連付け型コレクションファイルでは、iinfボックス及びilocボックスに格納されるアイテム数が、図９の場合の４から、その４に、アイテムItem#201の１を加えた５になる。さらに、iinfボックスに、アイテムItem#201に対するinfeボックスが追加されるとともに、ilocボックスに、アイテムItem#201の格納場所へのオフセット及びサイズが追加される。アイテムItem#201に対するinfeボックスには、アイテムItem#201のアイテムID#201と、アイテムItem#201が関連付け情報であることを表すアイテムタイプIDIF(identifying data info)とが格納される。IDIFは、アイテムが関連付け情報であることを表す、新たに定義された属性値（フィールド値）である。

【0103】

図１２は、第３の関連付け型コレクションファイルの例を示す図である。

【0104】

第３の関連付け型コレクションファイルでは、外部データとしてのRAWファイルの特定情報を、特定情報ごとに、アイテムとして、mdatボックスに格納するとともに、内部データとしての主画像と、外部データとしてのRAWファイルの特定情報とを関連付ける関連付け情報を、metaボックスに格納することで、主画像とRAWファイルの特定情報とが関連付けられて格納される。但し、第３の関連付け型コレクションファイルでは、関連付け情報は、アイテムとしての主画像のアイテムIDと、アイテムとしての（RAWファイルの）特定情報のアイテムIDとを対応付けた情報であり、metaボックス内のirefボックスに格納されるcdscボックスに格納される。

【0105】

cdscボックスには、主画像とその主画像のRAWファイルの特定情報それぞれとしてのアイテムどうしとを関連付ける情報としての参照元と参照先とを対応付けて格納することができる。cdscボックスにおいて、参照元は、主画像のアイテムIDを表し、参照先は、参照元のアイテムIDで特定される主画像のRAWファイルのアイテムとしての特定情報のアイテムIDを表す。

【0106】

図１２では、主画像Item#1のRAWファイルの特定情報としてのuuidであるUUID#1が、アイテムItem#201として、mdatボックスに格納され、主画像Item#2のRAWファイルの特定情報としてのuuidであるUUID#2が、アイテムItem#202として、mdatボックスに格納されている。さらに、主画像Item#1のアイテムID#1と、特定情報UUID#1のアイテムID#201とを、それぞれ参照元と参照先として対応付けた関連付け情報が格納されたcdscボックスが、irefボックスに格納され、主画像Item#2のアイテムID#2と、特定情報UUID#2のアイテムID#202とを、それぞれ参照元と参照先として対応付けた関連付け情報が格納されたcdscボックスが、irefボックスに格納されている。

【0107】

＜シーケンスファイル＞

【0108】

図１３は、主画像のトラック及びその主画像のサムネイル画像のトラックが格納された通常のシーケンスファイルの例を示す図である。

【0109】

ここで、通常のシーケンスとは、シーケンスファイル内の内部データと、外部データの特定情報とが関連付けられていないシーケンスファイルを意味する。

【0110】

いま、シーケンスファイルのmdatボックスには、フレームがHEVCで符号化されて格納されることとする。

【0111】

ftypボックスには、ファイルフォーマットを識別する識別情報として、イメージシーケンス形式であることと、コーデックがHEVCであることとを表すhevcが格納される。

【0112】

moovボックスには、図７で説明したように、mdatボックスに格納されるトラックそれぞれを管理するtrakボックスが格納される。図１３では、トラックID#1で特定される主画像のトラック（以下、トラック#1のようにも記載する）、及び、トラック#1の主画像のサムネイル画像のトラック#2が、mdatボックスに格納されている。したがって、moovボックスには、トラック#1を管理するtrakボックスと、トラック#2を管理するtrakボックスとが格納される。トラック#2の（先頭から）n番目のサムネイル画像（のフレーム）は、トラック#1のn番目の主画像のサムネイル画像である。

【0113】

シーケンスファイルは、例えば、ディジタルカメラ１０で連写が行われた場合に、その連写で得られる複数フレームの主画像及びサムネイル画像を、それぞれ、1トラックとして記録する場合等に有用である。

【0114】

主画像のトラック#1を管理するtrakボックスのtkhdボックスには、トラック#1を特定するトラックID#1、トラック#1を構成する主画像の画サイズ、主画像が撮像されたときのディジタルカメラ１０の向きを表す回転情報、及び、トラック#1の作成日時が格納される。サムネイル画像のトラック#2を管理するtrakボックスのtkhdボックスには、トラック#2を特定するトラックID#2、及び、トラック#2の作成日時が格納される。

【0115】

trakボックスには、図７で説明したtkhdボックス及びmdiaボックスの他に、trefボックスを格納することができる。trefボックスには、そのtrefボックスが格納されたtrakボックスが管理するトラックと関連する他のトラックを特定するトラックID、及び、トラックの内容を表す情報等が格納される。図１３では、トラック#2を管理するtrakボックスの中に、trefボックスが設けられている。そして、そのtrefボックスには、トラック#2と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#2を構成するデータがサムネイル画像であること（トラック#2がサムネイル画像のトラックであること）(type=thmb)を表す情報が格納されている。

【0116】

trakボックスのmdiaボックスには、図８で説明したminfボックスの他、hdlrボックスを格納することができる。hdlrボックスには、そのhdlrボックスが格納されたtrakボックスが管理するトラックを構成するデータの種別を表す情報が格納される。主画像のトラック#1を管理するtrakボックスに（格納されるmdiaボックスに）格納されるhdlrボックスには、トラック#1を構成するデータがピクチャ（フレーム）であることを表す情報(pict)が格納され、サムネイル画像のトラック#2を管理するtrakボックスに格納されるhdlrボックスには、トラック#2を構成するデータがピクチャであることを表す情報が格納される。

【0117】

minfボックスについては、図８で説明した通りである。

【0118】

以下、図１３の通常のシーケンスファイルに、内部データと外部データの特定情報とを関連付けて格納した関連付け型シーケンスファイルについて説明する。

【0119】

図１４は、関連付け型シーケンスファイルの例を示す図である。

【0120】

関連付け型シーケンスファイルでは、外部データとしてのRAWファイルの特定情報としてのuuidの（エレメンタリ）ストリーム(Meta ES)のトラック#3が、mdatボックスに追加されるとともに、そのトラック#3を管理するtrakボックスが、moovボックスに追加される。

【0121】

ここで、トラック#1は、タイムライン上に並ぶ主画像の１フレーム以上の時系列であり、トラック#3は、タイムライン上に並ぶ、主画像の各フレームのRAWファイルのuuidの時系列である。

【0122】

トラック#3の（先頭から）n番目のuuidは、トラック#1のn番目の主画像のフレームのRAWファイルの特定情報である。また、mdatボックスに格納された複数のトラック（のデータ）は、１つのタイムライン上の時刻情報に従って同期して再生することができる。したがって、主画像のトラック#1と、トラック#1を構成する主画像の各フレームのRAWファイルのuuid（のストリーム）のトラック#3とを、mdatボックスに格納することで、トラック#1のn番目の主画像のフレームと、その主画像（のフレーム）のRAWファイルのuuidとは、関連付けられて格納される。この場合、トラック#1の主画像のフレームと、その主画像（のフレーム）のRAWファイルのuuidとは、タイムライン上の時刻情報により関連付けられるということができる。

【0123】

なお、トラック#3の（先頭から）n番目のuuidは、トラック#1のn番目のフレームのRAWファイルの特定情報であり、トラック#1を構成する主画像（のフレーム）と、トラック#3を構成するuuidとは、トラックに配置される順番によって関連付けられると捉えることもできる。

【0124】

関連付け型シーケンスファイルでは、RAWファイルのuuidのトラック#3が、mdatボックスに追加されることに応じて、そのトラック#3を管理するtrakボックスが、moovボックスに追加される。

【0125】

RAWファイルのuuidのトラック#3を管理するtrakボックスには、tkhdボックス、trefボックス、及び、mdiaボックス等が格納される。

【0126】

トラック#3を管理するtrakボックスのtkhdボックスには、トラック#3を特定するトラックID#3、及び、トラック#3の作成日時が格納される。

【0127】

トラック#3を管理するtrakボックスのtrefボックスには、そのtrefボックスが格納されたtrakボックスが管理するトラック#3と関連する他のトラックを特定するトラックID、及び、トラック#3の内容を表す情報等が格納される。トラック#3を構成するuuidは、トラック#1を構成する主画像のRAWファイルの特定情報であり、トラック#3は、トラック#1と関連しているので、図１４のトラック#3を管理するtrakボックスのtrefボックスには、トラック#3と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#3がメタデータ（ここでは、特定情報）のトラックであること(type=cdsc)を表す情報が格納される。

【0128】

トラック#3を管理するtrakボックスのmdiaボックスには、hdlrボックス及びminfボックスが格納される。トラック#3を管理するtrakボックスにおいて、hdlrボックスには、トラック#3を構成するデータが（主画像の）メタデータであることを表す情報が格納され、minfボックスには、トラック#3についてのstscボックス、stscボックス、stszボックス、及び、stcoボックスが格納される。

【0129】

＜HEIFファイルの生成及び再生＞

【0130】

図１５は、関連付け型HEIFファイルを生成する生成処理の例の概要を説明するフローチャートである。

【0131】

生成処理では、ステップＳ１１において、ファイル制御部４３は、主画像のフレームのRAWファイル（RAW画像）の特定情報としてのuuidを生成し、処理は、ステップＳ１２に進む。

【0132】

ステップＳ１２では、ファイル制御部４３は、ステップＳ１１で生成したuuidを、主画像のフレームのRAWファイル（RAW画像）に割り当て、処理は、ステップＳ１３に進む。

【0133】

ステップＳ１３では、ファイル制御部４３は、HEIFファイルに主画像のフレームと、そのフレームのRAWファイルのuuidとを関連付けて格納した関連付け型HEIFファイルを生成し、生成処理を終了する。

【0134】

図１６は、関連付け型HEIFファイルを再生する再生処理の例の概要を説明するフローチャートである。

【0135】

再生処理では、ステップＳ２１において、ファイル制御部４３は、例えば、メディア１４に記憶されたHEIFファイルに格納された主画像のフレームの個々を識別するハンドルのハンドルリストを生成し、処理は、ステップＳ２２に進む。

【0136】

ここで、主画像のフレームのハンドルは、そのフレームが格納されたHEIFファイルのファイル名を含む。コレクションファイルに格納された主画像のフレーム（アイテム）のハンドルは、さらに、そのフレームのアイテムIDを含む。シーケンスファイルに格納された主画像のフレームのハンドルは、さらに、そのフレームの時刻情報を含む。主画像のフレームのハンドルによれば、そのハンドルに対するフレームを、一意に識別（特定）することができる。

【0137】

なお、シーケンスファイルに格納された主画像のフレームのハンドルには、フレームの時刻情報に代えて、フレームを含むトラックのトラックIDと、そのトラックにおけるフレームの順番（何番目のフレームであるか）とを含めることができる。

【0138】

シーケンスファイルに格納される、主画像のフレームで構成されるトラックが、１つであっても複数であっても、各フレームの時刻情報はユニークである。したがって、フレームの時刻情報によれば、シーケンスファイルに複数のトラックが格納されていても、その複数のトラックそれぞれを構成するフレームから、ハンドルに含まれる時刻情報のフレームを、一意に特定することができる。そのため、主画像のフレームのハンドルに、そのフレームの時刻情報を含める場合には、そのフレームが存在するトラックのトラックIDがなくても、時刻情報に対するフレームを、一意に特定することができる。

【0139】

ハンドルリストは、メディア１４に記憶されたHEIFファイルに格納された主画像のフレームすべてを対象に生成することもできるし、特定の作成日時のフレーム等の、特定の条件で絞り込んだフレームのみを対象に生成することもできる。

【0140】

ファイル制御部４３において、ハンドルリストの生成後、HEIFファイルへのアクセスは、必要に応じて、ハンドルリストを参照して行われる。

【0141】

ステップＳ２２では、例えば、ユーザが、サムネイル画像の表示を行うように、ディジタルカメラ１０を操作すること等を待って、UI制御部４７は、サムネイル画像の表示を、ファイル制御部４３に要求する。ファイル制御部４３は、UI制御部４７からのサムネイル画像の表示の要求に応じて、ハンドルリストのハンドルにより識別される主画像のフレームのサムネイル画像（のフレーム）を、HEIFファイルから読み出す。そして、ファイル制御部４３は、HEIFファイルから読み出されたサムネイル画像の一覧を、例えば、液晶パネル１９（図１）に表示させ、処理は、ステップＳ２２からステップＳ２３に進む。

【0142】

ステップＳ２３では、例えば、ユーザが、サムネイル画像の一覧から、所望のサムネイル（のフレーム）を選択すること等を待って、UI制御部４７は、ユーザが選択したサムネイル画像に対応する主画像を、ファイル制御部４３に要求する。ファイル制御部４３は、UI制御部４７からの主画像の要求に応じて、その主画像を、HEIFファイルから読み出す。ファイル制御部４３は、HEIFファイルから読み出された主画像を、必要に応じて、液晶パネル１９に表示させることができる。

【0143】

又は、UI制御部４７は、ユーザが選択したサムネイル画像に対応する主画像のRAWファイルのuuidを、ファイル制御部４３に要求する。ファイル制御部４３は、UI制御部４７からのuuidの要求に応じて、そのuuidを、関連付け型HEIFファイルから読み出す。ファイル制御部４３は、必要に応じて、関連付け型HEIFファイルから読み出されたuuidにより特定されるRAWファイルにアクセスすることができる。

【0144】

図１７は、コレクションファイルを再生する再生処理の例を説明するフローチャートである。

【0145】

ステップＳ３１において、ファイル制御部４３は、再生対象の画像（アイテム）である再生対象画像のアイテムID（以下、再生対象アイテムIDともいう）の取得を行い、処理は、ステップＳ３２に進む。

【0146】

再生対象アイテムIDの取得では、例えば、ハンドルリストの任意のハンドルにより識別される主画像や、その主画像のサムネイル画像、サムネイル画像の一覧からユーザが選択したサムネイル画像（以下、選択サムネイル画像ともいう）、選択サムネイル画像の主画像等を、再生対象画像として、その再生対象画像のアイテムID（再生対象アイテムID）が取得される。

【0147】

ステップＳ３２では、ファイル制御部４３は、ステップＳ３１で取得された再生対象アイテムIDに応じて、再生対象画像の読み出しを行う。

【0148】

再生対象画像の読み出しでは、再生対象アイテムIDにより特定される再生対象画像が、コレクションファイルから読み出される。

【0149】

図１８は、図１７のステップＳ３２の再生対象画像の読み出しの処理の例を説明するフローチャートである。

【0150】

ステップＳ４１において、ファイル制御部４３は、コレクションファイル（図９ないし図１２）のilocボックスから、再生対象アイテムIDを検索し、処理は、ステップＳ４２に進む。

【0151】

ステップＳ４２では、ファイル制御部４３は、ilocボックスにおいて、ステップＳ４１で検索された再生対象アイテムIDに対応付けられているオフセット及びサイズを読み出し、処理は、ステップＳ４３に進む。

【0152】

ステップＳ４３では、ファイル制御部４３は、再生対象アイテムIDに対応付けられているオフセット及びサイズに応じて、コレクションファイルのmdatボックスに格納された再生対象画像を読み出し、処理は終了する。

【0153】

図１９は、図１７のステップＳ３１の再生対象アイテムIDの取得の処理の第１の例を説明するフローチャートである。

【0154】

すなわち、図１９は、サムネイル画像を再生対象画像として、その再生対象画像であるサムネイル画像のアイテムIDの取得の例を示している。

【0155】

なお、図１９では、ファイル制御部４３は、例えば、ハンドルから、再生対象画像としてサムネイル画像の主画像のアイテムIDを認識していることとする。

【0156】

ステップＳ５１において、ファイル制御部４３は、コレクションファイル（図９ないし図１２）のirefボックスの中のthmbボックスから、参照元が主画像のアイテムIDに一致するthmbボックスを検索し、処理は、ステップＳ５２に進む。

【0157】

ステップＳ５２では、ファイル制御部４３は、ステップＳ５１で検索された、参照元が主画像のアイテムIDに一致するthmbボックス内の参照先を、再生対象画像としてのサムネイル画像のアイテムIDとして読み出し、処理は終了する。

【0158】

図２０は、図１７のステップＳ３１の再生対象アイテムIDの取得の処理の第２の例を説明するフローチャートである。

【0159】

すなわち、図２０は、主画像を再生対象画像として、その再生対象画像である主画像のアイテムIDの取得の例を示している。

【0160】

なお、図２０では、例えば、ユーザが、サムネイル画像の一覧からサムネイル画像（選択サムネイル画像）を選択し、ファイル制御部４３は、その選択サムネイル画像のアイテムIDを認識していることとする。

【0161】

ステップＳ６１において、ファイル制御部４３は、コレクションファイル（図９ないし図１２）のirefボックスの中のthmbボックスから、参照先が選択サムネイル画像のアイテムIDに一致するthmbボックスを検索し、処理は、ステップＳ６２に進む。

【0162】

ステップＳ６２では、ファイル制御部４３は、ステップＳ６１で検索された、参照先が選択サムネイル画像のアイテムIDに一致するthmbボックス内の参照元を、再生対象画像としての主画像のアイテムIDとして読み出し、処理は終了する。

【0163】

図２１は、図１０の第１の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【0164】

なお、図２１では、例えば、ファイル制御部４３は、ハンドルリスト等によって、所定の主画像のアイテムIDを認識していることとする。

【0165】

ステップＳ７１において、ファイル制御部４３は、第１の関連付け型コレクションファイル（図１０）の関連付け情報格納ボックスの関連付け情報から、所定の主画像のアイテムIDを検索し、処理は、ステップＳ７２に進む。

【0166】

ステップＳ７２では、ファイル制御部４３は、関連付け情報において、ステップＳ７１で検索された所定の主画像のアイテムIDに対応付けられているuuidを読み出し、処理は終了する。

【0167】

ファイル制御部４３は、以上のように読み出されたuuidにより、所定の主画像のRAWファイルにアクセスすることができる。

【0168】

図２２は、図１１の第２の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【0169】

なお、図２２では、例えば、ファイル制御部４３は、ハンドルリスト等によって、所定の主画像のアイテムIDを認識していることとする。

【0170】

ステップＳ８１において、ファイル制御部４３は、第２の関連付け型コレクションファイル（図１１）のiinfボックス内のinfeボックスから、アイテムが関連付け情報であることを表すアイテムタイプIDIFのinfeボックスを検索し、処理は、ステップＳ８２に進む。

【0171】

ステップＳ８２では、ファイル制御部４３は、ステップＳ８１で検索された、アイテムタイプIDIFのinfeボックスから、アイテムとしての関連付け情報のアイテムIDを読み出し、処理は、ステップＳ８３に進む。

【0172】

ステップＳ８３では、ファイル制御部４３は、第２の関連付け型コレクションファイルのilocボックスから、ステップＳ８２で読み出された、関連付け情報のアイテムIDを検索し、処理は、ステップＳ８４に進む。

【0173】

ステップＳ８４では、ファイル制御部４３は、ilocボックスにおいて、ステップＳ８３で検索された、関連付け情報のアイテムIDに対応付けられているオフセット及びサイズを読み出し、処理は、ステップＳ８５に進む。

【0174】

ステップＳ８５では、ファイル制御部４３は、ステップＳ８４で読み出された、関連付け情報のアイテムIDに対応付けられているオフセット及びサイズに応じて、第２の関連付け型コレクションファイルのmdatボックスに格納されたアイテムとしての関連付け情報を読み出し、処理は、ステップＳ８６に進む。

【0175】

ステップＳ８６では、ファイル制御部４３は、ステップＳ８５で読み出された関連付け情報から、所定の主画像のアイテムIDを検索し、処理は、ステップＳ８７に進む。

【0176】

ステップＳ８７では、ファイル制御部４３は、関連付け情報において、ステップＳ８６で検索された、所定の主画像のアイテムIDに対応付けられているuuidを読み出し、処理は終了する。

【0177】

ファイル制御部４３は、以上のように読み出されたuuidにより、所定の主画像のRAWファイルにアクセスすることができる。

【0178】

図２３は、図１２の第３の関連付け型コレクションファイルから所定の主画像のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【0179】

なお、図２３では、例えば、ファイル制御部４３は、ハンドルリスト等によって、所定の主画像のアイテムIDを認識していることとする。

【0180】

ステップＳ９１において、ファイル制御部４３は、第３の関連付け型コレクションファイル（図１２）のirefボックス内のcdscボックスから、参照元が所定の主画像のアイテムIDに一致するcdscボックスを検索し、処理は、ステップＳ９２に進む。

【0181】

ステップＳ９２では、ファイル制御部４３は、ステップＳ９１で検索された、参照元が所定の主画像のアイテムIDに一致するcdscボックス内の参照先を、アイテムとしての、所定の主画像のRAWファイルの特定情報のアイテムIDとして読み出し、処理は、ステップＳ９３に進む。

【0182】

ステップＳ９３では、ファイル制御部４３は、第３の関連付け型コレクションファイルのilocボックスから、ステップＳ９２で読み出された、アイテムとしての特定情報のアイテムIDを検索し、処理は、ステップＳ９４に進む。

【0183】

ステップＳ９４では、ファイル制御部４３は、ilocボックスにおいて、ステップＳ９３で検索された、特定情報のアイテムIDに対応付けられているオフセット及びサイズを読み出し、処理は、ステップＳ９５に進む。

【0184】

ステップＳ９５では、ファイル制御部４３は、ステップＳ９４で読み出された、特定情報のアイテムIDに対応付けられているオフセット及びサイズに応じて、第３の関連付け型コレクションファイルのmdatボックスに格納された、所定の主画像のRAWファイルの特定情報としてのuuidを読み出し、処理は終了する。

【0185】

ファイル制御部４３は、以上のように読み出されたuuidにより、所定の主画像のRAWファイルにアクセスすることができる。

【0186】

図２４は、コレクションファイルから主画像のアイテムIDのリストを取得する処理の例を説明するフローチャートである。

【0187】

コレクションファイルから主画像のアイテムIDのリストを取得する処理は、例えば、ハンドルリストを生成する場合等に行われる。

【0188】

ステップＳ１０１において、ファイル制御部４３は、コレクションファイル（図９ないし図１２）のiinfボックス内のすべてのinfeボックスから、アイテムIDを読み出し、主画像のアイテムIDのリスト（以下、主画像リストともいう）に登録して、処理は、ステップＳ１０２に進む。

【0189】

ステップＳ１０２では、ファイル制御部４３は、コレクションファイルのirefボックス内のすべてのボックスから、参照先になっているアイテムIDを読み出し、主画像リストから除外して、処理は終了する。

【0190】

以上の処理後、主画像リストに登録されているアイテムIDが、主画像のアイテムIDとなる。

【0191】

図２５は、シーケンスファイルから所定の時刻情報に対する主画像（のフレーム）のサムネイル画像を再生する処理の例を説明するフローチャートである。

【0192】

なお、図２５では、例えば、ファイル制御部４３は、ハンドルリスト等によって、所定の主画像の時刻情報（又は順番）を認識していることとする。

【0193】

ステップＳ１１１において、ファイル制御部４３は、シーケンスファイル（図１３及び図１４）のmoovボックス内のtrakボックスから、trefボックスに、トラックを構成するデータがサムネイル画像であることを表す情報が格納されたtrakボックス、すなわち、trefボックス内のtypeがthmbになっているtrakボックスを、所定の時刻情報に対する主画像のサムネイル画像のトラックを管理するtrakボックスとして検索し、処理は、ステップＳ１１２に進む。

【0194】

ステップＳ１１２では、ファイル制御部４３は、ステップＳ１１１で検索されたtrakボックス内のtkhdボックス内のトラックIDを、所定の時刻情報に対する主画像のサムネイル画像のトラックのトラックIDとして読み出し、処理は、ステップＳ１１３に進む。

【0195】

ステップＳ１１３では、ファイル制御部４３は、ステップＳ１１２で読み出されたトラックIDのトラックを再生し、そのトラックから、所定の時刻情報（又は順番）に対するサムネイル画像（のフレーム）を、所定の時刻情報に対する主画像のサムネイル画像として取得して、処理は終了する。

【0196】

なお、シーケンスファイルに格納された画像のトラックを再生する処理は、MP4ファイルの動画再生の処理と同様である。

【0197】

図２６は、関連付け型シーケンスファイルから所定の主画像（のフレーム）のRAWファイルの特定情報としてのuuidを取得する処理の例を説明するフローチャートである。

【0198】

なお、図２６では、例えば、ファイル制御部４３は、ハンドルリスト等によって、所定の主画像の時刻情報（又は順番）を認識していることとする。

【0199】

ステップＳ１２１において、ファイル制御部４３は、関連付け型シーケンスファイル（図１４）のmoovボックス内のtrakボックスから、trefボックスに、トラックを構成するデータが特定情報であることを表す情報が格納されたtrakボックス、すなわち、trefボックス内のtypeがcdscになっているtrakボックスを、特定情報のトラックを管理するtrakボックスとして検索し、処理は、ステップＳ１２２に進む。

【0200】

ステップＳ１２２では、ファイル制御部４３は、ステップＳ１２１で検索されたtrakボックス内のtkhdボックス内のトラックIDを、特定情報のトラックのトラックIDとして読み出し、処理は、ステップＳ１２３に進む。

【0201】

ステップＳ１２３では、ファイル制御部４３は、ステップＳ１２２で読み出されたトラックIDのトラックから、所定の主画像の時刻情報（又は順番）に対する特定情報としてのuuidを、所定の主画像のRAWファイルのuuidとして取得して、処理は終了する。

【0202】

ファイル制御部４３は、以上のように取得されたuuidにより、所定の主画像のRAWファイルにアクセスすることができる。

【0203】

以上のように、ファイル制御部４３では、HEIFに準拠したHEIFファイルに、HEIFファイル内の主画像と、その主画像と関連付ける、HEIFファイル外の外部データを特定する特定情報とを関連付けて格納した関連付け型HEIFファイルの生成及び再生を行うので、HEIFファイル内に格納される主画像と、HEIFファイル外の外部データとを関連付けることができる。

【0204】

また、特定情報として、uuidを用いる場合には、外部データのファイル名が変更されても、uuidにより、HEIFファイル内の主画像と、ファイル名の変更後の外部データとの関連付けを維持することができる。

【0205】

＜外部データに割り当てられた特定情報の格納＞

【0206】

図２７は、外部データ（が格納されたファイル）として、主画像のRAWファイルを採用し、関連付け型コレクションファイルを生成する場合の、RAWファイルへのuuidの格納の例を示す図である。

【0207】

なお、図２７では、関連付け型コレクションファイルとして、第１の関連付け型コレクションファイルが採用されている。

【0208】

RAWファイルは、メタデータとしてのExifの付属情報を格納する領域の一部の領域として、マーカノート(MakerNote)と呼ばれる領域を有する。

【0209】

ファイル制御部４３は、RAWファイル（RAW画像）に割り当てられたuuidを、そのRAWファイルの、例えば、マーカノートに格納することができる。

【0210】

図２７では、関連付け型コレクションファイルに、４個のアイテムとしての主画像Item#1, Item#2, Item#3, Item#4が格納され、主画像Item#1, Item#2, Item#3, Item#4のRAW画像が格納されたRAWファイル#1, #2, #3, #4が生成されている。そして、RAWファイル#i（RAW画像）には、UUID#iが割り当てられ、主画像Item#iとその主画像Item#iのRAWファイル#iのUUID#iとを関連付ける関連付け情報として、主画像Item#iを特定するアイテムID#iと、その主画像Item#iに関連付けるRAWファイル#iのUUID#iとが対応付けられた関連付け情報が、関連付け情報格納ボックスに格納されている。

【0211】

図２８は、外部データとして、主画像のRAWファイルを採用し、関連付け型シーケンスファイルを生成する場合の、RAWファイルへのuuidの格納の例を示す図である。

【0212】

ファイル制御部４３は、関連付け型シーケンスファイルを生成する場合も、図２７で説明した関連付け型コレクションファイルを生成する場合と同様に、RAWファイルに割り当てられたuuidを、そのRAWファイルのマーカノートに格納することができる。

【0213】

図２８では、関連付け型シーケンスファイルに、４個のフレームとしての主画像#1, #2, #3, #4で構成されるトラック#1が格納され、主画像#1, #2, #3, #4のRAW画像が格納されたRAWファイル#1, #2, #3, #4が生成されている。そして、RAWファイル#iには、UUID#iが割り当てられ、関連付け型シーケンスファイルには、RAWファイル#iのUUID#iが、RAWファイル#i（RAW画像）に対応する主画像#iと同一の時刻情報を有するように配置されて構成されるトラック#3が格納されている。

【0214】

以上のように、RAWファイル#iのUUID#iが、RAWファイル#iに対応する主画像#iと同一の時刻情報を有するように配置されて、トラック#3が構成されることで、トラック#1のi番目の主画像#iとトラック#3のi番目のUUID#i、すなわち、主画像#iのRAWファイル#iのUUID#iとは、関連付けられて、関連付け型シーケンスファイルに格納される。

【0215】

以上においては、外部データとして、主画像のRAWファイル（RAW画像）を採用したが、外部データとしては、その他のデータを採用することができる。外部データとしては、例えば、主画像の撮像とともに録音した音声（音）等を採用することができる。音声を格納するファイルとしては、例えば、WAVフォーマットのWAVファイルや、MP4フォーマットのMP4ファイル等を採用することができる。以下では、音声を格納したファイルとして、例えば、WAVファイルを採用することとする。

【0216】

図２９は、外部データ（が格納されたファイル）として、主画像のWAVファイルを採用し、関連付け型コレクションファイルを生成する場合の、WAVファイルへのuuidの格納の例を示す図である。

【0217】

なお、図２９では、関連付け型コレクションファイルとして、第１の関連付け型コレクションファイルが採用されている。

【0218】

WAVファイルは、メタデータを記述する領域の一部の領域として、Listチャンクと呼ばれる領域を有する。

【0219】

ファイル制御部４３は、WAVファイル（音声）に割り当てられたuuidを、そのWAVファイルの、例えば、Listチャンクに格納することができる。

【0220】

図２９では、関連付け型コレクションファイルに、４個のアイテムとしての主画像Item#1, Item#2, Item#3, Item#4が格納され、主画像Item#1, Item#2, Item#3, Item#4のWAVファイル#1, #2, #3, #4が生成されている。そして、WAVファイル#i（音声）には、UUID#iが割り当てられ、主画像Item#iとその主画像Item#iのWAVファイル#iのUUID#iとを関連付ける関連付け情報として、主画像Item#iを特定するアイテムID#iと、その主画像Item#iに関連付けるWAVファイル#iのUUID#iとが対応付けられた関連付け情報が、関連付け情報格納ボックスに格納されている。

【0221】

図３０は、外部データとして、主画像のWAVファイルを採用し、関連付け型シーケンスファイルを生成する場合の、WAVファイルへのuuidの格納の例を示す図である。

【0222】

ファイル制御部４３は、関連付け型シーケンスファイルを生成する場合も、図２９で説明した関連付け型コレクションファイルを生成する場合と同様に、WAVファイルに割り当てられたuuidを、そのWAVファイルのListチャンクに格納することができる。

【0223】

図３０では、関連付け型シーケンスファイルに、４個のフレームとしての主画像#1, #2, #3, #4で構成されるトラック#1が格納され、主画像#1, #2, #3, #4のWAVファイル#1, #2, #3, #4が生成されている。そして、WAVファイル#iには、UUID#iが割り当てられ、関連付け型シーケンスファイルには、WAVファイル#iのUUID#iが、WAVファイル#iに対応する主画像#iと同一の時刻情報を有するように配置されて構成されるトラック#3が格納されている。

【0224】

以上のように、WAVファイル#iのUUID#iが、WAVファイル#iに対応する主画像#iと同一の時刻情報を有するように配置されて、トラック#3が構成されることで、トラック#1のi番目の主画像#iとトラック#3のi番目のUUID#i、すなわち、主画像#iのWAVファイル#iのUUID#iとは、関連付けられて、関連付け型シーケンスファイルに格納される。

【0225】

なお、本技術は、HEIFファイルの他、HEIFファイル以外のボックス構造を有する、例えば、ISOベースメディアファイルや、MP4ファイル、Miafファイル等に適用することができる。

【0226】

また、本技術は、その他、例えば、ボックス構造を有しない、画像（主画像）と、その画像の解像度を低下させた他の画像とを格納するファイル等に適用することができる。

【0227】

さらに、本技術は、外部データを、HEIFファイル内の主画像に関連付ける場合の他、HEIFファイル内のスクリーンネイル画像やサムネイル画像に関連付ける場合に適用することができる。

【0228】

また、本技術は、その他、例えば、外部データを、HEIFファイル内の主画像等の画像以外の内部データに関連付ける場合に適用することができる。

【0229】

＜インデクス表示＞
図３１は、ディジタルカメラ１０でのインデクス表示の例を説明する図である。

【0230】

ディジタルカメラ１０では、HEIFファイル（関連付け型HEIFファイルを含む）等の各種ファイルに格納された画像の一覧表示をインデクス表示として行うことができる。説明を簡単にするため、インデクス表示の対象とするファイルが、HEIFファイルであるとする。

【0231】

ディジタルカメラ１０は、インデクス表示において、HEIFファイルに格納されたサムネイル画像Thm#iを読み出し、そのサムネイル画像Thm#iをマトリクス状に配置した一覧画面を、液晶パネル１９に表示する。

【0232】

図３１では、サムネイル画像Thm#iを、横×縦が３×３に配置した一覧画面が生成されている。

【0233】

インデクス表示の対象とするHEIFファイルに格納されたサムネイル画像Thm#iの総数が、一覧画面に配置することができるサムネイル画像の数（ここでは、９個）を超える場合には、一覧画面の上部に、必要な数のタブが設けられる。図３１において、黒塗りのタブは、選択されているタブである。

【0234】

デフォルトでは、（左から）１番目のタブが選択され、インデクス表示の対象とする最初の９個のHEIFファイルに格納されたサムネイル画像Thm#1ないしThm#9が配置された一覧画面が表示される。

【0235】

ユーザが、２番目のタブを選択すると、インデクス表示の対象とする次の９個のHEIFファイルに格納されたサムネイル画像Thm#10ないしThm#18が配置された一覧画面が表示される。

【0236】

以下同様に、ユーザが選択するタブに応じた９個（以下）のHEIFファイルに格納されたサムネイル画像が配置された一覧画面が表示される。ここで、一覧画面のサムネイル画像の配置は、３×３に限定されるものではない。

【0237】

なお、図３１では、ディジタルカメラ１０は、共有ボタン及びRAW編集ボタンが設けられている。

【0238】

一覧画面のサムネイル画像Thm#iが選択された状態で、共有ボタンが操作されると、一覧画面で選択されているサムネイル画像Thm#iに対応する主画像が、ディジタルカメラ１０以外の外部機器に送信され、その外部機器との間で共有される。

【0239】

一覧画面のサムネイル画像Thm#iが選択された状態で、RAW編集ボタンが操作されると、ディジタルカメラ１０では、例えば、一覧画面で選択されているサムネイル画像Thm#iに対応する（主画像に関連付けられている）RAW画像が、RAWファイルから読み出され、一覧画面に代えて、液晶パネル１９に表示される。これにより、ディジタルカメラ１０は、RAW画像が編集可能な状態となる。

【0240】

以上のようなインデクス表示では、インデクス表示の対象とするHEIFファイルの数が多くなると、その多くのHEIFファイルのopen/closeを行う必要があり、一覧画面を表示するまでに時間を要することがある。

【0241】

さらに、インデクス表示の対象とするHEIFファイルに、シーケンスファイルが含まれている場合、そのシーケンスファイルに格納されたサムネイル画像Thm#iがlong GOPで符号化されているときには、インデクス表示のために行われる処理が冗長になることがある。

【0242】

例えば、GOPを構成する１５フレームのサムネイル画像Thm#iのうちの、１フレーム目ないし９フレーム目のサムネイル画像Thm#1ないしThm#9が、１枚目の一覧画面に配置され、１０フレーム目ないし１５フレーム目のサムネイル画像Thm#10ないしThm#15が、２枚目の一覧画面に配置される場合、一覧画面の表示が、２枚目以外の一覧画面から、２枚目の一覧画面に切り替えられるときには、２枚目の一覧画面に配置される１０フレーム目ないし１５フレーム目のサムネイル画像Thm#10ないしThm#15を復号するために、２枚目の一覧画面に配置されない１フレーム目ないし９フレーム目のサムネイル画像Thm#1ないしThm#9のうちの、１０フレーム目ないし１５フレーム目のサムネイル画像Thm#10ないしThm#15の復号に必要なサムネイル画像Thm#iを復号しなければならない。

【0243】

図３２は、ディジタルカメラ１０以外の外部デバイスでのインデクス表示の例を説明する図である。

【0244】

ディジタルカメラ１０で得られたHEIFファイルに格納された画像については、ディジタルカメラ１０以外の外部デバイスにおいてインデクス表示を行うことができる。

【0245】

外部デバイスにおいてインデクス表示を行う場合には、例えば、インデクス表示の対象とするHEIFファイルが、ネットワークを経由して、外部デバイスに送信され、外部デバイスにおいて、ディジタルカメラ１０でのインデクス表示と同様にして、インデクス表示が行われる。

【0246】

ディジタルカメラ１０から外部デバイスへのHEIFファイルの送信は、インターネットや、LAN、USB、その他任意の有線又は無線ネットワークを介して行うことができる。また、ディジタルカメラ１０から外部デバイスへのHEIFファイルの送信は、クラウドコンピュータを介して行うことができる。

【0247】

外部デバイスにおいて、ディジタルカメラ１０で得られたHEIFファイルに格納された画像について、インデクス表示を行う場合にも、ディジタルカメラ１０においてインデクス表示を行う場合と同様に、一覧画面を表示するまでに時間を要することや、インデクス表示のために行われる処理が冗長になることがある。

【0248】

さらに、外部デバイスにおいてインデクス表示を行う場合には、ディジタルカメラ１０から外部デバイスに、一覧画面の生成に必要なHEIFファイルの送信に時間を要し、例えば、ユーザが外部デバイスでのインデクス表示を要求してから、実際に一覧画面が表示されるまでの応答性が悪くなることがある。

【0249】

図３３は、第１の関連付け型コレクションファイルを対象とするインデクス表示の例を示す図である。

【0250】

ここで、あるHEIFファイルAと、そのHEIFファイルAと異なる他のHEIFファイルBとでは、重複するアイテムIDを使用することができる。例えば、HEIFファイルA内の１つのアイテムのアイテムIDを1とし、HEIFファイルB内の１つのアイテムのアイテムIDを1とすることができる。但し、本実施の形態では、説明を分かりやすくするため、HEIFファイルAとHEIFファイルBとにおいて、適宜、重複しないアイテムIDを使用することとする。

【0251】

図３３では、４個の第１の関連付け型コレクションファイル（HEIFファイル）#１ないし#４が、インデクス表示の対象になっている。

【0252】

図３３の第１の関連付け型コレクションファイル#iでは、１フレームの主画像Item#iと、その主画像Item#iのサムネイル画像Item#(1000+i)とが、mdatボックスに格納されている。さらに、主画像数が１であること、及び、主画像Item#iのアイテムID#iと、主画像Item#iに関連付けられた外部データの特定情報としてのUUID#iとが対応付けられた関連付け情報を有する関連付け情報格納ボックスが、metaボックスに格納されている。

【0253】

以上のような４個の第１の関連付け型コレクションファイル#１ないし#４を対象として、インデクス表示が行われる場合には、例えば、４個の第１の関連付け型コレクションファイル#１ないし#４からサムネイル画像Item#1001ないしItem#1004が、それぞれ読み出される。そして、サムネイル画像Item#1001ないしItem#1004が配置された一覧画面が生成される。

【0254】

したがって、ディジタルカメラ１０及び外部デバイスにおいてインデクス表示が行われる場合には、第１の関連付け型コレクションファイル#１ないし#４からサムネイル画像Item#1001ないしItem#1004をそれぞれ読み出すために、複数である４個の第１の関連付け型コレクションファイル#１ないし#４それぞれのopen/closeが行われるため、インデクス表示の応答性が悪くなることがある。

【0255】

さらに、外部デバイスにおいてインデクス表示が行われる場合には、ディジタルカメラ１０から外部デバイスに、複数である４個の第１の関連付け型コレクションファイル#１ないし#４を送信しなければならず、その送信に時間を要し、インデクス表示の応答性が悪くなることがある。

【0256】

図３４は、第１の関連付け型コレクションファイルを対象とするインデクス表示の他の例を示す図である。

【0257】

図３４では、１個の第１の関連付け型コレクションファイル（HEIFファイル）#１が、インデクス表示の対象になっている。

【0258】

図３４の第１の関連付け型コレクションファイル#1では、複数である４フレームの主画像Item#1ないしItem#4と、その主画像Item#1ないしItem#4それぞれのサムネイル画像Item#1001ないしItem#1004とが、mdatボックスに格納されている。

【0259】

さらに、主画像数が４であること、及び、４フレームの主画像Item#1ないしItem#4それぞれについて、主画像Item#iのアイテムID#iと、主画像に関連付けられた外部データの特定情報としてのUUID#iとが対応付けられた関連付け情報を有する関連付け情報格納ボックスが、metaボックスに格納されている。

【0260】

以上のような第１の関連付け型コレクションファイル#１を対象として、インデクス表示が行われる場合には、例えば、第１の関連付け型コレクションファイル#１からサムネイル画像Item#1001ないしItem#1004が読み出される。そして、サムネイル画像Item#1001ないしItem#1004が配置された一覧画面が生成される。

【0261】

したがって、ディジタルカメラ１０及び外部デバイスにおいてインデクス表示が行われる場合には、第１の関連付け型コレクションファイル#１からサムネイル画像Item#1001ないしItem#1004だけを読み出すために、第１の関連付け型コレクションファイル#１のシークが行われるため、インデクス表示の応答性が悪くなる。

【0262】

また、図３４の第１の関連付け型コレクションファイルには、複数である４フレームの主画像Item#1ないしItem#4が格納されているため、ファイルサイズが大きい。

【0263】

したがって、外部デバイスにおいてインデクス表示が行われる場合には、ディジタルカメラ１０から外部デバイスに、ファイルサイズが大きい第１の関連付け型コレクションファイル#１を送信しなければならず、その送信に時間を要し、インデクス表示の応答性が悪くなることがある。

【0264】

なお、関連付け型コレクションファイル以外のコレクションファイルを対象とするインデクス表示は、関連付け型コレクションファイルを対象とするインデクス表示と同様にして行うことができる。

【0265】

図３５は、関連付け型シーケンスファイルを対象とするインデクス表示の例を示す図である。

【0266】

図３５では、１個の関連付け型シーケンスファイル（HEIFファイル）#１が、インデクス表示の対象になっている。

【0267】

図３５の関連付け型シーケンスファイル#1では、複数である４フレームの主画像で構成されるトラック#1、その主画像それぞれの４フレームのサムネイル画像で構成されるトラック#2、及び、４フレームの主画像それぞれに関連付けられた外部データの特定情報としてのUUID#1ないしUUID#4で構成されるトラック#3が、mdatボックスに格納されている。

【0268】

さらに、トラック#1ないし#3を管理するtrakボックスそれぞれが、moovボックスに格納されている。

【0269】

トラック#1ないし#3を管理するtrakボックスは、それぞれ、そのtrakボックスが管理するトラックのトラックIDが格納されたtkhdボックスを有する。トラック#2を管理するtrakボックスは、さらに、トラック#2と関連する他のトラックがトラック#1であること（を表す情報）(track_ID=1)、及び、トラック#2がサムネイル画像のトラックであること(type=thmb)が格納されたtrefボックスを有する。トラック#3を管理するtrakボックスは、さらに、トラック#3と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#3がメタデータ（特定情報）のトラックであること(type=cdsc)が格納されたtrefボックスを有する。

【0270】

以上のような関連付け型シーケンスファイル#１を対象として、インデクス表示が行われる場合には、例えば、関連付け型シーケンスファイル#１から４フレームのサムネイル画像（の符号化データ）が読み出されて復号される。そして、４フレームのサムネイル画像が配置された一覧画面が生成される。

【0271】

関連付け型シーケンスファイルでは、サムネイル画像が、例えば、long GOPで符号化された状態で格納される。

【0272】

したがって、インター符号化されたサムネイル画像を復号（再生）するのに、そのサムネイル画像が参照している他のサムネイル画像を復号する必要がある。さらに、他のサムネイル画像が、さらに他のサムネイル画像を参照している場合には、そのサムネイル画像を復号する必要がある。

【0273】

関連付け型シーケンスファイルは、インター符号化された画像を格納することができるため、インター符号化された画像の格納が許されないコレクションファイルよりもファイルサイズを小さくすることができる。しかしながら、インター符号化に起因して、あるサムネイル画像の復号に、他の１フレーム以上のサムネイル画像の復号が必要になることがある。

【0274】

そのため、ディジタルカメラ１０及び外部デバイスにおいて、例えば、一覧画面のスクロールやタブによる切り換えを行う場合に、スクロール後やタブの切り換え後に表示すべきサムネイル画像の復号に時間を要し、インデクス表示の応答性が悪くなることがある。

【0275】

なお、関連付け型シーケンスファイル以外のシーケンスファイルを対象とするインデクス表示は、関連付け型シーケンスファイルを対象とするインデクス表示と同様にして行うことができる。

【0276】

そこで、ディジタルカメラ１０では、１以上のHEIFファイルに格納された主画像のサムネイル画像等の、主画像に関連する関連画像を格納した別のHEIFファイルを、１以上のHEIFファイルを代理するプロキシファイルとして生成することができる。そして、ディジタルカメラ１０や外部デバイスでは、プロキシファイルを用いて、インデクス表示を行うことができる。

【0277】

プロキシファイルを用いて、インデクス表示を行うことにより、ディジタルカメラ１０及び外部デバイスにおいて、インデクス表示としての一覧画面の表示を行うまでに時間を要することを抑制し、インデクス表示を迅速に行うことができる。

【0278】

また、インデクス表示のために行われる処理が冗長になることを抑制することができる。

【0279】

さらに、ディジタルカメラ１０から外部デバイスに、プロキシファイルを送信することで、一覧画面の生成に必要なHEIFファイルを送信する場合に比較して、送信に要する時間を短縮し、外部デバイスの応答性が悪くなることを抑制することができる。

【0280】

また、プロキシファイルでは、１以上のHEIFファイルに格納された主画像のサムネイル画像がまとまっているので、サムネイル画像の管理が容易になる。

【0281】

＜プロキシファイル＞

【0282】

図３６は、プロキシファイルの第１の例を説明する図である。

【0283】

ファイル制御部４３は、HEIFファイル（関連付け型HEIFファイルを含む）に格納された主画像に関連する関連画像を、HEIFファイルの主画像として格納したプロキシファイルを生成することができる。

【0284】

プロキシファイルとしては、例えば、HEIFファイル、特に、コレクションファイルを採用することができる。その他、プロキシファイルとしては、シーケンスファイルや、HEIFファイル以外のファイルを採用することができる。

【0285】

また、プロキシファイルには、HEIFファイルに格納された主画像に関連する関連画像の他、HEIFファイル以外の、例えば、JPEGファイルやRAWファイルに格納された画像に関連する関連画像を格納することができる。

【0286】

HEIFファイルに格納された主画像に関連する関連画像としては、主画像と画素数（サイズ）が異なる同一内容の画像、すなわち、例えば、主画像の画素数（サイズ）を少なくしたサムネイル画像や、主画像とYUVの信号フォーマットが異なる同一内容の画像、主画像と１画素のビット割り当て（階調）が異なる同一内容の画像、その他の主画像に関連する画像を採用することができる。

【0287】

例えば、HEIFファイルに、主画像とサムネイル画像とが格納されている場合、その主画像に関連する関連画像としてのサムネイル画像は、主画像から画素を間引く等して生成してもよいし、HEIFファイルに格納されているサムネイル画像をコピーして用いてもよい。

【0288】

すなわち、主画像に関連する画像として、主画像のサムネイル画像を採用する場合に、HEIFファイルに、主画像とサムネイル画像とが格納されているときには、HEIFファイルに格納された主画像から、サムネイル画像を新たに生成し、そのサムネイル画像を、関連画像として、プロキシファイルに格納することもできるし、HEIFファイルに格納されたサムネイル画像（のコピー）を、関連画像として、プロキシファイルに格納することもできる。以下では、例えば、主画像の関連画像として、主画像のサムネイル画像を採用することとする。

【0289】

ここで、プロキシファイルとしてのHEIFファイルのアイテムを、プロキシファイルでないHEIFファイルのアイテムと区別するために、プロキシアイテムともいう。

【0290】

図３６では、コレクションファイルである４個のHEIFファイル#1ないし#4が存在し、各HEIFファイル#iのmdatボックスには、１つの主画像Item#iと、その主画像Item#iのサムネイル画像Item#(1000+i)とが格納されている。

【0291】

そして、図３６では、HEIFファイル#1ないし#4に格納されたサムネイル画像Item#1001ないしItem#1004（のコピー）が、プロキシアイテムItem#1ないしItem#4として格納されたプロキシファイルが生成されている。

【0292】

プロキシアイテムItem#iは、画像としては、HEIFファイル#iの主画像Item#iのサムネイル画像であるが、プロキシファイル（としてのHEIFファイル）の主画像である。

【0293】

プロキシファイルの第１の例については、例えば、プロキシファイル内のプロキシアイテム#iとしてのサムネイル画像と、HEIFファイル#１ないし#4内の主画像Item#1ないしItem#4それぞれ、又は、サムネイル画像Item#1001ないしItem#1004それぞれとのマッチングを行うことにより、プロキシアイテム#iとしてのサムネイル画像と最もマッチする主画像Item#i’、又は、プロキシアイテム#iとしてのサムネイル画像と最もマッチするサムネイル画像Item#(1000+i’)に対応する主画像Item#i’を、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0294】

図３７は、プロキシファイルの第２の例を説明する図である。

【0295】

図３７では、図３６と同様に、HEIFファイル#1ないし#4に格納されたサムネイル画像Item#1001ないしItem#1004が、プロキシアイテムItem#1ないしItem#4として格納されたプロキシファイルが生成されている。

【0296】

さらに、図３７では、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応する主画像Item#iを、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（主画像Item#i）の特定情報とを関連付けて格納した関連付け型HEIFファイルが、プロキシファイルとして生成されている。

【0297】

すなわち、図３７では、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）のアイテムID#iと、そのサムネイル画像に対応する主画像Item#iの特定情報としてのhash値#iとが対応付けられた関連付け情報が格納された関連付け情報格納ボックスが、プロキシファイルとしてのHEIFファイルのmetaボックスに格納されている。したがって、図３７のプロキシファイルは、第１の関連付け型コレクションファイル（図１０）である。

【0298】

主画像Item#iの特定情報としてのhash値#iとしては、例えば、主画像Item#iを入力とするhash値を援用することができる。

【0299】

また、図３７では、プロキシファイルの関連付け情報格納ボックスにおいて、主画像数は、プロキシファイルに格納されたプロキシアイテムItem#1ないしItem#4としての、主画像Item#1ないし#4のサムネイル画像の数、すなわち、対応付けられているアイテムIDと特定情報としてのhash値とのセット数である４になっている。

【0300】

なお、プロキシファイル（のファイルフォーマット）としては、第１の関連付け型コレクションファイル以外の関連付け型HEIFファイル、すなわち、第２の関連付け型コレクションファイル（図１１）や、第３の関連付け型コレクションファイル（図１２）、関連付け型シーケンスファイル（図１４）を採用することができる。

【0301】

プロキシファイルの第２の例については、例えば、プロキシアイテム#iとしてのサムネイル画像に関連付けられた特定情報としてのhash値（サムネイル画像のアイテムIDに対応付けられたhash値）によって特定される主画像、すなわち、HEIFファイル#１ないし#4内の主画像Item#1ないしItem#4それぞれを入力として生成されるhash値のうちの、hash値#iに一致するhash値が得られる主画像Item#i’を、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0302】

図３８は、プロキシファイルの第３の例を説明する図である。

【0303】

図３８では、図３７と同様に、コレクションファイルであるHEIFファイル#1ないし#4に格納されたサムネイル画像Item#1001ないしItem#1004が、プロキシアイテムItem#1ないしItem#4として格納されたプロキシファイルが生成されている。

【0304】

さらに、図３８では、図３７と同様に、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応する主画像Item#iを、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（主画像Item#i）の特定情報とを関連付けて格納した関連付け型HEIFファイルが、プロキシファイルとして生成されている。

【0305】

すなわち、図３８では、図３７と同様に、プロキシアイテムItem#iとしてのサムネイル画像のアイテムID#iと、そのサムネイル画像に対応する主画像Item#iの特定情報とが対応付けられた関連付け情報が格納された関連付け情報格納ボックスが、プロキシファイルとしてのHEIFファイルのmetaボックスに格納されている。したがって、図３８のプロキシファイルは、第１の関連付け型コレクションファイルである。

【0306】

但し、図３８では、主画像Item#iの特定情報としては、hash値に代えて、uuidが採用されている。

【0307】

外部データとしての主画像Item#iの特定情報として、uuidが採用される場合、図２７ないし図３０で説明した場合と同様に、外部データとしての主画像Item#iが格納されたHEIFファイル#iに、その主画像Item#iの特定情報としてのUUID#iを書き込む（格納する）必要がある。

【0308】

そこで、ファイル制御部４３は、外部データとしての主画像Item#iのUUID#iを、その主画像Item#iが格納されたHEIFファイル#iに書き込む。

【0309】

外部データとしての主画像Item#iが格納されたHEIFファイル#iへのUUID#iの書き込みは、HEIFファイル#iのmetaボックスやmdatボックスに対して行うことができる。外部データとしての主画像Item#iが格納されたHEIFファイル#iへのUUID#iの書き込みは、例えば、関連付け型HEIFファイルのフォーマットに従って、すなわち、UUID#iの書き込み後のフォーマットが、関連付け型HEIFファイルのフォーマットになるように、行うことができる。

【0310】

図３８では、外部データとしての主画像Item#iが格納されたHEIFファイル#iへのUUID#iの書き込みが、第１の関連付け型コレクションファイルのファイルフォーマットに従って行われている。

【0311】

すなわち、図３８では、主画像Item#iのUUID#iと、その主画像Item#iのアイテムID#iとが対応付けられて格納された関連付け情報格納ボックスが、HEIFファイル#iのmetaボックスに格納されることで、HEIFファイル#iは、第１の関連付け型コレクションファイルになっている（第１の関連付け型コレクションファイルのフォーマットに従っている）。

【0312】

また、図３８では、（第１の関連付け型コレクションファイルとなった）HEIFファイル#iの関連付け情報格納ボックスにおいて、主画像数は、HEIFファイル#iに格納された主画像Item#iの数、すなわち、対応付けられているアイテムIDと特定情報としてのuuidとのセット数である１になっている。

【0313】

ここで、プロキシファイルに関連画像としてのサムネイル画像が格納される対象の主画像が格納されるHEIFファイルは、プロキシファイルの生成の対象となるHEIFファイルであり、以下、プロキシ対象ファイルともいう。

【0314】

プロキシ対象ファイルとしてのHEIFファイル#iへのUUID#iの書き込みは、HEIFファイル#iがコレクションファイルである場合には、第１ないし第３の関連付け型コレクションファイルのいずれかのフォーマットに従って行うことができ、HEIFファイルが#iがシーケンスファイルである場合には、関連付け型シーケンスファイルのフォーマットに従って行うことができる。

【0315】

なお、プロキシ対象ファイルとしてのHEIFファイル#iにUUID#iを書き込んだ後のHEIFファイル#iにとって、そのHEIFファイル#i内の主画像Item#iは、HEIFファイル#iの内部データであり、プロキシファイルのプロキシアイテムItem#iとしてのサムネイル画像は、HEIFファイル#iの外部データである。

【0316】

そして、プロキシ対象ファイルとしてのHEIFファイル#iに書き込まれたUUID#iは、プロキシファイルにとって外部データである主画像#Item#iの特定情報であるが、プロキシアイテム#iを特定する特定情報であるともみなすことができる。

【0317】

この場合、UUID#iが書き込まれた後のプロキシ対象ファイルとしてのHEIFファイル#iは、内部データとしての主画像Item#iと、外部データとしてのプロキシアイテムItem#i、すなわち、プロキシファイル内の（主画像Item#iの）サムネイル画像の特定情報UUID#iとが関連付けられて格納された第１の関連付け型HEIFファイルであるとみなすことができる。

【0318】

プロキシファイルの第３の例については、例えば、プロキシアイテム#iとしてのサムネイル画像に関連付けられた特定情報としてのuuid（サムネイル画像のアイテムIDに対応付けられたuuid）によって特定される主画像、すなわち、HEIFファイル#１ないし#4内の主画像Item#1ないしItem#4のうちの、UUID#iと対応付けられているアイテムID#iの主画像Item#iを、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0319】

図３９は、プロキシファイルの第４の例を説明する図である。

【0320】

図３８では、プロキシ対象ファイルとしてのHEIFファイルが、４個のコレクションファイルであったが、図３９では、プロキシ対象ファイルとしてのHEIFファイルが、１個のシーケンスファイル#1である点で、図３９のプロキシファイルの第４の例は、図３８のプロキシファイルの第３の例と異なっている。

【0321】

ここで、図３９の、プロキシ対象ファイルとしてのコレクションファイル#1は、関連付け型シーケンスファイルでない、通常のシーケンスファイルになっている。

【0322】

図３９のシーケンスファイル#1では、複数である４フレームの主画像で構成されるトラック#1、及び、その４フレームの主画像それぞれの４フレームのサムネイル画像で構成されるトラック#2が、mdatボックスに格納されている。

【0323】

さらに、トラック#1及び#2を管理するtrakボックスそれぞれが、moovボックスに格納されている。

【0324】

トラック#1ないし#2を管理するtrakボックスは、それぞれ、そのtrakボックスが管理するトラックのトラックIDが格納されたtkhdボックスを有する。

【0325】

トラック#2を管理するtrakボックスは、さらに、トラック#2と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#2がサムネイル画像のトラックであること(type=thmb)が格納されたtrefボックスを有する。

【0326】

図３９では、例えば、シーケンスファイル#1に格納された４フレームのサムネイル画像が復号され、イントラ符号化される。

【0327】

そして、イントラ符号化された状態の４フレームのサムネイル画像が、プロキシアイテムItem#1ないしItem#4として格納されたプロキシファイルが生成される。このプロキシファイルには、さらに、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応するシーケンスファイル#1のトラック#1のiフレーム目（i番目のフレーム）の主画像を、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（iフレーム目の主画像）の特定情報とが関連付けられて格納される。

【0328】

すなわち、図３９では、図３８と同様に、プロキシアイテムItem#iとしてのサムネイル画像のアイテムID#iと、そのサムネイル画像に対応するiフレーム目の主画像の特定情報とが対応付けられた関連付け情報が格納された関連付け情報格納ボックスが、プロキシファイルとしてのHEIFファイルのmetaボックスに格納されている。したがって、図３９のプロキシファイルは、第１の関連付け型コレクションファイルである。

【0329】

図３９では、図３８と同様に、外部データとしての主画像の特定情報として、uuidが採用されている。外部データとしてのiフレーム目の主画像のuuidは、UUID#iになっている。

【0330】

以上のように、図３９では、外部データとしての主画像の特定情報として、uuidが採用されているため、図３８と同様に、外部データとしての主画像が格納されたプロキシ対象ファイルとしてのシーケンスファイル#1には、外部データとしての主画像の特定情報としてのuuidが書き込まれる（格納される）。

【0331】

図４０は、プロキシ対象ファイルとしてのシーケンスファイル#1への、外部データとしての主画像の特定情報としてのuuidの書き込みの例を説明する図である。

【0332】

外部データとしての主画像のuuidの、その主画像が格納されたシーケンスファイル#iへの書き込みは、シーケンスファイル#iのmoovボックスやmdatボックスに対して行うことができる。主画像のuuidの、その主画像が格納されたシーケンスファイル#iへの書き込みは、例えば、関連付け型HEIFファイルのフォーマットに従って、すなわち、uuidの書き込み後のフォーマットが、関連付け型HEIFファイルのフォーマットになるように行うことができる。

【0333】

図４０では、外部データとしての主画像が格納されたシーケンスファイル#1へのuuidの書き込みが、関連付け型シーケンスファイルのファイルフォーマットに従って行われている。

【0334】

すなわち、図４０では、トラック#1を構成する１フレーム目ないし４フレーム目の主画像のUUID#1ないしUUID#4のトラック#3、及び、トラック#3を管理するtrakボックスが生成され、トラック#3が、mdatボックスに格納されるとともに、トラック#3を管理するtrakボックスが、moovボックスに格納されることで、シーケンスファイル#1は、関連付け型シーケンスファイルになっている（関連付け型シーケンスファイルのフォーマットに従っている）。

【0335】

トラック#3は、タイムライン上の時刻情報、又は、トラック#3に配置する順番によって、トラック#1のiフレーム目の主画像と、その主画像のUUID#iとが関連付けられるように、１フレーム目ないし４フレーム目の主画像それぞれのUUID#1ないしUUID#4が配置されて構成される。

【0336】

トラック#3を管理するtrakボックスは、そのtrakボックスが管理するトラック#3のトラックIDが格納されたtkhdボックスを有する。

【0337】

トラック#3を管理するtrakボックスは、さらに、トラック#3と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#3がメタデータ（特定情報）のトラックであること(type=cdsc)が格納されたtrefボックスを有する。

【0338】

プロキシファイルの第４の例については、例えば、（関連付け型）シーケンスファイル#１のトラック#1を構成する４フレームの主画像のうちの、UUID#iと関連付けられているトラック#1のiフレーム目の主画像を、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0339】

なお、プロキシ対象ファイルとしてのシーケンスファイル#1にUUID#iを書き込んだ後のシーケンスファイル#1にとって、そのシーケンスファイル#1内の主画像は、シーケンスファイル#1の内部データであり、プロキシファイルのプロキシアイテムItem#iとしてのサムネイル画像は、シーケンスファイル#1の外部データである。

【0340】

そして、プロキシ対象ファイルとしてのシーケンスファイル#1に書き込まれたUUID#iは、プロキシファイルにとって外部データであるiフレーム目の主画像の特定情報であるが、プロキシアイテム#iを特定する特定情報であるともみなすことができる。

【0341】

この場合、UUID#iが書き込まれた後のプロキシ対象ファイルとしてのシーケンスファイル#1は、内部データとしてのiフレーム目の主画像と、外部データとしてのプロキシアイテムItem#i、すなわち、iフレーム目の主画像のサムネイル画像の特定情報UUID#iとが関連付けられて格納された関連付け型シーケンスファイルであるとみなすことができる。

【0342】

以上のようなプロキシファイルによれば、HEIFファイルに格納された主画像の関連画像としての、例えば、サムネイル画像のインデクス表示を迅速に行うことができる。さらに、インデクス表示における関連画像としてのサムネイル画像に対応する主画像を、容易に検出することができる。

【0343】

図４１は、第１の関連付け型コレクションファイルをプロキシ対象ファイルとするプロキシファイルの生成の例を説明する図である。

【0344】

図３６ないし図４０では、通常のHEIFファイル（関連付け型HEIFファイル以外のHEIFファイル）をプロキシ対象ファイルとして生成されるプロキシファイルについて説明したが、プロキシファイルは、通常のHEIFファイルの他、関連付け型HEIFファイルをプロキシ対象ファイルとして生成することができる。

【0345】

図４１では、プロキシ対象ファイルが、４個の第１の関連付け型コレクションファイル#１ないし#４になっている。

【0346】

図４１の第１の関連付け型コレクションファイル#iでは、１フレームの主画像Item#iと、その主画像Item#iのサムネイル画像Item#(1000+i)とが、mdatボックスに格納されている。さらに、主画像数が１であること、及び、主画像Item#iのアイテムID#iと、主画像Item#iに関連付けられた（図示せぬ）外部データの特定情報としてのUUID#iとが対応付けられた関連付け情報を有する関連付け情報格納ボックスが、metaボックスに格納されている。

【0347】

以上のように、第１の関連付け型コレクションファイル#iでは、主画像Item#iのアイテムID#iと、主画像Item#iに関連付けられた何らかの外部データの特定情報としてのUUID#iとが対応付けられた関連付け情報を有する関連付け情報格納ボックスが、metaボックスに格納されており、主画像Item#iは、UUID#iを、何らかの外部データの特定情報として、その外部データと既に関連付けられている。第１の関連付け型コレクションファイル#iにおいて、主画像Item#iと既に関連付けられている何らかの外部データを、関連付け済み外部データともいう。

【0348】

以上のような第１の関連付け型コレクションファイル#iをプロキシ対象ファイルとして、プロキシファイルを生成するプロキシファイル生成処理を行う場合には、ファイル制御部４３は、関連付け済み外部データの特定情報として既に使用されているUUID#iを、プロキシファイルにとって外部データとなる主画像Item#iの特定情報としても兼用で使用して、プロキシファイルを生成することができる。

【0349】

すなわち、プロキシファイル生成処理において、ファイル制御部４３は、第１の関連付け型コレクションファイル#1ないし#4に格納されたサムネイル画像Item#1001ないしItem#1004を、プロキシアイテムItem#1ないしItem#4として、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応する主画像Item#iを、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（主画像Item#i）の特定情報とを関連付けて格納した関連付け型HEIFファイルを、プロキシファイルとして生成する。

【0350】

例えば、ファイル制御部４３は、プロキシアイテムItem#iとしてのサムネイル画像のアイテムID#iと、そのサムネイル画像に対応する主画像Item#iの特定情報とが対応付けられた関連付け情報が格納された関連付け情報格納ボックスがmetaボックスに格納された第１の関連付け型コレクションファイルを、プロキシファイルとして生成する。

【0351】

以上のような第１の関連付け型コレクションファイル#iをプロキシ対象ファイルとするプロキシファイル生成処理では、プロキシファイルにとって外部データとなる主画像Item#iの特定情報として、第１の関連付け型コレクションファイル#iにおいて、主画像Item#iと関連付けられている関連付け済み外部データの特定情報としてのUUID#iを使用することができる。

【0352】

この場合、プロキシファイルにとって外部データとなる主画像Item#iの特定情報としてのUUID#iについては、図３８で説明したような、第１の関連付け型コレクションファイル#iへのUUID#iの書き込みを行う必要がない。第１の関連付け型コレクションファイル#iは、既にUUID#iが書き込まれた状態になっているからである。

【0353】

図４１のプロキシファイルについては、図３８のプロキシファイルの第３の例と同様に、例えば、第１のHEIFファイル#１ないし#4内の主画像Item#1ないしItem#4のうちの、UUID#iと対応付けられているアイテムID#iの主画像Item#iを、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0354】

図４２は、第１の関連付け型コレクションファイルをプロキシ対象ファイルとするプロキシファイルの生成の他の例を説明する図である。

【0355】

図４２では、プロキシ対象ファイルが、１個の第１の関連付け型コレクションファイル#1になっている。

【0356】

図４２の第１の関連付け型コレクションファイル#1では、複数である４フレームの主画像Item#1ないしItem#4と、その主画像Item#1ないしItem#4それぞれのサムネイル画像Item#1001ないしItem#1004とが、mdatボックスに格納されている。さらに、主画像数が４であること、及び、４フレームの主画像Item#1ないしItem#4それぞれについて、主画像Item#iのアイテムID#iと、主画像に関連付けられた関連付け済み外部データの特定情報としてのUUID#iとが対応付けられた関連付け情報を有する関連付け情報格納ボックスが、metaボックスに格納されている。

【0357】

以上のような第１の関連付け型コレクションファイル#1をプロキシ対象ファイルとしてプロキシファイル生成処理を行う場合には、ファイル制御部４３は、図４１の場合と同様に、関連付け済み外部データの特定情報として既に使用されているUUID#iを、プロキシファイルにとって外部データとなる主画像Item#iの特定情報としても兼用で使用して、プロキシファイルを生成することができる。

【0358】

すなわち、プロキシファイル生成処理において、ファイル制御部４３は、第１の関連付け型コレクションファイル#1に格納されたサムネイル画像Item#1001ないしItem#1004を、プロキシアイテムItem#1ないしItem#4として、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応する主画像Item#iを、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（主画像Item#i）の特定情報とを関連付けて格納した関連付け型HEIFファイルを、プロキシファイルとして生成する。

【0359】

例えば、ファイル制御部４３は、プロキシアイテムItem#iとしてのサムネイル画像のアイテムID#iと、そのサムネイル画像に対応する主画像Item#iの特定情報とが対応付けられた関連付け情報が格納された関連付け情報格納ボックスがmetaボックスに格納された第１の関連付け型コレクションファイルを、プロキシファイルとして生成する。

【0360】

以上のような第１の関連付け型コレクションファイル#iをプロキシ対象ファイルとするプロキシファイル生成処理では、プロキシファイルにとって外部データとなる主画像Item#iの特定情報として、第１の関連付け型コレクションファイル#iにおいて、主画像Item#iと関連付けられている関連付け済み外部データの特定情報としてのUUID#iを使用することができる。

【0361】

この場合、プロキシファイルにとって外部データとなる主画像Item#iの特定情報としてのUUID#iについては、図３８で説明したような、第１の関連付け型コレクションファイル#iへのUUID#iの書き込みを行う必要がない。第１の関連付け型コレクションファイル#iは、既にUUID#iが書き込まれた状態になっているからである。

【0362】

図４２のプロキシファイルについては、図３８のプロキシファイルの第３の例と同様に、例えば、第１のHEIFファイル#１ないし#4内の主画像Item#1ないしItem#4のうちの、UUID#iと対応付けられているアイテムID#iの主画像Item#iを、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0363】

図４３は、関連付け型シーケンスファイルをプロキシ対象ファイルとするプロキシファイルの生成の例を説明する図である。

【0364】

図４３では、プロキシ対象ファイルが、１個の関連付け型シーケンスファイル#1になっている。

【0365】

図４３の関連付け型シーケンスファイル#1では、複数である４フレームの主画像で構成されるトラック#1、その主画像それぞれの４フレームのサムネイル画像で構成されるトラック#2、及び、４フレームの主画像それぞれに関連付けられた関連付け済み外部データの特定情報としてのUUID#1ないしUUID#4で構成されるトラック#3が、mdatボックスに格納されている。

【0366】

さらに、図４３の関連付け型シーケンスファイル#1では、トラック#1ないし#3を管理するtrakボックスそれぞれが、moovボックスに格納されている。

【0367】

トラック#1ないし#3を管理するtrakボックスは、それぞれ、そのtrakボックスが管理するトラックのトラックIDが格納されたtkhdボックスを有する。

【0368】

トラック#2を管理するtrakボックスは、さらに、トラック#2と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#2がサムネイル画像のトラックであること(type=thmb)が格納されたtrefボックスを有する。

【0369】

トラック#3を管理するtrakボックスは、さらに、トラック#3と関連する他のトラックがトラック#1であること(track_ID=1)、及び、トラック#3がメタデータ（特定情報）のトラックであること(type=cdsc)が格納されたtrefボックスを有する。

【0370】

以上のような関連付け型シーケンスファイル#1をプロキシ対象ファイルとしてプロキシファイル生成処理を行う場合には、ファイル制御部４３は、図４１の場合と同様に、関連付け済み外部データの特定情報として既に使用されているUUID#iを、プロキシファイルにとって外部データとなる主画像Item#iの特定情報としても兼用で使用して、プロキシファイルを生成することができる。

【0371】

すなわち、プロキシファイル生成処理において、ファイル制御部４３は、関連付け型シーケンスファイル#1に格納された４フレームのサムネイル画像を、符号化制御部４２に復号させ、さらにイントラ符号化させる。

【0372】

そして、ファイル制御部４３は、イントラ符号化された状態の４フレームのサムネイル画像を、プロキシアイテムItem#1ないしItem#4として格納した第１の関連付け型コレクションファイルを、プロキシファイルとして生成する。

【0373】

このプロキシファイルには、さらに、プロキシアイテムItem#iとしてのサムネイル画像（プロキシファイルの主画像）をプロキシファイル内の内部データとするとともに、そのサムネイル画像に対応するシーケンスファイル#1のトラック#1のiフレーム目の主画像を、プロキシファイル外の外部データとして、内部データ（プロキシアイテムItem#iとしてのサムネイル画像）と、外部データ（iフレーム目の主画像）の特定情報とが関連付けられて格納される。

【0374】

すなわち、プロキシアイテムItem#iとしてのサムネイル画像のアイテムID#iと、そのサムネイル画像に対応するiフレーム目の主画像の特定情報とが対応付けられた関連付け情報が格納された関連付け情報格納ボックスが、プロキシファイルのmetaボックスに格納される。

【0375】

以上のような関連付け型シーケンスファイル#1をプロキシ対象ファイルとするプロキシファイル生成処理では、プロキシファイルにとって外部データとなるトラック#1のiフレーム目の主画像の特定情報として、関連付け型シーケンスファイル#1において、iフレーム目の主画像と関連付けられている関連付け済み外部データの特定情報としてのUUID#iを使用することができる。

【0376】

この場合、プロキシファイルにとって外部データとなるiフレーム目の主画像の特定情報としてのUUID#iについては、図３９及び図４０で説明したような、関連付け型シーケンスファイル#1へのUUID#iの書き込みを行う必要がない。関連付け型シーケンスファイル#1は、既にUUID#iが書き込まれた状態になっているからである。

【0377】

図４３のプロキシファイルについては、図３９及び図４０のプロキシファイルの第４の例と同様に、例えば、関連付け型シーケンスファイル#１のトラック#1を構成する４フレームの主画像のうちの、UUID#iと関連付けられているトラック#1のiフレーム目の主画像を、プロキシアイテム#iとしてのサムネイル画像に対応する主画像として検出することができる。

【0378】

図４４は、プロキシ対象ファイルと、そのプロキシ対象ファイルを用いたプロキシファイル生成処理により生成されるプロキシファイルとの組がとる形態を説明する図である。

【0379】

図４４のＡは、プロキシ対象ファイルとプロキシファイルとの組がとる第１の形態の例を示している。

【0380】

第１の形態では、プロキシファイルは、そのプロキシファイル内のプロキシアイテムとしてのサムネイル画像に対応する、プロキシ対象ファイル内の主画像の特定情報を有しない。同様に、プロキシ対象ファイルは、そのプロキシ対象ファイル内の主画像の特定情報を有しない。

【0381】

第１の形態では、例えば、プロキシファイル内のプロキシアイテムであるサムネイル画像と、プロキシ対象ファイル内の主画像とのマッチングを行うことにより、プロキシアイテムとしてのサムネイル画像と最もマッチする主画像を、プロキシアイテムであるサムネイル画像に対応する主画像として検出することができる。

【0382】

図４４のＢは、プロキシ対象ファイルとプロキシファイルとの組がとる第２の形態の例を示している。

【0383】

第２の形態では、プロキシファイルは、そのプロキシファイル内のプロキシアイテムとしてのサムネイル画像に対応する、プロキシ対象ファイル内の主画像の特定情報を有する。

【0384】

一方、プロキシ対象ファイルは、そのプロキシ対象ファイル内の主画像の特定情報を有しない。第２の形態において、主画像の特定情報としては、例えば、その主画像を入力とするhash値等の、主画像を用いて生成することができる情報を採用することができる。

【0385】

第２の形態では、例えば、プロキシ対象ファイル内の主画像を入力として生成されるhash値のうちの、プロキシファイル内のプロキシアイテムとしてのサムネイル画像に関連付けられた特定情報としてのhash値に一致するhash値が得られる主画像を、プロキシアイテムとしてのサムネイル画像に対応する主画像として検出することができる。

【0386】

図４４のＣは、プロキシ対象ファイルとプロキシファイルとの組がとる第３の形態の例を示している。

【0387】

第３の形態では、プロキシファイルは、そのプロキシファイル内のプロキシアイテムとしてのサムネイル画像に対応する、プロキシ対象ファイル内の主画像の特定情報を有する。

【0388】

同様に、プロキシ対象ファイルは、そのプロキシ対象ファイル内の主画像の特定情報を有する。第３の形態において、主画像の特定情報としては、例えば、uuid等の主画像を特定し得る情報を採用することができる。

【0389】

第３の形態では、例えば、プロキシファイルにおいてプロキシアイテムとしてのサムネイル画像に関連付けられた特定情報と同一の、プロキシ対象ファイル内の特定情報と関連付けられているプロキシ対象ファイル内の主画像を、プロキシアイテムとしてのサムネイル画像に対応する主画像として検出することができる。

【0390】

図４５は、プロキシ対象ファイルとプロキシファイルとの組がとる第２の形態の詳細例を示す図である。

【0391】

図４５では、２個のHEIFファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0392】

図４５において、プロキシ対象ファイルとしてのHEIFファイル#1には、2個の主画像A及びB、並びに、その主画像A及びBそれぞれのサムネイル画像A及びBが格納されている。プロキシ対象ファイルとしてのHEIFファイル#2には、2個の主画像C及びD、並びに、その主画像C及びDそれぞれのサムネイル画像C及びDが格納されている。

【0393】

そして、プロキシファイルには、サムネイル画像AないしDが、プロキシファイルの主画像として格納され、さらに、サムネイル画像AないしDに対応する主画像AないしDの特定情報が格納されている。主画像AないしDの特定情報としては、主画像AないしDを入力とするhash値AないしDが、それぞれ採用されている。

【0394】

第２の形態では、プロキシファイルに格納されたサムネイル画像が選択された場合、プロキシ対象ファイルとしてのHEIFファイル#1及び#2内の主画像AないしDそれぞれを入力として生成されるhash値のうちの、プロキシファイルにおいて選択されたサムネイル画像に関連付けられた特定情報としてのhash値に一致するhash値が得られる主画像を、プロキシファイルにおいて選択されたサムネイル画像に対応する主画像として検出することができる。

【0395】

図４６は、プロキシ対象ファイルとプロキシファイルとの組がとる第３の形態の詳細例を示す図である。

【0396】

図４６では、２個のHEIFファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0397】

図４６において、プロキシ対象ファイルとしてのHEIFファイル#1には、2個の主画像A及びB、並びに、その主画像A及びBそれぞれのサムネイル画像A及びBが格納されている。プロキシ対象ファイルとしてのHEIFファイル#2には、2個の主画像C及びD、並びに、その主画像C及びDそれぞれのサムネイル画像C及びDが格納されている。

【0398】

そして、プロキシファイルには、サムネイル画像AないしDが、プロキシファイルの主画像として格納され、さらに、サムネイル画像AないしDに対応する主画像AないしDの特定情報が格納されている。主画像AないしDの特定情報としては、uuid(UUID#A, UUID#B, UUID#C, UUID#D)が採用されている。

【0399】

主画像AないしDの特定情報としてのUUID#A, UUID#B, UUID#C, UUID#Dは、プロキシファイルの他、プロキシ対象ファイルにも格納されている（書き込まれている）。すなわち、主画像A及びBが格納されたプロキシ対象ファイルとしてのHEIFファイル#1には、その主画像A及びBのUUID#A及びUUID#Bが格納され、主画像C及びDが格納されたプロキシ対象ファイルとしてのHEIFファイル#2には、その主画像C及びDのUUID#C及びUUID#Dが格納されている。

【0400】

第３の形態では、プロキシファイルに格納されたサムネイル画像が選択された場合、プロキシファイルにおいて選択されたサムネイル画像に関連付けられたuuidと同一の、プロキシ対象ファイル内のuuidと関連付けられているプロキシ対象ファイル内の主画像を、プロキシファイルにおいて選択されたサムネイル画像に対応する主画像として検出することができる。

【0401】

＜プロキシファイルを用いたインデクス表示＞

【0402】

図４７は、ディジタルカメラ１０でのプロキシファイルを用いたインデクス表示の例を説明する図である。

【0403】

ディジタルカメラ１０は、インデクス表示において、プロキシファイルに格納されたサムネイル画像Thm#iを読み出し、そのサムネイル画像Thm#iをマトリクス状に配置した一覧画面を、液晶パネル１９に表示する。図４７では、図３１と同様に、サムネイル画像Thm#iを、横×縦が３×３に配置した一覧画面が生成される。インデクス表示の対象とするプロキシファイルに格納されたサムネイル画像Thm#iの総数が、一覧画面に配置することができるサムネイル画像の数（ここでは、９個）を超える場合には、一覧画面の上部に、必要な数のタブが設けられる。

【0404】

デフォルトでは、１番目のタブが選択され、インデクス表示の対象とする最初の９個のプロキシファイルに格納されたサムネイル画像Thm#1ないしThm#9が配置された一覧画面が表示される。ユーザが、２番目のタブを選択すると、インデクス表示の対象とする次の９個のプロキシファイルに格納されたサムネイル画像Thm#10ないしThm#18が配置された一覧画面が表示される。以下同様に、ユーザが選択するタブに応じた９個（以下）のプロキシファイルに格納されたサムネイル画像が配置された一覧画面が表示される。

【0405】

ここで、図３１の場合と同様に、一覧画面のサムネイル画像の配置は、３×３に限定されるものではない。また、共有ボタン及びRAW編集ボタンについては、図３１で説明した通りである。

【0406】

以上のようなプロキシファイルを用いたインデクス表示によれば、インデクス表示を適切に行うことができる。

【0407】

すなわち、プロキシファイルを用いたインデクス表示では、プロキシファイルのopen/closeを行えばよく、プロキシファイル内のサムネイル画像Thm#iに対応する主画像が格納されたHEIFファイルのopen/closeを行う必要はない。したがって、主画像が格納されたHEIFファイルのopen/closeを行う場合に比較して、一覧画面を表示するまでの時間を短縮し、一覧画面を迅速に表示することができる。

【0408】

さらに、インデクス表示の対象とするプロキシファイルには、サムネイル画像Thm#iが、インター符号化されずに格納されるので、すなわち、本実施の形態では、イントラ符号化されて格納されるので、インデクス表示のために行われる処理が冗長になることを防止することができる。具体的には、図３１で説明したような、シーケンスファイルに格納された、long GOPでインター符号化されたサムネイル画像Thm#iを表示する場合のように、あるサムネイル画像Thm#iを一覧画面に表示する場合に、そのサムネイル画像Thm#iを復号するために、他のサムネイル画像Thm#i’を復号する必要がない。

【0409】

図４８は、ディジタルカメラ１０以外の外部デバイスでのプロキシファイルを用いたインデクス表示の例を説明する図である。

【0410】

ディジタルカメラ１０以外の外部デバイスにおいてインデクス表示を行う場合には、例えば、インデクス表示の対象とするHEIFファイルに代えて、そのHEIFファイルをプロキシ対象ファイルとして用いて生成されたプロキシファイルを、ネットワークを経由して、外部デバイスに送信することができる。

【0411】

外部デバイスでは、ディジタルカメラ１０からのプロキシファイルが受信される。そして、外部デバイスでは、ディジタルカメラ１０においてプロキシファイルを用いたインデクス表示を行う場合と同様に、プロキシファイルに格納されたサムネイル画像Thm#iを用いて一覧画面が生成されて表示される。

【0412】

したがって、外部デバイスでは、ディジタルカメラ１０においてプロキシファイルを用いたインデクス表示を行う場合と同様に、インデクス表示を適切に行うことができる。すなわち、一覧画面を表示するまでの時間を短縮し、一覧画面を迅速に表示することができる。

【0413】

さらに、インデクス表示のために行われる処理が冗長になることを防止することができる。

【0414】

また、サムネイル画像が格納されたプロキシファイルのデータ量は、そのプロキシファイルに格納されたサムネイル画像に対応する主画像が格納されたHEIFファイルの合計のデータ量に比較して少ない。したがって、ディジタルカメラ１０から外部デバイスに対するプロキシファイルの送信は、図３２で説明したようなHEIFファイルの送信よりも短時間で行うことができる。

【0415】

以上から、ユーザが外部デバイスでのインデクス表示を要求してから、実際に一覧画面が表示されるまでの応答性を向上させることができる。

【0416】

なお、外部デバイスにおいて、一覧画面が表示された後、ユーザは、一覧画面内の任意のサムネイル画像Thm#iを選択することができる。ユーザがサムネイル画像Thm#iを選択すると、外部デバイスは、プロキシファイルにおいてサムネイル画像Thm#iに関連付けられている、そのサムネイル画像Thm#iに対応する主画像Main#iの特定情報を、ディジタルカメラ１０に送信することができる。ディジタルカメラ１０は、外部デバイスからの特定情報によって特定されるHEIFファイル内の主画像Main#iや、関連付け済み外部データとしての、例えば、主画像Main#iに対応するRAWファイル内のRAW画像を取得し、外部デバイスに送信して表示させることができる。

【0417】

図４９は、プロキシ対象ファイルとするHEIFファイルの選択の例を説明する図である。

【0418】

プロキシファイル生成処理にあたっては、例えば、図４１に示したように、１フレーム（以上）の主画像及びサムネイル画像が格納された複数のコレクションファイルを、プロキシ対象ファイルに選択して、プロキシファイルを生成することができる。

【0419】

また、例えば、図４２に示したように、複数フレームの主画像及びサムネイル画像が格納された１個（以上）のコレクションファイルを、プロキシ対象ファイルに選択して、プロキシファイルを生成することができる。

【0420】

さらに、例えば、図４３に示したように、１個（以上）のシーケンスファイルを、プロキシ対象ファイルに選択して、プロキシファイルを生成することができる。

【0421】

その他、プロキシファイルは、例えば、図４９に示すように、特定のディレクトリに格納されたHEIFファイルを、プロキシ対象ファイルに選択して生成することができる。

【0422】

図４９では、ルートディレクトリに、DCIMディレクトリが存在し、DCIMディレクトリに、100MSDCFディレクトリが存在する。そして、その100MSDCFディレクトリ内のHEIFファイルが、プロキシ対象ファイルに選択され、プロキシファイルが生成されている。

【0423】

図４９において、100MSDCFディレクトリには、１フレームの主画像及びサムネイル画像が格納された、ファイル名が”DSC00001.HEIF”及び”DSC00002.HEIF”の２個のコレクションファイル（HEIFファイル）が格納されている。そして、その２個のコレクションファイルをプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0424】

図５０は、プロキシ対象ファイルとするHEIFファイルの選択の他の例を説明する図である。

【0425】

プロキシファイルは、例えば、図５０に示すように、特定のメディア（例えば、ディジタルカメラ１０に装着されたメディア１４）に格納されたHEIFファイルを、プロキシ対象ファイルに選択して生成することができる。

【0426】

図５０では、メディア内のルートディレクトリに、DCIMディレクトリが存在し、DCIMディレクトリに、100MSDCFディレクトリ、101MSDCFディレクトリ、・・・、999MSDCFディレクトリが存在する。そして、100MSDCFディレクトリないし999MSDCFディレクトリ内のHEIFファイルが、プロキシ対象ファイルに選択され、プロキシファイルが生成されている。

【0427】

図５０において、100MSDCFディレクトリないし999MSDCFディレクトリには、全体で、１フレームの主画像及びサムネイル画像が格納されたＮ個のコレクションファイル（HEIFファイル）が格納され、そのＮ個のコレクションファイルをプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0428】

＜第１の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、プロキシファイルにサムネイル画像を追加する追加処理＞

【0429】

図５１は、第１の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、そのプロキシファイルにサムネイル画像を追加する追加処理を説明する図である。

【0430】

図５１は、第１の形態のプロキシファイルの構造の例を示している。

【0431】

図５１のＡは、プロキシファイルの生成時のプロキシファイルの構造の例を示している。なお、ここでは、プロキシファイルの生成時において、プロキシファイルには、プロキシ対象ファイルに格納された１個の主画像のサムネイル画像が格納されることとする。

【0432】

プロキシファイルの生成では、ファイル制御部４３は、例えば、空の領域（パティング領域）を有するfreeボックスを有し、プロキシ対象ファイルに格納された１個の主画像のサムネイル画像#1がプロキシアイテムとしてmdatボックスに格納された通常のコレクションファイルを、プロキシファイルとして生成する。

【0433】

freeボックスとは、任意のデータを格納することができるボックスである。freeボックス（の空の領域）の容量は、例えば、プロキシファイルに格納する（予定の）サムネイル画像の数等に応じて決定される。

【0434】

図５１では、freeボックスが、metaボックスとmdatボックスとの間のファイル階層に設けられている。但し、freeボックスは、その他、metaボックス内に設けることができる。

【0435】

図５１のＢは、他の主画像のサムネイル画像が追加された後のプロキシファイルの構造の例を示している。

【0436】

既に生成されているプロキシファイルには、サムネイル画像を追加することができる。既に生成されているプロキシファイルに、サムネイル画像を追加する処理を、追加処理ともいう。

【0437】

既に生成されている、例えば、図５１のＡのようなプロキシファイルに、他の主画像のサムネイル画像#2を格納する場合、ファイル制御部４３は、プロキシファイルのmdatボックスに既に格納されているサムネイル画像#1の後に追加する形で、他の主画像のサムネイル画像#2をプロキシアイテムとして格納する。

【0438】

さらに、ファイル制御部４３は、metaボックスを、プロキシアイテムとしてのサムネイル画像#2のメタデータを追加した状態に書き換え、書き換えによって増加したmetaボックスの容量の増加分だけ、freeボックスの容量（サイズ）を削減する。プロキシファイルへの、さらに他の主画像のサムネイル画像の追加は、同様にして行われる。

【0439】

プロキシファイルの生成後に、プロキシアイテムとしてのサムネイル画像を追加する場合、その追加するサムネイル画像のメタデータを、プロキシファイルのmetaボックスに追加する必要がある。この場合、メタデータの追加のための何らの措置も施していないときには、プロキシファイルにメタデータを追加すると、mdatボックスに既に格納されているデータのオフセットがずれることがある。

【0440】

mdatボックスに格納されたデータのオフセットがずれる場合、mdatボックスに格納されたデータのそれぞれについて、オフセットのずれ量を算出し、そのずれ量を反映したオフセットで、ilocボックスを書き直す必要があり、プロキシファイルにサムネイル画像を追加する追加処理の負荷が大になる。

【0441】

そこで、本実施の形態では、プロキシファイルの生成時に、プロキシファイルにfreeボックスを設けておく。そして、プロキシファイルにサムネイル画像を追加する追加処理を行う場合には、freeボックスを利用して、メタデータを追加することで、mdatボックスに既に格納されているデータのオフセットのずれを防止する。

【0442】

なお、追加処理において、サムネイル画像#2は、プロキシファイルのmdatボックスに既に格納されているサムネイル画像#1の後に追加する形で格納される（書き込まれる）。したがって、mdatボックスへのサムネイル画像#2の追加それ自体によっては、freeボックス（の空き領域）を消費しないし、mdatボックスに既に格納されているサムネイル画像#1のオフセットのずれも生じない。

【0443】

図５２は、第１の形態のプロキシファイルを生成するプロキシファイル生成処理の例を説明するフローチャートである。

【0444】

ステップＳ２１１において、ファイル制御部４３は、プロキシ対象ファイルに格納された主画像のサムネイル画像を、プロキシファイルにプロキシアイテムとして格納するサムネイル画像として取得し、処理は、ステップＳ２１２に進む。

【0445】

例えば、プロキシ対象ファイルが、コレクションファイル、又は、サムネイル画像すべてがイントラ符号化されて格納されているシーケンスファイルである場合、ファイル制御部４３は、プロキシ対象ファイルとしてのコレクションファイル、又は、シーケンスファイルから、サムネイル画像を読み出すことにより、プロキシファイルにプロキシアイテムとして格納するサムネイル画像を取得する。

【0446】

また、例えば、プロキシ対象ファイルが、サムネイル画像がlong GOPでインター符号化されて格納されているシーケンスファイルである場合、ファイル制御部４３は、プロキシ対象ファイルとしてのシーケンスファイルからサムネイル画像を生成することにより取得する。

【0447】

具体的には、ファイル制御部４３は、例えば、プロキシ対象ファイルとしてのシーケンスファイルに格納された主画像（又は主画像に対応するRAW画像）からYUVのサムネイル画像を生成してイントラ符号化することで、プロキシファイルにプロキシアイテムとして格納するサムネイル画像を取得する。又は、ファイル制御部４３は、プロキシ対象ファイルとしてのシーケンスファイルに格納された、インター符号化されたYUVのサムネイル画像を復号し、イントラ符号化することで、プロキシファイルにプロキシアイテムとして格納するサムネイル画像を取得する。

【0448】

ステップＳ２１２において、ファイル制御部４３は、プロキシファイルに設けるfreeボックスのサイズ（大きさ）を計算し、処理は、ステップＳ２１３に進む。

【0449】

例えば、ファイル制御部４３は、プロキシファイルに格納するサムネイル画像の数の最大値（以下、サムネイル最大数ともいう）を決定する。そして、ファイル制御部４３は、サムネイル最大数に応じて、プロキシファイルのmdatボックスに格納されたデータのオフセットをすらすことなく、サムネイル最大数だけのサムネイル画像をプロキシファイルに格納することができるように、少なくとも、サムネイル最大数だけのサムネイル画像のメタデータを格納することができるfreeボックスのサイズを計算する。

【0450】

サムネイル最大数は、例えば、プロキシ対象ファイル及びプロキシファイルを記録するメディア（メディア１４等）の残容量に応じて決定することができる。

【0451】

また、ディジタルカメラ１０において、１回のシャッタ操作に応じて、複数枚の写真（画像）を撮像する連写に対して、１枚の写真を撮像することを単写ということとすると、サムネイル最大数は、例えば、プロキシ対象ファイルとしてのHEIFファイルごとに設定可能なディジタルカメラ１０の撮像モードである連写モード／単写モードの別に応じて決定することができる。

【0452】

さらに、サムネイル最大数は、例えば、プロキシ対象ファイルとなる１個のHEIFファイルに格納し得る主画像の最大数を定め、その最大数に応じて決定することができる。

【0453】

また、サムネイル最大数は、例えば、ファイル制御部４３において、プロキシ対象ファイルに格納された主画像を評価し、評価が良い主画像の数に応じて決定することができる。主画像の評価では、例えば、主画像のS/Nや鮮鋭度等の画質に関する情報を求め、S/Nや鮮鋭度等が閾値以上の主画像を、評価が良い主画像に決定することができる。

【0454】

その他、サムネイル最大数は、上述のメディアの残容量等の複数の要素に応じて決定することができる。

【0455】

さらに、所定のディレクトリ又は所定のメディアに格納されたHEIFファイルを、プロキシ対象ファイルとする場合には、サムネイル最大数は、所定のディレクトリ又は所定のメディアに格納されるプロキシ対象ファイルとなる１個のHEIFファイルに格納し得る主画像の最大数を定め、その最大数に応じて決定することができる。

【0456】

ステップＳ２１３では、ファイル制御部４３は、ステップＳ２１２で計算されたサイズのfreeボックスを有し、プロキシ対象ファイルに格納された主画像のサムネイル画像がプロキシアイテムとしてmdatボックスに格納された通常のコレクションファイルを、プロキシファイルとして生成し、プロキシファイル生成処理を終了する。

【0457】

図５３は、第１の形態のプロキシファイルにサムネイル画像を追加する追加処理の例を説明するフローチャートである。

【0458】

追加処理は、既にプロキシファイルが存在し、そのプロキシファイルにサムネイル画像を追加する場合に、そのプロキシファイルを追加処理対象として行われる。

【0459】

ステップＳ２２１において、ファイル制御部４３は、プロキシ対象ファイルに格納された主画像のサムネイル画像を、追加処理対象のプロキシファイルにプロキシアイテムとして追加するサムネイル画像（以下、追加サムネイル画像ともいう）として取得し、処理は、ステップＳ２２２に進む。ステップＳ２２１の追加サムネイル画像の取得は、図５２のステップＳ２１１と同様に行うことができる。

【0460】

ステップＳ２２２において、ファイル制御部４３は、追加サムネイル画像を、追加処理対象のプロキシファイルのmdatボックスにプロキシアイテムとして追加し、処理は、ステップＳ２２３に進む。

【0461】

ステップＳ２２３では、ファイル制御部４３は、追加処理対象のプロキシファイルからmetaボックスを読み出すことにより取得し、処理は、ステップＳ２２４に進む。

【0462】

ステップＳ２２４では、ファイル制御部４３は、追加処理対象のプロキシファイルのfreeボックス内の残容量を取得し、その残容量が、追加サムネイル画像のメタデータの追加に足りることを確認して、処理は、ステップＳ２２５に進む。

【0463】

なお、ステップＳ２２４において、freeボックスの残容量が、追加サムネイル画像のメタデータの追加に足りない場合は、例えば、その旨が液晶パネル１９に表示され、追加処理は終了する。さらに、この場合、追加サムネイル画像が格納された新たなプロキシファイルを生成するプロキシファイル生成処理を行うことができる。

【0464】

ステップＳ２２５では、ファイル制御部４３は、追加処理対象のプロキシファイルのmdatボックスへのプロキシアイテムとしての追加サムネイル画像の追加に応じて、ステップＳ２２３で取得したmetaボックスを、追加サムネイル画像のメタデータを追加した新たなmetaボックスに生成し直す。さらに、ファイル制御部４３は、その新たなmetaボックスによって、追加処理対象のプロキシファイルのmetaボックスを書き換え、処理は、ステップＳ２２５からステップＳ２２６に進む。

【0465】

ステップＳ２２６では、ファイル制御部４３は、書き換え前のmetaボックスに対する新たなmetaボックスのサイズ（データ量）の増加分だけサイズを減少させた新たなfreeボックスを生成する。さらに、ファイル制御部４３は、新たなfreeボックスによって、追加処理対象のプロキシファイルのfreeボックスを書き換え、追加処理は終了する。

【0466】

＜第２又は第３の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、プロキシファイルにサムネイル画像を追加する追加処理＞

【0467】

図５４は、第２又は第３の形態のプロキシファイルを生成するプロキシファイル生成処理、及び、そのプロキシファイルにサムネイル画像を追加する追加処理を説明する図である。

【0468】

図５４は、第２又は第３の形態のプロキシファイルの構造の例を示している。

【0469】

図５４のＡは、プロキシファイルの生成時のプロキシファイルの構造の例を示している。なお、ここでは、プロキシファイルの生成時において、プロキシファイルには、プロキシ対象ファイルに格納された１個の主画像のサムネイル画像が格納されることとする。

【0470】

プロキシファイルの生成では、ファイル制御部４３は、例えば、freeボックスを有し、プロキシ対象ファイルに格納された１個の主画像のサムネイル画像#1がプロキシアイテムとしてmdatボックスに格納された関連付け型コレクションファイルを、プロキシファイルとして生成する。

【0471】

プロキシファイルとしての関連付け型コレクションファイルには、サムネイル画像#1が、そのサムネイル画像#1（の特定情報）と関連付ける形で格納される。すなわち、プロキシファイルとしての関連付け型コレクションファイルには、プロキシファイル内のサムネイル画像と、外部データとしての、そのサムネイル画像に対応する主画像の特定情報との関連付けに関係する関係情報が格納される。

【0472】

関係情報としては、例えば、図１０の第１の関連付け型コレクションファイルの関連付け情報格納ボックスに格納される関連付け情報がある。

【0473】

さらに、関係情報としては、例えば、図１１の第２の関連付け型コレクションファイルのmdatボックスに格納されるアイテムItem#201としての関連付け情報、並びに、metaボックスのiinfボックスに格納されるアイテムItem#201に対するinfeボックス、及び、metaボックスのiprpボックスのilocボックスに格納されるアイテムItem#201の格納場所へのオフセット等がある。

【0474】

また、関係情報としては、例えば、図１２の第３の関連付け型コレクションファイルでのmdatボックスに格納されるアイテムとしての特定情報、及び、metaボックスのirefボックスのcdscボックスに格納されるアイテムとしての主画像のアイテムIDと、アイテムとしての特定情報のアイテムIDとを対応付けた関連付け情報等がある。

【0475】

さらに、関係情報としては、例えば、図１４の関連付け型シーケンスファイルのmdatボックスに格納される特定情報のトラック#3、及び、moovボックスに格納される、特定情報のトラック#3を管理するtrakボックスがある。

【0476】

図５４では、プロキシファイルとして、第３の関連付け型コレクションファイルが生成されている。

【0477】

また、図５４のＡにおいて、特定情報#1は、サムネイル画像#1対応する主画像の特定情報であり、関係情報の一部である。

【0478】

第３の関連付け型コレクションファイルであるプロキシファイルでは、特定情報#1は、mdatボックスに格納される。サムネイル画像#1と特定情報#１との関連付けに関係する関係情報のうちの、特定情報#1以外の情報、例えば、図１２で説明したmetaボックスのirefボックスのcdscボックスに格納される、サムネイル画像#1のアイテムIDと特定情報#1のアイテムIDとを対応付けた関連付け情報や、特定情報#1の格納場所のオフセット等のメタデータは、第３の関連付け型コレクションファイルであるプロキシファイルのmetaボックスに格納される。

【0479】

図５４のＢは、他の主画像のサムネイル画像が追加された後のプロキシファイルの構造の例を示している。

【0480】

既に生成されている、例えば、図５４のＡのようなプロキシファイルに、他の主画像のサムネイル画像#2を追加で格納する追加処理では、ファイル制御部４３は、プロキシファイルのmdatボックスに既に格納されているサムネイル画像#1及び特定情報#1の後に追加する形で、他の主画像のサムネイル画像#2をプロキシアイテムとして格納する。

【0481】

さらに、ファイル制御部４３は、metaボックスを、プロキシアイテムとしてのサムネイル画像#2のメタデータを追加した状態に書き換える。

【0482】

他の主画像のサムネイル画像#2の格納は、サムネイル画像#２に対応する主画像の特定情報#2と関連付ける形で行われる。すなわち、ファイル制御部４３は、プロキシファイルのmdatボックスにサムネイル画像#2に追加する形で、特定情報#2をプロキシアイテムとして格納する。

【0483】

さらに、ファイル制御部４３は、metaボックスを、プロキシアイテムとしてのサムネイル画像#2のメタデータ、及び、サムネイル画像#2と特定情報#2との関連付けに関係する関係情報のうちの、特定情報#2以外の情報を追加した状態に書き換える。

【0484】

ファイル制御部４３は、metaボックスの、書き換えによって増加したmetaボックスの容量の増加分だけ、freeボックスの容量を削減する。プロキシファイルへの、さらに他の主画像のサムネイル画像の追加は、同様にして行われる。

【0485】

なお、追加処理において、サムネイル画像#2及び特定情報#2は、mdatボックスに既に格納されているサムネイル画像#1及び特定情報#1の後に追加する形で書き込まれる。したがって、mdatボックスへのサムネイル画像#2及び特定情報#2の追加それ自体によっては、freeボックスを消費しないし、mdatボックスに既に格納されているサムネイル画像#1及び特定情報#1のオフセットのずれも生じない。

【0486】

図５５は、第２又は第３の形態のプロキシファイルを生成するプロキシファイル生成処理の例を説明するフローチャートである。

【0487】

ステップＳ２４１において、ファイル制御部４３は、図５２のステップＳ２１１と同様に、プロキシ対象ファイルに格納された主画像のサムネイル画像を、プロキシファイルにプロキシアイテムとして格納するサムネイル画像として取得し、処理は、ステップＳ２４２に進む。

【0488】

ステップＳ２４２において、ファイル制御部４３は、ステップＳ２４１で取得したサムネイル画像に対応する主画像の特定情報を取得し、処理は、ステップＳ２４３に進む。

【0489】

主画像が格納されたプロキシ対象ファイルとしてのHEIFファイルがコレクションファイルである場合、主画像の特定情報としては、例えば、uuidや、主画像を入力として計算されたhash値、主画像が格納されたプロキシ対象ファイルに割り当てられたURLと主画像のアイテムIDとのセット等を採用することができる。

【0490】

主画像が格納されたプロキシ対象ファイルとしてのHEIFファイルがシーケンスファイルである場合、主画像の特定情報としては、例えば、uuidや、主画像が格納されたプロキシ対象ファイルに割り当てられたURL、主画像のフレームのトラックのトラックID、及び、主画像のフレームのトラック先頭からの順番（フレームオフセット）のセット、主画像が格納されたプロキシ対象ファイルに割り当てられたURLと主画像のフレームのタイムライン上の時刻情報とのセット等を採用することができる。

【0491】

なお、特定情報が、その特定情報をプロキシ対象ファイルに書き込むことにより、プロキシ対象ファイル内のデータ（主画像）を特定することができる情報である場合、例えば、特定情報がuuidである場合、ステップＳ２４２では、主画像の特定情報の生成後に、その特定情報が、その特定情報によって特定されるべき主画像が格納されたプロキシ対象ファイルに書き込まれる。

【0492】

また、プロキシ対象ファイルが、関連付け型HEIFファイルであり、その関連付け型HEIFファイルに格納された主画像と関連付けられた外部データの特定情報が、プロキシ対象ファイルとしての関連付け型HEIFファイルに格納されている場合、ステップＳ２４２では、その外部データの特定情報を、主画像の特定情報として取得することができる。この場合、主画像の特定情報は、プロキシ対象ファイルとしての関連付け型HEIFファイルに既に書き込まれているので、新たに書き込む必要はない。

【0493】

ステップＳ２４３において、ファイル制御部４３は、図５２のステップＳ２１２と同様に、プロキシファイルに設けるfreeボックスのサイズ（大きさ）を計算し、処理は、ステップＳ２４４に進む。

【0494】

なお、第２又は第３の形態のプロキシファイルを、追加処理対象のプロキシファイルとして追加処理が行われる場合、プロキシファイルのmetaボックスには、追加するサムネイル画像のメタデータだけでなく、追加するサムネイル画像とそのサムネイル画像に対応する主画像の特定情報との関連付けに関係する関係情報（のうちのmetaボックスに格納すべき情報）が格納される。

【0495】

したがって、図５５のステップＳ２４３では、第２又は第３の形態のプロキシファイルに格納するサムネイル画像のサムネイル最大数が、第１の形態のプロキシファイルに格納するサムネイル画像のサムネイル最大数と同一であっても、図５２のステップＳ２１２よりも大きなサイズが、freeボックスのサイズとして計算される。

【0496】

ステップＳ２４４では、ファイル制御部４３は、ステップＳ２４３で計算されたサイズのfreeボックスを有し、プロキシ対象ファイルに格納された主画像のサムネイル画像がプロキシアイテムとしてmdatボックスに格納された関連付け型コレクションファイルを、プロキシファイルとして生成し、プロキシファイル生成処理を終了する。

【0497】

ステップＳ２４４のプロキシファイルの生成では、プロキシアイテムとしてのサムネイル画像が、そのサムネイル画像に対応する主画像の特定情報、すなわち、ステップＳ２４２で取得された特定情報と関連付けて格納されたプロキシファイルとしての関連付け型コレクションファイルが生成される。例えば、プロキシアイテムとしてのサムネイル画像とともに、そのサムネイル画像と、そのサムネイル画像に対応する主画像の特定情報との関連付けに関係する関係情報が格納されたプロキシファイルが生成される。

【0498】

図５６は、第２又は第３の形態のプロキシファイルにサムネイル画像を追加する追加処理の例を説明するフローチャートである。

【0499】

追加処理は、既にプロキシファイルが存在し、そのプロキシファイルにサムネイル画像を追加する場合に、そのプロキシファイルを追加処理対象として行われる。ここでは、追加処理対象としてのプロキシファイルは、例えば、第３の関連付け型コレクションファイル（図１２）であることとする。

【0500】

ステップＳ２５１において、ファイル制御部４３は、プロキシ対象ファイルに格納された主画像のサムネイル画像を、追加処理対象のプロキシファイルにプロキシアイテムとして追加する追加サムネイル画像として取得し、処理は、ステップＳ２５２に進む。ステップＳ２５１の追加サムネイル画像の取得は、図５５のステップＳ２４１と同様に行うことができる。

【0501】

ステップＳ２５２において、ファイル制御部４３は、ステップＳ２４１で取得した追加サムネイル画像に対応する主画像の特定情報の取得等の、図５５のステップＳ２４２と同様の処理を行い、処理は、ステップＳ２５３に進む。

【0502】

ステップＳ２５３において、ファイル制御部４３は、追加サムネイル画像と、その追加サムネイル画像に対応する主画像の特定情報とを、追加処理対象のプロキシファイルのmdatボックスにプロキシアイテムとして追加し、処理は、ステップＳ２５４に進む。

【0503】

ステップＳ２５４では、ファイル制御部４３は、追加処理対象のプロキシファイルからmetaボックスを読み出すことにより取得し、処理は、ステップＳ２５５に進む。

【0504】

ステップＳ２５５では、ファイル制御部４３は、追加処理対象のプロキシファイルのfreeボックス内の残容量を取得し、その残容量が、追加サムネイル画像のメタデータの追加、及び、追加サムネイル画像とその追加サムネイル画像に対応する主画像の特定情報との関連付けに関係する関係情報（但し、ここでは、ステップＳ２５３で既にmdatボックスに追加された特定情報を除く）の追加に足りることを確認して、処理は、ステップＳ２５６に進む。

【0505】

なお、ステップＳ２５５において、freeボックスの残容量が追加に足りない場合は、図５３のステップＳ２２４で説明した処理と同様の処理を行うことができる。

【0506】

ステップＳ２５６では、ファイル制御部４３は、ステップＳ２５４で取得したmetaボックスを、新たなmetaボックスに生成し直す。

【0507】

新たなmetaボックスは、ステップＳ２５４で取得したmetaボックスに、追加処理対象のプロキシファイルのmdatボックスに追加されたプロキシアイテムとしての追加サムネイル画像のメタデータ、及び、追加サムネイル画像とその追加サムネイル画像に対応する主画像の特定情報との関連付けに関係する関係情報（但し、ここでは、ステップＳ２５３で既にmdatボックスに追加された特定情報を除く）を追加することにより生成される。

【0508】

ファイル制御部４３は、新たなmetaボックスによって、追加処理対象のプロキシファイルのmetaボックスを書き換え、処理は、ステップＳ２５６からステップＳ２５７に進む。

【0509】

ステップＳ２５７では、ファイル制御部４３は、書き換え前のmetaボックスに対する新たなmetaボックスのサイズ（データ量）の増加分だけサイズを減少させた新たなfreeボックスを生成する。さらに、ファイル制御部４３は、新たなfreeボックスによって、追加処理対象のプロキシファイルのfreeボックスを書き換え、追加処理は終了する。

【0510】

＜第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理＞

【0511】

図５７は、第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明する図である。

【0512】

図５７は、第２の形態のプロキシ対象ファイルとプロキシファイルとの組の例を示している。

【0513】

図５７では、コレクションファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。プロキシファイルとしては、例えば、第３の関連付け型コレクションファイルが採用されている。

【0514】

コレクションファイル#iでは、主画像#iと、その主画像#iのサムネイル画像#iとがmdatボックスに格納されている。

【0515】

プロキシファイルでは、サムネイル画像#1及び#2、並びに、そのサムネイル画像#1及び#2に対応する主画像の特定情報#1及び#2が、サムネイル画像#iと特定情報#iとを関連付ける形で格納されている。

【0516】

第２の形態のプロキシ対象ファイルとしてのコレクションファイル#iは、主画像#iの特定情報#iを有しない。そのため、第２の形態では、主画像#iの特定情報#iとして、例えば、主画像#iを入力とするhash値等の、コレクションファイル#iに、主画像#iの特定情報#iが書き込まれていなくても、その主画像#iを特定することができる情報が採用される。

【0517】

いま、主画像#iの特定情報#iとして、例えば、主画像#iを入力とするhash値が採用されていることとする。

【0518】

この場合、プロキシ対象ファイルとしてのコレクションファイル#1及び#2内の主画像#1及び#2それぞれを入力として生成されるhash値のうちの、プロキシファイル内のプロキシアイテムとしてのサムネイル画像#iに関連付けられた特定情報#iとしてのhash値に一致するhash値が得られる主画像#iが、プロキシファイル内のサムネイル画像#iに対応する主画像として検出される。

【0519】

図５８は、第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例をさらに説明する図である。

【0520】

図５８は、第２の形態のプロキシ対象ファイルとプロキシファイルとの組の例を示している。

【0521】

図５８では、コレクションファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。プロキシファイルとしては、例えば、第１の関連付け型コレクションファイルが採用されている。プロキシ対象ファイルとしてのコレクションファイル#1及び#2としては、通常のコレクションファイルが採用されている。

【0522】

コレクションファイル#1では、主画像A及びBと、その主画像A及びBのサムネイル画像A及びBとがmdatボックスに格納されている。コレクションファイル#2では、主画像C及びDと、その主画像C及びDのサムネイル画像C及びDとがmdatボックスに格納されている。

【0523】

プロキシファイルでは、サムネイル画像AないしD、及び、主画像AないしDの特定情報としてのhash値#Aないし#Dが、サムネイル画像AないしDと、特定情報としてのhash値#Aないし#Dとをそれぞれ関連付ける形で格納されている。すなわち、プロキシファイルでは、関連付け情報格納ボックスに、サムネイル画像AないしDのアイテムIDと、特定情報としてのhash値#Aないし#Dとをそれぞれ対応付けた関連付け情報が格納されている。特定情報としてのhash値#Aないし#Dは、それぞれ、主画像AないしDを入力とするhash値である。

【0524】

この場合、プロキシ対象ファイルとしてのコレクションファイル#1及び#2内の主画像AないしDそれぞれを入力として生成されるhash値のうちの、プロキシファイル内のプロキシアイテムとしての、あるサムネイル画像X（Xは、AないしDのいずれか）に関連付けられた特定情報としてのhash値に一致するhash値が得られる主画像が、プロキシファイル内のサムネイル画像Xに対応する主画像として検出される。

【0525】

図５９は、第２の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明するフローチャートである。

【0526】

例えば、UI制御部４７は、ファイル制御部４３等を制御することにより、プロキシファイルに格納されたサムネイル画像を用いて一覧画面を生成して液晶パネル１９に表示するインデクス表示を行わせる。

【0527】

例えば、ファイル制御部４３は、プロキシファイルに格納されたサムネイル画像（プロキシファイルにとっての主画像）の個々を識別するハンドルのハンドルリストを生成する。UI制御部４７は、例えば、ユーザの操作等に応じて、プロキシファイルに格納されたサムネイル画像のインデクス表示を、ファイル制御部４３に要求する。

【0528】

ファイル制御部４３は、UI制御部４７からのインデクス表示の要求に応じて、ハンドルリストのハンドルにより識別されるサムネイル画像（のフレーム）を、プロキシファイルから読み出し、符号化制御部４２を介して、表示制御部４６に供給する。

【0529】

表示制御部４６は、ファイル制御部４３からのサムネイル画像の一覧画面を生成し、液晶パネル１９に表示させる。

【0530】

その後、例えば、ユーザが、一覧画面から、所望のサムネイル画像を選択すると、ステップＳ２７１において、ファイル制御部４３は、プロキシファイルから、一覧画面から選択されたサムネイル画像（以下、選択サムネイル画像ともいう）に関連付けられた特定情報を読み出すことにより取得し、処理は、ステップＳ２７２に進む。

【0531】

すなわち、例えば、ファイル制御部４３は、ハンドルリストにおいて選択サムネイル画像（選択関連画像）のハンドルを特定し、プロキシファイルにおいて、そのハンドルにより識別される選択サムネイル画像に関連付けられた特定情報を読み出すことにより取得する。

【0532】

ステップＳ２７２において、ファイル制御部４３は、主画像を検出する検索の検索対象とするHEIFファイルを選択し、処理は、ステップＳ２７３に進む。

【0533】

ここで、プロキシファイル生成処理（及び追加処理）では、図４９や図５０等で説明したように、１個以上のコレクションファイルや、１個以上のシーケンスファイル、特定のディレクトリに格納されたHEIFファイル、特定のメディア内のHEIFファイルを、プロキシ対象ファイルに選択することができる。

【0534】

ファイル制御部４３は、プロキシファイルについてプロキシ対象ファイルに選択されたHEIFファイルを、検索対象に選択する。プロキシ対象ファイルを特定するために必要な情報、例えば、特定のディレクトリ又はメディアに格納されたHEIFファイルがプロキシ対象ファイルに選択された場合の、その特定のディレクトリ又はメディアを特定する情報は、例えば、プロキシファイルのmetaボックスやmdatボックスに格納しておくことができる。

【0535】

ステップＳ２７３において、ファイル制御部４３は、検索対象のHEIFファイルを対象に、主画像を検索し、選択サムネイル画像に関連付けられた特定情報によって特定される主画像を検出して、検出処理は終了する。

【0536】

例えば、主画像の特定情報として、主画像を入力として、sha-256等で計算されるhash値が採用されている場合には、ファイル制御部４３は、検索対象のHEIFファイルそれぞれについて、HEIFファイル内の主画像（それぞれ）を入力とするhash値を求める。

【0537】

すなわち、例えば、検索対象のHEIFファイルが、コレクションファイルである場合には、ファイル制御部４３は、検索対象のコレクションファイルそれぞれについて、コレクションファイル内の主画像のアイテムIDのリスト（主画像リスト）を求める。

【0538】

さらに、ファイル制御部４３は、主画像リストの各アイテムIDについて、アイテムIDによって特定されるアイテムとしての主画像（のデータ）を、検索対象のコレクションファイルのilocボックス内の情報に応じて、mdatボックスから読み出す。ファイル制御部４３は、検索対象のコレクションファイルのmdatボックスから読み出した主画像を入力として、hash値を計算する。

【0539】

そして、ファイル制御部４３は、選択サムネイル画像に関連付けられた特定情報としてのhash値に一致するhash値が得られる主画像#iを、選択サムネイル画像に対応する主画像として検出する。

【0540】

＜第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理＞

【0541】

図６０は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例を説明する図である。

【0542】

図６０は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組の例を示している。

【0543】

図６０では、コレクションファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0544】

プロキシファイルとしては、例えば、第３の関連付け型コレクションファイルが採用されている。プロキシ対象ファイルとしてのコレクションファイル#1及び#2としても、第３の関連付け型コレクションファイルが採用されている。

【0545】

コレクションファイル#iでは、図５７の場合と同様に、主画像#iと、その主画像#iのサムネイル画像#iとがmdatボックスに格納されている。

【0546】

さらに、コレクションファイル#iでは、主画像#i及び主画像#iの特定情報#iが、主画像#iと特定情報#iとを関連付ける形で格納されている。

【0547】

プロキシファイルでは、図５７の場合と同様に、サムネイル画像#1及び#2、並びに、主画像の特定情報#1及び#2が、サムネイル画像#iと特定情報#iとを関連付ける形で格納されている。

【0548】

第３の形態のプロキシ対象ファイルとしてのコレクションファイル#iは、主画像#iの特定情報#iを有する。そのため、第３の形態では、プロキシ対象ファイルとしてのコレクションファイル#iが、主画像の特定情報を書き込むことができるファイルであれば、主画像の特定情報としては、任意の情報を採用することができる。

【0549】

いま、主画像#iの特定情報#iとして、例えば、uuidが採用されていることとする。

【0550】

この場合、プロキシ対象ファイルとしてのコレクションファイル#1及び#2それぞれ内の主画像#1及び#2のうちの、プロキシファイル内のプロキシアイテムとしてのサムネイル画像#iに関連付けられた特定情報#iとしてのuuidに一致するuuidに関連付けられた主画像#iが、プロキシファイル内のサムネイル画像#iに対応する主画像として検出される。

【0551】

図６１は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の例をさらに説明する図である。

【0552】

図６１は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組の例を示している。

【0553】

図６１では、コレクションファイル#1及び#2をプロキシ対象ファイルとして、プロキシファイルが生成されている。

【0554】

プロキシファイルとしては、例えば、第１の関連付け型コレクションファイルが採用されている。プロキシ対象ファイルとしてのコレクションファイル#1及び#2としても、第１の関連付け型コレクションファイルが採用されている。

【0555】

コレクションファイル#1では、主画像A及びBと、その主画像A及びBのサムネイル画像A及びBとがmdatボックスに格納されている。

【0556】

また、コレクションファイル#1では、主画像A及びBのアイテムIDと、主画像A及びBの特定情報としてのUUID#A及び#Bとをそれぞれ対応付けた関連付け情報が、metaボックスの関連付け情報格納ボックスに格納されている。

【0557】

コレクションファイル#2では、主画像C及びDと、その主画像C及びDのサムネイル画像C及びDとがmdatボックスに格納されている。

【0558】

また、コレクションファイル#2では、主画像C及びDのアイテムIDと、主画像C及びDの特定情報としてのUUID#C及び#Dとをそれぞれ対応付けた関連付け情報が、metaボックスの関連付け情報格納ボックスに格納されている。

【0559】

プロキシファイルでは、サムネイル画像AないしD、及び、主画像AないしDの特定情報としてのhash値#Aないし#Dが、サムネイル画像AないしDと、特定情報としてのhash値#Aないし#Dとをそれぞれ関連付ける形で格納されている。

【0560】

すなわち、プロキシファイルでは、関連付け情報格納ボックスに、サムネイル画像AないしDのアイテムIDと、特定情報としてのUUID#AないしUUID#Dとをそれぞれ対応付けた関連付け情報が格納されている。

【0561】

この場合、プロキシ対象ファイルとしてのコレクションファイル#1及び#2内の主画像AないしDのうちの、プロキシファイル内のプロキシアイテムとしてのあるサムネイル画像Xに関連付けられた特定情報、すなわち、プロキシファイルの関連付け情報格納ボックスにおいてサムネイル画像XのアイテムIDと対応付けられたuuidに一致するuuidに関連付けられた主画像が、プロキシファイル内のサムネイル画像Xに対応する主画像として検出される。

【0562】

図６２は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第１の例を説明する図である。

【0563】

図６２は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組において、第１の関連付け型コレクションファイル（図１０）がプロキシ対象ファイルに採用された場合の、そのプロキシ対象ファイルの例を示している。

【0564】

検出処理の第１の例では、第１の関連付け型コレクションファイルがプロキシ対象ファイルに採用されていることとする。

【0565】

プロキシ対象ファイルとしての第１の関連付け型コレクションファイルでは、metaボックスに、関連付け情報格納ボックスが格納される。図６２では、関連付け情報格納ボックスには、主画像数が１であること、及び、主画像のアイテムID=1と、その主画像の特定情報としてのUUID#1とが対応付けられて格納されている。

【0566】

第１の関連付け型コレクションファイルがプロキシ対象ファイルに採用された場合、検出処理では、ファイル制御部４３は、プロキシファイルにおいて選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidが関連付け情報格納ボックスに格納されたプロキシ対象ファイルを検出する。

【0567】

そして、ファイル制御部４３は、そのプロキシ対象ファイルにおいて、選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidに対応付けられたアイテムIDの主画像を、選択サムネイル画像に対応する主画像として検出する。

【0568】

図６３は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第１の例を説明するフローチャートである。

【0569】

例えば、UI制御部４７は、図５９で説明したように、プロキシファイルに格納されたサムネイル画像を用いて一覧画面を生成して液晶パネル１９に表示するインデクス表示を行わせる。

【0570】

その後、例えば、ユーザが、一覧画面から、所望のサムネイル画像を選択すると、ステップＳ２８１において、ファイル制御部４３は、図５９のステップＳ２７１と同様に、プロキシファイルから、一覧画面から選択された選択サムネイル画像に関連付けられた特定情報を読み出すことにより取得し、処理は、ステップＳ２８２に進む。

【0571】

ステップＳ２８２において、ファイル制御部４３は、図５９のステップＳ２７２と同様に、主画像を検出する検索の検索対象とするHEIFファイルを選択し、処理は、ステップＳ２８３に進む。

【0572】

ステップＳ２８３において、ファイル制御部４３は、検索対象のHEIFファイルから、関連付け情報格納ボックスに、選択サムネイル画像に関連付けられた特定情報と一致する特定情報（以下、一致特定情報ともいう）が格納されたHEIFファイルを、選択サムネイル画像に対応する主画像を検出する対象の検出対象ファイルとして検出する。

【0573】

さらに、ファイル制御部４３は、検出対象ファイル内の、一致特定情報に関連付けられた主画像（一致特定情報によって特定される主画像）にアクセスするためのアクセス情報を、検出対象ファイルの関連付け情報格納ボックスから読み出すことにより取得し、処理は、ステップＳ２８３からステップＳ２８４に進む。

【0574】

検出処理の第１の例では、図６２で説明したように、第１の関連付け型コレクションファイルがプロキシ対象ファイルに採用されている。したがって、検出処理の第１の例では、検出対象ファイルは、第１の関連付け型コレクションファイルである。

【0575】

検出対象ファイルとしての第１の関連付け型コレクションファイルでは、図６２で説明したように、関連付け情報格納ボックスに、主画像のアイテムIDと、その主画像の特定情報（uuid等）とが対応付けられて格納されている。

【0576】

ファイル制御部４３は、検出対象ファイルとしての第１の関連付け型コレクションファイルの関連付け情報格納ボックスにおいて、一致特定情報に対応付けられた（主画像の）アイテムIDを、アクセス情報として取得する。

【0577】

ステップＳ２８４において、ファイル制御部４３は、アクセス情報を用いて、検出対象ファイルから、選択サムネイル画像に関連付けられた特定情報によって特定される主画像を検出し、検出処理は終了する。

【0578】

すなわち、ファイル制御部４３は、検出対象ファイルから、アクセス情報としてのアイテムIDによって特定される主画像を、選択サムネイル画像に関連付けられた特定情報によって特定される主画像として読み出すことにより検出する。検出対象ファイルからの、アクセス情報としてのアイテムIDによって特定される主画像の読み出しは、図１８で説明したようにして行うことができる。

【0579】

図６４は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第２の例を説明する図である。

【0580】

図６４は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組において、第２の関連付け型コレクションファイル（図１１）がプロキシ対象ファイルに採用された場合の、そのプロキシ対象ファイルの例を示している。

【0581】

検出処理の第２の例では、第２の関連付け型コレクションファイルがプロキシ対象ファイルに採用されていることとする。

【0582】

プロキシ対象ファイルとしての第２の関連付け型コレクションファイルでは、第１の関連付け型コレクションファイルにおいて関連付け情報格納ボックスに格納される主画像数、及び、主画像のアイテムIDとその主画像の特定情報としてのuuidとが対応付けられた関連付け情報が、アイテムとして、mdatボックスに格納される。

【0583】

第２の関連付け型コレクションファイルがプロキシ対象ファイルに採用された場合、検出処理では、ファイル制御部４３は、プロキシファイルにおいて選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidを含む関連付け情報がmdatボックスに格納されたプロキシ対象ファイルを検出する。

【0584】

そして、ファイル制御部４３は、そのプロキシ対象ファイルにおいて、選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidに対応付けられたアイテムIDの主画像を、選択サムネイル画像に対応する主画像として検出する。

【0585】

第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第２の例では、図６３の検出処理の第１の例と同様の処理が行われる。

【0586】

但し、検出処理の第２の例では、図６３のステップＳ２８３において、ファイル制御部４３は、検索対象のHEIFファイル（第２の関連付け型コレクションファイル（図１１））について、iinfボックスのinfeボックス内のアイテムタイプがIDIFになっているInfeボックス内のアイテムIDを、アイテムとしての関連付け情報のアイテムIDとして取得する。

【0587】

さらに、ファイル制御部４３は、検索対象のHEIFファイルについて、ilocボックスから、アイテムとしての関連付け情報のアイテムIDを検索し、そのアイテムIDに対応付けられたオフセット及びサイズを読み出す。

【0588】

そして、ファイル制御部４３は、アイテムとしての関連付け情報のアイテムIDに対応付けられたオフセット及びサイズに応じて、検索対象のHEIFファイルのmdatボックスに格納されたアイテムとしての関連付け情報を読み出す。

【0589】

ファイル制御部４３は、以上のようにして、検索対象のHEIFファイルから読み出した関連付け情報から、選択サムネイル画像に関連付けられた特定情報と一致する特定情報（一致特定情報）を有する関連付け情報を検出する。

【0590】

その後、ファイル制御部４３は、一致特定情報を有する関連付け情報をアイテムとして有する検索対象のHEIFファイルを、検出対象ファイルとして検出する。そして、ファイル制御部４３は、検出対象ファイルの関連付け情報において、一致特定情報と対応付けられた（主画像の）アイテムIDを、主画像にアクセスするためのアクセス情報として取得する。

【0591】

図６５は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第３の例を説明する図である。

【0592】

図６５は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組において、第３の関連付け型コレクションファイル（図１２）がプロキシ対象ファイルに採用された場合の、そのプロキシ対象ファイルの例を示している。

【0593】

検出処理の第３の例では、第３の関連付け型コレクションファイルがプロキシ対象ファイルに採用されていることとする。

【0594】

プロキシ対象ファイルとしての第３の関連付け型コレクションファイルでは、主画像の特定情報としてのuuidが、アイテムとしてmdatボックスに格納される。

【0595】

さらに、主画像のアイテムIDと、主画像の特定情報のアイテムIDとが対応付けられた関連付け情報が、metaボックス内のirefボックスのcdscボックスに格納される（図１２）。

【0596】

第３の関連付け型コレクションファイルがプロキシ対象ファイルに採用された場合、検出処理では、ファイル制御部４３は、プロキシファイルにおいて選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidがmdatボックスに格納されたプロキシ対象ファイルを検出する。

【0597】

そして、ファイル制御部４３は、そのプロキシ対象ファイルにおいて、選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidに対応付けられたアイテムIDの主画像を、選択サムネイル画像に対応する主画像として検出する。

【0598】

第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第３の例では、図６３の検出処理の第１の例と同様の処理が行われる。

【0599】

但し、検出処理の第３の例では、図６３のステップＳ２８３において、ファイル制御部４３は、検索対象のHEIFファイル（第３の関連付け型コレクションファイル（図１２））について、iinfボックスのinfeボックス内のアイテムタイプがIDIFになっているInfeボックス内のアイテムIDを、アイテムとしての特定情報のアイテムIDとして取得する。

【0600】

さらに、ファイル制御部４３は、検索対象のHEIFファイルについて、ilocボックスから、アイテムとしての特定情報のアイテムIDを検索し、そのアイテムIDに対応付けられたオフセット及びサイズを読み出す。

【0601】

そして、ファイル制御部４３は、アイテムとしての特定情報のアイテムIDに対応付けられたオフセット及びサイズに応じて、検索対象のHEIFファイルのmdatボックスに格納されたアイテムとしての特定情報を読み出す。

【0602】

ファイル制御部４３は、以上のようにして、検索対象のHEIFファイルから読み出した特定情報から、選択サムネイル画像に関連付けられた特定情報と一致する特定情報（一致特定情報）を検出する。

【0603】

その後、ファイル制御部４３は、一致特定情報をアイテムとして有する検索対象のHEIFファイルを、検出対象ファイルとして検出する。

【0604】

そして、ファイル制御部４３は、検出対象ファイルのmetaボックスのirefボックスのcdscボックス（図１２）内の関連付け情報において、アイテムとしての一致特定情報のアイテムIDと対応付けられた（主画像の）アイテムID、すなわち、アイテムとしての一致特定情報のアイテムIDを参照先として、その参照先に参照元として対応付けられたアイテムIDを、主画像にアクセスするためのアクセス情報として取得する。

【0605】

図６６は、第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第４の例を説明する図である。

【0606】

図６６は、第３の形態のプロキシ対象ファイルとプロキシファイルとの組において、関連付け型シーケンスファイル（図１４）がプロキシ対象ファイルに採用された場合の、そのプロキシ対象ファイルの例を示している。

【0607】

検出処理の第４の例では、関連付け型シーケンスファイルがプロキシ対象ファイルに採用されていることとする。

【0608】

プロキシ対象ファイルとしての関連付け型シーケンスファイルでは、主画像の特定情報としてのuuidのトラックが、mdatボックスに格納される。プロキシ対象ファイルとしての関連付け型シーケンスファイルにおいて、主画像のトラック（以下、主画像トラックともいう）の主画像（のフレーム）と、特定情報のトラック（以下、特定情報トラックともいう）の、主画像の特定情報としてのuuidとは、タイムライン上の時刻情報（又はトラックに配置された順番）によって関連付けられて格納される。

【0609】

関連付け型シーケンスファイルがプロキシ対象ファイルに採用された場合、検出処理では、ファイル制御部４３は、プロキシファイルにおいて選択サムネイル画像に関連付けられた特定情報としてのuuidに一致するuuidがmdatボックスに格納されたプロキシ対象ファイルを検出する。

【0610】

そして、ファイル制御部４３は、そのプロキシ対象ファイルにおいて、選択サムネイル画像に関連付けられた特定情報としてのuuidによって特定される主画像を、選択サムネイル画像に対応する主画像として検出する。

【0611】

第３の形態のプロキシファイルに格納されたサムネイル画像に対応する主画像を検出する検出処理の第４の例では、図６３の検出処理の第１の例と同様の処理が行われる。

【0612】

但し、検出処理の第４の例では、図６３のステップＳ２８３において、ファイル制御部４３は、検索対象のHEIFファイル（関連付け型シーケンスファイル（図１４））について、moovボックス内のtrakボックスから、trefボックス内のtypeがcdscになっているtrakボックスを、特定情報トラックを管理するtrakボックスとして検索する。

【0613】

さらに、ファイル制御部４３は、特定情報トラックを管理するtrakボックスのtkhdボックスから、特定情報トラックのトラックIDを読み出し、そのトラックIDのトラック、すなわち、特定情報トラックの特定情報を読み出す。ファイル制御部４３は、以上のようにして、検索対象のHEIFファイルから読み出した特定情報から、選択サムネイル画像に関連付けられた特定情報と一致する特定情報（一致特定情報）を検出する。

【0614】

その後、ファイル制御部４３は、一致特定情報を含む特定情報トラックを有する検索対象のHEIFファイルを、検出対象ファイルとして検出する。

【0615】

そして、ファイル制御部４３は、検出対象ファイルの、一致特定情報を含む特定情報トラックを管理するtrakボックスのtrefボックス（図１４）内のトラックID（主画像トラックのトラックID）と、一致特定情報のタイムライン上の時刻情報（又は特定情報トラックに配置された順番）とを、主画像にアクセスするためのアクセス情報として取得する。

【0616】

＜プロキシ対象ファイルの生成時にプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理＞

【0617】

図６７は、プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理を説明する図である。

【0618】

図６７は、第１の形態のプロキシファイルの構造の例を示している。

【0619】

図６７のＡは、プロキシファイル生成処理により生成されるプロキシファイルの構造の例を示している。

【0620】

プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理では、ファイル制御部４３は、プロキシ対象ファイルの生成時に、そのプロキシ対象ファイルに格納されるサムネイル画像（以下、本サムネイル画像ともいう）の生成に用いられる元画像を用いて、第１の形態のプロキシファイルに格納するサムネイル画像（以下、プロキシサムネイル画像ともいう）を生成する。

【0621】

プロキシサムネイル画像としては、本サムネイル画像と同一の画像（コピー）を採用することもできるし、本サムネイル画像と画質やデータ量等が異なる画像（画質やデータ量が低い画像）を採用することもできる。

【0622】

例えば、本サムネイル画像のYUVの信号フォーマットが4:2:2である場合に、プロキシサムネイル画像の信号フォーマットとして、4:2:0を採用することができる。また、例えば、本サムネイル画像の階調が10ビットである場合に、プロキシサムネイル画像の信号フォーマットとして、8ビットを採用することができる。さらに、例えば、プロキシサムネイル画像としては、本サムネイル画像よりもサイズ（画素数）が少ない画像を採用することができる。

【0623】

また、例えば、プロキシサムネイル画像には、本サムネイル画像と圧縮率が異なる符号化、例えば、本サムネイル画像の圧縮率よりも高い圧縮率の符号化を採用することができる。

【0624】

さらに、例えば、プロキシサムネイル画像には、本サムネイル画像とは異なる種類のコーデックを採用することができる。例えば、本サムネイル画像には、HEVCを採用し、プロキシサムネイル画像には、JPEGを採用することができる。

【0625】

ファイル制御部４３は、例えば、freeボックスを有し、プロキシ対象ファイルに格納された主画像のサムネイル画像としてのプロキシサムネイル画像がプロキシアイテムとしてmdatボックスに格納された通常のコレクションファイルを、第１の形態のプロキシファイルとして生成する。

【0626】

図６７のＡでは、プロキシファイル生成処理により、２個のプロキシサムネイル画像A及びBが（主画像として）格納されたプロキシファイルが生成されている。

【0627】

また、freeボックスは、metaボックスに設けられている。プロキシファイル生成処理により生成されるプロキシファイルのmetaボックスには、プロキシサムネイル画像A及びBのメタデータが格納される。

【0628】

図６７のＢは、追加処理により他の主画像のプロキシサムネイル画像が追加された後のプロキシファイルの構造の例を示している。

【0629】

プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するプロキシサムネイル画像を生成する場合の追加処理では、例えば、プロキシファイルの生成後に生成されるHEIFファイルを、新たなプロキシ対象ファイルとして、その新たなプロキシ対象ファイルに格納される主画像のプロキシサムネイル画像が、既に生成されているプロキシファイル（以下、既存プロキシファイルともいう）に追加される。

【0630】

すなわち、ファイル制御部４３は、新たなプロキシ対象ファイルの生成時に、その新たなプロキシ対象ファイルに格納される本サムネイル画像の生成に用いられる元画像を用いて、第１の形態のプロキシファイルに追加するプロキシサムネイル画像を生成する。

【0631】

図６７のＢでは、追加処理により、２個のプロキシサムネイル画像C及びDが（主画像として）、図６７のＡの既存プロキシファイルのmdatボックスの既に格納されているプロキシサムネイル画像A及びBの後に追加されている。

【0632】

ファイル制御部４３は、プロキシサムネイル画像C及びDの追加にあたり、metaボックスを、プロキシサムネイル画像C及びDのメタデータを追加した状態に書き換え、書き換えによって増加したmetaボックスの容量の増加分だけ、freeボックスの容量を削減する。既存プロキシファイルへの、さらに新たなプロキシ対象ファイルに格納された主画像のプロキシサムネイル画像の追加は、同様にして行われる。

【0633】

図６８は、プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理の例を説明するフローチャートである。

【0634】

ファイル制御部４３は、HEIFファイルを生成した場合、そのHEIFファイルを、プロキシ対象ファイルとするプロキシファイル生成処理を実行するプロキシファイル生成処理実行条件が満たされるときには、以下のプロキシファイル生成処理を実行する。

【0635】

プロキシファイル生成処理実行条件としては、例えば、プロキシファイルが、プロキシ対象ファイルを格納するディレクトリ又はメディアに存在しないことを採用することができる。また、プロキシファイル生成処理実行条件としては、例えば、プロキシファイルが、プロキシ対象ファイルを格納するディレクトリ又はメディアに存在する場合に、プロキシファイルに格納されているサムネイル画像の数が上限に達していることを採用することができる。

【0636】

ステップＳ３１１において、ファイル制御部４３は、例えば、プロキシ対象ファイルに格納された本サムネイル画像の生成に用いられた元画像を用いて、第１の形態のプロキシファイルに格納するプロキシサムネイル画像を生成し、処理は、ステップＳ３１２に進む。

【0637】

なお、ステップＳ３１１では、元画像からプロキシサムネイル画像を生成することに代えて、元画像から生成された本サムネイル画像を、そのまま、プロキシサムネイル画像として取得（コピー）することができる。

【0638】

ステップＳ３１２において、ファイル制御部４３は、図５２のステップＳ２１２と同様に、プロキシファイルに設けるfreeボックスのサイズ（大きさ）を計算し、処理は、ステップＳ３１３に進む。

【0639】

ステップＳ３１３では、ファイル制御部４３は、ステップＳ３１２で計算されたサイズのfreeボックスを有し、ステップＳ３１１で生成されたプロキシサムネイル画像、すなわち、例えば、プロキシ対象ファイルに格納された主画像のサムネイル画像がプロキシアイテムとしてmdatボックスに格納された通常のコレクションファイルを、プロキシファイルとして生成し、プロキシファイル生成処理を終了する。

【0640】

図６９は、プロキシ対象ファイルの生成時に第１の形態のプロキシファイルに格納するサムネイル画像を生成する場合の追加処理の例を説明するフローチャートである。

【0641】

ファイル制御部４３は、HEIFファイルを生成した場合、そのHEIFファイルを、プロキシ対象ファイルとする追加処理を実行する追加処理実行条件が満たされるときには、以下の追加処理を実行する。

【0642】

追加処理実行条件としては、例えば、プロキシファイルが、プロキシ対象ファイルを格納するディレクトリ又はメディアに既に存在し、そのプロキシファイルに格納されているサムネイル画像の数が上限に達していないことを採用することができる。

【0643】

追加処理は、既に存在するプロキシファイル（既存プロキシファイル）を追加処理対象として行われる。

【0644】

ステップＳ３２１において、ファイル制御部４３は、図６８のステップＳ３１１と同様に、プロキシサムネイル画像を、追加サムネイル画像として生成し、処理は、ステップＳ３２２に進む。

【0645】

ステップＳ３２２ないしＳ３２６では、図５３のステップＳ２２２ないしＳ２２６とそれぞれ同様の処理が行われ、追加処理は終了する。

【0646】

図７０は、プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理を説明する図である。

【0647】

なお、プロキシ対象ファイルの生成時に第２の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理、及び、追加処理については、プロキシ対象ファイルに、特定情報が書き込まれない点、及び、特定情報として、プロキシ対象ファイルに書き込む必要がない情報が採用される点を除き、第３の形態のプロキシファイルの場合と同様であるため、説明を省略する。

【0648】

図７０は、第３の形態のプロキシファイルの構造の例を示している。

【0649】

図７０のＡは、プロキシファイル生成処理により生成されるプロキシファイルの構造の例を示している。

【0650】

プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理では、ファイル制御部４３は、第１の形態のプロキシファイルを生成するプロキシファイル生成処理（図６７）と同様に、プロキシ対象ファイルの生成時に、そのプロキシ対象ファイルに格納される本サムネイル画像の生成に用いられる元画像を用いて、第３の形態のプロキシファイルに格納するプロキシサムネイル画像を生成する。

【0651】

ファイル制御部４３は、例えば、freeボックスを有し、プロキシ対象ファイルに格納された主画像のサムネイル画像としてのプロキシサムネイル画像がプロキシアイテムとしてmdatボックスに格納された関連付け型コレクションファイルを、第３の形態のプロキシファイルとして生成する。

【0652】

図７０のＡでは、プロキシファイル生成処理により、２個のプロキシサムネイル画像A及びBが（主画像として）格納されたプロキシファイルが生成されている。また、freeボックスは、metaボックスに設けられている。プロキシファイル生成処理により生成されるプロキシファイルのmetaボックスには、プロキシサムネイル画像A及びBのメタデータが格納される。

【0653】

さらに、図７０では、プロキシファイルとして、第１の関連付け型コレクションファイルが採用されており、プロキシファイルは、metaボックス内に、関連付け情報格納ボックスを有する。関連付け情報格納ボックスには、プロキシサムネイル画像AのアイテムID=1と、プロキシサムネイル画像Aに対応する主画像の特定情報としてのUUID#Aとを対応付けた関連付け情報、及び、プロキシサムネイル画像BのアイテムID=2と、プロキシサムネイル画像Bに対応する主画像の特定情報としてのUUID#Bとを対応付けた関連付け情報が格納されている。

【0654】

図７０のＢは、追加処理により他の主画像のプロキシサムネイル画像が追加された後のプロキシファイルの構造の例を示している。

【0655】

プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するプロキシサムネイル画像を生成する場合の追加処理では、例えば、プロキシファイルの生成後に生成されるHEIFファイルを、新たなプロキシ対象ファイルとして、その新たなプロキシ対象ファイルに格納される主画像のプロキシサムネイル画像が、既に生成されている既存プロキシファイルに追加される。

【0656】

すなわち、ファイル制御部４３は、新たなプロキシ対象ファイルの生成時に、その新たなプロキシ対象ファイルに格納される本サムネイル画像の生成に用いられる元画像を用いて、第３の形態のプロキシファイルに追加するプロキシサムネイル画像を生成する。

【0657】

図７０のＢでは、追加処理により、２個のプロキシサムネイル画像C及びDが（主画像として）、図７０のＡの既存プロキシファイルのmdatボックスの既に格納されているプロキシサムネイル画像A及びBの後に追加されている。

【0658】

ファイル制御部４３は、プロキシサムネイル画像C及びDの追加にあたり、metaボックスを、プロキシサムネイル画像C及びDのメタデータを追加した状態に書き換える。

【0659】

さらに、ファイル制御部４３は、metaボックス（の関連付け情報格納ボックス）を、プロキシサムネイル画像CのアイテムID=3と、プロキシサムネイル画像Cに対応する主画像の特定情報としてのUUID#Cとを対応付けた関連付け情報、及び、プロキシサムネイル画像DのアイテムID=4と、プロキシサムネイル画像Dに対応する主画像の特定情報としてのUUID#Dとを対応付けた関連付け情報を追加した状態に書き換える。

【0660】

そして、ファイル制御部４３は、metaボックスの書き換えによって増加したmetaボックスの容量の増加分だけ、freeボックスの容量を削減する。既存プロキシファイルへの、さらに新たなプロキシ対象ファイルに格納された主画像のプロキシサムネイル画像の追加は、同様にして行われる。

【0661】

図７１は、プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合のプロキシファイル生成処理の例を説明するフローチャートである。

【0662】

ファイル制御部４３は、HEIFファイルを生成した場合、そのHEIFファイルを、プロキシ対象ファイルとし、図６８で説明したプロキシファイル生成処理実行条件が満たされるときには、以下のプロキシファイル生成処理を実行する。

【0663】

ステップＳ３４１において、ファイル制御部４３は、図６８のステップＳ３１１と同様に、プロキシサムネイル画像を生成し、処理は、ステップＳ３４２に進む。

【0664】

ステップＳ３４２において、ファイル制御部４３は、ステップＳ３４１で生成されたプロキシサムネイル画像に対応する主画像の特定情報としての、例えば、uuidを生成することにより取得し、処理は、ステップＳ３４３に進む。

【0665】

ステップＳ３４３において、ファイル制御部４３は、図５５のステップＳ２４３と同様に、プロキシファイルに設けるfreeボックスのサイズ（大きさ）を計算し、処理は、ステップＳ３４４に進む。

【0666】

ステップＳ３４４では、ファイル制御部４３は、ステップＳ３４３で計算されたサイズのfreeボックスを有し、ステップＳ３４１で生成されたプロキシサムネイル画像、すなわち、プロキシ対象ファイルに格納された主画像のサムネイル画像がプロキシアイテムとしてmdatボックスに格納された、例えば、第１の関連付け型コレクションファイルを、プロキシファイルとして生成し、プロキシファイル生成処理を終了する。

【0667】

ステップＳ３４４のプロキシファイルの生成では、プロキシサムネイル画像が、そのプロキシサムネイル画像に対応する主画像の特定情報、例えば、ステップＳ３４２で取得されたuuidと関連付けて格納された第１の関連付け型コレクションファイルが生成される。

【0668】

すなわち、プロキシサムネイル画像がmdatボックスに格納されるとともに、そのプロキシサムネイル画像のアイテムIDと、そのプロキシサムネイル画像に対応する主画像のuuidとを対応付けた関連付け情報が関連付け情報格納ボックスに格納された第１の関連付け型コレクションファイルが、プロキシファイルとして生成される。

【0669】

図７２は、プロキシ対象ファイルの生成時に第３の形態のプロキシファイルに格納するサムネイル画像を生成する場合の追加処理の例を説明するフローチャートである。

【0670】

ファイル制御部４３は、HEIFファイルを生成した場合、そのHEIFファイルを、プロキシ対象ファイルとし、図６９で説明した追加処理実行条件が満たされるときには、以下の追加処理を実行する。

【0671】

追加処理は、既に存在するプロキシファイル（既存プロキシファイル）を追加処理対象として行われる。ここでは、既存プロキシファイルは、例えば、図７０及び図７１の場合と同様に、第１の関連付け型コレクションファイルであることとする。

【0672】

ステップＳ３５１において、ファイル制御部４３は、図６９のステップＳ３２１と同様に、プロキシサムネイル画像を、追加サムネイル画像として生成し、処理は、ステップＳ３５２に進む。

【0673】

ステップＳ３５２において、ファイル制御部４３は、ステップＳ３５１で生成された追加サムネイル画像に対応する主画像の特定情報としての、例えば、uuidを取得し、処理は、ステップＳ３５３に進む。

【0674】

ステップＳ３５３において、ファイル制御部４３は、追加サムネイル画像を、追加処理対象のプロキシファイルのmdatボックスにプロキシアイテムとして追加し、処理は、ステップＳ３５４に進む。

【0675】

ステップＳ３５４では、ファイル制御部４３は、追加処理対象のプロキシファイルからmetaボックスを読み出すことにより取得し、処理は、ステップＳ３５５に進む。

【0676】

ステップＳ３５５では、ファイル制御部４３は、追加処理対象のプロキシファイルのfreeボックス内の残容量を取得し、その残容量が、追加サムネイル画像のメタデータの追加、及び、追加サムネイル画像のアイテムIDと、その追加サムネイル画像に対応する主画像の特定情報としてのuuidとを対応付けた関連付け情報の追加に足りることを確認して、処理は、ステップＳ３５６に進む。

【0677】

なお、ステップＳ３５５において、freeボックスの残容量が追加に足りない場合は、図５３のステップＳ２２４で説明した処理と同様の処理を行うことができる。

【0678】

ステップＳ３５６では、ファイル制御部４３は、ステップＳ３５４で取得したmetaボックスを、新たなmetaボックスに生成し直す。

【0679】

新たなmetaボックスは、ステップＳ３５４で取得したmetaボックスに、追加処理対象のプロキシファイルのmdatボックスに追加されたプロキシアイテムとしての追加サムネイル画像のメタデータを追加するとともに、metaボックスの関連付け情報格納ボックスに、追加サムネイル画像のアイテムIDと、その追加サムネイル画像に対応する主画像の特定情報としてのuuidとを対応付けた関連付け情報を追加することにより生成される。

【0680】

ファイル制御部４３は、新たなmetaボックスによって、追加処理対象のプロキシファイルのmetaボックスを書き換え、処理は、ステップＳ３５６からステップＳ３５７に進む。

【0681】

ステップＳ３５７では、ファイル制御部４３は、書き換え前のmetaボックスに対する新たなmetaボックスのサイズの増加分だけサイズを減少させた新たなfreeボックスを生成する。さらに、ファイル制御部４３は、新たなfreeボックスによって、追加処理対象のプロキシファイルのfreeボックスを書き換え、追加処理は終了する。

【0682】

＜既に存在するHEIFファイルをプロキシ対象ファイルとするプロキシファイル生成処理、及び、追加処理＞

【0683】

図７３は、既に存在するHEIFファイルをプロキシ対象ファイルとするプロキシファイル生成処理の例を説明するフローチャートである。

【0684】

ファイル制御部４３は、例えば、ユーザやアプリケーションからプロキシファイルの生成の要求があり、図６８で説明したプロキシファイル生成処理実行条件が満たされる場合、以下のプロキシファイル生成処理を実行する。ここでは、プロキシファイル生成処理において、例えば、第１の関連付け型コレクションファイルの第２又は第３の形態のプロキシファイルが生成されることとする。

【0685】

ステップＳ３７１において、ファイル制御部４３は、例えば、所定のディレクトリ又はメディアに既に存在するHEIFファイル（の全部又は一部）を、プロキシ対象ファイルとして選択する。さらに、ファイル制御部４３は、プロキシ対象ファイル内の主画像のサムネイル画像を、プロキシサムネイル画像として取得し、処理は、ステップＳ３７１からステップＳ３７２に進む。

【0686】

ファイル制御部４３は、例えば、プロキシ対象ファイルに格納された主画像の本サムネイル画像のコピーを、プロキシサムネイル画像として取得する。また、ファイル制御部４３は、例えば、プロキシ対象ファイルに格納された主画像、又は、本サムネイル画像を間引くことや、主画像又は本サムネイル画像の信号フォーマットの変換や再符号化を行うこと等によって、プロキシサムネイル画像を生成する。

【0687】

ステップＳ３７２において、ファイル制御部４３は、ステップＳ３７１で生成されたプロキシサムネイル画像に対応する主画像の特定情報としての、例えば、uuidを生成することにより取得し、処理は、ステップＳ３７３に進む。

【0688】

ステップＳ３７３において、ファイル制御部４３は、図５５のステップＳ２４３と同様に、プロキシファイルに設けるfreeボックスのサイズ（大きさ）を計算し、処理は、ステップＳ３７４に進む。

【0689】

ステップＳ３７４では、ファイル制御部４３は、ステップＳ３７３で計算されたサイズのfreeボックスを有し、ステップＳ３７１で生成されたプロキシサムネイル画像がプロキシアイテムとしてmdatボックスに格納された、例えば、第１の関連付け型コレクションファイルを、プロキシファイルとして生成し、プロキシファイル生成処理を終了する。

【0690】

ステップＳ３７４のプロキシファイルの生成では、プロキシサムネイル画像が、そのプロキシサムネイル画像に対応する主画像の特定情報としてのステップＳ３７２で取得されたuuidと関連付けて格納された第１の関連付け型コレクションファイルが生成される。

【0691】

すなわち、プロキシサムネイル画像がmdatボックスに格納されるとともに、そのプロキシサムネイル画像のアイテムIDと、そのプロキシサムネイル画像に対応する主画像のuuidとを対応付けた関連付け情報が関連付け情報格納ボックスに格納された第１の関連付け型コレクションファイルが、プロキシファイルとして生成される。

【0692】

図７４は、既に存在するHEIFファイルをプロキシ対象ファイルとする追加処理の例を説明するフローチャートである。

【0693】

ファイル制御部４３は、例えば、ユーザやアプリケーションからプロキシファイルの生成の要求があり、図６９で説明した追加処理実行条件が満たされる場合、以下の追加処理を実行する。追加処理は、既に存在するプロキシファイル（既存プロキシファイル）を追加処理対象として行われる。ここでは、既存プロキシファイルは、第１の関連付け型コレクションファイルの第２又は第３の形態のプロキシファイルであることとする。

【0694】

ステップＳ３８１において、ファイル制御部４３は、例えば、所定のディレクトリ又はメディアに既に存在するHEIFファイル（の全部又は一部）を、プロキシ対象ファイルとして、プロキシ対象ファイルに格納された主画像のプロキシサムネイル画像を、追加サムネイル画像として取得し、処理は、ステップＳ３８２に進む。

【0695】

ファイル制御部４３は、例えば、プロキシ対象ファイルに格納された主画像の本サムネイル画像のコピーを、追加サムネイル画像として取得する。また、ファイル制御部４３は、例えば、プロキシ対象ファイルに格納された主画像、又は、本サムネイル画像を間引くことや、主画像又は本サムネイル画像の信号フォーマットの変換や再符号化を行うこと等によって、追加サムネイル画像を生成する。

【0696】

ステップＳ３８２において、ファイル制御部４３は、ステップＳ３８１で生成された追加サムネイル画像に対応する主画像の特定情報としての、例えば、uuidを取得し、処理は、ステップＳ３８３に進む。

【0697】

ステップＳ３８３において、ファイル制御部４３は、追加サムネイル画像を、追加処理対象の既存プロキシファイルのmdatボックスにプロキシアイテムとして追加し、処理は、ステップＳ３８４に進む。

【0698】

ステップＳ３８４では、ファイル制御部４３は、追加処理対象のプロキシファイルからmetaボックスを読み出すことにより取得し、処理は、ステップＳ３８５に進む。

【0699】

ステップＳ３８５では、ファイル制御部４３は、追加処理対象のプロキシファイルのfreeボックス内の残容量を取得し、その残容量が、追加サムネイル画像のメタデータの追加、及び、追加サムネイル画像のアイテムIDと、その追加サムネイル画像に対応する主画像の特定情報としてのuuidとを対応付けた関連付け情報の追加に足りることを確認して、処理は、ステップＳ３８６に進む。

【0700】

なお、ステップＳ３８５において、freeボックスの残容量が追加に足りない場合は、図５３のステップＳ２２４で説明した処理と同様の処理を行うことができる。

【0701】

ステップＳ３８６では、ファイル制御部４３は、ステップＳ３８４で取得したmetaボックスを、新たなmetaボックスに生成し直す。新たなmetaボックスは、ステップＳ３８４で取得したmetaボックスに、追加処理対象の既存プロキシファイルのmdatボックスに追加されたプロキシアイテムとしての追加サムネイル画像のメタデータを追加するとともに、metaボックスの関連付け情報格納ボックスに、追加サムネイル画像のアイテムIDと、その追加サムネイル画像に対応する主画像の特定情報としてのuuidとを対応付けた関連付け情報を追加することにより生成される。

【0702】

ファイル制御部４３は、新たなmetaボックスによって、追加処理対象のプロキシファイルのmetaボックスを書き換え、処理は、ステップＳ３８６からステップＳ３８７に進む。

【0703】

ステップＳ３８７では、ファイル制御部４３は、書き換え前のmetaボックスに対する新たなmetaボックスのサイズの増加分だけサイズを減少させた新たなfreeボックスを生成する。さらに、ファイル制御部４３は、新たなfreeボックスによって、追加処理対象のプロキシファイルのfreeボックスを書き換え、追加処理は終了する。

【0704】

＜本技術を適用したコンピュータの説明＞

【0705】

次に、上述したファイル制御部４３その他の信号処理部１３（図１）を構成する各ブロックの一連の処理は、ハードウエアにより行うこともできるし、ソフトウエアにより行うこともできる。一連の処理をソフトウエアによって行う場合には、そのソフトウエアを構成するプログラムが、コンピュータ等にインストールされる。

【0706】

図７５は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示すブロック図である。

【0707】

プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク９０５やROM９０３に予め記録しておくことができる。

【0708】

あるいはまた、プログラムは、ドライブ９０９によって駆動されるリムーバブル記録媒体９１１に格納（記録）しておくことができる。このようなリムーバブル記録媒体９１１は、いわゆるパッケージソフトウエアとして提供することができる。ここで、リムーバブル記録媒体９１１としては、例えば、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリ等がある。

【0709】

なお、プログラムは、上述したようなリムーバブル記録媒体９１１からコンピュータにインストールする他、通信網や放送網を介して、コンピュータにダウンロードし、内蔵するハードディスク９０５にインストールすることができる。すなわち、プログラムは、例えば、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送することができる。

【0710】

コンピュータは、CPU(Central Processing Unit)９０２を内蔵しており、CPU９０２には、バス９０１を介して、入出力インタフェース９１０が接続されている。

【0711】

CPU９０２は、入出力インタフェース９１０を介して、ユーザによって、入力部９０７が操作等されることにより指令が入力されると、それに従って、ROM(Read Only Memory)９０３に格納されているプログラムを実行する。あるいは、CPU９０２は、ハードディスク９０５に格納されたプログラムを、RAM(Random Access Memory)９０４にロードして実行する。

【0712】

これにより、CPU９０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU９０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース９１０を介して、出力部９０６から出力、あるいは、通信部９０８から送信、さらには、ハードディスク９０５に記録等させる。

【0713】

なお、入力部９０７は、キーボードや、マウス、マイク等で構成される。また、出力部９０６は、LCD(Liquid Crystal Display)やスピーカ等で構成される。

【0714】

ここで、本明細書において、コンピュータがプログラムに従って行う処理は、必ずしもフローチャートとして記載された順序に沿って時系列に行われる必要はない。すなわち、コンピュータがプログラムに従って行う処理は、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含む。

【0715】

また、プログラムは、１のコンピュータ（プロセッサ）により処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。

【0716】

さらに、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。

【0717】

なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。

【0718】

例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

【0719】

また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。

【0720】

さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。

【0721】

また、本明細書に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。

【0722】

なお、本技術は、以下の構成をとることができる。

【0723】

＜１＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成するファイル制御部を備える
ファイル処理装置。
＜２＞
前記ファイル制御部は、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルであるコレクションファイルを、前記プロキシファイルとして生成する
＜１＞に記載のファイル処理装置。
＜３＞
前記ファイル制御部は、前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納された前記プロキシファイルを生成する
＜２＞に記載のファイル処理装置。
＜４＞
前記ファイル制御部は、前記関連画像を特定するアイテムIDと前記特定情報とを対応付けた前記関連付け情報が格納された前記プロキシファイルを生成する
＜３＞に記載のファイル処理装置。
＜５＞
前記ファイル制御部は、前記関連付け情報がmetaボックス、又は、mdatボックスに格納された前記プロキシファイルを生成する
＜４＞に記載のファイル処理装置。
＜６＞
前記ファイル制御部は、
前記特定情報が、アイテムとして前記プロキシファイルのmdatボックスに格納され、
前記関連画像を特定するアイテムIDと、前記mdatボックスに格納された前記特定情報を特定するアイテムIDとを対応付けた前記関連付け情報がmetaボックスに格納された
前記プロキシファイルを生成する
＜３＞に記載のファイル処理装置。
＜７＞
前記関連画像は、前記画像と画質又はデータ量が異なる画像である
＜１＞ないし＜６＞のいずれかに記載のファイル処理装置。
＜８＞
前記関連画像は、前記画像と画素数若しくはサイズが異なる同一内容の画像、前記画像と信号フォーマットが異なる同一内容の画像、又は、前記画像と階調が異なる同一内容の画像である
＜１＞ないし＜６＞のいずれかに記載のファイル処理装置。
＜９＞
前記HEIFファイルには、前記画像と、前記画像のサムネイル画像とが格納され、
前記関連画像は、前記HEIFファイルに格納された前記サムネイル画像、前記サムネイル画像の圧縮率とは異なる圧縮率の符号化が採用された画像、又は、前記サムネイル画像とは異なるコーデックが採用された画像である
＜１＞ないし＜６＞のいずれかに記載のファイル処理装置。
＜１０＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成する
ことを含むファイル処理方法。
＜１１＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルを生成するファイル制御部
として、コンピュータを機能させるためのプログラム。
＜１２＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルに格納された前記関連画像から選択された選択関連画像に対応する前記画像を検出するファイル制御部を備える
ファイル処理装置。
＜１３＞
前記プロキシファイルは、前記関連画像がアイテムとして格納された、イメージアイテム形式のHEIFファイルである
＜１２＞に記載のファイル処理装置。
＜１４＞
前記プロキシファイルには、前記関連画像と前記関連画像に対応する前記画像を特定する特定情報とを関連付ける関連付け情報が格納され、
前記ファイル制御部は、前記選択関連画像に関連付けられた前記特定情報によって特定される前記画像を、前記選択関連画像に対応する前記画像として検出する
＜１３＞に記載のファイル処理装置。
＜１５＞
前記プロキシファイルには、前記関連画像を特定するアイテムIDと前記特定情報とを対応付けた前記関連付け情報が格納され、
前記ファイル制御部は、前記選択関連画像のアイテムIDに対応付けられた前記特定情報によって特定される前記画像を、前記選択関連画像に対応する前記画像として検出する
＜１４＞に記載のファイル処理装置。
＜１６＞
前記関連画像は、前記画像と画質又はデータ量が異なる画像である
＜１２＞ないし＜１５＞のいずれかに記載のファイル処理装置。
＜１７＞
前記関連画像は、前記画像と画素数若しくはサイズが異なる同一内容の画像、前記画像と信号フォーマットが異なる同一内容の画像、又は、前記画像と階調が異なる同一内容の画像である
＜１２＞ないし＜１５＞のいずれかに記載のファイル処理装置。
＜１８＞
前記HEIFファイルには、前記画像と、前記画像のサムネイル画像とが格納され、
前記関連画像は、前記HEIFファイルに格納された前記サムネイル画像、前記サムネイル画像の圧縮率とは異なる圧縮率の符号化が採用された画像、又は、前記サムネイル画像とは異なるコーデックが採用された画像である
＜１２＞ないし＜１５＞のいずれかに記載のファイル処理装置。
＜１９＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルに格納された前記関連画像から選択された選択関連画像に対応する前記画像を検出する
ことを含むファイル処理方法。
＜２０＞
HEIF(High Efficiency Image File Format)ファイル内の画像に関連する関連画像が格納された他のHEIFファイルであるプロキシファイルに格納された前記関連画像から選択された選択関連画像に対応する前記画像を検出するファイル制御部
として、コンピュータを機能させるためのプログラム。

【符号の説明】

【0724】

１０ ディジタルカメラ， １１ 光学系， １３ 信号処理部， １４ メディア， １５，１６ インタフェース， １７ ボタン／キー， １８ タッチパネル， １９ 液晶パネル， ２０ ビューファインダ， ２１ インタフェース， ４１ 光学系／イメージセンサ制御部， ４２ 符号化制御部， ４３ ファイル制御部， ４４ メディア制御部， ４５ 操作制御部， ４６ 表示制御部， ４７ UI制御部， ９０１ バス， ９０２ CPU， ９０３ ROM， ９０４ RAM， ９０５ ハードディスク， ９０６ 出力部， ９０７ 入力部， ９０８ 通信部， ９０９ ドライブ， ９１０ 入出力インタフェース， ９１１ リムーバブル記録媒体

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】

【図31】

【図32】

【図33】

【図34】

【図35】

【図36】

【図37】

【図38】

【図39】

【図40】

【図41】

【図42】

【図43】

【図44】

【図45】

【図46】

【図47】

【図48】

【図49】

【図50】

【図51】

【図52】

【図53】

【図54】

【図55】

【図56】

【図57】

【図58】

【図59】

【図60】

【図61】

【図62】

【図63】

【図64】

【図65】

【図66】

【図67】

【図68】

【図69】

【図70】

【図71】

【図72】

【図73】

【図74】

【図75】