特開2023-182491アニメーション作品を用いた記憶支援プログラム、アニメーション作品を用いた記憶支援方法及びアニメーション作品を用いた記憶支援装置
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023182491
(43)【公開日】2023-12-26
(54)【発明の名称】アニメーション作品を用いた記憶支援プログラム、アニメーション作品を用いた記憶支援方法及びアニメーション作品を用いた記憶支援装置
(51)【国際特許分類】
G09B 5/06 20060101AFI20231219BHJP
G09B 19/06 20060101ALI20231219BHJP
G06Q 50/20 20120101ALI20231219BHJP
【ＦＩ】
G09B5/06
G09B19/06
G06Q50/20
【審査請求】未請求
【請求項の数】14
【出願形態】書面
(21)【出願番号】P 2022105121
(22)【出願日】2022-06-14
(71)【出願人】
【識別番号】311000649
【氏名又は名称】伴野 啓介
(72)【発明者】
【氏名】伴野 啓介
【テーマコード（参考）】
2C028
5L049
【Ｆターム（参考）】
2C028AA03
2C028BA05
2C028BB04
2C028BC05
2C028BD01
5L049CC34
(57)【要約】 （修正有）
【課題】利用者が記憶したい単語を効果的に記憶させ易くする。
【解決手段】抽出手順は、利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に所定字幕から利用者が選択した単語と、所定字幕とを抽出する。生成手順は、抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち所定映像動画に対応した第１領域に追加し、抽出手順により抽出された所定字幕を、第１領域に対応して映像動画ごとに設定された第２領域であって第１領域に追加された単語の記憶を支援するための所定映像動画に対応した第２領域に追加することで、映像動画ごとに、利用者が選択した単語をまとめた辞書を生成する。更新手順は、単語の追加時に、所定映像動画の字幕の中で所定字幕が表示される表示順が早いほど、単語が上位に表示されるように辞書を更新する。
【選択図】図２
【解決手段】抽出手順は、利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に所定字幕から利用者が選択した単語と、所定字幕とを抽出する。生成手順は、抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち所定映像動画に対応した第１領域に追加し、抽出手順により抽出された所定字幕を、第１領域に対応して映像動画ごとに設定された第２領域であって第１領域に追加された単語の記憶を支援するための所定映像動画に対応した第２領域に追加することで、映像動画ごとに、利用者が選択した単語をまとめた辞書を生成する。更新手順は、単語の追加時に、所定映像動画の字幕の中で所定字幕が表示される表示順が早いほど、単語が上位に表示されるように辞書を更新する。
【選択図】図２
【特許請求の範囲】
【請求項1】
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
【請求項2】
前記映像動画は、各話が所定時間長の複数話から構成された映像動画であって、
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
ことを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
ことを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項3】
前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該単語の選択時に表示された当該所定映像動画の一部である映像画像を表示させる表示手順、
を更に有することを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
を更に有することを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項4】
前記表示手順は、
前記単語の選択時に表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
前記単語の選択時に表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項5】
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項6】
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
ことを特徴とする請求項３に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項7】
前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、
を更に有することを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
を更に有することを特徴とする請求項１に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項8】
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
ことを特徴とする請求項７に記載のアニメーション作品を用いた記憶支援プログラム。
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
ことを特徴とする請求項７に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項9】
前記提案手順は、
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項８に記載のアニメーション作品を用いた記憶支援プログラム。
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項８に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項10】
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
ことを特徴とする請求項７に記載のアニメーション作品を用いた記憶支援プログラム。
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
ことを特徴とする請求項７に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項11】
前記提案手順は、
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項１０に記載のアニメーション作品を用いた記憶支援プログラム。
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項１０に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項12】
前記提案手順は、
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項１１に記載のアニメーション作品を用いた記憶支援プログラム。
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
ことを特徴とする請求項１１に記載のアニメーション作品を用いた記憶支援プログラム。
【請求項13】
コンピュータが実行する記憶支援方法であって、
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出工程と、
前記抽出工程により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出工程と、
前記抽出工程により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
【請求項14】
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出部と、
前記抽出部により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
前記抽出部により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、アニメーション作品を用いた記憶支援プログラム、アニメーション作品を用いた記憶支援方法及びアニメーション作品を用いた記憶支援装置に関する。
【背景技術】
【0002】
外国語の学習において、単語の記憶は最も重要な学習の一つである。しかしながら、外国語は利用者の文化とは異なる文化で発展してきた言語であるため、単語を記憶し難い場合が多い。市販で一般に入手可能な辞書には、単語の意味や例文等が記載されているが、このような辞書では単語の使い方まで利用者が正確に熟達することはできないため、記憶した単語でも時間の経過とともに忘れてしまう場合が多い。
【0003】
従来、単語を用いた文章に容易にアクセスできるようにすることで単語を理解し易くさせる技術が知られている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０１１－２２１４１４号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、従来の技術では、利用者が記憶したい単語を効果的に記憶させ易くすることができなかった。例えば、従来の技術では、単語を利用者にとって想起し易い映像に関連付けて記憶させることができないため、利用者が記憶したい単語を効果的に記憶させ易くすることができなかった。
【0006】
本願は、上記に鑑みてなされたものであって、利用者が記憶したい単語を効果的に記憶させ易くすることを目的とする。
【課題を解決するための手段】
【0007】
本願に係るアニメーション作品を用いた記憶支援プログラムは、利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、をコンピュータに実行させることを特徴とする。
【発明の効果】
【0008】
実施形態の一態様によれば、利用者が記憶したい単語を効果的に記憶させ易くすることができるという効果を奏する。
【図面の簡単な説明】
【0009】
【発明を実施するための形態】
【0010】
本明細書及び添付図面の記載により、少なくとも以下の事項が明らかとなる。
【0011】
態様１は、利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、をコンピュータに実行させることを特徴とする。
【0012】
態様１によれば、例えば、利用者が映像動画を視聴中に、利用者にとって記憶したい単語が字幕に登場した場合には、その字幕が表示中に単語を選択することで、その単語とその字幕とを対応付けて所定の領域に追加した辞書を生成することができる。また、利用者が視聴した映像動画ごとに利用者のための辞書を生成することができる。また、字幕は映像に対応付けて表示されるため、利用者は字幕から字幕が表示された映像を想起することができる。
【0013】
また、態様１によれば、例えば、利用者と同じ文化で生まれ育った視聴者を主な対象とした映像動画を視聴中に、映像に対応して利用者が学習中の異文化の言語を字幕として閲覧させることができるため、利用者は映像動画の映像や音声を五感で正確に理解しながら、字幕を閲覧することができる。このため、字幕として表示された翻訳文に含まれる単語の使い方を、異文化の言語であっても、映像動画から効果的に学習させることができる。例えば、単語の意味だけでなく、単語がどのような場面で発話者がどのように感じた時にどのような単語とともに使われるかといった単語の使い方を学習させることができる。また、単語の使い方を、映像動画から五感で正確に理解することで、単語から字幕が表示された映像の想起が可能となるだけでなく、映像から単語の想起も可能となる。このため、学習以外の日常生活において、映像を何気なく思い出すだけで、単語の想起が可能となる。また、利用者と同じ文化で生まれ育った視聴者を主な対象とした映像動画は、利用者にとって理解し易いものであるため、映像だけでなく音声も何気なく思い出し易いため、単語を想起し易くさせることができる。
【0014】
また、態様１によれば、例えば、映像動画で表示される字幕の順序になるように辞書に含まれる単語の順序を並び替えることができるため、映像動画のストーリーの順序で単語を表示させることができる。このため、利用者は辞書に含まれる単語を順序通りに見ることで映像動画のストーリーを想起することができるため、その単語の意味や使い方も想起することができる。このように、映像動画のストーリーを一つの括りとして、映像動画の字幕に登場した単語の意味や使い方を想起し易くさせることができる。このため、単語それぞれの意味や使い方を個別に思い出せるか否かを確認する手間を省くことができるため、利用者の復習時の負担を軽減させることができる。
【0015】
態様２は、態様１において、各話が所定時間長の複数話から構成された映像動画であって、前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新することを特徴とする。
【0016】
態様２によれば、例えば、映像動画の話（エピソード）の順番を加味して辞書に含まれる単語の順序を並び替えることができるため、映像動画が複数話から構成される場合でも、利用者は辞書に含まれる単語を順序通りに見ることで映像動画のストーリーを想起することができる。また、話の順番を加味することで各話の字幕に登場した単語同士の順番が結果的に近くなるため、話ごとにストーリーを想起し易くさせることができる。このため、利用者は辞書に含まれる単語を順序通りに見ることで話ごとにストーリーを想起することができる。また、話ごとにストーリーを想起することで、複数話全体のストーリーを想起することができる。このため、話ごとにストーリーが完結する映像動画の場合でも、複数話全体でストーリーが完結する映像動画の場合でもストーリーの想起がし易くなる。また、各話が所定時間長であることで、話ごとにストーリーが想起し易くなるため、単語の想起もし易くなる。このように、各話のストーリーを一つの括りとして、各話の字幕に登場した単語の意味や使い方を想起し易くさせることができる。
【0017】
態様３は、態様１において、前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該単語の選択時に表示された当該所定映像動画の一部である映像画像を表示させる表示手順、を更に有することを特徴とする。
【0018】
態様３によれば、例えば、辞書に含まれる単語の順序に応じた順番で、対応した映像画像を表示させることができるため、利用者は辞書に含まれる単語を見ることなく、単語の順序に応じた順番で対応した映像画像を閲覧するだけで単語の意味や使い方を想起できるか否かを復習することができる。このように、辞書のような文字の羅列ではなく利用者の嗜好に沿った映像動画中の映像画像を表示させることができるため、利用者に学習を実感させることなく復習を行わせることができる。また、利用者の嗜好に沿った映像動画中の映像画像であるほど、利用者は映像画像を閲覧するだけで映像画像の前後の内容が想起し易くなるため、学習時だけでなく復習時も単語の意味や使い方をより深く理解させることができる。
【0019】
態様４は、態様３において、前記単語の選択時に表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させることを特徴とする。
【0020】
態様４によれば、例えば、対象となる映像画像の場面中で最も印象的な映像画像を表示させることができるため、利用者に場面の想起をし易くさせることができる。このため、利用者はそのような映像画像を閲覧することで対象となる映像画像の前後を含む場面全体を想起できるため、対象となる単語の意味や使い方をより深く理解させることができる。また、印象的な映像画像は、その場面中の他の映像画像とは異なる特徴情報（例えば、エフェクト）や、映像動画のメインキャラクターのうち少なくともいずれかのキャラクターを映像に含む場合が多いため、利用者の嗜好に沿った映像動画であるほど、利用者に学習を実感させることなく復習を行わせることができる。また、例えば、対象となる映像画像を、場面中の印象的な映像画像とともに表示させることで、対象となる映像画像の前後の内容を場面全体に絡めて想起させることができる。
【0021】
態様５は、態様３において、前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させることを特徴とする。
【0022】
態様５によれば、例えば、利用者が視聴した映像動画中の映像画像を辞書に追加して表示させることができるため、映像画像を想起することで前後の内容も自然と想起されることから、単語と映像画像とを対応付けて復習させるだけでなく、映像画像の前後の内容を含めて対応付けて復習させることができる。また、辞書に含まれる単語の順序に応じた順番で映像画像も表示されるため、その順序で映像画像を見ることで利用者は映像動画のストーリーを想起できるため、映像動画の視聴中に理解した単語の意味や使い方を想起することができる。また、映像画像に単語を重畳して表示させることで、単語と映像画像とをより深く対応付けて記憶させることができるため、単語から映像画像の想起、及び、映像画像から単語の想起をし易くさせることができる。また、利用者の嗜好に沿った映像動画であるほど、何気ない瞬間に思い出す機会が多くなるため、利用者に学習を実感させることなく日常生活の中で自然に記憶させることができる。
【0023】
態様６は、態様３において、前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させることを特徴とする。
【0024】
態様６によれば、例えば、利用者が視聴した映像動画中の映像画像を辞書に追加して表示させることができるため、映像画像を想起することで前後の内容も自然と想起されることから、単語と映像画像とを対応付けて復習させるだけでなく、映像画像の前後の内容を含めて対応付けて復習させることができる。また、辞書に含まれる単語の順序に応じた順番で映像画像も表示されるため、その順序で映像画像を見ることで利用者は映像動画のストーリーを想起できるため、映像動画の視聴中に理解した単語の意味や使い方を想起することができる。また、映像画像に字幕を重畳して表示させることで、その字幕に含まれる単語と映像画像とをより深く対応付けて記憶させることができる。また、字幕は映像画像の前後の内容の想起を手助けするため、映像画像の前後の内容を含めて対応付けて記憶させることができる。このため、単語から映像画像の想起、及び、映像画像から単語の想起をし易くさせることができる。また、利用者の嗜好に沿った映像動画であるほど、何気ない瞬間に思い出す機会が多くなるため、利用者に学習を実感させることなく日常生活の中で自然に記憶させることができる。
【0025】
態様７は、態様１において、前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、を更に有することを特徴とする。
【0026】
態様７によれば、例えば、利用者は一の映像動画の字幕に登場した単語を他の映像動画で復習することができるため、その単語の記憶を定着させることができる。また、利用者は一の映像動画の字幕に登場した単語が他の映像動画でどのように使われるのかを確認することができるため、その単語の意味や使い方をより深く理解させることができる。また、一の映像動画の字幕に登場した単語をより多く含む他の映像動画はその一の映像動画と特徴（例えば、映像動画の世界観やストーリー、映像動画のストーリーの中心となるキャラクター（メインキャラクター）の特徴）が類似し得るため、例えば一の映像動画を見終わった後の次の映像動画の候補として、一の映像動画と特徴が類似した他の映像動画を提案することができる。このため、利用者は一の映像動画の後に他の映像動画を抵抗なく快適に視聴できるため、他の映像動画を用いた単語の学習を抵抗なく快適に行わせることができる。
【0027】
態様８は、態様７において、前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案することを特徴とする。
【0028】
態様８によれば、例えば、他の映像動画の字幕に含まれる単語であって一の映像動画の字幕に登場しなかった単語も一の映像動画の字幕に登場した単語と関連して広く用いられる共起語や類義語（同義語も含む）等である場合もあり、また、共起語や類義語等はまとめて記憶し易いため、他の映像動画から生成された辞書に含まれる単語を記憶させ易くすることができる。また、共起語や類義語等である場合には、一の映像動画の字幕に登場しなかった単語でも一の映像動画のストーリーを想起することで推測できる場合もあるため、他の映像動画から生成された辞書に含まれる単語を記憶させ易くすることができる。
【0029】
態様９は、態様８において、前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案することを特徴とする。
【0030】
態様９によれば、例えば、他の映像動画の字幕に含まれる単語であって一の映像動画の字幕に登場しなかった単語も一の映像動画の字幕に登場した単語に対応した発話を行ったメインキャラクターの特徴と類似した特徴のキャラクターの発話に対応して広く用いられる単語である場合もあるため、他の映像動画から生成された辞書に含まれる単語を記憶させ易くすることができる。また、利用者の映像動画に対する嗜好性はメインキャラクターの特徴に起因する場合も多いため、利用者は他の映像動画を抵抗なく快適に視聴することができる。このため、利用者に学習を実感させることなく、他の映像動画を用いた単語の学習を抵抗なく快適に行わせることができる。
【0031】
態様１０は、態様７において、前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案することを特徴とする。
【0032】
態様１０によれば、例えば、対象となる辞書以外の辞書が生成された他の映像動画の特徴を基に辞書が生成されていない他の映像動画を提案することができるため、利用者の嗜好に沿った映像動画を提案することができる。
【0033】
態様１１は、態様１０において、前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案することを特徴とする。
【0034】
態様１１によれば、例えば、対象となる辞書以外の辞書が生成された他の映像動画のメインキャラクターの特徴を基に辞書が生成されていない他の映像動画を提案することができるため、利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を提案することができる。
【0035】
態様１２は、態様１１において、前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案することを特徴とする。
【0036】
態様１２によれば、例えば、利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を提案することができるため、利用者に学習を実感させることなく、他の映像動画を用いた単語の学習を抵抗なく快適に行わせることができる。
【0037】
以下に、本願に係るアニメーション作品を用いた記憶支援プログラム、アニメーション作品を用いた記憶支援方法及びアニメーション作品を用いた記憶支援装置を実施するための形態（以下、「実施形態」と呼ぶ。）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係るアニメーション作品を用いた記憶支援プログラム、アニメーション作品を用いた記憶支援方法及びアニメーション作品を用いた記憶支援装置が限定されるものではない。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。
【0038】
〔１．はじめに〕
外国語の学習において、単語の記憶は最も重要な学習の一つである。しかしながら、外国語は利用者の文化とは異なる文化で発展してきた言語であるため、単語を記憶し難い場合が多い。市販で一般に入手可能な辞書には、単語の意味や例文等が記載されているが、このような辞書では単語の使い方まで利用者が正確に熟達することはできないため、記憶した単語でも時間の経過とともに忘れてしまう場合が多い。
外国語の学習において、単語の記憶は最も重要な学習の一つである。しかしながら、外国語は利用者の文化とは異なる文化で発展してきた言語であるため、単語を記憶し難い場合が多い。市販で一般に入手可能な辞書には、単語の意味や例文等が記載されているが、このような辞書では単語の使い方まで利用者が正確に熟達することはできないため、記憶した単語でも時間の経過とともに忘れてしまう場合が多い。
【0039】
また、市販で一般に入手可能な辞書は、辞書の難易度が上がるほど、単語の意味を説明するための言葉や例文に使われる言葉の難易度も上がる傾向にある場合が多い。例えば、利用者の言語でも馴染みが低い言葉が用いられる場合がある。しかしながら、異文化の言語を、利用者の言語でも馴染みが低い言葉で説明されても利用者が理解できない場合がある。また、利用者が理解できたとしても、そのような理解で記憶した単語では時間の経過とともに忘れてしまう場合が多い。
【0040】
また、異文化の言語をその異文化で制作された映像動画の中で学習させる手法は異文化の言語の学習において広く用いられる手法であるが、そのような映像動画に登場する発話者の感性は、利用者の感性と異なる場合があるため、言語の問題だけでなくそのような映像動画はそもそも理解し難い場合がある。例えば、異文化で長年生活してきた利用者でも、その異文化で制作された映像動画において喜怒哀楽のポイントが理解できない場合がある。例えば、「笑う」ポイントが理解できずコメディーを十分に楽しめない場合がある。このように、その異文化で生まれ育った利用者でなければ、その異文化の言語の理解度に関わらず、その異文化で制作された映像動画を深く理解できない場合がある。
【0041】
本願は、上記に鑑みてなされたものであって、利用者が記憶したい単語を効果的に記憶させ易くすることを目的とする。
【0042】
（実施形態）
〔２．情報処理システムの構成〕
図１に示す情報処理システム１について説明する。図１に示すように、情報処理システム１は、端末装置１０と、記憶支援装置１００とが含まれる。端末装置１０と、記憶支援装置１００とは所定の通信網（ネットワークＮ）を介して、有線又は無線により通信可能に接続される。図１は、実施形態に係る情報処理システム１の構成例を示す図である。
〔２．情報処理システムの構成〕
図１に示す情報処理システム１について説明する。図１に示すように、情報処理システム１は、端末装置１０と、記憶支援装置１００とが含まれる。端末装置１０と、記憶支援装置１００とは所定の通信網（ネットワークＮ）を介して、有線又は無線により通信可能に接続される。図１は、実施形態に係る情報処理システム１の構成例を示す図である。
【0043】
端末装置１０は、外国語の学習を行う利用者によって利用される情報処理装置である。端末装置１０は、実施形態における処理を実現可能であれば、どのような装置であってもよい。また、端末装置１０は、スマートフォンや、タブレット型端末や、ノート型ＰＣや、デスクトップＰＣや、携帯電話機や、ＰＤＡ等の装置であってもよい。
【0044】
端末装置１０は、例えば、スマートフォンやタブレット等のスマートデバイスであり、４Ｇ～６Ｇ（Ｇｅｎｅｒａｔｉｏｎ）やＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）等の無線通信網を介して任意のサーバ装置と通信を行うことができる携帯端末装置である。また、端末装置１０は、液晶ディスプレイ等の画面であって、タッチパネルの機能を有する画面を有し、利用者から指やスタイラス等によりタップ操作、スライド操作、スクロール操作等、コンテンツ等の表示データに対する各種の操作を受け付けてもよい。
【0045】
記憶支援装置１００は、利用者が記憶したい単語を効果的に記憶させ易くすることを目的とした情報処理装置である。記憶支援装置１００は、実施形態における処理を実現可能であれば、どのような装置であってもよい。例えば、記憶支援装置１００は、サーバ装置やクラウドシステム等により実現される。
【0046】
なお、図１では、端末装置１０と記憶支援装置１００が別装置である場合を示したが、端末装置１０と記憶支援装置１００は一体であってもよい。
【0047】
下記実施形態において、映像動画は利用者と同じ文化で生まれ育った視聴者を主な対象とした映像動画である。すなわち、利用者の文化で制作された映像動画である。このため、利用者は映像動画を最も理解し易い言語で視聴できる。また、映像動画には利用者が学習中の言語に翻訳された字幕が含まれる。このため、映像動画中の音声が翻訳された字幕が表示される。なお、字幕は映像動画中の映像に埋め込まれたものであってもよいし、映像動画が再生されるごとに付されたものであってもよい。また、下記実施形態では、英語の字幕が表示される場合を例に挙げて説明するが、利用者が学習中の言語はどのような言語であってもよく、特に限定されないものとする。
【0048】
下記実施形態において、映像動画は、アニメーション作品、いわゆる、アニメである。例えば、映像動画は、各話が所定時間長（例えば、３０分のテレビ放送枠で放映可能な所定時間長）の複数話から構成されたアニメである。なお、アニメに複数のテレビシーズン（シーズン）がある場合（例えば、複数のクール（四半期）に分けてクールごとに放映された場合）には、映像動画は、特定のシーズンの複数話をまとめて一つの映像動画とした特定のシーズンの映像動画であってもよいし、各シーズンの複数話を全てまとめて一つの映像動画としたシーズン全体の映像動画であってもよい。また、映像動画は、例えば、リアルタイムに放映されているものであってもよいし、過去に放映されたものであってもよい。また、所定のウェブサイトにアップロードされたものであってもよいし、所定のアプリケーション（アプリ）で視聴可能なものでもよく、利用者の映像動画の視聴場所などの視聴態様は特に限定されないものとする。また、映像動画は、アニメに限られず、所定の事象を達成することを目的としたシミュレーションゲーム（例えば、恋愛シミュレーションゲーム）であってもよい。このようなゲームでは、利用者が何も操作せずともゲームの進行（例えば、キャラクターの会話が進む、映像が切り替わり場面が遷移する）を可能にできるため、このようなゲームもアニメーション作品とする。
【0049】
〔３．記憶支援装置の構成〕
次に、図２を用いて、実施形態に係る記憶支援装置１００の構成について説明する。図２は、実施形態に係る記憶支援装置１００の構成例を示す図である。図２に示すように、記憶支援装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。なお、記憶支援装置１００は、記憶支援装置１００の管理者から各種操作を受け付ける入力部（例えば、キーボードやマウス等）や、各種情報を表示するための表示部（例えば、液晶ディスプレイ等）を有してもよい。
次に、図２を用いて、実施形態に係る記憶支援装置１００の構成について説明する。図２は、実施形態に係る記憶支援装置１００の構成例を示す図である。図２に示すように、記憶支援装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。なお、記憶支援装置１００は、記憶支援装置１００の管理者から各種操作を受け付ける入力部（例えば、キーボードやマウス等）や、各種情報を表示するための表示部（例えば、液晶ディスプレイ等）を有してもよい。
【0050】
（通信部１１０）
通信部１１０は、例えば、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等によって実現される。そして、通信部１１０は、ネットワークＮと有線又は無線で接続され、ネットワークＮを介して、端末装置１０等との間で情報の送受信を行う。
通信部１１０は、例えば、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等によって実現される。そして、通信部１１０は、ネットワークＮと有線又は無線で接続され、ネットワークＮを介して、端末装置１０等との間で情報の送受信を行う。
【0051】
（記憶部１２０）
記憶部１２０は、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ等の半導体メモリ素子、又は、ハードディスク、光ディスク等の記憶装置によって実現される。図２に示すように、記憶部１２０は、辞書情報記憶部１２１と、字幕情報記憶部１２２とを有する。
記憶部１２０は、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ等の半導体メモリ素子、又は、ハードディスク、光ディスク等の記憶装置によって実現される。図２に示すように、記憶部１２０は、辞書情報記憶部１２１と、字幕情報記憶部１２２とを有する。
【0052】
辞書情報記憶部１２１は、利用者が生成した辞書に関する情報を記憶する。ここで、図３に、実施形態に係る辞書情報記憶部１２１の一例を示す。図３は、実施形態に係る辞書情報記憶部１２１の一例を示す図である。図３に示すように、辞書情報記憶部１２１は、「利用者ＩＤ」、「映像動画」、「辞書」といった項目を有する。
【0053】
「利用者ＩＤ」は、利用者を識別するための識別情報を示す。「映像動画」は、利用者が辞書を生成した映像動画を示す。例えば、映像動画の作品名である。「辞書」は、映像動画に対応した辞書に関する情報を示す。図３に示した例では、「辞書」に「辞書＃１」や「辞書＃２」といった概念的な情報が格納される例を示したが、実際には、利用者が辞書に追加した単語や字幕等の情報が映像動画ごとに格納される。
【0054】
すなわち、図３では、利用者ＩＤ「Ｕ１」によって識別される利用者が辞書を生成した映像動画が「○×○×ＹＹ１」、「○×○×ＹＹ２」、・・・、「○×○×ＹＹＮ」であり、映像動画に対応した辞書に関する情報が「辞書＃１」、「辞書＃２」、・・・、「辞書＃Ｎ」である例を示す。例えば、利用者Ｕ１が「○×○×ＹＹ１」の映像動画を用いて生成した辞書には「辞書＃１」に含まれる単語や字幕等が追加されたことを示す。
【0055】
（辞書に単語と字幕を追加する場合）
以下、図４を用いて、実施形態に係る辞書の詳細について説明する。図４は、実施形態に係る辞書の一例を示す図である。辞書Ｄ１は、利用者Ｕ１が「○×○×ＹＹ１」の作品名の映像動画を視聴中に、利用者Ｕ１が字幕に登場した単語を選択することで生成された辞書である。領域Ｒ１は、選択された単語を追加するための所定の領域（第１領域に対応）である。なお、第１領域は、映像動画ごとに設定される。このため、領域Ｒ１は、「○×○×ＹＹ１」の映像動画のために設定された所定の領域である。領域Ｒ１には、利用者が「○×○×ＹＹ１」の映像動画を視聴中に、字幕に登場した単語を選択するごとに単語が追加される。例えば、利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が領域Ｒ１に追加される。また、利用者は単語の選択を映像動画の再生中に行ってもよいし、映像動画の再生を一時停止させた上で行ってもよい。ここで、図５を用いて、実施形態に係る単語の選択について説明する。
以下、図４を用いて、実施形態に係る辞書の詳細について説明する。図４は、実施形態に係る辞書の一例を示す図である。辞書Ｄ１は、利用者Ｕ１が「○×○×ＹＹ１」の作品名の映像動画を視聴中に、利用者Ｕ１が字幕に登場した単語を選択することで生成された辞書である。領域Ｒ１は、選択された単語を追加するための所定の領域（第１領域に対応）である。なお、第１領域は、映像動画ごとに設定される。このため、領域Ｒ１は、「○×○×ＹＹ１」の映像動画のために設定された所定の領域である。領域Ｒ１には、利用者が「○×○×ＹＹ１」の映像動画を視聴中に、字幕に登場した単語を選択するごとに単語が追加される。例えば、利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が領域Ｒ１に追加される。また、利用者は単語の選択を映像動画の再生中に行ってもよいし、映像動画の再生を一時停止させた上で行ってもよい。ここで、図５を用いて、実施形態に係る単語の選択について説明する。
【0056】
図５は、実施形態に係る単語の選択の一例を示す図である。画面Ｇ１は、端末装置１０の表示画面である。画面Ｇ１には、利用者が視聴中の「○×○×ＹＹ１」の映像動画が再生されており、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示されている。利用者は「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に画面Ｇ１に対する操作によって画面上に表示枠Ｗ１を表示させることで、表示枠Ｗ１に含まれる単語が選択される。例えば、従来の画像解析処理の技術を用いて、表示枠Ｗ１に含まれる単語を特定することで、特定された単語が選択される。表示枠Ｗ１は、例えば、画面上の位置Ｐ１から位置Ｐ２の方向に利用者が指でスワイプを行うことで表示された枠である。ここでは、表示枠Ｗ１に単語の一部が含まれる「ｃｏｂｂｌｅｓｔｏｎｅ」が選択される。また、選択された「ｃｏｂｂｌｅｓｔｏｎｅ」の表示を、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕の表示中のみフォントを拡大するなど、強調させてもよい。そして、表示枠Ｗ１は、「ｃｏｂｂｌｅｓｔｏｎｅ」の選択時にリセットされてもよいし、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が消える際にリセットされてもよいし、利用者の操作ミスなどにより字幕外に表示され単語が何も特定されなかった際や複数の単語が特定された際にリセットされてもよい。表示枠Ｗ１はリセットされると画面から消えて、画面上に他の表示枠が表示可能となる。なお、画面上で表示枠を表示させることで単語の選択を行う場合を例に挙げて説明したが、実施形態に係る単語の選択はどのような方法によって行われてもよく、特に限定されないものとする。
【0057】
図４の説明に戻る。ここで、実施形態に係る第１領域への単語の追加について説明する。例えば、利用者が視聴中の「○×○×ＹＹ１」の映像動画において、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕よりも後に表示される字幕である場合には、利用者が視聴中の画面に「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が表示され、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が表示中に「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕から「ｆｌａｇｓｔｏｎｅｓ」の単語を選択すると、領域Ｒ１の領域中で「ｃｏｂｂｌｅｓｔｏｎｅ」よりも順序が後になるように「ｆｌａｇｓｔｏｎｅｓ」の単語が領域Ｒ１に追加される。このため、例えば、利用者が巻き戻しなどにより「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕を表示させて「ｆｌａｇｓｔｏｎｅｓ」の単語を選択した後に、更に巻き戻しなどにより「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を表示させて「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択した場合でも、「ｆｌａｇｓｔｏｎｅｓ」の単語の順序が後になるように「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が領域Ｒ１に追加される。このように、利用者が字幕を表示させた順序や単語を選択した順序に関わらず、映像動画ごとに予め定められた字幕の表示順に基づいて第１領域に追加される単語の順序が決定されてもよいし、第１領域に追加された単語の順序が並び替えられてもよい。なお、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕から「ｆｌａｇｓｔｏｎｅｓ」の単語を選択した場合など、選択された単語が複数形などの基本形（例えば、単数形）の変化形である場合には、選択された単語がそのまま第１領域に追加されてもよいし、選択された単語の基本形が第１領域に追加されてもよい。この場合には、「ｆｌａｇｓｔｏｎｅｓ」の単語が「ｆｌａｇｓｔｏｎｅ」として第１領域に追加されてもよい。
【0058】
また、「○×○×ＹＹ１」の映像動画が複数話から構成された映像動画で、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕よりも後の話で表示される字幕である場合には、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が表示中に「ｆｌａｇｓｔｏｎｅｓ」の単語を選択すると、領域Ｒ１の領域中で「ｃｏｂｂｌｅｓｔｏｎｅ」よりも順序が後になるように「ｆｌａｇｓｔｏｎｅｓ」の単語が領域Ｒ１に追加される。例えば、「○×○×ＹＹ１」の映像動画の第２話を視聴中に「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕が表示され、「ｆｌａｇｓｔｏｎｅｓ」の単語を選択した場合には、「○×○×ＹＹ１」の映像動画の第１話を視聴中に表示された「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から選択された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語よりも順序が後になるように「ｆｌａｇｓｔｏｎｅｓ」の単語が領域Ｒ１に追加される。このため、例えば、利用者が第２話を先に視聴して「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕から「ｆｌａｇｓｔｏｎｅｓ」の単語を選択した後に、第１話を視聴して「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択した場合でも、「ｆｌａｇｓｔｏｎｅｓ」の単語の順序が後になるように「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が領域Ｒ１に追加される。このように、映像動画の話の順番に基づいて第１領域に追加される単語の順序が決定されてもよいし、第１領域に追加された単語の順序が並び替えられてもよい。
【0059】
また、領域Ｒ２は、単語の選択時に表示された字幕を追加するための所定の領域（第２領域に対応）である。なお、第２領域は、第１領域に対応して映像動画ごとに設定される。このため、領域Ｒ２は、「○×○×ＹＹ１」の映像動画のために設定された所定の領域である。領域Ｒ２には、利用者が「○×○×ＹＹ１」の映像動画を視聴中に、字幕に登場した単語を選択するごとに選択時の画面に表示された単語を含む字幕が追加される。例えば、利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が領域Ｒ２に追加される。具体的には、領域Ｒ２のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加される。なお、第２領域への字幕の追加は、第１領域への単語の追加に対応して行われてもよいし、第１領域への単語の追加と同時に行われてもよい。例えば、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応して、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が、領域Ｒ２のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されてもよい。また、例えば、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が、領域Ｒ１のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されるとともに、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が、領域Ｒ２のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されてもよい。
【0060】
しかしながら、発話が長く発話全体に対応した字幕が画面に収まらない場合など、字幕が複数に分けて表示される場合がある。このような場合には、単語の選択時の画面に表示された発話の一部に対応した字幕が追加される。例えば、「Ｔｈｉｓ ｉｓ」と「ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」とが映像動画中で分けて表示される場合には、画面に表示された「ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択すると、「ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が領域Ｒ２に追加される。なお、発話の一部に対応した字幕に限られず、単語の選択時の画面に表示された字幕を含む発話全体に対応した字幕が追加されてもよい。例えば、「Ｔｈｉｓ ｉｓ」と「ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」とが映像動画中で分けて表示される場合には、画面に表示された「ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択すると、発話全体に対応した「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が追加されてもよい。なお、単語の選択時の画面に表示された字幕に、単語の選択時の画面に表示された字幕以外の字幕が組み合わされて追加される場合には、組み合わされる字幕は、単語の選択時の画面に表示された字幕直前の字幕であってもよいし、単語の選択時の画面に表示された字幕直後の字幕であってもよい。このように、組み合わされる字幕は、利用者が視聴した映像までに表示された字幕に限られず、これから視聴される映像に表示される字幕であってもよい。
【0061】
また、単語の選択時の画面に表示された字幕が複数文から構成される場合がある。例えば、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時の画面に表示された字幕が、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ． Ｔｈｉｓ ｉｓ」といったように、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を含む文の他に他の文の少なくとも一部を含む場合である。このような場合には、単語の選択時の画面に表示された字幕全体が領域Ｒ２に追加されてもよいし、単語の選択時の画面に表示された字幕のうち選択された単語を文に含む一部のみが領域Ｒ２に追加されてもよい。例えば、単語の選択時の画面に表示された字幕全体の「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ． Ｔｈｉｓ ｉｓ」が領域Ｒ２に追加されてもよいし、単語の選択時の画面に表示された字幕のうち選択された単語を文に含む「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ．」のみが領域Ｒ２に追加されてもよい。
【0062】
また、映像動画中でキャラクターが同時に発話した場合など、複数の字幕が画面上の別々の位置に同時に表示される場合がある。このような場合には、選択された単語を含む一の字幕のみが領域Ｒ２に追加されてもよいし、単語の選択時に画面上で表示された複数の字幕が領域Ｒ２に追加されてもよい。
【0063】
また、単語の選択時に表示された字幕に、選択された単語の他に特徴的な意味を有する単語の数が少ない場合がある。例えば、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時の画面に表示された字幕が、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ」といったように、「ｃｏｂｂｌｅｓｔｏｎｅ」の他に特徴的な意味を有する単語がない場合である。例えば、「Ｔｈｉｓ」は名詞の代わりに用いられる代名詞であり、「ｉｓ」は主語の状態を表すための動詞であり、「ａ」は名詞の特性を示すための冠詞であるため、それぞれ、「Ｔｈｉｓ」、「ｉｓ」、「ａ」のみでは特徴的な意味を有さない。このような場合には、単語の選択時に表示された字幕に、単語の選択時の前後の画面に表示された字幕を加えた字幕が領域Ｒ２に追加されてもよい。また、従来の自然言語処理の技術を用いて、単語の選択時に表示された字幕と、単語の選択時の前後の画面に表示された字幕とに基づいて、両者の字幕が表示された際の発話の内容に沿った、選択された単語を含む字幕を生成することで、生成された字幕が領域Ｒ２に追加されてもよい。例えば、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時の画面に表示された「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ」の字幕と、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ」の字幕の次に表示される「Ｔｈｉｓ ｉｓ ａ ｓｔｒｅｅｔ」の字幕とに基づいて、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔ」といったような複数の字幕を一文にまとめた字幕を生成し、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔ」の字幕が領域Ｒ２に追加されてもよい。なお、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ」の「Ｔｈｉｓ」と「Ｔｈｉｓ ｉｓ ａ ｓｔｒｅｅｔ」の「Ｔｈｉｓ」とが異なる対象を指し示す場合には、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔ」とすると、両者の字幕が表示された際の発話の内容に沿わない。このため、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時の画面に表示された映像の少なくとも一部が、「Ｔｈｉｓ ｉｓ ａ ｓｔｒｅｅｔ」の字幕が表示される映像に含まれる場合に、「Ｔｈｉｓ ｉｓ ａ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔ」といった字幕を生成してもよい。
【0064】
（辞書に単語と字幕と映像画像を追加する場合）
以下、図６を用いて、実施形態に係る辞書の詳細について更に説明する。図６は、実施形態に係る辞書の一例を示す図である。辞書Ｄ２は、利用者Ｕ１が「○×○×ＹＹ１」の作品名の映像動画を視聴中に、利用者Ｕ１が字幕に登場した単語を選択することで生成された辞書である。辞書Ｄ２は、図４に示した辞書Ｄ１に、単語の選択時に画面に表示された映像画像が追加された辞書である。このため、辞書Ｄ１と同様の説明は適宜省略する。
以下、図６を用いて、実施形態に係る辞書の詳細について更に説明する。図６は、実施形態に係る辞書の一例を示す図である。辞書Ｄ２は、利用者Ｕ１が「○×○×ＹＹ１」の作品名の映像動画を視聴中に、利用者Ｕ１が字幕に登場した単語を選択することで生成された辞書である。辞書Ｄ２は、図４に示した辞書Ｄ１に、単語の選択時に画面に表示された映像画像が追加された辞書である。このため、辞書Ｄ１と同様の説明は適宜省略する。
【0065】
領域Ｒ３は、単語の選択時に表示された映像画像を追加するための所定の領域（第３領域に対応）である。なお、第３領域は、第１領域に対応して映像動画ごとに設定される。このため、領域Ｒ３は、「○×○×ＹＹ１」の映像動画のために設定された所定の領域である。領域Ｒ３には、利用者が「○×○×ＹＹ１」の映像動画を視聴中に、字幕に登場した単語を選択するごとに選択時の画面に表示された映像画像が追加される。なお、単語の選択時に表示された字幕を映像に含む映像画像が追加されてもよいし、単語の選択時に表示された字幕を除いた映像画像が追加されてもよい。例えば、字幕と映像動画とが別々に記憶され、映像動画の再生時に字幕が付される場合には、利用者に映像動画を提供している外部の情報処理装置等から、単語の選択時に表示された字幕を除いた映像画像を取得することで、字幕を除いた映像画像が追加されてもよいし、単語の選択時に表示された画面をスクリーンショットなどにより撮影することで、字幕を映像に含む映像画像が追加されてもよい。また、例えば、映像動画に字幕が埋め込まれている場合には、オリジナルの映像動画を記憶した外部の情報処理装置等から、単語の選択時に表示された字幕を除いた映像画像を取得することで、字幕を除いた映像画像が追加されてもよいし、単語の選択時に表示された画面をスクリーンショットなどにより撮影することで、字幕を映像に含む映像画像が追加されてもよい。領域Ｒ３では、字幕を除いた映像画像が追加される。
【0066】
利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、単語の選択時に画面に表示された映像画像ＩＭ１１が領域Ｒ３に追加される。例えば、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が領域Ｒ２に追加されるとともに、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に表示された映像画像ＩＭ１１が領域Ｒ３に追加される。具体的には、領域Ｒ３のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加される。なお、第３領域への映像画像の追加は、第１領域への単語の追加に対応して行われてもよいし、第１領域への単語の追加と同時に行われてもよい。例えば、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応して、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に表示された映像画像が、領域Ｒ３のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されてもよい。また、例えば、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が、領域Ｒ１のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されるとともに、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に表示された映像画像が、領域Ｒ３のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加されてもよい。
【0067】
また、利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、単語の選択時に画面に表示された映像画像の場面中で印象的な映像画像が領域Ｒ３に追加されてもよい。例えば、単語の選択時に画面に表示された字幕と、単語の選択時に画面に表示された字幕よりも前に表示された字幕とから、単語の選択時に画面に表示された映像画像の場面の開始を推定することで、推定された場面の開始までの範囲に含まれる映像画像の中から印象的な映像画像として特徴的な映像画像が追加されてもよい。なお、外部の情報処理装置等から、映像動画の場面に関する情報が取得可能な場合には、外部の情報処理装置等から映像動画の場面に関する情報を取得することで、取得された映像動画の場面に関する情報に基づいて、単語の選択時に画面に表示された映像画像の場面の開始や場面全体の範囲が推定されてもよい。そして、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像の中から特徴的な映像画像が追加されてもよい。例えば、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像の中でも他の映像画像とは異なる特徴情報を含む映像画像が追加されてもよい。また、例えば、映像動画のメインキャラクターのうち少なくともいずれかのキャラクターを映像に含む映像画像が追加されてもよい。なお、映像動画のメインキャラクターは、例えば、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像に含まれるキャラクターの特徴に基づいてメインキャラクターと推定されたキャラクターであってもよいし、映像動画の字幕に関する情報に基づいてメインキャラクターと推定されたキャラクターであってもよいし、映像動画に関する情報を外部の情報処理装置等から取得することでメインキャラクターと推定されたキャラクターであってもよい。このように、映像動画のメインキャラクターの推定方法は特に限定されないものとする。また、利用者にとって印象的な映像画像は、利用者の嗜好に沿ったキャラクターを映像に含む映像画像である場合が多いため、外部の情報処理装置等から利用者の嗜好情報（例えば、利用者が好きなキャラクターの体型や顔の形状や髪型や髪色などの外見の特徴、利用者が好きなキャラクターの着用している衣装の特徴、利用者が好きなキャラクターの話し方の特徴、利用者が好きなキャラクターに設定された身長や性別や年齢や性格や趣味や特技や特殊能力などの属性、利用者が好きなキャラクターのデザイナーがデザインした他のキャラクターや衣装の特徴）を取得することで、取得された利用者の嗜好情報に基づいて、映像動画のメインキャラクターのうち利用者の嗜好に最も沿ったキャラクターを少なくとも映像に含む映像画像が追加されてもよい。また、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像の中でも最も特徴的な映像画像が追加されてもよい。例えば、利用者の嗜好に最も沿ったキャラクターが最も大きく画面に映る映像画像が追加されてもよい。また、利用者が「○×○×ＹＹ１」の映像動画を視聴中、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示され、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択することで、単語の選択時に画面に表示された映像画像の場面中で印象的な映像画像とともに、単語の選択時に画面に表示された映像画像が領域Ｒ３に追加されてもよい。
【0068】
字幕情報記憶部１２２は、映像動画で表示される字幕に関する情報を記憶する。ここで、図７に、実施形態に係る字幕情報記憶部１２２の一例を示す。図７は、実施形態に係る字幕情報記憶部１２２の一例を示す図である。図７に示すように、字幕情報記憶部１２２は、「映像動画ＩＤ」、「字幕」といった項目を有する。
【0069】
「映像動画ＩＤ」は、映像動画を識別するための識別情報を示す。「字幕」は、映像動画で表示される字幕を示す。図７に示した例では、「字幕」に「字幕＃１」や「字幕＃２」といった概念的な情報が格納される例を示したが、実際には、字幕を構成する単語情報（字幕に含まれる文字情報）が字幕ごとに格納される。
【0070】
すなわち、図７では、映像動画ＩＤ「Ｍ１」によって識別される映像動画で表示される字幕が「字幕＃１」、・・・、「字幕＃Ｎ」である例を示す。
【0071】
（制御部１３０）
制御部１３０は、コントローラ（Ｃｏｎｔｒｏｌｌｅｒ）であり、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等によって、記憶支援装置１００内部の記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部１３０は、コントローラであり、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の集積回路により実現される。
制御部１３０は、コントローラ（Ｃｏｎｔｒｏｌｌｅｒ）であり、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等によって、記憶支援装置１００内部の記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部１３０は、コントローラであり、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の集積回路により実現される。
【0072】
図２に示すように、制御部１３０は、取得部１３１と、抽出部１３２と、生成部１３３と、更新部１３４と、表示部１３５と、提案部１３６とを有し、以下に説明する情報処理の作用を実現又は実行する。なお、制御部１３０の内部構成は、図２に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。
【0073】
（取得部１３１）
取得部１３１は、外部の情報処理装置から各種情報を取得する。例えば、取得部１３１は、端末装置１０等の他の情報処理装置から各種情報を取得する。また、取得部１３１は、記憶部１２０から各種情報を取得する。また、取得部１３１は、取得した各種情報を記憶部１２０に格納する。
取得部１３１は、外部の情報処理装置から各種情報を取得する。例えば、取得部１３１は、端末装置１０等の他の情報処理装置から各種情報を取得する。また、取得部１３１は、記憶部１２０から各種情報を取得する。また、取得部１３１は、取得した各種情報を記憶部１２０に格納する。
【0074】
取得部１３１は、利用者が映像動画を視聴中に画面上で操作を行った際の操作情報を取得する。例えば、取得部１３１は、利用者が映像動画を視聴中に画面上で表示させた表示枠に関する情報（例えば、画面上での表示枠の位置やサイズを示す座標情報）を取得する。例えば、取得部１３１は、利用者が指でスワイプを行うことで表示させた表示枠に関する情報を取得する。
【0075】
取得部１３１は、利用者が視聴中の映像動画に関する情報を取得する。例えば、取得部１３１は、利用者が映像動画を視聴中に画面上で操作を行うことで単語が選択された際に、利用者が視聴中の映像動画に関する情報を取得する。例えば、取得部１３１は、利用者が視聴中の映像動画の字幕に関する情報を取得する。例えば、取得部１３１は、利用者が「○×○×ＹＹ１」の映像動画を視聴中に、表示された字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を選択した場合には、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に画面上に表示された字幕に関する情報を取得してもよいし、「○×○×ＹＹ１」の映像動画に含まれる字幕全体に関する情報を取得してもよい。
【0076】
（抽出部１３２）
抽出部１３２は、取得部１３１により取得された情報に基づいて、利用者が選択した単語と、単語の選択時に表示された字幕とを抽出する。例えば、抽出部１３２は、画面上に表示された表示枠に関する情報と、表示枠が表示された際に表示された字幕に関する情報とに基づいて、表示枠が表示された際に表示された字幕から利用者が選択した単語を抽出する。例えば、抽出部１３２は、表示枠に少なくとも文字の一部を含む単語を、利用者が選択した単語として抽出する。また、例えば、抽出部１３２は、利用者の単語の選択時に表示された字幕を抽出する。具体的には、抽出部１３２は、単語が抽出された字幕を抽出する。例えば、抽出部１３２は、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に利用者の画面上での操作によって表示された表示枠が「ｃｏｂｂｌｅｓｔｏｎｅ」の単語に最も重畳した場合には、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を抽出するとともに「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を抽出する。また、抽出部１３２は、利用者の単語の選択時に表示された映像画像を抽出してもよい。例えば、抽出部１３２は、利用者の単語の選択時にスクリーンショットなどによって画面を撮影することで、撮影された映像画像を抽出してもよい。また、例えば、抽出部１３２は、利用者の単語の選択時に表示された映像画像を外部の情報処理装置等から取得してもよい。
抽出部１３２は、取得部１３１により取得された情報に基づいて、利用者が選択した単語と、単語の選択時に表示された字幕とを抽出する。例えば、抽出部１３２は、画面上に表示された表示枠に関する情報と、表示枠が表示された際に表示された字幕に関する情報とに基づいて、表示枠が表示された際に表示された字幕から利用者が選択した単語を抽出する。例えば、抽出部１３２は、表示枠に少なくとも文字の一部を含む単語を、利用者が選択した単語として抽出する。また、例えば、抽出部１３２は、利用者の単語の選択時に表示された字幕を抽出する。具体的には、抽出部１３２は、単語が抽出された字幕を抽出する。例えば、抽出部１３２は、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が表示中に利用者の画面上での操作によって表示された表示枠が「ｃｏｂｂｌｅｓｔｏｎｅ」の単語に最も重畳した場合には、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を抽出するとともに「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を抽出する。また、抽出部１３２は、利用者の単語の選択時に表示された映像画像を抽出してもよい。例えば、抽出部１３２は、利用者の単語の選択時にスクリーンショットなどによって画面を撮影することで、撮影された映像画像を抽出してもよい。また、例えば、抽出部１３２は、利用者の単語の選択時に表示された映像画像を外部の情報処理装置等から取得してもよい。
【0077】
抽出部１３２は、利用者の単語の選択時に表示された映像画像の場面中で印象的な映像画像を抽出してもよい。例えば、抽出部１３２は、単語の選択時に画面に表示された字幕と、単語の選択時に画面に表示された字幕よりも前に表示された字幕とから、単語の選択時に画面に表示された映像画像の場面の開始を推定する。そして、抽出部１３２は、推定された場面の開始までの範囲に含まれる映像画像の中から印象的な映像画像を抽出する。また、例えば、抽出部１３２は、外部の情報処理装置等から映像動画の場面に関する情報を取得することで、取得された映像動画の場面に関する情報に基づいて、単語の選択時に画面に表示された映像画像の場面の開始や場面全体の範囲を推定してもよい。そして、抽出部１３２は、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像の中から印象的な映像画像を抽出してもよい。
【0078】
抽出部１３２は、推定された場面の開始までの範囲又は場面全体の範囲に含まれる映像画像の中でも他の映像画像とは異なる特徴情報を含む映像画像を抽出してもよい。また、抽出部１３２は、映像動画のメインキャラクターのうち少なくともいずれかのキャラクターを映像に含む映像画像を抽出してもよい。例えば、抽出部１３２は、利用者の嗜好情報に基づいて、映像動画のメインキャラクターの中から利用者の嗜好に最も沿ったキャラクターを推定し、推定されたキャラクターを少なくとも映像に含む映像画像を抽出してもよい。例えば、抽出部１３２は、推定されたキャラクターが最も大きく画面に映る映像画像を抽出してもよい。
【0079】
（生成部１３３）
生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成する。図４の例では、生成部１３３は、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を、「○×○×ＹＹ１」の映像動画に対応した第１領域に追加し、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を、「○×○×ＹＹ１」の映像動画に対応した第２領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加することで、辞書Ｄ１を生成する。また、生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加し、抽出部１３２により抽出された映像画像を、利用者が視聴中の映像動画に対応した第３領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成してもよい。図６の例では、生成部１３３は、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を、「○×○×ＹＹ１」の映像動画に対応した第１領域に追加し、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を、「○×○×ＹＹ１」の映像動画に対応した第２領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加し、映像画像ＩＭ１１を、「○×○×ＹＹ１」の映像動画に対応した第３領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加することで、辞書Ｄ２を生成する。
生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成する。図４の例では、生成部１３３は、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を、「○×○×ＹＹ１」の映像動画に対応した第１領域に追加し、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を、「○×○×ＹＹ１」の映像動画に対応した第２領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加することで、辞書Ｄ１を生成する。また、生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加し、抽出部１３２により抽出された映像画像を、利用者が視聴中の映像動画に対応した第３領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成してもよい。図６の例では、生成部１３３は、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を、「○×○×ＹＹ１」の映像動画に対応した第１領域に追加し、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を、「○×○×ＹＹ１」の映像動画に対応した第２領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加し、映像画像ＩＭ１１を、「○×○×ＹＹ１」の映像動画に対応した第３領域のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に対応した所定の領域に追加することで、辞書Ｄ２を生成する。
【0080】
（更新部１３４）
更新部１３４は、第１領域への単語の追加時に、映像動画ごとに予め定められた字幕の表示順に基づいて第１領域に追加される単語の順序を決定することで、生成部１３３により生成された辞書を更新する。また、更新部１３４は、第１領域への単語の追加時に、映像動画ごとに予め定められた字幕の表示順に基づいて第１領域に追加された単語の順序を並び替えることで、生成部１３３により生成された辞書を更新してもよい。例えば、更新部１３４は、第１領域への単語の追加時に、第２領域へ追加される字幕の表示順が早いほど、第１領域に追加される単語が上位に表示されるように辞書を更新する。また、例えば、更新部１３４は、第１領域への単語の追加時に、複数話のうち第２領域へ追加される字幕が登場する話の順番が早いほど、第１領域に追加される単語が上位に表示されるように辞書を更新する。
更新部１３４は、第１領域への単語の追加時に、映像動画ごとに予め定められた字幕の表示順に基づいて第１領域に追加される単語の順序を決定することで、生成部１３３により生成された辞書を更新する。また、更新部１３４は、第１領域への単語の追加時に、映像動画ごとに予め定められた字幕の表示順に基づいて第１領域に追加された単語の順序を並び替えることで、生成部１３３により生成された辞書を更新してもよい。例えば、更新部１３４は、第１領域への単語の追加時に、第２領域へ追加される字幕の表示順が早いほど、第１領域に追加される単語が上位に表示されるように辞書を更新する。また、例えば、更新部１３４は、第１領域への単語の追加時に、複数話のうち第２領域へ追加される字幕が登場する話の順番が早いほど、第１領域に追加される単語が上位に表示されるように辞書を更新する。
【0081】
（表示部１３５）
表示部１３５は、更新部１３４により更新された単語の順序に応じた順番で、利用者の単語の選択時に表示された映像画像を表示させる。例えば、表示部１３５は、利用者から映像動画の選択を受け付けると、選択された映像動画に対応して生成された辞書の第３領域に追加された映像画像を取得し、取得した映像画像を組み合わせてスライドショーなどのアニメーションを生成することで、利用者の単語の選択時に表示された映像画像を表示させる。例えば、「○×○×ＹＹ１」の映像動画では、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕よりも前に表示される字幕であるため、表示部１３５は、利用者から「○×○×ＹＹ１」の映像動画の選択を受け付けた場合には、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に表示された映像画像が、「ｆｌａｇｓｔｏｎｅｓ」の単語の選択時に表示された映像画像よりも先に表示されるようにスライドショーなどのアニメーションを生成する。図８は、実施形態に係るユーザインターフェースの一例を示す図である。
表示部１３５は、更新部１３４により更新された単語の順序に応じた順番で、利用者の単語の選択時に表示された映像画像を表示させる。例えば、表示部１３５は、利用者から映像動画の選択を受け付けると、選択された映像動画に対応して生成された辞書の第３領域に追加された映像画像を取得し、取得した映像画像を組み合わせてスライドショーなどのアニメーションを生成することで、利用者の単語の選択時に表示された映像画像を表示させる。例えば、「○×○×ＹＹ１」の映像動画では、「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕が、「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕よりも前に表示される字幕であるため、表示部１３５は、利用者から「○×○×ＹＹ１」の映像動画の選択を受け付けた場合には、「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の選択時に表示された映像画像が、「ｆｌａｇｓｔｏｎｅｓ」の単語の選択時に表示された映像画像よりも先に表示されるようにスライドショーなどのアニメーションを生成する。図８は、実施形態に係るユーザインターフェースの一例を示す図である。
【0082】
画面Ｇ２は、端末装置１０の表示画面である。画面Ｇ２には、利用者Ｕ１が辞書を生成した映像動画を示す項目Ｌ１乃至項目ＬＮが表示されている。例えば、項目Ｌ１は「○×○×ＹＹ１」の映像動画を示す項目であり、項目Ｌ２は「○×○×ＹＹ２」の映像動画を示す項目であり、項目ＬＮは「○×○×ＹＹＮ」の映像動画を示す項目である。画面Ｇ２には、利用者Ｕ１が辞書を生成した映像動画の数だけ項目が表示される。表示部１３５は、例えば、利用者Ｕ１から画面上で項目Ｌ１を選択する操作（例えば、タップ、クリック）を受け付けると、「○×○×ＹＹ１」の映像動画に対応して生成された辞書Ｄ２の領域Ｒ３に追加された映像画像を用いて、領域Ｒ１の単語の順序に応じた順番で映像画像を表示させるアニメーションを生成し、生成したアニメーションを表示させるための画面を表示させて、領域Ｒ３に追加された映像画像を表示させる。また、表示部１３５は、例えば、利用者Ｕ１から画面上で項目Ｌ２を選択する操作を受け付けると、「○×○×ＹＹ２」の映像動画に対応して生成された辞書の第３領域に追加された映像画像を用いて、「○×○×ＹＹ２」の映像動画に対応して生成された辞書の第１領域の単語の順序に応じた順番で映像画像を表示させるアニメーションを生成し、生成したアニメーションを表示させるための画面を表示させて、「○×○×ＹＹ２」の映像動画に対応して生成された辞書の第３領域に追加された映像画像を表示させる。なお、画面Ｇ２は一例であり、映像動画の選択を受け付ける態様は特に限定されないものとする。例えば、画面Ｇ２のような、利用者が辞書を生成した映像動画を項目でまとめた画面から項目を選択させることで映像動画を選択させるユーザインターフェースに限られず、表示部１３５は、利用者が生成した辞書それぞれが映像画像をアニメーションで表示させるための項目を有するユーザインターフェースを用いて映像動画の選択を受け付けてもよい。例えば、表示部１３５は、辞書Ｄ２に含まれる「○×○×ＹＹ１」の作品名（辞書のタイトル）を操作することで「○×○×ＹＹ１」の映像動画の選択を受け付け、また、「○×○×ＹＹ２」の映像動画に対応して生成された辞書に含まれる「○×○×ＹＹ２」の作品名を操作することで「○×○×ＹＹ２」の映像動画の選択を受け付けてもよい。
【0083】
表示部１３５は、第３領域に追加された映像画像（例えば、単語の選択時に表示された字幕を除いた映像画像）に第１領域に追加された単語を重畳させた映像画像を生成し、生成した映像画像を組み合わせることで、映像画像を表示させるためのアニメーションを生成してもよい。例えば、表示部１３５は、利用者から映像動画の選択を受け付けると、選択された映像動画に対応して生成された辞書の第１領域に追加された単語と第３領域に追加された映像画像とを辞書から抽出し、抽出した映像画像それぞれに対して対応した単語を重畳させることで単語が重畳された映像画像を生成し、生成した映像画像を組み合わせることで、映像画像を表示させるためのアニメーションを生成する。そして、表示部１３５は、第３領域に追加された映像画像を、第３領域への映像画像の追加時に第１領域へ追加された単語を重畳させた映像画像をアニメーションで表示させる。図６の例を用いると、表示部１３５は、映像画像ＩＭ１に「ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ」の単語を重畳させた映像画像と、映像画像ＩＭ２に「ｖｅｎｔｒｉｌｏｑｕｉｓｍ」の単語を重畳させた映像画像と、映像画像ＩＭ１１に「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を重畳させた映像画像と、映像画像ＩＭ３に「ｂａｔｔｌｅ－ｓｃａｒｒｅｄ」の単語を重畳させた映像画像と、映像画像ＩＭ４に「ｆｌａｇｓｔｏｎｅｓ」の単語を重畳させた映像画像を組み合わせることでアニメーションを生成し、「ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ」から始まり、「ｖｅｎｔｒｉｌｏｑｕｉｓｍ」、「ｃｏｂｂｌｅｓｔｏｎｅ」、「ｂａｔｔｌｅ－ｓｃａｒｒｅｄ」、「ｆｌａｇｓｔｏｎｅｓ」の順番で、映像画像ＩＭ１に「ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ」の単語を重畳させた映像画像と、映像画像ＩＭ２に「ｖｅｎｔｒｉｌｏｑｕｉｓｍ」の単語を重畳させた映像画像と、映像画像ＩＭ１１に「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を重畳させた映像画像と、映像画像ＩＭ３に「ｂａｔｔｌｅ－ｓｃａｒｒｅｄ」の単語を重畳させた映像画像と、映像画像ＩＭ４に「ｆｌａｇｓｔｏｎｅｓ」の単語を重畳させた映像画像をアニメーションで表示させる。また、表示部１３５は、第３領域に追加された映像画像が、第１領域の単語の選択時に表示された映像画像の場面中の印象的な映像画像である場合には、第１領域の単語の選択時に表示された映像画像の場面中の印象的な映像画像に第１領域へ追加された単語を重畳させた映像画像をアニメーションで表示させてもよい。
【0084】
表示部１３５は、第３領域に追加された映像画像（例えば、単語の選択時に表示された字幕を除いた映像画像）に第２領域に追加された字幕を重畳させた映像画像を生成し、生成した映像画像を組み合わせることで、映像画像を表示させるためのアニメーションを生成してもよい。例えば、表示部１３５は、利用者から映像動画の選択を受け付けると、選択された映像動画に対応して生成された辞書の第２領域に追加された字幕と第３領域に追加された映像画像とを辞書から抽出し、抽出した映像画像それぞれに対して対応した字幕を重畳させることで字幕が重畳された映像画像を生成し、生成した映像画像を組み合わせることで、映像画像を表示させるためのアニメーションを生成する。そして、表示部１３５は、第３領域に追加された映像画像を、第３領域への映像画像の追加時に第２領域へ追加された字幕を重畳させた映像画像をアニメーションで表示させる。図６の例を用いると、表示部１３５は、映像画像ＩＭ１に「・・・・・・・・・ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ２に「・・・・・・・・・ｖｅｎｔｒｉｌｏｑｕｉｓｍ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ１１に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を重畳させた映像画像と、映像画像ＩＭ３に「・・・・・・・・・ｂａｔｔｌｅ－ｓｃａｒｒｅｄ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ４に「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕を重畳させた映像画像を組み合わせることでアニメーションを生成し、「ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ」から始まり、「ｖｅｎｔｒｉｌｏｑｕｉｓｍ」、「ｃｏｂｂｌｅｓｔｏｎｅ」、「ｂａｔｔｌｅ－ｓｃａｒｒｅｄ」、「ｆｌａｇｓｔｏｎｅｓ」の順番で、映像画像ＩＭ１に「・・・・・・・・・ｑｕｉｎｔｅｓｓｅｎｔｉａｌｌｙ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ２に「・・・・・・・・・ｖｅｎｔｒｉｌｏｑｕｉｓｍ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ１１に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を重畳させた映像画像と、映像画像ＩＭ３に「・・・・・・・・・ｂａｔｔｌｅ－ｓｃａｒｒｅｄ・・・・・・・・・」の字幕を重畳させた映像画像と、映像画像ＩＭ４に「Ｉ ｗｉｌｌ ｊｕｍｐ ａｃｒｏｓｓ ｒｅｄ ｆｌａｇｓｔｏｎｅｓ」の字幕を重畳させた映像画像をアニメーションで表示させる。また、表示部１３５は、第３領域に追加された映像画像が、第１領域の単語の選択時に表示された映像画像の場面中の印象的な映像画像である場合には、第１領域の単語の選択時に表示された映像画像の場面中の印象的な映像画像に第２領域へ追加された字幕を重畳させた映像画像をアニメーションで表示させてもよい。
【0085】
（提案部１３６）
提案部１３６は、利用者の所定の操作（例えば、辞書を選択する操作、辞書を開く操作、辞書に単語を追加する操作）に応じて選択された辞書の第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案するための情報を送信する。例えば、提案部１３６は、「○×○×ＹＹ１」の映像動画に対応して生成された辞書Ｄ１（又は辞書Ｄ２）が選択された場合には、領域Ｒ１に追加された単語のうち一以上の単語を字幕に含む映像動画を提案する。例えば、提案部１３６は、「○×○×ＹＹ１０」の映像動画の字幕が、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を含む場合には、「○×○×ＹＹ１０」の映像動画を候補として提案する。また、提案部１３６は、第１領域に追加された単語を字幕に多く含む映像動画ほど優先的に提案してもよい。例えば、提案部１３６は、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語のみを字幕に含む「○×○×ＹＹ１１」の映像動画の他に、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語と「ｆｌａｇｓｔｏｎｅｓ」の単語の複数の単語を字幕に含む「○×○×ＹＹ１２」の映像動画が候補として提案可能である場合には、「○×○×ＹＹ１１」の映像動画よりも「○×○×ＹＹ１２」の映像動画を優先的に提案する。また、提案部１３６は、第１領域に追加された同一の単語が映像動画の複数の字幕に登場する場合には、同一の単語が複数の字幕に登場する回数をカウントに含めた字幕に登場する単語の数に基づいて候補の優先順位を決定してもよい。また、提案部１３６は、第１領域に追加された同一の単語が映像動画の複数の字幕に登場する場合には、同一の単語が複数の字幕に登場する回数をカウントに含めない字幕に登場する単語の種類の数に基づいて候補の優先順位を決定してもよい。
提案部１３６は、利用者の所定の操作（例えば、辞書を選択する操作、辞書を開く操作、辞書に単語を追加する操作）に応じて選択された辞書の第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案するための情報を送信する。例えば、提案部１３６は、「○×○×ＹＹ１」の映像動画に対応して生成された辞書Ｄ１（又は辞書Ｄ２）が選択された場合には、領域Ｒ１に追加された単語のうち一以上の単語を字幕に含む映像動画を提案する。例えば、提案部１３６は、「○×○×ＹＹ１０」の映像動画の字幕が、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を含む場合には、「○×○×ＹＹ１０」の映像動画を候補として提案する。また、提案部１３６は、第１領域に追加された単語を字幕に多く含む映像動画ほど優先的に提案してもよい。例えば、提案部１３６は、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語のみを字幕に含む「○×○×ＹＹ１１」の映像動画の他に、領域Ｒ１に追加された「ｃｏｂｂｌｅｓｔｏｎｅ」の単語と「ｆｌａｇｓｔｏｎｅｓ」の単語の複数の単語を字幕に含む「○×○×ＹＹ１２」の映像動画が候補として提案可能である場合には、「○×○×ＹＹ１１」の映像動画よりも「○×○×ＹＹ１２」の映像動画を優先的に提案する。また、提案部１３６は、第１領域に追加された同一の単語が映像動画の複数の字幕に登場する場合には、同一の単語が複数の字幕に登場する回数をカウントに含めた字幕に登場する単語の数に基づいて候補の優先順位を決定してもよい。また、提案部１３６は、第１領域に追加された同一の単語が映像動画の複数の字幕に登場する場合には、同一の単語が複数の字幕に登場する回数をカウントに含めない字幕に登場する単語の種類の数に基づいて候補の優先順位を決定してもよい。
【0086】
提案部１３６は、利用者の所定の操作に応じて選択された辞書の第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、選択された辞書に対応した映像動画と特徴が類似する一以上の映像動画を新たな辞書を生成するための候補として提案するための情報を送信してもよい。例えば、提案部１３６は、「○×○×ＹＹ１」の映像動画に対応して生成された辞書Ｄ１（又は辞書Ｄ２）が選択された場合には、領域Ｒ１に追加された単語のうち一以上の単語を字幕に含み、且つ、「○×○×ＹＹ１」の映像動画と特徴が類似する映像動画を提案する。例えば、提案部１３６は、「○×○×ＹＹ１」の映像動画のメインキャラクターの特徴に基づいて、「○×○×ＹＹ１」の映像動画のメインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を提案する。なお、提案部１３６は、映像動画のメインキャラクターの特徴を、映像動画の字幕に関する情報に基づいて推定してもよいし、映像動画に関する情報を外部の情報処理装置等から取得することで推定してもよい。例えば、提案部１３６は、選択された「○×○×ＹＹ１」の映像動画のメインキャラクターの特徴を、「○×○×ＹＹ１」の映像動画の字幕に関する情報に基づいて推定してもよいし、「○×○×ＹＹ１」の映像動画に関する情報を外部の情報処理装置等から取得することで推定してもよい。また、例えば、提案部１３６は、選択された「○×○×ＹＹ１」の映像動画のメインキャラクターの特徴を、領域Ｒ３に追加された映像画像に基づいて推定してもよい。
【0087】
提案部１３６は、利用者の所定の操作に応じて選択された辞書の第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、選択された辞書以外の他の辞書に対応した映像動画と特徴が類似する一以上の映像動画を新たな辞書を生成するための候補として提案するための情報を送信してもよい。例えば、提案部１３６は、「○×○×ＹＹ１」の映像動画に対応して生成された辞書Ｄ１（又は辞書Ｄ２）が選択された場合には、領域Ｒ１に追加された単語のうち一以上の単語を字幕に含み、且つ、利用者Ｕ１が辞書を生成した他の映像動画である「○×○×ＹＹ２」乃至「○×○×ＹＹＮ」の映像動画と特徴が類似する映像動画を提案する。例えば、提案部１３６は、「○×○×ＹＹ２」の映像動画のメインキャラクターの特徴に基づいて、「○×○×ＹＹ２」の映像動画のメインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を提案する。また、例えば、提案部１３６は、「○×○×ＹＹ２」の映像動画のメインキャラクターの特徴と「○×○×ＹＹ３」の映像動画のメインキャラクターの特徴とに基づいて、「○×○×ＹＹ２」及び／又は「○×○×ＹＹ３」の映像動画のメインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を提案してもよい。また、例えば、提案部１３６は、「○×○×ＹＹ２」乃至「○×○×ＹＹＮ」の映像動画のメインキャラクターの特徴に基づいて利用者Ｕ１のキャラクターの嗜好情報を推定することで利用者Ｕ１の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を提案してもよい。
【0088】
〔４．情報処理のフロー〕
次に、図９乃至図１１を用いて、実施形態に係る情報処理システム１による情報処理の手順について説明する。図９乃至図１１は、実施形態に係る情報処理システム１による情報処理の手順を示すフローチャートである。
次に、図９乃至図１１を用いて、実施形態に係る情報処理システム１による情報処理の手順について説明する。図９乃至図１１は、実施形態に係る情報処理システム１による情報処理の手順を示すフローチャートである。
【0089】
図９に示すように、記憶支援装置１００は、利用者が映像動画を視聴中に、表示された字幕から単語を選択した場合には、利用者が選択した単語と、利用者の単語の選択時に表示された字幕とを抽出する（ステップＳ１０１）。
【0090】
記憶支援装置１００は、抽出された単語を、利用者が視聴中の映像動画に表示される字幕の中で、抽出された字幕が表示される表示順が早いほど上位になるように、利用者が視聴中の映像動画に対応して生成された辞書の第１領域に追加し、抽出された字幕を、利用者が視聴中の映像動画に対応して生成された辞書の第２領域に追加することで辞書を更新する（ステップＳ１０２）。
【0091】
図１０に示すように、記憶支援装置１００は、利用者から映像動画の選択を受け付けた場合には、利用者が選択した映像動画に対応して生成された辞書の第３領域に追加された映像画像を取得する（ステップＳ２０１）。
【0092】
記憶支援装置１００は、取得された映像画像を組み合わせてアニメーションを生成することで、利用者が選択した映像動画に対応して生成された辞書の第３領域に追加された映像画像をアニメーションで表示させる（ステップＳ２０２）。
【0093】
図１１に示すように、記憶支援装置１００は、利用者の所定の操作に応じて選択された辞書の第１領域に追加された単語に関する情報を取得する（ステップＳ３０１）。
【0094】
記憶支援装置１００は、取得された単語に関する情報に基づいて、選択された辞書の第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案するための情報を送信する（ステップＳ３０２）。
【0095】
〔５．変形例〕
上述した実施形態に係る情報処理システム１は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、情報処理システム１の他の実施形態について説明する。
上述した実施形態に係る情報処理システム１は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、情報処理システム１の他の実施形態について説明する。
【0096】
（変形例１：第１領域で単語を指定することで辞書を更新する）
上記実施形態では、抽出部１３２が、利用者が映像動画を視聴中に、表示された字幕から単語を選択した場合に、利用者が選択した単語とともに、単語の選択時に表示された字幕を抽出する場合を示した。ここで、抽出部１３２は、利用者が映像動画を視聴後に、利用者が視聴した映像動画に対応した辞書に含まれる第１領域で、利用者が映像動画を視聴中に表示された単語を指定（例えば、入力）することで、指定された単語を含む字幕を、映像動画ごとに予め定められた字幕から抽出してもよい。例えば、抽出部１３２は、利用者が「○×○×ＹＹ１」の映像動画を視聴中に「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を記憶して、「○×○×ＹＹ１」の映像動画の視聴後に、「○×○×ＹＹ１」の映像動画に対応した辞書Ｄ１（又は辞書Ｄ２）の領域Ｒ１で「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を指定することで、「○×○×ＹＹ１」の映像動画に予め定められた字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を含む「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を抽出してもよい。
上記実施形態では、抽出部１３２が、利用者が映像動画を視聴中に、表示された字幕から単語を選択した場合に、利用者が選択した単語とともに、単語の選択時に表示された字幕を抽出する場合を示した。ここで、抽出部１３２は、利用者が映像動画を視聴後に、利用者が視聴した映像動画に対応した辞書に含まれる第１領域で、利用者が映像動画を視聴中に表示された単語を指定（例えば、入力）することで、指定された単語を含む字幕を、映像動画ごとに予め定められた字幕から抽出してもよい。例えば、抽出部１３２は、利用者が「○×○×ＹＹ１」の映像動画を視聴中に「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を記憶して、「○×○×ＹＹ１」の映像動画の視聴後に、「○×○×ＹＹ１」の映像動画に対応した辞書Ｄ１（又は辞書Ｄ２）の領域Ｒ１で「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を指定することで、「○×○×ＹＹ１」の映像動画に予め定められた字幕から「ｃｏｂｂｌｅｓｔｏｎｅ」の単語を含む「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を抽出してもよい。
【0097】
図１２は、変形例１に係る情報処理を説明するための説明図である。辞書Ｄ３は、図４に示した辞書Ｄ１に対応した辞書である。このため、辞書Ｄ１と同様の説明は適宜省略する。更新部１３４は、領域Ｒ１のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語が指定された領域Ｒ１１に対応して、領域Ｒ２のうちの領域Ｒ１２に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を追加することで辞書Ｄ３を更新する。そして、更新部１３４は、「○×○×ＹＹ１」の映像動画に表示される字幕の表示順に基づいて決定された領域Ｒ１での「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に応じて、領域Ｒ２のうちの「ｃｏｂｂｌｅｓｔｏｎｅ」の単語の順序に応じた所定の領域に「Ｔｈｉｓ ｉｓ ａ ｔｏｗｎ ｏｆ ｃｏｂｂｌｅｓｔｏｎｅ ｓｔｒｅｅｔｓ」の字幕を追加することで辞書Ｄ３を更新する。
【0098】
（変形例２：市販の辞書を用いて利用者が視聴した映像動画の辞書を自動で生成する）
上記実施形態では、抽出部１３２が、利用者が映像動画を視聴中に、表示された字幕から単語を選択した場合に、利用者が選択した単語とともに、単語の選択時に表示された字幕を抽出する場合を示した。また、変形例１では、抽出部１３２が、利用者が視聴した映像動画に対応した辞書に含まれる第１領域で、利用者が映像動画を視聴中に表示された単語を指定することで、指定された単語を含む字幕を、映像動画ごとに予め定められた字幕から抽出する場合を示した。ここで、抽出部１３２は、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕に、利用者が予め指定した市販の辞書（例えば、資格試験用の辞書、教科書）に含まれる単語（以下、適宜、「学習用単語」とする。）が登場する場合には、登場する学習用単語とともに、学習用単語ごとに対象の学習用単語が表示される字幕を抽出してもよい。例えば、抽出部１３２は、学習用単語ごとに対象の学習用単語が表示される字幕を、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕から抽出する。なお、抽出部１３２は、利用者が複数の市販の辞書を指定した場合には、指定された複数の市販の辞書のうち少なくともいずれかに含まれる学習用単語を抽出してもよい。また、抽出部１３２は、学習用単語が利用者の嗜好に沿ったキャラクターの発話に対応した字幕に含まれる単語である場合に、学習用単語と字幕の抽出を行ってもよい。また、抽出部１３２は、学習用単語が利用者の嗜好に沿ったキャラクターの発話に対応した字幕に含まれる単語でない場合（言い換えると、利用者の嗜好に沿ったキャラクターではないキャラクターの発話に対応した字幕に含まれる単語である場合）には、学習用単語と字幕の抽出を行わなくてもよい。そして、生成部１３３は、対象の学習用単語を、利用者が映像動画を視聴したことで選択された映像動画に対応した第１領域に追加し、対象の学習用単語が表示される字幕を、利用者が映像動画を視聴したことで選択された映像動画に対応した第２領域に追加することで、利用者が視聴した映像動画に対応した辞書を自動で生成する。また、抽出部１３２は、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕に、利用者が予め指定した市販の辞書に含まれない単語が登場する場合に、利用者が予め指定した市販の辞書に含まれない単語とともに、利用者が予め指定した市販の辞書に含まれない単語が表示される字幕を抽出してもよい。例えば、抽出部１３２は、利用者が複数の市販の辞書を指定し、複数の市販の辞書に含まれない単語が字幕に登場する場合に単語と字幕の抽出を行ってもよい。
上記実施形態では、抽出部１３２が、利用者が映像動画を視聴中に、表示された字幕から単語を選択した場合に、利用者が選択した単語とともに、単語の選択時に表示された字幕を抽出する場合を示した。また、変形例１では、抽出部１３２が、利用者が視聴した映像動画に対応した辞書に含まれる第１領域で、利用者が映像動画を視聴中に表示された単語を指定することで、指定された単語を含む字幕を、映像動画ごとに予め定められた字幕から抽出する場合を示した。ここで、抽出部１３２は、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕に、利用者が予め指定した市販の辞書（例えば、資格試験用の辞書、教科書）に含まれる単語（以下、適宜、「学習用単語」とする。）が登場する場合には、登場する学習用単語とともに、学習用単語ごとに対象の学習用単語が表示される字幕を抽出してもよい。例えば、抽出部１３２は、学習用単語ごとに対象の学習用単語が表示される字幕を、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕から抽出する。なお、抽出部１３２は、利用者が複数の市販の辞書を指定した場合には、指定された複数の市販の辞書のうち少なくともいずれかに含まれる学習用単語を抽出してもよい。また、抽出部１３２は、学習用単語が利用者の嗜好に沿ったキャラクターの発話に対応した字幕に含まれる単語である場合に、学習用単語と字幕の抽出を行ってもよい。また、抽出部１３２は、学習用単語が利用者の嗜好に沿ったキャラクターの発話に対応した字幕に含まれる単語でない場合（言い換えると、利用者の嗜好に沿ったキャラクターではないキャラクターの発話に対応した字幕に含まれる単語である場合）には、学習用単語と字幕の抽出を行わなくてもよい。そして、生成部１３３は、対象の学習用単語を、利用者が映像動画を視聴したことで選択された映像動画に対応した第１領域に追加し、対象の学習用単語が表示される字幕を、利用者が映像動画を視聴したことで選択された映像動画に対応した第２領域に追加することで、利用者が視聴した映像動画に対応した辞書を自動で生成する。また、抽出部１３２は、利用者が映像動画を視聴したことで選択された映像動画に予め定められた字幕に、利用者が予め指定した市販の辞書に含まれない単語が登場する場合に、利用者が予め指定した市販の辞書に含まれない単語とともに、利用者が予め指定した市販の辞書に含まれない単語が表示される字幕を抽出してもよい。例えば、抽出部１３２は、利用者が複数の市販の辞書を指定し、複数の市販の辞書に含まれない単語が字幕に登場する場合に単語と字幕の抽出を行ってもよい。
【0099】
（変形例３：第１領域に追加された単語の類義語を第４領域に追加した辞書を生成する） 上記実施形態では、生成部１３３が、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成する場合を示した（図４参照）。また、上記実施形態では、生成部１３３が、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加し、抽出部１３２により抽出された映像画像を、利用者が視聴中の映像動画に対応した第３領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成する場合を示した（図６参照）。ここで、生成部１３３は、抽出部１３２により抽出された単語の類義語が、利用者が予め指定した市販の辞書に登場する場合には、抽出部１３２により抽出された単語の類義語を、利用者が視聴中の映像動画に対応した所定の領域（以下、適宜、「第４領域」とする。）に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成してもよい。ここで、第４領域は、第１領域に追加された単語の類義語を追加するための所定の領域である。なお、第４領域は、第１領域に対応して映像動画ごとに設定される。第４領域には、第１領域に追加された単語の類義語が予め指定された市販の辞書に登場する場合にのみ、第１領域に追加された単語の類義語が追加される。具体的には、第４領域のうちの第１領域に追加された単語の順序に対応した所定の領域に追加される。また、第１領域に追加された単語の類義語が予め指定された市販の辞書に登場しない場合には、第４領域のうちの第１領域に追加された単語の順序に対応した所定の領域は空欄となる。
【0100】
生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加し、抽出部１３２により抽出された単語の類義語を、利用者が視聴中の映像動画に対応した第４領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成する。また、生成部１３３は、抽出部１３２により抽出された単語を、利用者が視聴中の映像動画に対応した第１領域に追加し、抽出部１３２により抽出された字幕を、利用者が視聴中の映像動画に対応した第２領域に追加し、抽出部１３２により抽出された映像画像を、利用者が視聴中の映像動画に対応した第３領域に追加し、抽出部１３２により抽出された単語の類義語を、利用者が視聴中の映像動画に対応した第４領域に追加することで、映像動画ごとに利用者が選択した単語をまとめた辞書を生成してもよい。なお、第４領域に追加される類義語は、第１領域に追加された単語と関連が高い単語に限られない。例えば、生成部１３３は、抽出部１３２により「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の単語が抽出され、「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の単語と関連が高い「ｔｙｐｉｃａｌ」の単語や「ｕｌｔｉｍａｔｅ」の単語が予め指定された市販の辞書に含まれる場合には、第１領域に「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の単語を追加するとともに、第４領域に「ｔｙｐｉｃａｌ」の単語や「ｕｌｔｉｍａｔｅ」の単語を追加することで辞書を生成してもよいし、「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の単語と関連がやや高い「ｃｌａｓｓｉｃ」の単語や「ｉｄｅａｌ」の単語が予め指定された市販の辞書に含まれる場合には、第１領域に「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の単語を追加するとともに、第４領域に「ｃｌａｓｓｉｃ」の単語や「ｉｄｅａｌ」の単語を追加することで辞書を生成してもよい。なお、生成部１３３は、「ｔｙｐｉｃａｌ」と「ｕｌｔｉｍａｔｅ」と「ｃｌａｓｓｉｃ」と「ｉｄｅａｌ」の全ての単語が予め指定された市販の辞書に含まれる場合には、「ｑｕｉｎｔｅｓｓｅｎｔｉａｌ」の類義語として第４領域に追加される単語をどのように選択してもよい。また、第４領域に追加される類義語の、第１領域に追加された単語との関連の度合いは利用者により適宜調整されてもよい。例えば、生成部１３３は、利用者が第４領域に追加される類義語を「関連が高い単語のみ」に設定した場合には、「ｔｙｐｉｃａｌ」と「ｕｌｔｉｍａｔｅ」と「ｃｌａｓｓｉｃ」と「ｉｄｅａｌ」の単語のうち「ｔｙｐｉｃａｌ」と「ｕｌｔｉｍａｔｅ」の単語を第４領域に追加される類義語の候補とし、利用者が第４領域に追加される類義語を「関連がやや高い単語を含む」に設定した場合には、「ｔｙｐｉｃａｌ」と「ｕｌｔｉｍａｔｅ」と「ｃｌａｓｓｉｃ」と「ｉｄｅａｌ」の全ての単語を第４領域に追加される類義語の候補として、第４領域に追加される単語を選択してもよい。
【0101】
〔６．その他〕
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部又は一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部又は一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部又は一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部又は一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
【0102】
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。
【0103】
また、上述してきた実施形態は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
【0104】
以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
【0105】
また、上述してきた「部（ｓｅｃｔｉｏｎ、ｍｏｄｕｌｅ、ｕｎｉｔ）」は、「手段」や「回路」などに読み替えることができる。例えば、取得部は、取得手段や取得回路に読み替えることができる。
【0106】
なお、以下のような構成も本発明の技術的範囲に属する。
（１）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
（２）
前記映像動画は、各話が所定時間長の複数話から構成された映像動画であって、
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
前記（１）に記載のアニメーション作品を用いた記憶支援プログラム。
（３）
前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該単語の選択時に表示された当該所定映像動画の一部である映像画像を表示させる表示手順、を更に有することを特徴とする
前記（１）又は（２）に記載のアニメーション作品を用いた記憶支援プログラム。
（４）
前記表示手順は、
前記単語の選択時に表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
前記（３）に記載のアニメーション作品を用いた記憶支援プログラム。
（５）
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（６）
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（７）
前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、を更に有することを特徴とする
前記（１）～（６）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（８）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
前記（７）に記載のアニメーション作品を用いた記憶支援プログラム。
（９）
前記提案手順は、
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（８）に記載のアニメーション作品を用いた記憶支援プログラム。
（１０）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
前記（７）～（９）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（１１）
前記提案手順は、
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１０）に記載のアニメーション作品を用いた記憶支援プログラム。
（１２）
前記提案手順は、
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１１）に記載のアニメーション作品を用いた記憶支援プログラム。
（１３）
コンピュータが実行する記憶支援方法であって、
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出工程と、
前記抽出工程により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
（１４）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出部と、
前記抽出部により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
（１５）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラムを記録したコンピュータ読み取り可能な記録媒体。
（１）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
（２）
前記映像動画は、各話が所定時間長の複数話から構成された映像動画であって、
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
前記（１）に記載のアニメーション作品を用いた記憶支援プログラム。
（３）
前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該単語の選択時に表示された当該所定映像動画の一部である映像画像を表示させる表示手順、を更に有することを特徴とする
前記（１）又は（２）に記載のアニメーション作品を用いた記憶支援プログラム。
（４）
前記表示手順は、
前記単語の選択時に表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
前記（３）に記載のアニメーション作品を用いた記憶支援プログラム。
（５）
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（６）
前記抽出手順は、
前記単語の選択時に表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（７）
前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、を更に有することを特徴とする
前記（１）～（６）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（８）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
前記（７）に記載のアニメーション作品を用いた記憶支援プログラム。
（９）
前記提案手順は、
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（８）に記載のアニメーション作品を用いた記憶支援プログラム。
（１０）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
前記（７）～（９）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（１１）
前記提案手順は、
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１０）に記載のアニメーション作品を用いた記憶支援プログラム。
（１２）
前記提案手順は、
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１１）に記載のアニメーション作品を用いた記憶支援プログラム。
（１３）
コンピュータが実行する記憶支援方法であって、
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出工程と、
前記抽出工程により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
（１４）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出部と、
前記抽出部により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
（１５）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画のうち当該利用者が視聴中の所定映像動画の字幕のうち所定字幕が表示中に当該所定字幕から当該利用者が選択した単語と、当該所定字幕とを抽出する抽出手順と、
前記抽出手順により抽出された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が選択した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラムを記録したコンピュータ読み取り可能な記録媒体。
【0107】
また、以下のような構成（変形例１に対応）も本発明の技術的範囲に属する。
（１）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出手順と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
（２）
前記映像動画は、各話が所定時間長の複数話から構成された映像動画であって、
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
前記（１）に記載のアニメーション作品を用いた記憶支援プログラム。
（３）
前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該第１領域への単語の追加に対応して前記第２領域に追加された所定字幕が表示された当該所定映像動画の一部である映像画像を表示させる表示手順、を更に有することを特徴とする
前記（１）又は（２）に記載のアニメーション作品を用いた記憶支援プログラム。
（４）
前記表示手順は、
前記第１領域への単語の追加に対応して前記第２領域に追加された所定字幕が表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
前記（３）に記載のアニメーション作品を用いた記憶支援プログラム。
（５）
前記抽出手順は、
前記所定字幕が表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（６）
前記抽出手順は、
前記所定字幕が表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（７）
前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、を更に有することを特徴とする
前記（１）～（６）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（８）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
前記（７）に記載のアニメーション作品を用いた記憶支援プログラム。
（９）
前記提案手順は、
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（８）に記載のアニメーション作品を用いた記憶支援プログラム。
（１０）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
前記（７）～（９）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（１１）
前記提案手順は、
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１０）に記載のアニメーション作品を用いた記憶支援プログラム。
（１２）
前記提案手順は、
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１１）に記載のアニメーション作品を用いた記憶支援プログラム。
（１３）
コンピュータが実行する記憶支援方法であって、
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出工程と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
（１４）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出部と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
（１５）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出手順と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラムを記録したコンピュータ読み取り可能な記録媒体。
（１）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出手順と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラム。
（２）
前記映像動画は、各話が所定時間長の複数話から構成された映像動画であって、
前記更新手順は、
前記所定映像動画を構成する複数話のうち前記所定字幕が登場する話の順番が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する
前記（１）に記載のアニメーション作品を用いた記憶支援プログラム。
（３）
前記生成手順により辞書が生成された映像動画の中から選択された所定映像動画に対応した第１領域に追加された単語の順序に応じた順番で、当該第１領域への単語の追加に対応して前記第２領域に追加された所定字幕が表示された当該所定映像動画の一部である映像画像を表示させる表示手順、を更に有することを特徴とする
前記（１）又は（２）に記載のアニメーション作品を用いた記憶支援プログラム。
（４）
前記表示手順は、
前記第１領域への単語の追加に対応して前記第２領域に追加された所定字幕が表示された前記映像画像の場面中に表示された映像画像のうち印象的な映像画像を表示させる
前記（３）に記載のアニメーション作品を用いた記憶支援プログラム。
（５）
前記抽出手順は、
前記所定字幕が表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第１領域に追加された単語とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該単語を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（６）
前記抽出手順は、
前記所定字幕が表示された、前記所定字幕を除いた前記所定映像動画の一部である映像画像を抽出し、
前記生成手順は、
前記抽出手順により抽出された映像画像を、前記第１領域に対応して映像動画ごとに設定された第３領域であって前記第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第３領域に追加することで、前記辞書を生成し、
前記表示手順は、
前記第３領域に追加された映像画像と、当該映像画像に対応して前記第２領域に追加された所定字幕とを、前記生成手順により生成された辞書から抽出し、当該映像画像に当該所定字幕を重畳させることで、当該映像画像を表示させる
前記（３）又は（４）に記載のアニメーション作品を用いた記憶支援プログラム。
（７）
前記生成手順により生成された辞書の中から選択された所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む一以上の映像動画を新たな辞書を生成するための候補として提案する提案手順、を更に有することを特徴とする
前記（１）～（６）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（８）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記所定辞書が生成された所定映像動画と特徴が類似する一以上の映像動画を前記候補として提案する
前記（７）に記載のアニメーション作品を用いた記憶支援プログラム。
（９）
前記提案手順は、
前記所定辞書が生成された所定映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（８）に記載のアニメーション作品を用いた記憶支援プログラム。
（１０）
前記提案手順は、
前記所定辞書の前記第１領域に追加された単語のうち一以上の単語を字幕に含む映像動画のうち、前記利用者が前記辞書を生成した他の映像動画の特徴に基づいて、一以上の映像動画を前記候補として提案する
前記（７）～（９）のいずれか一つに記載のアニメーション作品を用いた記憶支援プログラム。
（１１）
前記提案手順は、
前記利用者が前記辞書を生成した他の映像動画のメインキャラクターの特徴に基づいて、当該メインキャラクターのうち一のメインキャラクターの特徴と類似した特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１０）に記載のアニメーション作品を用いた記憶支援プログラム。
（１２）
前記提案手順は、
前記他の映像動画のメインキャラクターの特徴に基づいて推定された前記利用者の嗜好に沿った特徴のキャラクターをメインキャラクターに含む映像動画を前記候補として提案する
前記（１１）に記載のアニメーション作品を用いた記憶支援プログラム。
（１３）
コンピュータが実行する記憶支援方法であって、
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出工程と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出工程により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成工程と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成工程により生成された辞書を更新する更新工程と、
を含むことを特徴とするアニメーション作品を用いた記憶支援方法。
（１４）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出部と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出部により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成部と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成部により生成された辞書を更新する更新部と、
を有することを特徴とするアニメーション作品を用いた記憶支援装置。
（１５）
利用者の属性に応じた言語で発話された音声が所定言語で翻訳された字幕付きの映像動画の中から選択された所定映像動画の字幕のうち当該利用者が当該所定映像動画を視聴中に表示された字幕から、当該利用者が指定した単語を含む所定字幕を抽出する抽出手順と、
前記利用者により指定された単語を、映像動画ごとに設定された第１領域のうち前記所定映像動画に対応した第１領域に追加し、前記抽出手順により抽出された所定字幕を、当該第１領域に対応して映像動画ごとに設定された第２領域であって当該第１領域に追加された単語の記憶を支援するための前記所定映像動画に対応した第２領域に追加することで、映像動画ごとに、前記利用者が指定した単語をまとめた辞書を生成する生成手順と、
前記第１領域への単語の追加時に、前記所定映像動画の字幕の中で前記所定字幕が表示される表示順が早いほど、当該単語が上位に表示されるように前記生成手順により生成された辞書を更新する更新手順と、
をコンピュータに実行させることを特徴とするアニメーション作品を用いた記憶支援プログラムを記録したコンピュータ読み取り可能な記録媒体。
【符号の説明】
【0108】
１ 情報処理システム
１０ 端末装置
１００ 記憶支援装置
１１０ 通信部
１２０ 記憶部
１２１ 辞書情報記憶部
１２２ 字幕情報記憶部
１３０ 制御部
１３１ 取得部
１３２ 抽出部
１３３ 生成部
１３４ 更新部
１３５ 表示部
１３６ 提案部
Ｎ ネットワーク
１０ 端末装置
１００ 記憶支援装置
１１０ 通信部
１２０ 記憶部
１２１ 辞書情報記憶部
１２２ 字幕情報記憶部
１３０ 制御部
１３１ 取得部
１３２ 抽出部
１３３ 生成部
１３４ 更新部
１３５ 表示部
１３６ 提案部
Ｎ ネットワーク
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】