知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-01-05
(45)【発行日】2024-01-16
(54)【発明の名称】コメント追加方法及び電子デバイス
(51)【国際特許分類】
G06F 3/041 20060101AFI20240109BHJP
G06F 3/0488 20220101ALI20240109BHJP
G06F 3/0484 20220101ALI20240109BHJP
H04M 1/72436 20210101ALI20240109BHJP
【ＦＩ】
G06F3/041 560
G06F3/0488
G06F3/0484
H04M1/72436
【請求項の数】
17
(21)【出願番号】P 2021561665
(86)(22)【出願日】2020-04-11
(65)【公表番号】
(43)【公表日】2022-06-17
(86)【国際出願番号】 CN2020084348
(87)【国際公開番号】W WO2020211709
(87)【国際公開日】2020-10-22
【審査請求日】2021-11-09
(31)【優先権主張番号】201910310631.6
(32)【優先日】2019-04-17
(33)【優先権主張国・地域又は機関】CN
(73)【特許権者】
【識別番号】503433420
【氏名又は名称】華為技術有限公司
【氏名又は名称原語表記】ＨＵＡＷＥＩ ＴＥＣＨＮＯＬＯＧＩＥＳ ＣＯ．，ＬＴＤ．
【住所又は居所原語表記】Ｈｕａｗｅｉ Ａｄｍｉｎｉｓｔｒａｔｉｏｎ Ｂｕｉｌｄｉｎｇ， Ｂａｎｔｉａｎ， Ｌｏｎｇｇａｎｇ Ｄｉｓｔｒｉｃｔ， Ｓｈｅｎｚｈｅｎ， Ｇｕａｎｇｄｏｎｇ ５１８１２９， Ｐ．Ｒ． Ｃｈｉｎａ
(74)【代理人】
【識別番号】100107766
【弁理士】
【氏名又は名称】伊東 忠重
(74)【代理人】
【識別番号】100070150
【弁理士】
【氏名又は名称】伊東 忠彦
(74)【代理人】
【識別番号】100135079
【弁理士】
【氏名又は名称】宮崎 修
(72)【発明者】
【氏名】ツァイ，ウエンディー
【審査官】菅原 浩二
(56)【参考文献】
【文献】米国特許出願公開第２０１９／００８７０２４（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１７／０３５７３３５（ＵＳ，Ａ１）
【文献】再公表特許第２０１４／１０６９１１（ＪＰ，Ａ１）
【文献】特開２０１２－１１３４３５（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１８／００８８７９４（ＵＳ，Ａ１）
【文献】特開２０１８－０７３１４３（ＪＰ，Ａ）
【文献】再公表特許第２０１４／１４７７２４（ＪＰ，Ａ１）
【文献】特開２００６－２８８９６２（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１７／００３８９２２（ＵＳ，Ａ１）
【文献】特表２０１７－５０３２７３（ＪＰ，Ａ）
【文献】特開２０１３－１２５３５６（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１５／０１３５１２９（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１９／００２６３８０（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｆ ３／０４１
Ｇ０６Ｆ ３／０４８ー３／０４８９５
Ｈ０４Ｍ １／７２４３６
(57)【特許請求の範囲】
【請求項1】
コメント追加方法であって、電子デバイスにより、ディスプレイにブラウザアプリケーションの第１のインターフェースを表示するステップと、
前記電子デバイスにより、予め設定されたトリガ動作に応答して前記第１のインターフェースでコメントモードに入るステップと、
前記電子デバイスにより、前記コメントモードにおいて前記ディスプレイ上で第１の入力イベントを受け取るステップと、
前記電子デバイスにより、前記第１の入力イベントがスタイラスにより形成されているか又はユーザの指により形成されているかを決定するステップと、
前記第１の入力イベントがスタイラスにより形成されているとき、前記電子デバイスにより前記第１のインターフェースに、前記第１の入力イベントに応答して第１のコメントを表示するステップ、又は
前記第１の入力イベントが前記ディスプレイ上でユーザの指により形成されているとき、前記電子デバイスにより、前記第１の入力イベントに応答して前記ブラウザアプリケーションの第２のインターフェースを表示するステップと、
前記電子デバイスにより、前記コメントモードにおいて前記第１のインターフェース上に前記ユーザの指により形成されたタッチイベントを受け取るステップと、
前記電子デバイスにより、前記タッチイベントに応答して、前記第１のインターフェース内の内容を編集又は更新するステップと、
前記電子デバイスにより、前記ユーザから保存動作を受け取るステップと、
前記電子デバイスにより、前記保存動作に応答して、前記第１のコメントと、前記第１のインターフェース内の第１の内容とを含むピクチャを、前記ブラウザアプリケーション以外の第１のアプリケーションに保存するステップと、
前記電子デバイスにより、前記ピクチャを前記第１のアプリケーションに保存しつつ、前記ピクチャと共に前記第１のインターフェースに関連づけられたユニフォームリソースロケータ（ＵＲＬ）アドレスを保存するステップと、
前記電子デバイスにより、前記電子デバイスが前記第１のインターフェースに関連づけられた前記ＵＲＬアドレスに基づいて前記ブラウザアプリケーションを開いて前記第１のインターフェースを表示したことを検出し、前記電子デバイスが前記ブラウザアプリケーションを開いて前記第１のインターフェースを表示したことを検出したことに応答して、前記第１のインターフェースに関連づけられたコメントが見つかっていることを前記ユーザに提示する第１の情報を表示するステップと、
を含む方法。
【請求項2】
当該方法は、前記電子デバイスにより、前記コメントモードにおいて前記ディスプレイ上で第２の入力イベントを受け取るステップと、
前記電子デバイスにより、前記第２の入力イベントが前記スタイラスにより形成されているか又は前記指により形成されているかを決定するステップと、
前記第２の入力イベントが前記指により形成されているとき、前記電子デバイスにより、前記第２の入力イベントに応答して第２のインターフェースを表示するステップであり、前記第２の入力イベントはスライド動作を含み、前記第２のインターフェース内の第２の内容は、前記第１のインターフェース内の前記第１の内容と部分的に同じである、ステップと、
前記電子デバイスにより、前記コメントモードにおいて前記ディスプレイ上で第３の入力イベントを受け取るステップと、
前記第３の入力イベントが前記スタイラスにより形成されているとき、前記電子デバイスにより前記第２のインターフェースに、前記第３の入力イベントに応答して第２のコメントを表示するステップと、
をさらに含み、
前記ピクチャは、前記第２のコメントと、前記第２のインターフェース内の前記第２の内容とをさらに含む、請求項１に記載の方法。
【請求項3】
当該方法は、前記電子デバイスにより、タッチアンドホールド動作に応答して、テキストをコピーするために使用される編集メニューを表示するステップをさらに含む、請求項１又は２に記載の方法。
【請求項4】
前記第１のインターフェースは、ビデオファイル又はオーディオファイルに対応する再生ボタンを含み、当該方法は、前記電子デバイスにより、前記再生ボタンに対するタップ動作に応答して、前記第１のインターフェース内で前記ビデオファイル又は前記オーディオファイルを再生するステップをさらに含む、請求項１乃至３のうちいずれか１項に記載の方法。
【請求項5】
前記電子デバイスにより、前記第１のインターフェース上にコメント層を重ねるステップであり、前記コメント層は、前記第１のインターフェースに対応する第１の透過領域を含む、ステップと、前記電子デバイスにより、前記第１の透過領域で前記ユーザからの前記第１のコメントを受け取るステップと、
前記電子デバイスにより、前記第１の透過領域に前記第１のコメントを表示するステップと、
をさらに含む、請求項２に記載の方法。
【請求項6】
前記コメント層は、ツールバーをさらに含み、前記ツールバーは、終了オプション、保存オプション、消しゴムオプション、ライン太さオプション、又はライン色オプションのうち１つ以上を含む、請求項５に記載の方法。
【請求項7】
前記電子デバイスにより、前記第２のインターフェース上に前記コメント層における第２の透過領域を重ねるステップをさらに含む、請求項５に記載の方法。
【請求項8】
前記電子デバイスにより、前記第２のインターフェースを表示した後、当該方法は、前記電子デバイスにより、前記第２の透過領域で前記第２のコメントを前記ユーザから受け取るステップと、
前記電子デバイスにより、前記第２のインターフェース内に前記第２のコメントを表示するステップと、
をさらに含む、請求項７に記載の方法。
【請求項9】
前記電子デバイスにより、前記第２のコメントを表示した後、当該方法は、前記電子デバイスにより、前記ユーザから保存動作を受け取るステップと、
前記電子デバイスにより、前記保存動作に応答して、前記第１のコメント及び前記第２のコメントと共に前記第１のインターフェース及び前記第２のインターフェース上でスクリーンショット動作を実行して前記ピクチャを取得するステップと、
前記ピクチャを保存するステップと、
をさらに含む、請求項８に記載の方法。
【請求項10】
前記電子デバイスにより、前記スクリーンショット動作を実行することに応じて、前記第１のコメント及び前記第２のコメントが保存されていることを前記ユーザに提示する第２の情報を表示するステップ、をさらに含む、請求項９に記載の方法。
【請求項11】
前記電子デバイスにより、前記ピクチャをメモアプリケーション又はギャラリーアプリケーションに保存するステップ、をさらに含む、請求項９に記載の方法。
【請求項12】
前記電子デバイスにより、前記ピクチャを前記メモアプリケーションの予め設定されたフォルダに保存するステップ、をさらに含む、請求項１１に記載の方法。
【請求項13】
前記メモアプリケーションは検索バーを含み、当該方法は、前記電子デバイスにより、前記検索バーにおいて前記ユーザからのキーワードを受け取るステップであり、前記キーワードは前記ピクチャ内のテキストである、ステップと、
前記電子デバイスにより、前記キーワードに従って検索動作を実行する検索動作入力を前記ユーザから受け取るステップと、
前記電子デバイスにより、前記検索動作入力に応答して前記検索動作を実行するステップと、
前記電子デバイスにより、前記検索動作に応答して前記ピクチャを表示するステップと、
をさらに含む、請求項１１に記載の方法。
【請求項14】
前記電子デバイスにより、前記ピクチャを保存した後、当該方法は、前記電子デバイスにより、前記ユーザが前記メモアプリケーションにおいて又は前記ギャラリーアプリケーションにおいて前記ピクチャを選択したことを検出し、前記ユーザが前記メモアプリケーションにおいて又は前記ギャラリーアプリケーションにおいて前記ピクチャを選択したことを検出したことに応答して、前記ブラウザアプリケーションを開いて前記第１のインターフェースを表示するステップ、
をさらに含む、請求項１１に記載の方法。
【請求項15】
電子デバイスであって、ディスプレイ及びタッチセンサを含む、タッチスクリーンと、
１つ以上のプロセッサと、
メモリと、
１つ以上のコンピュータプログラムと、を含み、前記１つ以上のコンピュータプログラムは前記メモリに記憶され、前記１つ以上のコンピュータプログラムは命令を含み、前記命令が当該電子デバイスにより実行されると、当該電子デバイスは請求項１乃至１４のうちいずれか１項に記載の方法を実行可能にされる、電子デバイス。
【請求項16】
コンピュータ読取可能記憶媒体であって、命令を記憶し、前記命令が電子デバイス上で実行されると、前記電子デバイスは、請求項１乃至１４のうちいずれか１項に記載のコメント追加方法を実行可能にされる、コンピュータ読取可能記憶媒体。
【請求項17】
命令を含むコンピュータプログラムであって、当該コンピュータプログラムが電子デバイス上で実行されると、前記電子デバイスは、請求項１乃至１４のうちいずれか１項に記載のコメント追加方法を実行可能にされる、コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本出願は、2019年4月17日に中国国家知識産権局に出願され、「COMMENT ADDITION METHOD AND ELECTRONIC DEVICE」と題された中国特許出願第201910310631.6号に対する優先権を主張するものであり、該出願はその全体を参照により本明細書に組み込まれる。
【0002】
［技術分野］
本出願は端末技術の分野に関し、特にコメント追加方法及び電子デバイスに関する。
本出願は端末技術の分野に関し、特にコメント追加方法及び電子デバイスに関する。
【背景技術】
【0003】
現在、一部の製造業者は、携帯電話及びタブレットコンピュータなどの電子デバイスにスタイラスをインストールしている。ユーザは、スタイラスを使用して、テキスト及びパターンなどのコメント内容を電子デバイスに記録することができる。
【0004】
例えば、携帯電話が電子デバイスとして使用される。ユーザが、スタイラスを使用して携帯電話のタッチパネルに接触すると、携帯電話は、接触の電気信号（例えば、容量性信号）が変化したことを検出して、タッチパネル上のスタイラスの接触の位置を識別し、次いで、スタイラスを使用することによりタッチパネルに入力されたコメント内容を記録し、識別することができる。
【0005】
しかしながら、携帯電話にインストールされたサードパーティアプリケーションが、ユーザがサードパーティアプリケーションで手書きコメントモードを可能にするのをサポートするためには、さらなるインターフェースが設定される必要がある。具体的には、実行中のアプリケーションが手書きコメントモードの使用をサポートしていない場合、ユーザは、現在のアプリケーションインターフェース内でコメントを手書きするためにスタイラスを使用することはできない。これは、スタイラスの使用シナリオ及び範囲を大幅に低減させ、スタイラスの不十分な使用体験をもたらす。
【発明の概要】
【0006】
本出願は、コメント追加方法及び電子デバイスを提供し、それにより、電子デバイスは、コメントを追加すべき表示されている任意のインターフェースでコメントモードに入って、スタイラスの適用シナリオを豊富にし、ユーザによりスタイラスを使用する使用体験を向上させる。
【0007】
上記目的を達成するために、本出願では以下の技術的解決策が用いられる。
【0008】
第１の態様によれば、本出願は、以下を含むコメント追加方法を提供する。電子デバイスが、第１のアプリケーションの第１のインターフェースを表示する。電子デバイスが、ユーザが予め設定されたトリガ動作を実行したことを検出した場合、電子デバイスは、第１のインターフェースでコメントモードに入ることができる。コメントモードにおいて、電子デバイスは、表示されている第１のインターフェースにおいてユーザにより追加された第１のコメントを受け取り、第１のインターフェースに第１のコメントを表示することができる。同様に、電子デバイスが、第２のアプリケーション（第１のアプリケーションとは異なる）の第２のインターフェース（第１のインターフェースとは異なる）を表示しているとき、電子デバイスが、ユーザがトリガ動作を実行したことを検出した場合、電子デバイスは、第２のインターフェースでコメントモードに入ることができる。同様に、コメントモードにおいて、電子デバイスは、表示されている第２のインターフェースにおいてユーザにより追加された第２のコメントを受け取り、第２のインターフェースに第２のコメントを表示することができる。
【0009】
具体的には、本出願で提供されるコメント追加方法によれば、電子デバイスが任意のインターフェースを表示しているとき、電子デバイスは、コメントモードに入ってユーザにより追加されたコメントを受け取ることができる。このコメント追加方法は、表示されている表示インターフェースに何の要件も課さず、対応するインターフェースが適合のためにアプリケーションに追加される必要はない。したがって、コメントモードの使用シナリオを豊富にすることができ、ユーザの使用体験を向上させることができる。
【0010】
可能な一実装において、第１のインターフェースは、ピクチャフォーマットのインターフェースではなく、動的に更新可能である、第１のアプリケーションのインターフェースである。例えば、第１のインターフェースでコメントモードに入った後、電子デバイスは、さらに、第１のインターフェースにおいてユーザにより実行された第１の編集動作（例えば、再生動作、コピー動作、スライド動作、又はタップ動作）を受け取ることができる。電子デバイスは、対応して、第１の編集動作に応答して第１のインターフェース内の内容を編集して、第１のインターフェース内の表示内容を更新することができる。同様に、第２のインターフェースも、動的に更新可能である、第２のアプリケーションのインターフェースである。第２のインターフェースでコメントモードに入った後、電子デバイスは、さらに、第２のインターフェースにおいてユーザにより実行された第２の編集動作を受け取ることができる。同様に、電子デバイスは、対応して、第２の編集動作に応答して第２のインターフェース内の内容を編集して、第２のインターフェース内の表示内容を更新することができる。
【0011】
可能な一実装において、電子デバイスが第１のインターフェースでコメントモードに入ることは、具体的に、電子デバイスが第１のインターフェース上にコメント層を重ねることを意味し、コメント層は、第１のインターフェースに対応する第１の透過領域を含む。この場合、電子デバイスが、第１のインターフェースに、ユーザにより追加された第１のコメントを表示することは、具体的に、電子デバイスが、第１のインターフェースにおいてユーザにより第１の透過領域に入力された第１のコメントを表示することを意味する。
【0012】
具体的には、コメントモードに入った後、電子デバイスは、第１のインターフェース上に透過領域を含むコメント層を重ね、それにより、ユーザは、透過領域を介して第１のインターフェース内の表示内容を見ることができる。さらに、ユーザは、第１のインターフェースに対応する透過領域に第１のコメントを追加することができる。このように、ユーザにより透過層にコメントを追加することと、電子デバイスにより第１のアプリケーションを実行することは、２つの相対的に独立したプロセスであり、したがって、ユーザがコメントを追加するとき、第１のアプリケーションの通常の実行は影響を受けない。
【0013】
可能な一実装において、電子デバイスが、第１のインターフェースに、ユーザにより追加された第１のコメントを表示した後、当該方法は、以下をさらに含む。電子デバイスは、ユーザの指のスライド動作に応答して第１のアプリケーションの第３のインターフェースを表示することができ、コメント層における第２の透過領域が、第３のインターフェース上に重ねられる。具体的には、コメントモードにおいて、電子デバイスが、画面スクロールを介して第１のインターフェースに続いて第３のインターフェースを表示するとき、電子デバイスは、コメント層における透過領域を同期的にスクロールすることができ、それにより、新しい第２の透過領域が第３のインターフェース上に重ねられる。
【0014】
この場合、電子デバイスが第１のアプリケーションの第３のインターフェースを表示した後、当該方法は、以下をさらに含む。電子デバイスは、第２の透過領域において、第３のインターフェース内でユーザにより入力された第３のコメントを受け取り、第３のインターフェースに第３のコメントを表示することができる。このようにして、コメントモードにおいて、電子デバイスは、アプリケーションの異なる表示インターフェースに複数のコメントを追加することができる。
【0015】
可能な一実装において、電子デバイスが、第１のインターフェースにおいてユーザにより追加された第１のコメントを表示した後、当該方法は、以下をさらに含む。ユーザにより入力された保存動作に応答して、電子デバイスは、第１のコメントを含む第１のインターフェース上でスクリーンショット動作を実行して、第１のピクチャを取得する。電子デバイスは、第１のピクチャを保存する。具体的には、電子デバイスは、スクリーンショット方式で、ユーザにより追加されたコメントを保存することができる。確かに、電子デバイスは、代替的に、別のフォーマットで、ユーザにより現在追加されているコメントを保存してもよい。これは、本出願のこの実施形態において限定されない。
【0016】
可能な一実装において、電子デバイスが、第１のコメントを含む第１のインターフェース上でスクリーンショット動作を実行するとき、電子デバイスはさらに、第１の通知メッセージを表示することができ、第１の通知メッセージは、第１のコメントが保存されていることをユーザに提示するために使用される。
【0017】
可能な一実装において、電子デバイスが、第３のインターフェースにおいてユーザにより第２の透過領域に入力された第３のコメントを表示した後、当該方法は、以下をさらに含む。ユーザにより入力された保存動作に応答して、電子デバイスは、第１のコメント及び第３のコメントをそれぞれ含む第１のインターフェース及び第３のインターフェース上でスクリーンショット動作を実行して、第２のピクチャを取得する。電子デバイスは、第２のピクチャを保存する。具体的には、ユーザが、複数のコメントを異なるインターフェースに追加するとき、電子デバイスは、ロングスクリーンショット方式で、ユーザにより追加された複数のコメントを保存することができる。
【0018】
可能な一実装において、電子デバイスが、第１のコメント及び第３のコメントをそれぞれ含む第１のインターフェース及び第３のインターフェース上でスクリーンショット動作を実行するとき、電子デバイスはさらに、第２の通知メッセージを表示することができ、第２の通知メッセージは、第１のコメント及び第２のコメントが保存されていることをユーザに提示するために使用される。
【0019】
可能な一実装において、電子デバイスは、第１のピクチャをメモアプリケーションに保存することができる。同様に、電子デバイスは、第２のピクチャもメモアプリケーションに保存する。
【0020】
可能な一実装において、コメントを保存するために使用されるフォルダが、メモアプリケーションに予め設定されてもよい。この場合、第１のピクチャと第２のピクチャは、ユーザによる検索を容易にするために、メモアプリケーションの予め設定されたフォルダに保存され得る。
【0021】
可能な一実装において、検索バーがメモアプリケーションに設定されてもよく、当該方法は、以下をさらに含む。電子デバイスは、検索バーにユーザにより入力されたキーワードを受け取り、キーワードは、第１のピクチャ内のテキストであり得る。ユーザにより入力された検索動作に応答して、電子デバイスは、メモアプリケーション内にありキーワードを含むメモリストを表示することができ、メモリストは、第１のピクチャのメモを含む。具体的には、電子デバイスは、ユーザにより入力されたキーワードに基づいて、キーワードに関連するコメントを取り出すことができ、それにより、ユーザは、メモアプリケーション内に保存されたコメント内容を迅速に見つけることができる。
【0022】
可能な一実装において、電子デバイスが第１のピクチャを保存するとき、当該方法は、以下をさらに含む。電子デバイスは、第１のピクチャと第１のインターフェースとの間の対応関係を保存する。さらに、電子デバイスが第１のピクチャを保存した後、当該方法は、以下をさらに含む。電子デバイスが、ユーザがメモアプリケーション内の第１のピクチャを選択したことを検出した場合、電子デバイスは、第１のアプリケーションを開いて第１のピクチャに対応する第１のインターフェースを表示することができる。代替的に、電子デバイスが、電子デバイスが第１のアプリケーションを開いて第１のインターフェースを表示したことを検出した場合、電子デバイスは、第３の通知メッセージを表示することができ、第３の通知メッセージは、第１のインターフェースに関連づけられたコメントが見つかっていることをユーザに提示するために使用され、ユーザは、関連する閲覧コンテンツに対して前に作成されたコメントを適時に見ることができる。
【0023】
可能な一実装において、トリガ動作は、スタイラス上でユーザにより実行される予め設定された動作を含み、第１のコメントと第２のコメントの双方が、スタイラスを使用することによりユーザにより追加されたコメントである。
【0024】
可能な一実装において、コメント層は、ツールバーをさらに含み、ツールバーは、終了オプション、保存オプション、消しゴムオプション、ライン太さオプション、及びライン色オプションのうち１つ以上を含んでもよい。これらのオプションは、現在のコメント追加プロセスでコメント内容を調整するために使用される。
【0025】
第２の態様によれば、本出願は、タッチスクリーン、１つ以上のプロセッサ、メモリ、及び１つ以上のコンピュータプログラムを含む電子デバイスを提供する。プロセッサは、タッチスクリーン、通信モジュール、及びメモリの各々に結合される。１つ以上のコンピュータプログラムは、メモリに記憶される。電子デバイスが動作すると、プロセッサは、メモリに記憶された１つ以上のコンピュータプログラムを実行し、それにより、電子デバイスは、前述の実装のいずれか１つに記載のコメント追加方法を実行する。
【0026】
第３の態様によれば、本出願は、コンピュータ命令を含むコンピュータ記憶媒体を提供する。コンピュータ命令が電子デバイス上で実行されると、電子デバイスは、第１の態様の実装のいずれか１つに記載のコメント追加方法を実行可能にされる。
【0027】
第４の態様によれば、本出願は、コンピュータプログラム製品を提供する。コンピュータプログラム製品が電子デバイス上で動作すると、電子デバイスは、第１の態様の実装のいずれか１つに記載のコメント追加方法を実行可能にされる。
【0028】
上記で提供される第２の態様による電子デバイス、第３の態様によるコンピュータ記憶媒体、及び第４の態様によるコンピュータプログラム製品は全て、上記で提供された対応する方法を実行するように構成されることが理解され得る。したがって、電子デバイス、コンピュータ記憶媒体、及びコンピュータプログラム製品により達成することができる有益な効果については、上記で提供された対応する方法における有益な効果を参照する。詳細は、ここで再度説明されない。
【図面の簡単な説明】
【0029】
【図2】本出願の一実施形態による電子デバイス及びスタイラスの適用シナリオの概略図である。
【図3】本出願の一実施形態による電子デバイス内のオペレーティングシステムの概略アーキテクチャ図である。
【図4(a)】本出願の一実施形態によるコメント追加シナリオの概略図である。
【図4(b)】本出願の一実施形態によるコメント追加シナリオの概略図である。
【図5】本出願の一実施形態によるコメント追加方法の概略相互作用図である。
【発明を実施するための形態】
【0030】
以下では、添付の図面を参照して実施形態の実装を詳細に説明する。
【0031】
例えば、本出願の実施形態で提供されるコメント追加方法は、携帯電話（mobile phone）、タブレットコンピュータ、ラップトップコンピュータ、ウルトラモバイルパーソナルコンピュータ（ultra-mobile personal computer、ＵＭＰＣ）、ハンドヘルドコンピュータ、ネットブック、パーソナルデジタルアシスタント（personal digital assistant、ＰＤＡ）、ウェアラブル電子デバイス、又は仮想現実デバイスなどの電子デバイスに適用され得る。これは、本出願の実施形態において限定されない。
【0032】
例えば、図１は、電子デバイス１００の概略構造図である。
【0033】
電子デバイス１００は、プロセッサ１１０、外部メモリインターフェース１２０、内部メモリ１２１、ユニバーサルシリアルバス（universal serial bus、ＵＳＢ）インターフェース１３０、充電管理モジュール１４０、電力管理モジュール１４１、バッテリ１４２、アンテナ１、アンテナ２、移動通信モジュール１５０、無線通信モジュール１６０、オーディオモジュール１７０、スピーカ１７０Ａ、受信機１７０Ｂ、マイクロホン１７０Ｃ、ヘッドセットジャック１７０Ｄ、センサモジュール１８０、カメラ１９３、ディスプレイ１９４などを含むことができる。
【0034】
本発明のこの実施形態に示される構造は、電子デバイス１００に特定の制限を構成しないことが理解され得る。本出願のいくつかの他の実施形態において、電子デバイス１００は、図に示されているものよりも多くの又は少ないコンポーネントを含んでもよく、いくつかのコンポーネントを組み合わせてもよく、いくつかのコンポーネントを分割してもよく、あるいは異なるコンポーネント配置を有してもよい。図に示すコンポーネントは、ハードウェア、ソフトウェア、又はソフトウェアとハードウェアの組み合わせを使用することにより実装されてもよい。
【0035】
プロセッサ１１０は、１つ以上の処理ユニットを含んでもよい。例えば、プロセッサ１１０は、アプリケーションプロセッサ（application processor、ＡＰ）、モデムプロセッサ、グラフィックス処理ユニット（graphics processing unit、ＧＰＵ）、画像信号プロセッサ（image signal processor、ＩＳＰ）、コントローラ、ビデオコーデック、デジタル信号プロセッサ（digital signal processor、ＤＳＰ）、ベースバンドプロセッサ、及び／又はニューラルネットワーク処理ユニット（neural-network processing unit、ＮＰＵ）を含んでもよい。異なる処理ユニットは、独立したコンポーネントでもよく、あるいは１つ以上のプロセッサに統合されてもよい。
【0036】
プロセッサ１１０にメモリがさらに配置されてもよく、命令及びデータを記憶するように構成される。いくつかの実施形態において、プロセッサ１１０内のメモリはキャッシュである。メモリは、プロセッサ１１０によりちょうど使用されるか又は周期的に使用される命令又はデータを記憶することができる。プロセッサ１１０が命令又はデータを再度使用する必要がある場合、プロセッサ１１０は、メモリから命令又はデータを直接呼び出すことができる。これは、繰り返されるアクセスを回避し、プロセッサ１１０の待ち時間を短縮する。したがって、システム効率が改善される。
【0037】
いくつかの実施形態において、プロセッサ１１０は、１つ以上のインターフェースを含んでもよい。インターフェースは、集積回路間（inter-integrated circuit、Ｉ２Ｃ）インターフェース、集積回路間サウンド（inter-integrated circuit sound、Ｉ２Ｓ）インターフェース、パルスコード変調（pulse code modulation、ＰＣＭ）インターフェース、ユニバーサル非同期受信機／送信機（universal asynchronous receiver/transmitter、ＵＡＲＴ）インターフェース、モバイル産業プロセッサインターフェース（mobile industry processor interface、ＭＩＰＩ）、汎用入力／出力（general-purpose input/output、ＧＰＩＯ）インターフェース、加入者識別モジュール（subscriber identity module、ＳＩＭ）インターフェース、ユニバーサルシリアルバス（universal serial bus、ＵＳＢ）インターフェース等を含むことができる。
【0038】
充電管理モジュール１４０は、充電器からの充電入力を受け取るように構成される。充電器は、無線充電器又は有線充電器であってよい。有線充電のいくつかの実施形態において、充電管理モジュール１４０は、ＵＳＢインターフェース１３０を介して有線充電器からの充電入力を受け取ることができる。無線充電のいくつかの実施形態において、充電管理モジュール１４０は、電子デバイス１００の無線充電コイルを介して無線充電入力を受け取ることができる。充電管理モジュール１４０は、さらに、バッテリ１４２を充電しながら電力管理モジュール１４１を使用することにより電子デバイスに電力を供給することができる。
【0039】
電力管理モジュール１４１は、バッテリ１４２及び充電管理モジュール１４０をプロセッサ１１０に接続するように構成される。電力管理モジュール１４１は、バッテリ１４２の入力及び／又は充電管理モジュール１４０の入力を受け取り、プロセッサ１１０、内部メモリ１２１、ディスプレイ１９４、カメラ１９３、無線通信モジュール１６０などに電力を供給することができる。いくつかの他の実施形態において、電力管理モジュール１４１は、代替的に、プロセッサ１１０内に配置されてもよい。いくつかの他の実施形態において、電力管理モジュール１４１及び充電管理モジュール１４０は、代替的に、同じ装置内に配置されてもよい。
【0040】
電子デバイス１００の無線通信機能は、アンテナ１、アンテナ２、移動通信モジュール１５０、無線通信モジュール１６０、モデムプロセッサ、ベースバンドプロセッサなどを介して実装され得る。
【0041】
アンテナ１及びアンテナ２は、電磁波信号を送信及び受信するように構成される。電子デバイス１００の各アンテナは、１つ以上の通信帯域をカバーするように構成され得る。さらに、アンテナ利用を改善するために、異なるアンテナが多重化されてもよい。例えば、アンテナ１は、無線ローカルエリアネットワーク内のダイバーシチアンテナとして多重化されてもよい。いくつかの他の実施形態において、アンテナは、同調スイッチと組み合わせて使用されてもよい。
【0042】
移動通信モジュール１５０は、２Ｇ／３Ｇ／４Ｇ／５Ｇなどを含み、かつ電子デバイス１００に適用される無線通信ソリューションを提供することができる。移動通信モジュール１５０は、１つ以上のフィルタ、スイッチ、電力増幅器、低ノイズ増幅器（low noise amplifier、ＬＮＡ）などを含むことができる。移動通信モジュール１５０は、アンテナ１を介して電磁波を受信し、受信した電磁波に対してフィルタリング及び増幅などの処理を実行し、受信した電磁波を復調のためにモデムプロセッサに送信することができる。移動通信モジュール１５０は、さらに、モデムプロセッサにより変調された信号を増幅し、増幅された信号を放射のためアンテナ１を介して電磁波に変換することができる。いくつかの実施形態において、移動通信モジュール１５０の少なくともいくつかの機能モジュールは、プロセッサ１１０に配置されてもよい。いくつかの実施形態において、移動通信モジュール１５０の少なくともいくつかの機能モジュール及びプロセッサ１１０の少なくともいくつかのモジュールは、同じデバイス内に配置されてもよい。
【0043】
モデムプロセッサは、変調器及び復調器を含むことができる。変調器は、送信すべき低周波数ベースバンド信号を中高周波信号に変調するように構成される。復調器は、受信した電磁波信号を低周波数ベースバンド信号に復調するように構成される。次いで、復調器は、復調を介して取得された低周波数ベースバンド信号を処理のためにベースバンドプロセッサに送信する。低周波数ベースバンド信号は、ベースバンドプロセッサにより処理され、次いで、アプリケーションプロセッサに送信される。アプリケーションプロセッサは、オーディオデバイス（これは、スピーカ１７０Ａ、受信機１７０Ｂなどに限定されない）を使用することによりサウンド信号を出力し、あるいはディスプレイ１９４を介して画像又はビデオを表示する。いくつかの実施形態において、モデムプロセッサは、独立したコンポーネントでもよい。いくつかの他の実施形態において、モデムプロセッサは、プロセッサ１１０から独立していてもよく、移動通信モジュール１５０又は別の機能モジュールと同じデバイスに配置される。
【0044】
無線通信モジュール１６０は、無線ローカルエリアネットワーク（wireless local area network、ＷＬＡＮ）（例えば、ワイヤレスフィデリティ（wireless fidelity、Ｗｉ－Ｆｉ）ネットワーク）、ブルートゥース（Bluetooth、ＢＴ）、全地球航法衛星システム（global navigation satellite system、ＧＮＳＳ）、周波数変調（frequency modulation、ＦＭ）、近距離通信（near field communication、ＮＦＣ）技術、赤外線（infrared、ＩＲ）技術などを含み、かつ電子デバイス１００に適用される無線通信ソリューションを提供することができる。無線通信モジュール１６０は、１つ以上の通信プロセッサモジュールを統合する１つ以上のコンポーネントでもよい。無線通信モジュール１６０は、アンテナ２を介して電磁波を受信し、電磁波信号に対して周波数変調及びフィルタリング処理を実行し、処理された信号をプロセッサ１１０に送信する。無線通信モジュール１６０は、さらに、送信すべき信号をプロセッサ１１０から受信し、その信号に対して周波数変調及び増幅を実行し、その信号を放射のためアンテナ２を介して電磁波に変換することができる。
【0045】
いくつかの実施形態において、電子デバイス１００のアンテナ１及び移動通信モジュール１５０は結合され、電子デバイス１００のアンテナ２及び無線通信モジュール１６０は結合され、それにより、電子デバイス１００は、無線通信技術を使用することによりネットワーク及び他のデバイスと通信することができる。無線通信技術は、グローバルシステムフォーモバイルコミュニケーションズ（global system for mobile communications、ＧＳＭ）、汎用パケット無線サービス（general packet radio service、ＧＰＲＳ）、符号分割多元接続（code division multiple access、ＣＤＭＡ）、広帯域符号分割多元接続（wideband code division multiple access、ＷＣＤＭＡ）、時分割符号分割多元接続（time-division code division multiple access、ＴＤ－ＣＤＭＡ）、ロングタームエボリューション（long term evolution、ＬＴＥ）、ＢＴ、ＧＮＳＳ、ＷＬＡＮ、ＮＦＣ、ＦＭ、ＩＲ技術などを含んでもよい。ＧＮＳＳは、全地球測位システム（global positioning system、ＧＰＳ）、全地球航法衛星システム（global navigation satellite system、ＧＬＯＮＡＳＳ）、北斗衛星導航系統（BeiDou navigation satellite system、ＢＤＳ）、準天頂衛星システム（quasi-zenith satellite system、ＱＺＳＳ）、及び／又は衛星ベースの補強システム（satellite based augmentation systems、ＳＢＡＳ）を含んでもよい。
【0046】
電子デバイス１００は、ＧＰＵ、ディスプレイ１９４、アプリケーションプロセッサ等を使用することによりディスプレイ機能を実装する。ＧＰＵは、画像処理のためのマイクロプロセッサであり、ディスプレイ１９４及びアプリケーションプロセッサに接続される。ＧＰＵは、数学的及び幾何学的計算を実行し、画像をレンダリングするように構成される。プロセッサ１１０は、ディスプレイ情報を生成又は変更するためのプログラム命令を実行する１つ以上のＧＰＵを含んでもよい。
【0047】
ディスプレイ１９４は、画像、ビデオ等を表示するように構成される。ディスプレイ１９４は、ディスプレイパネルを含む。ディスプレイパネルは、液晶ディスプレイ（liquid crystal display、ＬＣＤ）、有機発光ダイオード（organic light-emitting diode、ＯＬＥＤ）、アクティブマトリックス有機発光ダイオード（active-matrix organic light emitting diode、ＡＭＯＬＥＤ）、フレキシブル発光ダイオード（flexible light-emitting diode、ＦＬＥＤ）、ミニＬＥＤ、マイクロＬＥＤ、マイクロＯＬＥＤ、量子ドット発光ダイオード（quantum dot light emitting diodes、ＱＬＥＤ）などであり得る。いくつかの実施形態において、電子デバイス１００は、１つ又はＮ個のディスプレイ１９４を含んでもよく、Ｎは、１より大きい正の整数である。
【0048】
電子デバイス１００は、ＩＳＰ、カメラ１９３、ビデオコーデック、ＧＰＵ、ディスプレイ１９４、アプリケーションプロセッサなどを介して撮影機能を実装することができる。
【0049】
ＩＳＰは、カメラ１９３によりフィードバックされたデータを処理するように構成される。例えば、撮影中、シャッターが押され、レンズを介してカメラの感光素子に光が伝達される。光信号が電気信号に変換され、カメラの感光素子は電気信号を処理のためＩＳＰに送信して、電気信号を可視画像に変換する。ＩＳＰはさらに、画像のノイズ、輝度、及び顔色に対するアルゴリズム最適化を実行することができる。ＩＳＰはさらに、撮影シナリオの露光及び色温度などのパラメータを最適化することができる。いくつかの実施形態において、ＩＳＰは、カメラ１９３に配置されてもよい。
【0050】
カメラ１９３は、静止画像又はビデオを捕捉するように構成される。いくつかの実施形態において、携帯電話１００は、１つ又はＮ個のカメラを含んでもよく、Ｎは、１より大きい正の整数である。カメラ１９３は、前面カメラ又は背面カメラでもよい。
【0051】
デジタル信号プロセッサは、デジタル信号を処理するように構成され、デジタル画像信号に加えて別のデジタル信号を処理することができる。例えば、電子デバイス１００が周波数を選択すると、デジタル信号プロセッサは、周波数エネルギーに対してフーリエ変換などを実行するように構成される。
【0052】
ビデオコーデックは、デジタルビデオを圧縮又は解凍するように構成される。電子デバイス１００は、１つ以上のビデオコーデックをサポートすることができる。このようにして、電子デバイス１００は、複数のコーディングフォーマット、例えば、動画エキスパートグループ（moving picture experts group、ＭＰＥＧ）－１、ＭＰＥＧ－２、ＭＰＥＧ－３、及びＭＰＥＧ－４のビデオを再生又は記録することができる。
【0053】
外部メモリインターフェース１２０は、電子デバイス１００の記憶能力を拡張するために、外部ストレージカード、例えばマイクロＳＤカードに接続するように構成され得る。外部ストレージカードは、外部メモリインターフェース１２０を介してプロセッサ１１０と通信して、データ記憶機能を実現する。例えば、音楽やビデオなどのファイルは、外部ストレージカードに記憶される。
【0054】
内部メモリ１２１は、１つ以上のコンピュータプログラムを記憶するように構成され得、１つ以上のコンピュータプログラムは、命令を含む。プロセッサ１１０は、内部メモリ１２１に記憶された命令を実行することができ、それにより、電子デバイス１００は、本出願のいくつかの実施形態で提供されるインテリジェントなコンタクト推奨方法、様々な機能アプリケーション、データ処理などを実行する。内部メモリ１２１は、プログラム記憶領域及びデータ記憶領域を含んでもよい。プログラム記憶領域は、オペレーティングシステムを記憶することができる。プログラム記憶領域はさらに、１つ以上のアプリケーション（例えば、ギャラリー及びコンタクト）などを記憶することができる。データ記憶領域は、電子デバイス１０１の使用中に作成されたデータ（例えば、写真及びコンタクト）等を記憶することができる。さらに、内部メモリ１２１は、高速ランダムアクセスメモリを含んでもよく、あるいは不揮発性メモリ、例えば、１つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又はユニバーサルフラッシュストレージ（universal flash storage、ＵＦＳ）を含んでもよい。いくつかの他の実施形態において、プロセッサ１１０は、内部メモリ１２１に記憶された命令、及び／又はプロセッサに配置されたメモリに記憶された命令を実行し、それにより、電子デバイス１００は、本出願の実施形態で提供されるインテリジェントな番号推奨方法、様々な機能アプリケーション、及びデータ処理を実行する。
【0055】
電子デバイス１００は、オーディオモジュール１７０、スピーカ１７０Ａ、受信機１７０Ｂ、マイクロホン１７０Ｃ、ヘッドセットジャック１７０Ｄ、アプリケーションプロセッサなどを使用することにより、音楽の再生又は記録などのオーディオ機能を実装することができる。
【0056】
オーディオモジュール１７０は、デジタルオーディオ情報をアナログオーディオ信号出力に変換するように構成され、アナログオーディオ入力をデジタルオーディオ信号に変換するようにも構成される。オーディオモジュール１７０はさらに、オーディオ信号をコーディング及び復号するように構成されてもよい。いくつかの実施形態において、オーディオモジュール１７０はプロセッサ１１０に配置されてもよく、あるいは、オーディオモジュール１７０のいくつかの機能モジュールがプロセッサ１１０に配置される。
【0057】
スピーカ１７０Ａは、「ホーン」とも呼ばれ、電気オーディオ信号をサウンド信号に変換するように構成される。電子デバイス１００は、スピーカ１７０Ａを使用することにより音楽を聞き、あるいはハンズフリー通話に応答することができる。
【0058】
受信機１７０Ｂは、「イヤーピース」とも呼ばれ、電気オーディオ信号をサウンド信号に変換するように構成される。電子デバイス１００を使用することにより通話に応答し、あるいは発話情報を受け取ると、受信機１７０Ｂは、発話を受け取るように人間の耳の近くに置かれ得る。
【0059】
マイクロホン１７０Ｃは、「マイク」又は「マイクロホン」とも呼ばれ、音響信号を電気信号に変換するように構成される。発呼する又は発話情報を送るとき、ユーザは、マイクロホン１７０Ｃにサウンド信号を入力するために、マイクロホン１７０Ｃの近くで人間の口を動かすことにより音を立てることができる。１つ以上のマイクロホン１７０Ｃが、電子デバイス１００に配置されてもよい。いくつかの他の実施形態において、２つのマイクロホン１７０Ｃが電子デバイス１００に配置されて、サウンド信号を収集することに加えてノイズ低減機能を実現してもよい。いくつかの他の実施形態において、３つ、４つ、又はそれ以上のマイクロホン１７０Ｃが代替的に電子デバイス１００に配置されて、サウンド信号を収集し、ノイズを低減し、サウンドソースを識別し、指向性記録機能を実現してもよい。
【0060】
ヘッドセットジャック１７０Ｄは、有線ヘッドセットに接続するように構成される。ヘッドセットジャック１７０Ｄは、ＵＳＢインターフェース１３０でもよく、あるいは３．５ｍｍのオープン移動端末プラットフォーム（open mobile terminal platform、ＯＭＴＰ）標準インターフェース、又は米国のセルラー電気通信工業協会（cellular telecommunications industry association of the USA、ＣＴＩＡ）標準インターフェースでもよい。
【0061】
センサモジュール１８０は、圧力センサ、ジャイロセンサ、気圧センサ、磁気センサ、加速度センサ、距離センサ、光近接センサ、指紋センサ、温度センサ、タッチセンサ、周辺光センサ、骨伝導センサなどを含んでもよい。これは、本出願のこの実施形態において限定されない。
【0062】
確かに、本出願のこの実施形態で提供される電子デバイス１００は、キー、モータ、インジケータ、及びＳＩＭカードインターフェースなどの１つ以上のコンポーネントをさらに含んでもよい。これは、本出願のこの実施形態において限定されない。
【0063】
いくつかの実施形態において、図２に示すように、電子デバイス１００は、スタイラス２００をさらに保持し得る。ユーザは、スタイラス２００を使用して、電子デバイス１００に表示された特定の領域にテキストなどの情報を書き込むことができる。電子デバイス１００は、ディスプレイ上でスタイラス２００により形成された移動軌道を表示することができる。さらに、電子デバイス１００は、ディスプレイ上でスタイラス２００により形成された移動軌道を記録し、次いで対応するテキストを識別することができる。
【0064】
本出願のこの実施形態において、スタイラス２００は、ブルートゥース又はＷｉ－Ｆｉなどの無線通信を介して電子デバイス１００と通信することができる。図２に示すように、１つ以上のボタン２０１がスタイラス２００に配置されてもよく、ボタン２０１は物理的ボタン又は仮想的ボタンであってよい。スタイラス２００が、ユーザがボタン２０１をタップしたことを検出した場合、スタイラス２００は、ブルートゥース等を介して、ボタン２０１に対応するキー（key）値を電子デバイス１００に送信することができる。電子デバイス１００は、スタイラス２００により送信されたキー値を解析することにより、対応する動作を実行することができる。
【0065】
例えば、ボタン２０１をダブルタップする動作に対応するキー値が００１であり、キー値００１はコメントモードに入ることを示すために使用されることが仮定される。この場合、スタイラス２００が、ユーザがボタン２０１上でダブルタップ動作を実行したことを検出した場合、スタイラス２００は、対応するキー値００１を電子デバイス１００に送信し得る。キー値００１に応答して、電子デバイス１００は、表示されているインターフェースでコメントモードに入ることができ、コメントモードにおいて、ユーザは、スタイラス２００を使用して、表示インターフェースにコメント内容を手書きすることができる。さらに、電子デバイス１００は、表示インターフェース内でのスタイラス２００の移動軌道に基づいて、ユーザにより手書きされたコメント内容を識別し、表示インターフェース内のコメント内容を保存することができる。
【0066】
スタイラス２００は具体的に、抵抗性スタイラス、電磁スタイラス、又は容量性スタイラスでもよい。これは、本出願のこの実施形態において限定されない。
【0067】
電子デバイス１００のソフトウェアシステムは、層状アーキテクチャ、イベント駆動アーキテクチャ、マイクロカーネルアーキテクチャ、マイクロサービスアーキテクチャ、又はクラウドアーキテクチャを使用してもよい。本願の一実施形態では、電子デバイス１００のソフトウェア構造を説明するために、一例として、層状アーキテクチャを有するＡｎｄｒｏｉｄシステムが使用される。
【0068】
図３は、本出願の一実施形態による電子デバイス１００のソフトウェア構造のブロック図である。
【0069】
層状アーキテクチャでは、ソフトウェアは複数の層に分割され、各層は明確な役割とタスクを有する。これらの層は、ソフトウェアインターフェースを介して互いに通信する。いくつかの実施形態において、Ａｎｄｒｏｉｄシステムは、４つの層、すなわち、上から下にアプリケーション層、アプリケーションフレームワーク層、Ａｎｄｒｏｉｄランタイム（Android runtime）及びシステムライブラリ、並びにカーネル層に分割される。
【0070】
アプリケーション層は、一連のアプリケーションを含むことができる。
【0071】
図３に示すように、アプリケーションは、電話、メモ、ブラウザ、コンタクト、カメラ、ギャラリー、カレンダー、マップ、ブルートゥース、ミュージック、ビデオ、及びメッセージなどのＡＰＰ（applications、ＡＰＰ）を含むことができる。これらのアプリケーションは、電子デバイス１００が工場から配送されるときプリインストールされることがあり、あるいは、ユーザが電子デバイス１００を使用するときアプリケーションマーケットからユーザによりダウンロード及びインストールされることもある。これは、本出願のこの実施形態において限定されない。
【0072】
アプリケーションフレームワーク層は、アプリケーションプログラミングインターフェース（application programming interface、ＡＰＩ）と、アプリケーション層におけるアプリケーションのためのプログラミングフレームワークを提供する。アプリケーションフレームワーク層は、いくつかの予め定義された機能を含む。
【0073】
図３に示すように、アプリケーションフレームワーク層は、ウィンドウマネージャ、コンテンツプロバイダ、ビューシステム、リソースマネージャ、通知マネージャなどを含むことができる。
【0074】
ウィンドウマネージャは、ウィンドウプログラムを管理するように構成される。ウィンドウマネージャは、ディスプレイのサイズを取得する、ステータスバーがあるかどうかを決定する、スクリーンロックを実行する、スクリーンショットを取る等を行うことができる。コンテンツプロバイダは、データを記憶及び取得し、そのデータをアプリケーションにアクセス可能にするように構成される。データには、ビデオ、画像、オーディオ、発信及び受信した通話、閲覧履歴及びブックマーク、電話帳などを含んでもよい。ビューシステムは、テキストを表示するためのコントロール（control）及びピクチャを表示するためのコントロールなどの視覚的コントロールを含む。ビューシステムは、アプリケーションを構築するように構成されてもよい。表示インターフェースは、１つ以上のビューを含むことができる。リソースマネージャは、ローカライズされた文字列、アイコン、ピクチャ、レイアウトファイル、及びビデオファイルなどの様々なリソースをアプリケーションに提供する。通知マネージャは、アプリケーションが通知情報をステータスバーに表示することを可能にし、通知メッセージを伝達するように構成され得る。通知マネージャは、ユーザインタラクションなく、短い一時停止の後、自動的に消えてもよい。例えば、通知マネージャは、ダウンロード完了を通知する、メッセージ通知を提供する等を行うように構成される。通知マネージャは、代替的に、グラフ又はスクロールバーテキストの形式でシステムの上部ステータスバーに現れる通知、例えば、バックグラウンドで実行中のアプリケーションの通知、又はダイアログウィンドウの形式で画面に現れる通知でもよい。例えば、テキスト情報がステータスバーにおいて提示され、アナウンスが生成され、電子デバイスが振動し、あるいはインジケータライトが点滅する。
【0075】
システムライブラリは、複数の機能モジュール、例えば、サーフェスマネージャ（surface manager）、メディアライブラリ（Media Libraries）、３次元グラフィックス処理ライブラリ（例えば、ＯｐｅｎＧＬ ＥＳ）、及び２Ｄグラフィックスエンジン（例えば、ＳＧＬ）を含んでもよい。
【0076】
サーフェスマネージャは、表示サブシステムを管理し、複数のアプリケーションのために２Ｄ及び３Ｄ層の融合を提供するように構成される。メディアライブラリは、複数の一般的に使用されるオーディオ及びビデオフォーマット、静止画像ファイルなどの再生及び記録をサポートする。メディアライブラリは、ＭＰＥＧ－４、Ｈ．２６４、ＭＰ３、ＡＡＣ、ＡＭＲ、ＪＰＧ、及びＰＮＧなどの複数のオーディオ及びビデオコーディングフォーマットをサポートすることができる。３次元グラフィックス処理ライブラリは、３次元グラフィックス描画、画像レンダリング、合成、層処理等を実現するように構成される。２Ｄグラフィックスエンジンは、２Ｄ描画のための描画エンジンである。
【0077】
Ａｎｄｒｏｉｄランタイムは、コアライブラリと仮想マシンを含む。Ａｎｄｒｏｉｄランタイムは、Ａｎｄｒｏｉｄシステムのスケジューリング及び管理の責任を負う。
【0078】
コアライブラリは、２つの部分、すなわち、Ｊａｖａ言語で呼び出される必要のある関数と、Ａｎｄｒｏｉｄのコアライブラリを含む。
【0079】
アプリケーション層とアプリケーションフレームワーク層は、仮想マシン上で動作する。仮想マシンは、アプリケーション層とアプリケーションフレームワーク層のＪａｖａファイルをバイナリファイルとして実行する。仮想マシンは、オブジェクトライフサイクル管理、スタック管理、スレッド管理、セキュリティ及び例外管理、ガベージコレクションなどの機能を実現するように構成される。
【0080】
カーネル層は、ハードウェアとソフトウェアの間の層である。カーネル層は、少なくともディスプレイドライバ、カメラドライバ、オーディオドライバ、センサドライバ等を含む。これは、本出願のこの実施形態において限定されない。
【0081】
本出願のこの実施形態において、電子デバイス１００が、スタイラス２００により送信され、かつコメントモードを有効にすることを示すために使用されるキー値を受信した場合、電子デバイス１００は、ウィンドウマネージャを呼び出して、表示されているインターフェースに、コメントを受け取るために使用される層（これはコメント層と呼ばれることがある）をロードすることができる。コメント層は最上層であるため、ユーザがスタイラス２００を使用してコメント内容をディスプレイ上に入力するプロセスは、実際には、スタイラス２００がコメント層でコメント内容を入力するプロセスである。ウィンドウマネージャは、スタイラス２００により入力され、かつコメント層で受け取った移動軌道を識別のためにプロセッサに送って、ユーザにより追加されたコメント内容を識別することができる。
【0082】
例えば、電子デバイス１００はブラウザＡＰＰを実行する。図４（ａ）に示すように、ブラウザＡＰＰを実行するとき、電子デバイス１００は、ブラウザＡＰＰの表示インターフェース４０１をディスプレイ上に表示することができ、表示インターフェース４０１は、ユーザにより閲覧されているウェブコンテンツを含む。電子デバイス１００が、ブルートゥースを介して、スタイラス２００から送られたキー値（例えば、キー値は００１である）を受信した後、それは、ユーザがコメントモードを有効にするためにスタイラス２００上のボタン２０１をトリガしていることを示す。さらに、図４（ｂ）に示すように、ウィンドウマネージャは、表示インターフェース４０１にコメント層４０２をロードすることができる。コメント層４０２は、ツールバー４０３を含んでもよく、ツールバー４０３は、消しゴムオプション、ライン太さオプション、ライン色オプション、保存オプション、終了オプションなどを含んでもよい。これらのオプションは、現在のコメント追加プロセスでコメント内容を調整するために使用される。
【0083】
例えば、さらに図４（ｂ）に示すように、ウィンドウマネージャは、コメント層４０２内のツールバー４０３以外の領域を透過であるように設定することができる。この場合、電子デバイス１００がコメントモードに入った後、ユーザは、コメント層４０２を介して表示インターフェース４０１内の表示内容（すなわち、ブラウザＡＰＰ内の表示コンテンツ）をさらに見ることができる。このようにして、ユーザは、コメント層４０２における透過領域内でスタイラス２００を使用することにより、表示インターフェース４０１内の表示内容に対するコメントを作成することができる。その後、ウィンドウマネージャは、スクリーンショットアプリケーションを起動して、コメント層４０２と表示インターフェース４０１とが重ねられ（superimposed）た後に形成される画像のスクリーンショットを取得し、保存することができる。画像は、表示インターフェース４０１内の表示内容と、スタイラス２００を使用することによりコメント層４０２に対してユーザにより追加されたコメント内容の双方を含む。
【0084】
本出願のこの実施形態において、ユーザが、スタイラス２００を使用することにより、コメントモードに入るように電子デバイス１００をトリガした後、電子デバイス１００は、ウィンドウマネージャを使用することにより、表示されている任意の表示インターフェースにコメント層４０２をロードできることが習得され得る。コメント層４０２に透過領域が設定されるため、ユーザは、コメント層４０２における透過領域でスタイラス２００を使用することにより、表示インターフェース内の元の表示内容に対するコメントを作成することができる。このコメント追加方法は、表示されている表示インターフェースに何の要件も課さず、対応するインターフェースが適合のためにアプリケーション層にインストールされたアプリケーションに追加される必要はない。具体的には、電子デバイス１００は、表示されている任意のインターフェースで手書きコメントモードに入って、実生活で紙及びペンを使用することによってユーザによりコメントを追加する体験を復元し、スタイラスの適用シナリオを豊富にし、ユーザによりスタイラスを使用する使用体験を向上させることができる。
【0085】
理解を容易にするために、以下では、添付の図面を参照して、本出願の一実施形態で提供されるコメント追加方法を詳細に説明する。以下の実施形態では、電子デバイス１００として携帯電話を使用する一例を説明に用いる。
【0086】
【0087】
Ｓ５０１：スタイラス上の第１のボタンに対してユーザにより実行された予め設定された動作に応答して、スタイラスが、第１のキー値を携帯電話に送信し、第１のキー値は、コメントモードに入るように携帯電話に指示するために使用される。
【0088】
図２に示すスタイラス２００を依然として一例として用いる。スタイラス２００は、携帯電話へのブルートゥース接続を確立することができる。スタイラス２００上のボタン２０１は、第１のボタンでもよい。スタイラス２００が、ユーザがボタン２０１に対して予め設定された動作（例えば、ダブルタップ動作、シングルタップ動作、又はタッチアンドホールド動作）を実行したことを検出した場合、それは、ユーザが携帯電話のコメントモードを有効にすることを期待し、スタイラスを使用して携帯電話の表示インターフェースにコメントを追加することを示す。
【0089】
スタイラス２００には、異なる動作に対応する異なるボタン及び特定のキー値が予め設定される。例えば、ボタン２０１をシングルタップする動作に対応するキー値は０１０であり、ボタン２０１をダブルタップする動作に対応するキー値は００１である。この場合、ユーザがボタン２０１をダブルタップしたことを検出した後、スタイラス２００は、確立されたブルートゥース接続に基づいて、対応するキー値００１（すなわち、第１のキー値）を携帯電話に送信することができる。第１のキー値は、スタイラスのコメントモードに入るように携帯電話に指示するために使用される。第１のキー値を受信した後、携帯電話は、ステップＳ５０２を引き続き実行してコメントモードに入ることができ、それにより、ユーザは、コメントモードにおいて、スタイラスを使用することにより表示インターフェース内の内容に対するコメントを作成することができる。
【0090】
Ｓ５０２：スタイラスにより送信された第１のキー値に応答して、携帯電話が、表示されている第１のアプリケーションの第１のインターフェースにコメント層をロードし、コメント層は、第１のツールバーと透過領域を含む。
【0091】
例えば、図６（ａ）に示すように、スタイラスにより送信された第１のキー値を受信するとき、携帯電話は、ブラウザＡＰＰの第１のインターフェース６０１を表示している。この場合、第１のインターフェース６０１は、ディスプレイ上の表示画像全体の最上層である。第１のインターフェース６０１は、ブラウザＡＰＰのツールバー６０２を含んでもよく、ツールバー６０２には、共有、コメント、お気に入りなどの１つ以上のオプションが設定され得る。第１のキー値を受信した後、携帯電話は、第１のキー値を解析して、この時点でのユーザの動作意図がコメントモードを有効にすることであると識別することができる。具体的には、ユーザは、スタイラス上の第１のボタンをトリガし、それにより、携帯電話は、コメントモードに迅速に入って、ユーザがコメントを作成するのを助けることができる。
【0092】
いくつかの他の実施形態において、ユーザは、代替的に、コメントモードに入るために別の方法で携帯電話をトリガすることができる。例えば、携帯電話が、表示されている第１のインターフェース６０１においてユーザが予め設定された動作を実行したことを検出した場合、携帯電話は、この予め設定された動作に応答してコメントモードに入ることができる。例えば、予め設定された動作は、プレス動作、タップ動作、又は２本指のスライド動作などの動作でもよい。これは、本出願のこの実施形態において限定されない。
【0093】
携帯電話がコメントモードに入った後、図６（ｂ）に示すように、携帯電話は、第１のインターフェース６０１に新しい層（すなわち、コメント層６０３）をロードすることができる。この場合、コメント層６０３は、ディスプレイ上の表示画像全体の最上層である。コメント層６０３は、透過領域６０４及び第１のツールバー６０５を含んでもよい。第１のツールバー６０５に、コメント内容を調整するために使用される機能オプションが設定される。例えば、第１のツールバー６０５は、コメントモードを終了すること、コメントを保存すること、ライン太さを調整すること、ライン色を調整すること、及び消しゴムなどの１つ以上の機能オプションを含んでもよい。
【0094】
例えば、携帯電話は、第１のインターフェース６０１内にあるブラウザＡＰＰのツールバー６０２の上に、コメント層６０３における第１のツールバー６０５を重ねることができる。この場合、コメント層６０３が最上層であるが、コメントモードが入力される前にブラウザＡＰＰに表示されていた第１のインターフェース６０１は、コメント層６０３における透過領域６０４を介して表示され得る。その後、ユーザは、上位層であるコメント層６０３でスタイラスを使用することにより、第１のインターフェース６０１内の内容に対するコメントを作成することができる。このようにして、実行中のブラウザＡＰＰは影響を受けず、リアルタイムで現在の表示インターフェースにコメントを追加する機能も実装することができる。
【0095】
例えば、なお図６（ｂ）に示すように、コメントモードに入った後、携帯電話はさらに、プロンプト（prompt）６０６を表示して、携帯電話が現在コメントモードに入っていることをユーザに通知することができる。別の例として、携帯電話はさらに、テキスト、発話、又はアニメーションなどの方法で、スタイラスを使用することによりコメント層６０３における透過領域６０４にコメントを追加するようにユーザに提示する（prompt）ことができる。
【0096】
Ｓ５０３：携帯電話が、スタイラスを使用することにより第１のインターフェースにおいてコメント層にユーザにより入力された第１のコメントを受け取る。
【0097】
コメント層６０３が第１のインターフェース６０１上に重ねられる一例を依然として用いる。携帯電話がコメントモードに入った後、ユーザは、コメント層６０３における透過領域６０４を介して、ブラウザＡＰＰの第１のインターフェース６０１内の表示内容を見ることができる。さらに、ユーザは、スタイラスを使用することによりコメントを対応する表示内容に追加することができる。コメントは、テキスト、数字、又はパターンなどの１つ以上の内容を含んでもよい。
【0098】
図７に示すように、ユーザは、スタイラスを使用することにより第１のインターフェース６０１内の表示内容を丸で囲み、丸で囲んだ表示内容を「強調」としてマークする。この場合、ユーザにより内容を丸で囲むことによって形成されたパターンとテキストの「強調」は、現在追加されている第１のコメント７０１である。この場合、ディスプレイ上で実際には上位層である層が、コメント層６０３であるため、携帯電話は、実際には、コメント層６０３における透過領域６０４で、ユーザにより現在入力されている第１のコメント７０１を受け取り、記録する。この場合、携帯電話は、ブラウザＡＰＰの第１のインターフェース６０１内の表示コンテンツを修正しない。ユーザは、第１のインターフェース６０１に対応するコメント層６０３に１つ以上のコメントを追加してもよいことに留意されたい。これは、本出願のこの実施形態において限定されない。
【0099】
いくつかの実施形態において、コメントモードで入力イベントを受け取った後、携帯電話は、最初に、入力イベントがコメント層６０３に対するコメントイベントであるかどうかを決定することができる。例えば、入力イベントが、ディスプレイ上でスタイラスにより形成された入力イベントである場合、携帯電話は、入力イベントがコメント層６０３に対するコメントイベントであると決定してもよい。この場合、携帯電話は、コメント層６０３におけるユーザの現在の入力内容を表示及び記録して、第１のコメントを形成することができる。入力イベントが、ディスプレイ上でユーザの指により形成された入力イベントである場合（例えば、ユーザの指のスライド動作）、それは、ユーザがブラウザＡＰＰの第１のインターフェース６０１上で動作を実行することをおそらく期待していることを示す。したがって、携帯電話は、現在の入力イベントがコメント層６０３に対するコメントイベントでないと決定してもよく、この場合、携帯電話は、ステップＳ５０６～Ｓ５０９を継続して実行してもよい。
【0100】
例えば、携帯電話は、入力イベントにおける接触エリアのサイズに基づいて、入力イベントがディスプレイ上でスタイラスにより形成された入力イベントか、又はディスプレイ上でユーザの指により形成された入力イベントかを決定することができる。ユーザの指がディスプレイ上でスライドするとき、ユーザの指とディスプレイとの間の接触エリアは比較的大きく、スタイラスがディスプレイ上でスライドするとき、スタイラスとディスプレイとの間の接触エリアは比較的小さい。したがって、携帯電話が、現在の入力イベントにおける接触の接触エリアが予め設定された値より小さいことを検出した場合、携帯電話は、入力イベントがディスプレイ上でスタイラスにより形成された入力イベントであると決定してもよい。あるいは、携帯電話が、現在の入力イベントにおける接触の接触エリアが予め設定された値より大きいことを検出した場合、携帯電話は、入力イベントがディスプレイ上でユーザの指により形成された入力イベントであると決定してもよい。
【0101】
別の例では、ディスプレイ上で指により生成される電気信号は、ディスプレイ上でスタイラスにより生成される電気信号とは異なる。例えば、指がディスプレイに接触した後に発生する容量性信号の強度は、第１の閾値範囲内に入り、スタイラスがディスプレイに接触した後に発生する容量性信号の強度は、第２の閾値範囲内に入る。この場合、携帯電話は、ディスプレイ上で入力イベントにより生成された電気信号の強度に基づいて、入力イベントがディスプレイ上でスタイラスにより形成された入力イベントか、又はディスプレイ上でユーザの指により形成された入力イベントかを決定することができる。
【0102】
本出願のこの実施形態において、携帯電話が第１のインターフェース６０１にコメント層６０３を重ねた後、ブラウザＡＰＰは、第１のインターフェース６０１内のコンテンツを依然として動的に更新することができる。例えば、第１のインターフェース６０１がビデオ又はアニメーションを含むとき、携帯電話は、第１のインターフェース６０１内のビデオ又はアニメーションを通常どおり再生することができる。具体的には、携帯電話がコメント層６０３においてユーザにより追加されたコメントを受け取るプロセスは、携帯電話が第１のインターフェース６０１においてビデオ又はアニメーションを再生するプロセスと衝突しない。
【0103】
別の例として、携帯電話が第１のインターフェース６０１にコメント層６０３を重ねた後、携帯電話はさらに、第１のインターフェース６０１上でユーザにより行われた編集動作を受け取ることができる。例えば、編集動作は、コピーアンドペースト動作でもよい。ユーザの指がディスプレイに接触し、ホールドしていることを検出した後、携帯電話は、タッチアンドホールド動作がブラウザＡＰＰの第１のインターフェース６０１に対する動作であると決定することができ、したがって、携帯電話は、テキストをコピーする等のために使用される編集メニューを表示することができる。別の例として、第１のインターフェース６０１に再生ボタンが設定されているとき、携帯電話が、ユーザが再生ボタンをタップしたことを検出した場合、携帯電話は、第１のインターフェース６０１において対応するビデオ又はオーディオファイルを再生することができる。
【0104】
具体的には、ユーザがスタイラスを使用することにより第１のインターフェース６０１にコメントを追加するとき、ブラウザＡＰＰの第１のインターフェース６０１の通常の実行は影響を受けない。携帯電話がユーザの指のタッチイベントを受け取った後、携帯電話内のブラウザＡＰＰは、タッチイベントに応答して第１のインターフェース６０１内のコンテンツを通常どおり編集又は更新することができる。携帯電話がスタイラスのタッチイベントを受け取った後、携帯電話は、コメント層６０３でのスタイラスの移動軌道を表示することができる。
【0105】
確かに、ユーザが、新しいインターフェースにジャンプするとき、第１のインターフェース６０１におけるインターフェースジャンプ動作、例えば、ユーザにより戻るボタンをタップする動作、又はユーザによりウェブリンクをタップする動作を実行する場合、携帯電話はさらに、第１のインターフェース６０１上に重ねられたコメント層６０３を削除し、コメントモードを終了することができる。代替的に、携帯電話は、新しいインターフェースにジャンプするとき、コメント層６０３を保持し続けてもよい。この場合、携帯電話が新しいインターフェースにジャンプした後、コメント層６０３は、携帯電話がジャンプした新しいインターフェースに重ねられ、したがって、ユーザは、新しいインターフェースにコメントを継続して追加することができる。
【0106】
さらに、現在の入力イベントが、コメント層６０３における第１のツールバー６０５上で実行された場合、入力イベントがユーザによりスタイラスを使用することにより形成されているか、又はユーザにより指を使用することにより形成されているかにかかわらず、携帯電話は、入力イベントがコメント層６０３に対するコメントイベントであると決定することができる。
【0107】
なお図７に示すように、携帯電話がコメントモードに入った後、携帯電話が、ユーザが第１のツールバー６０５内の終了オプション７０２を選択したことを検出した場合、携帯電話は、上位層であるコメント層６０３を削除することができる。この場合、コメント層６０３で既に記録された第１のコメントも削除され、ブラウザＡＰＰの第１のインターフェース６０１は、最上層である層に復元される。携帯電話が、ユーザが第１のツールバー６０５内のライン色調整オプション７０３を選択したことを検出した場合、携帯電話は、ユーザが選択するための複数の任意のライン色を表示することができ、ユーザにより選択された色は、スタイラスがコメント層６０３でその後移動するときに表示される色として使用される。携帯電話が、ユーザが第１のツールバー６０５内のライン厚さ調整オプション７０４を選択したことを検出した場合、携帯電話は、ユーザが選択するための厚さを表す複数の任意のラインを表示することができ、ユーザにより選択された厚さを表すラインは、スタイラスがコメント層６０３でその後移動するときに表示される厚さ度合いとして使用される。携帯電話が、ユーザが第１のツールバー６０５内の消しゴムオプション７０５を選択したことを検出した場合、携帯電話は、コメント層６０３においてスタイラスによりその後選択されたラインを消去することができる。携帯電話が、ユーザが第１のツールバー６０５内の保存オプション７０６を選択したことを検出した場合、携帯電話は、ステップＳ５０４及びＳ５０５を実行して、現在追加されているコメントを保存することができる。確かに、第１のツールバー６０５は、前、次、及び特殊効果の追加などのオプションをさらに含んでもよい。これは、本出願のこの実施形態において限定されない。
【0108】
例えば、ユーザは、スタイラスを使用することにより第１のツールバー６０５内の対応するオプションを選択することができ、あるいは、ユーザは、指を使用することにより第１のツールバー６０５内の対応するオプションを選択することができる。これは、本出願のこの実施形態において限定されない。
【0109】
Ｓ５０４：携帯電話が、ユーザによる現在のコメントを保存する動作を検出した場合、携帯電話は、第１のコメントを含む第１のインターフェースのスクリーンショットを取って第１のピクチャを取得する。
【0110】
携帯電話が、ユーザが第１のツールバー６０５内の保存オプション７０６を選択したことを検出した場合、それは、ユーザが現在のコメントを保存する動作を実行していることを示す。この場合、携帯電話は、スクリーンショットアプリケーションを呼び出して、ディスプレイ上に表示されているインターフェースに対するスクリーンショット動作を実行することができる。現在のスクリーンショット動作を介して取得される第１のピクチャは、ブラウザＡＰＰの第１のインターフェース６０１と、第１のインターフェース６０１内の関連コンテンツに対してコメント層６０３でユーザにより追加された第１のコメントとの双方を含む。
【0111】
代替的に、ユーザが第１のコメントを第１のインターフェース６０１に追加したことを検出した後、携帯電話は、第１のインターフェース６０１の内容と第１のコメントの内容を自動的に保存してもよい。例えば、携帯電話は、第１のコメントを含む第１のインターフェース６０１のスクリーンショットを自動的に取ることができる。
【0112】
さらに、図８に示すように、第１のコメントを含む第１のインターフェース６０１のスクリーンショットを取るとき、携帯電話は、コメントが保存されていることを示すプロンプト８０１を表示して、現在追加されているコメントが保存されていることをユーザに提示することができる。さらに、携帯電話は、第１のインターフェース６０１上に重ねられたコメント層６０３をさらに削除し、コメントモードを終了してもよい。
【0113】
いくつかの実施形態において、図９に示すように、スクリーンショット動作を行うことにより、第１のコメントを含む第１のピクチャ９０１を取得した後、携帯電話は、第１のピクチャ９０１のプレビューインターフェース９０２をさらに表示することができる。プレビューインターフェース９０２は、第１のピクチャ９０１と第２のツールバー９０３を含んでもよい。第２のツールバー９０３には、共有、スター（Star）、編集、及び削除などの１つ以上のオプションが設定される。ユーザは、第２のツールバー９０３内のこれらのオプションを使用することにより、第１のピクチャ９０１に対してピクチャ共有又はピクチャ削除などの動作を実行することができる。例えば、携帯電話が、プレビューインターフェース９０２を表示した後、予め設定された時間内にユーザの入力動作を受け取らない場合、携帯電話は、プレビューインターフェース９０２を自動的に隠し、ブラウザＡＰＰの第１のインターフェース６０１を再表示して、ブラウザＡＰＰを使用する際にユーザに対してプレビューインターフェース９０２により引き起こされる妨害を回避することができる。
【0114】
Ｓ５０５：携帯電話が、第１のピクチャを保存のためにメモに追加する。
【0115】
スクリーンショット動作を実行することにより、第１のコメントを含む第１のピクチャ９０１を取得した後、携帯電話は、第１のピクチャ９０１をメモとしてメモＡＰＰに自動的に追加することができる。この場合、図１０（ａ）に示すように、ユーザは、メモＡＰＰを開いて、第１のピクチャ９０１を含むメモ１００１を見つけることができる。携帯電話が、ユーザがメモ１００１を開いたことを検出した場合、図１０（ｂ）に示すように、携帯電話は、第１のコメントを含む第１のピクチャ９０１をメモＡＰＰに表示してもよい。
【0116】
いくつかの実施形態において、スクリーンショット動作を実行することにより第１のピクチャ９０１を取得するとき、携帯電話は、ブラウザＡＰＰが第１のインターフェース６０１を表示するときのＵＲＬ（ユニフォームリソースロケータ、uniform resource locator）アドレスをさらに取得してもよい。この場合、第１のピクチャ９０１をメモに保存するとき、携帯電話は、第１のインターフェース６０１のＵＲＬアドレスも保存することができる。図１１（ａ）に示すように、携帯電話がメモＡＰＰに第１のピクチャ９０１を表示するとき、携帯電話が、ユーザが第１のピクチャ９０１をタップしたことを検出した場合、図１１（ｂ）に示すように、携帯電話は、第１のインターフェース６０１のＵＲＬアドレスに基づいて、ブラウザＡＰＰの第１のインターフェース６０１を再度開いてもよい。具体的には、携帯電話は、メモＡＰＰにおいて、保存されたコメントと、コメントが作成されたページとの間の関連づけ関係を確立することができ、保存されたコメントを見るとき、ユーザは、レビューのためにコメントが作成されたページにリンクすることができる。
【0117】
代替的に、図１２に示すように、第１のピクチャ９０１のプレビューインターフェース９０２を表示するとき、携帯電話は、第１のピクチャ９０１をメモＡＰＰ又はギャラリーＡＰＰに保存するようにユーザに提示する（prompt）ことができる。ユーザが、現在追加されているコメントをメモＡＰＰに保存することを選択した場合、図１０（ａ）に示すように、携帯電話は、第１のピクチャ９０１をメモとしてメモＡＰＰに追加することができる。対応して、ユーザが、現在追加されているコメントをギャラリーＡＰＰに保存することを選択した場合、携帯電話は、第１のピクチャ９０１をギャラリーＡＰＰに保存することができ、したがって、ユーザは、ギャラリーＡＰＰにおいて、現在追加されているコメントを含む画像を見つけることができる。確かに、携帯電話は、代替的に、第１のピクチャ９０１をメモＡＰＰ及びギャラリーＡＰＰの双方に保存してもよく、あるいは、携帯電話は、第１のピクチャ９０１を携帯電話の予め設定されたアプリケーション（例えば、グローバルお気に入りＡＰＰ）に保存してもよい。これは、本出願のこの実施形態において限定されない。
【0118】
いくつかの実施形態において、コメント層６０３において、ユーザにより追加された第１のコメントを受信すると、携帯電話は、スタイラスの移動軌道に基づいて、第１のコメント内の特定のテキスト情報を自動的に識別することができる。例えば、第１のコメントは、単語「強調」を含む。代替的に、第１のピクチャ９０１を取得した後、携帯電話は、第１のピクチャ９０１からテキスト情報を自動的に抽出してもよい。例えば、携帯電話は、ＯＣＲ（光学文字認識、optical character recognition）技術を使用することにより、第１のピクチャ９０１に記録されたウェブコンテンツを抽出することができる。別の例として、ユーザがコメントを保存する動作を実行していることを検出すると、携帯電話は、ブラウザＡＰＰに現在表示されている第１のインターフェース６０１のＵＲＬアドレスを取得し、第１のインターフェース６０１のウェブコンテンツをＵＲＬアドレスからダウンロードすることができる。この場合、携帯電話は、スクリーンショットを介して取得された第１のピクチャ９０１と、第１のピクチャ９０１の文字情報との双方を、メモ１００１に保存することができる。
【0119】
このように、メモ１００１を作成するとき、携帯電話は、第１のピクチャ９０１の関連テキスト情報をメモ１００１のタイトルとして使用することができる。さらに、メモ１００１のためにメモＡＰＰ内の複数のメモを検索するとき、ユーザは、検索ボックス１００２に、第１のピクチャ９０１の関連キーワードを入力してもよい。携帯電話は、ユーザにより入力されたキーワードに基づいて、キーワードに関連するメモ１００１を取り出すことができ、携帯電話は、キーワードを含む１つ以上の検索結果としての１つ以上のメモをユーザに提示することができ、それにより、ユーザは、メモＡＰＰ内の保存されたコメント内容を迅速に見つけることができる。
【0120】
いくつかの他の実施形態において、メモアプリケーションにスクリーンショットの形式で、ユーザにより追加されたコメントを保存することに加えて、携帯電話はさらに、ユーザにより現在追加されているコメントを別のフォーマットで保存することができる。
【0121】
例えば、表１に示すように、携帯電話は、ユーザが第１のツールバー６０５内の保存オプション７０６を選択したことを検出した後、携帯電話は、ブラウザＡＰＰの現在表示されている第１のインターフェース６０１のＵＲＬアドレスを取得することができ、携帯電話は、ＵＲＬアドレスに基づいて第１のインターフェース６０１において特定の表示コンテンツを取得することができる。さらに、携帯電話は、第１のインターフェース６０１における第１のコメント７０１の特定のコメント位置、第１のコメント７０１の特定のコメント内容、及び現在のコメントの追加時間などの情報をさらに記録することができる。さらに、表１に記録された第１のコメント７０１の関連情報に基づいて、携帯電話は、対応するファイルをピクチャ、テキスト、ＰＤＦ、又はＷｏｒｄなどのフォーマットで生成して、現在追加されている第１のコメント７０１をこのファイルに保存することができる。その後、ユーザは、関連するアプリケーションにおいて、第１のインターフェース６０１内でユーザがコメントを作成した特定のコンテンツを見つけることができる。
【表1】
【0122】
いくつかの他の実施形態において、ブラウザＡＰＰの第１のインターフェース６０１を依然として一例として用いる。スタイラスを使用することにより第１のインターフェース６０１に第１のコメントを入力した後、ユーザはさらに、現在表示されている第１のインターフェース６０１をスクロールして、新しい表示インターフェースに別のコメントを継続して追加することができる。具体的には、携帯電話がステップＳ５０３を実行した後、携帯電話がユーザの画面スクロール動作を受け取った場合、携帯電話は、ステップＳ５０６～Ｓ５０９を継続して実行して、第２のインターフェースに第２のコメントを追加することができる。
【0123】
Ｓ５０６：ユーザにより入力された画面スクロール動作に応答して、携帯電話が、画面スクロール後、第１のアプリケーションの第２のインターフェースを表示する。
【0124】
第１のアプリケーションがブラウザＡＰＰである一例を依然として用いる。図１３（ａ）に示すように、コメントモードにおいて、コメント層６０３は、ブラウザＡＰＰの第１のインターフェース６０１上に重ねられる。ユーザは、コメント層６０３における透過領域６０４に、第１のインターフェース６０１内のコンテンツに対するコメントを作成することができる。ユーザが、ブラウザＡＰＰの第１のインターフェース６０１において後続のコンテンツを閲覧し続けることを期待する場合、ユーザは、画面スクロール動作をディスプレイに入力することができる。例えば、この動作は、ディスプレイ上でユーザの指により実行されるスライド動作でもよい。
【0125】
携帯電話がディスプレイ上でユーザの指により実行されたスライド動作を検出した後、ディスプレイ上で指により生成される電気信号がディスプレイ上でスタイラスにより生成される電気信号とは異なるため、現在のユーザ動作がユーザの指のスライド動作であると決定した後、携帯電話は、スライド動作がコメント層６０３に対する動作ではなくブラウザＡＰＰに対する動作であると決定することができる。この場合、ユーザのスライド動作に応答して、携帯電話のディスプレイは、アプリケーション層で動作しているブラウザＡＰＰに現在のスライドイベントを報告することができる。図１３（ｂ）に示すように、ブラウザＡＰＰは、画面スクロールを介してディスプレイ上に第２のインターフェース１３０１を表示することができる。第２のインターフェース１３０１における表示内容は、第１のインターフェース６０１における表示内容と部分的に同じであり得る。
【0126】
さらに、携帯電話が画面スクロールを介して第２のインターフェース１３０１を表示するとき、携帯電話がコメントモードを終了していないため、携帯電話は、コメント層６０３における透過領域６０４を同期的にスクロールすることができる。この場合、第１のインターフェース６０１に対応する透過領域６０４に元々記録された第１のコメントも、透過領域６０４のスクロールと共に隠される。図１３（ｂ）に示すように、ブラウザＡＰＰの第２のインターフェース１３０１上に重ねられたコメント層６０３は、第１のコメントを含まない。
【0127】
Ｓ５０７：携帯電話が、スタイラスを使用することにより第２のインターフェースにおいてコメント層にユーザにより入力された第２のコメントを受け取る。
【0128】
図１４に示すように、携帯電話がブラウザＡＰＰの第２のインターフェース１３０１を表示した後、ユーザは、コメント層６０３における新しい透過領域６０４を介して第２のインターフェース１３０１内の表示内容を見ることができる。さらに、ユーザは、スタイラスを使用することにより第２のコメント１４０１を対応する表示内容に追加してもよい。
【0129】
ステップＳ５０３と同様に、この場合、ディスプレイ上で実際には上位層である層がコメント層６０３であるため、携帯電話は、実際には、コメント層６０３における透過領域６０４で、ユーザにより現在入力されている第２のコメント１４０１を受け取り、記録する。この場合、携帯電話は、ブラウザＡＰＰの第２のインターフェース１３０１における表示コンテンツを修正しない。
【0130】
その後、ユーザが、ブラウザＡＰＰの第２のインターフェース１３０１の前後のインターフェース内の表示内容を継続して閲覧することを期待する場合、ユーザは、画面スクロール動作を継続して入力して、ステップＳ５０６及びＳ５０７を循環的に実行するように携帯電話をトリガすることができ、それにより、携帯電話は、コメントモードにおいて異なる表示インターフェース内の内容にコメントを追加することができる。
【0131】
対応して、ユーザが第１のコメントを第１のインターフェース６０１に入力し、第２のコメントを第２のインターフェース１３０１に入力した後、ユーザがコメントモードを終了し、２つの現在追加されているコメントを保存することを期待する場合、ユーザは、コメント層６０３における第１のツールバー６０５内の保存オプション７０６をタップすることができる。この場合、携帯電話は、ステップＳ５０８及びＳ５０９を実行して、ユーザにより現在追加されている複数のコメントを、異なる表示インターフェースに保存することができる。
【0132】
Ｓ５０８：携帯電話がユーザによる現在のコメントを保存する動作を検出した場合、携帯電話は、第１のコメント及び第２のコメントを含むインターフェースのロングスクリーンショットを取って、第２のピクチャを取得する。
【0133】
携帯電話が、ユーザが第１のツールバー６０５内の保存オプション７０６を選択したことを検出した場合、携帯電話は、第１のコメントを含む第１のインターフェース６０１及び第２のコメントを含む第２のインターフェース１３０１に対するロングスクリーンショット動作（画面記録動作と呼ばれることもある）を自動的に実行することができる。このように、携帯電話がロングスクリーンショットを取った後に取得される第２のピクチャは、ブラウザＡＰＰの第１のインターフェース６０１内の表示内容と、ブラウザＡＰＰの第２のインターフェース１３０１内の表示内容を含むだけでなく、第１のインターフェース６０１にユーザにより追加された第１のコメントと、第２のインターフェース１３０１にユーザにより追加した第２のコメントも含む。
【0134】
例えば、ユーザが第１のツールバー６０５内の保存オプションを選択したことを検出した後、図１５に示すように、ロングスクリーンショット動作を実行するとき、携帯電話は、プロンプト１５０１を表示して、現在追加されているコメントが保存されていることをユーザに提示することができる。さらに、携帯電話は、ブラウザＡＰＰにより現在開かれている記事と、記事の異なる位置にユーザにより追加されたコメントとを表示及び保存するために、スクロールを開始することができる。携帯電話が特定の位置にスクロールしたときに、ユーザがスクリーンショット停止動作（例えば、タップ動作）を実行したことを携帯電話が検出した場合、携帯電話は、スクリーンショットを取ることを停止し、ブラウザＡＰＰのインターフェース上に重ねられたコメント層６０３を削除し、コメントモードを終了することができる。この場合、タップ動作を受け取る前に携帯電話により保存されたロングスクリーンショットが、現在のコメントを保持する第２のピクチャである。
【0135】
図１６に示すように、第１のコメント及び第２のコメントを含む第２のピクチャ１６０１を取得した後、携帯電話は、さらに、第２のピクチャ１６０１のプレビューインターフェース１６０２を表示してもよい。図９に示す第１のピクチャ９０１のプレビューインターフェース９０２と同様に、第２のピクチャ１６０１のプレビューインターフェース１６０２に第３のツールバー１６０３が設定される。共有、編集、及び削除などの１つ以上のオプションもまた、第３のツールバー１６０３に設定される。これは、本出願のこの実施形態において限定されない。
【0136】
Ｓ５０９：携帯電話が、第２のピクチャを保存のためにメモに追加する。
【0137】
ステップ５０５と同様に、このステップでは、スクリーンショット動作を実行することにより、第１のコメント及び第２のコメントを含む第２のピクチャ１６０１を取得した後、携帯電話は、第２のピクチャ１６０１をメモとしてメモＡＰＰに追加することができる。例えば、図１７（ａ）に示すように、携帯電話は、メモＡＰＰにおいて、お気に入りにコメントを追加するために使用されるフォルダ１７０１を設定することができる。ユーザがフォルダ１７０１を開いた後、図１７（ｂ）に示すように、携帯電話は、複数のメモをメモＡＰＰに表示することができ、各メモは、ユーザの１つのコメントプロセスをピクチャの形式で記録する。
【0138】
例えば、携帯電話はさらに、フォルダ１７０１内にレベル２のディレクトリを設定して、異なるタイプのコメントを保存することができる。例えば、携帯電話は、フォルダ１７０１に各月の粒度で、１月に対応するフォルダ１、２月に対応するフォルダ２などを設定してもよい。フォルダ１は、１月に携帯電話により保存された各コメントを記憶し、フォルダ２は、２月に携帯電話により保存された各コメントを記憶する。別の例として、携帯電話は、フォルダ１７０１にアプリケーションの粒度で、ブラウザＡＰＰに対応するフォルダＡ、電子書籍ＡＰＰに対応するフォルダＢなどを設定してもよい。フォルダＡは、ブラウザＡＰＰにおいてユーザにより保存された各コメントを記憶し、フォルダＢは、電子書籍ＡＰＰにおいてユーザにより保存された各コメントを記憶する。
【0139】
いくつかの実施形態において、第２のピクチャ１６０１をメモＡＰＰに追加するとき、携帯電話はさらに、第２のピクチャ１６０１に関連づけられたＵＲＬアドレスを記録してもよく、すなわち、ブラウザＡＰＰにおける第１のインターフェース（又は、第２のインターフェース）のＵＲＬアドレスを表示してもよい。このようにして、ユーザが、ブラウザＡＰＰを再度開いて第１のインターフェース（又は、第２のインターフェース）を閲覧するとき、携帯電話は、ブラウザＡＰＰで現在開かれているＵＲＬアドレスが携帯電話により記録されたＵＲＬアドレスと同じであることを検出することができる。この場合、図１８（ａ）に示すように、ブラウザＡＰＰの第１のインターフェース（又は、第２のインターフェース）を再度表示するとき、携帯電話は、通知メッセージ１８０１を表示し、通知メッセージ１８０１において、現在の表示インターフェースに関連づけられたコメントが見つかっていることをユーザに提示することができる。携帯電話が、ユーザが通知メッセージ１８０１を開いたことを検出した場合、図１８（ｂ）に示すように、携帯電話は、メモＡＰＰにおいてコメント内容を保持する第１のピクチャ９０１（又は、第２のピクチャ１６０１）を自動的に開くことができる。このようにして、ユーザがブラウザＡＰＰを使用するとき、携帯電話は、現在閲覧されているコンテンツに関連づけられたコメントをユーザに自動的に提示することができ、それにより、ユーザは、関連する閲覧コンテンツに対して前に作成されたコメントを適時に見ることができる。
【0140】
代替的に、ユーザは、現在の表示インターフェースに関連づけられたコメントが記憶されているかどうかを見つけ出すように携帯電話を手動でトリガしてもよい。例えば、携帯電話が、ブラウザＡＰＰの第１のインターフェース（又は、第２のインターフェース）を再度表示するとき、ユーザが、現在のインターフェースに関連づけられたコメント内容を検索することを期待する場合、ユーザは、現在のインターフェースにおいて予め設定されたジェスチャ（例えば、プレス動作又はナックルタップ動作）を実行することができる。さらに、現在のインターフェースにおいてユーザにより実行されたジェスチャに応答して、携帯電話は、現在のインターフェースのＵＲＬアドレスを取得し、メモＡＰＰにおいて、このＵＲＬアドレスを記録する特定のメモがあるかどうかを見つけ出すことができる。携帯電話が、第２のピクチャ１６０１のメモ内にＵＲＬアドレスを見つけた場合、それは、ユーザが同じ表示インターフェースにコメントを前に追加したことがあり、追加されたコメントを第２のピクチャ１６０１に保存していることを示す。この場合、図１８（ａ）に示すように、携帯電話は、ブラウザＡＰＰの第１のインターフェース内に通知メッセージ１８０１を表示して、現在の表示インターフェースに関連づけられたコメントが見つかっていることをユーザに提示することができる。
【0141】
代替的に、携帯電話が、ブラウザＡＰＰの第１のインターフェース（又は、第２のインターフェース）を再度表示するとき、携帯電話は、表１に記憶されたコメントのＵＲＬアドレスに基づいて、ユーザにより現在開かれている第１のインターフェースが、第１のコメントが配置された第１のインターフェースと同じであると決定してもよい。さらに、携帯電話は、表１に記録された第１のコメントの特定のコメント位置及び特定のコメント内容に基づいて、現在表示されている第１のインターフェースに、ユーザにより前に追加された第１のコメントを再現することができる。このようにして、ユーザが、再度各アプリケーションを使用するとき、前にコメントが追加されたインターフェースを閲覧するときに、携帯電話は、現在のインターフェースにおいて前に追加されたコメントの特定の内容を迅速に再現して、現在のインターフェース及び対応するコメント内容をユーザに思い出させ、ユーザの使用体験を向上させることができる。
【0142】
前述の実施形態では、ユーザがスタイラスを使用することにより第１のインターフェース（又は、第２のインターフェース）にコメントを追加する一例を用いることにより、説明を提供していることに留意されたい。ユーザは、代替的に、別の方法で、例えば、指を使用することにより第１のインターフェース（又は、第２のインターフェース）に１つ以上のコメントを追加してもよいことが理解され得る。
【0143】
例えば、携帯電話が、第１のインターフェースを表示するときコメントモードに入った場合、携帯電話は、第１のインターフェースにコメント層をロードすることができる。さらに、携帯電話は、コメント層におけるツールバーに手書きボタンと非手書きボタンを設定することができる。携帯電話が、ユーザが手書きボタンを選択したことを検出した場合、携帯電話は、ユーザの指のタッチイベントに応答して、第１のインターフェースにおけるユーザの指のタッチ軌道を表示することができる。この場合、タッチイベントは、コメント層に対するコメントイベントである。携帯電話が、ユーザが非手書きボタンを選択したことを検出した場合、携帯電話が、ユーザの指で入力されたタッチイベントを検出したとき、それは、タッチイベントが第１のインターフェースに対するタッチイベントであることを示す。この場合、携帯電話は、タッチイベントに応答して、第１のインターフェース内のコンテンツを更新してもよい。例えば、携帯電話は、ビデオを再生する、テキストをコピーする、又はページを回転するなどの動作を行うことができる。
【0144】
代替的に、携帯電話は、予め設定されたジェスチャを使用することにより、ユーザの指のタッチ動作がコメント層に対するコメントイベントか、又は第１のインターフェースに対するタッチイベントかを識別してもよい。例えば、携帯電話が第１のインターフェースにコメント層をロードした後、携帯電話が、ユーザがプレス動作（すなわち、予め設定されたジェスチャ）を入力したことを検出した場合、携帯電話は、その後検出されるタッチイベントを第１のインターフェースに対するタッチイベントと決定することができ、携帯電話が、ユーザがプレス動作を入力したことを検出する前、携帯電話は、ユーザの指のタッチイベントをコメント層に対するコメントイベントと決定することができる。
【0145】
図１９に示すように、本出願の一実施形態は、電子デバイスを開示する。電子デバイスは、前述の方法の実施形態において記録された方法を実施するように構成され得る。例えば、電子デバイスは、具体的に、受信ユニット１９０１、表示ユニット１９０２、スクリーンショットユニット１９０３、及び保存ユニット１９０４を含んでもよい。受信ユニット１９０１は、図５のプロセスＳ５０１、Ｓ５０３、及びＳ５０７を実行する際に電子デバイスをサポートするように構成される。表示ユニット１９０２は、図５のプロセスＳ５０２及びＳ５０６を実行する際に電子デバイスをサポートするように構成される。スクリーンショットユニット１９０３は、図５のプロセスＳ５０４及びＳ５０８を実行する際に電子デバイスをサポートするように構成される。保存ユニット１９０４は、図５のプロセスＳ５０５及びＳ５０９を実行する際に電子デバイスをサポートするように構成される。前述の方法の実施形態におけるステップの全ての関連する内容は、対応する機能モジュールの機能説明において引用することができる。詳細はここで再度説明されない。
【0146】
図２０に示すように、本出願の一実施形態は、タッチスクリーン２００１と、１つ以上のプロセッサ２００２と、メモリ２００３と、１つ以上のコンピュータプログラム２００４とを含む電子デバイスを開示し、タッチスクリーン２００１は、タッチ感知（touch-sensitive）サーフェス２００６と、ディスプレイ２００７とを含む。前述のコンポーネントは、１つ以上の通信バス２００５を介して接続されてもよい。１つ以上のコンピュータプログラム２００４は、メモリ２００３に記憶され、１つ以上のプロセッサ２００２により実行されるように構成される。１つ以上のコンピュータプログラム２００４は命令を含み、この命令は、前述の実施形態のステップを実行するために使用され得る。
【0147】
任意で、なお図２０に示すように、電子デバイスは、通信モジュール２００８をさらに含んでもよい。通信モジュール２００８は、スタイラスと相互作用するように構成され得る。
【0148】
例えば、プロセッサ２００２は、具体的に、図１に示すプロセッサ１１０でもよく、メモリ２００３は、具体的に、図１に示す内部メモリ１２１及び／又は外部メモリ１２０でもよく、ディスプレイ２００７は、具体的に、図１に示すディスプレイ１９４でもよく、通信モジュール２００８は、具体的に、図１に示す移動通信モジュール１５０及び／又は無線通信モジュール１６０でもよく、タッチ感知サーフェス２００６は、具体的に、図１に示すセンサモジュール１８０内のタッチセンサでもよい。これは、本出願のこの実施形態において限定されない。
【0149】
前述の実装の説明に基づき、当業者は、簡便かつ簡潔な説明のために、前述の機能モジュールへの分割は例示のため一例として用いられているに過ぎないことを明確に理解し得る。実際の適用では、前述の機能は、要件に基づいて実装のために異なる機能モジュールに割り当てることができ、すなわち、装置の内部構造は、上述の機能の全部又は一部を実装するために、異なる機能モジュールに分割される。前述のシステム、装置、及びユニットの詳細な作業プロセスについては、前述の方法の実施形態における対応するプロセスを参照する。詳細はここで再度説明されない。
【0150】
本出願の実施形態における機能ユニットは１つの処理ユニットに統合されてもよく、あるいはユニットの各々が物理的に単独で存在してもよく、あるいは２つ以上のユニットが１つのユニットに統合される。統合ユニットは、ハードウェアの形態で実装されてもよく、あるいはソフトウェア機能ユニットの形態で実装されてもよい。
【0151】
統合ユニットがソフトウェア機能ユニットの形態で実装され、独立した製品として販売又は使用されるとき、統合ユニットは、コンピュータ読取可能記憶媒体に記憶されてもよい。このような理解に基づき、本質的に本出願の実施形態の技術的解決策、又は従来技術に寄与する部分、又は技術的解決策の全部若しくは一部は、ソフトウェア製品の形態で実施されてもよい。コンピュータソフトウェア製品は、記憶媒体に記憶され、コンピュータデバイス（これはパーソナルコンピュータ、サーバ、又はネットワークデバイスでもよい）又はプロセッサに本出願の実施形態に記載される方法のステップの全部又は一部を実行するように指示するためのいくつかの命令を含む。前述の記憶媒体は、フラッシュメモリ、リムーバブルハードディスク、読取専用メモリ、ランダムアクセスメモリ、磁気ディスク、又は光ディスクなどの、プログラムコードを記憶することができる任意の媒体を含む。
【0152】
前述の説明は、本出願の実施形態の特定の実装に過ぎないが、本出願の実施形態の保護範囲を制限することを意図するものではない。本出願の実施形態において開示された技術的範囲内のバリエーション又は置き換えは、本出願の実施形態の保護の範囲内にあるものとする。したがって、本出願の実施形態の保護範囲は、特許請求の範囲の保護範囲に従うものとする。
【図1】
【図2】
【図3】
【図4(a)】
【図4(b)】
【図5】
【図6(a)】
【図6(b)】
【図7】
【図8】
【図9】
【図10(a)】
【図10(b)】
【図11(a)】
【図11(b)】
【図12】
【図13(a)】
【図13(b)】
【図14】
【図15】
【図16】
【図17(a)】
【図17(b)】
【図18(a)】
【図18(b)】
【図19】
【図20】