特許 7080636 システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-05-27

(45)【発行日】2022-06-06

(54)【発明の名称】システム

(51)【国際特許分類】

   G06F 3/04817 20220101AFI20220530BHJP

   G06F 3/04886 20220101ALI20220530BHJP

   G06F 3/14 20060101ALI20220530BHJP

   G09G 5/00 20060101ALI20220530BHJP

   G09G 5/34 20060101ALI20220530BHJP

   G09G 5/36 20060101ALI20220530BHJP

   H04N 7/18 20060101ALI20220530BHJP

【ＦＩ】

G06F3/04817

G06F3/04886

G06F3/14 350B

G06F3/14 360B

G09G5/00 510H

G09G5/00 550C

G09G5/34 A

G09G5/36 520B

G09G5/36 520E

H04N7/18 U

【請求項の数】 18

(21)【出願番号】P 2017253062

(22)【出願日】2017-12-28

(65)【公開番号】P2019120976

(43)【公開日】2019-07-22

【審査請求日】2020-12-09

【新規性喪失の例外の表示】特許法第３０条第２項適用 ▲１▼平成２９年８月２３日 ウェブサイトのアドレス 「ｈｔｔｐｓ：／／ｄｙｎａｂｏｏｋ．ｃｏｍ／ｐｒｅｓｓ－ｒｅｌｅａｓｅ／２０１７０８２３．ｈｔｍｌ？＿ｇａ＝２．２４３６０３９７３．１８５０２６９８７５．１５１４２５０７２１－８９１３８７１７９．１５１２００８６９６」（プレスリリース） ［参考資料１］ 「ｈｔｔｐｓ：／／ｄｙｎａｂｏｏｋ．ｃｏｍ／ｂｕｓｉｎｅｓｓ／ｍｅｃｄ／ｉｎｄｅｘ．ｈｔｍｌ」 を通じて発表 ［参考資料２］ ▲２▼平成２９年８月２３日 ウェブサイトのアドレス 「ｈｔｔｐ：／／ｕｓ．ｔｏｓｈｉｂａ．ｃｏｍ／ｃｏｍｐｕｔｅｒｓ－ｔａｂｌｅｔｓ／ｌａｐｔｏｐｓ／ｄｙｎａＥｄｇｅ／」 を通じて発表 ［参考資料３］ ▲３▼平成２９年７月２１日 働き方改革ソリューションセミナーのウェブサイトのアドレス 「ｈｔｔｐｓ：／／ｄｙｎａｂｏｏｋ．ｃｏｍ／ｂｕｓｉｎｅｓｓ／ｓｅｍｉｎａｒ／１７０８２５／ｉｎｄｅｘ．ｈｔｍｌ」 ［参考資料４］ 「ｈｔｔｐｓ：／／ｄｙｎａｂｏｏｋ．ｃｏｍ／ｃｏｎｔｅｎｔ／ｄａｍ／ｐｃｓ／ｊｐ／ｊａ／ｄｙｎａｂｏｏｋ－ｂ２ｂ／ｂｕｓｉｎｅｓｓ／ｓｅｍｉｎａｒ／１７０８２５／ｐｄｆ／ｍｅｃｄ＿ｔｃｓ．ｐｄｆ」を通じて発表 ［参考資料５］ ▲４▼平成２９年８月２５日 働き方改革ソリューションセミナー ▲５▼平成２９年１１月９日及び１０日 東芝オープンイノベーションフェア２０１７ ［参考資料６］

(73)【特許権者】

【識別番号】398058588

【氏名又は名称】Ｄｙｎａｂｏｏｋ株式会社

(74)【代理人】

【識別番号】110001737

【氏名又は名称】特許業務法人スズエ国際特許事務所

(72)【発明者】

【氏名】藤井 哲也

(72)【発明者】

【氏名】波多野 亮

【審査官】田川 泰宏

(56)【参考文献】

【文献】特開２０１４－１６４４４９（ＪＰ，Ａ）

【文献】特開２０１４－０７１８１２（ＪＰ，Ａ）

【文献】特開２００８－２４３１２８（ＪＰ，Ａ）

【文献】特開２０１６－００９４６１（ＪＰ，Ａ）

【文献】特開２００９－１１６６８３（ＪＰ，Ａ）

【文献】特開２０１２－１３７８２２（ＪＰ，Ａ）

【文献】特開２０１３－０４７９１９（ＪＰ，Ａ）

【文献】特開２００１－２２２５０７（ＪＰ，Ａ）

【文献】特開２００５－２４２８３０（ＪＰ，Ａ）

【文献】特開２０００－２９９８５１（ＪＰ，Ａ）

【文献】特開２００２－２９７２７８（ＪＰ，Ａ）

【文献】特開２０１６－０５７８４２（ＪＰ，Ａ）

【文献】特開２０１１－１６４８３５（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１１／０１３８２８５（ＵＳ，Ａ１）

【文献】米国特許出願公開第２００８／０２４４４５０（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０４８１７

Ｇ０９Ｇ ５／３４

Ｇ０９Ｇ ５／３６

Ｇ０９Ｇ ５／００

Ｇ０６Ｆ ３／０４８８６

Ｇ０６Ｆ ３／１４

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

上下左右を指示可能な第１入力部と、表示部と、を具備するウェアラブル機器と、
上下左右を指示可能な第２入力部と、前記表示部にホーム画面を表示させる電子機器と、を具備するシステムであって、
前記ホーム画面は可変サイズの第１エリア、第２エリア及び第３エリアに分割され、
第１種類の複数の第１アイコンが前記第１エリアに表示され、
第２種類の複数の第２アイコンが前記第２エリアに表示され、
第３種類の複数の第３アイコンが前記第３エリアに表示され、
前記第１エリア、前記第２エリア又は前記第３エリアは前記第１入力部又は前記第２入力部の操作により選択可能であり、
選択されたエリアのサイズは非選択のエリアのサイズより大きく、
前記複数の第１アイコン、前記複数の第２アイコン又は前記複数の第３アイコンは前記第１入力部又は前記第２入力部の操作によりスクロール可能であり、
前記選択されたエリアの中央のアイコンのサイズは前記選択されたエリアの他のアイコンのサイズより大きく、
前記選択されたエリアの中央のアイコンの表示態様は前記他のアイコンの表示態様と異なるものであるシステム。

【請求項2】

前記電子機器は、フロントエンドアプリケーション内のホームアプリケーションを起動することにより、前記ホーム画面を生成して前記ウェアラブル機器の前記表示部に表示させる請求項１記載のシステム。

【請求項3】

前記選択されたエリアの上下方向の幅は、前記非選択のエリアの上下方向の幅より広く、
前記選択されたエリア内の複数のアイコンは、前記非選択のエリア内の複数のアイコンより大きく表示される請求項１記載のシステム。

【請求項4】

前記選択されたエリアに対し、前記第１入力部又は第２入力部の操作により、フォーカスを左右に移動させると共に、フォーカスのあるアイコンを前記選択されたエリアの中央に表示させる請求項３記載のシステム。

【請求項5】

前記選択されたエリア内の前記フォーカスのあるアイコンに対し、前記第１入力部又は第２入力部の操作により、該アイコンの関連情報を前記ホーム画面に表示させる請求項４記載のシステム。

【請求項6】

前記ホーム画面に表示された前記関連情報に対し、前記第１入力部又は第２入力部の操作により、前記関連情報を消去して、前記選択されたエリア内の前記フォーカスのあるアイコンを含む元のホーム画面を再表示する請求項５記載のシステム。

【請求項7】

前記ウェアラブル機器及び前記電子機器の状態を示すアイコンが前記第１エリアの右又は左の端部に表示される請求項１記載のシステム。

【請求項8】

前記ウェアラブル機器及び前記電子機器の状態は、バッテリ残量、ネットワーク接続状態、及び通話状態を含む請求項７記載のシステム。

【請求項9】

前記第１入力部又は前記第２入力部の操作により前記選択されたエリアが上又は下に移動し、
前記選択されたエリアの移動に応じて前記第１エリア、前記第２エリア及び前記第３エリアの縦方向のサイズが変化するものである請求項１記載のシステム。

【請求項10】

前記第１エリアと前記第２エリアとの境界線及び前記第２エリアと前記第３エリアとの境界線は曲線であり、
前記選択されたエリアと該選択されたエリアの上のエリアとの境界線は前記選択されたエリア側に突出する曲線であり、前記選択されたエリアと該選択されたエリアの下のエリアとの境界線は前記選択されたエリア側に突出する曲線である請求項９記載のシステム。

【請求項11】

前記ウェアラブル機器はカメラをさらに具備し、
前記電子機器は通話可能に外部機器に接続され、前記カメラで撮影した画像又は前記外部機器から送信された画像を格納するメモリをさらに具備し、
前記複数の第１アイコンは前記外部機器との通話に関する複数のアイコンを具備し、
前記複数の第２アイコンは前記メモリに格納されたデータファイルの閲覧に関する複数のアイコンを具備し、
前記複数の第３アイコンは前記カメラの撮影モードに関する複数のアイコンを具備するものである請求項１記載のシステム。

【請求項12】

前記複数の第１アイコンは、前記外部機器との遠隔支援アプリケーションを起動させるためのアイコンを含み、
前記複数の第２アイコンは、コンテンツビューワーアプリケーションを起動させるためのアイコンを含み、
前記複数の第３アイコンは、ウェアラブルビューワーの設定のためのアイコンを含む請求項１１記載のシステム。

【請求項13】

前記複数の第１アイコンは前記外部機器との通話中に前記カメラで撮影したライブ映像を前記外部機器へ送信するためのアイコンを含む請求項１１記載のシステム。

【請求項14】

前記複数の第１アイコンは前記カメラで撮影した画像又は前記メモリに格納された画像を前記外部機器へ送信し、前記外部機器から送信された画像を受信し、前記ウェアラブル機器へ送信するためのアイコンを含む請求項１１記載のシステム。

【請求項15】

前記複数の第１アイコンは前記外部機器から送信されたアノテーション付き画像を受信し、前記ウェアラブル機器へ送信するためのアイコンを含む請求項１１記載のシステム。

【請求項16】

前記複数の第２アイコンは前記メモリに格納された文書ファイル、画像ファイル、映像ファイルの閲覧に関するものである請求項１１記載のシステム。

【請求項17】

前記カメラは第１画質の静止画像を撮影する第１モードと前記第１画質よりも高画質の第２画質の静止画像を撮影する第２モードとのいずれかで動作可能であり、
前記複数の第３アイコンは前記カメラを前記第１モードと前記第２モードのいずれかで動作させるためのアイコンを含む請求項１１記載のシステム。

【請求項18】

前記複数の第３アイコンは、写真撮影を実行するための機能を起動させるアイコン、及びビデオ撮影を実行するための機能を起動させるアイコンを含む請求項１１記載のシステム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態はウェアラブル機器及び電子機器を具備するシステムに関する。

【背景技術】

【0002】

最近、多くのモノがインターネットでつながるＩｏＴ時代となり、オフィス、工場、その他様々な場面において、ネットワークコミュニケーションや情報共有のツールとしてエッジコンピューティングと呼ばれる技術が求められている。このエッジコンピューティングを実現するためにはデータセンター（或いはクラウド）とは別に作業者（ユーザ）がその場で使用可能な、高度の汎用性と処理能力を持つ実用的なモバイルエッジコンピューティングデバイスの開発が必要とされている。これにより、作業現場等での業務効率化や生産性向上、或いは、データの負荷分散やネットワーク環境の改善等を図ることが期待される。

【0003】

モバイルエッジコンピューティングデバイスはディスプレイやハードウェアキーボードが備わっていると、作業者は作業に専念しづらい。これを解決するために、ディスプレイやハードウェアキーボードを備えないモバイルエッジコンピューティングデバイスが検討されている。このようなモバイルエッジコンピューティングデバイスにメガネ型ウェアラブル機器を接続すれば、メガネ型ウェアラブル機器の表示部をモバイルエッジコンピューティングデバイスのディスプレイとして利用でき、作業者は作業しながら、表示を確認することができる。

【0004】

このような機器の応用例の１つに遠隔支援システムが考えられている。このシステムは現地で作業する作業者が操作するモバイルＰＣと、事務所等に居る支援者が操作するオペレータ端末から構成されることが考えられている。モバイルＰＣとオペレータ端末はインターネット等により接続される。モバイルＰＣからオペレータ端末へは現地の映像や画像を送信でき、オペレータ端末からモバイルＰＣへは作業支援のための画像や文書等を送信できることが好ましい。そして、作業者と支援者は通話もできることが好ましい。

【先行技術文献】

【特許文献】

【0005】

【文献】特開2006-238110号公報

【文献】特開2005-242830号公報

【文献】特開2000-299851号公報

【文献】特開2007-072733号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

現在、このような遠隔支援に適すると共に、作業者にとって視認性の高いウェアラブル機器及び電子機器を具備するシステムが存在していない。

【0007】

本発明の目的は、このような遠隔支援に適すると共に、作業者にとって視認性の高いウェアラブル機器及び電子機器を具備するシステムを提供することである。

【課題を解決するための手段】

【0008】

実施形態によれば、ウェアラブル機器と電子機器を具備するシステムにおいて、ウェアラブル機器は上下左右を指示可能な第１入力部と表示部を備える。電子機器は上下左右を指示可能な第２入力部を備え、前記表示部にホーム画面を表示させる。前記ホーム画面は可変サイズの第１エリア、第２エリア及び第３エリアに分割される。第１種類の複数の第１アイコンが前記第１エリアに表示され、第２種類の複数の第２アイコンが前記第２エリアに表示され、第３種類の複数の第３アイコンが前記第３エリアに表示される。前記第１エリア、前記第２エリア又は前記第３エリアは前記第１入力部又は前記第２入力部の操作により選択可能であり、選択されたエリアのサイズは非選択のエリアのサイズより大きい。前記複数の第１アイコン、前記複数の第２アイコン又は前記複数の第３アイコンは前記第１入力部又は前記第２入力部の操作によりスクロール可能である。前記選択されたエリアの中央のアイコンのサイズは前記選択されたエリアの他のアイコンのサイズより大きく、前記選択されたエリアの中央のアイコンの表示態様は前記他のアイコンの表示態様と異なる。

【図面の簡単な説明】

【0009】

【図1】実施形態の電子機器を含む遠隔支援システムの一例を示すブロック図である。

【図2】図１中のオペレータ端末１２の一例を示すブロック図である。

【図3】図１中のモバイルＰＣ１６に接続されるウェアラブルデバイス２３の外観の一例を示す。

【図4】ウェアラブルデバイス２３の本体２４の外観の一例を示す。

【図5】モバイルＰＣ１６とウェアラブルデバイス本体２４との接続の一例を示す。

【図6】ウェアラブルデバイス本体２４の一例を示すブロック図である。

【図7】モバイルＰＣ１６の外観の一例を示す。

【図8】モバイルＰＣ１６の一例を示すブロック図である。

【図9】モバイルＰＣ１６のアプリケーションプログラムの一例を示す。

【図10】ウェアラブルデバイス２３で表示されるホーム画面の一例を示す。

【図11】ホーム画面における、作業者の操作による画面の遷移の一例を示す。

【図12】ホーム画面内のコミュニケーションエリアに位置するアイコンを選択した場合の画面の遷移の一例を示す。

【図13】ホーム画面内のコンテンツエリアに位置するアイコンが選択された場合の画面の遷移の一例を示す。

【図14】ホーム画面内のツールエリアに位置するアイコンを選択した場合の画面の遷移の一例を示す。

【図15】遠隔支援の例を示す。

【図16】モバイルＰＣ１６（及びウェアラブルデバイス２３）とオペレータ端末１２間が通話中である場合に、ウェアラブルデバイス２３で表示される画面の一例を示す。

【図17】ウェアラブルデバイス２３で撮影されたリアルタイム映像をオペレータ端末１２に配信する場合に、ウェアラブルデバイス２３で表示される画面の遷移の一例を示す。

【図18】モバイルＰＣ１６とオペレータ端末１２間が通話中に標準モードで静止画像を撮影する場合に、ウェアラブルデバイス２３で表示される画面の遷移の一例を示す。

【図19】モバイルＰＣ１６とオペレータ端末１２間が通話中に高画質モードで静止画像を撮影する場合に、ウェアラブルデバイス２３で表示される画面の遷移の一例を示す。

【図20】モバイルＰＣ１６とオペレータ端末１２間が通話中にモバイルＰＣ１６がテキストメッセージを受信した場合に、ウェアラブルデバイス２３で表示される画面の遷移の一例を示す。

【図21】モバイルＰＣ１６がウェアラブルデバイス２３の動作環境を設定する場合に、ウェアラブルデバイス２３で表示される画面の遷移の一例を示す。

【図22】オペレータ端末１２のアプリケーションプログラムの一例を示す。

【図23】オペレータ端末１２が静止画像にアノテーションを付加し、そのアノテーションを付加した静止画像をモバイルＰＣ１６に送る動作の流れの一例を示す。

【図24】モバイルＰＣ１６から受信した静止画像のサムネイルとモバイルＰＣ１６に送信した静止画像のサムネイルとを表示するオペレータ端末１２の画面の一例を示す。

【図25】モバイルＰＣ１６からのコールをオペレータ端末１２が受話してライブ映像配信が行われる場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図26】オペレータ端末１２からのコールをモバイルＰＣ１６が受話してライブ映像配信が行われる場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図27】静止画像を標準モードで撮影し、撮影された静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図28】静止画像を高画質モードで撮影し、撮影された静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図29】オペレータ端末１２のデスクトップ画面又は起動中のアプリケーションの画面を通信中のモバイルＰＣ１６と共有する場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図30】オペレータ端末１２からモバイルＰＣ１６にテキストメッセージを送信する場合における、ウェアラブルビューワー側とオペレータ端末１２側それぞれのユーザインターフェースを示す。

【図31】モバイルＰＣ１６からのコールをオペレータ端末１２が受話する場合における、ライブ映像をオペレータ端末１２に配信する動作の一例を示すシーケンス図である。

【図32】オペレータ端末１２からのコールをモバイルＰＣ１６が受話する場合における、ライブ映像をオペレータ端末１２に配信する動作の一例を示すシーケンス図である。

【図33】静止画像を高画質モードで撮影し、撮影された高画質の静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する動作の一例を示すシーケンス図である。

【図34】アノテーションが付加された静止画像をオペレータ端末１２からモバイルＰＣ１６に送信する動作の一例を示すシーケンス図である。

【発明を実施するための形態】

【0010】

以下、実施の形態について図面を参照して説明する。なお、開示はあくまで一例にすぎず、以下の実施形態に記載した内容により発明が限定されるものではない。当業者が容易に想到し得る変形は、当然に開示の範囲に含まれる。説明をより明確にするため、図面において、各部分のサイズ、形状等を実際の実施態様に対して変更して模式的に表す場合もある。複数の図面において、対応する要素には同じ参照数字を付して、詳細な説明を省略する場合もある。

【0011】

［遠隔支援システム］
図１は、エッジコンピューティングを実現するための遠隔支援システムの一例を示すブロック図である。遠隔支援システムは、例えば現地の作業者（ユーザとも称する）を後方のオペレータが遠隔地から支援するためのシステムである。現地の作業の例は、複雑なメンテナンス業務、物流倉庫のピッキング作業、現場監視、災害救助・医療サポート等がある。現地の作業者側をフロントエンド、後方のオペレータ側をバックエンドとも称する。遠隔支援システムは、作業者が携帯するモバイルパーソナルコンピュータ（モバイルＰＣ、モバイルエッジコンピューティングデバイスと呼ぶこともある）１６及びメガネ型のウェアラブルデバイス２３と、作業者から離れた位置にある遠隔支援センター（データセンター）１８とを備え、モバイルＰＣ１６と遠隔支援センター１８はネットワーク２２を介して相互に接続され、通信可能となっている。モバイルＰＣ１６と遠隔支援センター１８は有線のＬＡＮケーブルによりネットワーク２２に接続されてもよいし、無線ＬＡＮ、ブルートゥース（登録商標）等によりネットワーク２２に接続されてもよい。

【0012】

ウェアラブルデバイス２３はモバイルＰＣ１６と接続される。図１では、ウェアラブルデバイス２３はケーブルによりモバイルＰＣ１６に接続される例を示すが、ウェアラブルデバイス２３は無線ＬＡＮ、ブルートゥース等によりモバイルＰＣ１６と接続されてもよい。ウェアラブルデバイス２３はカメラ、ディスプレイを備え、カメラで撮影した画像をモバイルＰＣ１６に送信し、モバイルＰＣ１６から送信される画像をディスプレイで表示する。

【0013】

図１に示すように複数の作業者がネットワークを介して相互に通信することも可能である。この場合、遠隔支援センター１８を経由してもよいし、遠隔支援センター１８のオペレータを介さずに作業者同士のみで通信するようにすることも可能である。

【0014】

遠隔支援センター１８は作業者を支援するオペレータが操作する端末（以下、オペレータ端末と称する）１２とサーバ１４を備える。

【0015】

遠隔支援センター１８はモバイルＰＣ１６（及びウェアラブルデバイス２３）とオペレータ端末１２間で通話を行う又は情報をやり取りする。モバイルＰＣ１６に接続されるウェアラブルデバイス２３のリアルタイム映像をオペレータ端末１２に配信することや、モバイルＰＣ１６とオペレータ端末１２間で画像を相互に送受信できる。また、オペレータ端末１２からモバイルＰＣ１６にテキストメッセージを送信することもできる。例えば、物流倉庫ピッキング作業では、メガネ型のウェアラブルデバイス２３にピッキング品の場所を表示させ、ハンズフリーでのピッキングを実現できる。

【0016】

遠隔支援としては、典型的には、例えば以下の機能を含む。

【0017】

(1)モバイルＰＣ１６とオペレータ端末１２との双方向の通話を行う通話機能。

【0018】

(2)通話中にウェアラブルデバイス２３のリアルタイム映像をオペレータ端末１２に配信するライブ映像配信機能。

【0019】

(3)通話中にモバイルＰＣ１６とオペレータ端末１２間で静止画を送受信する静止画像の送受信機能（モバイルＰＣ１６は撮影した静止画や映像配信中のキャプチャ画像をオペレータ端末１２に送信し、オペレータ端末１２は受信した画像に文字や絵などを書き込み、編集した画像をモバイルＰＣ１６に送信する機能。モバイルＰＣ１６で受信した静止画像は、モバイルＰＣ１６内のフォルダに保存され、閲覧可能である）。

【0020】

(4)通話中にオペレータ端末１２のデスクトップ画面全体又は任意のアプリケーションプログラムのウィンドウをウェアラブルデバイス２３に表示する画面共有機能。

【0021】

(5)オペレータ端末１２からモバイルＰＣ１６に対してテキストメッセージを送信するテキストメッセージの送信機能。

【0022】

サーバ１４は遠隔支援のための処理をオペレータ端末１２に代わって又は協働して行うものであり、プロセッサ（ＣＰＵ）２８、ＲＯＭ３０、ＲＡＭ３２、ハードディスクドライブ（ＨＤＤ）又はソリッドステートドライブ（ＳＳＤ）からなるストレージデバイス３４、インターフェース３６を備える。なお、サーバ１４の機能を全てオペレータ端末１２に持たせ、サーバ１４を省略してもよい。

【0023】

［オペレータ端末１２］
図２はオペレータ端末１２の一例を示すブロック図である。オペレータ端末１２はオペレータが執務する事務所内のデスク上のデスクトップ型ＰＣ又はノートブック型ＰＣ等からなる。

【0024】

オペレータは、オペレータ端末１２を用いて現地の状況をリアルタイム映像で確認しながら、会話や画像によってモバイルＰＣ１６の作業者に指示を行う。オペレータは、オペレータ端末１２を用いてモバイルＰＣ１６から受信した画像ファイルに絵や文字などの書き込みを行い、編集した画像ファイルをモバイルＰＣ１６に送信することや、オペレータ端末１２に保存することができる。

【0025】

オペレータ端末１２は、プロセッサを含むシステムコントローラ４２を備え、システムコントローラ４２には、主メモリ４４、ＢＩＯＳ－ＲＯＭ５０、ＨＤＤ又はＳＳＤからなるストレージデバイス５２、オーディオコーデック５４、グラフィックスコントローラ６２、タッチパネル７０、ＵＳＢ（登録商標）コネクタ７２、無線ＬＡＮデバイス７４、ブルートゥースデバイス７６、有線ＬＡＮデバイス７８、ＰＣＩＥｘｐｒｅｓｓ（登録商標）カードコントローラ８０、メモリカードコントローラ８２、エンベデッドコントローラ／キーボードコントローラ（ＥＣ／ＫＢＣ）８４等が接続される。

【0026】

システムコントローラ４２はストレージデバイス５２から主メモリ４４にロードされる様々なプログラムを実行する。これらプログラムは、オペレーティングシステム（ＯＳ）４６、遠隔支援のためのバックエンドアプリケーションプログラム４８を含む。システムコントローラ４２は不揮発性メモリであるＢＩＯＳ－ＲＯＭ５０に格納された基本入出力システム（ＢＩＯＳ）も実行する。ＢＩＯＳはハードウェア制御のためのシステムプログラムである。

【0027】

オーディオコーデック５４は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、ヘッドフォン５８又はスピーカ６０に供給する。また、オーディオコーデック５４は、マイク５６から入力されるアナログのオーディオ信号をデジタル信号に変換する。マイク５６とヘッドフォン５８は単独で設けてもよいが、インカムとして一体的に設けてもよい。

【0028】

グラフィックスコントローラ６２は、オペレータ端末１２のディスプレイモニタとして使用される液晶表示器（ＬＣＤ）６４を制御する。ＬＣＤ６４の画面上にタッチパネル７０が重ねられ、ＬＣＤ６４の画面にタッチペン等により手書き入力操作が行えるように構成されている。グラフィックスコントローラ６２にはＨＤＭＩ（登録商標）コントローラ６６も接続される。ＨＤＭＩコントローラ６６は外部の表示デバイスとの接続のためのＨＤＭＩコネクタ６８に接続される。

【0029】

無線ＬＡＮデバイス７４は、ネットワーク２２との接続のためにＩＥＥＥ８０２．１１規格の無線ＬＡＮ通信を実行する。ブルートゥースデバイス７６は、外部機器との接続のためにブルートゥース規格の無線通信を実行する。有線ＬＡＮデバイス７８は、ネットワーク２２との接続のためにＩＥＥＥ８０２．３規格の有線ＬＡＮ通信を実行する。このように、オペレータ端末１２とネットワーク２２との接続は無線通信によってもよいし、有線通信によってもよい。

【0030】

ＰＣＩＥｘｐｒｅｓｓカードコントローラ８０はオペレータ端末１２と外部機器との間でＰＣＩＥｘｐｒｅｓｓ規格の通信を行なう。メモリカードコントローラ８２は、例えばＳＤカード（登録商標）等のメモリカードにデータを書き込み、メモリカードからデータを読み出す。

【0031】

ＥＣ／ＫＢＣ８４は電力管理コントローラであり、例えば、キーボード８８を制御するキーボードコントローラを内蔵したワンチップマイクロコンピュータとして実現されている。ＥＣ／ＫＢＣ８４は、電源スイッチ８６の操作に応じてオペレータ端末１２をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、ＥＣ／ＫＢＣ８４と電源回路９０との協働動作によって実行される。ＥＣ／ＫＢＣ８４はオペレータ端末１２がパワーオフされている期間中も、バッテリ９２又はＡＣアダプタ９４からの電力によって動作する。電源回路９０は、バッテリ９２からの電力又は外部電源として接続されるＡＣアダプタ９４からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。

【0032】

［ウェアラブルデバイス２３］
図３はモバイルＰＣ１６に接続されるウェアラブルデバイス２３の外観の一例を示す。ウェアラブルデバイス２３はメガネフレーム１４２とウェアラブルデバイス本体２４とを備える。メガネフレーム１４２は一般的なメガネからレンズを取り除いた形状でもよく、作業者の顔に装着される。メガネフレーム１４２はメガネが取り付けられる構造としてもよい。作業者がメガネを常用する場合、常用しているメガネと同様な度数のレンズがメガネフレーム１４２に取り付けられてもよい。

【0033】

メガネフレーム１４２はウェアラブルデバイス本体２４が着脱される取付具１４４を左右のテンプルに備える。図３では作業者の右側のテンプルの取付具１４４はウェアラブルデバイス本体２４に隠されているので、図示されない。上述したようにウェアラブルデバイス本体２４はディスプレイ１２４（図４に示す）（請求項では表示部と称する）を備え、ディスプレイ１２４は片目で目視されるようになっているので、ウェアラブルデバイス本体２４が利き目側に取り付けられるように取付具１４４は左右のテンプルに備えられている。なお、ウェアラブルデバイス本体２４を取付具１４４によりメガネフレーム１４２に着脱自在に取り付ける必要はなく、ウェアラブルデバイス本体２４がメガネフレーム１４２に固定された右眼用、左眼用のウェアラブルデバイス２３を用意してもよい。さらに、ウェアラブルデバイス本体２４をメガネフレーム１４２ではなく、ヘルメット、ゴーグル等を用いて作業者の頭部に装着してもよい。

【0034】

ウェアラブルデバイス本体２４は、その係合片１２８（図４に示す）が取付具１４４の上下の枠内に押し込まれることにより、メガネフレーム１４２に取り付けられる。ウェアラブルデバイス本体２４をメガネフレーム１４２から取り外す場合は、ウェアラブルデバイス本体２４が取付具１４４から引き抜かれる。

【0035】

ウェアラブルデバイス本体２４は取付具１４４に取り付けられた状態で、係合片１２８は取付具１４４内で前後に多少は移動可能である。このため、作業者の焦点がディスプレイ１２４に合うようにウェアラブルデバイス本体２４は前後位置が調整可能である。さらに、取付具１４４はテンプルに直交する軸１４４Ａを中心に回転可能であり、ウェアラブルデバイス本体２４がメガネフレーム１４２に取り付けられた後、ディスプレイ１２４が作業者の視線上に位置するように上下位置が調整可能である。さらに、取付具１４４の回転角度は９０度程度であり、取付具１４４を上方向に大きく回転することにより、ウェアラブルデバイス本体２４をメガネフレーム１４２からはね上げることができる。これにより、ウェアラブルデバイス本体２４により視野が邪魔され実物を見ることが困難な場合や、狭い場所でウェアラブルデバイス本体２４が周囲の物体に干渉する場合でも、ウェアラブルデバイス２３全体を顔から外す／再装着することなく、ウェアラブルデバイス本体２４を作業者の視野から一時的に外す／戻すことができる。

【0036】

［ウェアラブルデバイス本体２４］
ウェアラブルデバイス本体２４はメガネフレーム１４２のテンプルに沿った側面部と作業者の一方の眼球の視線上に位置する前面部とからなる。側面部に対する前面部の角度は調節可能である。

【0037】

図３に示すように、前面部の外側表面にはカメラ１１６、ライト１１８、カメラＬＥＤ１２０が設けられる。ライト１１８は暗部の撮影時に発光する補助照明である。カメラＬＥＤ１２０は写真や動画の撮影時に点灯し、撮影対象者に撮影していることを認識させるためのものである。

【0038】

右側のテンプルに取り付けられたウェアラブルデバイス本体２４の側面部の上側面に第１、第２、第３ボタン１０２、１０４、１０６が設けられる。なお、作業者の利き目が左眼の場合、ウェアラブルデバイス本体２４は左側のテンプルに取り付けられる。右側に取り付けられるか左側に取り付けられるかで、ウェアラブルデバイス本体２４の上下が反転するので、側面部の上側面と下側面の両面に第１、第２、第３ボタン１０２、１０４、１０６を設けてもよい。

【0039】

側面部の外側表面にはタッチパッド１１０、第４ボタン１０８、マイク１１２、照度センサ１１４が設けられる。タッチパッド１１０と第４ボタン１０８は人差し指で操作可能である。ボタン１０２、１０４、１０６は、ウェアラブルデバイス本体２４が右側に取り付けられた際、それぞれ人差し指、中指、薬指で操作可能な位置に配置される。タッチパッド１１０（請求項では第１入力部と称する）は、その表面上で矢印に示すように作業者が指を上下前後に移動させたことを検出できるようにしている。この移動の検出は、指を接触したまま移動するドラッグの動きに加え指をさっと擦るフリックの動きも含む。タッチパッド１１０は、作業者の指の上下前後移動を検出すると、コマンドを入力する。本明細書では、コマンドとはウェアラブルデバイス本体２４に対する特定の処理の実行指令のことである。第１～第４ボタン１０２、１０４、１０６、１０８、タッチパッド１１０の操作方法はアプリケーションプログラムによって決められている。

【0040】

例えば、
第３ボタン１０６が１回押されると、項目の選択／項目の実行がなされ、
第３ボタン１０６が長押しされると、起動中のアプリケーションプログラムの一覧が表示され、
第２ボタン１０４が１回押されると、ホーム画面に戻り、
第２ボタン１０４が長押しされると、クイックセッティングのメニューが表示され、
第１ボタン１０２が１回押されると、操作の取り消し（キーボードのEscキーと同様の動作）が実行される。

【0041】

タッチパッド１１０の操作に関しては、例えば、
上下にドラッグされると、カーソルが上下に移動され、
前にフリックされると、左のアイコンが選択され（連続してスクロール）、
後ろにフリックされると、右のアイコンが選択され（連続してスクロール）、
前にドラッグされると、左のアイコンが選択され（１項目ずつスクロール）、
後ろにドラッグされると、右のアイコンが選択され（１項目ずつスクロール）る。

【0042】

第１ボタン１０２は人差し指、第２ボタン１０４は中指、第３ボタン１０６は薬指、第４ボタン１０８は小指で操作できるような位置に配置される。なお、第４ボタン１０８が側面部の上部ではなく、側面部の外側表面に設けられるのは、スペースの関係上であり、第４ボタン１０８も第１～第３ボタン１０２、１０４、１０６と同様に側面部の上部で設けられてよい。照度センサ１１４はディスプレイの明るさを自動調整するために周囲の照度を検出する。

【0043】

図４はウェアラブルデバイス本体２４の裏面の外観の一例を示す。前面部の内側にはＬＣＤからなるディスプレイ１２４が設けられる。側面部の内側にはマイク１２６、スピーカ１３０、係合片１２８が設けられる。マイク１２６は側面部の前方に、スピーカ１３０は側面部の後方に、係合片１２８は側面部の後方に設けられる。スピーカ１３０の代わりにヘッドフォンを用いてもよい。その場合、オペレータ端末１２と同様にマイクとヘッドフォンをインカムとして一体的に設けてもよい。

【0044】

図５はモバイルＰＣ１６とウェアラブルデバイス本体２４との接続の一例を示す。側面部の後方にはＵＳＢｔｙｐｅ－Ｃ（登録商標）規格のケーブル１４６の一端のプラグ１４６Ａが挿入されるレセプタクル１３２が設けられる。ＵＳＢｔｙｐｅ－Ｃ規格のケーブル１４６の他端のプラグ１４６ＢはモバイルＰＣ１６の上部端面のＵＳＢｔｙｐｅ－Ｃ規格のコネクタ２０７に挿入される。このようにウェアラブルデバイス本体２４はＵＳＢｔｙｐｅ－Ｃ規格のケーブル１４６を介してモバイルＰＣ１６に接続され、画像信号等がウェアラブルデバイス本体２４とモバイルＰＣ１６の間で伝送される。ウェアラブルデバイス本体２４は無線ＬＡＮ、ブルートゥース等の無線通信によりモバイルＰＣ１６に接続されてもよい。

【0045】

実施形態ではウェアラブルデバイス本体２４は駆動電源としてのバッテリ又はＤＣ端子を備えず、駆動電源はモバイルＰＣ１６からＵＳＢｔｙｐｅ－Ｃケーブル１４６を介してウェアラブルデバイス本体２４に供給される。しかし、ウェアラブルデバイス本体２４が駆動電源を備えてもよい。

【0046】

図６はウェアラブルデバイス本体２４の一例を示すブロック図である。ＵＳＢｔｙｐｅ－Ｃコネクタ１３２がミキサ１６６に接続される。ディスプレイ１２４とＵＳＢハブ１６４がミキサ１６６の第１端子、第２端子にそれぞれ接続される。カメラコントローラ１６８、オーディオコーデック１７２、センサコントローラ１６２がＵＳＢハブ１６４に接続される。カメラ１１６とライト１１８とカメラＬＥＤ１２０がカメラコントローラ１６８に接続される。マイク１１２、１２６からのオーディオ信号がオーディオコーデック１７２に入力され、オーディオコーデック１７２からのオーディオ信号がアンプ１７４を介してスピーカ１３０に入力される。

【0047】

センサコントローラ１６２に、モーションセンサ（例えば、加速度／地磁気／重力／ジャイロセンサ等）１７６、照度センサ１１４、近接センサ１７８、タッチパッド１１０、第１～第４ボタン１０２、１０４、１０６、１０８、ＧＰＳセンサ１８０が接続される。図４には示していないが、モーションセンサ１７６、近接センサ１７８はウェアラブルデバイス本体２４の内部に配置される。モーションセンサ１７６はウェアラブルデバイス本体２４の動き、向き、姿勢等を検出する。近接センサ１７８は作業者の顔、指等の接近によりウェアラブルデバイス２３の装着を検出する。

【0048】

［モバイルＰＣ１６］
図７はモバイルＰＣ（モバイルエッジコンピューティングデバイス）１６の外観の一例を示す。モバイルＰＣ１６の外観は、幅が約１０ｃｍ以下、高さが約１８ｃｍ以下、厚さが２ｃｍ程度の薄い直方体形状であり、重量は約３００ｇ程度と、小型で軽量である。このため、モバイルＰＣ１６は作業着のポケット、ベルトに装着されるホルスターあるいはショルダーケースに収納でき、ウェアラブルである。モバイルＰＣ１６はＣＰＵや半導体メモリ等の半導体チップやＳＳＤ(Solid State Disk)等のストレージデバイスを収納するが、ディスプレイと文字入力のためのハードウェアキーボードは備えない。モバイルＰＣ１６の正面中央には指紋センサ２０４が設けられる。キーボードが備わっておらずパスワードを入力することができないので、指紋センサ２０４はモバイルＰＣ１６のログイン時のユーザ認証のために用いられる。指紋センサ２０４とモバイルＰＣ１６の長手方向の一端との間に５ボタン（十字ボタンとも称する）２０２が設けられる。５ボタン２０２は中央に配置されたセンターボタン（決定ボタン、エンターボタンとも称する）２０２ｅと、その上下左右に配置された４つのボタン（アップボタン２０２ａ、ライトボタン２０２ｂ、ダウンボタン２０２ｃ、レフトボタン２０２ｄ）からなる（請求項では第２入力部と称する）。５ボタン２０２はコマンド等を入力できる。なお、５ボタン２０２の各ボタン２０２ａ～２０２ｄに数字を割り当て、数字からなるパスワードを入力することにより、ログイン時のユーザ認証を行ってもよく、指紋センサ２０４は省略可能である。

【0049】

５ボタン２０２はウェアラブルデバイス本体２４のボタン１０２、１０４、１０６、１０８とタッチパッド１１０の操作と同じ操作が可能である。ウェアラブルデバイス本体２４のボタン１０２、１０４、１０６、１０８とタッチパッド１１０は操作している様子を作業者は見ることができないので、作業者によっては意図した操作をするには慣れが必要な場合もある。また、ボタン１０２、１０４、１０６、１０８とタッチパッド１１０は小型であるので、操作しづらい場合もある。実施形態によれば、モバイルＰＣ１６の５ボタン２０２でも同じ操作ができるので、上記の懸念は解消される。５ボタン２０２の操作方法はアプリケーションプログラムによって決められている。

【0050】

例えば、
センターボタン２０２ｅが１回押されると、項目の選択／項目の実行がなされ（ウェアラブルデバイス本体２４では、第３ボタン１０６の１回押しに対応）、
センターボタン２０２ｅが長押しされると、終了又は操作の取り消しがなされ（ウェアラブルデバイス本体２４では、第１ボタン１０２の１回押しが操作の取り消しに対応）、
アップボタン２０２ａが１回押されると、カーソルが上に移動され（ウェアラブルデバイス本体２４では、タッチパッド１１０で上にドラッグに対応）、
アップボタン２０２ａが長押しされると、起動中のアプリケーションプログラムの一覧が表示され（ウェアラブルデバイス本体２４では、第３ボタン１０６の長押しに対応）、
ダウンボタン２０２ｃが１回押されると、カーソルが下に移動され（ウェアラブルデバイス本体２４では、タッチパッド１１０で下にドラッグに対応）、
ダウンボタン２０２ｃが長押しされると、クイックセッティングメニュー（後述）が表示され（ウェアラブルデバイス本体２４では、第２ボタン１０４の長押しに対応）、
レフトボタン２０２ｄが１回押されると、右のアイコンが選択され（ウェアラブルデバイス本体２４では、タッチパッド１１０で後ろにドラッグ／フリックに対応）、
ライトボタン２０２ｂが１回押されると、左のアイコンが選択される（ウェアラブルデバイス本体２４では、タッチパッド１１０で前にドラッグ／フリックに対応）。

【0051】

モバイルＰＣ１６の上部側面には、ＵＳＢ３．０規格のコネクタ２０６とＵＳＢｔｙｐｅ－Ｃ規格のコネクタ２０７とオーディオジャック２０８が設けられる。

【0052】

モバイルＰＣ１６の一方の側面（正面から見て左側の側面）には、メモリカード用のカードスロット２１８が設けられる。メモリカードは、例えばＳＤカード、マイクロＳＤカード（登録商標）等を含む。

【0053】

モバイルＰＣ１６の他方の側面（正面から見て右側の側面）には、ケンジントンロック（登録商標）のためのスロット２１０、電源スイッチ２１２、パワーＬＥＤ２１３、ＤＣ ＩＮ／バッテリＬＥＤ２１４、ＤＣ端子２１６、冷却用の通風口２２２が設けられる。パワーＬＥＤ２１３は電源スイッチ２１２の周囲にリング状に配置され、電源オン等の状態を色、点灯状態により示す。ＤＣ ＩＮ／バッテリＬＥＤ２１４はバッテリが充電中であるか否か等のモバイルＰＣ１６の状態とバッテリの残量等を色、点灯状態により示す。モバイルＰＣ１６はバッテリで駆動可能であるが、ＤＣ端子２１６にＡＣアダプタを接続した状態でも駆動可能である。図示しないが、裏面にはバッテリが容易に交換可能できるようにワンタッチで着脱できる蓋がバッテリ収納部に設けられている。

【0054】

作業者は、作業中はウェアラブルデバイス本体２４のディスプレイ１２４を見ていることが多いので、５ボタン２０２を手探りで操作することがある。上述したように、モバイルＰＣ１６の正面中央に指紋センサ２０４が設けられ、指紋センサ２０４とモバイルＰＣ１６の上端との間に５ボタン２０２が設けられているので、作業者は指紋センサ２０４との位置関係に基づいて５ボタン２０２のどのボタンがアップボタン２０２ａであるかを手探りでも認識できる。さらに、モバイルＰＣ１６の上部側面にＵＳＢｔｙｐｅ－Ｃコネクタ２０７が設けられているので、ＵＳＢｔｙｐｅ－Ｃケーブル１４６の接続位置からも５ボタン２０２のどのボタンがアップボタン２０２ａであるかを手探りでも認識できる。なお、アップボタン２０２ａに他のボタンと異なる触感を持たせてもよい。

【0055】

図８はモバイルＰＣ１６の一例を示すブロック図である。モバイルＰＣ１６はウェアラブルデバイス本体２４で撮影した映像をオペレータ端末１２へ配信することや、オペレータ端末１２から受信した画像を閲覧することができる。モバイルＰＣ１６は、例えば、カメラ機能とビューワー機能を備える。カメラ機能はウェアラブルデバイス本体２４のカメラ１１６で写真やビデオを撮影する機能である。撮影した写真やビデオはカメラフォルダに保存され、ビューワー機能で閲覧できる。ビューワー機能はカメラフォルダに保存されているファイルを閲覧する機能である。ファイルの種類は、画像、動画、ＰＤＦファイル、カメラ機能で撮影した写真やビデオ、オペレータ端末１２から受信した画像、オペレータ端末１２へ送信した画像、ユーザフォルダに保存されたファイルがある。

【0056】

モバイルＰＣ１６はプロセッサ及びコントローラ・ハブを含むシステムコントローラ３０２を備え、システムコントローラ３０２には、主メモリ３０８、パワーＬＥＤ２１３、ＤＣ ＩＮ／バッテリＬＥＤ２１４、ＵＳＢコントローラ３２２、フラッシュメモリ３２６、メモリカードコントローラ３２８、ＨＤＤ又はＳＳＤからなるストレージデバイス３３０、ＵＳＢ切替器３２４、オーディオコーデック３３４、３Ｇ／ＬＴＥ／ＧＰＳデバイス３３６、指紋センサ２０４、ＵＳＢ３．０コネクタ２０６、ブルートゥース／無線ＬＡＮデバイス３４０、ＥＣ／ＫＢＣ３４４等が接続される。主メモリ３０８は画面表示のためのバッファメモリであるフレームメモリ３１０を含む。

【0057】

システムコントローラ３０２はストレージデバイス３３０から主メモリ３０８にロードされる様々なプログラムを実行する。これらプログラムは、ＯＳ３１６、遠隔支援のためのフロントエンドアプリケーションプログラム３１４を含む。

【0058】

オーディオコーデック３３４は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、オーディオジャック２０８に供給する。また、オーディオコーデック３３４は、オーディオジャック２０８から入力されるアナログのオーディオ信号をデジタル信号に変換する。

【0059】

メモリカードコントローラ３２８はメモリカードスロット２１８に挿入されるメモリカード、例えばＳＤカードにアクセスして、ＳＤカードに対するデータの読み書きを制御する。

【0060】

ＵＳＢコントローラ３２２はＵＳＢｔｙｐｅ－Ｃコネクタ２０７に接続されるＵＳＢｔｙｐｅ－Ｃケーブル又はＵＳＢ３．０コネクタ２０６に接続されるＵＳＢ３．０ケーブル（図示せず）に対するデータの送受信を制御する。

【0061】

図示しないが、ＵＳＢｔｙｐｅ－Ｃコネクタ２０７にはポート拡張アダプタも接続可能であり、ＨＤＭＩ等のインターフェースが使用可能である。

【0062】

ブルートゥース／無線ＬＡＮデバイス３４０は、ネットワーク２２との接続のためにブルートゥース規格の無線通信又はＩＥＥＥ８０２．１１規格の無線ＬＡＮ通信を実行する。なお、ネットワーク２２との接続は無線通信によらず、ＩＥＥＥ８０２．３規格の有線ＬＡＮ通信によってもよい。

【0063】

指紋センサ２０４はモバイルＰＣ１６の起動時の指紋認証のために使用される。

【0064】

ＥＣ／ＫＢＣ３４４には、サブプロセッサ３４６、電源スイッチ２１２及び５ボタン２０２が接続される。ＥＣ／ＫＢＣ３４４は、電源スイッチ２１２の操作に応じてモバイルＰＣ１６をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、ＥＣ／ＫＢＣ３４４と電源回路３５０との協働動作によって実行される。ＥＣ／ＫＢＣ３４４はモバイルＰＣ１６がパワーオフされている期間中も、バッテリ３５２又はＡＣアダプタ３５８からの電力によって動作する。電源回路３５０は、バッテリ３５２からの電力又は外部電源として接続されるＡＣアダプタ３５８からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。電源回路３５０は電圧レギュレータモジュール３５６を含み、電圧レギュレータモジュール３５６はプロセッサ３０４に接続される。

【0065】

なお、モバイルＰＣ１６はウェアラブルデバイス本体２４とは別体として構成したが、モバイルＰＣ１６をウェアラブルデバイス本体２４内に組み込んで、両者を一体として構成してもよい。

【0066】

［フロントエンド］
図９は、モバイルＰＣ１６のアプリケーションプログラム３１４の一例を示す。以下、アプリケーションプログラムを単にアプリケーションと称することもある。

【0067】

上述したように、遠隔支援システムは、作業者側、即ちフロントエンドで動作するフロントエンドアプリケーションと、オペレータ側即ちバックエンドで動作するバックエンドアプリケーションを実行することにより実現される。バックエンドアプリケーションの構成は後述することとし、ここではフロントエンドアプリケーションの構成について説明する。

【0068】

モバイルＰＣ１６のアプリケーション３１４は、インターネット通信アプリケーション５０９、及びフロントエンドアプリケーション５０１からなる。インターネット通信アプリケーション５０９は、オペレータ端末１２と通信を行うために使用される。インターネット通信アプリケーション５０９の例としては、Skype for Business 2016（登録商標）等がある。

【0069】

フロントエンドアプリケーション５０１は、ホームアプリケーション５０２、遠隔支援アプリケーション５０３、カメラアプリケーション５０４、ビューワーアプリケーション５０５といった各アプリケーションから構成されている。

【0070】

ホームアプリケーション５０２は、フロントエンドアプリケーション５０１が起動されると起動し、フロントエンドアプリケーション５０１におけるホーム画面を表示するアプリケーションである。ホーム画面には、カメラアプリケーション５０４、ビューワーアプリケーション５０５等の各アプリケーションを起動させるためのアイコンが並べて表示される。つまり、ホームアプリケーション５０２は、各アプリケーションを起動させるためのアイコンを並べて表示するためのアプリケーションとも言える。作業者は、ホームアプリケーション５０２によって表示されるホーム画面からフロントエンドアプリケーション５０１に含まれる各アプリケーションを起動することができる。

【0071】

遠隔支援アプリケーション５０３は、インターネット通信アプリケーション５０９を利用してオペレータ端末１２との通話やライブ映像配信等、遠隔支援機能をサポートするためのアプリケーションである。遠隔支援アプリケーション５０３は、ホームアプリケーション５０２が起動された時に自動的に起動される。このように、遠隔支援アプリケーション５０３は常駐アプリケーションとして動作することになるため、作業者はいつでもインターネット通信アプリケーション５０９を用いてオペレータ端末１２と通信を行うことができる。

【0072】

なお、インターネット通信アプリケーション５０９としてSkype for Business 2016のクライアントアプリケーションを利用する場合、遠隔支援アプリケーション５０３は、動的リンクとしてのLync SDK 2013（登録商標）を用いてSkype for Businessのクライアントアプリケーションの機能を利用することになる。

【0073】

カメラアプリケーション５０４は、ウェアラブルデバイス本体２４のカメラ１１６による写真撮影やビデオ撮影の機能をサポートするアプリケーションである。撮影された写真やビデオは、モバイルＰＣ１６に保存される。

【0074】

ここで、ビューワーアプリケーション５０５はコンテンツを閲覧するためのものであり、JPEGビューワーアプリケーション５０５ａ、MP4プレーヤアプリケーション５０５ｂ、PDFリーダアプリケーション５０５ｃを含む。JPEGビューワーアプリケーション５０５ａは、モバイルＰＣ１６に保存されている写真を閲覧するためのアプリケーションである。MP4プレーヤアプリケーション５０５ｂは、モバイルＰＣ１６に保存されているビデオを再生するためのアプリケーションである。PDFリーダアプリケーション５０５ｃは、モバイルＰＣ１６に保存されているPDFファイルを閲覧するためのアプリケーションである。

【0075】

JPEGビューワーアプリケーション５０５ａ、MP4プレーヤアプリケーション５０５ｂ、PDFリーダアプリケーション５０５ｃは、ｗｉｎｄｏｗｓ（登録商標）のデスクトップアプリケーションとして実装される。

【0076】

作業者は、フロントエンド側、即ち、ウェアラブルデバイス２３、ウェアラブルデバイス本体２４、モバイルＰＣ１６の設定を行うことができる。以下において、ウェアラブルデバイス２３、ウェアラブルデバイス本体２４、モバイルＰＣ１６からなるフロントエンド側のシステムをウェアラブルビューワーと称することもある。

【0077】

設定画面アプリケーション５０７は、ウェアラブルビューワーの設定や情報の表示等を行うためのアプリケーションであり、後述するSettingsアイコンを選択することにより、設定画面が表示される。

【0078】

クイックセッティングアプリケーション５０８も、ウェアラブルビューワーの設定を行うためのアプリケーションであり、ダウンボタン２０２ｃを長押しすることにより起動される。

【0079】

図９に示すフロントエンドアプリケーション５０１の実行により実現される遠隔支援システムを利用する作業者は、以下の作業を行うことができる。

【0080】

（１）遠隔支援を受けること
遠隔支援アプリケーション５０３が実行されると、作業者は遠隔支援を受けることができる。作業者が受ける遠隔支援には、
オペレータ端末１２にコールすること、
オペレータ端末１２からのコールを受けること、
カメラ１１６で撮影した映像をリアルタイムにオペレータ端末１２に配信すること、
写真を撮影し、オペレータ端末１２に配信すること、
オペレータ端末１２から受信した画像を見ること、
オペレータ端末１２の画面（デスクトップ画面、アプリケーションケーションの画面等）を共有すること、
オペレータ端末１２からのテキストメッセージを受け取ることが含まれる。

【0081】

（２）カメラ撮影
カメラアプリケーション５０４が実行されると、作業者はウェアラブルデバイス本体２４で写真、動画を撮影することができる。撮影された写真、動画はモバイルＰＣ１６に保存される。

【0082】

（３）JPEG ビューワー
JPEGビューワーアプリケーション５０５ａが実行されると、作業者はモバイルＰＣ１６に保存されている写真を含む静止画像を閲覧することができる。

【0083】

（４）MP4プレーヤ
MP4プレーヤアプリケーション５０５ｂが実行されると、作業者はモバイルＰＣ１６に保存されている動画を再生することができる。

【0084】

（５）PDFリーダ
PDFリーダアプリケーション５０５ｃが実行されると、作業者は、モバイルＰＣ１６に保存されているPDFファイルを閲覧することができる。

【0085】

（６）設定
設定画面アプリケーション５０７、クイックセッティングアプリケーション５０８が実行されると、作業者は、ウェアラブルデバイス本体２４のスピーカ１３０の音量の調整、ウェアラブルデバイス本体２４の輝度の調整、ウェアラブルデバイス本体２４のカメラＬＥＤ１２０のＯＮ／ＯＦＦ等のウェアラブルビューワーの動作環境を設定できる。

【0086】

次に、フロントエンドアプリケーション５０１の起動及び終了について説明する。

【0087】

電源スイッチ２１２が押下されてモバイルＰＣ１６が起動されると、自動的にフロントエンドアプリケーション５０１が起動し、後述するフロントエンドアプリケーション５０１のホーム画面が、ウェアラブルデバイス本体２４のディスプレイ１２４に全画面で表示される。

【0088】

また、電源ＯＮの状態で電源スイッチ２１２が押下されると、フロントエンドアプリケーション５０１は終了し、フロントエンド側において遠隔支援システムがシャットダウンする。また、フロントエンドアプリケーションプログラム５０１は、シャットダウンだけでなく、フロントエンド側における遠隔支援システムをスリープ状態にすることもできる。さらに、ハイバネーションにも対応しており、フロントエンド側における遠隔支援システムを休止状態にすることもできる。

【0089】

[ホーム画面]
図１０は、ウェアラブルデバイス本体２４のディスプレイ１２４に表示されるホーム画面の一例を示す図である。

【0090】

フロントエンドアプリケーション５０１が起動されると、ホームアプリケーション５０２が起動してアプリケーションを起動するためのアイコン、機能のアイコンが表示される。これらのアイコンが並べられて表示された画面をホーム画面と呼ぶ。

【0091】

図１０はホーム画面の全体を示す。横長（例えば長方形）のホーム画面は、３つの横長のエリア（例えば、長辺が湾曲可能な長方形）に分かれ、上エリアはコミュニケーションエリア５２０、中央エリアはコンテンツエリア５３０、下エリアはツールエリア５４０と称する。各エリアのサイズ、形状はフォーカスの移動により可変であり、フォーカスのあるエリアが最も幅（上下方向の幅）が広い。このため、フォーカスエリアにあるアイコンは他のエリアのアイコンよりも大きく表示される。図１０の例では、コンテンツエリア５３０にフォーカスがあるので、中央エリアが幅広エリアであるが、フォーカスが上／下に移動すると、上／下エリアが幅広エリアとなる。

【0092】

各エリアの上下の境界線は直線ではなく、フォーカスエリアの上側境界線は僅かに下側（フォーカスエリア側）に湾曲し、下型境界線は僅かに上側（フォーカスエリア側）に湾曲している。すなわち、フォーカスエリアの幅は中央部が最も狭く、両端になるにつれて広くなる。このため、フォーカスエリアの中央に位置するアイコンを目立たせることができる。

【0093】

コミュニケーションエリア５２０には、外部とコミュニケーションする際に必要なアプリケーションを起動させるためのアイコン、即ち、オペレータ端末１２から遠隔支援を受けるための機能を起動させるためのアイコンが並べられている。コンテンツエリア５３０には、ビューワーアプリケーション５０５に関連する複数のアイコンが並べられている。その中には、画像データが保存されたフォルダに対応するアイコン、動画データが保存されたフォルダに対応するアイコン、PDFデータが保存されたフォルダに対応するアイコンが含まれる。ツールエリア５４０には、写真撮影を実行するための機能を起動させるアイコンやビデオ撮影を実行するための機能を起動させるアイコン、ウェアラブルビューワーの設定のためのアイコンが並べられている。ホーム画面でフォーカスのあるアイコンは他のアイコンよりも大きく、かつ反転表示されている。

【0094】

ホーム画面上の上領域の左及び右端部には、ステータスエリア５６０，５７０が表示される。ステータスエリア５６０，５７０は、遠隔支援アプリケーション５０３についての画面等のホーム画面以外の画面においても同じ位置に配置される。即ち、ステータスエリア５６０，５７０は画面の左上及び右上に常時配置されている。ステータスエリア５６０，５７０は、バッテリ残量、ネットワーク接続状態、通話状態等のモバイルＰＣ１６及びウェアラブルデバイス本体２４の状態（ステータス）を表示するための領域である。

【0095】

図１０に示すように、ステータスエリア５６０には、撮影中アイコン５６０ａ、マイクミュートアイコン５６０ｂ、ＬＥＤライトアイコン５６０ｃが表示される。

【0096】

撮影中アイコン５６０ａは、ライブ映像の配信中、動画の録画中にステータスエリア５６０の最も左側に表示される。ここで、ライブ映像の配信中、動画の録画中のいずれでもない状態では、ステータスエリア５６０の最も左側には何も表示されない。

【0097】

マイクミュートアイコン５６０ｂは、ウェアラブルデバイス本体２４のマイク１１２，１２６がミュート状態であるときにステータスエリア５６０の中央部に表示される。マイク１１２，１２６がミュート状態ではないときは、ステータスエリア５６０の中央部には何も表示されない。

【0098】

ＬＥＤライトアイコン５６０ｃは、ウェアラブルデバイス本体２４のライト１１８の点灯中にステータスエリア５６０の最も右側に表示される。ライト１１８が点灯していないときにはステータスエリア５６０の最も右側には何も表示されない。

【0099】

ステータスエリア５７０は、画面右上に表示されている。図１０に示すように、ステータスエリア５７０には、通話状態アイコン５７０ａ、Ｗｉ－Ｆｉ（登録商標）状態アイコン５７０ｂ、バッテリ状態アイコン５７０ｃが表示される。

【0100】

通話状態アイコン５７０ａは、ウェアラブルビューワーの使用者である作業者がオペレータ端末１２を使用するオペレータと通話が可能になっている状態のときに表示される。具体的には、インターネット通信アプリケーション５０９のサーバにサインインして待ち受け中になっているときにステータスエリア５７０の最も左側に表示される。また、作業者とオペレータとが通話中である時には、後述する通話中アイコン６０６（図１６に示す）が通話状態アイコン５７０ａの代わりに表示される。作業者がオペレータと通話が可能ではない状態、作業者がオペレータと通話中ではない場合には、ステータスエリア５７０の最も左側には何も表示されない。

【0101】

Ｗｉ－Ｆｉ状態アイコン５７０ｂは、Ｗｉ－Ｆｉの電波レベルを示すためのアイコンである。電波レベルは曲線（円弧）の数によって表現されており、曲線の数が多いほどＷｉ－Ｆｉによる通信がしやすい状態にあり、曲線の数が少ないほどＷｉ－Ｆｉによる通信がしにくい状態にあることを示す。

【0102】

バッテリ状態アイコン５７０ｃは、モバイルＰＣ１６のバッテリ残量を示すためのアイコンであり、ステータスエリア５７０の最も右側に表示される。バッテリが充電中である場合には、バッテリ状態アイコン５７０ｃに代えてバッテリが充電中であることを示すアイコン（図示しない）が表示される。

【0103】

ホーム画面はアイコンの配置や、それらのアイコンが選択された状態で決定ボタンが押下された場合の機能の定義等からなる。実施形態では、ホーム画面はＸＭＬによって記述されている。ＸＭＬファイルがユーザに提供され、ユーザがＸＭＬファイルを編集すると、ユーザはホーム画面のレイアウトを自由に変更すること又は他のアプリケーションをホームアプリケーション５０２から起動させることができ、フロントエンドアプリケーション５０１の拡張性を高めることができる。

【0104】

図１１は、作業者の操作によるホーム画面の遷移の一例を示す。

【0105】

ホーム画面は、上述したようにコミュニケーションエリア５２０、コンテンツエリア５３０、ツールエリア５４０からなる。図１０に示すように初期状態ではコンテンツエリア５３０が幅広のフォーカスエリアとなっている。アップボタン２０２ａ及びダウンボタン２０２ｃの押下操作により、フォーカスエリアを変えることができる。

【0106】

コンテンツエリア５３０にフォーカスがある状態のホーム画面（図１０、図１１（ｂ））が表示されている時、アップボタン２０２ａが押下された場合、フォーカスが上に移動され、画面はコミュニケーションエリア５２０が幅広のフォーカスエリアとなるホーム画面（図１１（ａ））に変わる。図１１（ａ）のホーム画面が表示されている時、ダウンボタン２０２ｃが押下された場、画面はコンテンツエリア５３０が幅広のフォーカスエリアとなるホーム画面（図１１（ｂ））に変わる。

【0107】

図１１（ｂ）のホーム画面が表示されている時にダウンボタン２０２ｃが押下された場合、画面はツールエリア５４０が幅広のフォーカスエリアとなるホーム画面（図１１（ｃ））に変わる。図１１（ｃ）のホーム画面が表示されている時、アップボタン２０２ａが押下された場合、画面はコンテンツエリア５３０が幅広のフォーカスエリアとなるホーム画面（図１１（ｂ））に変わる。

【0108】

図１１（ａ）に示すようにコミュニケーションエリア５２０には、遠隔支援関連の機能を起動するためのアイコンが配置されている。作業者はコミュニケーションエリア５２０に配置されているアイコンを選択し、決定ボタン（センターボタン）２０２ｅを押下することにより、選択されたアイコンに対応するアプリケーションを起動させることができる。例えば、図１１（ａ）のコミュニケーションエリア５２０のConversationアイコンが選択されると、ホーム画面は連絡先（コンタクト先）一覧を表示するコンタクトリスト画面（図１１（ｄ））に変わる。

【0109】

コンテンツエリア５３０には、ドキュメント類を保存するフォルダに対応するアイコンが配置されており、作業者はアイコンを選択し、決定ボタン２０２ｅを押下することにより、選択されたアイコンに対応するフォルダに保存されているJPEGファイル、MP4ファイル、PDFファイル等を閲覧することができる。例えば、図１１（ｂ）のコンテンツエリア５３０のPDFアイコンが選択されると、ホーム画面はモバイルＰＣ１６に保存されているPDFファイルの一覧を表示する画面（図１１（ｅ））に変わる。

【0110】

ツールエリア５４０には、写真撮影を実行するための機能を起動させるアイコンやビデオ撮影を実行するための機能を起動させるアイコン、ウェアラブルビューワーの設定のためのアイコンが配置されている。例えば、作業者はツールエリア５４０に配置されているアイコンを選択し、決定ボタン２０２ｅを押下することにより、選択されたアイコンに対応するアプリケーションを起動させることができる。例えば、図１１（ｃ）のツールエリア５４０のCameraアイコンが選択されると、ホーム画面は写真（静止画像）撮影用の画面（図１１（ｆ））に変わる。

【0111】

図１２は、コミュニケーションエリア５２０に位置するアイコンが選択された場合の画面の遷移の例を示す。

【0112】

図１２の例では、コミュニケーションエリア５２０には列方向に配置される４つのアイコン：End Callアイコン、Conversationアイコン、Messageアイコン、Sign-Inアイコンが表示可能であるが、一部のアイコンしか表示されない。コミュニケーションエリア５２０の中央に配置されているアイコンにフォーカスがあるとする。なお、コミュニケーションエリア５２０に配置されるアイコンの種類は上記の種類に限られない。

【0113】

まず、左右のスクロールについて説明する。

【0114】

End Callアイコンが中央に位置しEnd Callアイコンにフォーカスがあるホーム画面（図１２（ａ））が表示されている時、ライトボタン２０２ｂが押下されると、アイコン全体が左に移動され、画面はConversationアイコンが中央に位置しConversationアイコンにフォーカスがある画面（図１２（ｅ））に変わる。この結果、フォーカスが実質的に右に移動したことになる。この状態でレフトボタン２０２ｄが押下されると、アイコン全体が右にスクロールされ、画面はEnd Callアイコンが中央に位置するホーム画面（図１２（ａ））に戻る。

【0115】

同様に、Conversationアイコンが中央に位置するホーム画面（図１１（ｅ））が表示されている時、ライトボタン２０２ｂが押下されると、アイコン全体が左にスクロールされ、画面はMessageアイコンが中央に位置しMessageアイコンにフォーカスがある画面（図１１（ｇ））に変わる。この状態でレフトボタン２０２ｄが押下されると、アイコン全体が右にスクロールされ、画面はConversationアイコンが中央に位置するホーム画面（図１１（ｅ））に戻る。

【0116】

同様に、Messageアイコンが中央に位置するホーム画面（図１１（ｇ））が表示されている時、ライトボタン２０２ｂが押下されると、アイコン全体が左にスクロールされ、画面はSign-Inアイコンが中央に位置しSign-Inアイコンにフォーカスがある画面（図１１（ｃ））に変わる。この状態でレフトボタン２０２ｄが押下されると、アイコン全体が右にスクロールされ、画面はMessageアイコンが中央に位置するホーム画面（図１１（ｇ））に戻る。

【0117】

このようにコミュニケーションエリア５２０が表示されている状態でライトボタン２０２ｂ又はレフトボタン２０２ｄを押下することによりフォーカスを左右に移動させるとともに、フォーカスのあるアイコンをエリアの中央に表示させることができる。

【0118】

なお、コミュニケーションエリア５２０のアイコンの中の左端のEnd Callアイコンが画面の中央に位置するホーム画面が表示されている時にレフトボタン２０２ｄが押下された場合、コミュニケーションエリア５２０のアイコンの中の右端のSign-Inアイコンが中央に位置する画面に遷移させてもよいし、End Callアイコンが中央に位置する画面のままとしてもよい。

【0119】

同様に、コミュニケーションエリア５２０のアイコンの中の右端のSign-Inアイコンが画面の中央に位置するホーム画面が表示されている時にライトボタン２０２ｂが押下された場合、コミュニケーションエリア５２０のアイコンの中の左端のEnd Callアイコンが中央に位置する画面に遷移させてもよいし、Sign-Inアイコンが中央に位置する画面のままとしてもよい。

【0120】

次に、各アイコンを選択した時の画面の遷移について説明する。

【0121】

ウェアラブルビューワーを利用する作業者とオペレータ端末１２を操作するオペレータとが通話状態にあって、End Callアイコンが中央に位置する画面（図１２（ａ））が表示されている状態でEnd Callアイコンが選択され、決定ボタン２０２ｅが押下された場合、作業者とオペレータとの通話状態は終了する（終話とも称する）。このとき、図１２（ａ）の画面からEnd Callアイコンの色彩が変更された画面（終話状態画面）（図１２（ｂ））に変わる。なお、終話状態画面（図１２（ｂ））が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面は色彩が変更される前の画面（図１２（ａ））に戻る。

【0122】

Conversationアイコンが中央に位置する画面（図１２（ｅ））が表示されている状態でConversationアイコンが選択され、決定ボタン２０２ｅが押下されると、画面は連絡先（コンタクト先）一覧を表示するコンタクトリスト画面（図１２（ｆ））に変わる。作業者はコンタクト先を選択してコールできる。図１２（ｆ）の画面が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面は図１２（ｅ）の画面に戻る。

【0123】

Messageアイコンが中央に位置する画面（図１２（ｇ））が表示されている状態でMessageアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面はメッセージ一覧を表示するメッセージ画面（図１２（ｈ））に変わる。メッセージ画面は、オペレータ端末１２から送られてきてモバイルＰＣ１６に保存されたテキストメッセージを示す。メッセージ画面（図１２（ｈ））が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面は図１２（ｇ）の画面に戻る。

【0124】

Sign-Inアイコンが中央に位置する画面（図１２（ｃ））が表示されている状態でSign-Inアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面はサインイン画面（図１２（ｄ））に変わる。このとき、サインイン画面には、インターネット通信アプリケーション５０９の作業者のアカウント情報５８０が表示される。また、作業者はボタン操作によってサインイン画面上でサインインを行うことができる。サインイン画面が表示されている状態で決定ボタン２０２ｅが長押しされた場合、図１２（ｃ）の画面に戻る。

【0125】

図１３は、コンテンツエリア５３０に位置するアイコンが選択された場合の画面の遷移の一例を示す。

【0126】

コンテンツエリア５３０には、Picture、Photo、PDF、Folder_10等のアイコンが配置される。なお、コンテンツエリア５３０に配置されるアイコンの種類はこれらの種類に限られない。

【0127】

まず、左右のスクロールについて説明する。

【0128】

図１２における説明と同様に、ライトボタン２０２ｂ／レフトボタン２０２ｄが押下されると、アイコン全体が左／右に移動され、フォーカスが右／左に移動され、画面はフォーカスのあるアイコンが中央に位置する画面に切り替わる。

【0129】

なお、コンテンツエリア５３０のアイコンの中の左端のPictureアイコンが画面の中央に位置するホーム画面が表示されている時にレフトボタン２０２ｄが押下された場合、コンテンツエリア５３０のアイコンの中の右端のFolder_10アイコンが中央に位置する画面に遷移させてもよいし、Pictureアイコンが中央に位置する画面のままとしてもよい。

【0130】

同様に、コンテンツエリア５３０のアイコンの中の右端のFolder_10アイコンが画面の中央に位置するホーム画面が表示されている時にライトボタン２０２ｂが押下された場合、コンテンツエリア５３０のアイコンの中の左端のPictureアイコンが中央に位置する画面に遷移させてもよいし、Folder_10アイコンが中央に位置する画面のままとしてもよい。

【0131】

次に、各アイコンの選択による画面の遷移について説明する。ここでは、例としてPictureアイコン、Photoアイコン、Folder_10アイコンが選択された場合の画面の遷移について説明する。

【0132】

Pictureアイコンが中央に位置する画面（図１３（ａ））が表示されている状態でPictureアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面はPictureフォルダに保存されているファイルの一覧を示す画面（図１３（ｂ））に変わる。ファイル一覧画面はフォーカスのあるファイルの内容を示すサムネイル５８１を含む。Pictureフォルダには、オペレータ端末１２から受信したJPEGファイル等が保存されている。作業者は、ファイル一覧から所望のファイルを選択し、選択したJPEGファイル等を閲覧することができる。また、ファイル一覧画面が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面はPictureアイコンが中央に位置する画面（図１３（ａ））に戻る。

【0133】

Photoアイコンが中央に位置する画面（図１３（ｃ））が表示されている状態でPhotoアイコンが選択され決定ボタン２０２ｅが押下された場合、画面はPhotoフォルダに保存されているファイルの一覧を示す画面（図１３（ｄ））に変わる。ファイル一覧画面はフォーカスのあるファイルの内容を示すサムネイル５８２を含む。Photoフォルダはカメラ１１６で撮影された写真等を保存している。作業者は、ファイル一覧から所望のファイル（写真等）を選択し、選択されたファイル（写真等）を閲覧することができる。また、ファイル一覧画面が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面はPhotoアイコンが中央に位置する画面（図１３（ｃ））に戻る。

【0134】

Folder_10アイコンが中央に位置する画面（図１３（ｅ））が表示されている状態でFolder_10アイコンが選択され決定ボタン２０２ｅが押下された場合、画面はFolder_10という名称が付されたユーザフォルダに保存されているファイルの一覧を示す画面（図１３（ｆ））に変わる。ファイルは写真、静止画像、動画等様々なファイルを含む。ファイル一覧画面はフォーカスのあるファイルの内容を示すサムネイル５８３を含む。Folder_10（ユーザフォルダ）は、作業者によって選択されたファイルを保存する。作業者は、ファイル一覧から所望のファイルを選択し、選択されたファイルを閲覧できる。また、ファイル一覧画面（図１３（ｆ））が表示されている状態で決定ボタン２０２ｅが長押しされた場合、画面はFolder_10アイコンが中央に位置する画面（図１３（ｅ））に戻る。

【0135】

図１４は、ツールエリア５４０に位置するアイコンが選択された場合の画面の遷移の一例を示す。

【0136】

図１４に示す例では、ツールエリア５４０には、Video、Camera、Settingsの３つのアイコンが配置されている。なお、ツールエリア５４０に配置されるアイコンの種類はこれらに限られない。

【0137】

まず、左右のスクロールについて説明する。

【0138】

図１２、図１３における説明と同様に、ライトボタン２０２ｂ／レフトボタン２０２ｄが押下されると、アイコン全体が左／右に移動され、フォーカスが右／左に移動され、画面はフォーカスのあるアイコンが中央に位置する画面に切り替わる。

【0139】

なお、ツールエリア５４０のアイコンの中の左端のVideoアイコンが中央に位置するホーム画面が表示されている時にレフトボタン２０２ｄが押下された場合、ツールエリア５４０のアイコンの中の右端のSettingsアイコンが中央に位置する画面に遷移させてもよいし、Videoアイコンが中央に位置する画面のままとしてもよい。

【0140】

同様に、ツールエリア５４０のアイコンの中の右端のSettingsアイコンが中央に位置する画面が表示されている時にライトボタン２０２ｂが押下された場合、ツールエリア５４０のアイコンの中の左端のVideoアイコンが中央に位置する画面に遷移させてもよいし、Settingsアイコンが中央に位置する画面のままとしてもよい。

【0141】

次に、各アイコンの選択による画面の遷移について説明する。ここでは、例としてVideoアイコン、Cameraアイコン、Settingsアイコンが選択された場合の画面の遷移について説明する。

【0142】

Videoアイコンが中央に位置する画面（図１４（ａ））が表示されている状態で、Videoアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面は動画撮影用の画面（図１４（ｂ））に変わる。また、動画撮影用の画面が表示された状態で決定ボタン２０２ｅが長押しされた場合、画面はVideoアイコンが中央に位置する画面（図１４（ａ））に戻る。

【0143】

Cameraアイコンが中央に位置する画面（図１４（ｃ））が表示されている状態で、Cameraアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面は写真撮影用の画面（図１４（ｄ））に変わる。また、写真撮影用の画面が表示された状態で決定ボタン２０２ｅが長押しされた場合、画面はCameraアイコンが中央に位置する画面（図１４（ｃ））に戻る。

【0144】

Settingsアイコンが中央に位置する画面（図１４（ｅ））が表示されている状態で、Settingsアイコンが選択され、決定ボタン２０２ｅが押下された場合、画面は設定画面（図１４（ｆ））に変わる。また、設定画面アプリケーションが表示された状態で決定ボタン２０２ｅが長押しされた場合、Settingsアイコンが中央に位置する画面（図１４（ｅ））に戻る。

【0145】

[遠隔支援機能]
次に、遠隔支援アプリケーション５０３によって実行される遠隔支援機能の概要について図１５を用いて説明する。

【0146】

(1)通話機能
この機能は、図１５（ａ）に示すように、モバイルＰＣ１６とオペレータ端末１２との双方向の通話を行うことである。モバイルＰＣ１６からインターネット通信アプリケーション５０９に含まれるコンタクト先を指定してオペレータ端末１２にコールすることができる。また、オペレータ端末１２からのコールに対してモバイルＰＣ１６が応答することもできる。

【0147】

(2)ライブ映像配信機能
この機能は、図１５（ｂ）に示すように、モバイルＰＣ１６とオペレータ端末１２との通話中に、モバイルＰＣ１６はカメラ１１６で撮影しているウェアラブルデバイス２３のリアルタイム映像をオペレータ端末１２にビデオ配信することである。ライブ映像の配信は、モバイルＰＣ１６からオペレータ端末１２に対してのみ（一方向のみ）可能である。

【0148】

(3)静止画像の送受信機能
この機能は、図１５（ｃ）に示すように、モバイルＰＣ１６とオペレータ端末１２との通話中に、ライブ映像の静止画キャプチャやカメラ１１６で撮影した写真をモバイルＰＣ１６からオペレータ端末１２に送ることである。また、図１５（ｄ）に示すように、オペレータ端末１２はモバイルＰＣ１６から送られてきた静止画像又は自身が保存している静止画像に文字や絵等を書き込む等して編集した画像（アノテーション付画像）を作成することもできる。モバイルＰＣ１６とオペレータ端末１２との通話中にモバイルＰＣ１６はオペレータ端末１２からの編集画像（アノテーション付画像）を受信してディスプレイ１２４に表示させることができる。

【0149】

(4)画面共有機能
この機能は、図１５（ｅ）に示すように、モバイルＰＣ１６とオペレータ端末１２との通話中に、オペレータ端末１２のデスクトップ画面全体又はあるアプリケーション画面を共有するための操作が行われた場合、オペレータ端末１２のＬＣＤ６４に表示されているデスクトップ画面全体又は任意のアプリケーションのウィンドウがディスプレイ１２４に表示されることである。これにより、オペレータ端末１２のＬＣＤ６４とウェアラブルデバイス本体２４のディスプレイ１２４とで画面が共有される。

【0150】

(5)テキストメッセージの送信機能。

【0151】

この機能は、図１５（ｆ）に示すように、オペレータ端末１２からモバイルＰＣ１６に対してテキストメッセージを送信することである。このテキストメッセージの送信は通話中に限らず、通話中でなくとも可能である。このテキストメッセージは、モバイルＰＣ１６によって受信され、ディスプレイ１２４に表示される。

【0152】

[遠隔支援の呼び出し]
作業者は遠隔支援の各機能をコミュニケーションエリア５２０から呼び出すことができる。コミュニケーションエリア５２０に配置されているアイコンEnd Call、Conversation、Message、Sign-Inの中から１つのアイコンが選択され、決定ボタン２０２ｅが押されると、選択されたアイコンに対応する機能が呼び出され、実行される。

【0153】

以下で、遠隔支援機能について詳しく説明する。

【0154】

[遠隔支援アプリケーションの画面構成]
遠隔支援機能について説明する前に、ウェアラブルビューワーを利用する作業者とオペレータ端末１２を利用するオペレータとが通話中に、ディスプレイ１２４に表示される画面（通話中画面）について図１６を用いて説明する。

【0155】

通話中画面は、相手情報エリア６０１、機能アイコンエリア６０２、プレビューエリア６０３、メッセージエリア６０４、ステータスエリア５６０，５７０から構成される。

【0156】

相手情報エリア６０１には、通話相手の情報が表示される。具体的には、相手情報エリア６０１には、モバイルＰＣ１６と音声接続しているオペレータ端末１２を利用するオペレータの氏名、インターネット通信アプリケーション５０９のサーバに登録されているオペレータ（通話相手）の写真が表示される。もし、インターネット通信アプリケーション５０９のサーバに通話相手の写真が登録されていなければ、ダミーの画像が表示されてもよい。

【0157】

機能アイコンエリア６０２には、終話アイコン６０２ａ、ライブ映像配信開始／停止アイコン６０２ｂ、画像撮影モード切替アイコン６０２ｃが配置される。ライトボタン２０２ｂ又はレフトボタン２０２ｄでアイコンを選択し、決定ボタン２０２ｅを押下すると、選択されたアイコンに対応する機能が実行される。

【0158】

終話アイコン６０２ａが選択され、決定ボタン２０２ｅが押下されると、モバイルＰＣ１６とオペレータ端末１２との間の通話が終了する。終話アイコン６０２ａは、コミュニケーションエリア５２０に配置されているEnd Callアイコンと同じ機能を実行する。

【0159】

ライブ映像配信開始／停止アイコン６０２ｂが選択され、決定ボタン２０２ｅが押下されると、ライブ映像の配信が開始／停止される。

【0160】

画像撮影モード切替アイコン６０２ｃが選択され、決定ボタン２０２ｅが押下されると、カメラ１１６の画像撮影モードが変わる。静止画像を撮影するモードには、静止画像を標準画質（例えば、640×360）で撮影可能な標準モードと、静止画像を高画質（例えば、2048x1536）で撮影可能な高画質モードとがあり、画像撮影モード切替アイコン６０２ｃの押下操作により、標準モード／高画質モードが切替わる。

【0161】

プレビューエリア６０３には、ライブ映像が配信されている間、ウェアラブルデバイス本体２４のカメラ１１６で撮影しているライブ映像が表示される。このとき、ライブ映像は第１の色の枠（図１６の太線）で囲まれて表示される。言い替えると、ライブ映像配信中はプレビューエリア６０３の周囲が第１の色の枠で縁取られる。第１の色は後述する第２の色と異なる色であればどのような色彩を用いてもよい。以下では、第１の色は緑色であるとする。

【0162】

ライブ映像の配信を停止している場合、プレビューエリア６０３には映像は表示されない。また、高画質モードにより静止画像が撮影されているときは、プレビューエリア６０３にはカメラ１１６のプレビュー画面が表示される。高画質モードによる撮影についての詳細は後述する。

【0163】

メッセージエリア６０４には、オペレータ端末１２から受信したテキストメッセージが表示される。オペレータ端末１２によるテキストメッセージの送信は、例えば、インターネット通信アプリケーション５０９のインスタントメッセージ機能により達成される。また、メッセージエリア６０４には、作業者へのガイダンスが表示されることもある。例えば、映像の配信が適切に実行されなかった場合等にはエラーを示すメッセージが表示される。

【0164】

図１０にも示したようにライブ映像の配信中に動画の録画中であるとき、ステータスエリア５６０の最も左側には撮影中アイコン５６０ａが表示される。モバイルＰＣ１６とオペレータ端末１２との間が通話中である場合、ステータスエリア５７０の最も左側には通話中アイコン６６０が表示される。

【0165】

[通話機能]
先ず、通話機能について説明する。
(1)通話の開始
モバイルＰＣ１６とオペレータ端末１２との間の通話は、モバイルＰＣ１６からの要求により開始される場合と、オペレータ端末１２からの要求により開始される場合とがある。

【0166】

先ず、モバイルＰＣ１６からの要求により通話が開始される場合について説明する。

【0167】

作業者は、図１２（ｆ）に示すコンタクトリスト画面から所望の連絡先を選択して決定ボタン２０２ｅを押下することにより、選択された連絡先にコールする（通話要求）ことができる。コンタクトリスト画面は、コミュニケーションエリア５２０に配置されているConversationアイコン（図１２（ｅ））を選択して決定ボタン２０２ｅを押下することにより表示される。

【0168】

連絡先の決定操作により、モバイルＰＣ１６から連絡先に対応するオペレータ端末１２に通話要求が行われ、オペレータ端末１２で受信操作が行われると、モバイルＰＣ１６とオペレータ端末１２との通信路が確立される。これにより、モバイルＰＣ１６とオペレータ端末１２との間で通話が開始される。通話が開始されると、ディスプレイ１２４の画面が、コンタクトリスト画面（図１２（ｆ））から図１６に示す通話中画面に切り替わる。また、常時設置されているステータスエリア５７０の最も左側のアイコンは、待受中であることを示す通話状態アイコン５７０ａから通話中であることを示す通話中アイコン６０６に変わる。

【0169】

カメラ１１６で映像を撮影しているときに、モバイルＰＣ１６からの要求によりオペレータ端末１２と通話が開始されると、カメラ１１６で撮影されたライブ映像はオペレータ端末１２に自動的に送信開始される。

【0170】

次に、オペレータ端末１２からの要求により通話が開始される場合について説明する。

【0171】

オペレータ端末１２からモバイルＰＣ１６に通話要求が行われると、ディスプレイ１２４に後述する呼出画面（図２５）が表示される。この呼出画面が表示されている状態で決定ボタン２０２ｅが押下されると、モバイルＰＣ１６とオペレータ端末１２との通信路が確立される。これにより、モバイルＰＣ１６とオペレータ端末１２との間で通話が開始される。通話の開始前にウェアラブルデバイス本体２４のディスプレイ１２４に表示されている画面が通話中画面に切り替わる。この通話中画面は、図１６の画面においてプレビューエリア６０３にライブ映像が表示されていない画面に相当する。また、ステータスエリア５７０の最も左側のアイコンが通話状態アイコン５７０ａから通話中アイコン６０６に変わる。なお、遠隔支援アプリケーション５０３は常駐しているため、モバイルＰＣ１６はいつでもオペレータ端末１２からのコール（通話要求）を受けることができる。

【0172】

カメラ１１６で映像を撮影しているときにオペレータ端末１２からの要求によりモバイルＰＣ１６と通話が開始されると、ライブ映像配信開始／停止アイコン６０２ｂが押下された場合、カメラ１１６で撮影されたライブ映像がオペレータ端末１２に送信開始される。

【0173】

上述したようにモバイルＰＣ１６からの要求により通話が開始された場合と、オペレータ端末１２からの要求により通話が開始された場合とで、ライブ映像の配信開始のタイミングが異なる。この理由は、モバイルＰＣ１６からの要求により通話が開始された場合、作業者がオペレータにコールして現地の現状をいち早くオペレータに伝えたいという意思があると考えられるため、通話路が確立されたら自動的にライブ映像配信が開始される構成にしている。他方、オペレータ端末１２からの要求により通話が開始される場合は、作業者が現地の現状をオペレータに積極的に伝えたいという意思があるとは必ずしも言い得ないことから、通話路が確立された後に作業者による指示が入力された場合にライブ映像配信が開始される構成になっている。
(2)通話の終了
ホーム画面のコミュニケーションエリア５２０に配置されているEnd Callアイコンが選択され、決定ボタン２０２ｅが押下される又は図１６に示す通話中画面の終話アイコン６０２ａが選択され、決定ボタン２０２ｅが押下されると、通話が終了（終話）される。終話されると、通話中画面がホーム画面に戻り、ステータスエリア５７０の左側のアイコンが通話中アイコン６０６から通話状態アイコン５７０ａに変わる。

【0174】

また、オペレータ端末１２から終話操作が行われた場合も上述の操作で終話される。

【0175】

遠隔支援アプリケーション５０３以外のアプリケーションが使用されている間にオペレータから終話操作された場合、使用中のアプリケーションの実行により表示されている画面が引き続き表示され、ホーム画面には切り替えられない。しかし、ステータスエリア５７０の左側のアイコンは、通話中アイコン６０６から通話状態アイコン５７０ａに変わる。

【0176】

[ライブ映像配信機能]
次に、ライブ映像配信機能について図１７を用いて説明する。

【0177】

図１７（ａ）は、終話アイコン６０２ａが選択されている通話中画面を示す。この画面は、オペレータ端末１２から通話要求が行われてモバイルＰＣ１６との通話が開始されたことにより表示される。ここで、ライトボタン２０２ｂが押下されると、通話中画面は図１７（ｂ）に示すようにライブ映像配信開始／停止アイコン６０２ｂが選択された画面に切り替わる。ここで、決定ボタン２０２ｅが押下（指示入力）されると、図１７（ｃ）に示すようにライブ映像の配信が開始される。このように、オペレータ端末１２から通話要求が行われてモバイルＰＣ１６との通話が開始された場合、作業者による指示の入力を条件としてライブ映像の配信が開始される。

【0178】

上述したように、モバイルＰＣ１６から通話要求が行われてオペレータ端末１２との通話が開始された場合、ライブ映像配信は自動で開始される。

【0179】

ライブ映像配信が開始されると、カメラ１１６が撮影しているライブ映像がオペレータ端末１２に配信される。なお、ライブ映像の配信の方向はモバイルＰＣ１６からオペレータ端末１２への一方向のみであり、オペレータ端末１２からモバイルＰＣ１６へライブ映像が配信されることはない。配信中のライブ映像はプレビューエリア６０３に表示される。このとき、図１７（ｃ）に示すようにライブ映像配信中であることを示すためにライブ映像が緑色の枠で囲まれる。

【0180】

ライブ映像の配信中にライブ映像配信開始／停止アイコン６０２ｂが選択され、決定ボタン２０２ｅが押下された場合、ライブ映像配信が停止される。停止されると、図１７（ｃ）に示す画面が図１７（ｂ）に示す画面に戻る。

【0181】

[静止画像の送受信機能]
次に、静止画像の送受信機能について、(1)静止画像の送信と(2)静止画像の受信に分けて説明する。

【0182】

(1)静止画像の送信
通話中、カメラ１１６により撮影された静止画像はオペレータ端末１２に送信され得る。静止画像を撮影する際のカメラ１１６のモードは標準モードと高画質モードがある。

【0183】

先ず、標準モードで静止画像を撮影する場合について説明する。標準モードの場合、ライブ映像配信中に静止画像を撮影し、オペレータ端末１２に送信することができる。

【0184】

図１８（ａ）に示すように、ライブ映像配信中に機能アイコンエリア６０２に配置されている一つのアイコンが選択されている状態でライトボタン２０２ｂが押下された場合、プレビューエリア６０３が選択可能な状態となる（図１８（ｂ））。プレビューエリア６０３が選択されると、カメラ１１６が撮影しているライブ映像は第２の色で囲まれて表示される。即ち、プレビューエリア６０３の枠が緑色から第２の色（例えば、白色）になる。なお、プレビューエリア６０３には、カメラ１１６が撮影中であることを示すアイコン６０７も表示される。なお、第２の色は第１の色と異なる色であればどのような色彩を用いてもよい。以下では、第２の色は白色であるとする。

【0185】

この状態で、決定ボタン２０２ｅが押下されると、ライブ映像の画面がキャプチャされる（図１８（ｃ））。キャプチャされた静止画像は通話相手（通話接続中のオペレータ端末１２）に自動的に送信される。静止画像が撮影された後、撮影された静止画像の解像度を640×360ピクセルにするため、自動的に全画面表示される（図１８（ｄ））。

【0186】

撮影された静止画像のオペレータ端末１２への送信が完了した後、画面はライブ映像配信中の通話中画面（図１８（ｂ））に戻る。また、図１８（ｂ）の画面が表示された状態で決定ボタン２０２ｅが複数回押下された場合、押下毎に画面がキャプチャ（静止画像が撮影）されオペレータ端末１２に送信される。

【0187】

次に、高画質モードで静止画像を撮影する場合について図１９を用いて説明する。

【0188】

カメラ１１６は、標準モードと高画質モードとが切り替え可能であるが、高画質モードによる静止画像の撮影は、ライブ映像の配信中は行うことができない。このため、ライブ映像をオペレータ端末１２に送信している間にカメラ１１６が高画質モードで静止画像を撮影開始すると、ライブ映像の送信が自動的に停止される。

【0189】

図１９（ａ）はライブ映像の配信が行われていないときの通話中画面を示す。この状態で、ライトボタン２０２ｂ又はレフトボタン２０２ｄが操作され機能アイコンエリア６０２の画像撮影モード切替アイコン６０２ｃにフォーカスが当てられた状態で決定ボタン２０２ｅが押下されると、カメラ１１６の画像撮影モードが標準モードから高画質モードに切り替わる。図１９（ａ）の画面は図１９（ｃ）に示す画面に切り替わる。撮影モードが高画質モードへ切り替えられた旨の注意文がメッセージエリア６０４に表示されてもよい。

【0190】

図１９（ｂ）はライブ映像の配信が行われているときの通話中画面を示す。この状態で、ライトボタン２０２ｂ又はレフトボタン２０２ｄが操作され機能アイコンエリア６０２の画像撮影モード切替アイコン６０２ｃにフォーカスが当てられた状態で決定ボタン２０２ｅが押下されると、ライブ映像の配信が自動的に停止され、カメラ１１６の画像撮影モードが高画質モードに切り替わる。図１９（ｂ）の画面は図１９（ｃ）の画面に切り替わる。撮影モードが高画質モードへ切り替えられ、ライブ映像配信が停止された旨の注意文がメッセージエリア６０４に表示されてもよい。

【0191】

高画質モードに変わると、プレビューエリア６０３にカメラ１１６のプレビューが表示される。プレビューエリア６０３には、カメラ１１６による撮影が行われようとしていることを示すアイコン６０７が表示される。

【0192】

図１９（ｃ）の画面が表示されている状態でライトボタン２０２ｂが押下されると、プレビューエリア６０３が選択可能となり、図１９（ｄ）に示すように、プレビューエリア６０３にカメラ１１６のプレビューが白枠で囲まれて表示される。即ち、プレビューエリア６０３の枠が緑色から白色になる。この状態で決定ボタン２０２ｅが押下されると、高画質モードで写真（静止画像）が撮影されてオペレータ端末１２に送信される。なお、決定ボタン２０２ｅが複数回押下された場合、押下毎に高画質モードで写真（静止画像）が撮影され、撮影された写真（静止画像）がオペレータ端末１２に送信される。なお、写真（静止画像）撮影時にはシャッター音が鳴動するように構成してもよい。

【0193】

写真（静止画像）撮影が行われた後、ディスプレイ１２４に撮影された写真（静止画像）は３秒又は送信完了するまで表示される（図１９（ｅ））。撮影された写真（静止画像）のオペレータ端末１２への送信が完了した後、画面はカメラ１１６のプレビューが白色の枠で囲まれて表示される画面（図１９（ｄ））に戻る。

【0194】

なお、写真（静止画像）撮影が行われた後、カメラ１１６の画像撮影モードが自動的に高画質モードから標準モードに切り替わる構成にしてもよい。即ち、ライブ映像配信中に高画質モードに切り替えられた場合には、撮影終了後自動的に図１９（ｅ）に示す画面が図１９（ｂ）に示す画面に切り替えられ、ライブ映像配信していないときに高画質モードに切り替えられた場合には、撮影終了後自動的に図１９（ｅ）に示す画面が図１９（ａ）に示す画面に切り替えられてもよい。

【0195】

(2)静止画像の受信
モバイルＰＣ１６は、オペレータ端末１２と通話中、オペレータ端末１２から送られてきた静止画像を受信すると、受信した静止画像をウェアラブルデバイス本体２４に送信し、ディスプレイ１２４に表示（全画面表示）させる。通話中にホーム画面等の他の画面が表示されているときでもモバイルＰＣ１６は静止画像を受信でき、ディスプレイ１２４に表示されている画面上に受信された静止画像を自動的に表示（全画面表示）させる。ここで、決定ボタン２０２ｅが押下された場合には、ディスプレイ１２４に表示された画面から受信した静止画像が消去される。また、ディスプレイ１２４にはオペレータ端末１２から静止画像が受信される毎に最新の画像が表示される。

【0196】

モバイルＰＣ１６で受信された静止画像はストレージデバイス３３０に保存される。このため、作業者はコンテンツエリア５３０に配置されている受信ファイルを保存するフォルダに対応するアイコンを選択し、決定ボタン２０２ｅを押下することにより、受信された静止画像を閲覧することができる。

【0197】

[画面共有機能]
次に、画面共有機能について説明する。

【0198】

モバイルＰＣ１６がオペレータ端末１２との通話中にオペレータ端末１２からの画面共有のための操作が行われると、ディスプレイ１２４に画面共有の対象の画面（共有画面）が自動的に表示される。共有画面は全画面表示されるため、元のウィンドウのアスペクト（態様）は維持されない。必要に応じてオペレータ端末１２でサイズ調整が行われる。

【0199】

共有画面は、ライトボタン２０２ｂの押下により一時的に非表示にすることができる。このとき、ディスプレイ１２４には、相手情報エリア６０１と機能アイコンエリア６０２との間の領域に共有画面のサムネイルが表示される通話中画面が表示される。

【0200】

共有画面は、レフトボタン２０２ｄの複数回の押下により再表示（全画面表示）することができる。

【0201】

[テキストメッセージの受信]
次に、モバイルＰＣ１６がオペレータ端末１２からテキストメッセージを受信する機能について図２０を用いて説明する。

【0202】

モバイルＰＣ１６は、インターネット通信アプリケーション５０９のインスタントメッセージ機能によりオペレータ端末１２から送信されたテキストメッセージを受信することができる。また、モバイルＰＣ１６は、通話中でないオペレータ端末１２からのテキストメッセージも受信可能である。

【0203】

モバイルＰＣ１６とオペレータ端末１２との通話中にモバイルＰＣ１６が通話中の相手（通話接続中のオペレータ端末１２）からテキストメッセージを受信した場合、図２０（ａ）に示すように受信したメッセージはメッセージエリア６０４に表示される。

【0204】

通話中の相手以外からのテキストメッセージが受信されることもある。例えば、オペレータ端末Ａ（図示しない）とモバイルＰＣ１６とが通話接続している間に、モバイルＰＣ１６が通話接続していないオペレータ端末Ｂ（図示しない）からのテキストメッセージを受信する場合がある。また、図２０（ｂ）に示すように作業者が他のアプリケーションを実行している間、即ち実行中のアプリケーションの画面がディスプレイ１２４に表示されている間に、通話接続していないオペレータ端末１２からのテキストメッセージを受信する場合がある。

【0205】

モバイルＰＣ１６と通話中以外の相手（通話接続していないオペレータ端末１２）からモバイルＰＣ１６に届いたテキストメッセージは、ディスプレイ１２４に表示されている画面にポップアップで表示される。具体的には、受信されたテキストメッセージが表示されたポップアップエリア６０８が表示される。このとき、受信されたテキストメッセージとともに送信者の名前が表示される。

【0206】

なお、メッセージエリア６０４にポップアップ表示できるテキストメッセージは１行のみであり、文字数は先頭から60文字(半角)程度となる。

【0207】

図２０（ｂ）に示す場合において、ポップアップで表示されたテキストメッセージは、決定ボタン２０２ｅが押下されると、非表示とされる。

【0208】

他方、図２０（ａ）に示す場合において、通話中画面のメッセージエリア６０４に表示されているテキストメッセージは終話するまで表示され続ける。

【0209】

なお、テキストメッセージがメッセージエリア６０４に表示されている又はポップアップ表示されているときに、新しいテキストメッセージがオペレータ端末１２からモバイルＰＣ１６に届いた場合、既に表示されているテキストメッセージ（古いメッセージ）は画面上から消え、新しく受信されたテキストメッセージのみが表示される。

【0210】

また、受信されたテキストメッセージは、モバイルＰＣ１６に保存され、作業者はインスタントメッセージ履歴機能を利用することにより、保存されたテキストメッセージを閲覧することができる（図１２（ｈ）参照）。

【0211】

[ファイルビューワー]
次に、モバイルＰＣ１６が備えるビューワー機能（ビューワーアプリケーション）について説明する。

【0212】

ビューワー機能とは、ホーム画面上のコンテンツエリア５３０に配置されているアイコンを選択することによりモバイルＰＣ１６に保存されている写真（静止画像）、ビデオ（動画）、PDFファイル等を閲覧することを可能にする機能である。

【0213】

(1)フォルダ内のファイルの表示
コンテンツエリア５３０には、上述したようにフォルダに相当するアイコンが配置されている。コンテンツエリア５３０に配置されたアイコンの中の任意のアイコンが選択され、決定ボタン２０２ｅが押されると、アイコンに対応するフォルダ内に保存されているファイルが一覧表示される（図１３（ｂ）、（ｄ）、（ｆ）参照）。この状態でライトボタン２０２ｂ／レフトボタン２０２ｄによりファイル一覧（ファイルリスト）から所望のファイルが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルの拡張子に対応したビューワーアプリケーション（JPEG ビューワーアプリケーション、MP4プレーヤアプリケーション、PDFリーダアプリケーション）によりファイルのコンテンツが表示される。ファイルリストにおけるファイルの並び順がファイルの作成日時に基づく降順とされている場合、作成日時が新しいファイルが上側に配置される。

【0214】

コンテンツエリア５３０には、標準フォルダに対応するフォルダのアイコンとしてPicture（画像）、Video（動画）、PDF、カメラ、Received Picture（受信ファイル）、Sent Picture（送信ファイル）等及びユーザフォルダに対応するフォルダのアイコンが配置されている。図１３（ｃ）に示すようにPhotoアイコンが配置されてもよい。なお、フォルダに対応するアイコンの配置は設定ファイルで別途定義されており、セッティング等で変更することができる。

【0215】

以下の説明では、画像ファイル、動画ファイル、PDFファイルが同一のフォルダ、例えば、C:＼Users＼public＼Documents＼TosRC＼で示されるフォルダ（以下、TosRCフォルダと称する）に保存されているとする。

【0216】

Picture（画像）アイコンは、モバイルＰＣ１６にあらかじめ保存されているJPEGファイルにアクセスするためのアイコンである。Pictureアイコンが選択され、決定ボタン２０２ｅが押下されると、TosRCフォルダに保存されているファイルの中のJPEGファイルのみが一覧表示される。一覧表示されたファイルの１つが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルがJPEG ビューワーアプリケーション５０５ａによりディスプレイ１２４に表示される。

【0217】

Video（動画）アイコンは、モバイルＰＣ１６にあらかじめ保存されているMP4ファイルにアクセスするためのアイコンである。Videoアイコンが選択され、決定ボタン２０２ｅが押下されると、TosRCフォルダに保存されているファイルの中のMP4ファイルのみが一覧表示される。一覧表示されたファイルの１つが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルがMP4プレーヤアプリケーション５０５ｂによりディスプレイ１２４に表示される。

【0218】

PDFアイコンは、モバイルＰＣ１６にあらかじめ保存されているPDFファイルにアクセスするためのアイコンである。PDFアイコンが選択され、決定ボタン２０２ｅが押下されると、TosRCフォルダに保存されているファイルの中のPDFファイルのみが一覧表示される。一覧表示されたファイルの１つが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルがPDFリーダアプリケーション５０５ｃによりディスプレイ１２４に表示される。

【0219】

カメラアイコンが選択され、決定ボタン２０２ｅが押下されると、カメラアプリケーション５０４で撮影した写真（静止画像）やビデオ（動画）の一覧が表示される。なお、カメラ１１６で撮影された写真（静止画像）やビデオ（動画）はユーザアカウント毎のフォルダに保存されている。例えば、撮影された写真（静止画像）やビデオ（動画）は、C:＼Users＼[User Name]＼Documents＼TosRC＼Camera＼で示されるフォルダに保存されている。

【0220】

一覧表示されたファイルの中の写真（静止画像）のファイルの１つが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルがJPEG ビューワーアプリケーション５０５ａによりディスプレイ１２４に表示される。一覧表示されたファイルの中のビデオ（動画）のファイルの１つが選択され、決定ボタン２０２ｅが押下されると、選択されたファイルがMP4プレーヤアプリケーション５０５ｂによりディスプレイ１２４に表示される。

【0221】

Received Pictureアイコンが選択され、決定ボタン２０２ｅが押下されると、遠隔支援アプリケーション５０３の機能によりオペレータ端末１２から受信したJPEGファイルの一覧が表示される。なお、オペレータ端末１２から受信したJPEGファイルはユーザアカウント毎のフォルダに保存されている。例えば、オペレータ端末１２から受信したJPEGファイルは、C:＼Users＼[User Name]＼Documents＼TosRC＼Received＼で示されるフォルダに保存されている。

【0222】

一覧表示されたJPEGファイルの中の１つが選択され、決定ボタン２０２ｅが押下されると、選択されたJPEGファイルがJPEG ビューワーアプリケーション５０５ａによりディスプレイ１２４に表示される。

【0223】

Sent Pictureアイコンが選択され、決定ボタン２０２ｅが押下されると、遠隔支援アプリケーション５０３の機能によりオペレータ端末１２から送信したJPEGファイルの一覧が表示される。なお、オペレータ端末１２から送信したJPEGファイルはユーザアカウント毎のフォルダに保存されている。例えば、オペレータ端末１２に送信したJPEGファイルは、C:＼Users＼[User Name]＼Documents＼TosRC＼Sent＼で示されるフォルダに保存されている。

【0224】

一覧表示されたJPEGファイルの中の１つが選択され、決定ボタン２０２ｅが押下されると、選択されたJPEGファイルがJPEG ビューワーアプリケーション５０５ａによりディスプレイ１２４に表示される。

【0225】

続いて、ユーザフォルダについて説明する。

【0226】

ビューワーアプリケーション５０５は用途を自由に決めることができるフォルダをサポートしているため、作業者はユーザフォルダを設けることができる。ユーザフォルダ内には、JPEGファイル、MP4ファイル、PDFファイルが保存され得る。ユーザフォルダは最大５個まで設けられる。作業者は、設定ファイルによりパス(フォルダの場所)やコンテンツエリア５３０に表示するフォルダ名を指定することができる。表示名（フォルダ名）の文字数は最大32文字(半角)とする。図１３の例では、ユーザフォルダにはFolder_10という名称が付されている。

【0227】

次に、ビューワーアプリケーション５０５に含まれるJPEG ビューワーアプリケーション５０５ａ、MP4プレーヤアプリケーション５０５ｂ、PDFリーダアプリケーション５０５ｃについて説明する。

【0228】

ファイル一覧から作業者によって選択されたファイルがJPEGファイルの場合、JPEG ビューワーアプリケーション５０５ａが起動され、選択されたJPEGファイル（静止画像ファイル）がディスプレイ１２４に表示される。

【0229】

ディスプレイ１２４に表示された静止画像は、決定ボタン２０２ｅが押下されることにより段階的に拡大される。例えば、決定ボタン２０２ｅが押下される毎に１００％→２００％→３００％→１００%と倍率が変化する。ズーム表示中（拡大表示中）、アップボタン２０２ａ、ライトボタン２０２ｂ、ダウンボタン２０２ｃ、レフトボタン２０２ｄが操作されると、表示位置が移動される。

【0230】

なお、作業者は、ウェアラブルデバイス本体２４のタッチパッド１１０を使用してピンチ操作を行うことにより、静止画像を画面上で拡大することができる。また、同様の方法で静止画像を画面上で縮小することもできる。

【0231】

ファイル一覧から作業者によって選択されたファイルがMP4ファイル（動画ファイル）の場合、MP4プレーヤアプリケーション５０５ｂが起動され、選択されたMP4ファイル（動画ファイル）がウェアラブルデバイス２４のディスプレイに表示され、再生される。

【0232】

MP4ファイル（動画ファイル）の再生中に決定ボタン２０２ｅが押下されると、MP4ファイル（動画ファイル）の再生が一時停止する。そして、決定ボタン２０２ｅが再度押下されると、MP4ファイル（動画ファイル）の再生が再開される。

【0233】

ファイル一覧から作業者によって選択されたファイルがPDFファイルの場合、PDFリーダアプリケーション５０５ｃが起動され、選択されたPDFがディスプレイ１２４に表示される。

【0234】

なお、アップボタン２０２ａ、ダウンボタン２０２ｃが操作されると、表示されているPDFファイルのページがスクロール（ページ送り）される。

【0235】

また、ディスプレイ１２４に表示されたPDFファイルは、決定ボタン２０２ｅが押下されると段階的に拡大される。例えば、決定ボタン２０２ｅが押下される毎に１００％→２００％→３００％→４００％→１００%と倍率が変化する。ズーム表示中（拡大表示中）、アップボタン２０２ａ、ライトボタン２０２ｂ、ダウンボタン２０２ｃ、レフトボタン２０２ｄが操作されると、表示位置が移動される。

【0236】

なお、作業者は、ウェアラブルデバイス本体２４のタッチパッド１１０を使用してピンチ操作を行うことにより、PDFファイルをPDFファイルが表示されている画面上で拡大することができる。また、同様の方法で表示されているPDFファイルを画面上で縮小することもできる。

【0237】

[カメラ機能]
次に、モバイルＰＣ１６が備えるカメラ機能について説明する。

【0238】

カメラアプリケーション５０４を利用することにより、ウェアラブルデバイス本体２４のカメラ１１６で写真やビデオを撮影でき、撮影された写真やビデオをモバイルＰＣ１６のストレージデバイス３３０に保存することができる。ホーム画面のツールエリア５４０には、Cameraアイコン（写真撮影アイコン）、Videoアイコン（ビデオ撮影アイコン）が配置されており、Cameraアイコン（写真撮影アイコン）が選択されるとカメラアプリケーション５０４が写真撮影モードで起動され、Videoアイコン（ビデオ撮影アイコン）が選択されるとカメラアプリケーション５０４がビデオ撮影モードで起動される。

【0239】

このように、カメラアプリケーション５０４は、写真撮影モードとビデオ撮影モードの２つのモードをサポートしている。よって、作業者はライトボタン２０２ｂ／レフトボタン２０２ｄを操作することにより、カメラ１１６の撮影モードを切り替えることができる。

【0240】

(1)写真撮影
カメラ１１６が写真撮影モードの場合、決定ボタン２０２ｅが押下される毎にカメラ１１６で写真撮影が実行される。写真撮影時にはシャッター音が鳴動し、ディスプレイ１２４に撮影された写真が3秒間表示される。その後、プレビュー表示に戻る。

【0241】

ここで、写真のサイズは、例えば、2048x1536(4:3)ピクセルである。撮影された写真は、モバイルＰＣ１６の規定の写真フォルダに保存される。上述した例で言うと、C:＼Users＼[User Name]＼Documents＼TosRC＼Camera＼で示されるフォルダに保存される。作業者は、撮影した写真をホーム画面のコンテンツエリア５３０上の操作によりディスプレイ１２４に表示させることができる。具体的には、ホーム画面のコンテンツエリア５３０に配置されているカメラアイコンが選択され、決定ボタン２０２ｅが押下されると、撮影した写真が表示される。

【0242】

(2)ビデオ撮影
カメラ１１６がビデオ撮影モードの場合、決定ボタン２０２ｅが押下されると、ビデオ撮影が開始される。ビデオ撮影中に決定ボタン２０２ｅが再度押下されると、ビデオ撮影が停止される。ビデオ撮影中はディスプレイ１２４に撮影中の画像（プレビュー）が表示される。また、録画中を示すアイコン（図１４（ｂ）のアイコン５９１）が画面に表示される。

【0243】

ここで、映像のサイズは、例えば1080p video @ 30fpsであり、録画可能な時間は、例えば最長１５分である。ビデオ撮影が開始されて最長時間に到達すると、自動的にビデオ撮影が停止される。

【0244】

撮影されたビデオファイルはモバイルＰＣ１６の規定のビデオフォルダに保存される。上述した例で言うと、C:＼Users＼[User Name]＼Documents＼TosRC＼Camera＼で示されるフォルダに保存される。

【0245】

作業者は、撮影したビデオを、ホーム画面のコンテンツエリア５３０上の操作によりディスプレイ１２４上で再生させることができる。具体的には、ホーム画面のコンテンツエリア５３０に配置されているカメラアイコンが選択され、決定ボタン２０２ｅが押下されると、撮影したビデオが再生される。

【0246】

[設定]
続いて、モバイルＰＣ１６及びウェアラブルデバイス２３の動作環境を設定する操作について説明する。設定操作には、設定画面アプリケーション５０７を使用する方法と、クイックセッティングアプリケーション５０８を使用する方法とがある。

【0247】

先ず、設定画面アプリケーション５０７を使用する方法について説明する。

【0248】

図２１（ａ）に示すように、ホーム画面のツールエリア５４０に配置されているSettingsアイコンが選択され、決定ボタン２０２ｅが押下されると、設定画面が表示される。設定画面には、設定項目一覧が表示されている。

【0249】

作業者は、設定画面で以下の事項について設定することができる。

【0250】

(1)ボリューム設定
スピーカ１３０から聞こえる音声のボリュームが変更可能である。設定画面のVolumeが選択され、決定ボタン２０２ｅが押下されると、設定画面が図示せぬボリューム設定画面に切り替わる。

【0251】

(2)音声ミュート
マイク１１２，１２６から入力される音声がミュート可能である。設定画面のMicが選択され、決定ボタン２０２ｅが押下されると、設定画面が図示せぬ音声ミュート設定画面に切り替わる。また、同様の方法で音声のミュートも解除可能である。

【0252】

(3)画面輝度調整
ディスプレイ１２４の輝度が調整可能である。図２１（ａ）に示すように、アップボタン２０２ａ、ライトボタン２０２ｂ、ダウンボタン２０２ｃ、レフトボタン２０２ｄが操作され、設定画面上のBrightnessが選択され、決定ボタン２０２ｅが押下されると、設定画面が輝度設定画面に切り替わる。輝度調整後、決定ボタン２０２ｅが長押しされると、輝度設定画面が設定画面に戻る。

【0253】

(4)LEDライトON/OFF
ライト１１８の点灯／消灯が切り替え可能である。設定画面でLED Lightが選択され、決定ボタン２０２ｅが押下されると、設定画面が図示せぬLEDライト設定画面に切り替わる。

【0254】

(5)Wi-Fi SSID切り替え
設定済SSIDリストから接続アクセスポイントのSSIDが選択できる。このとき、未登録のSSIDは表示されない。

【0255】

(6)Wi-Fi ON/OFF
ブルートゥース／無線ＬＡＮデバイス３４０の有効又は無効を切替えることができる。設定画面でWi-Fiが選択され、決定ボタン２０２ｅが押下されると、設定画面が図示せぬWi-Fi設定画面に切り替わる。

【0256】

(7)バージョン表示
モバイルＰＣ１６にインストールされているアプリケーションのバージョン番号が表示可能である。設定画面アプリケーション上でバージョン表示するためのコンタクト先が選択され、決定ボタン２０２ｅが押下されると、モバイルＰＣ１６にインストールされている各アプリケーションそれぞれのバージョン番号が表示される。

【0257】

(8)ライセンス条項の表示
フロントエンドアプリケーション５０１の使用許諾契約（ＥＵＬＡ）の内容が表示可能である。設定画面アプリケーション上で使用許諾契約（ＥＵＬＡ）の内容を表示するためのコンタクト先が選択され、決定ボタン２０２ｅが押下されると、使用許諾契約（ＥＵＬＡ）の内容が表示される。

【0258】

(9)システムの終了
設定画面上で所定のコンタクト先が選択され、決定ボタン２０２ｅが押下されると、モバイルＰＣ１６のシャットダウン、スリープ、ハイバネーション、再起動が可能である。

【0259】

次に、クイックセッティングアプリケーション５０８を使用する方法について説明する。

【0260】

図２１（ｂ）に示すように、ディスプレイ１２４に任意の画面が表示されている状態で、ダウンボタン２０２ｃが長押しされると、クイックセッティングアプリケーション５０８が起動され、上記任意の画面上にクイックセッティングアプリケーションのメニュー６５０が表示される。クイックセッティングアプリケーション５０８は動作中のアプリケーションが何であるかにかかわらず、いつでも起動可能である。

【0261】

クイックセッティングアプリケーション５０８を使用する場合、設定画面アプリケーション５０７を利用した場合に設定できる事項の中で、(1)ボリューム設定、(2)音声ミュート、(3)画面輝度調整、(4)LEDライトON/OFFについての設定を変更することができる。

【0262】

図２１（ｂ）に示すクイックセッティングアプリケーションのメニュー６５０に示されたアイコンの中から所望のアイコンにフォーカスが当てられ、アップボタン２０２ａ、ダウンボタン２０２ｃが操作されると、(1)～(4)について設定が変更可能である。図２１（ｂ）には、ボリューム設定のためのアイコンにフォーカスが当てられ、音量設定が行われている例が示されている。

【0263】

なお、決定ボタン２０２ｅが長押しされると、クイックセッティングアプリケーション５０８は終了する。

【0264】

[インストーラ]
フロントエンドアプリケーション５０１はインストーラによりモバイルＰＣ１６へインストールされる。インストーラはLync SDK 2013等フロントエンドアプリケーション５０１の動作に必要なモジュールを一括でインストールできる。ただし、インターネット通信アプリケーション５０９、例えばSkype for Businessのクライアントアプリケーション等は別途インストールする必要がある。フロントエンドアプリケーション５０１にはモバイルＰＣ１６にインストールされた後、一定期間経過すると動作しなくなるようなライセンス管理機能が組み込まれている。

【0265】

[Windowsデスクトップ環境のセットアップ]
フロントエンドアプリケーション５０１のモバイルＰＣ１６へのインストール等、ウェアラブルビューワーのセットアップの手順の一例を以下に示す。

【0266】

なお、下記の設定はモバイルＰＣ１６に図示しないディスプレイ、キーボード、マウスを接続して作業を行うものとする。

【0267】

(1)Windowsアカウントの作成
ウェアラブルビューワーを使う作業者に対して標準権限のユーザアカウントが作成され、フロントエンドアプリケーション５０１はそのユーザアカウントで動作される。

【0268】

(2)インターネット通信アプリケーション５０９のインストール
(3)インターネット通信アプリケーション５０９のサーバへの接続
(1)で作成したユーザアカウントでWindowsへのログインが行われる。

【0269】

(4)指紋の登録
モバイルＰＣ１６が指紋認証をサポートしている場合、必要に応じてWindowsの設定（サインインオプション）でウェアラブルビューワーを使う作業者（ユーザ）の指紋が登録される。

【0270】

(5)フロントエンドアプリケーションのインストール
(6)フロントエンドアプリケーションの自動起動設定
レジストリエディタが起動され、所定の値が登録される。

【0271】

［バックエンドの動作］
図２２は、オペレータ端末１２のバックエンドアプリケーション４８の一例を示す。

【0272】

遠隔支援においてバックエンド（オペレータ端末１２）側では、インターネット通信アプリケーション７０２を用いてモバイルＰＣ１６と通信することができる。バックエンドアプリケーション７０１は、オペレータ端末１２上で動作するアプリケーションであり、インターネット通信アプリケーション７０２による遠隔支援を補助するためのアプリケーションである。バックエンドアプリケーション７０１は、インターネット通信アプリケーション７０２を介してモバイルＰＣ１６と画像ファイルの送受信を行う機能、画像ファイルにアノテーションを付加するための編集機能を備えている。なお、オペレータ端末１２にインストールされているバックエンドアプリケーション７０１もWindowsのデスクトップアプリケーションとして実装される。インターネット通信アプリケーション７０２はモバイルＰＣ１６のインターネット通信アプリケーション５０９と同様であってもよい。

【0273】

バックエンドアプリケーション７０１の実行によりオペレータ端末１２を含む遠隔支援システムを利用するオペレータは、以下の作業を行うことができる。

【0274】

(1)インターネット通信アプリケーション５０９を利用する作業
オペレータは、
モバイルＰＣ１６にコールすること、
モバイルＰＣ１６からコールを受けること、
モバイルＰＣ１６から配信されたライブ映像をオペレータ端末１２のＬＣＤ６４に表示させること、
デスクトップ画面又は起動中のアプリケーションケーションの画面を通信中のモバイルＰＣ１６と共有すること（画面共有）、
テキストメッセージをモバイルＰＣ１６に送信することができる。

【0275】

(2)バックエンドアプリケーション７０１による作業
オペレータは、
通信中のモバイルＰＣ１６から送信された画像ファイルを受信すること、
画像ファイルに手書きのアノテーションを書き込むこと、
通信中のモバイルＰＣ１６にアノテーションを付加した画像ファイルを送信することができる。

【0276】

次に、バックエンドアプリケーション７０１の起動及び終了について説明する。

【0277】

オペレータ端末１２では、インターネット通信アプリケーション７０２とバックエンドアプリケーション７０１の両方が動作する。バックエンドアプリケーション７０１は、オペレータ端末１２のオペレータがバックエンドアプリケーション７０１を指定することにより起動される。オペレータがオペレータ端末１２を起動させ、Windowsサイインを行った時にバックエンドアプリケーション７０１が自動的に起動される構成にしてもよい。

【0278】

ここで、インターネット通信アプリケーション７０２は、オペレータ端末１２用アプリケーションよりも先に起動する必要がある。また、インターネット通信アプリケーション７０２が起動すると、プレゼンス状態がオンラインとなるが、バックエンドアプリケーション７０１が起動していない状態ではモバイルＰＣ１６から静止画像の送信ができなくなる等の制約がある。

【0279】

オペレータは、バックエンドアプリケーション７０１を終了する場合、バックエンドアプリケーション７０１の終了メニューから行うことができる。

【0280】

[モバイルＰＣ１６との通信]
オペレータ端末１２から見たモバイルＰＣ１６との通信について説明する。

【0281】

(1)通話の開始
オペレータ端末１２から通話要求（コール）する場合、オペレータは、インターネット通信アプリケーション７０２のコンタクトリストから相手（モバイルＰＣ１６）を指定してコールを行う。モバイルＰＣ１６側で受話操作が行われると、オペレータはモバイルＰＣ１６を使用する作業者と通話ができるようになる。

【0282】

モバイルＰＣ１６から通話要求（コール）する場合、オペレータ端末１２には、インターネット通信アプリケーション７０２の機能により呼び出し画面がポップアップで表示され、コールしてきた相手（モバイルＰＣ１６を使用する作業者）の氏名や顔画像が表示される。呼び出し画面上で承諾ボタンが押下されると、モバイルＰＣ１６との通信路が確立され、オペレータは作業者と通話できるようになる。

【0283】

(2)ライブ映像の表示
モバイルＰＣ１６から配信されるライブ映像はオペレータ端末１２で表示される。モバイルＰＣ１６からコールされてモバイルＰＣ１６との通話が開始されると、ライブ映像配信が自動的に開始され、通話中画面にライブ映像が表示される。この通話中画面はオペレータ端末１２のＬＣＤ６４に表示される。オペレータ端末１２からコールされてモバイルＰＣ１６と通話が開始されたときは、ライブ映像配信は自動的に開始されない。モバイルＰＣ１６を使用する作業者によって指示操作が行われた場合に、通話中画面にライブ映像が表示される。

【0284】

(3)音声のミュート／ミュート解除
オペレータ端末１２とモバイルＰＣ１６との通話中画面で、音声のミュート／ミュート解除ができる。音声をミュートした場合、オペレータ端末１２側の音声はモバイルＰＣ１６に送信されない。

【0285】

(4)通話の終了
通話中画面の終話ボタンを押すことにより、オペレータ端末１２から通話を終了することができる。モバイルＰＣ１６で終話操作が行われた場合も通信は切断される。

【0286】

[静止画像の受信]
オペレータ端末１２は、通信中のモバイルＰＣ１６からの画像ファイルを受信することができる。受信された画像ファイルは、図２３に示すようにファイル送受信画面７１０にサムネイル表示される。画像のサムネイルがダブルクリックされると、画像編集画面７１５が起動され、選択された画像ファイルが表示される。なお、受信された画像をサムネイル表示するためには、ファイル送受信画面７１０がオペレータ端末１２のＬＣＤ６４に予め表示されている必要がある。

【0287】

[アノテーション機能]
ファイル送受信画面７１０にサムネイル表示されている受信ファイルの１つが選ばれダブルクリックされると、画像編集画面７１５が起動され、選択された画像ファイルが画像編集画面７１５上の画像エリア７２０に表示される。画像編集画面７１５において、７２１，７２２，７２３はボタンであり、その中には、送信ボタン７２２が含まれる。

【0288】

オペレータは、画像編集画面７１５を利用して文字や絵などの書き込み等を行うことができる。図２３は、モバイルＰＣ１６から送られてきた画像に対して書き込み操作が行われ、書き込み操作によって描かれたアノテーションが受信画像に付加されることを示す。

【0289】

[画像送信]
画像編集画面７１５の送信ボタン７２２が押下されると、アノテーションが付加された画像（画像エリア７２０に表示されている画像）がモバイルＰＣ１６に送信される。送信された画像（アノテーションが付加された画像）は、画像ファイルとしてオペレータ端末１２内に保存される。また、送信された画像（アノテーションが付加された画像）ファイルの履歴は、ファイル送受信画面７１０にサムネイルで表示される。送信された画像のファイルのサムネイルは、画像が送信されたときにファイル送受信画面７１０に表示される。

【0290】

オペレータ端末１２から送られてきた画像（アノテーションが付加された画像）がモバイルＰＣ１６で受信されると、その受信した画像がディスプレイ１２４で全画面表示される。これにより、作業者は、アノテーションが付加された画像を見ることができる。その後、決定ボタン２０２ｅが押下されると、画面は通話中画面に戻る。

【0291】

図２４は、モバイルＰＣ１６から受信した静止画像のサムネイルとモバイルＰＣ１６に送信した静止画像のサムネイルとを表示するＬＣＤ６４の画面（ファイル送受信画面７１０）の一例を示す。

【0292】

ファイル送受信画面７１０はファイル送受信エリア７６０を含み、ファイル送受信エリア７６０はファイル受信エリア７４０、ファイル送信エリア７５０から構成されている。ファイル送受信エリア７６０の左半分の領域がファイル受信エリア７４０であり、ファイル送受信エリア７６０の右半分の領域がファイル送信エリア７５０である。

【0293】

ファイル受信エリア７４０は、オペレータ端末１２がモバイルＰＣ１６から受信した画像のサムネイルが表示される領域である。図２４に示すようにモバイルＰＣ１６から送られてきて受信した画像が複数ある場合、それらの画像のサムネイル７７１，７７３はオペレータ端末１２による受信順にファイル受信エリア７４０の上側から時系列的に並べられて表示される。

【0294】

ファイル送信エリア７５０は、オペレータ端末１２がモバイルＰＣ１６に送信した画像のサムネイルが表示される領域である。図２４は、モバイルＰＣ１６から受信したアノテーション付加画像のサムネイル７７２がファイル送信エリア７５０に表示されている例を示す。画像のサムネイル７７２が表示されることは、画像７７２はオペレータ端末１２からモバイルＰＣ１６に送信されたことを意味する。もし、モバイルＰＣ１６に送信した画像が複数ある場合、それらの画像のサムネイルは、オペレータ端末１２による送信順にファイル送信エリア７５０の上側から時系列的に並べられて表示される。

【0295】

図２４は、サムネイル７７１に対応する画像を画像Ａ、サムネイル７７２に対応する画像を画像Ｂ、サムネイル７７３に対応する画像を画像Ｃとしたとき、オペレータ端末１２の動作が画像Ａの受信、画像Ｂの送信、画像Ｃの受信の順に実行されたことを意味している。サムネイル７７１よりも下側にサムネイル７７２が表示され、サムネイル７７２よりも下側にサムネイル７７３が表示されていることが画像Ａの受信、画像Ｂの送信、画像Ｃの受信を示している。このように、受信画像のサムネイル及び送信画像のサムネイルは、受信画像と送信画像とを含めて時系列的に並べられて表示される。

【0296】

なお、オペレータ端末１２から静止画像を複数のモバイルＰＣ１６に送信する場合、送信先のモバイルＰＣ１６を使用する作業者を特定し、特定した作業者情報とともに送信した画像のサムネイルを履歴としてファイル送信エリア７５０に表示してもよい。

【0297】

[画面共有]
オペレータ端末１２のデスクトップ画面やオペレータ端末１２で起動中のアプリケーションの画面を通話中のモバイルＰＣ１６と共有することできる。これにより、オペレータ端末１２からPDF等のドキュメントをディスプレイ１２４にリモート表示させることができる。

【0298】

[インストール／アンインストール]
バックエンドアプリケーション７０１のインストールはインストーラにより実行される。インストーラは、例えばLync SDK 2013等、バックエンドアプリケーション７０１の動作に必要なモジュールを一括でインストールできる。ただし、インターネット通信アプリケーション７０２、例えばSkype for Businessのクライアントアプリケーション等は、別途インストールする必要がある。

【0299】

［フロントエンドとバックエンドのユーザインターフェース］
叙述した主な機能についてウェアラブルビューワー側とオペレータ端末１２側のユーザインターフェースを説明する。

【0300】

図２５は、モバイルＰＣ１６からのコールをオペレータ端末１２が受話してライブ映像配信が行われる場合のユーザインターフェースを示す。図２５は図１２を参照した上述の［通話機能］の説明中の(1)通話の開始の説明の前半部分に関連する。

【0301】

ウェアラブルビューワー側において、作業者がホーム画面のコミュニケーションエリア５２０に配置されているConversationアイコンを選択して決定ボタン２０２ｅを押下すると、コンタクトリスト画面が表示される。作業者は、コンタクトリスト画面上で４つのボタン（アップボタン２０２ａ、ライトボタン２０２ｂ、ダウンボタン２０２ｃ、レフトボタン２０２ｄ）を操作することにより、コンタクト先を決定する。このとき、作業者がアップボタン２０２ａ、又はレフトボタン２０２ｄを押下すると、フォーカスが上にスクロールする。他方、このとき、作業者がダウンボタン２０２ｃ又はライトボタン２０２ｂを押下すると、フォーカスが下にスクロールする。

【0302】

作業者が、コンタクト先を決定して決定ボタン２０２ｅを押下すると、コンタクト先のオペレータ端末１２がコールされる。このとき、ウェアラブルビューワー側では呼出中画面が表示される。

【0303】

オペレータ端末１２側では、モバイルＰＣ１６からのコールを受けると、呼出画面が表示される。オペレータがオペレータ端末１２の承認ボタンを押下すると、モバイルＰＣ１６からのコールに対して受話され、モバイルＰＣ１６とオペレータ端末１２との通話路が確立され、通話が開始される。

【0304】

通話が開始されると、自動的にライブ映像の送信が開始される。このとき、カメラ１１６で撮影している映像がオペレータ端末１２に配信される。また、ウェアラブルビューワー側で表示される画面が、呼出中画面からライブ映像送信時の通話中画面（第１通話中画面）に切り替わる。この第１通話中画面では配信中のライブ映像が緑色の枠で囲まれて表示される。

【0305】

このとき、オペレータ端末１２側では、ライブ映像受信時の通話中画面（第２通話中画面）が表示される。この第２通話中画面にはモバイルＰＣ１６から配信されているライブ映像が表示されている。

【0306】

ウェアラブルビューワー側において第１通話中画面が表示されている状態で、作業者が、レフトボタン２０２ｄ、ライトボタン２０２ｂを操作してライブ映像配信開始／停止アイコン６０２ｂを選択して決定ボタン２０２ｅを押下すると、ライブ映像の配信が停止される。ライブ映像の配信が停止すると、画面が第１通話中画面からライブ映像停止時の通話中画面（第３通話中画面）に切り替わる。

【0307】

オペレータ端末１２側では、ライブ映像の配信が停止されると、画面が第２通話中画面からライブ配信停止時の通話中画面（第４通話中画面）に切り替わる。

【0308】

図２６は、オペレータ端末１２からのコールをモバイルＰＣ１６が受話してライブ映像配信が行われる場合（図１７）のユーザインターフェースを示す。図２６は上述の［通話機能］の説明中の(1)通話の開始の説明の後半部分に関連する。

【0309】

オペレータがある作業者と通話したいと思った場合、オペレータは、所定の画面において通話したい作業者に対応するコンタクト先を選択する。オペレータがコンタクト先を選択して決定操作を行うと、選択されたコンタクト先のモバイルＰＣ１６がコールされる。このとき、オペレータ端末１２には、呼出画面が表示される。

【0310】

ウェアラブルビューワー側では、オペレータ端末１２からのコールを受けると、呼出中画面が表示される。例えば、図２６に示すように、ホーム画面が表示されていた場合、ホーム画面内に呼出中画面が表示される。作業者が、決定ボタン２０２ｅを押下すると、オペレータ端末１２からのコールに対して受話される。これにより、モバイルＰＣ１６とオペレータ端末１２との通話路が確立され、通話が開始される。

【0311】

ウェアラブルビューワー側において、オペレータ端末１２からのコールに対して受話されると、ライブ映像停止時の通話中画面（第３通話中画面）が表示される。即ち、オペレータ端末１２からのコールに対しては通話開始時にはライブ映像の配信が開始されない。

【0312】

オペレータ端末１２側では、モバイルＰＣ１６によってコールが受話されると、表示画面が呼出画面からライブ映像停止時の通話中画面（第４通話中画面）に切り替わる。

【0313】

ウェアラブルビューワー側で、作業者がライトボタン２０２ｂを操作してライブ映像配信開始／停止アイコン６０２ｂを選択し、決定ボタン２０２ｅを押下すると、ライブ映像の送信が開始される。このとき、表示画面は、第３通話中画面からライブ映像送信時の通話中画面（第１通話中画面）に切り替わる。

【0314】

オペレータ端末１２側では、モバイルＰＣ１６によってライブ映像の送信が開始されると、表示画面が、第４通話中画面からライブ映像受信時の通話中画面（第２通話中画面）に切り替わる。第４通話中画面には、モバイルＰＣ１６から配信されているライブ映像が表示される。

【0315】

図２７は、静止画像を標準モードで撮影し、撮影された静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する場合（図１８）におけるユーザインターフェースを示す。

【0316】

モバイルＰＣ１６がライブ映像をオペレータ端末１２に配信している間に、ウェアラブルビューワー側において標準モードにおいて静止画像の撮影を行う場合、作業者はライブ映像送信時の通話中画面（第１通話中画面）上のプレビューエリアにフォーカスを当てる必要がある。即ち、ライトボタン２０２ｂを操作してディスプレイ１２４に表示されているライブ映像の周りが白色の枠で囲まれる状態にする必要がある。

【0317】

第１通話中画面においてライブ映像が白色の枠で囲まれた状態で、作業者が決定ボタン２０２ｅを押下すると静止画像が撮影される。静止画像が撮影されると、撮影された静止画像が全画面表示される。また、撮影された静止画像は、オペレータ端末１２（通話相手）に送信される。静止画像の送信が完了すると、表示画面は、静止画像が全画面表示されている状態から第１通話中画面状態に戻る。

【0318】

他方、オペレータ端末１２側では、モバイルＰＣ１６から静止画像を受信するに際して、ファイル送受信画面７１０が表示されている必要がある。

【0319】

ファイル送受信画面７１０が表示された状態でモバイルＰＣ１６から送信された静止画像をオペレータ端末１２が受信した場合、受信された静止画像（受信画像）のサムネイルがファイル送受信画面７１０上のファイル送受信エリア７６０のファイル受信エリア７４０に表示される。オペレータが受信画像のサムネイルを選択すると（ダブルクリックすると）、画像編集画面７１５が起動され、選択された静止画像が画像編集画面７１５に表示される。これにより、オペレータは、選択された静止画像についてアノテーションを付す等、画像の編集を行うことができる。

【0320】

図２８は、静止画像を高画質モードで撮影し、撮影された静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する場合（図１９）におけるユーザインターフェースを示す。

【0321】

ウェアラブルビューワー側において、モバイルＰＣ１６がライブ映像をオペレータ端末１２に配信している間に、高画質モードにおいて静止画像の撮影を行う場合、標準モードから高画質モードにカメラ１１６の画像撮影モードを切り替える必要がある。

【0322】

作業者は、ライブ映像配信中の通話中画面（第１通話中画面）が表示された状態で、画像撮影モード切替アイコン６０２ｃを選択して決定ボタン２０２ｅを押下することにより、画像撮影モードが高画質モードに切り替わる。このとき、通話中画面上にカメラ１１６のプレビューが表示される。

【0323】

なお、カメラ１１６のモードを切り替えるに際して、作業者が第１通話中画面からダウンボタン２０２ｃを押下することにより、カメラモードの変更のためのサブメニューが表示される。また、カメラ１１６のモードが高画質モードに切り替わる前に、モバイルＰＣ１６はライブ映像のオペレータ端末１２への配信を停止する。

【0324】

オペレータ端末１２側では、モバイルＰＣ１６からのライブ映像の送信が停止されると、表示画面は、第２通話中画面から第４通話中画面に切り替わる。上述したように、第２通話中画面はライブ映像受信時の通話中画面であり、第４通話中画面はライブ映像停止時のオペレータ端末１２側の通話中画面である。

【0325】

ウェアラブルビューワー側において、通話中画面上にカメラ１１６のプレビューが表示された状態で、作業者が決定ボタン２０２ｅを押下すると、高画質モードにより静止画像が撮影（写真撮影）される。その後、モバイルＰＣ１６は、撮影された静止画像（写真）をオペレータ端末１２に送信する。また、撮影された静止画像（写真）は、通話中画面上に表示される。一定時間経過後、ディスプレイ１２４の表示画面は、カメラ１１６のプレビューが表示された通話中画面に戻る。

【0326】

その後、画像撮影モード切替アイコン６０２ｃが選択され、押下されると、画像撮影モードが高画質モードから標準モードに切り替わる。このとき、ディスプレイ１２４に表示される画面は、ライブ映像停止時の通話中画面（第３通話中画面）に切り替わる。

【0327】

オペレータ端末１２側では、オペレータ端末１２がモバイルＰＣ１６から送信された静止画像（写真）を受信すると、ファイル送受信画面７１０上のファイル受信エリア７４０に受信された静止画像のサムネイルが表示される。上述したように、ファイル受信エリア７４０はファイル送受信エリア７６０の左半分の領域である。

【0328】

図２９は、オペレータ端末１２のデスクトップ画面又は起動中のアプリケーションの画面を通信中のモバイルＰＣ１６と共有する場合におけるユーザインターフェースを示す。図２９は上述した［画面共有機能］の説明に関連する。なお、図２９には、ライブ映像配信中に画面共有が行われる場合について示されている。

【0329】

オペレータ端末１２とモバイルＰＣ１６とが通話中である状態において、オペレータがあるアプリケーションの画面を通話相手と共有したい場合、図２９に示すように、オペレータが共有したいアプリケーションの画面を選択し、さらに第２通話中画面上の発表ボタンを選択して決定ボタン２０２ｅを押下すると、選択されたアプリケーションの画像がモバイルＰＣ１６に送信される。

【0330】

ウェアラブルビューワー側では、オペレータ端末１２から送られてきたアプリケーションの画像（画像ファイル）を受信すると、受信した画像が自動的にディスプレイ１２４に表示される。即ち、第１通話中画面が、受信した画像（送られてきたアプリケーションの画像）が表示されている共有表示画面に切り替わる。これにより、オペレータによって選択された画面をウェアラブルビューワー側とオペレータ端末１２側とで共有することができる。

【0331】

図２９では、ライブ映像配信中に画面共有が行われる場合について示されているが、ライブ映像配信中でなくても画面共有が行われることもある。その場合、オペレータ端末１２側では、オペレータが共有したいアプリケーションの画像を選択した後、第４通話中画面上の発表ボタンを選択し決定ボタン２０２ｅを押下することにより、選択されたアプリケーションの画像がモバイルＰＣ１６に送信される。また、ウェアラブルビューワー側では、第３通話中画面がディスプレイに表示されている状態で、モバイルＰＣ１６がアプリケーションの画像を受信した場合には、第３通話中画面から共有表示画面に遷移されることになる。

【0332】

図３０は、オペレータ端末１２からモバイルＰＣ１６にテキストメッセージを送信する場合におけるユーザインターフェースを示す。なお、図３０は、モバイルＰＣ１６からライブ映像が配信されている場合について示す（図２０（ａ））。

【0333】

オペレータが通話中の相手にテキストメッセージを送る場合、オペレータは第２通話中画面上にテキストを入力して送信操作を行うと、入力されたテキストがオペレータ端末１２からモバイルＰＣ１６に送信される。

【0334】

ウェアラブルビューワー側では、オペレータ端末１２からのテキスト（テキストメッセージ）を受信すると、ディスプレイ１２４に表示されていた第１通話中画面上に、受信されたテキストが表示される。詳しく説明すると、受信されたテキストは、第１通話中画面上のメッセージエリアに表示される。

【0335】

図３０の例では、オペレータ端末１２側で”Hello”が入力されたため、ウェアラブルビューワー側で”Hello”が第１通話中画面上のメッセージエリアに表示されている。

【0336】

なお、オペレータ端末１２によるテキストメッセージの送信は、モバイルＰＣ１６によるライブ映像が配信している間でなくとも行うことができる。モバイルＰＣ１６とオペレータ端末１２とが通話中であり、ライブ映像が配信されていない場合、オペレータは、第４通話中画面上にテキストを入力することになる。また、ウェアラブルビューワー側では、受信されたテキストが第３通話画面上に表示される。

【0337】

なお、モバイルＰＣ１６とオペレータ端末１２とが通話中でない場合にも、モバイルＰＣ１６はテキストメッセージを受信できる。その場合のウェアラブルビューワー側については、図２０（ｂ）に示す通りである。

【0338】

［シーケンス図］
図３１は、モバイルＰＣ１６からのコールをオペレータ端末１２が受話する場合における、ライブ映像をオペレータ端末１２に配信する動作を示すシーケンス図である。

【0339】

作業者は、オペレータと通話しようと思った場合、図１２（ｅ）、（ｆ）に示すように、ホーム画面上のコミュニケーションエリア５２０に配置されているConversationアイコンからコンタクトリスト画面を表示させる。そして、作業者によってコンタクトリスト画面に表示されているコンタクト先一覧からコンタクト先が選択される（ステップＡ１）。さらに、決定ボタン２０２ｅが押下されると、モバイルＰＣ１６は、コンタクト先（オペレータ端末１２）にコール（通話要求）する（ステップＡ２）。

【0340】

モバイルＰＣ１６からオペレータ端末１２にコール（通話要求）されると、ディスプレイ１２４には、呼出中画面（図２５の左側で上から３番目の画面）が表示される（ステップＡ３）。

【0341】

オペレータ端末１２側では、オペレータ端末１２は、モバイルＰＣ１６からのコール（通話要求）を受けると、ＬＣＤ６４に呼出画面（図２５の右側で上から１番目の画面）を表示させる（ステップＢ１）。オペレータがオペレータ端末１２の承認ボタンを押下すると、モバイルＰＣ１６からのコール（通話要求）承諾される（ステップＢ２）。これにより、モバイルＰＣ１６とオペレータ端末１２との通話路が確立され、通話が開始される。

【0342】

通話が開始されると、カメラ１１６で撮影しているライブ映像のオペレータ端末１２への配信が自動的に開始される（ステップＡ４）。そして、ディスプレイ１２４には、第１通話中画面（図２５の左側上から４番目の画面）が表示される（ステップＡ５）。第１通話中画面には、送信されているライブ映像が表示される。

【0343】

オペレータ端末１２側では、オペレータ端末１２は、モバイルＰＣ１６から送信されてきたライブ映像を受信し（ステップＢ３）、ＬＣＤ６４に第２通話中画面（図２５の右側上から２番目の画面）を表示させる（ステップＢ４）。第２通話中画面には、受信されているライブ映像が表示される。

【0344】

しばらくの間ライブ映像が配信された後、作業者によって、第１通話画面上でライブ映像配信開始／停止アイコン６０２ｂが選択され、決定ボタン２０２ｅが押下された場合、モバイルＰＣ１６からのライブ映像の配信が停止される（ステップＡ６）。そして、ディスプレイ１２４には、第３通話中画面（図２５の左側下から１番目の画面）が表示される（ステップＡ７）。

【0345】

オペレータ端末１２側では、モバイルＰＣ１６からのライブ映像配信が停止されると、オペレータ端末１２は、ＬＣＤ６４へのライブ映像の表示を停止する（ステップＢ５）。そして、ＬＣＤ６４には第４通話中画面（図２５の右側下から１番目の画面）が表示される（ステップＢ６）。

【0346】

図３２は、オペレータ端末１２からのコールをモバイルＰＣ１６が受話する場合における、ライブ映像をオペレータ端末１２に配信する動作を示すシーケンス図である。

【0347】

オペレータがある作業者と通話したいと思った場合、オペレータは、ＬＣＤ６４に表示される所定の画面（図２６の右側上から１番目の画面）において通話したい作業者に対応するコンタクト先を選択する。オペレータによってコンタクト先が選択され（ステップＢ１１）、決定操作が行われると、オペレータ端末１２は、選択されたコンタクト先のモバイルＰＣ１６にコール（通話要求）する（ステップＢ１２）。このとき、オペレータ端末１２のＬＣＤ６４には、呼出画面（図２６の右側上から２番目の画面）が表示される（ステップＢ１３）。

【0348】

モバイルＰＣ１６は、オペレータ端末１２からのコール（通話要求）を受けると、呼出中画面（図２６の左側上から２番目を参照）をディスプレイ１２４に表示させる（ステップＡ１１）。作業者によって決定ボタン２０２ｅが押下されると、オペレータ端末１２からのコール（通話要求）が承諾される（ステップＡ１２）。これにより、モバイルＰＣ１６とオペレータ端末１２との通話路が確立され、通話が開始される。そして、モバイルＰＣ１６は、ウェアラブルデバイス本体２４の第３通話中画面（図２６の左側上から３番目の画面）を表示させる（ステップＡ１３）。

【0349】

オペレータ端末１２側では、コール（通話要求）が承諾された場合、オペレータ端末１２は、ＬＣＤ６４に第４通話中画面（図２６の右側上から３番目の画面）を表示させる（ステップＢ１４）。

【0350】

作業者によって、ライブ映像配信のための操作が行われた場合（ステップＡ１４）、モバイルＰＣ１６は、カメラ１１６で撮影しているライブ映像のオペレータ端末１２への配信を開始する（ステップＡ１５）。ライブ映像配信のための操作とは、具体的には、第３通話中画面上のライブ映像配信開始／停止アイコン６０２ｂを選択して決定ボタン２０２ｅを押下することである。そして、モバイルＰＣ１６は、第１通話中画面（図２６の左側下から１番目の画面）をディスプレイ１２４に表示させる（ステップＡ１６）。第１通話中画面には、配信中のライブ映像が表示される。

【0351】

オペレータ端末１２側では、モバイルＰＣ１６によるライブ映像の配信が開始されると、オペレータ端末１２は、そのライブ映像を受信する（ステップＢ１５）。そして、オペレータ端末１２は、第２通話中画面（図２６の右側下から１番目の画面）をＬＣＤ６４に表示させる（ステップＢ１６）。第２通話中画面には、受信中のライブ映像が表示される。

【0352】

ライブ映像配信の停止については、図３１のステップＡ６～Ａ７、ステップＢ５～Ｂ６と同様である。即ち、図３２のステップＡ１７、Ａ１８はそれぞれ図３１のステップＡ６、Ａ７に対応し、図３２のステップＢ１７、Ｂ１８はそれぞれ図３１のステップＢ５、Ｂ６に対応する。

【0353】

図３３は、静止画像を高画質モードで撮影し、撮影された高画質の静止画像をモバイルＰＣ１６からオペレータ端末１２に送信する動作を示すシーケンス図である。

【0354】

モバイルＰＣ１６がライブ映像をオペレータ端末１２に配信している場合、モバイルＰＣ１６は、第１通話中画面（図２８の左側１番上の画面）をディスプレイ１２４に表示させている（ステップＡ２１）。

【0355】

また、オペレータ端末１２は、モバイルＰＣ１６からのライブ映像を受信している場合、第２通話中画面（図２８の右側上の画面）を表示させている（ステップＢ２１）。

【0356】

作業者によって、第１通話中画面上の画像撮影モード切替アイコン６０２ｃが選択され、決定ボタン２０２ｅが押下された場合、モバイルＰＣ１６はライブ映像のオペレータ端末１２への配信を停止する（ステップＡ２２）。その後、カメラ１１６の画像撮影モードが高画質モードに切り替わる（ステップＡ２３）。

【0357】

オペレータ端末１２側では、モバイルＰＣ１６からのライブ映像の配信が停止されると、オペレータ端末１２は、ＬＣＤ６４へのライブ映像の表示を停止する（ステップＢ２２）。そして、オペレータ端末１２は、ＬＣＤ６４に第４通話中画面（図２８の右側の上から２番目の画面）を表示させる（ステップＢ２３）。

【0358】

作業者が、決定ボタン２０２ｅを押下した場合、カメラ１１６により高画質モードで静止画像が撮影される（ステップＡ２４）。その後、モバイルＰＣ１６は、撮影された静止画像（画像ファイル）をオペレータ端末１２に送信する（ステップＡ２５）。

【0359】

オペレータ端末１２側では、オペレータ端末１２がモバイルＰＣ１６から送信された静止画像（画像ファイル）を受信すると（ステップＢ２４）、受信された静止画像のサムネイルがＬＣＤ６４に表示される（ステップＢ２５）。詳しく言うと、ＬＣＤ６４に表示されているファイル送受信画面７１０上のファイル受信エリア７４０に表示される（図２８の右側の下から２番目の画面）。上述したように、ファイル送受信画面７１０はモバイルＰＣ１６から画像を受信する前に起動されていなければならない。

【0360】

その後、作業者によって画像撮影モード切替アイコン６０２ｃが選択され、押下されると、カメラ１１６の画像撮影モードが高画質モードから標準モードに切り替わる（ステップＡ２６）。このとき、モバイルＰＣ１６は、ディスプレイ１２４に第３通話中画面（図２８の左側の１番下の画面）を表示させる（ステップＡ２７）。

【0361】

図３４は、アノテーションが付加された静止画像をオペレータ端末１２からモバイルＰＣ１６に送信する動作を示すシーケンス図である。なお、図３４に示す動作は、モバイルＰＣ１６からオペレータ端末１６にライブ映像が配信されている間の動作である。

【0362】

モバイルＰＣ１６がライブ映像をオペレータ端末１２に配信している場合、モバイルＰＣ１６は、第１通話中画面（図２８の左側１番上の画面）をディスプレイ１２４に表示させている（ステップＡ３１）。

【0363】

また、オペレータ端末１２は、モバイルＰＣ１６からのライブ映像を受信している場合、第２通話中画面（図２８の右側上の画面）を表示させている（ステップＢ３１）。

【0364】

作業者によって、標準モードにおいて静止画像撮影のための操作が行われると、カメラ１１６によって静止画像が撮影される（ステップＡ３２）。静止画像撮影のための操作とは、操作ボタン（ここでは、ライトボタン２０２ｂ）を操作して、第１通話中画面のプレビューエリアにフォーカスを当ててライブ映像の周りが白色の枠で囲まれる状態にし、決定ボタン２０２ｅを押下することである。その後、モバイルＰＣ１６は、撮影された静止画像ファイルをオペレータ端末１２に送信する（ステップＡ３３）。

【0365】

オペレータ端末１２側では、予めファイル送受信画面７１０（図２７の右側の１番上の画面）がＬＣＤ６４に表示されている。そして、オペレータ端末１２は、モバイルＰＣ１６からの静止画像ファイルを受信し（ステップＢ３２）、受信画像ファイルの画像のサムネイルをＬＣＤ６４に表示する（ステップＢ３３）。実際には、受信画像ファイルの画像のサムネイルは、ファイル送受信画面７１０上のファイル受信エリア７４０に表示される（図２７の右側の上から２番目の画面）。

【0366】

ここで、オペレータがファイル送受信画面７１０上の任意の画像のサムネイルを選択する操作を行う（ステップＢ３４）と、画像編集画面７１５が起動し（ステップＢ３５）、選択された画像ファイルが画像編集画面７１５に表示される（図２７の右側の１番下の画面）。

【0367】

そして、オペレータによって選択された画像に書き込み操作が行われると、オペレータ端末１２は、選択された画像と、書き込み操作によって書き込まれた内容に基づいてアノテーション付画像を作成する（ステップＢ３６）。その後、オペレータによって画像編集画面７１５の送信ボタン７２２が押下されると、モバイルＰＣ１６にアノテーション付画像（アノテーションが付加された画像）のファイルが送信され、送信した画像のファイルがオペレータ端末１２内に保存される（ステップＢ３７）。また、オペレータ端末１２は、送信されたアノテーション付画像のサムネイルをＬＣＤ６４に表示する（ステップＢ３８）。実際には、ファイル送受信画面７１０上のファイル送信エリア７４０に表示される（図２３の右側の下から１番目の画面）。

【0368】

モバイルＰＣ１６は、オペレータ端末１２からのアノテーション付画像（アノテーションが付加された画像）を受信すると、その受信した画像を保存し（ステップＡ３５）、ディスプレイ１２４に表示する（ステップＡ３６）。このとき、全画面表示される（図２３の左側の上から２番目の画面）。

【0369】

そして、オペレータによっての決定ボタン２０２ｅが押下された場合には（ステップＡ３７）、モバイルＰＣ１６は、ディスプレイ１２４に表示された画面上から受信した画像（アノテーション付画像）を消去する（ステップＡ３８）。

【0370】

上述したように、本実施形態によれば、遠隔支援アプリケーション５０３はホームアプリケーション５０２が起動された時に自動的に起動されるため、別途遠隔支援アプリケーション５０３を起動させる操作をしなくても作業者はいつでも遠隔支援機能を利用し、遠隔支援を受けることができる。

【0371】

また、本実施形態によれば、ホーム画面は３つの横長のエリアに分かれ、各エリアのサイズ、形状はフォーカスの移動により可変であり、フォーカスのあるエリアが最も幅（上下方向の幅）が広い。このため、フォーカスエリアにあるアイコンは他のエリアのアイコンよりも大きく表示でき、視認性が高い。フォーカスの移動に伴い、幅広エリアも移動する。各エリアの上下の境界線は直線ではなく、フォーカスエリアの上側境界線は僅かに下側（フォーカスエリア側）に湾曲し、下型境界線は僅かに上側（フォーカスエリア側）に湾曲しているため、フォーカスエリアの幅は中央部が最も狭く、両端になるにつれて広くなる。このため、フォーカスエリアの中央に位置するアイコンの視認性をさらに高くすることができる。

【0372】

さらに、本実施形態によれば、モバイルＰＣ１６からの要求により通話が開始される場合には、通話が開始されると自動的にライブ映像の配信を開始し、オペレータ端末１２からの要求により通話が開始される場合には、作業者による配信指示操作を受けて、ライブ映像の配信を開始する構成にしている。そのため、作業者の意思を反映したライブ映像の配信を実現することができる。

【0373】

また、本実施形態によれば、ライブ映像の配信中の場合には、表示画面内でライブ映像が第１の色の枠で囲んで表示される。また、静止画像を撮影する場合には、表示画面内で静止画像が第１の色とは別の第２の色で囲んで表示される。これにより、作業者はライブ映像配信中又は静止画の撮影可能状態であることを認識しやすい。

【0374】

さらに、本実施形態によれば、モバイルＰＣ１６とオペレータ端末１２とが通話中にモバイルＰＣ１６とオペレータ端末１２との間で画像の送受信をすることができる。このため、オペレータが作業者に提供する遠隔支援の質が向上し、作業者はより的確な遠隔支援を受けることができる。また、高画質モードでの画像を撮影する場合には、ライブ映像のオペレータ端末１２への配信を停止するため、不必要な時にまでライブ映像の配信が行われずに済む。このため、モバイルＰＣ１６、ウェアラブルデバイス２３のバッテリ駆動時間を長くすることができる。

【0375】

また、本実施形態によれば、ホーム画面に配置されるアイコンの配置、アイコンの選択操作によって起動するファイルはＸＭＬにより記述されている。このＸＭＬファイルをエンドユーザに開放すると、作業者はＸＭＬの記述を書き替えることにより、ホーム画面上のアイコンの配置を変更したり、追加のアプリケーションケーションに対応するアイコンをホーム画面上に追加したり、アプリケーションケーションのアイコンをホーム画面上から削除することができる。このため、フロントエンドアプリケーション５０２の拡張性が向上する。

【0376】

さらに、本実施形態によれば、オペレータ端末１２側において、ファイル送受信画面７１０に、オペレータ端末１２が送信した画像のサムネイルと、オペレータ端末１２が受信した画像のサムネイルとが領域を分けられ、且つ時系列順に表示される。このため、オペレータ端末１２で送信画像と受信画像とを管理しやすくなる。また、オペレータ端末１２を使用するオペレータにとって、送信画像のサムネイルと受信画像のサムネイルとを画像の送信時及び画像の受信時の前後関係も含めてわかりやすく視認することができる。

【0377】

実施形態によれば、次のシステム、電子機器が提供される。
（１） 上下左右を指示可能な第１入力部と、表示部と、を具備するウェアラブル機器と、
上下左右を指示可能な第２入力部と、前記表示部にホーム画面を表示させる電子機器と、を具備するシステムであって、
前記ホーム画面は可変サイズの第１エリア、第２エリア及び第３エリアに分割され、
第１種類の複数の第１アイコンが前記第１エリアに表示され、
第２種類の複数の第２アイコンが前記第２エリアに表示され、
第３種類の複数の第３アイコンが前記第３エリアに表示され、
前記第１エリア、前記第２エリア又は前記第３エリアは前記第１入力部又は前記第２入力部の操作により選択可能であり、
選択されたエリアのサイズは非選択のエリアのサイズより大きく、
前記複数の第１アイコン、前記複数の第２アイコン又は前記複数の第３アイコンは前記第１入力部又は前記第２入力部の操作によりスクロール可能であり、
前記選択されたエリアの中央のアイコンのサイズは前記選択されたエリアの他のアイコンのサイズより大きく、
前記選択されたエリアの中央のアイコンの表示態様は前記他のアイコンの表示態様と異なるものであるシステム。
（２） （１）記載のシステムであって、
前記電子機器は、フロントエンドアプリケーション内のホームアプリケーションを起動することにより、前記ホーム画面を生成して前記ウェアラブル機器の前記表示部に表示させるシステム。
（３） （１）記載のシステムであって、
前記選択されたエリアの上下方向の幅は、前記非選択のエリアの上下方向の幅より広く、
前記選択されたエリア内の複数のアイコンは、前記非選択のエリア内の複数のアイコンより大きく表示されるシステム。
（４） （３）記載のシステムであって、
前記選択されたエリアに対し、前記第１入力部又は第２入力部の操作により、フォーカスを左右に移動させると共に、フォーカスのあるアイコンを前記選択されたエリアの中央に表示させるシステム。
（５） （４）記載のシステムであって、
前記選択されたエリア内の前記フォーカスのあるアイコンに対し、前記第１入力部又は第２入力部の操作により、該アイコンの関連情報を前記ホーム画面に表示させるシステム。
（６） （５）記載のシステムであって、
前記ホーム画面に表示された前記関連情報に対し、前記第１入力部又は第２入力部の操作により、前記関連情報を消去して、前記選択されたエリア内の前記フォーカスのあるアイコンを含む元のホーム画面を再表示するシステム。
（７） （１）記載のシステムであって、
前記ウェアラブル機器及び前記電子機器の状態を示すアイコンが前記第１エリアの右又は左の端部に表示されるシステム。
（８） （７）記載のシステムであって、
前記ウェアラブル機器及び前記電子機器の状態は、バッテリ残量、ネットワーク接続状態、及び通話状態を含むシステム。
（９） （１）記載のシステムであって、
前記第１入力部又は前記第２入力部の操作により前記選択されたエリアが上又は下に移動し、
前記選択されたエリアの移動に応じて前記第１エリア、前記第２エリア及び前記第３エリアの縦方向のサイズが変化するものであるシステム。
（１０） （９）記載のシステムであって、
前記前記第１エリアと前記第２エリアとの境界線及び前記第２エリアと前記第３エリアとの境界線は曲線であり、
前記選択されたエリアと該選択されたエリアの上のエリアとの境界線は前記選択されたエリア側に突出する曲線であり、前記選択されたエリアと該選択されたエリアの下のエリアとの境界線は前記選択されたエリア側に突出する曲線であるシステム。
（１１） （１）記載のシステムであって、
前記ウェアラブル機器はカメラをさらに具備し、
前記電子機器は通話可能に外部機器に接続され、前記カメラで撮影した画像又は前記外部機器から送信された画像を格納するメモリをさらに具備し、
前記複数の第１アイコンは前記外部機器との通話に関する複数のアイコンを具備し、
前記複数の第２アイコンは前記メモリに格納されたデータファイルの閲覧に関する複数のアイコンを具備し、
前記複数の第３アイコンは前記カメラの撮影モードに関する複数のアイコンを具備するものである請求項１記載のシステム。
（１２） （１１）記載のシステムであって、
前記複数の第１アイコンは、前記外部機器との遠隔支援アプリケーションを起動させるためのアイコンを含み、
前記複数の第２アイコンは、コンテンツビューワーアプリケーションを起動させるためのアイコンを含み、
前記複数の第３アイコンは、ウェアラブルビューワーの設定のためのアイコンを含むシステム。
（１３） （１１）記載のシステムであって、
前記複数の第１アイコンは前記外部機器との通話中に前記カメラで撮影したライブ映像を前記外部機器へ送信するためのアイコンを含むシステム。
（１４） （１１）記載のシステムであって、
前記複数の第１アイコンは前記カメラで撮影した画像又は前記メモリに格納された画像を前記外部機器へ送信し、前記外部機器から送信された画像を受信し、前記ウェアラブル機器へ送信するためのアイコンを含むシステム。
（１５） （１１）記載のシステムであって、
前記複数の第１アイコンは前記外部機器から送信されたアノテーション付き画像を受信し、前記ウェアラブル機器へ送信するためのアイコンを含むシステム。
（１６） （１１）記載のシステムであって、
前記複数の第２アイコンは前記メモリに格納された文書ファイル、画像ファイル、映像ファイルの閲覧に関するものであるシステム。
（１７） （１１）記載のシステムであって、
前記カメラは第１画質の静止画像を撮影する第１モードと前記第１画質よりも高画質の第２画質の静止画像を撮影する第２モードとのいずれかで動作可能であり、
前記複数の第３アイコンは前記カメラを前記第１モードと前記第２モードのいずれかで動作させるためのアイコンを含むシステム。
（１８） （１１）記載のシステムであって、
前記複数の第３アイコンは、写真撮影を実行するための機能を起動させるアイコン、及びビデオ撮影を実行するための機能を起動させるアイコンを含むシステム。
（１９） カメラを具備するウェアラブル機器と、
外部機器及び前記ウェアラブル機器に接続可能である電子機器と、
を具備するシステムであって、
前記電子機器は、
前記電子機器からの要求により前記外部機器との通話が開始された場合、前記カメラにより撮影されたライブ映像を前記外部機器へ送信し、前記外部機器からの要求により前記外部機器との通話が開始された場合、前記外部機器との通話中の前記電子機器からの送信指示に応じて前記ライブ映像を前記外部機器へ送信する送信手段を具備するものであるシステム。
（２０） （１９）記載のシステムであって、
前記ウェアラブル機器は表示部をさらに具備し、
前記電子機器は、
前記表示部へ表示のための信号を送信する第２送信手段と、
前記外部機器へ送信される前記ライブ映像を前記表示部に第１色の第１枠で囲んで表示させ、前記カメラにより撮影された静止画像を前記表示部に前記第１色とは異なる第２色の第２枠で囲んで表示させる表示制御手段と、
をさらに具備するシステム。
（２１） （１９）記載のシステムであって、
前記カメラは第１画質の静止画像を撮影する第１モードと前記第１画質よりも高画質の第２画質の静止画像を撮影する第２モードとのいずれかで動作可能であり、
前記送信手段は前記ライブ映像を前記電子機器に送信している間に前記カメラが前記第２モードで前記第２画質の静止画像を撮影する場合、前記電子機器への前記ライブ映像の送信を停止するシステム。
（２２） カメラと表示部を具備するウェアラブル機器と、
ケーブルを介して前記ウェアラブル機器に接続可能である第１電子機器と、
前記第１電子機器と無線により接続可能である第２電子機器と、
を具備するシステムであって、
前記ウェアラブル機器は前記第１電子機器へ画像情報を送信し、前記第１電子機器からの画像情報を受信する第１送受信手段を具備し、
前記第１電子機器は、
前記第２電子機器との間で音声情報を通信する第１通話手段と、
前記第２電子機器との間の音声情報通信中に前記ウェアラブル機器へ画像情報を送信又は前記ウェアラブル機器からの画像情報を受信する第２送受信手段と、
前記第２電子機器との間の音声情報通信中に前記第２電子機器へ画像情報を送信又は前記第２電子機器からの画像情報を受信する第３送受信手段と、を具備し、
前記第２電子機器は、
前記第１電子機器との間で音声情報を通信する第２通話手段と、
前記第１電子機器との間の音声情報通信中に前記第１電子機器へ情報を送信又は前記第１電子機器からの情報を受信する第４送受信手段と、を具備し、
前記第１電子機器は、前記ウェアラブル機器が接続されると、前記表示部にホーム画面を表示させ、
前記ホーム画面は、前記第２送受信手段、前記第３送受信手段又は前記第１通話手段を作動させるためのアイコンを含むものであるシステム。
（２３） （２２）記載のシステムであって、
前記ホーム画面はＸＭＬ言語で記述されている請求項２２記載のシステム。
（２４） カメラと表示部を具備するウェアラブル機器と無線により接続可能である電子機器であって、
前記ウェアラブル機器へ複数の第１画像情報を送信し、前記ウェアラブル機器からの複数の第２画像情報を受信する送受信手段と、
前記ウェアラブル機器へ送信した前記複数の第１画像情報と前記ウェアラブル機器から受信した前記複数の第２画像情報とを表示する表示部と、を具備し、
前記複数の第１画像情報は前記表示部の第１領域に送信時刻順に表示され、
前記複数の第２画像情報は前記表示部の第２領域に受信時刻順に表示されているものである電子機器。

【0378】

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

【符号の説明】

【0379】

１２…オペレータ端末、１４…サーバ、１６…モバイルＰＣ、１８…遠隔支援センター、２２…ネットワーク、２３…ウェアラブルデバイス、２４…ウェアラブルデバイス本体。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】

【図31】

【図32】

【図33】

【図34】