特許 7403895 施術動画のタグ付け装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2023-12-15

(45)【発行日】2023-12-25

(54)【発明の名称】施術動画のタグ付け装置

(51)【国際特許分類】

   A61B 34/10 20160101AFI20231218BHJP

   G16H 30/00 20180101ALI20231218BHJP

【ＦＩ】

A61B34/10

G16H30/00

【請求項の数】 6

(21)【出願番号】P 2023078206

(22)【出願日】2023-05-10

【審査請求日】2023-06-01

【早期審査対象出願】

(73)【特許権者】

【識別番号】517446072

【氏名又は名称】株式会社クオトミー

(74)【代理人】

【識別番号】100116850

【弁理士】

【氏名又は名称】廣瀬 隆行

(74)【代理人】

【識別番号】100165847

【弁理士】

【氏名又は名称】関 大祐

(72)【発明者】

【氏名】大谷 隼一

【審査官】松元 伸次

(56)【参考文献】

【文献】特開２００９－２９１３０８（ＪＰ，Ａ）

【文献】国際公開第２０２０／０３９５９３（ＷＯ，Ａ１）

【文献】特開２００９－２７９１９３（ＪＰ，Ａ）

【文献】特開２０１４－１７８４５８（ＪＰ，Ａ）

【文献】特表２０２２－５２０７０１（ＪＰ，Ａ）

【文献】国際公開第２０２３／００２６６１（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ１／００－１／３２

３４／００－９０／９８

Ｇ０６Ｔ１／００－１／４０

３／００－７／９０

Ｇ０６Ｑ５０／２２

Ｇ０６Ｖ１０／００－２０／９０

３０／４１８

４０／１６

４０／２０

Ｇ１６Ｈ１０／００－８０／００

Ｈ０４Ｎ５／７６－５／７７５

５／８０－５／９５６

７／１８

(57)【特許請求の範囲】

【請求項1】

施術動画が入力される施術動画入力部と、
前記施術動画に含まれる医療機器である使用医療機器を分析し、前記使用医療機器に基づいて前記施術動画に前記使用医療機器に関するタグを設けるタグ設置部と、
を有し、
前記タグを設けられた施術動画であるタグ付き施術動画は、前記タグが設けられた部分から頭出しできるようになり、
前記タグ設置部は、前記施術動画における前記使用医療機器部分に、当該使用医療機器に関する情報を表示するためのリンク情報をさらに付加することができる、
施術動画のタグ付け装置。

【請求項2】

請求項１に記載の装置であって、
前記施術動画に含まれる患者又は医療従事者を特定する画像部位である人特定部位を分析し、前記施術動画に人特定部位が含まれている場合、前記人特定部位を視認できないように前記施術動画を加工する、人特定部位除去部をさらに有する、装置。

【請求項3】

請求項１に記載の装置であって、
前記タグ設置部は、前記施術動画に基づいて、前記施術動画の施術工程である実施施術工程を分析し、前記施術動画に前記実施施術工程に関するタグをさらに設けることができる、
装置。

【請求項4】

請求項１に記載の装置であって、
前記タグ設置部は、前記施術動画に基づいて、前記施術動画の施術術式である実施施術術式を分析し、前記施術動画に前記実施施術術式に関する識別情報をさらに付加することができる、
装置。

【請求項5】

コンピュータを、
施術動画が入力される施術動画入力部と、
前記施術動画に含まれる医療機器である使用医療機器を分析し、前記使用医療機器に基づいて前記施術動画に前記使用医療機器に関するタグを設けるタグ設置部と、
を有し、
前記タグを設けられた施術動画であるタグ付き施術動画は、前記タグが設けられた部分から頭出しできるようになり、
前記タグ設置部は、前記施術動画における前記使用医療機器部分に、当該使用医療機器に関する情報を表示するためのリンク情報をさらに付加することができる、
施術動画のタグ付け装置として機能させるためのプログラム。

【請求項6】

請求項５に記載のプログラムを記憶したコンピュータが読み取り可能な非一時的記録媒体。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、施術動画のタグ付け装置などに関する。

【背景技術】

【0002】

特開２００６－４３２０９号公報には、外科手術の動画記録装置が記載されている。この装置は、外科手術の施術行為または器具の名称データを格納し、インデックスタイトル格納部に存在する特定の施術行為または器具を選択指定し、操作タイミングに対応するインデックス画像を記録する。この装置は、外科手術の記録動画を速やかに検索可能な状態で保存可能とする。このため、この装置は、施術動画を検索可能とし、さらにインデックス画像を表示できるので有益である。しかしながら、この装置は、動画をひとつひとつ人が検索可能な状態とする必要がある。このため、この装置は、大量の施術動画を処理できない。

【0003】

特許第５０４４０６９号公報には、医用画像診断装置が記載されている。この装置は、時間スケール上の任意のタイミングで種類の栞データが関連付けられた施術動画を得ることができる。この栞は、動画にアクセスするためのマーカーである。この装置は、人が各動画について栞データを手入力する必要がある。このため、この装置は、大量の施術動画を処理できない。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００６－４３２０９号公報

【文献】特許第５０４４０６９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

この発明は、施術動画に自動的にタグを設けることができる装置を提供することを目的とする。
この発明は、施術動画の個人を特定する画像部位を視認できないようにできる装置を提供することを上記とは別の目的とする。

【課題を解決するための手段】

【0006】

この発明は、基本的には、施術動画に含まれる医療機器を画像解析することで、医療機器に基づいて、自動的に施術動画にタグを設けることができるという知見に基づく。また、この発明は、基本的には、個人を特定する画像部位を、視認できないようにすれば、施術動画をより容易にデータベース化できるため好ましいという知見に基づく。

【0007】

施術動画のタグ付け装置１は、施術動画入力部３と、タグ設置部５とを有する。施術動画入力部３は、施術動画が装置１に入力されるための要素である。タグ設置部５は、施術動画に含まれる医療機器（「使用医療機器」とよぶ）を分析し、使用医療機器に基づいて施術動画に使用医療機器に関するタグを設けるための要素である。タグを設けられた施術動画（「タグ付き施術動画」ともよぶ）は、タグが設けられた部分から頭出しできるようになる。

【0008】

タグ設置部７の好ましい例は、施術動画に基づいて、施術動画の施術工程である実施施術工程を分析し、施術動画に実施施術工程に関するタグをさらに設けることができるものである。すると、タグを設けた施術動画は、実施施術工程に関する施術工程名を用いて、施術動画を実施施術工程に関するタグが設けられた部分から頭出しできる。

【0009】

タグ設置部７の好ましい例は、施術動画に基づいて、施術動画の施術術式である実施施術術式を分析し、施術動画に実施施術の術式に関する識別情報を施術動画に付加することができるものである。すると、実施施術の術式に関する識別情報を付加した施術動画は、実施施術術式に関する施術術式名を用いて、施術動画を検索できるようなる。

【0010】

タグ設置部７の好ましい例は、施術動画における使用医療機器部分に、当該使用医療機器に関する情報を表示するためのリンク情報をさらに付加することができるものである。

【0011】

施術動画のタグ付け装置１の好ましい例は、人特定部位除去部７をさらに有する。人特定部位７は、施術動画に含まれる患者又は医療従事者を特定する画像部位である人特定部位を分析し、施術動画に人特定部位が含まれている場合、人特定部位を視認できないように施術動画を加工するための要素である。

【0012】

この明細書に記載される別の発明は、コンピュータを上記の施術動画のタグ付け装置として機能させるためのプログラムや、そのようなプログラムを記憶したコンピュータが読み取り可能な非一時的記録媒体に関する。

【発明の効果】

【0013】

この発明によれば、施術動画に含まれる医療機器を画像解析することで、医療機器に基づいて、自動的に施術動画にタグを設けることができる。また、この発明の好ましい態様は、個人を特定する画像部位を、視認できないようにできるので、施術動画をより容易にデータベース化できる。

【図面の簡単な説明】

【0014】

【図1】図１は、施術動画のタグ付け装置を説明するためのブロック図である。

【図2】図２は、施術動画に対してタグ付けを行う際の例を示すフローチャートである。

【図3】図３は、タグが付与された施術動画の例を示す概念図である。

【図4】図４は、施術動画における医療機器部分に医療機器に関する情報へアクセスするための情報が付与された例を示す概念図である。

【発明を実施するための形態】

【0015】

以下，図面を用いて本発明を実施するための形態について説明する。本発明は，以下に説明する形態に限定されるものではなく，以下の形態から当業者が自明な範囲で適宜修正したものも含む。

【0016】

図１は、施術動画のタグ付け装置を説明するためのブロック図である。図１に示されるように、この施術動画のタグ付け装置１は、施術動画入力部３と、タグ設置部５とを有する。この装置１は、人特定部位除去部７をさらに有してもよい。この装置１は、医療機器記憶部１１、手情報記憶部１３、施術工程記憶部１５、施術対象部位記憶部１７、施術術式記憶部１９、及び人特定部位記憶部２１のうちいずれか又は２つ以上をさらに有してもよい。施術動画のタグ付け装置１は、コンピュータにより実装される。つまり、施術動画のタグ付け装置１を構成する各要素は、コンピュータにより実装されればよい。

【0017】

コンピュータは，入力部，出力部，制御部，演算部及び記憶部を有しており，各要素は，バスなどによって接続され，情報の授受を行うことができるようにされている。例えば，記憶部には，制御プログラムが記憶されていてもよいし，各種情報が記憶されていてもよい。入力部から所定の情報が入力された場合，制御部は，記憶部に記憶される制御プログラムを読み出す。そして，制御部は，適宜記憶部に記憶された情報を読み出し，演算部へ伝える。また，制御部は，適宜入力された情報を演算部へ伝える。演算部は，受け取った各種情報を用いて演算処理を行い，記憶部に記憶する。制御部は，記憶部に記憶された演算結果を読み出して，出力部から出力する。このようにして，各種処理や各工程が実行される。この各種処理を実行するものが，各部や各手段である。コンピュータは，プロセッサを有し，プロセッサが各種機能や各種工程を実現するものであってもよい。コンピュータは，スタンドアロンであってもよい。コンピュータは，機能の一部がサーバと端末に分散されていてもよい。その場合サーバと端末とは，インターネットやイントラネットなどのネットワークにより，情報の授受を行うことができるようにされていることが好ましい。コンピュータは、プロセッサと、プロセッサに連結されたメモリと、を備えていてもよい。そして、メモリが、命令を格納しており、命令は、プロセッサによって実行されると、コンピュータに、各種工程を行わせたり、コンピュータを各種要素として機能させるものであってもよい。コンピュータは、各種教師データを与えて学習モデルを構築し、機械学習により各種演算を実現するようにしてもよい。この場合、コンピュータは、ＡＩ（人工知能）の機械学習・深層学習により作成された学習モデルを用いて各種解析や分析を実行してもよい。

【0018】

コンピュータの記憶部には、例えば、動画を解析する際に利用する解析用モデル（学習済モデル）が記憶されていてもよい。解析用モデルは、手術に使用される医療機器（機器の位置変化を含んでよい）と、医療機器が使用される術式、及び施術工程とを学習したモデルであることが好ましい。なお、解析用モデルは、更に、施術動画に含まれる手又は腕の位置（手又は腕の位置変化を含んでよい）と、手又は腕の位置に対応する術式、及び施術工程とを学習したモデルであってもよい。コンピュータは、手術を撮影した施術動画を解析し、施術動画データに含まれる手術の術式の同定及び施術工程の分類の少なくとも一方を行うことが好ましい。コンピュータは、施術動画から、手術で使用される医療機器と、医療器の位置（位置変化を含んでよい）から工程を分類するようにしてよい。また、コンピュータは、手術で使用される医療機器に加えて、医療機器を扱う手又は腕の位置変化から施術工程を分類するようにしてよい。また、順序を含む施術工程の組み合わせから術式を同定することが可能であるため、コンピュータはは、分類した順序を含む工程の組み合わせに基づいて手術の術式を同定してもよい。この際、順序を含む工程の組み合わせと術式とを対応付けた情報を参照して手術の術式を同定してもよい。このようにコンピュータは、機械学習により各種学習モデルを学習させ、学習させたモデルを用いて、各種処理を行うようにしてもよい。

【0019】

施術動画のタグ付け装置１は、施術動画の所定カ所から施術動画を視聴できるように頭出しするためのタグを施術動画に付与するための装置である。
施術動画は、手術や施術に関する動画であればよい。手術の例は、外科手術である。施術の例は、エステやマッサージである。
タグは、インデックスや栞などともよばれ、タグが付加された部分から動画を視聴できるようにするために動画に付された情報である。なお、この装置１は、施術動画を、タグを利用して検索できるようにすることが好ましい。例えば、ある施術のある工程で、ある医療機器が用いられる際から動画を視聴できるようになる。タグは、例えば、施術動画においてある医療機器が用いられた際の医療機器名と関連して記憶部に記憶されることが好ましい。そして、施術動画の表示には、タグ部分と合わせて、そのタグと関連して記憶された医療機器の名称が表示されるようにしてもよい。タグを設けた施術動画は、使用医療機器に関する医療機器名を用いて、施術動画を使用医療機器に関するタグが設けられた部分から頭出しできるようになる。

【0020】

施術動画入力部３は、施術動画が入力される要素である。施術動画のタグ付け装置１は、動画を撮影する撮影部（例えば、カメラやビデオカメラ）と接続されており、施術動画が撮影されると、施術動画のタグ付け装置１に、施術動画が入力されてもよい。また、施術動画のタグ付け装置１に、施術動画に関する動画ファイルが、ドラックアンドドロップにぃより、入力されてもよい。さらに、施術動画のタグ付け装置１がインターネット上の施術動画を検索し、ヒットした施術動画を自動的に入力するようにしてもよい。このようにして、施術動画のタグ付け装置１に、施術動画が入力される。

【0021】

タグ設置部５は、施術動画に含まれる医療機器である使用医療機器を分析し、使用医療機器に基づいて施術動画に使用医療機器に関するタグを設けるための要素である。この装置１は、医療機器記憶部１１をさらに有する。医療機器記憶部１１は、医療機器の名称、及び医療機器の画像データを関連付けて記憶する。医療機器記憶部１１は、さらに医療機器のＩＤを記憶してもよい。タグ設置部５は、例えば、各種医療機器に関する画像データを機械学習し、医療機器に関する学習モデルを作成して、記憶部に記憶しておいてもよい。そして、タグ設置部５は、医療機器に関する学習モデルを用いて、施術動画に含まれる医療機器を解析してもよい。タグ設置部５は、例えば、各種施術工程や各種施術に関する動画データを機械学習し、各種施術工程や各種施術に関する学習モデルを作成し、記憶部に記憶しておいてもよい。そして、タグ設置部５は、各種施術工程や各種施術に関する学習モデルを用いて、施術動画における各施術工程や、施術動画に関する実施施術を分析してもよい。

【0022】

タグ設置部５は、例えば、記憶部から施術動画に含まれる画像（施術画像）を読み出すとともに、医療機器記憶部１１から医療機器の画像データを読み出す。そして、タグ設置部５は、施術画像と、第１の医療機器の画像データとを照合する。タグ設置部５は、施術画像に第１の医療機器の画像データが含まれると判断した場合は、第１の医療機器を使用医療機器と判断する。タグ設置部５による施術画像と第１の医療機器の画像データとを用いた照合処理の結果、タグ設置部５が施術画像に第１の医療機器が含まれないと判断した場合、タグ設置部５は、医療機器記憶部１１から次の医療機器である第２の医療機器の画像データを読み出す。そして、タグ設置部５は、この施術画像と医療機器の画像データとの照合処理を、繰り返す。このようにすることで、タグ設置部５は、施術動画に含まれる画像における医療機器を特定できる。つまり、タグ設置部５は、施術動画における、あるタイミングで使用された医療機器を特定できる。

【0023】

タグ設置部５の好ましい例は、施術動画（施術画像）に含まれる施術者の手を画像解析するとともに、施術者の手で把持されている医療機器を、使用医療機器とするものである。例えば、施術動画には、施術に使用されていない医療機器が含まれている場合がある。この例では、そのような場合であっても、施術に実際に使用されている医療機器に関してタグを設けることができる。この例では、施術動画のタグ付け装置１が、手情報記憶部１３を有していてもよい。すると、タグ設置部５は、例えば、記憶部から施術動画に含まれる画像（施術画像）を読み出すとともに、手情報記憶部１３から手の画像データを読み出す。そして、タグ設置部５は、施術画像と、手の画像データとを照合する。このようにすれば、施術動画に含まれる画像（施術画像）における施術者の手を把握できる。そして、施術動画（施術画像）に複数の医療機器が含まれている場合、タグ設置部５は、施術動画（施術画像）のうち施術者の手に近い医療機器を使用医療機器としてもよい。また、手情報記憶部１３が、医療機器を把持している状態の手の画像データを記憶する場合、その状態の手に把持されていると分析される医療機器を使用医療機器としてもよい。

【0024】

タグ設置部５の好ましい例は、施術動画（施術画像）に含まれる施術者の手と助手の手を画像解析するとともに、施術者の手で把持されている医療機器を、使用医療機器とするものである。タグ設置部５は、例えば、記憶部から施術動画に含まれる画像（施術画像）を読み出すとともに、手情報記憶部１３から手の画像データを読み出す。そして、タグ設置部５は、施術画像と、手の画像データとを照合する。タグ設置部５は、施術画像に複数の手が含まれる場合、施術画像における手の位置や、施術画像における手の近くの医療機器に関する情報を用いて、いずれの手が施術者の手であるか分析してもよい。例えば、手情報記憶部１３には、右手の画像データと、左手の画像データとが記憶されている。そして、タグ設置部５は、右手の画像データと、左手の画像データとを用いて、施術画像に含まれる手が右手のものか左手のものか分析する。そのうえで、例えば、タグ設置部５は、複数の手の組のうち、画像の中央からの距離が小さい組を、施術者の手（の組）と判断すればよい。また、画面の中央からの距離が大きい組を助手の手（の組）と判断すればよい。そして、タグ設置部５は、施術画像に含まれる施術者の手に近いか、又は施術者の手に把持されていると画像解析される医療機器を、施術者が使用する医療機器と分析し、記憶部に記憶してもよい。また、タグ設置部５は、施術画像に含まれる助手の手に近いか、又は助手の手に把持されていると画像解析される医療機器を、助手が使用する医療機器と分析し、記憶部に記憶してもよい。

【0025】

タグ設置部７の好ましい例は、施術動画に基づいて、施術動画の施術術式である実施施術術式を分析し、施術動画に実施施術の術式に関する識別情報を施術動画に付加することができるものである。すると、実施施術の術式に関する識別情報を付加した施術動画は、実施施術術式に関する施術術式名を用いて、施術動画を検索できるようなる。

【0026】

施術工程は、施術における各工程を意味する。施術工程の例は、展開（例：腰椎展開）、固定、スクリュー挿入、除圧、椎間板操作、及び閉創である。施術工程は、これらの例に限られず、各種手術や処置における様々な工程であって良い。

【0027】

タグ設置部５は、例えば、施術動画（施術画像）に含まれる医療機器の種類に基づいて、施術工程を分析してもよい。タグ設置部５は、例えば、施術動画（施術画像）に含まれる医療機器の動きに基づいて、施術工程を分析してもよい。タグ設置部５は、例えば、施術動画（施術画像）に含まれる医療機器と施術対象部位の種類に基づいて、施術工程を分析してもよい。タグ設置部５は、例えば、施術動画（施術画像）に含まれる医療機器のうち、施術者が使用する医療機器と、助手が使用する医療機器に関する情報から、施術工程を分析してもよい。

【0028】

施術工程記憶部１５は、施術工程と、医療機器とを関連付けて記憶する。タグ設置部５は、記憶部から使用医療機器に関する情報を読み出し、施術工程記憶部１５から使用医療機器と関連付けて記憶されている施術工程を読み出せばよい。このように、タグ設置部５は、施術工程を分析するために必要な情報を記憶した施術工程記憶部１５から、施術工程を分析するために必要な情報を用いて、施術工程を読み出せばよい。例えば、施術工程記憶部１５が、施術者が使用する医療機器と、助手が使用する医療機器と関連して、施術工程を記憶しているとする。この場合、タグ設置部５は、記憶部から施術者が使用する医療機器と、助手が使用する医療機器とを読み出して、施術工程記憶部１５が、これらの情報と関連して記憶する施術工程を読み出す。読み出した施術工程は、適宜記憶部に記憶されてもよい。

【0029】

表１は、施術工程記憶部を説明するための概念図である。表１に示されるように、施術工程記憶部１５は、施術工程と、医療機器と関連付けて記憶する。また、表１に示されるように、施術工程記憶部１５は、施術工程と、医療機器及び対象部位とを関連付けて記憶してもよい。このようにすることで、装置１は、医療機器に関する情報を用いて、施術工程記憶部１５から、実施施術工程を読み出すことができる。例えば、表１の例では、使用医療機器がＡ１、Ａ２、Ａ３及びＡ４の場合、実施施術工程として、Ａが読み出されてもよい。また、表１の例では、使用医療機器がＡ１、Ａ２、Ａ３及びＡ４であり、対象部位がＡ５の場合、実施施術工程として、Ａが読み出されてもよい。

【0030】

【表1】

【0031】

施術対象部位記憶部１７は、例えば、施術の際の対象部位と、その対象部位の画像とを関連付けて記憶したものである。タグ設置部５は、例えば、施術動画（施術画像）に含まれる画像と、施術対象部位記憶部１７に記憶された対象部位の画像とを照合することで、施術動画（施術画像）に含まれる施術対象部位を特定すればよい。施術対象部位の例は、大腿骨、鎖骨、頭蓋骨、大腸、小腸、及び目である。このような照合作業は、機械学習を用いることで、タグ設置部５が行うことができる。

【0032】

タグ設置部７の好ましい例は、施術動画に基づいて、施術動画の施術術式である実施施術術式を分析し、施術動画に実施術式に関するタグをさらに設けることができるものである。すると、タグを設けた施術動画は、実施施術工程に関する施術術式名を用いて、施術動画を検索できるようにできる。施術術式記憶部１９は、複数の施術工程と関連して施術術式を記憶してもよい。また、施術術式記憶部１９は、複数の施術工程及び複数の医療機器と関連して、施術術式を記憶してもよい。タグ設置部７は、施術術式記憶部１９から施術動画に関する施術工程及び複数の医療機器に関する情報を読み出して、施術術式記憶部１９と照合し、これらの施術工程や医療機器と関連して記憶されている施術術式を読み出せばよい。読み出した施術術式は、施術動画と関連して、記憶部に記憶されればよい。

【0033】

表２は、施術術式記憶部を説明するための概念図である。表２に示されるように、施術術式記憶部１９は、施術術式と、施術工程及び医療機器とを関連付けて記憶する。また、表２に示されるように、施術術式記憶部１９は、施術術式と、施術工程、医療機器及び対象部位とを関連付けて記憶してもよい。このようにすることで、装置１は、必要な情報を用いて、施術術式記憶部１９から、実施施術術式を読み出すことができる。例えば、表２の例では、施術工程がＢ１、Ｂ２、Ｂ３及びＢ４であり、使用医療機器がＢ５、Ｂ６、Ｂ７及びＢ８の場合、実施施術術式として、Ｂが読み出されてもよい。また、表２の例では、施術工程がＢ１、Ｂ２、Ｂ３及びＢ４であり、使用医療機器がＢ５、Ｂ６、Ｂ７及びＢ８であり、対象部位がＢ９の場合、実施施術術式として、Ｂが読み出されてもよい。

【0034】

【表2】

【0035】

タグ設置部７の好ましい例は、施術動画における使用医療機器部分に、当該使用医療機器に関する情報を表示するためのリンク情報をさらに付加することができるものである。施術動画のタグ付け装置１は、例えば、記憶部に、医療機器と関連して、医療機器に関する説明文、説明画像、説明資料、ウェブサイトへのアクセス情報（ＵＲＬ）、購入情報を記憶する。そして、施術動画のタグ付け装置１は、施術動画の施術画像において、医療機器部分を把握する。タッチパネルや、マウスによる指示により、医療機器部分が支持された場合、施術動画のタグ付け装置１に、使用医療機器を指示する入力がなされる。すると、施術動画のタグ付け装置１は、記憶部から記憶された使用医療機器に関するリンク情報を読み出し、リンク情報と関連するデータを読み出したり、リンク情報と関連したウェブサイトへアクセスできるようにされる。すると、ユーザの表示部に、使用医療機器に関する情報が表示されることとなる。このようにすれば、例えば、施術動画を視認したユーザが、実際に使用された医療機器の情報を受け取ったり、すぐにその医療機器を購入したりできることとなる。

【0036】

施術動画のタグ付け装置１の好ましい例は、人特定部位除去部７をさらに有する。人特定部位７は、施術動画に含まれる患者又は医療従事者を特定する画像部位である人特定部位を分析し、施術動画に人特定部位が含まれている場合、人特定部位を視認できないように施術動画を加工するための要素である。人特定部位除去部７をさらに有するため、施術動画（施術画像）に、患者の顔、入れ墨、医療従事者の顔、ネームプレート、病院名、などが含まれている場合に、これをマスクしたり、モザイクをかけたりして、匿名性を担保することができる。このようにすれば、大量の動画を、匿名性を高めたうえで、データベース化できることとなる。人特定部位の例は、患者の顔、入れ墨、医療従事者の顔、ネームプレート、及び病院名である。

【0037】

例えば、人特定部位除去部７は、過去の施術動画と、施術動画の人特定部位を特定した例、施術動画における人特定部位を視認できないように加工した例を教師データとして、学習モデルを構築し、機械学習する。そして、人特定部位除去部７は、機械学習により得られた学習モデルを用いて、入力された施術動画について、施術動画の人特定部位を特定し、施術動画における人特定部位を視認できないように加工すればよい。施術動画のタグ付け装置１は、加工後の施術動画を適宜記憶部に記憶すればよい。

【0038】

人特定部位記憶部２１は、上記した施術動画の人特定部位を特定するための学習モデルを記憶してもよい。また、人特定部位記憶部２１は、人特定部位に関する画像データを記憶してもよい。この場合、人特定部位除去部７は、入力された施術動画（施術画像）について、人特定部位記憶部２１に記憶された人特定部位に関する画像データと照合し、入力された施術動画（施術画像）に人特定部位に関する画像部分が含まれている場合、その部分を人特定部位として特定してもよい。そして、人特定部位除去部７は、施術動画（施術画像）に含まれる人特定部位に関する画像部分を、他社が視認できないように画像処理をすればよい。画像処理の例は、モザイクをかける、ブルワー（ぼやかし）処理をする、マスク画像を画像部分に上書きするというものである。

【0039】

施術動画のタグ付け装置１は、タグ付けした施術動画について、実施施術術式、実施施術工程、使用医療機器、といった情報を含むデータベースを作成し、これらの情報により施術動画を検索可能にしてもよい。このようにすれば、使用医療機器などをインデックス化でき、容易に必要な施術動画を視聴できるようになる。

【0040】

この明細書に記載される別の発明は、コンピュータを上記の施術動画のタグ付け装置として機能させるためのプログラムや、そのようなプログラムを記憶したコンピュータが読み取り可能な非一時的記録媒体に関する。記録媒体の例は、ハードディスク、ＣＤ、ＣＤ－ＲＯＭ、フロッピーディスク、ブルーレイディスク、ＵＳＢメモリ及びＳＤカードである。

【0041】

コンピュータは、プロセッサと、プロセッサに連結されたメモリと、を備えていてもよい。そして、メモリが、命令（プログラム）を格納しており、命令は、プロセッサによって実行されると、コンピュータに、施術動画が入力され、施術動画に含まれる医療機器である使用医療機器を分析させ、使用医療機器に基づいて施術動画に使用医療機器に関するタグを設けさせる。また、プログラムは、コンピュータに、施術動画に基づいて、施術動画の施術工程である実施施術工程を分析しさせ、施術動画に実施施術工程に関するタグをさらに設けさせてもよい。さらに、プログラムは、コンピュータに、施術動画の施術術式である実施施術術式を分析させ、施術動画に実施術式に関する識別情報をさらに付加させてもよい。さらに、プログラムは、コンピュータに、施術動画に含まれる患者又は医療従事者を特定する画像部位である人特定部位を分析させ、施術動画に人特定部位が含まれている場合、人特定部位を視認できないように施術動画を加工させてもよい。

【0042】

図２は、施術動画に対してタグ付けを行う際の例を示すフローチャートである。図中Ｓは、ステップ（工程）を意味する。

【0043】

動画入力工程（Ｓ１０１）
施術動画入力部３から施術動画のタグ付け装置１に施術動画が入力される。

【0044】

使用医療機器分析工程（Ｓ１０２）
タグ設置部７は、施術動画に含まれる各施術画像について、医療機器に関する画像部分が含まれるか解析する。この際に、タグ設置部７は、医療機器に関して機械学習した学習モデルを参照してもよい。また、タグ設置部７は、医療機器に関する画像データを用いて、施術画像に医療機器に関する画像データが含まれるか否か解析することで、施術動画に含まれる医療機器の有無を分析してもよい。施術画像に、医療機器が含まれていないと解析した場合は、医療機器が存在しないという情報を施術画像とともに記憶部に記憶してもよい。また、タグ設置部７が、施術画像に、医療機器が含まれていると解析した場合は、施術画像（及び施術画像の施術動画における時間）とともに、使用医療機器の名称など、使用医療機器に関する情報を記憶部に記憶してもよい。

【0045】

使用医療機器に関するタグ付与工程（Ｓ１０３）
タグ設置部７が、施術動画に、あらたな医療機器が含まれたと判断した場合（施術画像に初めてある医療機器が含まれた場合）、その施術画像の放映時間などその施術画像の識別情報とともに、タグを設ければよい。具体的には、タグ設置部７が、その施術画像の識別情報とともにタグ関連させて、記憶部に記憶する。タグには、その使用医療機器に関する情報が関連して記憶されてもよい。このようにして、タグ設置部７が、タグを設けられた施術動画（「タグ付き施術動画」とよぶ）を得ることができる。

【0046】

実施施術工程分析工程（Ｓ１０４）
タグ設置部７は、施術動画に基づいて、施術動画の施術工程である実施施術工程を分析し、施術動画に実施施術工程に関するタグをさらに設ける。この際に、タグ設置部７は、施術工程に関して機械学習した学習モデルを参照してもよい。また、タグ設置部７は、施術動画（施術画像）に含まれる医療機器又は対象部位に関する情報を用いて、施術工程記憶部１５や施術対象部位記憶部１７に記憶された情報を参照して、施術工程を分析してもよい。

【0047】

実施施術工程に関するタグ付与工程（Ｓ１０５）
タグ設置部７が、施術動画に、あらたな実施施術工程が含まれたと判断した場合（施術画像に初めてある実施施術工程が含まれた場合）、その施術画像の放映時間などその施術画像の識別情報とともに、タグを設ければよい。そのタグには、実施施術工程に関する情報が関連して記憶されてもよい。このようにして、タグ設置部７が、実施施術工程に関するタグを設けられた施術動画を得ることができる。

【0048】

実施施術術式分析工程（Ｓ１０６）
タグ設置部７が、施術動画に基づいて、施術動画の施術術式である実施施術術式を分析し、施術動画に実施施術の術式に関する識別情報を施術動画に付加する。この際に、タグ設置部７は、施術術式に関して機械学習した学習モデルを参照してもよい。また、タグ設置部７は、実施施術工程に関する情報を用いて、実施施術術式記憶部１９に実施施術工程と関連して記憶されている実施施術術式を読み出してもよい。

【0049】

実施施術術式情報付与工程（Ｓ１０７）
装置１（タグ設置部７）は、施術動画に関連して、実施施術の術式に関する識別情報を施術動画に付加し、記憶部に記憶してもよい。この実施施術の術式に関する識別情報も、検索可能な情報であるので、タグの一種として扱ってもよい。

【0050】

人特定部位判断工程（Ｓ１０８）
人特定部位除去部７は、機械学習により得られた学習モデルを用いて、入力された施術動画（施術画像）について、施術動画の人特定部位を特定する。人特定部位除去部７が、施術画像に人特定部位が含まれないと判断した場合、人特定部位除去を行わない。一方、人特定部位除去部７が、施術画像に人特定部位が含まれると判断した場合、人特定部位除去を行う。

【0051】

人特定部位除去工程（Ｓ１０９）
人特定部位除去部７が、施術画像に人特定部位が含まれると判断した場合、施術画像における人特定部位を視認できないように施術画像を加工する。例えば、人特定部位除去部７が、人特定部位をマスク画像にする処理を行えばよい。このようにすれば、施術動画から人特定部位が視認できないように処理されることとなる。

【0052】

図３は、タグが付与された施術動画の例を示す概念図である。この例では、施術動画の所定のタイミングにおいてタグが表示されている。そして、そのタグをクリック等することで、タグが付された位置から施術動画を閲覧できるようにされている。タグと関連して、使用医療機器が表示されるようにしてもよい。図３の例では、施術工程ごとに代表となる施術画像がサルネイム表示（動画の下部に小さく表示）されている。

【0053】

図４は、施術動画における医療機器部分に、医療機器に関する情報へアクセスするための情報が付与された例を示す概念図である。

【産業上の利用可能性】

【0054】

この発明は、医療情報を提供する分野において利用されうる。

【符号の説明】

【0055】

１ 施術動画のタグ付け装置
３ 施術動画入力部
５ タグ設置部
７ 人特定部位除去部
１１ 医療機器記憶部
１３ 手情報記憶部
１５ 施術工程記憶部
１７ 施術対象部位記憶部
１９ 実施施術術式記憶部
２１ 人特定部位記憶部

【要約】      （修正有）

【課題】施術画像に、タグを自動的に設けることができる装置を提供する。
【解決手段】施術動画が入力される施術動画入力部と、施術動画に含まれる医療機器である使用医療機器を分析し、使用医療機器に基づいて施術動画に使用医療機器に関するタグを設けるタグ設置部と、を有し、タグを設けられた施術動画であるタグ付き施術動画は、タグが設けられた部分から頭出しできるようになる、施術動画のタグ付け装置。
【選択図】図１

【図1】

【図2】

【図3】

【図4】