特表 2024-529753 情報処理方法、非一時的なコンピュータ可読記憶媒体及び情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-08-08

(54)【発明の名称】情報処理方法、非一時的なコンピュータ可読記憶媒体及び情報処理装置

(51)【国際特許分類】

   G06T 13/40 20110101AFI20240801BHJP

【ＦＩ】

G06T13/40

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024510280

(86)(22)【出願日】2022-10-27

(85)【翻訳文提出日】2024-02-19

(86)【国際出願番号】 JP2022040119

(87)【国際公開番号】W WO2023074786

(87)【国際公開日】2023-05-04

(31)【優先権主張番号】17/512,694

(32)【優先日】2021-10-28

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】501440684

【氏名又は名称】ソフトバンク株式会社

(71)【出願人】

【識別番号】523384702

【氏名又は名称】ニューラルエックス インコーポレイテッド

【氏名又は名称原語表記】ＮｅｕｒａｌＸ Ｉｎｃ．

【住所又は居所原語表記】１０９５６ １／２ Ｗｅｙｂｕｒｎ Ａｖｅｎｕｅ，Ｌｏｓ Ａｎｇｅｌｅｓ，Ｃａｌｉｆｏｒｎｉａ Ｕ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】石若 裕子

(72)【発明者】

【氏名】イーストマン マイケル

(72)【発明者】

【氏名】嘉数 翔

(72)【発明者】

【氏名】仲田 真輝

【テーマコード（参考）】

5B050

【Ｆターム（参考）】

5B050AA03

5B050BA08

5B050BA09

5B050BA13

5B050CA07

5B050DA01

5B050EA04

5B050EA24

5B050EA26

5B050FA02

5B050FA05

(57)【要約】

【課題】魚の群れに関する情報を精度よく推定することを可能とする。
【解決手段】本願に係る情報処理方法は、コンピュータが実行する情報処理方法であって、魚の生物学的な特性に関する内的パラメータの値と、魚の周囲の環境の特性に関する外的パラメータの値と、魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する取得工程と、取得工程によって取得された内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、魚の群れに属する各魚の行動を含むシミュレーション画像を生成する生成工程と、を含むことを特徴とする。
【選択図】図１

【特許請求の範囲】

【請求項1】

コンピュータが実行する情報処理方法であって、
魚の生物学的な特性に関する内的パラメータの値と、前記魚の周囲の環境の特性に関する外的パラメータの値と、前記魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する取得工程と、
前記取得工程によって取得された前記内的パラメータの値、前記外的パラメータの値、および前記群れパラメータの値に基づいて、前記魚の群れに属する各魚の行動を含むシミュレーション画像を生成する生成工程と、
を含むことを特徴とする情報処理方法。

【請求項2】

前記生成工程は、
前記内的パラメータの値、前記外的パラメータの値、および前記群れパラメータの値に基づいて、前記魚の群れに属する各魚の行動を制御することで、前記シミュレーション画像を生成する、
請求項１に記載の情報処理方法。

【請求項3】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚が各行動をとる意思決定に要する時間の長さおよび前記時間の間隔に基づいて、当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項4】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚が好む水温に基づいて、当該各魚が好みの水温の領域に向かうように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項5】

前記生成工程は、
前記外的パラメータの値として、前記魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、当該各魚が好みの水温の領域に向かうように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項6】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、前記魚の群れに属する各魚の周囲の水温が高いほど当該各魚の移動速度が大きくなるように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項7】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚が好む照度に基づいて、当該各魚が好みの照度の領域に向かうように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項8】

前記生成工程は、
前記外的パラメータの値として、前記魚の群れに属する各魚が所在する生け簀における照度の分布に基づいて、当該各魚が好みの照度の領域に向かうように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項9】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚と障害物との距離が所定の閾値以下である場合に、当該各魚が当該障害物を回避する回避行動をとるように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項10】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚と障害物との距離が所定の閾値以下である場合に、当該各魚に対して作用する反発力に基づいて、当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項11】

前記生成工程は、
前記魚の群れに属する各魚と障害物との距離が小さいほど大きい前記反発力に基づいて、前記各魚の行動を制御する、
請求項１０に記載の情報処理方法。

【請求項12】

前記生成工程は、
前記内的パラメータの値として、前記魚の群れに属する各魚の体長に基づいて、前記体長が大きいほど当該各魚の移動速度が大きくなるように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項13】

前記生成工程は、
前記群れパラメータの値として、前記魚の群れに属する各魚の位置から所定の範囲内に他の魚が位置する場合に、当該各魚が前記群行動をとるように当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項14】

前記生成工程は、
前記群れパラメータの値として、前記魚の群れに属する各魚同士がばらばらにならないように近付こうとする力である結合力に基づいて、当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項15】

前記生成工程は、
前記群れパラメータの値として、前記魚の群れに属する各魚同士が衝突を避けるため離れようとする力である分離力に基づいて、当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項16】

前記生成工程は、
前記群れパラメータの値として、前記魚の群れに属する各魚同士が群れとして動く方向を揃えようとする力である整列力に基づいて、当該各魚の行動を制御する、
請求項１に記載の情報処理方法。

【請求項17】

前記生成工程は、
前記シミュレーション画像を機械学習モデルに入力した場合に、当該シミュレーション画像の生成に用いられたパラメータ情報に基づいて生成された正解データまたは当該正解データと対応する情報を出力するように前記機械学習モデルを学習させる、
請求項１に記載の情報処理方法。

【請求項18】

前記生成工程によって生成された学習済みの前記機械学習モデルを用いて、前記魚の群れを撮像した撮像画像から前記撮像画像に含まれる前記魚の群れに関する情報を推定する推定工程をさらに備える、
請求項１７に記載の情報処理方法。

【請求項19】

魚の生物学的な特性に関する内的パラメータの値と、前記魚の周囲の環境の特性に関する外的パラメータの値と、前記魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する取得手順と、
前記取得手順によって取得された前記内的パラメータの値、前記外的パラメータの値、および前記群れパラメータの値に基づいて、前記魚の群れに属する各魚の行動を含むシミュレーション画像を生成する生成手順と、
をコンピュータに実行させる情報処理プログラムが保存された非一時的なコンピュータ可読記憶媒体。

【請求項20】

魚の生物学的な特性に関する内的パラメータの値と、前記魚の周囲の環境の特性に関する外的パラメータの値と、前記魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する取得部と、
前記取得部によって取得された前記内的パラメータの値、前記外的パラメータの値、および前記群れパラメータの値に基づいて、前記魚の群れに属する各魚の行動を含むシミュレーション画像を生成する生成部と、
を備える情報処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理方法、非一時的なコンピュータ可読記憶媒体及び情報処理装置に関する。

【背景技術】

【0002】

深層学習（Deep Learning）は、コンピュータビジョンや音声認識の分野で素晴らしい結果を出している。例えば、養殖場では生簀内の魚の群れの尾数のカウントが課題となっているが、深層学習の手法を用いれば、このような問題が改善されると期待される。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】国際公開第２０１９／０４５０９１号

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで、深層学習による解析の精度はトレーニングデータに依存する。すなわち、精度の高い解析結果を得るためには、多様なパターンを網羅した大量のトレーニングデータを機械学習モデルに学習させる必要がある。例えば、コンピュータビジョンを用いて生簀内の魚の群れを撮影した撮影画像から魚の群れに関する情報（例えば、尾数）を精度よく推定するには、魚の周囲の環境、魚種や尾数などの多様な条件の組み合わせを網羅した大量のトレーニングデータを機械学習モデルに学習させる必要がある。

【0005】

しかしながら、多様なパターンを網羅した大量のトレーニングデータを作成することは容易ではない。例えば、多様な条件の組み合わせを網羅した膨大な数の画像それぞれに対して、正解データを人手によって付与することで大量のトレーニングデータを作成するのは非常に困難である。

【0006】

このように、多様なパターンを網羅した大量のトレーニングデータを得ることができない場合、機械学習モデルに質の高い学習をさせることができないため、実際の撮影画像から魚の群れに関する情報を精度よく推定することが難しい場合がある。

【課題を解決するための手段】

【0007】

本発明は、従来技術の課題を少なくとも部分的に解決することを目的とする。

【0008】

実施形態の一態様によれば、本願に係る情報処理方法は、コンピュータが実行する情報処理方法であって、魚の生物学的な特性に関する内的パラメータの値と、前記魚の周囲の環境の特性に関する外的パラメータの値と、前記魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する取得工程と、前記取得工程によって取得された前記内的パラメータの値、前記外的パラメータの値、および前記群れパラメータの値に基づいて、前記魚の群れに属する各魚の行動を含むシミュレーション画像を生成する生成工程と、を含むことを特徴とする。

【0009】

上記ならびにその他の本発明の目的、特徴、効果および技術的・産業的意義については、添付図面と合わせて本発明の以下の好適な実施例の詳細な説明を参照すれば、理解が深まるであろう。

【図面の簡単な説明】

【0010】

【図1】図１は、実施形態に係るシミュレーション画像の生成に用いられる９つのパラメータの概要を説明するための図である。

【図2】図２は、実施形態に係る情報処理装置の構成例を示す図である。

【図3】図３は、水温と魚の行動との関係について説明するための図である。

【図4】図４は、照度と魚の行動との関係について説明するための図である。

【図5】図５は、生け簀の網と魚の行動との関係について説明するための図である。

【図6】図６は、魚が他の魚に対して群行動をとる範囲について説明するための図である。

【図7】図７は、魚の体長と魚の速度との関係について説明するための図である。

【図8】図８は、魚のマイスナー細胞の反応速度と魚の意思決定に要する時間の長さおよび時間間隔との関係について説明するための図である。

【図9】図９は、魚の３次元ＣＧ画像および３次元バウンディングボックスを示す図である。

【図10】図１０は、魚の生け簀の３次元ＣＧ画像を示す図である。

【図11】図１１は、魚の状態を決定する有限状態マシーンを示す図である。

【図12】図１２は、実施形態に係るシミュレーション画像の一例を示す図である。

【図13】図１３は、実施形態に係るシミュレーション画像に含まれる各魚に３次元バウンディングボックスが付加されたトレーニングデータの一例を示す図である。

【図14】図１４は、実施形態に係るシミュレーション画像に含まれる各魚に２次元バウンディングボックスが付加されたトレーニングデータの一例を示す図である。

【図15】図１５は、実施形態に係るシミュレーション画像に含まれる各魚をシルエットで置換したトレーニングデータの一例を示す図である。

【図16】図１６は、実施形態に係る機械学習モデルの一例を示す図である。

【図17】図１７は、撮影画像の推定結果を出力した画面の一例を示す図である。

【図18】図１８は、情報処理装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。

【発明を実施するための形態】

【0011】

以下に、本願に係る情報処理方法、非一時的なコンピュータ可読記憶媒体及び情報処理装置を実施するための形態（以下、「実施形態」と呼ぶ）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る情報処理方法、非一時的なコンピュータ可読記憶媒体及び情報処理装置が限定されるものではない。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。

【0012】

（実施形態）
〔１．はじめに〕
近年、魚の養殖は、地球の食糧問題を解決する手段として注目されている。魚の養殖によって高品質な魚を供給するには、給餌（魚に対する餌やり）と関わりが深い魚の尾数を正確に知ることが重要である。

【0013】

しかしながら、養殖場の水中という特殊な環境下では、地上のＩＴ技術を活用することが難しい場合がある。そのため、従来は、人が網で一部の魚をすくい上げて計量した後に、目視で尾数を数えていた。この方法は、魚への負担が大きいうえ、正確さに欠けるといった問題がある。

【0014】

そこで近年、コンピュータビジョンを用いて生簀内の魚の群れを撮影した撮影画像から魚の群れの尾数を自動でカウントする方法が注目を浴びている。具体例には、撮影画像から魚の群れの尾数を推定するよう画像認識用の機械学習モデルを学習する方法である。しかしながら、機械学習モデルを用いて撮影画像から尾数を精度よく推定するには、魚の周囲の環境（例えば、季節、時刻、天気、水温、照度、水の汚れ具合など）や魚の生物学的な特性（例えば、魚種、魚の大きさ、魚の速度、尾数など）等の多様な条件の組み合わせを網羅した大量のトレーニングデータを機械学習モデルに学習させる必要がある。

【0015】

しかしながら、上述したような多様な条件の組み合わせを網羅した大量のトレーニングデータを作成することは容易ではない。例えば、多様な条件の組み合わせを網羅した膨大な数の画像それぞれに対して、正解データを人手によって付与することで大量のトレーニングデータを作成するのは非常に困難である。また、機械学習モデルを用いて撮影画像から尾数を精度よく推定するには、トレーニングデータの質も重要である。ところが、正解データを人手によって付与する場合、トレーニングデータの質が必ずしも高いとは言えない場合がある。

【0016】

このように、多様なパターンを網羅した大量のトレーニングデータを得ることができない場合、機械学習モデルに質の高い学習をさせることができないため、従来は、実際の撮影画像から魚の群れに関する情報を精度よく推定することが難しい場合があった。

【0017】

これに対し、実施形態に係る情報処理装置は、魚の生物学的な特性に関する内的パラメータの値と、魚の周囲の環境の特性に関する外的パラメータの値と、魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値に基づいて、魚の群れに属する各魚の行動を含むシミュレーション画像を生成する。

【0018】

図１は、実施形態に係るシミュレーション画像の生成に用いられる９つのパラメータの概要を説明するための図である。実施形態に係る情報処理装置は、図１に示す９つのパラメータの値に基づいて、魚の群れに属する各魚の行動を含むシミュレーション画像を生成する。図１の上段は、３種類の群行動の特性（整列、結合、分離）に関する群れパラメータを示す。また、図１の中段は、水温、照度、生け簀の網等に関する外的パラメータを示す。また、図１の下段は、魚が群行動をとる範囲、魚の大きさと移動速度の関係、および魚の意思決定に要する時間といった内的パラメータを示す。なお、９つのパラメータの詳細については後述する。

【0019】

このように、情報処理装置１００は、魚の生物学的な特性に関する情報、魚の周囲の環境に関する情報、および魚の群行動の特性に関する情報に基づいて魚の群れの行動を含むシミュレーション画像を生成するため、実際の生け簀に所在する魚の群れの行動を精度よく再現することができる。また、情報処理装置１００は、シミュレーション画像の生成に用いる複数のパラメータの値を変化させることで、多様なパターンを網羅したシミュレーション画像を大量かつ容易に生成することができる。また、情報処理装置１００は、シミュレーション画像の生成に用いられたパラメータの値を正解データとして活用することができるので、正解データを人手によって付与する場合と比べて、質の良いトレーニングデータを大量にかつ容易に生成することができる。

【0020】

これにより、情報処理装置１００は、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルに対して質の良いトレーニングデータを大量に学習させることを可能にする。すなわち、情報処理装置１００は、質の良いトレーニングデータを大量に学習させることにより、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルの推定精度を向上させることができる。したがって、情報処理装置１００は、魚の群れに関する情報を精度よく推定することを可能とすることができる。

【0021】

〔２．情報処理装置の構成〕
図２は、実施形態に係る情報処理装置１００の構成例を示す図である。情報処理装置１００は、通信部１１０と、記憶部１２０と、入力部１３０と、出力部１４０と、制御部１５０とを有する。

【0022】

（通信部１１０）
通信部１１０は、例えば、ＮＩＣ（Network Interface Card）等によって実現される。そして、通信部１１０は、ネットワークと有線または無線で接続され、例えば、魚を管理する管理者によって利用される端末装置との間で情報の送受信を行う。

【0023】

（記憶部１２０）
記憶部１２０は、例えば、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。具体的には、記憶部１２０は、シミュレーションに用いられる各種プログラム（情報処理プログラムの一例）を記憶する。また、記憶部１２０は、シミュレーションに用いられる各種パラメータの値を記憶する。

【0024】

（入力部１３０）
入力部１３０は、利用者から各種操作が入力される。例えば、入力部１３０は、タッチパネル機能により表示面（例えば出力部１４０）を介して利用者からの各種操作を受け付けてもよい。また、入力部１３０は、情報処理装置１００に設けられたボタンや、情報処理装置１００に接続されたキーボードやマウスからの各種操作を受け付けてもよい。

【0025】

（出力部１４０）
出力部１４０は、例えば、液晶ディスプレイや有機ＥＬ（Electro-Luminescence）ディスプレイ等によって実現される表示画面であり、各種情報を表示するための表示装置である。出力部１４０は、制御部１５０の制御に従って、各種情報を表示する。なお、情報処理装置１００にタッチパネルが採用される場合には、入力部１３０と出力部１４０とは一体化される。また、以下の説明では、出力部１４０を画面と記載する場合がある。

【0026】

（制御部１５０）
制御部１５０は、コントローラ（controller）であり、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、情報処理装置１００内部の記憶装置に記憶されている各種プログラム（情報処理プログラムの一例に相当）がＲＡＭを作業領域として実行されることにより実現される。また、制御部１５０は、コントローラであり、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。

【0027】

制御部１５０は、取得部１５１と、生成部１５２と、推定部１５３と、出力制御部１５４を機能部として有し、以下に説明する情報処理の作用を実現または実行してよい。なお、制御部１５０の内部構成は、図２に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。また、各機能部は、制御部１５０の機能を示したものであり、必ずしも物理的に区別されるものでなくともよい。

【0028】

（取得部１５１）
取得部１５１は、魚の生物学的な特性に関する内的パラメータの値と、魚の周囲の環境の特性に関する外的パラメータの値と、魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する。具体的には、取得部１５１は、入力部１３０を介して利用者によって入力された内的パラメータの値と、外的パラメータの値と、群れパラメータの値と、を取得する。

【0029】

より具体的には、取得部１５１は、シミュレーション画像に含まれる魚の群れに属する各魚に設定される内的パラメータの値を取得する。例えば、取得部１５１は、シミュレーション画像に含まれる魚の群れの尾数がＮ（Ｎは自然数）である場合、Ｎ個の魚の個体それぞれについて設定されるＮ個の内的パラメータの値を取得する。

【0030】

また、取得部１５１は、シミュレーション画像に含まれる魚の群れに設定される群れパラメータの値を取得する。群れパラメータの値は、魚の群れごとに各魚に共通の値が設定される。例えば、取得部１５１は、シミュレーション画像に含まれる魚の群れの尾数がＮ（Ｎは自然数）である場合、Ｎ個の魚の個体すべてに共通の群れパラメータの値を取得する。

【0031】

また、取得部１５１は、シミュレーション画像に含まれる魚の群れの周囲の環境ごとに設定される外的パラメータの値を取得する。例えば、取得部１５１は、シミュレーション画像に含まれる魚の群れが所在する生け簀ごとに設定される外的パラメータの値を取得する。例えば、取得部１５１は、シミュレーション画像に含まれる魚の群れが所在する生け簀の水深に応じて異なる値が設定される外的パラメータの値を取得する。

【0032】

（生成部１５２）
生成部１５２は、取得部１５１によって取得された内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、魚の群れに属する各魚の行動を制御することで、シミュレーション画像を生成する。以下では、図３～図８を用いて、生成部１５２が、内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、魚の群れに属する各魚の行動を制御する場合について詳細に説明する。

【0033】

図３は、水温と魚の行動との関係について説明するための図である。魚の生物学的な特性として、魚の個体ごとに好みの水温が存在し、魚の個体はそれぞれ好みの水温の領域に向かって移動することが知られている。図３の上段に示す例では、生成部１５２は、魚が好む水温よりも、魚の周囲の水温の方が高いため、魚が好みの水温の領域に向かうように魚の行動を制御する。また、図３の下段に示す例では、生成部１５２は、魚が好む水温よりも、魚の周囲の水温の方が低いため、魚が好みの水温の領域に向かうように魚の行動を制御する。例えば、生成部１５２は、魚の移動方向が好みの水温の領域に向かうように魚の移動方向を制御する。このように、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が好む水温に基づいて、各魚が好みの水温の領域に向かうように各魚の行動を制御する。

【0034】

また、生け簀における水温の分布は、季節（または、季節の潮流）および水深に応じて異なることが知られている。図３の上段に示す例では、季節が夏であり、魚が所在する生け簀に黒潮が流れ込むことで、生け簀における水温が高い状態である。また、夏場の生け簀における水温は、生け簀の水面に近いほど高く、生け簀の底面に近いほど低いことが知られている。そこで、生成部１５２は、外的パラメータの値として、生け簀の水面に近いほど水温が高く、生け簀の底面に近いほど水温が低くなるように、生け簀における水温の分布を水深に応じて変化させる。また、図３の下段に示す例では、季節が冬であり、魚が所在する生け簀に親潮が流れ込むことで、生け簀における水温が低い状態である。また、冬場の生け簀における水温は、生け簀の水面に近いほど低く、生け簀の底面に近いほど高いことが知られている。そこで、生成部１５２は、外的パラメータの値として、生け簀の水面に近いほど水温が低く、生け簀の底面に近いほど水温が高くなるように、生け簀における水温の分布を水深に応じて変化させる。このように、生成部１５２は、外的パラメータの値として、魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、各魚が好みの水温の領域に向かうように各魚の行動を制御する。

【0035】

また、魚の生物学的な特性として、魚の周囲の水温が高いほど魚の移動速度が高くなり、魚の周囲の水温が低いほど魚の移動速度が低くなることが知られている。そこで、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、魚の群れに属する各魚の周囲の水温が高いほど各魚の移動速度が大きくなるように各魚の行動を制御する。

【0036】

図４は、照度と魚の行動との関係について説明するための図である。魚の生物学的な特性として、魚の個体ごとに好みの照度が存在し、魚の個体はそれぞれ好みの照度の領域に向かって移動することが知られている。図４の上段に示す例では、生成部１５２は、魚が好む照度よりも、魚の周囲の照度の方が低いため、魚が好みの照度の領域に向かうように魚の行動を制御する。また、図４の下段に示す例では、生成部１５２は、魚が好む照度よりも、魚の周囲の照度の方が高いため、魚が好みの照度の領域に向かうように魚の行動を制御する。例えば、生成部１５２は、魚の移動方向が好みの照度の領域に向かうように魚の移動方向を制御する。このように、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が好む照度に基づいて、各魚が好みの照度の領域に向かうように各魚の行動を制御する。

【0037】

また、生け簀における照度の分布は、季節、時刻、天気、および水深に応じて異なることが知られている。図４の上段に示す例では、季節が冬（または、時刻が朝または夜など）であり、生け簀における照度が低い状態である。また、図４の下段に示す例では、季節が夏（または、時刻が昼など）であり、生け簀における照度が高い状態である。また、一般的に、生け簀における照度は、生け簀の水面に近いほど高く、生け簀の底面に近いほど低いことが知られている。そこで、生成部１５２は、外的パラメータの値として、生け簀の水面に近いほど照度が高く、生け簀の底面に近いほど照度が低くなるように、生け簀における照度の分布を水深に応じて変化させる。このように、生成部１５２は、外的パラメータの値として、魚の群れに属する各魚が所在する生け簀における照度の分布に基づいて、各魚が好みの照度の領域に向かうように各魚の行動を制御する。

【0038】

図５は、生け簀の網と魚の行動との関係について説明するための図である。魚の生物学的な特性として、魚が生け簀の網や生け簀の水面等の障害物に近づくと、魚が障害物を回避する回避行動をとることが知られている。本願発明の発明者等は、魚と障害物との距離が魚の体長の４倍以下となった場合に、魚が障害物を検知して、魚が障害物を回避する回避行動をとるという実験結果を得た。そこで、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚と障害物との距離が所定の閾値（例えば、各魚の体長の所定の倍数の長さ）以下である場合に、各魚が障害物を回避する回避行動をとるように各魚の行動を制御する。

【0039】

また、図５に示すように、魚の生物学的な特性として、魚と生け簀の網との距離が近ければ近いほど（遠ければ遠いほど）、魚は高速な（低速な）衝突回避行動をとることが知られている。そこで、生成部１５２は、魚の群れに属する各魚と障害物との距離が小さいほど大きい反発力に基づいて、各魚の行動を制御する。ここで、反発力とは、魚が障害物との衝突を避けるため障害物から離れようとする力のことを指す。例えば、生成部１５２は、魚と障害物との距離が所定の閾値以下である場合に、魚と障害物との距離に比例する大きさの反発力に基づいて、魚の行動を制御する。例えば、生成部１５２は、魚の移動方向（図５では、魚が生け簀の網に向かう方向）と逆向きの方向の反発力を魚に作用させることで、魚が障害物（図５では、生け簀の網）を回避するように魚の行動を制御する。このように、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚と障害物との距離が所定の閾値以下である場合に、各魚に対して作用する反発力に基づいて、各魚の行動を制御する。

【0040】

図６は、魚が他の魚に対して群行動をとる範囲について説明するための図である。魚の生物学的な特性として、魚は自身の周囲に位置する他の魚に対して群行動をとることが知られている。本願発明の発明者等は、魚が自身の体長の３倍の距離の範囲内に所在する他の魚を検知して、自身の体長の３倍の距離の範囲内に所在する他の魚に対して群行動をとるという実験結果を得た。そこで、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚の位置から所定の範囲内（例えば、各魚の体長の所定の倍数の距離の範囲内）に他の魚が位置する場合に、各魚が群行動をとるように各魚の行動を制御する。

【0041】

ここで、魚が他の魚に対してとる群行動とは、結合（cohesion）、分離（separation）、整列（alignment）という３つのルールに従う行動のことを指す。「結合」は個体同士がばらばらにならないように近付こうとする力（以下、結合力ともいう）、「分離」は個体同士が衝突を避けるため離れようとする力（以下、分離力ともいう）、「整列」は群れとして動く方向を揃えようとする力（以下、整列力ともいう）を指す。魚の行動は、これら３つの力の合計によって決まる。以下では、結合力、分離力および整列力の３つの力を「群れパラメータ」と総称する。３つの力は、それぞれ、力の大きさ、力の向き、および力が及ぶ範囲を示すパラメータの値によって決定される。例えば、群れパラメータは、群れがいる空間（例えば、生け簀）の大きさ、魚の大きさ、および魚の群れの密集度によって決定される。このように、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚同士がばらばらにならないように近付こうとする力である結合力、魚の群れに属する各魚同士が衝突を避けるため離れようとする力である分離力、および魚の群れに属する各魚同士が群れとして動く方向を揃えようとする力である整列力に基づいて、各魚の行動を制御する。

【0042】

図７は、魚の体長と魚の速度との関係について説明するための図である。魚の生物学的な特性として、魚の体長が大きい（小さい）ほど、魚の移動速度が大きい（小さい）ことが知られている。そこで、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚の体長に基づいて、体長が大きいほど各魚の移動速度が大きくなるように各魚の行動を制御する。また、魚の生物学的な特性として、魚の尾びれの振幅が大きい（小さい）ほど、魚の移動速度が大きい（小さい）ことが知られている。そこで、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚の尾びれの振幅の大きさに基づいて、振幅の大きさが大きいほど各魚の移動速度が大きくなるように各魚の行動を制御してもよい。

【0043】

図８は、魚のマイスナー細胞の反応速度と魚の意思決定に要する時間の長さおよび時間間隔との関係について説明するための図である。魚の生物学的な特性として、魚が各行動をとる意思決定に要する時間は、魚のマイスナー細胞（神経細胞の一種）の反応速度によって決まることが知られている。ここで、魚が各行動をとる意思決定とは、魚が「どこへ泳ぐか」「どのように泳ぐか」を瞬間的に決定する意思決定のことを指す。図８に示す例では、魚が各行動をとる意思決定に要する時間は、約２００ミリ秒であり、意思決定と意思決定の時間間隔は数百ミリ秒である。そこで、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が各行動をとる意思決定に要する時間の長さおよび時間の間隔に基づいて、各魚の行動を制御する。具体的には、生成部１５２は、シミュレーション画像の更新時間を魚が各行動をとる意思決定に要する時間（例えば、数百ミリ秒）に設定する。例えば、生成部１５２は、魚が所定の状態（例えば、後述する図１１に示す「Ｓｌｏｗ Ｓｗｉｍ」の状態）をとる時間の長さを、魚が各行動をとる意思決定に要する時間（例えば、数百ミリ秒）に制御する。続いて、生成部１５２は、魚が所定の状態（例えば、後述する図１１に示す「Ｓｌｏｗ Ｓｗｉｍ」の状態）から他の状態（例えば、後述する図１１に示す「Ｃ－ｓｔａｒｔ Ｌｅｆｔ」の状態）に遷移する時間間隔を、意思決定と意思決定の時間間隔（例えば、数百ミリ秒）に制御する。続いて、生成部１５２は、魚が他の状態（例えば、後述する図１１に示す「Ｃ－ｓｔａｒｔ Ｌｅｆｔ」の状態）をとる時間の長さを、魚が各行動をとる意思決定に要する時間（例えば、数百ミリ秒）に制御する。

【0044】

また、魚の生物学的な特性として、魚の周囲の水温（または魚の体温）が低い（高い）ほど、魚のマイスナー細胞の反応速度が遅い（速い）ことが知られている。そこで、生成部１５２は、内的パラメータの値として、魚の周囲の水温が低いほど長い意思決定に要する時間の長さおよび時間の間隔に基づいて、各魚の行動を制御してもよい。

【0045】

図９は、魚の３次元ＣＧ画像および３次元バウンディングボックスを示す図である。図９に示す魚は、魚種ごとに実測した体側データ（以下、生け簀の実在データともいう）に基づいて生成された魚の３次元ＣＧ画像である。生成部１５２は、生け簀の実在データに基づいて生成されたリアルな魚の３次元ＣＧ画像を用いてシミュレーション画像を生成する。なお、生成部１５２は、生け簀の実在データに基づかない魚の３次元ＣＧ画像を用いてシミュレーション画像を生成してもよい。例えば、生成部１５２は、生け簀の実在データの周辺の値（例えば、実測データの代表値から所定の範囲内の値など）に基づいて、生け簀の実在データとは異なる体側データを有する魚の３次元ＣＧ画像を用いてシミュレーション画像を生成してもよい。また、生成部１５２は、シミュレーション画像に含まれる魚の群れに属する各魚の体長、移動速度、初期位置、初期状態および重さ等をそれぞれ異ならせてよい。

【0046】

また、図９に示す魚を囲む枠は、魚の位置情報および大きさを特定するための３次元バウンディングボックスである。生成部１５２は、各魚の位置情報を生成する。例えば、生成部１５２は、魚ＯＢの中心位置および魚ＯＢの存在範囲を示す位置情報を含む。魚の位置情報は、例えば、３次元座標情報を用いて生成される。図９の例では、生成部１５２は、魚ＯＢの位置情報の一例として、魚ＯＢの中心の座標（ｂ_ｘ、ｂ_ｙ、ｂ_ｚ）（図示略）、および、魚ＯＢを内包する最小限の大きさの直方体（３次元バウンディングボックス）の奥行ｂ_ｄ、幅ｂ_ｗおよび高さｂ_ｈに関する情報を生成する。

【0047】

図１０は、魚の生け簀の３次元ＣＧ画像を示す図である。図１０は、実在する生け簀の緯度経度、水温、照度、水中画像データ等（以下、生け簀の実在データともいう）に基づいて生成された生け簀の３次元ＣＧ画像である。生成部１５２は、生け簀の実在データに基づいて生成されたリアルな生け簀の３次元ＣＧ画像を用いてシミュレーション画像を生成する。なお、生成部１５２は、生け簀の実在データに基づかない生け簀の３次元ＣＧ画像を用いてシミュレーション画像を生成してもよい。例えば、生成部１５２は、生け簀の実在データの周辺の値（例えば、実測データの代表値から所定の範囲内の値など）に基づいて、生け簀の実在データとは異なるデータ（例えば、生け簀の広さ、深さ、水温、照度などが実測データの代表値から所定の範囲内の値）を有する生け簀の３次元ＣＧ画像を用いてシミュレーション画像を生成してもよい。また、生成部１５２は、実在データに存在しない値（例えば、実測データが存在しない時間帯のデータなど）に基づいて、生け簀の実在データとは異なるデータを有する生け簀の３次元ＣＧ画像を用いてシミュレーション画像を生成してもよい。

【0048】

図１１は、魚の状態を決定する有限状態マシーンを示す図である。魚の生物学的な特性として、魚種ごとに魚の泳ぎ方（泳法、遊泳ともいう）を特定のパターンに分類可能なことが知られている。なお、図１１では、魚種がサケである場合について説明するが、遊泳のパターンは魚種ごとに異なってよい。生成部１５２は、図１１に示すような１２種類の魚の遊泳の状態を示す１２種類のアニメーションを生成する。また、生成部１５２は、１２種類のアニメーションの中から有限状態マシーン（ＦＳＭ）によって各魚の遊泳の状態を決定することで、各魚の遊泳の状態を遷移させる。

【0049】

例えば、生成部１５２は、魚の遊泳を「Ｓｌｏｗ Ｓｗｉｍ」の状態から「Ｃ－ｓｔａｒｔ Ｌｅｆｔ」の状態に遷移させる。続いて、生成部１５２は、魚の遊泳を「Ｃ－ｓｔａｒｔ Ｌｅｆｔ」の状態から「Ｆａｓｔ Ｓｗｉｍ」の状態に遷移させる。続いて、生成部１５２は、魚の遊泳を「Ｆａｓｔ Ｓｗｉｍ」の状態から「Ｓｅｍｉ Ｆａｓｔ Ｓｗｉｍ」の状態に遷移させる。続いて、生成部１５２は、魚の遊泳を「Ｓｅｍｉ Ｆａｓｔ Ｓｗｉｍ」の状態から「Ｓｌｏｗ Ｓｗｉｍ」の状態に遷移させる。続いて、生成部１５２は、魚の遊泳を「Ｓｌｏｗ Ｓｗｉｍ」の状態から「Ｒｅｓｔ Ｓｗｉｍ」の状態に遷移させる。また、生成部１５２は、状態遷移の際に、遷移前の状態と遷移後の状態との間を補完することで、スムーズなアニメーションを実現することができる。

【0050】

図１２は、実施形態に係るシミュレーション画像の一例を示す図である。生成部１５２が生成するシミュレーション画像は動画であるが、図１２では動画の一部を静止画によって示す。図１２は、生成部１５２が生成したシミュレーション画像の一例を示す図である。生成部１５２は、取得部１５１が取得した内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、生け簀の３次元ＣＧ画像（図１０参照）の内部において、複数の魚の３次元ＣＧ画像（図９参照）が泳ぐように制御することで、図１２に示すような魚の群れのシミュレーション画像を生成する。なお、図１２に示すシミュレーション画像は、図１０に示す生け簀の３次元ＣＧ画像の水中の水深４メートル（または６メートル）の位置に設置された仮想カメラから撮影した画像を再現したものである。

【0051】

図１３は、実施形態に係るシミュレーション画像に含まれる各魚に３次元バウンディングボックスが付加されたトレーニングデータの一例を示す図である。生成部１５２は、シミュレーション画像を生成すると、生成したシミュレーション画像に含まれる各魚の位置情報を示す３次元バウンディングボックスを付加したトレーニングデータを生成する。なお、生成部１５２は、シミュレーション画像を生成する際に用いた各魚の位置情報を用いることで、３次元バウンディングボックスを付加したトレーニングデータを容易に生成することができる。

【0052】

図１４は、実施形態に係るシミュレーション画像に含まれる各魚に２次元バウンディングボックスが付加されたトレーニングデータの一例を示す図である。生成部１５２は、シミュレーション画像を生成すると、生成したシミュレーション画像に含まれる各魚の位置情報を示す２次元バウンディングボックスを付加したトレーニングデータを生成する。なお、生成部１５２は、シミュレーション画像を生成する際に用いた各魚の位置情報を用いることで、２次元バウンディングボックスを付加したトレーニングデータを容易に生成することができる。

【0053】

図１５は、実施形態に係るシミュレーション画像に含まれる各魚をシルエットで置換したトレーニングデータの一例を示す図である。生成部１５２は、シミュレーション画像を生成すると、生成したシミュレーション画像に含まれる各魚のシルエットで置換したトレーニングデータを生成する。図１５の例は、複数の魚を色分けした例である。図１５の色分けは、色要素の付与に相当する。複数の魚が存在する場合には、魚ごとに色分けする色を異ならせてもよく、魚の分類情報に応じて色を異ならせてもよい。

【0054】

図１６は、実施形態に係る機械学習モデルの一例を示す図である。図１６に示す機械学習モデルは、ＹＯＬＯ（You Only Look Once）のニューラルネットワークを備える。生成部１５２は、シミュレーション画像を機械学習モデルに入力した場合に、シミュレーション画像に含まれる各魚の個体識別情報および各魚の個体識別情報に対応する情報（例えば、尾数）を出力するように機械学習モデルを学習させる。なお、生成部１５２は、ＹＯＬＯに限らず、物体検出に用いられるあらゆる公知のニューラルネットワークを機械学習モデルに適用してよい。例えば、生成部１５２は、ＹＯＬＯの他にも、物体検出用に開発されたＦａｓｔｅｒ Ｒ－ＣＮＮ、またはＳＳＤ（Single Shot MultiBox Detector）を機械学習モデルに適用することができる。

【0055】

例えば、生成部１５２は、生成したシミュレーション画像を機械学習モデルＭ１に入力した場合に、個体識別された各魚の位置情報を示す３次元バウンディングボックスが付加されたシミュレーション画像および個体識別された魚の尾数（魚の群れの尾数）を出力するように機械学習モデルＭ１を学習させる。

【0056】

また、生成部１５２は、生成したシミュレーション画像を機械学習モデルＭ２に入力した場合に、個体識別された各魚の大きさを示す２次元バウンディングボックスが付加されたシミュレーション画像および個体識別された魚の尾数（魚の群れの尾数）を出力するように機械学習モデルＭ２を学習させる。

【0057】

また、生成部１５２は、生成したシミュレーション画像を機械学習モデルＭ３に入力した場合に、個体識別された各魚がシルエットで置き換えられたシミュレーション画像および個体識別された魚の尾数（魚の群れの尾数）を出力するように機械学習モデルＭ３を学習させる。

【0058】

このように、生成部１５２は、生成したシミュレーション画像を機械学習モデルに入力した場合に、シミュレーション画像の生成に用いられたパラメータ情報に基づいて生成された正解データまたは正解データと対応する情報を出力するように機械学習モデルを学習させる。

【0059】

（推定部１５３）
推定部１５３は、生成部１５２によって生成された学習済みの機械学習モデルを用いて、魚の群れを撮像した撮像画像から撮像画像に含まれる魚の群れに関する情報を推定する。例えば、推定部１５３は、生成部１５２によって生成された学習済みの機械学習モデルＭ２に撮影画像を入力する。そして、推定部１５３は、機械学習モデルＭ２から出力された２次元バウンディングボックスが付加された撮影画像および個体識別された魚の尾数（魚の群れの尾数）を推定結果とする。

【0060】

（出力制御部１５４）
出力制御部１５４は、推定部１５３が推定した推定結果を画面に表示するよう制御する。図１７は、撮影画像の推定結果を出力した画面の一例を示す図である。図１７に示す例では、出力制御部１５４は、推定部１５３が推定した推定結果として、２次元バウンディングボックスが付加された撮影画像および個体識別された魚の尾数（魚の群れの尾数）である「２５１」を画面に表示させる。

【0061】

〔３．効果〕
上述したように、実施形態に係る情報処理装置１００は、取得部１５１と生成部１５２を備える。取得部１５１は、魚の生物学的な特性に関する内的パラメータの値と、魚の周囲の環境の特性に関する外的パラメータの値と、魚が他の魚に対してとる行動である群行動の特性に関する群れパラメータの値と、を取得する。生成部１５２は、取得部１５１によって取得された内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、魚の群れに属する各魚の行動を含むシミュレーション画像を生成する。

【0062】

このように、情報処理装置１００は、魚の生物学的な特性に関する情報、魚の周囲の環境に関する情報、および魚の群行動の特性に関する情報に基づいて魚の群れの行動を含むシミュレーション画像を生成するため、実際の生け簀に所在する魚の群れの行動を精度よく再現することができる。また、情報処理装置１００は、シミュレーション画像の生成に用いる複数のパラメータの値を変化させることで、多様なパターンを網羅したシミュレーション画像を大量かつ容易に生成することができる。また、情報処理装置１００は、シミュレーション画像の生成に用いられたパラメータの値を正解データとして活用することができるので、正解データを人手によって付与する場合と比べて、質の良いトレーニングデータを大量にかつ容易に生成することができる。

【0063】

これにより、情報処理装置１００は、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルに対して質の良いトレーニングデータを大量に学習させることを可能にする。すなわち、情報処理装置１００は、質の良いトレーニングデータを大量に学習させることにより、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルの推定精度を向上させることができる。したがって、情報処理装置１００は、魚の群れに関する情報を精度よく推定することを可能とすることができる。

【0064】

また、生成部１５２は、内的パラメータの値、外的パラメータの値、および群れパラメータの値に基づいて、魚の群れに属する各魚の行動を制御することで、シミュレーション画像を生成する。

【0065】

これにより、情報処理装置１００は、魚の生物学的な特性に関する情報、魚の周囲の環境に関する情報、および魚の群行動の特性に関する情報に基づいて魚の群れに属する各魚の行動を制御するため、実際の生け簀に所在する魚の群れの行動を精度よく再現することができる。これにより、情報処理装置１００は、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルに対して質の良いトレーニングデータを大量に学習させることを可能にする。

【0066】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が各行動をとる意思決定に要する時間の長さおよび時間の間隔に基づいて、各魚の行動を制御する。

【0067】

これにより、情報処理装置１００は、実際の魚が各行動をとる意思決定に要する時間の長さおよび時間の間隔に基づいて各魚の行動を制御するため、各魚の行動を精度よく再現することができる。

【0068】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が好む水温に基づいて、各魚が好みの水温の領域に向かうように各魚の行動を制御する。

【0069】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0070】

また、生成部１５２は、外的パラメータの値として、魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、各魚が好みの水温の領域に向かうように各魚の行動を制御する。

【0071】

これにより、情報処理装置１００は、実際の生け簀における環境を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0072】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が所在する生け簀における水温の分布に基づいて、魚の群れに属する各魚の周囲の水温が高いほど各魚の移動速度が大きくなるように各魚の行動を制御する。

【0073】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0074】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚が好む照度に基づいて、各魚が好みの照度の領域に向かうように各魚の行動を制御する。

【0075】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0076】

また、生成部１５２は、外的パラメータの値として、魚の群れに属する各魚が所在する生け簀における照度の分布に基づいて、各魚が好みの照度の領域に向かうように各魚の行動を制御する。

【0077】

これにより、情報処理装置１００は、実際の生け簀における環境を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0078】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚と障害物との距離が所定の閾値以下である場合に、各魚が障害物を回避する回避行動をとるように各魚の行動を制御する。

【0079】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0080】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚と障害物との距離が所定の閾値以下である場合に、各魚に対して作用する反発力に基づいて、各魚の行動を制御する。

【0081】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0082】

また、生成部１５２は、魚の群れに属する各魚と障害物との距離が小さいほど大きい反発力に基づいて、各魚の行動を制御する。

【0083】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0084】

また、生成部１５２は、内的パラメータの値として、魚の群れに属する各魚の体長に基づいて、体長が大きいほど各魚の移動速度が大きくなるように各魚の行動を制御する。

【0085】

これにより、情報処理装置１００は、実際の魚の生態または習性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0086】

また、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚の位置から所定の範囲内に他の魚が位置する場合に、各魚が群行動をとるように各魚の行動を制御する。

【0087】

これにより、情報処理装置１００は、実際の魚の群行動の特性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0088】

また、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚同士がばらばらにならないように近付こうとする力である結合力に基づいて、各魚の行動を制御する。

【0089】

これにより、情報処理装置１００は、実際の魚の群行動の特性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0090】

また、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚同士が衝突を避けるため離れようとする力である分離力に基づいて、各魚の行動を制御する。

【0091】

これにより、情報処理装置１００は、実際の魚の群行動の特性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0092】

また、生成部１５２は、群れパラメータの値として、魚の群れに属する各魚同士が群れとして動く方向を揃えようとする力である整列力に基づいて、各魚の行動を制御する。

【0093】

これにより、情報処理装置１００は、実際の魚の群行動の特性を反映した行動をとるように各魚の行動を制御するため、実際の生け簀における各魚の行動を精度よく再現することができる。

【0094】

また、生成部１５２は、シミュレーション画像を機械学習モデルに入力した場合に、シミュレーション画像の生成に用いられたパラメータ情報に基づいて生成された正解データまたは正解データと対応する情報を出力するように機械学習モデルを学習させる。

【0095】

これにより、情報処理装置１００は、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルに対して質の良いトレーニングデータを大量に学習させることを可能にする。すなわち、情報処理装置１００は、質の良いトレーニングデータを大量に学習させることにより、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルの推定精度を向上させることができる。

【0096】

また、情報処理装置１００は、推定部１５３をさらに備える。推定部１５３は、生成部１５２によって生成された学習済みの機械学習モデルを用いて、魚の群れを撮像した撮像画像から撮像画像に含まれる魚の群れに関する情報を推定する。

【0097】

これにより、情報処理装置１００は、質の良いトレーニングデータを大量に学習することにより、例えば、撮像画像から魚の群れに関する情報（例えば、尾数）を推定する機械学習モデルの推定精度を向上させることができる。したがって、情報処理装置１００は、学習済みの機械学習モデル用いることにより、魚の群れに関する情報を精度よく推定することができる。また、情報処理装置１００は、画像認識を用いることで、魚に対して直接触れることなく（非接触に）魚の群れに関する情報を精度よく推定することができるので、魚に対する負担を軽減することができる。また、情報処理装置１００は、画像認識を用いることで、人が網で魚をすくい上げる場合と比べて、短時間のうちに高精度な推定結果を得ることができる。

【0098】

〔４．ハードウェア構成〕
また、上述してきた実施形態に係る情報処理装置１００は、例えば図１８に示すような構成のコンピュータ１０００によって実現される。図１８は、情報処理装置１００の機能を実現するコンピュータの一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ１３００、ＨＤＤ１４００、通信インターフェイス（Ｉ／Ｆ）１５００、入出力インターフェイス（Ｉ／Ｆ）１６００、及びメディアインターフェイス（Ｉ／Ｆ）１７００を備える。

【0099】

ＣＰＵ１１００は、ＲＯＭ１３００またはＨＤＤ１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。

【0100】

ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を格納する。通信インターフェイス１５００は、所定の通信網を介して他の機器からデータを受信してＣＰＵ１１００へ送り、ＣＰＵ１１００が生成したデータを所定の通信網を介して他の機器へ送信する。

【0101】

ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。ＣＰＵ１１００は、入出力インターフェイス１６００を介して、入力装置からデータを取得する。また、ＣＰＵ１１００は、生成したデータを入出力インターフェイス１６００を介して出力装置へ出力する。

【0102】

メディアインターフェイス１７００は、記録媒体１８００に格納されたプログラムまたはデータを読み取り、ＲＡＭ１２００を介してＣＰＵ１１００に提供する。ＣＰＵ１１００は、かかるプログラムを、メディアインターフェイス１７００を介して記録媒体１８００からＲＡＭ１２００上にロードし、ロードしたプログラムを実行する。記録媒体１８００は、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。

【0103】

例えば、コンピュータ１０００が実施形態に係る情報処理装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１５０の機能を実現する。コンピュータ１０００のＣＰＵ１１００は、これらのプログラムを記録媒体１８００から読み取って実行するが、他の例として、他の装置から所定の通信網を介してこれらのプログラムを取得してもよい。

【0104】

以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

【0105】

〔５．その他〕
また、上記実施形態及び変形例において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。

【0106】

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

【0107】

また、上述してきた実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。

【0108】

また、上述してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、生成部は、生成手段や生成回路に読み替えることができる。

【0109】

本開示によれば、魚の群れに関する情報を精度よく推定することを可能とすることができる。

【0110】

完全且つ明確に開示するために特定の実施例に関して本発明を説明したが、添付の特許請求の範囲はこれに限定されず、本明細書の基本的教示内容の相応な範囲内で当業者が想到し得る変形例や代替構成のすべてを具現化するものとして解釈すべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【国際調査報告】