特許 7457996 ニューラルネットワークモデルの情報を提供する方法及び同方法を実施する電子機器

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-03-21

(45)【発行日】2024-03-29

(54)【発明の名称】ニューラルネットワークモデルの情報を提供する方法及び同方法を実施する電子機器

(51)【国際特許分類】

   G06N 3/10 20060101AFI20240322BHJP

【ＦＩ】

G06N3/10

【請求項の数】 18

(21)【出願番号】P 2023541308

(86)(22)【出願日】2023-02-09

(65)【公表番号】

(43)【公表日】2024-02-22

(86)【国際出願番号】 KR2023001893

(87)【国際公開番号】W WO2023153820

(87)【国際公開日】2023-08-17

【審査請求日】2023-07-07

(31)【優先権主張番号】10-2022-0017230

(32)【優先日】2022-02-10

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0017231

(32)【優先日】2022-02-10

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0023385

(32)【優先日】2022-02-23

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0048201

(32)【優先日】2022-04-19

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0057599

(32)【優先日】2022-05-11

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0104351

(32)【優先日】2022-08-19

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2022-0104352

(32)【優先日】2022-08-19

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】18/163,242

(32)【優先日】2023-02-01

(33)【優先権主張国・地域又は機関】US

【早期審査対象出願】

(73)【特許権者】

【識別番号】523165640

【氏名又は名称】ノタ、インコーポレイテッド

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】キム、ヨー チャン

(72)【発明者】

【氏名】シン、ジ ナ

(72)【発明者】

【氏名】バエク、ジョン ウォン

(72)【発明者】

【氏名】キム、ドン ウーク

(72)【発明者】

【氏名】パク、チェオル ビン

(72)【発明者】

【氏名】ナ、ホ イン

(72)【発明者】

【氏名】パク、スン ジョー

(72)【発明者】

【氏名】リー、チャエ ヒュク

【審査官】福西 章人

(56)【参考文献】

【文献】韓国公開特許第１０－２０２１－００４５８４５（ＫＲ，Ａ）

【文献】中国特許出願公開第１１３３１６７９５（ＣＮ，Ａ）

【文献】中国特許出願公開第１１３４０８６３４（ＣＮ，Ａ）

【文献】韓国公開特許第１０－２０２１－００９２５７５（ＫＲ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｎ ３／００－９９／００

(57)【特許請求の範囲】

【請求項1】

電子機器によって実行される、ニューラルネットワークモデルの情報を提供するための方法であって、
目標デバイス、及び、前記ニューラルネットワークモデルの目標性能についての、ユーザからの選択を受信するための入力画面を表示するための指令を、コンピュータネットワークを介して外部デバイスへ送信する段階；
前記電子機器のプロセッサにおいて、前記ニューラルネットワークモデルが実行される前記目標デバイスについての情報、及び、前記目標デバイスについての前記ニューラルネットワークモデルの前記目標性能を外部デバイスから受信する段階；及び
前記ユーザから、複数の推奨ニューラルネットワークモデルのうちの選択を受信するための推奨画面を表示するために、コンピュータネットワークを介して指令を前記外部デバイスへ送信する段階、ここで、前記複数の推奨ニューラルネットワークモデルについての情報は、前記目標デバイスについての前記情報及び前記受信された目標性能に基づいて生成される、
を備え、
前記推奨画面は、前記複数の推奨ニューラルネットワークモデルのそれぞれの１つについての情報を各々が表す複数のＵＩ要素を含み、
前記複数のＵＩ要素に対応する前記複数の推奨ニューラルネットワークモデルは、事前設定された範囲内の、前記ユーザによって入力された前記目標性能との性能差を有する、
方法。

【請求項2】

前記複数のＵＩ要素の各々に対応する前記複数の推奨ニューラルネットワークモデルの前記目標性能及び前記受信された目標性能の間の差の昇順に前記複数のＵＩ要素が表示される、請求項１に記載の方法。

【請求項3】

前記目標性能はレイテンシに関連する、請求項１に記載の方法。

【請求項4】

前記複数のＵＩ要素は、
前記ユーザによって構成される入力データのサイズに基づいて導出された複数の第１の推奨ニューラルネットワークモデルのそれぞれの１つに各々が対応する第１のＵＩ要素、及び、
目標性能に基づいて導出される複数の第２の推奨ニューラルネットワークモデルのそれぞれの１つに各々が対応する第２のＵＩ要素
を含み、
前記第１のＵＩ要素及び前記第２のＵＩ要素は、異なるエリアに表示される、
請求項１に記載の方法。

【請求項5】

前記複数の推奨ニューラルネットワークモデルの前記情報は、ルックアップテーブルに基づいて取得され、
前記ルックアップテーブルは、複数のニューラルネットワークモデルの識別情報、前記複数のニューラルネットワークモデルが実行される複数のデバイスの情報、及び、前記複数のデバイスについての前記複数のニューラルネットワークモデルの性能情報を含む、
請求項１に記載の方法。

【請求項6】

前記入力画面は、
前記ユーザが前記目標デバイスを選択するための第１の領域、
前記ユーザが、前記目標デバイスにおいて実行される前記ニューラルネットワークモデルのフレームワークを選択するための第２の領域、及び、
前記ユーザが、前記目標デバイスによってサポートされるデータタイプを選択するための第３の領域
を含む、請求項１に記載の方法。

【請求項7】

前記第２の領域において選択可能であるフレームワーク、又は、前記第３の領域において選択可能であるデータタイプの少なくとも１つは、前記第１の領域において前記ユーザによって選択された前記目標デバイスに基づいて決定される、請求項６に記載の方法。

【請求項8】

前記入力画面の前記第３の領域は、互いに異なるデータタイプを示すデータタイプＵＩ要素を含み、
ここで、前記データタイプＵＩ要素は、前記ユーザによって選択された前記目標デバイスに従って、個別に有効化又は無効化されることによって視覚的に区別されるように表示される、
請求項６に記載の方法。

【請求項9】

前記ユーザからの前記選択されたニューラルネットワークモデルを訓練する段階；及び
前記目標デバイス上に展開された、前記選択されたニューラルネットワークモデルに対応するダウンロードデータを、前記コンピュータネットワークを介して送信する段階
を更に備える、請求項１に記載の方法。

【請求項10】

ニューラルネットワークモデルの情報を提供するための電子機器であって、
少なくとも１つの通信回路を含む、データネットワークを介してデータを送信及び受信するよう構成されている通信インタフェース；
少なくとも１つの動作指示を記憶するよう構成されている非一時的メモリ；及び
プロセッサ
を備え、
前記少なくとも１つの動作指示の実行により、前記プロセッサは、
目標デバイス、及び、前記ニューラルネットワークモデルの目標性能についてのユーザからの選択を受信するための入力画面を表示するための指令を外部デバイスへ送信する手順；
前記ニューラルネットワークモデルが実行される前記目標デバイスの情報、及び、前記目標デバイスについての前記ニューラルネットワークモデルの前記目標性能を外部デバイスから受信する手順；及び
前記ユーザから、複数の推奨ニューラルネットワークモデルのうちの選択を受信するための推奨画面を表示するために、指令を前記外部デバイスへ送信する手順、ここで、前記複数の推奨ニューラルネットワークモデルについての情報は、前記目標デバイスについての前記情報、及び、前記受信された目標性能に基づいて生成される、
を行い、前記推奨画面は、前記複数の推奨ニューラルネットワークモデルのそれぞれの１つの情報を各々が表す複数のＵＩ要素を含み、
前記複数のＵＩ要素に対応する前記複数の推奨ニューラルネットワークモデルは、事前設定された範囲内の、前記ユーザによって入力される前記目標性能からの性能差を有する、
電子機器。

【請求項11】

前記複数のＵＩ要素の各々に対応する前記複数の推奨ニューラルネットワークモデルの前記目標性能及び前記受信された目標性能の間の差の昇順に前記複数のＵＩ要素が表示される、請求項１０に記載の電子機器。

【請求項12】

前記目標性能はレイテンシに関連する、請求項１０に記載の電子機器。

【請求項13】

前記複数のＵＩ要素は、
前記ユーザによって構成される入力データのサイズに基づいて導出された複数の第１の推奨ニューラルネットワークモデルのそれぞれの１つに各々が対応する第１のＵＩ要素、及び、
目標性能に基づいて導出される複数の第２の推奨ニューラルネットワークモデルのそれぞれの１つに各々が対応する第２のＵＩ要素
を含み、
前記第１のＵＩ要素及び前記第２のＵＩ要素は、異なるエリアに表示される、
請求項１０に記載の電子機器。

【請求項14】

前記複数の推奨ニューラルネットワークモデルの前記情報は、ルックアップテーブルに基づいて取得され、
前記ルックアップテーブルは、複数のニューラルネットワークモデルの識別情報、前記複数のニューラルネットワークモデルが実行される複数のデバイスの情報、及び、前記複数のデバイスについての前記複数のニューラルネットワークモデルの性能情報を含む、
請求項１０に記載の電子機器。

【請求項15】

前記入力画面は、
前記ユーザが前記目標デバイスを選択するための第１の領域、
前記ユーザが、前記目標デバイスにおいて実行される前記ニューラルネットワークモデルのフレームワークを選択するための第２の領域、及び、
前記ユーザが、前記目標デバイスによってサポートされるデータタイプを選択するための第３の領域
を含む、請求項１０に記載の電子機器。

【請求項16】

前記第２の領域において選択可能であるフレームワーク、又は、前記第３の領域において選択可能であるデータタイプの少なくとも１つは、前記第１の領域において前記ユーザによって選択された前記目標デバイスに基づいて決定される、請求項１５に記載の電子機器。

【請求項17】

前記入力画面の前記第３の領域は、互いに異なるデータタイプを示すデータタイプＵＩ要素を含み、
ここで、前記データタイプＵＩ要素は、前記ユーザによって選択された前記目標デバイスに従って、個別に有効化又は無効化されることによって視覚的に区別されるように表示される、
請求項１５に記載の電子機器。

【請求項18】

前記少なくとも１つの動作指示の実行により、前記プロセッサは、
前記ユーザからの、前記選択されたニューラルネットワークモデルを訓練する手順；及び
前記目標デバイス上に展開された、前記選択されたニューラルネットワークモデルに対応するダウンロードデータを、前記データネットワークを介して送信する手順
を行う、請求項１０に記載の電子機器。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、ニューラルネットワークモデルの情報を提供する方法及び同方法を実施する電子機器に関する。

【背景技術】

【0002】

人工知能技術の普及に伴い、目標デバイスにおいて人工知能モデルを運用するために人工知能モデルを必要とするユーザのニーズが増加している。

【発明の概要】

【発明が解決しようとする課題】

【0003】

種々の人工知能モデルが世界中で公開されているが、ユーザの望む性能を備えた人工知能モデルをユーザが直接見つけることは容易ではない。さらに、ユーザが最新式（ＳＯＴＡ）モデル等、優れた性能を備えたモデルを見つけたとしても、そのモデルは、目標デバイス上で必ずしも動作可能であるとは限らない。このような理由から、ユーザは、そのモデルが目標デバイス上で運用可能か否かを確認するのに苦労する。

【0004】

したがって、ユーザに目標デバイスに合わせて最適化されたニューラルネットワークモデルを簡便に取得させる技術のニーズがある。

【課題を解決するための手段】

【0005】

本開示は、目標デバイスに合わせて最適化されたニューラルネットワークモデルを提供する電子機器を提供するものである。

【0006】

本開示はさらに、ユーザによって入力されたデータセットに基づいて訓練されたニューラルネットワークモデルを提供する電子機器を提供するものである。

【0007】

本開示はさらに、ユーザによって入力された圧縮設定値に基づいて訓練された圧縮ニューラルネットワークモデルを提供する電子機器を提供するものである。

【0008】

本開示はさらに、圧縮ニューラルネットワークモデルに対応するダウンロードデータを提供する電子機器を提供するものである。

【0009】

本開示の目的は、上述の目的に限定されるものでない。すなわち、以下の説明より、本開示が関連する当業者により、記載されていない他の目的が明らかに理解され得る。

【0010】

本開示は、電子機器によって実施されるニューラルネットワークモデルの情報を提供する方法であって、電子機器のプロセッサにおいて、ニューラルネットワークモデルが実行される目標デバイスの情報、及び目標デバイスに対するニューラルネットワークモデルの目標性能を、外部デバイスから受信することと、プロセッサにより、目標デバイスの情報及び受信した目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出することと、受信した目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を表示するために、コンピュータネットワークを介して外部デバイスに指令を送信することと、を含み、複数の候補ニューラルネットワークモデルの情報には、複数の候補ニューラルネットワークモデルの名称、複数の候補ニューラルネットワークモデルの性能、又は複数の候補ニューラルネットワークモデルの入力データのサイズのうちの少なくとも１つが含まれる方法を提供し得る。

【0011】

複数の候補ニューラルネットワークモデルを導出するための訓練モードが第１の訓練モードに設定されるとき、各々、複数の候補ニューラルネットワークモデルの情報を表す複数のＵＩ要素には、各々、ユーザによって設定された入力データのサイズに基づいて導出された複数の第１の候補ニューラルネットワークモデルの各々に対応する第１のＵＩ要素と、各々、ユーザによって設定された目標性能に基づいて導出された複数の第２の候補ニューラルネットワークモデルの各々に対応する第２のＵＩ要素とが含まれてもよい。第１のＵＩ要素及び第２のＵＩ要素は、異なるエリアに表示されてもよい。訓練モードが第２の訓練モードとして設定されるとき、複数のＵＩ要素は、第１の性能パラメータに対応する第１の軸と、第２の性能パラメータに対応し、第１の軸と直交する第２の軸とによって規定される２次元グラフ上に表示されてもよい。

【0012】

訓練モードが第１の訓練モードとして設定されるとき、複数のＵＩ要素は、複数のＵＩ要素の各々に対応する候補ニューラルネットワークモデルの性能と受信した目標性能との差の降順に表示されてもよい。

【0013】

第１の性能パラメータが遅延時間であってもよく、第２の性能パラメータが正確さであってもよい。

【0014】

複数のＵＩ要素には、各々、受信した目標性能から所定範囲内に性能を有する複数の第３の候補ニューラルネットワークモデルの各々に対応する第３のＵＩ要素と、各々、受信した目標性能から所定範囲外に性能を有する複数の第４の候補ニューラルネットワークモデルに対応する第４のＵＩ要素とが含まれてもよい。送信することには、第３のＵＩ要素を有効化し、第４のＵＩ要素を無効化するために、外部デバイスに指令を送信することが含まれてもよい。

【0015】

複数のＵＩ要素の各々は、ユーザによる選択時、複数の候補ニューラルネットワークモデルの情報を表示してもよい。

【0016】

複数の候補ニューラルネットワークモデルの情報は、ルックアップテーブルに基づいて取得されてもよい。ルックアップテーブルには、複数のニューラルネットワークモデルの識別情報、複数のニューラルネットワークモデルが実行される複数のデバイスの情報、及び複数のデバイスに対する複数のニューラルネットワークモデルの性能情報が含まれてもよい。

【0017】

導出することには、複数のニューラルネットワークモデルのうち、ランキングが所定のランキング以上であるニューラルネットワークモデルの情報を導出することが含まれてもよく、ランキングは、目標性能からの性能差に基づく。

【0018】

導出することには、複数のニューラルネットワークモデルのうち、目標性能からの差が事前設定された範囲内であるニューラルネットワークモデルの情報を導出することが含まれてもよい。

【0019】

本開示は、ニューラルネットワークモデルの情報を提供する電子機器であって、データネットワークを介してデータを送受信するように構成され、少なくとも１つの通信回路を含む通信インタフェースと、少なくとも１つの動作指示を記憶するように構成された持続性メモリと、プロセッサとを備え、少なくとも１つの動作指示を実行することは、プロセッサに、ニューラルネットワークモデルが実行される目標デバイスの情報、及び目標デバイスに対するニューラルネットワークモデルの目標性能を、外部デバイスから受信することと、目標デバイスの情報及び受信した目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出することと、受信した目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を表示するために、外部デバイスに指令を送信することと、を実施させ、複数の候補ニューラルネットワークモデルの情報には、候補ニューラルネットワークモデルの名称、複数の候補ニューラルネットワークモデルの性能、又は複数の候補ニューラルネットワークモデルの入力データのサイズのうちの少なくとも１つが含まれる電子機器を提供し得る。複数の候補ニューラルネットワークモデルを導出するための訓練モードが第１の訓練モードとして設定されるとき、各々、複数の候補ニューラルネットワークモデルの情報を表す複数のＵＩ要素には、ユーザによって設定された入力データのサイズに基づいて導出された複数の第１の候補ニューラルネットワークモデルの各々に対応する第１のＵＩ要素と、各々、ユーザによって設定された目標性能に基づいて導出された複数の第２の候補ニューラルネットワークモデルの各々に対応する第２のＵＩ要素とが含まれてもよい。第１のＵＩ要素及び第２のＵＩ要素は、異なるエリアに表示されてもよい。訓練モードが第２の訓練モードとして設定されるとき、複数のＵＩ要素は、第１の性能パラメータに対応する第１の軸と、第２の性能パラメータに対応し、第１の軸と直交する第２の軸とによって規定される２次元グラフ上に表示されてもよい。

【0020】

訓練モードが第１の訓練モードとして設定されるとき、複数のＵＩ要素は、複数のＵＩ要素の各々に対応する候補ニューラルネットワークモデルの性能と受信した目標性能との差の降順に表示されてもよい。

【0021】

複数のＵＩ要素には、各々、受信した目標性能から所定範囲内に性能を有する複数の第３の候補ニューラルネットワークモデルの各々に対応する第３のＵＩ要素と、受信した目標性能から所定範囲外に性能を有する複数の第４の候補ニューラルネットワークモデルの各々に対応する第４のＵＩ要素とが含まれてもよい。

【0022】

プロセッサは、通信インタフェースを制御することで、第３のＵＩ要素を有効化し、第４のＵＩ要素を無効化するために、外部デバイスに指令を送信してもよい。

【0023】

プロセッサは、ルックアップテーブルに基づき、複数の候補ニューラルネットワークモデルの情報を導出してもよい。ルックアップテーブルには、複数のニューラルネットワークモデの識別情報、複数のニューラルネットワークモデルが実行される複数のデバイスの情報、及び複数のデバイスに対する複数のニューラルネットワークモデルの性能情報が含まれてもよい。

【0024】

プロセッサは、複数のニューラルネットワークモデルのうち、ランキングが所定のランキング以上であるニューラルネットワークモデルの情報を導出してもよく、ランキングは、目標性能からの性能差に基づいてもよい。

【0025】

プロセッサは、複数のニューラルネットワークモデルのうち、目標性能からの差が事前設定された範囲内であるニューラルネットワークモデルの情報を導出してもよい。

【0026】

本開示の課題を解決するための手段は、上述の解決手段に限定されるものでなく、本明細書及び添付の図面より、本開示が関連する当業者により、言及されていない解決手段が明らかに理解されるであろう。

【発明の効果】

【0027】

上述のような本開示の種々の実施形態によると、目標デバイスに合わせて最適化されたニューラルネットワークモデルを提供することができる。

【0028】

上述のような本開示の種々の実施形態によると、ユーザによって入力されたデータセットに基づいて訓練されたニューラルネットワークモデルを提供することができる。

【0029】

上述のような本開示の種々の実施形態によると、ユーザによって入力された圧縮のための設定値に基づいて圧縮ニューラルネットワークモデルを提供することができる。

【0030】

上述のような本開示の種々の実施形態によると、圧縮ニューラルネットワークモデルに対応するダウンロードデータを提供することができる。

【0031】

したがって、ユーザの利便と満足を向上することができる。

【図面の簡単な説明】

【0032】

添付の図面を参照した以下の説明より、本開示の特定の実施形態の態様、特徴、及び効果がより明らかとなるであろう。

【0033】

【図1】本開示の実施形態に係る電子機器の動作を示す図である。

【0034】

【図2】本開示の実施形態に係る電子機器の構成を示すブロック図である。

【0035】

【図3】本開示の実施形態に係る第１のプロジェクトを実施する方法を示す図である。

【0036】

【図4】本開示の実施形態に係る第２のプロジェクトを実施する方法を示す図である。

【0037】

【図5】本開示の実施形態に係る第３のプロジェクトを実施する方法を示す図である。

【0038】

【図6】本開示の実施形態に係るデータセット入力画面を示す図である。

【0039】

【図7】本開示の実施形態に係るデータセット確認画面を示す図である。

【0040】

【図8】本開示の実施形態に係るデータセット一覧画面を示す図である。

【0041】

【図9】本開示の実施形態に係る目標デバイス入力画面を示す図である。

【0042】

【図10】本開示の実施形態に係るプロジェクト情報画面を示す図である。

【0043】

【図11】本開示の実施形態に係る電子機器の制御方法を示す図である。

【0044】

【図12】本開示の実施形態に係る第１のプロジェクトの実施方法を示すシーケンス図である。

【0045】

【図13】本開示の実施形態に係る第２のプロジェクトの実施方法を示すシーケンス図である。

【0046】

【図14】本開示の実施形態に係る第３のプロジェクトの実施方法を示すシーケンス図である。

【0047】

【図15】本開示の実施形態に係るニューラルネットワークモデルを提供するためのシステムの構成を示すブロック図である。

【0048】

【図16】本開示の実施形態に係る学習設定画面を示す図である。

【0049】

【図17】本開示の実施形態に係るベースモデル推奨画面を示す図である。

【0050】

【図18】本開示の実施形態に係るユーザインタフェース画面を介してニューラルネットワークモデルの情報を表示する方法を示す図である。

【0051】

【図19】本開示の実施形態に係るニューラルネットワークモデルの情報を表示する方法を示す図である。

【0052】

【図20】本開示の実施形態に係るニューラルネットワークモデルの性能データを取得する方法を示す図である。

【0053】

【図21】本開示の実施形態に係る電子機器の制御方法を示す図である。

【0054】

【図22】本開示の実施形態に係る電子機器の動作を示す図である。

【発明を実施するための形態】

【0055】

本明細書において使用される用語について簡単に説明した後、本開示について詳細に説明する。

【0056】

本開示の機能を考慮の上、現在広範に亘って使用される一般的な用語を、本開示の実施形態において使用する用語として選択するが、当技術分野又は判例に関する知識を有するものの意図、新技術の出現等に応じて変更され得る。さらに、特定の場合においては、出願人によって任意に選ばれた用語が使用され得る。このような場合、それらの用語の意味については、本開示の対応説明部分において詳細に言及される。したがって、本開示において使用される用語は、それら用語の単純な名称でなく、本開示全体を通じた用語及び内容の意味に基づいて規定されなければならない。

【0057】

本開示は、種々に修正されてもよく、いくつかの実施形態を有してもよいため、本開示の特定の実施形態を添付の図面に示し、詳細な説明において詳述する。しかしながら、本開示は、例としての特定の実施形態に限定されるものでなく、本開示の範囲及び趣旨から逸脱することなく、あらゆる修正、同等物、及び置換がなされることを理解しなければならない。本開示に関連の既知の技術についての詳細な説明は、本開示の要旨を曖昧にする可能性があると判断されるときには、詳細な説明を省略する。

【0058】

「第１の」、「第２の」等の用語は、種々の構成要素を説明するために使用され得るが、これらの要素は、これらの用語によって限定されるものと理解されてはならない。これらの用語は、１つの構成要素を他の構成要素と区別するためのみに使用されるものである。

【0059】

単数形は、文脈によって別段の明記のない限り、複数形も含むことが意図されている。より具体的には、本明細書中及び添付の請求項中で使用される場合、単数形の不定冠詞及び定冠詞は、文脈によって別段の明記のない限り、複数の指示対象も含む。本明細書において使用される「備える」及び「含む」という用語は、本明細書において言及される特徴、数値、ステップ、動作、構成要素、部分、又はこれらの組み合わせの存在を特定するものであるが、１つ以上の他の特徴、数値、ステップ、動作、構成要素、部分、又はこれらの組み合わせの存在又は追加を排除するものでないことが理解されなければならない。

【0060】

以降、本開示の関連する技術分野の当業者が本開示を容易に実施し得るように、本開示の実施形態について、添付の図面を参照して詳細に説明を行う。しかしながら、本開示は、種々の異なる形態で修正されてもよく、本明細書に記載の実施形態に限定されるものでない。さらに、図中、説明に関連しない箇所については、本開示を明確に説明するために省略し、明細書全体を通じて同様の部分の説明には同様の参照符号を使用する。

【0061】

構造及び動作の双方について、本明細書に記載の実施形態の詳細を添付の図中に表しており、種々の図面において、同様の参照符号により、同様又は対応の要素を示している。図中の要素は、必ずしも寸法を示すものでなく、むしろ実施形態の原則を説明する上で、強調が加えられている。さらに、すべての図示は、概念を伝えることが意図されており、相対的なサイズ、形状、及びその他の詳細な属性は、そのまま又は精密に示されるのではなく、概略的に示されることがある。

【0062】

本開示は、演算デバイスによって実施されるニューラルネットモデルを取得する方法であって、演算デバイスのプロセッサにおいて、ニューラルネットワークモデルを訓練するためのデータセット、ニューラルネットワークモデルを実行するための目標デバイスに関する情報、及びニューラルネットワークモデルのための訓練モードを受信することと、データセット、目標デバイスに関する情報、及び訓練モードに基づき、プロセッサを使用してプロジェクトを設定することと、設定されたプロジェクトを実施することによって、少なくとも１つの訓練済ニューラルネットワークモデルを導出することと、を含む方法を提供し得る。

【0063】

第１のデータセットがデータセットとして受信され、第１の訓練モードが訓練モードとして受信されるとき、プロジェクトは、第１のプロジェクトとして設定され、第１の訓練済モデルは、設定された第１のプロジェクトを実施することによって導出される。設定された第１のプロジェクトを実施することには、目標デバイスに関する情報及びユーザによって入力された目標性能に基づき、メモリに予め記憶された複数のニューラルネットワークモデルのうちから複数のベースモデルを特定することと、第１のデータセットに基づき、第１のベースモデルを訓練することにより、第１の訓練済モデルを導出することと、が含まれてもよい。第１のベースモデルは、複数の特定されたベースモデルから、ユーザによって選択されてもよい。

【0064】

複数の特定されたベースモデルは、目標デバイスに対応し、目標性能からの性能差が事前設定された範囲内であるニューラルネットワークモデルであってもよい。複数のベースモデルは、複数の予め記憶されたニューラルネットワークモデルの識別情報、目標デバイスの情報、目標デバイスに複数のニューラルネットワークモデルのうちの関連する１つを実行することによって導出された複数のニューラルネットワークモデルに対する性能情報が含まれるルックアップテーブルに基づいて特定されてもよい。

【0065】

第２のデータセットがデータセットとして受信され、第２の訓練モードが訓練モードとして受信されるとき、プロジェクトは、第２のプロジェクトとして設定され、第２の訓練済モデルは、設定された第２のプロジェクトを実施することによって導出される。設定された第２のプロジェクトを実施することには、目標デバイスに関する情報、及び所与のアルゴリズムに基づき、第２のベースモデルを導出することと、第２のデータセットに基づき、第２のベースモデルを訓練することにより、第２の訓練済モデルを導出することと、が含まれてもよい。

【0066】

所与のアルゴリズムには、ハイパーパラメータ最適化（ＨＰＯ）アルゴリズム又はニューラルアーキテクチャ検索（ＮＡＳ）アルゴリズムのうちの少なくとも一方が含まれてもよい。

【0067】

当該方法には、モデルデータベースに、少なくとも１つの訓練済ニューラルネットワークモデルを記憶することが含まれてもよい。

【0068】

第３のデータセットがデータセットとして受信され、第３の訓練モードが訓モードとして受信されるとき、プロジェクトは、第３のプロジェクトとして設定され、第３の訓練済モデルは、第３のプロジェクトセットを実施することによって導出される。第３のプロジェクトセットを実施することには、モデルデータベースから導出された少なくとも１つの訓練済モデルを含むモデル一覧をユーザに提供することと、ユーザによってモデル一覧から選択された訓練済モデル及び第３のデータセットに基づき、第３の訓練済モデルを導出することと、が含まれてもよい。第３の訓練済モデルは、第３のデータセットに基づいて訓練されてもよい。

【0069】

当該方法には、データセットのフォーマットが事前設定されたフォーマットであるか否かを特定することと、データセットのフォーマットが事前設定されたフォーマットでないとき、データセットのフォーマットを事前設定されたフォーマットに変換することと、が含まれてもよい。

【0070】

事前設定されたフォーマットには、Ｙｏｕ ｏｎｌｙ ｌｏｏｋ ｏｎｃｅ（ＹＯＬＯ）が含まれてもよい。

【0071】

ルックアップテーブルに含まれる複数のニューラルネットワークモデルの性能情報は、目標デバイスを使用して複数のニューラルネットワークモデルを実行することによって導出されてもよい。

【0072】

本開示は、ニューラルネットワークモデルを取得するための電子機器であって、通信ネットワークを介してデータを送受信するように動作可能であり、少なくとも１つの通信回路を含む通信インタフェースと、少なくとも１つの指示を記憶するように構成された持続性コンピュータ可読メモリと、プロセッサと、を備え、プロセッサの実行では、プロセッサに、ニューラルネットワークモデルを訓練するためのデータセット、ニューラルネットワークモデルを実行するための目標デバイスについての情報、及びニューラルネットワークモデルのための訓練モードを受信することと、データセット、目標デバイスの情報、及び訓練モードに基づき、プロジェクトを設定することと、設定されたプロジェクトを実施することにより、少なくとも１つの訓練済ニューラルネットワークモデルを導出することと、を行わせる少なくとも１つの動作指示を実行する電子機器を提供し得る。

【0073】

プロセッサは、第１のデータセット、目標デバイスの情報、及び第１の訓練モードに基づいて第１のプロジェクトを設定してもよい。設定された第１のプロジェクトが実施されるとき、プロセッサは、目標デバイスの情報及びユーザから入力された目標性能に基づき、メモリに予め記憶された複数のニューラルネットワークモデルのうちから、複数のベースモデルを特定することと、通信インタフェースを制御することで、外部デバイスに複数のベースモデルに関する情報を表示させる指令を外部デバイスに送信することと、第１のデータセット及び複数のベースモデルからユーザによって選択された第１のベースモデルに基づいてトレーニングされた第１の訓練済モデルを導出することと、を行ってもよい。

【0074】

複数の特定されたベースモデルは、目標デバイスに対応し、目標性能からの性能差が事前設定された範囲内にあるニューラルネットワークモデルであってもよい。複数の特定されたベースモデルは、メモリに記憶されたルックアップテーブルに基づいて特定されてもよい。ルックアップテーブルには、予め記憶された複数のニューラルネットワークモデルについての識別情報、目標デバイスについての情報、及び目標デバイスに複数のニューラルネットワークモデルのうちの関連する１つを実行することによって導出された複数のニューラルネットワークモデルについての性能情報が含まれてもよい。

【0075】

プロセッサは、第２のデータセット、目標デバイスについての情報、及び第２の訓練モードに基づき、第２のプロジェクトを設定してもよい。設定された第２のプロジェクトが実施されるとき、プロセッサは、目標デバイスの情報及び所与のアルゴリズムに基づき、第２のベースモデルを導出し、第２のデータセットに基づき、第２のベースモデルを訓練することにより、第２の訓練済モデルを導出してもよい。

【0076】

所与のアルゴリズムには、ハイパーパラメータ最適化アルゴリズム（ＨＰＯ）又はニューラルネットワークアーキテクチャ（ＮＡＳ）検索アルゴリズムのうちの少なくとも一方が含まれてもよい。

【0077】

プロセッサは、少なくとも１つの訓練済ニューラルネットワークモデルをモデルデータベースに記憶させてもよい。

【0078】

プロセッサは、第３のデータセット、目標デバイスについての情報、及び第３の訓練モードに基づき、第３のプロジェクトを設定してもよい。設定された第３のプロジェクトが実施されるとき、プロセッサは、モデルデータベースから少なくとも１つの訓練済モデルを含むモデル一覧を提供し、ユーザによってモデル一覧から選択された訓練済モデルを訓練することにより、第３のデータセットに基づいて訓練された第３の訓練済モデルを導出してもよい。

【0079】

プロセッサは、データセットのフォーマットが事前設定されたフォーマットであるか否かを特定してもよい。データセットのフォーマットが事前設定されたフォーマットでないとき、プロセッサは、データセットのフォーマットを事前設定されたフォーマットに変換してもよい。

【0080】

ルックアップテーブルに含まれる複数のニューラルネットワークモデルについての性能情報は、目標デバイスを使用して複数のニューラルネットワークモデルを実行することによって導出されてもよい。

【0081】

本開示は、演算デバイスによって実施されるニューラルネットワークモデルを提供する方法であって、演算デバイスのプロセッサにおいて、ユーザによって入力された目標デバイスについての情報を使用してデバイスファームにおいて特定された目標デバイスと及びデータセットに基づいて訓練された訓練済モデルを受信することと、圧縮設定情報及びデバイスファームから受信した遅延時間情報に基づいて訓練済モデルを圧縮することと、圧縮された訓練済モデルに対応するダウンロードデータを提供することにより、圧縮された訓練済モデルが目標デバイス上で展開されるようにすることと、を含む方法を提供し得る。

【0082】

圧縮設定情報には、訓練済モデルがユーザによって設定されたモデル圧縮設定値に基づいて圧縮されることを示す第１の圧縮モードが含まれてもよい。第１の圧縮モードが設定されるとき、訓練済モデルを圧縮することには、訓練済モデルに含まれる複数のブロックのうちから、複数の圧縮可能目標ブロックを特定することと、モデル圧縮設定値及び所与のアルゴリズムの双方に基づき、複数の目標ブロックのうちの各々に適用されるブロック圧縮に対するブロック圧縮設定値を含む、第１の圧縮パラメータセットを導出することと、第１の圧縮パラメータセットに基づき、複数の圧縮可能目標ブロックを圧縮することと、が含まれてもよい。

【0083】

訓練済モデルを圧縮することには、ユーザに第１の圧縮パラメータセットを提供することがさらに含まれてもよい。ブロック圧縮設定値がユーザによって修正されるとき、訓練済モデルを圧縮することには、修正されたブロック圧縮設定値を含む第２の圧縮パラメータセットに基づき、複数の目標ブロックを圧縮することがさらに含まれてもよい。

【0084】

圧縮設定情報には、訓練済モデルに含まれるブロックの情報が提供され、訓練済モデルがユーザによって設定されたブロック圧縮設定値に基づいて圧縮されることを示す第２の圧縮モードが含まれてもよい。第２の圧縮モードが設定されるとき、圧縮することには、訓練済モデルに含まれる複数のブロックのうちから、複数の圧縮可能目標ブロックを特定することと、複数の目標ブロックの情報をユーザに提供することと、複数の目標ブロックの各々に適用されるブロック圧縮設定値を含む第３の圧縮パラメータを受信することであって、ブロック圧縮設定値は、複数の目標ブロックの圧縮のためにユーザによって設定されたものであることと、第３の圧縮パラメータセットに基づき、複数の目標ブロックを圧縮することと、が含まれてもよい。

【0085】

訓練モデルに含まれるブロックの情報には、ブロックの特定情報、ブロックに対応する遅延情報、又はブロックに含まれるチャンネルの量のうちの少なくとも１つが含まれてもよい。

【0086】

訓練済モデルを圧縮することには、目標デバイスから複数の遅延時間データを受信することがさらに含まれてもよく、複数の遅延時間データのうちの各遅延時間データは、複数のブロックのうちの各ブロックに関連付けられてもよく、複数の遅延時間データのうちの各遅延時間データは、目標デバイスによって複数のブロックの関連ブロックに実行されることで導出されてもよい。

【0087】

圧縮設定情報には、圧縮方法、圧縮設定値、又は訓練済モデルに含まれる複数のチャンネルのうちから圧縮目標を判定するための参照情報のうちの少なくとも１つが含まれてもよい。

【0088】

当該方法にはさらに、プロセッサにおいて、圧縮された訓練済モデルを再訓練するためのユーザ指令を受信することと、圧縮された訓練済モデルに基づき、再訓練済モデルを生成することと、再訓練済モデルに対応するダウンロードデータを提供することと、が含まれてもよい。

【0089】

当該方法にはさらに、プロセッサにおいて、目標デバイスについての情報に基づき、圧縮された訓練済モデルに少なくとも１つの量子化又は較正動作を実施することが含まれてもよい。

【0090】

本開示は、ニューラルネットワークモデルを提供するための電子機器であって、データネットワークを介してデータを送受信するように構成され、少なくとも１つの通信回路を含む通信インタフェースと、少なくとも１つの動作指示を記憶するように構成されたメモリと、プロセッサと、を備え、少なくとも１つの動作指示を実行することで、プロセッサに、ユーザによって入力された目標デバイスについての情報を使用してデバイスファームにおいて特定された前記目標デバイスと及びデータセットに基づいて訓練された訓練済モデルを受信することと、圧縮設定情報及びデバイスファームから受信した遅延時間情報に基づき、訓練済モデルを圧縮することと、圧縮された訓練済モデルに対応するダウンロードデータを提供することで、圧縮された訓練済モデルが目標デバイス上で展開されるようにすることと、を行わせる電子機器を提供し得る。

【0091】

圧縮設定情報には、訓練済モデルがユーザによって設定されたモデル圧縮設定値に基づいて圧縮されることを示す圧縮モードが含まれてもよい。第１の圧縮モードが設定されるとき、プロセッサは、訓練済モデルに含まれる複数のブロックのうちから複数の圧縮可能目標ブロックを特定し、モデル圧縮設定値及び所与のアルゴリズムの双方に基づいて複数の目標ブロックのうちの各々に適用されるブロック圧縮のためのブロック圧縮設定値を含む第１の圧縮パラメータを導出し、第１の圧縮パラメータセットに基づき、複数の圧縮可能目標ブロックを圧縮してもよい。

【0092】

プロセッサは、ユーザに第１の圧縮パラメータセットを提供してもよい。ブロック圧縮設定値のうちの少なくとも１つがユーザによって修正されるとき、プロセッサは、ブロック圧縮設定値のうちの修正された少なくとも１つを含む第２の圧縮パラメータセットに基づき、複数の目標ブロックを圧縮してもよい。

【0093】

圧縮設定情報には、訓練済モデルに含まれるブロックの情報が提供されることを示す第２の圧縮モードが含まれる。訓練済モデルは、ユーザによって設定されたブロック圧縮設定値に基づいて圧縮され得る。第２の圧縮モードが設定されるとき、プロセッサは、訓練済モデルに含まれる複数のブロックのうちから複数の圧縮可能目標ブロックを特定し、複数の目標ブロックの情報をユーザに提供し、複数の目標ブロックの各々に適用される、複数の目標ブロックの圧縮のためにユーザによって設定されたブロック圧縮構成値を含む第３の圧縮パラメータセットを受信し、第３の圧縮パラメータに基づき、複数の目標ブロックを圧縮してもよい。

【0094】

訓練モジュールに含まれるブロックの情報には、ブロックの識別情報、ブロックに対応する遅延時間、又はブロックに含まれるチャンネルの量のうちの少なくとも１つが含まれてもよい。

【0095】

プロセッサは、目標デバイスから複数の遅延時間データを受信してもよい。複数の遅延時間データのうちの各遅延時間データは、複数のブロックのうちの各ブロックに関連付けられてもよい。各遅延時間データは、目標デバイスによって複数のブロックのうちの関連ブロックを実行することによって導出されてもよい。

【0096】

圧縮設定情報には、圧縮方法、圧縮設定値、又は訓練済モデルに含まれる複数のチャンネルのうちから圧縮目標を判定するための参照情報のうちの少なくとも１つが含まれてもよい。

【0097】

プロセッサは、圧縮された訓練済モデルを再訓練するためのユーザ指令を受信し、圧縮された訓練済モデルに基づいて再訓練モデルを生成し、再訓練モデルに対応するダウンロードデータを提供してもよい。

【0098】

プロセッサは、目標デバイスについての情報に基づき、圧縮された訓練済モデルを量子化又は較正してもよい。

【0099】

プロセッサは、遅延時間情報に基づき、訓練済モデルの圧縮設定値を判定してもよい。

【0100】

図１は、本開示の一実施形態に係る電子機器の動作を説明するための図である。

【0101】

図１を参照すると、電子機器１００は、データセット１１に基づくプロジェクト１４、目標デバイスの情報１２、及び訓練モード１３を規定し得る。プロジェクト１４とは、目標デバイスに合わせて最適化されたニューラルネットワークモデル１５を取得するための事業ユニットを意味し得る。電子機器１００は、プロジェクト１４を実施することにより、最適化されたニューラルネットワークモデル１５を取得してもよい。電子機器１００は、ユーザに、最適化されたニューラルネットワークモデル１５を提供してもよい。

【0102】

データセット１１には、ニューラルネットワークモデル１５を訓練するのに使用される種々の種別のデータが含まれてもよい。例えば、データセット１１には、ニューラルネットワークモデル１５を訓練するために使用される訓練データ、ニューラルネットワークモデル１５の訓練が進行中であるとき、ニューラルネットワークモデル１５の性能を評価するために使用される評価データ、及びニューラルネットワークモデル１５の訓練の完了後、ニューラルネットワークモデル１５の性能を評価するために使用される試験データが含まれてもよい。

【0103】

目標デバイスの情報１２には、種々の目標デバイスの関連情報が含まれてもよい。目標デバイスの情報１２には、目標デバイスのモデル情報及び目標デバイスのソフトウェアが含まれてもよい。

【0104】

訓練モード１３には、第１の訓練モード、第２の訓練モード、及び第３の訓練モードが含まれてもよい。第１の訓練モードは、複数の事前記憶されたベースモデルからユーザによってユーザによって選択されたモデルを訓練するためのモードである。第２の訓練モードは、所与のアルゴリズムに基づいて導出されたモデルを訓練するためのモードである。第３の訓練モードは、第１の訓練モード又は第２の訓練モードにおいて訓練済のモデルを再訓練するためのモードである。例えば、第１の訓練モードは、いわゆる「簡易モード」であり、ユーザが最短時間内に訓練済モデルを得ることのできるモードであり得る。第２の訓練モードは、いわゆる「エキスパートモード」であり、第１の訓練モードよりも時間がかかるものの、より良好な（又はユーザによって設定された目標性能により近い）性能を備えた訓練済モデルを得ることのできるモードであり得る。さらに、第２の訓練モードにおいては、第１の訓練モードに比してより多くのモデルが提供され得る。例えば、第１の訓練モードでは、プロジェクトを一度実施することによって１つのモデルが得られる一方、第２の訓練モードでは、プロジェクトを一度実施することによって２つ以上の複数のモデルが導出され得る。

【0105】

電子機器１００は、データセット１１、目標デバイスの情報１２、訓練モード１３、及びニューラルネットワークモデル１５の情報に基づき、プロジェクト１４を規定してもよい。ニューラルネットワークモデル１５の情報には、ニューラルネットワークモデル１５のフレームワーク、出力データ種別（例えば、３２ビット浮遊点）、干渉バッチサイズが含まれてもよい。

【0106】

図２は、本開示の本実施形態に係る電子機器の構成を示すブロック図である。

【0107】

図２を参照すると、電子機器１００は、通信インタフェース１１０、メモリ１２０、及びプロセッサ１３０を備えてもよい。例えば、電子機器１００は、物理サーバ又はクラウドサーバとして実装されてもよい。

【0108】

通信インタフェース１１０は、少なくとも１つの通信回路を備え、種々の種別の外部デバイスと通信してもよい。例えば、通信インタフェース１１０は、データセット及び目標デバイスの情報を外部デバイスから受信してもよい。外部デバイスは、ユーザデバイスであってもよい。ユーザデバイスには、パーソナルコンピュータ及びモバイルデバイスが含まれてもよい。通信インタフェース１１０は、目標デバイスの情報に基づいて検索した複数のベースモデルの情報を外部デバイスに送信してもよい。これに応じて、外部デバイスは、複数のベースモデルの情報を出力してもよい。通信インタフェース１１０は、複数のベースモデルのうちの少なくとも１つを選択するためのユーザ指令を外部デバイスから受信してもよい。

【0109】

通信インタフェース１１０は、少なくとも１つの選択されたベースモデル及びデータセットを外部サーバに送信してもよい。外部サーバは、データセットを使用して選択された少なくとも１つのベースモデルを訓練した後、訓練済ニューラルネットワークモデル（又は訓練済モデル）を取得してもよい。通信インタフェース１１０は、訓練済モデルを外部サーバから受信してもよい。

【0110】

通信インタフェース１１０は、訓練済モデルを外部デバイスに送信してもよい。通信インタフェース１１０は、訓練済モデルの情報を外部デバイスに送信してもよい。訓練済モデルの情報には、訓練済モデルの名称、訓練済モデルによって実施されたタスク、訓練済モデルに対応する目標デバイスの情報、訓練済モデルの性能（例えば、正確さ及び遅延時間）が含まれてもよい。一方、本開示において、ニューラルネットワークモデルの取得／記憶／送信／受信は、モデルに関連するデータ（例えば、アーキテクチャ、重量）の取得／記憶／送信／受信を意味する。

【0111】

通信インタフェース１１０には、Ｗｉ－ｆｉ（登録商標）通信モジュール、セルラー通信モジュール、第３世代（３Ｇ）モバイル通信モジュール、第４世代（４Ｇ）モバイル通信モジュール、第４世代ロングタームエボリューション（ＬＴＥ）通信モジュール、第５世代（５Ｇ）モバイル通信、又は有線イーサネット（登録商標）のうちの少なくとも１つが含まれてもよい。

【0112】

メモリ１２０は、電子機器１００の構成要素の全体的な動作を制御するためのオペレーティングシステム（ＯＳ）、及び電子機器１００の構成要素に関連の指令又はデータを記憶してもよい。メモリ１２０は、非揮発性メモリ（例えば、ハードディスク、ソリッドステートドライブ（ＳＳＤ）、及びフラッシュメモリ）、揮発性メモリ等として実装されてもよい。

【0113】

メモリ１２０には、データベース（ＤＢ）が含まれてもよい。例えば、メモリ１２０には、データセットを記憶するためのデータセットＤＢが含まれてもよい。メモリ１２０には、プロジェクトを記憶するためのプロジェクトＤＢが含まれてもよい。メモリ１２０には、訓練済モデルを記憶するためのモデルＤＢが含まれてもよい。ＤＢに記憶された情報は、ユーザに提供されてもよい。例えば、データセット一覧、プロジェクト一覧、及び／又はモデル一覧が外部デバイス上に表示されてもよい。

【0114】

メモリ１２０は、複数のニューラルネットワークモデルの情報を記憶してもよい。例えば、メモリ１２０は、複数のニューラルネットワークモデルの識別情報、目標デバイスの情報、及び複数のニューラルネットワークモデルの性能情報が照合されるルックアップテーブルを記憶してもよい。複数のニューラルネットワークモデルの性能情報は、ニューラルネットワークモデルがターゲットモデルデバイスにおいて実行されるとき、複数のニューラルネットワークモデルの各々の性能（例えば、遅延時間）を反映させてもよい。目標デバイスに対するニューラルネットワークモデルの性能は、ニューラルネットワークモデルが目標デバイスにおいて実行されるときのニューラルネットワークモデルの性能であってもよい。ニューラルネットワークモデルの遅延時間は、デバイスファームから取得されてもよい。ニューラルネットワークモデルの正確さは、試験データを使用して導出されてもよい。

【0115】

メモリ１２０は、ベースモデルの検索のための所与のアルゴリズムを記憶してもよい。所与のアルゴリズムには、ハイパーパラメータ最適化（ＨＰＯ）アルゴリズム又はニューラルアーキテクチャ検索（ＮＡＳ）アルゴリズムのうちの少なくとも一方が含まれてもよい。ハイパーパラメータ最適化アルゴリズムには、ツリー構造パーゼン推定器（ＴＰＥ）アルゴリズムが含まれてもよい。ＴＰＥアルゴリズムは、ベイズ最適化に基づいてもよい。ニューラルネットワークアーキテクチャ検索アルゴリズムは、進化的アルゴリズムに基づいてもよい。

【0116】

プロセッサ１３０は、メモリ１２０に対して電気的に接続され、電子機器１００の全体的な動作及び機能を制御してもよい。プロセッサ１３０は、メモリ１２０に記憶された指示を実行することにより、電子機器１００を制御してもよい。

【0117】

プロセッサ１３０は、データセット、目標デバイスの情報、及び訓練モードを取得してもよい。プロセッサ１３０は、通信インタフェース１１０を通じて外部デバイスから、データセット、目標デバイスの情報、及び訓練モードを受信してもよい。データセット、目標デバイスの情報、及び訓練モードは、ユーザによって外部デバイスに入力されてもよい。

【0118】

プロセッサ１３０は、データセットのフォーマットが事前設定されたフォーマットであるか否かを特定してもよい。データセットのフォーマットが事前設定されたフォーマットでないとき、プロセッサ１３０は、データセットのフォーマットを事前設定されたフォーマットに変換してもよい。プロセッサ１３０は、フォーマットが変換されたデータセットをメモリ１２０に記憶してもよい。事前設定されたフォーマットには、Ｙｏｕ ｏｎｌｙ ｌｏｏｋ ｏｎｃｅ（ＹＯＬＯ）のフォーマットが含まれてもよい。

【0119】

プロセッサ１３０は、データセット、目標デバイスの情報、及び訓練モードに基づいてプロジェクトを設定してもよい。プロジェクトとは、目標デバイスに合わせて最適化された訓練済ニューラルネットワークモデルを導出するためのタスク単位を意味してもよい。例えば、プロセッサ１３０は、第１のデータセット、第１の目標デバイスの情報、及び第１の訓練モードに基づき、第１のプロジェクトを設定してもよい。プロセッサ１３０は、第２のデータセット、第２の目標デバイスの情報、及び第２の訓練モードに基づき、第２のプロジェクトを設定してもよい。プロセッサ１３０は、第３のデータセット、第３の目標デバイスの情報、及び第３の訓練モードに基づき、第３のプロジェクトを設定してもよい。

【0120】

プロセッサ１３０は、プロジェクトを実施することにより、ニューラルネットワークモデルを取得してもよい。例えば、プロセッサ１３０は、第１のプロジェクトを実施してもよい。この場合、プロセッサ１３０は、目標デバイスの情報及びユーザによって設定された目標性能に基づき、複数のベースモデルを特定してもよい。例えば、プロセッサ１３０は、メモリ１２０に記憶されたルックアップテーブルに基づき、複数のベースモデルを特定してもよい。ルックアップテーブルにおいては、複数のニューラルネットワークモデルの識別情報、目標デバイスの情報、及び複数のニューラルネットワークモデルの性能情報が照合されてもよい。複数のニューラルネットワークモデルの性能情報は、ニューラルネットワークモデルが目標デバイスにおいて実行されるときの複数のニューラルネットワークモデルの各々の性能（例えば、遅延時間）を反映させてもよい。プロセッサ１３０は、デバイスファームから複数のニューラルネットワークモデルの各々の性能を取得してもよい。或いは、プロセッサ１３０は、デバイスファームを使用して複数のニューラルネットワークモデルのうちの一部の性能を取得してもよく、遅延時間を予測するために、訓練済ニューラルネットワークモデルを使用して残りのニューラルネットワークモデルの一部の性能を取得してもよい。

【0121】

第１のプロジェクトを実施するとき、プロセッサ１３０は、ベースモデルとして、ルックアップテーブルに基づき、目標デバイスに対応し、目標性能からの性能の差が事前設定された範囲内であるニューラルネットワークモデルを特定してもよい。例えば、プロセッサ１３０は、目標遅延時間からの遅延時間の差が０．１秒以内である複数のベースモデルを特定してもよい。

【0122】

プロセッサ１３０は、通信インタフェース１１０を制御して、複数のベースモデルの情報を外部デバイスに送信してもよい。外部デバイスは、複数のベースモデルの情報をユーザに提供してもよい。例えば、複数のベースモデルの情報には、複数のベースモデルの各々の識別情報（例えば、モデル名）、遅延時間、及び入力データサイズが含まれてもよい。外部デバイスは、複数のベースモデルから第１のベースモデルを選択するためのユーザ指令を取得してもよい。プロセッサ１３０は、通信インタフェース１１０を通じて外部デバイスからユーザ指令を受信してもよい。本明細書に記載の種々の実施形態において、ユーザにデータを提供することは、演算デバイスのユーザインタフェース上、及び／又はコンピュータ可読データ構造内での表示を介したものとすることができる。

【0123】

プロセッサ１３０は、通信インタフェース１１０を制御して、第１のベースモデルと第１のデータセットを外部サーバに送信してもよい。さらに、プロセッサ１３０は、通信インタフェース１１０を制御して、第１のベースモデルの学習設定情報を外部サーバに送信してもよい。学習設定情報には、入力データのサイズ（例えば、入力データの解像度）、訓練エポック、及び訓練済モデルのデータ拡張が含まれてもよい。外部サーバは、学習設定情報に基づき、第１のデータセットを使用して第１のベースモデルを訓練することにより、第１の訓練済モデルを取得してもよい。プロセッサ１３０は、外部サーバから第１の訓練済モデルを受信してもよい。

【0124】

プロセッサ１３０は、第２のプロジェクトを実施してもよい。この場合、プロセッサ１３０は、所与のアルゴリズムに基づき、複数のベースモデルを取得してもよい。プロセッサ１３０は、通信インタフェース１１０を制御して、複数のベースモデルの情報を外部デバイスに送信してもよい。外部デバイスは、複数のベースモデルの情報をユーザに提供してもよい。外部デバイスは、複数のベースモデルから第２のベースモデルを選択するためのユーザ指令を取得してもよい。或いは、プロセッサ１３０は、ユーザによって設定された目標性能に基づき、複数のベースモデルから複数の第２のベースモデルを選択してもよい。例えば、プロセッサ１３０は、ユーザによって設定された目標正確さ範囲及び目標遅延時間範囲内の性能を有する複数の第２のベースモデルを選択してもよい。

【0125】

プロセッサ１３０は、通信インタフェース１１０を制御して、複数の第２のベースモデル、第２のデータセット、及び学習設定情報を外部サーバに送信してもよい。外部サーバは、学習設定情報に基づき、第２のデータセットを使用して複数の第２のベースモデルの各々を訓練することにより、複数の第２の訓練済モデルを取得してもよい。プロセッサ１３０は、外部サーバから複数の第２の訓練済モデルを受信してもよい。

【0126】

プロセッサ１３０は、第３のプロジェクトを実施してもよい。プロセッサ１３０は、第１のプロジェクト又は第２のプロジェクトを実施した後、第３のプロジェクトを実施してもよい。例えば、プロセッサ１３０は、第１のプロジェクトを実施した後、第３のプロジェクトを実施してもよい。プロセッサ１３０は、通信インタフェース１１０を制御して、第３のデータセット、及び第１の訓練済モデルを再訓練するための再訓練設定情報を、外部サーバに送信してもよい。外部サーバは、再訓練設定情報に基づき、第３のデータセットを使用して、第１のベースモデルを訓練することにより、第３の訓練済モデルを取得してもよい。プロセッサ１３０は、外部サーバから第３の訓練済モデルを受信してもよい。

【0127】

一方、本開示に係る人工知能（ＡＩ）に関連した機能は、プロセッサ１３０及びメモリ１２０を通じて動作される。プロセッサ１３０は、１つ又は複数のプロセッサを含んでもよい。この場合、１つ又は複数のプロセッサは、中央処理装置（ＣＰＵ）、アプリケーションプロセッサ（ＡＰ）、及びデジタル信号プロセッサ（ＤＳＰ）、グラフィックス処理装置（ＧＰＵ）等のグラフィックス専用プロセッサ、ビジョン処理装置（ＶＰＵ）、又はニューラル処理装置（ＮＰＵ）等の人工知能専用プロセッサ等の汎用プロセッサであってもよい。１つのプロセッサ又は複数のプロセッサは、メモリ１２０に記憶された所与の動作又はＡＩモデルに従って入力データを処理するように制御を行う。或いは、１つ又は複数のプロセッサは、人工知能専用プロセッサであり、人工知能専用プロセッサは、特定のＡＩモデルの処理に特化されたハードウェア構造を備えるように設計されてもよい。

【0128】

所与の動作ルール又はＡＩモデルは、訓練を通じて作成されることを特徴とする。ここで、ＡＩが所与の動作ルール又は訓練を通じて作成されるとは、所与の動作ルール又はＡＩモデルが、ベーシックＡＩモデルに学習アルゴリズムで訓練データ片を使用及び学習させることにより、所望の特性（又は目的）を実施されることを意味する。このような訓練は、本開示に係るＡＩが実施されるデバイス自体でなされてもよく、又は別のサーバ及び／又はシステムを通じてなされてもよい。学習アルゴリズムの例として、教師有り学習、教師無し学習、半教師有り学習、又は矯正学習が挙げられるが、以上の例に限定されるものでない。

【0129】

ＡＩモデルは、訓練を通じて生成されてもよい。ＡＩモデルには、複数のニューラルネットワーク層が含まれてもよい。複数のニューラルネットワーク層の各々は、複数の重量値を有し、以前の層の計算結果と複数の重量値との間の動作を通じてニューラルネットワーク動作を実施する。複数のニューラルネットワーク層の複数の重量値は、ＡＩモデルの訓練結果によって最適化されてもよい。例えば、複数の重量値は、学習プロセス中、ＡＩモデルにおいて取得された損失値又はコスト値を低減又は最少化するように更新されてもよい。

【0130】

ＡＩネットワークには、ディープニューラルネットワーク（ＤＮＮ）が含まれてもよく、人工ニューラルネットワークの例として、畳み込みニューラルネットワーク（ＣＮＮ）、ＤＮＮ、リカレントニューラルネットワーク（ＲＮＮ）、制限ボルツマンマシン（ＲＢＭ）、ディープブリーフネットワーク（ＤＢＮ）、双方向リカレントディープニューラルネットワーク（ＢＲＤＮＮ）、ディープＱ－ネットワーク等が挙げられるが、以上の例に限定されるものでない。

【0131】

図３は、本開示の一実施形態に係る第１のプロジェクトを実施する方法を説明するための図である。

【0132】

図３を参照すると、電子機器１００は、データセット３１、目標デバイスの情報３２、及びユーザによって設定された目標遅延時間３３を取得してもよい。例えば、目標デバイスの情報３２は、第１のデバイスＴ１を示してもよい。目標遅延時間３３は、５００ｍｓであってもよい。

【0133】

電子機器１００は、目標デバイスの情報３２及び目標遅延時間３３をルックアップテーブル３４と比較してもよい。ルックアップテーブル３４には、モデル名称、目標デバイスの名称、モデルに入力された画像の解像度、及びモデルが目標デバイス上で実行されるときの遅延時間が含まれてもよい。電子機器１００は、ルックアップテーブル３４を参照して、目標デバイスの情報３２に対応し、目標遅延時間３３との差が事前設定された範囲（例えば、１００ｍｓ）内であるモデルを特定する。例えば、電子機器１００は、第１のデバイスＴ１に対応する第１のモードＭ１及び第２のモードＭ２を特定してもよい。

【0134】

電子機器１００は、第１のモデルＭ１及び第２のモデルＭ２の情報を含むベースモデル一覧３５をユーザに提供してもよい。例えば、ベースモデル一覧３５は、ユーザデバイス上に表示されてもよい。ユーザは、ベースモデル一覧３５に含まれる複数のベースモデルから第１のベースモデル３６を選択してもよい。電子機器１００は、データセット３１及び第１のベースモデル３６に基づき、第１の訓練済モデル３７を取得してもよい。

【0135】

一方、図３は、３つの情報（すなわち、モデル名称、目標デバイスの名称、及びモデルに入力された画像の解像度）の各組み合わせに対する遅延時間がルックアップテーブル３４に記録されていることを示している。しかしながら、これは、単なる例であり、追加情報の組み合わせに対する遅延時間がルックアップテーブル３４に記録されてもよい。例えば、遅延時間は、これら３つの情報に加えて、バッチサイズ、フレームワーク、及びモデルのデータ種別の各組み合わせに対して記録されてもよい。

【0136】

図３において、目標遅延時間３３に基づいてベースモデル一覧３５を取得する方法を説明した。しかしながら、本開示は、これに限定されるものでなく、電子機器１００は、種々の種別の性能インジケータに基づき、ベースモデル一覧３５を取得してもよい。例えば、電子機器１００は、正確さ、電力消費、及び／又はメモリ使用に基づき、ベースモデル一覧３５を取得してもよい。

【0137】

図４は、本開示の一実施形態に係る第２のプロジェクトを実施する方法を説明するための図である。

【0138】

図４を参照すると、電子機器１００は、データセット４１、目標デバイスの情報４２、及び所与のアルゴリズム４３を取得してもよい。電子機器１００は、目標デバイスの情報４２及び所与のアルゴリズム４３に基づき、複数のベースモデルの情報を含むベースモデル一覧４４を取得してもよい。所与のアルゴリズム４３には、ハイパーパラメータ最適化アルゴリズム及びニューラルネットワークアーキテクチャ検索アルゴリズムが含まれてもよい。

【0139】

電子機器１００は、ベースモデル一覧４４をユーザに提供してもよい。例えば、ベースモデル一覧４４は、ユーザデバイス上に表示されてもよい。ユーザは、ベースモデル一覧４４から複数の第２のベースモデル４５を選択してもよい。電子機器１００は、データセット４１及び複数の第２のベースモデル４５に基づき、複数の第２の訓練済モデル４６を取得してもよい。

【0140】

一方、電子機器１００は、複数の第２のベースモデル４５を選択するためのユーザ入力を伴うことなく、複数の第２の訓練済モデル４６を取得してもよい。例えば、電子機器１００は、所定数のベースモデルを取得し、取得されたベースモデルに対応する訓練済モデルを取得してもよい。或いは、電子機器１００は、複数のベースモデル一覧４４から、性能が所定の性能範囲内にある複数の第２のベースモデル４５を特定してもよい。例えば、電子機器１００は、複数のベースモデル一覧４４から、所定の正確さ範囲及び所定の遅延時間範囲内にある複数の第２のベースモデル４５を特定してもよい。ここで、所定の数及び所定の性能範囲は、ユーザによって設定されてもよい。例えば、ユーザは、目標性能として、所定の性能範囲をユーザデバイスに入力してもよい。

【0141】

図５は、本開示の一実施形態に係る第３のプロジェクトを実施する方法を説明するための図である。

【0142】

図５を参照すると、電子機器１００は、データセット５１を取得してもよい。データセット５１は、第１のプロジェクトにおいて使用されたデータセット３１又は第２のプロジェクトにおいて使用されたデータセット４１であってもよい。或いは、データセット５１は、第１のプロジェクト又は第２のプロジェクトにおいて使用されていない新たなデータセットであってもよい。データセット５１は、データセットＤＢに記憶されてもよい。データセットＤＢは、電子機器１００のメモリ１２０内に含まれてもよい。

【0143】

電子機器１００は、ベースモデル一覧５２を取得してもよい。ベースモデル一覧５２には、以前のプロジェクトで取得されたニューラルネットワークモデルが含まれてもよい。すなわち、第３のプロジェクトにおけるベースモデルは、以前のプロジェクトで取得された訓練済モデルのうちの１つであってもよい。例えば、ベースモデル一覧５２には、第１のプロジェクトにおいて取得された第１の訓練済モデル３７と、第２のプロジェクトにおいて取得された複数の第２の訓練済モデル４６とが含まれてもよい。電子機器１００は、ベースモデル一覧５２を取得してもよい。ユーザは、ベースモデル一覧５２から第３のベースモデル５３を選択されてもよい。電子機器１００は、データセット５１及び第３のベースモデル５３に基づき、第３の訓練済モデル５４を取得してもよい。

【0144】

一方、電子機器１００は、ユーザの選択を伴うことなく、データセットＤＢからデータセット５１を取得してもよい。この場合、電子機器１００は、取得されたデータセット５１がユーザに推奨されるように、指令を外部デバイスに送信してもよい。これに応じて、外部デバイスは、電子機器１００によって取得されたデータセット５１をユーザに推奨してもよい。或いは、電子機器１００は、データセット５１に基づき、第３の訓練済モデル５４を取得してもよい。

【0145】

電子機器１００は、圧縮モデルに基づき、第３の訓練済モデル５４を取得してもよい。ここで、圧縮モデルとは、圧縮部２２２０に第１のプロジェクト、第２のプロジェクト、又は第３のプロジェクトを通じて取得された訓練済モデルを圧縮させることによって生成された軽量モデルを意味し得る。圧縮部２２２０の動作は、図２２を参照Ｓにて後述する。

【0146】

電子機器１００は、第３のベースモデル５３が圧縮モデルであるか否かに基づき、データセットＤＢからデータセット５１を取得してもよい。第３のベースモデル５３が圧縮モデルであるとき、電子機器１００は、データセット５１として、第３のベースモデル５３の訓練に使用されたデータセットを取得してもよい。例えば、第３のベースモデル５３が第１の訓練済モデル３７であるとき、電子機器１００は、データセット３１を取得してもよい。第３のベースモデル５３が圧縮モデルであるとき、モデルの正確さは、圧縮の進行中に減少し得る。電子機器１００は、第３のプロジェクトを実施することにより、第３のベースモデル５３と比較して正確さが向上した第３の訓練済モデル５４を取得してもよい。

【0147】

第３のベースモデル５３が圧縮モデルでないとき、電子機器１００は、データセット５１として、第３のベースモデル５３の訓練に使用されていないデータセットを取得してもよい。例えば、第３のベースモデル５３が第１の訓練済モデル３７であるとき、電子機器１００は、データセット３１以外のデータセットを取得してもよい。したがって、第３の訓練済モデル５４は、データセット３１のみならず、新たなデータセットも正確に推測し得る。

【0148】

図６～図９は、ユーザに提供される種々の画面である。各画面は、ユーザデバイス上に表示されてもよい。

【0149】

図６は、本開示の一実施形態に係るデータセット入力画面である。

【0150】

図６を参照すると、データセット入力画面６０は、ユーザから入力されたデータセットを受信するための画面である。データセット入力画面６０は、データセットの名称及びユーザメモを受信するための第１の領域６１を含んでもよい。データセット入力画面６０は、データセットを通じて訓練済モデルによって実施されるタスクを受信するための第２の領域６２を含んでもよい。タスクには、画像分類、対象検出、及び意味的分割が含まれてもよい。第２の領域６２は、データセットのフォーマットを受信してもよい。データセットのフォーマットは、Ｙｏｕ ｏｎｌｙ ｌｏｏｋ ｏｎｃｅ（ＹＯＬＯ）、ｖｉｓｕａｌ ｏｂｊｅｃｔ ｃｌａｓｓｅｓ（ＶＯＣ）、及びｃｏｍｍｏｎ ｏｂｊｅｃｔｓ ｉｎ ｃｏｎｔｅｘｔ（ＣＯＣＯ）のフォーマットが含まれてもよい。ユーザにタスク又はデータセットのフォーマットを入力させるためのユーザインタフェース（ＵＩ）要素は、第２の領域６２内に表示されてもよい。

【0151】

データセット入力画面６０には、データセットのアップロード経路及びデータセットのファイルを受信するための第３の領域６３が含まれてもよい。データセットのアップロード経路には、ローカルストレージ及びクラウドストレージが含まれてもよい。ユーザにデータセットのアップロード経路を選択させるためのＵＩ要素６４は、第３の領域６３内に表示されてもよい。ユーザにデータセットのファイルを選択させるためのＵＩ要素６５は、第３の領域６３内に表示されてもよい。ローカルストレージがＵＩ要素６４において選択されるとき、ＵＩ要素６５は、ファイルを受信してもよい。クラウドストレージがＵＩ要素６４において選択されるとき、ＵＩ要素６５は、リンクを受信してもよい。

【0152】

図７は、本開示の一実施形態に係るデータセット確認画面を示す図である。

【0153】

図７を参照すると、データセット確認画面７０は、ユーザによって入力されたデータセットの詳細情報を表示する画面である。データセット入力画面６０上にユーザによって入力された情報は、データセット確認画面７０上に表示されてもよい。例えば、データセット７１の名称、ユーザメモ７２、データセットを通じて訓練されるモデルによって実施されるタスク７３、データセットのフォーマット７４、データセットの総数７５、及び各種別のデータセットの数７６がデータセット確認画面７０上に表示されてもよい。

【0154】

データセットを修正するためのボタン７７、データセットを表すテーブル７８、データセットを使用してプロジェクトを生成するためのボタン７９が、データセット確認画面７０上に表示されてもよい。ユーザがボタン７９を押下すると、ユーザデバイスは、電子機器１００にプロジェクト生成指令を送信してもよい。プロジェクト生成指令が受信されると、電子機器１００は、データセットに基づき、プロジェクトを設定してもよい。

【0155】

図示はしないが、データセットに関連のプロジェクトの情報が、データセット確認画面７０上に表示されてもよい。例えば、データセットに関連のプロジェクトには、データセットを使用して取得されたプロジェクトが含まれてもよい。プロジェクトの情報には、プロジェクトを通じて取得された訓練済モデルのタスク、プロジェクトにおいて使用されたデータセットの情報、プロジェクトに対応する目標デバイスの情報、及びプロジェクトの目的が含まれてもよい。

【0156】

ユーザによって設定されたデータの入力が完了すると、データセットは、電子機器１００にアップロードされてもよい。ユーザデバイスは、入力されたデータセットとデータセットに関連する情報（例えば、データセットの名称等）を電子機器１００に送信してもよい。電子機器１００は、メモリ１２０に含まれるデータセットＤＢに、データセット及びデータセットに関連する情報を記憶してもよい。

【0157】

図８は、本開示の一実施形態に係るデータセット一覧画面である。

【0158】

図８を参照すると、データセット一覧画面８０は、データセット一覧を表示するための画面である。ユーザは、データセット一覧画面８０上でアップロードされたデータセットを確認し、データセットに基づき、プロジェクトを生成し、データセットを削除してもよい。データセット一覧は、メモリ１２０に含まれるデータセットＤＢに記憶されてもよい。

【0159】

データセットＤＢに記憶された複数のデータセット及び複数のデータセットの各々に関連の情報が、データセット一覧画面８０上に表示されてもよい。例えば、第１のデータセットに関連の情報８１が、データセット一覧画面８０上に表示されてもよい。第１のデータセットを使用して訓練されるモデルのタスク８２と、第１のデータセットに関連の情報８１に含まれる第１のデータセットのアップロード状態８３とが、表示されてもよい。アップロード状態８３に含まれるアップロード完了状態、アップロード中状態、及びエラー発生状態が表示されてもよい。

【0160】

第１のデータセットの名称８４及びデータセットの数８５が、データセット一覧画面８０上に表示されてもよい。第１のデータセットの詳細情報を表示するためのボタン８６が、データセット一覧画面８０上に表示されてもよい。例えば、ボタン８６が入力されると、第１のデータセットに対応するデータセット確認画面７０が、データセット一覧画面８０上に表示されてもよい。データセットを使用してプロジェクトを設定するためのボタン８７が、データセット一覧画面８０上に表示されてもよい。アップロードされたデータセットを削除するためのボタン８８が、データセット一覧画面８０上に表示されてもよい。

【0161】

図９は、本開示の一実施形態に係る目標デバイス入力画面である。

【0162】

図９を参照すると、目標デバイス入力画面９０は、ユーザから目標デバイスに関連する情報を受信するための画面である。目標デバイス入力画面９０には、目標デバイスの名称及びバージョンを受信するための第１の領域９１が含まれてもよい。ユーザに目標デバイスの名称及びバージョンを選択させるためのＵＩ要素が、第１の領域９１内に表示されてもよい。

【0163】

目標デバイス入力画面９０には、目標デバイスに対応するニューラルネットワークモデルを取得するための出力フォーマットを受信するための第２の領域９２が含まれてもよい。出力フォーマットには、フレームワーク及びソフトウェアバージョンが含まれてもよい。ユーザにフレームワーク及びソフトウェアバージョンの各々を選択させるＵＩ要素が、第２の領域９２内に表示されてもよい。

【0164】

目標デバイス入力画面９０には、目標デバイスに対応するニューラルネットワークモデルを取得するための出力データの種別を受信するための第３の領域９３が含まれてもよい。ユーザに出力データの種別を選択させるためのＵＩ要素が、第３の領域９３内に表示されてもよい。第２の領域９２及び／又は第３の領域９３に表示されるＵＩ要素の一部は、第１の領域９１において選択された項目に応じて、無効化されてもよい。目標デバイス入力画面９０には、目標デバイスに対応するニューラルネットワークモデルを取得するための干渉バッチのサイズを受信するための第４の領域９４が含まれてもよい。

【0165】

図示はしないが、訓練モード１３を受信するための訓練モード選択画面が、ユーザデバイス上に表示されてもよい。訓練モード選択画面には、各々、複数の訓練モードの各々に関連付けられたＵＩ要素（例えば、ボタン）が含まれてもよい。ユーザが訓練モードを選択すると、ユーザデバイスは、選択された訓練モードに関連の指令を電子機器１００に送信してもよい。電子機器１００は、選択された訓練モードに基づき、プロジェクトを設定してもよい。

【0166】

さらに、ユーザから学習リソースの選択を受信するための学習リソース選択画面が、ユーザデバイス上に表示されてもよい。学習リソースは、ベースモデルを訓練することにより、訓練済モデルを生成してもよい。例えば、学習リソースには、外部サーバが含まれてもよい。少なくとも１つの学習リソースに対応するＵＩ要素が、学習リソース選択画面上に表示されてもよい。ユーザがＵＩ要素を選択すると、ユーザデバイスは、選択されたＵＩ要素に対応する学習リソースに関連の指令を送信してもよい。電子機器１００は、学習リソースとしてベースモデルを送信してもよい。電子機器１００は、学習リソースから学習リソースによって生成された訓練済モデルを受信してもよい。

【0167】

図１０は、本開示の一実施形態に係るプロジェクト情報画面である。

【0168】

図１０を参照すると、プロジェクト情報画面１０１は、ユーザによって入力された情報に基づいて設定されたプロジェクトの情報を表示してもよい。例えば、ユーザによって選択された訓練モード１０２及びユーザによって入力されたデータセットの情報１０３が、プロジェクト情報画面１０１上に表示されてもよい。データセットの情報１０３には、プロジェクトを通じて取得される訓練済モデルによって実施されるタスク、及びデータセットの識別情報が含まれてもよい。

【0169】

図示はしないが、プロジェクト情報画面１０１には、学習設定情報を受信するための学習設定領域が含まれてもよい。学習設定情報には、訓練済モデルの目標性能、訓練済モデルの入力データサイズ（例えば、入力画像の解像度）、訓練エポック、及びデータ拡張が含まれてもよい。

【0170】

図１１は、本開示の一実施形態に係る電子機器の制御方法を説明するための図である。

【0171】

図１１を参照すると、電子機器１００は、ニューラルネットワークモデルを訓練するためのデータセット、ニューラルネットワークモデルを実行するための目標デバイスの情報、及びニューラルネットワークモデルのための訓練モードを受信してもよい（Ｓ１１１０）。電子機器１００は、ニューラルネットワークモデルを訓練するためのデータセット、ニューラルネットワークモデルを実行するための目標デバイスの情報、及びニューラルネットワークモデルのための訓練モードを、ユーザデバイスから受信してもよい。

【0172】

電子機器１００は、データセット、目標デバイスの情報、及び訓練モードに基づき、プロジェクトを設定してもよい（Ｓ１１２０）。電子機器１００は、データセット、目標デバイスの情報、及び訓練モードに基づき、プロジェクトを設定してもよい。プロジェクトは、訓練モードに応じて分類されてもよい。例えば、第１の訓練モードによって設定されるプロジェクトは、第１のプロジェクトとして分類されてもよく、第２の訓練モードによって設定されるプロジェクトは、第２のプロジェクトとして分類されてもよい、第３の訓練モードによって設定されるプロジェクトは、第３のプロジェクトとして分類されてもよい。

【0173】

電子機器１００は、プロジェクトを実施することにより、少なくとも１つの訓練済ニューラルネットワークモデルを導出してもよい（Ｓ１１３０）。導出されたモデルは、目標デバイスに合わせて最適化されたモデルであってもよい。以降、プロジェクトを実施する方法についてさらに詳細に説明する。

【0174】

図１２は、本開示の一実施形態に係る第１のプロジェクトを実施する方法を示すシークエンス図である。

【0175】

図１２を参照すると、ニューラルネットワークモデルを提供するためのシステム１０００は、電子機器１００、外部デバイス２００、及び外部サーバ３００を備えてもよい。外部デバイス２００は、ユーザと相互作用するユーザデバイスであってもよい。外部サーバ３００は、データセットに基づき、訓練済モデルを生成する学習サーバであってもよい。

【0176】

外部デバイス２００は、第１のデータセット、第１の目標デバイスの情報、及び第１の訓練モードを受信してもよい（Ｓ１２１０）。外部デバイス２００は、第１のデータセット、第１の目標デバイスの情報、第１の訓練モードを電子機器１００に送信してもよい（Ｓ１２１５）。本開示において、訓練モードを送信する動作は、訓練モードを示す情報を送信する動作を意味する。

【0177】

電子機器１００は、第１のデータセット、第１の目標デバイスの情報、及び第１の訓練モードに基づき、第１のプロジェクトを設定してもよい（Ｓ１２２０）。電子機器１００は、設定された第１のプロジェクトを実施してもよい（Ｓ１２３０）。以降、第１のプロジェクトを実施する動作（Ｓ１２３０）について、さらに詳細に説明する。

【0178】

電子機器１００は、ユーザによって入力された第１の目標デバイスの情報と目標性能とに基づき、複数のベースモデルを導出してもよい（Ｓ１２３１）。例えば、電子機器１００は、複数のニューラルネットワークモデル、及び複数のニューラルネットワークモデルの各々の情報を含むルックアップテーブルを記憶してもよい。電子機器１００は、ルックアップテーブルを使用して、複数のニューラルネットワークモデルから、目標デバイスと対応し、目標性能との性能の差が事前設定された範囲内であるニューラルネットワークモデルをベースモデルとして特定してもよい。

【0179】

電子機器１００は、外部デバイス２００に複数のベースモデルの情報を送信してもよい（Ｓ１２３２）。この場合、電子機器１００は、複数のベースモデルの情報を表示するための指令を外部デバイス２００に送信してもよい。

【0180】

外部デバイス２００は、複数のベースモデルの情報を出力してもよい（Ｓ１２３３）。例えば、外部デバイス２００は、複数のベースモデルの各々の情報を表示してもよい。この目的を達成するために、外部デバイス２００は、ディスプレイ及びスピーカを含む種々の出力部を備えてもよい。

【0181】

外部デバイス２００は、複数のベースモデルから第１のベースモデルを選択するためのユーザ指令を受信してもよい（Ｓ１２３４）。外部デバイス２００は、第１のベースモデルの情報を電子機器１００に送信してもよい（Ｓ１２３５）。

【0182】

電子機器１００は、第１のデータセット及び第１のベースモデルを外部サーバ３００に送信してもよい（Ｓ１２３６）。外部サーバ３００は、ユーザによって選択されてもよい。例えば、外部デバイス２００は、複数の外部サーバを表示し、複数の外部サーバのうちの１つを選択するためのユーザ入力を取得してもよい。ユーザが外部サーバ３００を選択する動作は、第１のプロジェクトを実施する動作（Ｓ１２３０）の前、又は第１のプロジェクトを実施する動作（Ｓ１２３０）中に、実施されてもよい。

【0183】

外部サーバ３００は、第１のデータセットに基づき、第１のベースモデルを訓練することにより、第１の訓練済モデルを導出してもよい（Ｓ１２３７）。外部サーバ３００は、第１の訓練済モデルを電子機器１００に送信してもよい（Ｓ１２３８）。一方、他の実施形態において、第１の訓練済モデルは、電子機器１００によって生成されてもよい。すなわち、電子機器１００は、外部サーバ３００の機能を実施してもよい。この場合、動作Ｓ１２３７及びＳ１２３８は、省略されてもよい。

【0184】

電子機器１００は、第１の訓練済モデルの情報を外部デバイス２００に送信してもよい（Ｓ１２３９）。外部デバイス２００は、第１の訓練済モデルの情報をユーザに提供してもよい。例えば、第１の訓練済モデルの情報には、第１の訓練済モデルの性能情報、第１の訓練済モデルのダウンロードファイル、ダウンロードリンクが含まれてもよい。

【0185】

図１３は、本開示の一実施形態に係る第２のプロジェクトを実施する方法を示すシーケンス図である。

【0186】

図１３を参照すると、外部デバイス２００は、第２のデータセット、第２の目標デバイスの情報、及び第２の訓練モードを受信してもよい（Ｓ１３１０）、取得された第２のデータセット、第２の目標デバイスの情報、及び第２の訓練データを電子機器１００に送信してもよい（Ｓ１３１５）。電子機器１００は、第２のデータセット、第２の目標デバイスの情報、及び第２の訓練モードに基づき、第２のプロジェクトを設定してもよい（Ｓ１３２０）。電子機器１００は、第２のプロジェクトを実施してもよい（Ｓ１３３０）。以降、第２のプロジェクトを実施する動作（Ｓ１３３０）について、さらに詳細に説明する。

【0187】

電子機器１００は、第２の目標デバイスの情報及び所定のアルゴリズムに基づき、複数のベースモデルを生成してもよい（Ｓ１３３１）。所与のアルゴリズムには、ハイパーパラメータ最適化アルゴリズム又はニューラルネットワークアーキテクチャ検索アルゴリズムの少なくとも一方が含まれてもよい。ハイパーパラメータ最適化アルゴリズムには、ハイパーパラメータ最適化（ＨＰＯ）が含まれてもよい。ＨＰＯは、所与のハイパーパラメータ検索空間内に最適ハイパーパラメータを見つけるためのアルゴリズムであってもよい。例えば、ＨＰＯは、ニューラルネットワークモデルのいくつかの層を変更することによっていくつかのベースモデルを生成し、各ベースモデルの性能を評価しつつ、良好な性能のベースモデルを検索することができる。ＨＰＯは、ハイパーバンド及びベイズ最適化等のアルゴリズムを利用してもよい。

【0188】

電子機器１００は、複数のベースモデルの情報を外部デバイス２００に送信してもよい（Ｓ１３３２）。外部デバイス２００は、複数のベースモデルの情報を出力してもよい（Ｓ１３３３）。外部デバイス２００は、複数のベースモデルから少なくとも１つのベースモデルを選択するためのユーザ指令を受信してもよい（１３３４）。例えば、外部デバイス２００は、複数のベースモデルを選択するためのユーザ指令を取得してもよい。外部デバイス２００は、少なくとも１つのベースモデルの情報を電子機器１００に送信してもよい（Ｓ１３３５）。電子機器２００は、第２のデータセット及び少なくとも１つのベースモデルを外部サーバ３００に送信してもよい（Ｓ１３３６）。

【0189】

外部サーバ３００は、第２のデータセットに基づき、少なくとも１つのベースモデルを訓練することにより、少なくとも１つの第２の訓練済モデルを導出してもよい（Ｓ１３３７）。外部サーバ３００は、少なくとも１つの第２の訓練済モデルを電子機器１００に送信してもよい（Ｓ１３３８）。電子機器１００は、少なくとも１つの第２の訓練済モデルの情報を外部デバイス２００に送信してもよい。

【0190】

一方、他の実施形態において、電子機器１００は、ベースモデルを選択するためのユーザ指令を伴うことなく、少なくとも１つの第２の訓練済モデルを取得してもよい。例えば、電子機器１００は、複数のベースモデルを生成してもよく、複数のベースモデルの各々が訓練された、複数の第２の訓練済モデルを取得してもよい。すなわち、電子機器１００は、第２のデータセット及び複数のベースモデルを外部サーバ３００に送信してもよく、複数の第２の訓練済モデルを外部サーバ３００から受信してもよい。この場合、動作Ｓ１３３２、Ｓ１３３３、Ｓ１３３４、及びＳ１３３５が省略されてもよい。

【0191】

図１４は、本開示の実施形態に係る第３のプロジェクトを実施する方法を示すシーケンス図である。

【0192】

図１４を参照すると、外部デバイス２００は、第３のデータセット、第３の目標デバイスの情報、及び第３の訓練モードを受信してもよく（Ｓ１４１０）、取得された第３のデータセット、第３の目標デバイスの情報、及び第３の訓練モードを電子機器１００に送信してもよい（Ｓ１４１５）。電子機器１００は、第３のデータセット、第３の目標デバイスの情報、及び第３の訓練モードに基づき、第３のプロジェクトを設定してもよい（Ｓ１４２０）。他の実施形態において、第３の目標デバイスの情報を導出し、取得した情報を電子機器１００に送信する動作は、省略されてもよい。例えば、第３の訓練モードがユーザによって選択されると、電子機器１００は、プロジェクトＤＢから、第３のプロジェクト前に実施されるプロジェクトに対応する目標デバイスの情報を取得してもよい。例えば、電子機器１００が第１のプロジェクトを実施した後に第３のプロジェクトを実施するとき、電子機器１００は、第１のプロジェクトにおいて使用された第１の目標デバイスの情報を取得してもよい。

【0193】

電子機器１００は、第３のデータセット、第３の目標デバイスの情報、及び第３の訓練モードに基づき、第３のプロジェクトを設定してもよい（Ｓ１４２０）。電子機器１００は、第３のプロジェクトを実施してもよい（Ｓ１４３０）。以降、第３のプロジェクトを実施する動作（Ｓ１４３０）について、さらに詳細に説明する。

【0194】

電子機器１００は、訓練済モデル一覧を取得してもよい（Ｓ１４３１）。例えば、電子機器１００は、モデルＤＢから訓練済モデル一覧を取得してもよい。訓練済モデル一覧には、モデルＤＢに記憶された複数の訓練済モデルの情報が含まれてもよい。

【0195】

電子機器１００は、外部デバイス２００に訓練済モデル一覧を送信してもよい（Ｓ１４３２）。外部デバイス２００は、訓練済モデル一覧を出力してもよい（Ｓ１４３３）。他の実施形態において、動作Ｓ１４３１及びＳ１４３２は、省略されてもよい。例えば、訓練済モデル一覧は、外部デバイス２００に記憶されてもよい。

【0196】

外部デバイス２００は、訓練済モデル一覧から１つの訓練済モデルを選択するためのユーザ指令を受信してもよい（Ｓ１４３４）。外部デバイス２００は、選択された訓練済モデルの情報を電子機器１００に送信してもよい（Ｓ１４３５）。電子機器１００は、第３のデータセット及び選択された訓練済モデルを外部サーバ３００に送信してもよい（Ｓ１４３６）。外部サーバ３００は、第３のデータセットに基づき、選択された訓練済モデルを訓練することにより、第３の訓練済モデルを導出してもよい（Ｓ１４３７）。すなわち、第３のプロジェクトにおいて、ベースモデルは、第１のプロジェクト又は第２のプロジェクトを通じて生成された訓練済モデルであってもよい。さらに、第３のプロジェクトのベースモデルには、第１のプロジェクト又は第２のプロジェクトを通じて生成された訓練済モデルに基づく、再訓練済モデル（すなわち、他の第３のプロジェクトを通じて取得されたモデル）が含まれてもよい。

【0197】

外部サーバ３００は、第３の訓練済モデルを送信してもよい（Ｓ１４３８）。電子機器１００は、第３の訓練済モデルの情報を外部デバイス２００に送信してもよい（Ｓ１４３９）。

【0198】

図１５は、本開示の一実施形態に係るニューラルネットワークモデルを提供するためのシステムの構成を示すブロック図である。

【0199】

図１５を参照すると、ニューラルネットワークモデルを提供するためのシステム１０００は、電子機器１００、外部デバイス２００、及び外部サーバ３００を備えてもよい。電子機器１００は、通信及び／又はデータネットワークを介して外部デバイス２００を通じて取得されたユーザ入力に基づき、ニューラルネットワークモデルの情報を取得してもよい。電子機器１００は、ネットワークを介して外部デバイス２００にニューラルネットワークモデルの情報を送信してもよい。外部デバイス２００は、ネットワークを介して電子機器１００から受信したニューラルネットワークモデルの情報をユーザに提供してもよい。

【0200】

メモリ１２０は、複数のニューラルネットワークモデルの情報を記憶してもよい。複数のニューラルネットワークモデルの情報には、複数のニューラルネットワークモデルの識別情報、複数のニューラルネットワークモデルが実行される複数のデバイスの情報、複数のニューラルネットワークモデルが複数のデバイスにおいて実行されるときの複数のニューラルネットワークモデルの性能情報、及び複数のニューラルネットワークモデルの入力データサイズが含まれてもよい。各情報は、互いに照合されてもよく、ルックアップテーブルの形態で記憶されてもよい。

【0201】

プロセッサ１３０は、ニューラルネットワークモデルを実行する目標デバイスの情報、及びニューラルネットワークモデルが目標デバイスにおいて実行されるときのニューラルネットワークモデルの目標性能を取得してもよい。目標性能には、目標の正確さ、目標遅延時間、又は目標演算量のうちの少なくとも１つが含まれてもよい。プロセッサ１３０は、通信インタフェース１１０を通じて外部デバイスから、目標デバイスの情報及びニューラルネットワークモデルのも目標性能を受信してもよい。外部デバイス２００は、入力部２４０を通じて、目標デバイスの情報を入力するためのユーザ指令、及びニューラルネットワークモデルの目標性能を取得してもよい。

【0202】

プロセッサ１３０は、目標デバイスの情報及び目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出してもよい。複数の候補ニューラルネットワークモデルの情報には、複数の候補ニューラルネットワークモデルの名称、複数の候補ニューラルネットワークモデルの性能、複数の候補ニューラルネットワークモデルの入力データのサイズのうちの少なくとも１つが含まれてもよい。

【0203】

プロセッサ１３０は、複数の候補ニューラルネットワークモデルの情報をメモリ１２０から取得してもよい。プロセッサ１３０は、目標デバイスの情報及び目標性能を、メモリ１２０に記憶された複数のニューラルネットワークモデルの情報と比較することにより、複数のニューラルネットワークモデルのうちから、複数の候補ニューラルネットワークモデルを特定してもよい。プロセッサ１３０は、メモリ１２０から複数の特定された候補ニューラルネットワークモデルの情報を取得してもよい。

【0204】

プロセッサ１３０は、複数の候補ニューラルネットワークモデルとして、メモリ１２０に記憶された複数のニューラルネットワークモデルのうちから、目標性能との性の差に基づく各ランキングが事前設定されたランキング以上であるニューラルネットワークモデルを特定してもよい。事前設定されたランキングは、第５であってもよい。目標性能との性能の差が小さいニューラルネットワークモデルが、より高いランクを有し得る。例えば、複数のニューラルネットワークモデルには、第１～第１０のニューラルネットワークモデルが含まれてもよい。これらのうち、第１～第１０のニューラルネットワークモデルの各々は、第１～第５にランキングされてもよい。この場合、プロセッサ１３０は、第１～第５のニューラルネットワークモデルを複数の候補ニューラルネットワークモデルとして特定してもよい。

【0205】

プロセッサ１３０は、複数のニューラルネットワークモデルのうち、目標性能との差が事前設定された範囲内のニューラルネットワークモデルを、複数の候補ニューラルネットワークモデルとして特定してもよい。例えば、目標性能は、目標遅延時間であり、事前設定された範囲は、１００ｍｓであってもよい。

【0206】

プロセッサ１３０は、通信インタフェース１１０を制御して、目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を表示するように、外部デバイス２００に指令を送信してもよい。外部デバイス２００は、送信された指令に基づき、複数の候補ニューラルネットワークモデルの情報を表示してもよい。本開示中に別段の指摘のない限り、プロセッサ１３０が外部デバイス２００に指令を送信するということは、プロセッサ１３０が通信インタフェース１１０を制御して外部デバイス２００に指令を送信することを意味する。一方、具体的に指摘のない限り、電子機器１００が外部デバイス２００に表示指令を送信するとき、外部装置２００が表示指令に対応する情報を表示するのは明らかである。

【0207】

プロセッサ１３０は、対応する候補ニューラルネットワークモデルの性能と目標性能との間の差の逆の順に、複数の候補ニューラルネットワークモデルの情報を各々表す複数のＵＩ要素を表示するために、外部デバイス２００に指令を送信してもよい。複数のＵＩは各々、カーソルが複数のＵＩ要素の各々の上に配置されるとき、複数の候補ニューラルネットワークモデルの１つの情報を表示してもよい。

【0208】

複数の候補ニューラルネットワークモデルには、第１の種別の複数の第１の候補ニューラルネットワークモデルと、第２の種別の複数の第２の候補ニューラルネットワークモデルが含まれてもよい。第１の候補ニューラルネットワークモデルは、ユーザによって設定されたプロジェクト情報に基づいて取得されたモデルであってもよい。プロジェクト情報には、プロジェクトを規定する種々の情報（例えば、プロジェクトを通じて生成されたニューラルネットワークモデルの入力データサイズ）が含まれてもよい。例えば、第１の候補ニューラルネットワークモデルは、ユーザによって設定された入力データと同一の入力データサイズを有するモデルであってもよい。第２の候補ニューラルネットワークモデルは、ユーザによって設定されたプロジェクト情報から部分的に修正されたプロジェクト情報に基づいて取得されたモデルであってもよい。例えば、第２の候補ニューラルネットワークモデルは、ユーザによって設定された入力データサイズとは異なる入力データサイズを有してもよく、ユーザによって設定された目標性能から事前設定された範囲内の性能を有してもよい。

【0209】

複数のＵＩ要素には、各々、複数の第１の候補ニューラルネットワークモデルのうちの各々に関連付けられた複数の第１のＵＩ要素と、各々、複数の第２の候補ニューラルネットワークモデルのうちのの各々に関連付けられた複数の第２のＵＩ要素とが含まれてもよい。プロセッサ１３０は、複数の第１のＵＩ要素及び複数の第２のＵＩ尾要素を異なる領域に同時に表示するために、外部デバイス２００に指令を送信してもよい。これに応じて、外部デバイス２００は、複数の第１のＵＩ要素及び複数の第２のＵＩ要素を異なる領域に同時に表示してもよい。

【0210】

プロセッサ１３０は、２次元グラフ上に複数の候補ニューラルネットワークモデルのうちの１つの情報を各々示す複数のＵＩ要素を表示するために、外部デバイス２００に指令を送信してもよい。２次元グラフは、第１の性能パラメータに対応する第１の軸と、第２の性能パラメータに対応する第２の軸とによって規定されてもよい。例えば、第１の性能パラメータは、遅延時間関連パラメータであってもよく、第２の性能パラメータは、正確さ関連パラメータであってもよい。

【0211】

複数のＵＩ要素には、各々、複数のＵＩ要素のうちの各１つに関連付けられた候補ニューラルネットワークモデルの性能が目標性能に対応する第３のＵＩ要素と、対応する候補ニューラルネットワークモデルの性能が目標性能に対応しない第４のＵＩ要素とが含まれる。プロセッサ１３０は、第３のＵＩ要素を有効化し、第４のＵＩ要素を無効化するために、外部デバイス２００に指令を送信してもよい。

【0212】

外部デバイス２００は、パーソナルコンピュータ（ＰＣ）として実装されてもよい。外部デバイス２００は、通信インタフェース２１０、メモリ２２０、プロセッサ２３０、入力部２４０、及びディスプレイ２５０を備えてもよい。

【0213】

プロセッサ２３０は、通信インタフェース２１０を制御することにより、入力部２４０を通じて取得されたユーザ指令を電子機器１００に送信してもよい。例えば、プロセッサ２３０は、通信インタフェース２１０を制御して、複数の候補ニューラルネットワークモデルのうちの１つを選択するためのユーザ指令を電子機器１００に送信してもよい。

【0214】

入力部２４０は、外部デバイス２００の動作に関連の種々のユーザ指令を受信するように構成される。入力部２４０は、外部デバイス２００に接続されたキーボード又はマウス等の外部入力手段から種々の入力信号を受信する入力／出力インタフェースとして実装されてもよい。或いは、入力部２４０は、ディスプレイ２５０上のタッチスクリーンとして実装されてもよい。

【0215】

ディスプレイ２５０は、プロセッサ２３０の制御に応じて、種々の種別の情報を表示してもよい。例えば、ディスプレイ２５０は、複数の候補ニューラルネットワークモデルの情報を表示してもよい。

【0216】

図１６は、本開示の一実施形態に係る学習設定画面を示す図である。

【0217】

図１６を参照すると、学習設定画面１６００は、ユーザから学習設定情報を受信するための画面であり、外部デバイス２００上に表示されてもよい。学習設定情報には、入力データサイズ（例えば、入力画像の解像度）、訓練エポック、及び訓練済モデルのデータ拡張が含まれてもよい。

【0218】

学習設定画面１６００は、目標性能（例えば、遅延時間）を受信するための第１の領域１６１０を含んでもよい。第１の領域１６１０は、単一の値又は範囲の値（例えば、４００～５００）を受信してもよい。学習設定画面１６００には、ニューラルネットワークモデルの入力データサイズを受信するための第２の領域１６２０と、データ拡張及び訓練エポックを実施すべきか否かを受信するための第３の領域１６３０が含まれてもよい。

【0219】

各領域１６１０、１６２０、及び１６３０に対するユーザ入力が取得されると、外部デバイス２００は、ユーザ入力に関連の情報を電子機器１００に送信してもよい。電子機器１００は、ユーザによって入力された性能及び入力データサイズに基づいて、複数の候補ニューラルネットワークモデルを取得し、取得されたニューラルネットワークモデルを外部デバイス２００に送信してもよい。

【0220】

一方、ユーザによって入力されたデータセットのサイズは、設定された入力データのサイズとは異なり得る。例えば、ユーザによって入力されたデータセットは、第１の解像度の画像セットであってもよく、設定された入力データのサイズは、第１の解像度とは異なる第２の解像度であってもよい。この場合、電子機器１００は、ユーザによって入力されたデータセットのサイズを設定された入力データのサイズに変換してもよい。例えば、電子機器１００は、第１の解像度の画像セットから第２の解像度の画像セットを取得してもよい。

【0221】

図１７は、本開示の一実施形態に係るベースモデル推奨画面である。

【0222】

図１７を参照すると、ベースモデル推奨画面１７００は、ユーザに複数の候補ニューラルネットワークモデルを推奨する画面であり、外部デバイス２００に表示されてもよい。ユーザは、複数の候補ニューラルネットワークモデルからベースモデルを選択してもよい。ニューラルネットワークモデルを提供するためのシステム１０００は、ユーザによって選択されたベースモデルに基づき、訓練済モデルを生成し、生成された訓練済モデルをユーザに提供してもよい。

【0223】

各々、複数の候補ニューラルネットワークモデルのうちの１つの情報を表す複数のＵＩ要素１７１１、１７１２、１７１３、１７１４、１７１５、１７２１、１７２２、１７２３、１７２４、及び１７２５が、ベースモデル推奨画面１７００上に表示されてもよい。各ＵＩ要素は、対応する候補ニューラルネットワークモデルの情報を表してもよい。例えば、候補ニューラルネットワークモデルの情報には、候補ニューラルネットワークの名称、サイズ、遅延時間、及び入力データサイズが含まれてもよい。

【0224】

複数のＵＩ要素１７１１、１７１２、１７１３、１７１４、１７１５、１７２１、１７２２、１７２３、１７２４、及び１７２５は、ユーザによって入力された目標性能及びニューラルネットワークモデルの入力データのサイズに基づき、表示されてもよい。例えば、目標遅延時間は、１００ｍｓであってもよく、入力データのサイズは、４８０×４８０ｐｘであってもよい。

【0225】

複数のＵＩ要素１７１１、１７１２、１７１３、１７１４、１７１５、１７２１、１７２２、１７２３、１７２４、及び１７２５は、対応する遅延時間と目標遅延時間との間の差の逆の順に表示されてもよい。例えば、第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５に対応する遅延時間は、各々、９８ｍｓ、１０２ｍｓ、１１６ｍｓ、１２０ｍｓ、及び１４３ｍｓであってもよい。第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５は、第１の方向ｄ１に連続的に表示されてもよい。同様に、第２のＵＩ要素１７２１、１７２２、１７２３、１７２４、及び１７２５は、第１の方向ｄ１に連続的に表示されてもよい。

【0226】

一方、複数のＵＩ要素１７１１、１７１２，１７１３、１７１４、１７１５、１７２１，１７２２、１７２３、１７２４、及び１７２５は、対応する遅延時間がユーザによって設定された入力データのサイズと同一である第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５と、対応する遅延時間がユーザによって設定された入力データのサイズとは異なる第２のＵＩ要素１７２１、１７２２、１７２３、１７２４、及び１７２５に分割されてもよい。第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５並びに第２のＵＩ要素１７２１、１７２２、１７２３、１７２４、及び１７２５は、異なる領域に表示されてもよい。例えば、第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５は、第１の領域１７１０に表示されてもよい、第２のＵＩ要素１７２１、１７２２、１７２３、１７２４、及び１７２５は、第２の領域１７２０に表示されてもよい。第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５並びに第２のＵＩ要素１７２１、１７２２、１７２３、１７２４及び１７２５は、同時に表示されてもよい。第１の領域１７１０及び第２の領域１７２０は、第１の方向ｄ１に直交する方向に位置決めされてもよい。

【0227】

図１７において、入力データのサイズに基づいて取得されたベースモデルに対応する第１のＵＩ要素１７１１、１７１２、１７１３、１７１４、及び１７１５は、第１のエリア１７１０に表示される。また遅延時間に基づいて取得されたベースモデルに対応する第２のＵＩ要素１７２１、１７２２、１７２３、１７２４、及び１７２５は、第２のエリア１７２０に表示される。しかしながら、これは一実施形態であり、各エリアに表示されるＵＩ要素に対応するベースモデルは、ニューラルネットワークモデルに関連する種々の特性に基づいて選択されてもよい。さらに、ユーザによって設定された入力データと同一のサイズを有するＵＩ要素もまた、第２のエリア１７２０に表示されてもよい。

【0228】

候補ニューラルネットワークモデルについての情報を表示する方法は、訓練モードに応じて変動し得る。例えば、ベースモデル推奨画面１７００は、第１の訓練モードで候補ニューラルネットワークモデルの情報を表示する方法を示し得る。図１８及び図１９は、第２の訓練モードで候補ニューラルネットワークモデルについての情報を表示する方法を示し得る。

【0229】

図１８は、本開示の一実施形態に係るニューラルネットワークモデルの情報を表示する方法を説明するための図である。

【0230】

図１８を参照すると、外部デバイス２００は、各々、複数のニューラルネットワークモデルのうちの各々に関連付けられた複数のＵＩ要素１８１０、１８２０、１８３０、１８４０、１８５０、及び１８６０を表示してもよい。外部デバイス２００は、２次元グラフ上に複数のＵＩ要素１８１０、１８２０、１８３０、１８４０、１８５０、及び１８６０を表示してもよい。２次元グラフは、遅延時間に対応する第１の軸と、正確さに対応する第２の軸とによって規定されてもよい。第２の軸は、平均精度（ｍＡＰ）に対応してもよい。

【0231】

ＵＩ要素がユーザによって選択されると、外部デバイス２００は、選択されたＵＩ要素に対応するニューラルネットワークモデルの情報を表示してもよい。ユーザの選択は、カーソルＣ又はＵＩ要素を配置することにより、又はＵＩ要素を選択する動作（例えば、クリック）によって行われてもよい。例えば、カーソルＣが第１のＵＩ要素１８１０上に配置されると、外部デバイス２００は、第１のＵＩ要素１８１０に対応する第１のニューラルネットワークモデル上に情報１８１１を表示してもよい。

【0232】

複数のニューラルネットワークモデルは、ベースモデルであってもよい。例えば、複数のニューラルネットワークモデルは、電子機器２００に第２のプロジェクトを実施させることによって生成されたベースモデルであってもよい。或いは、複数のニューラルネットワークモデルは、電子機器２００に第１のプロジェクトを実施させることによって取得されたベースモデルであってもよい。

【0233】

複数のニューラルネットワークモデルは、訓練済ニューラルネットワークモデルであってもよい。例えば、或いは、複数のニューラルネットワークモデルは、電子機器２００に第３のプロジェクトを実施させることによって取得されたベースモデルであってもよい。

【0234】

図１９は、本開示の一実施形態に係るニューラルネットワークモデルの情報を表示する方法を説明するための図である。

【0235】

図１９を参照すると、外部デバイス２００は、各々、関心対象領域（ＲＯＩ）に基づき、複数のニューラルネットワークモデルのうちの各々に関連付けられたＵＩ要素１９１０、１９２０、１９３０、１９４０、１９５０、及び１９６０を表示してもよい。外部デバイス２００は、ユーザによって設定された目標性能に基づき、ＲＯＩを規定してもよい。外部デバイス２００は、ユーザによって設定された目標遅延時間及び目標の正確さに基づき、ＲＯＩを判定してもよい。

【0236】

外部デバイス２００は、ＲＯＩとして、ユーザにより設定された目標遅延時間から事前設定された時間範囲によって規定される領域と、ユーザによって設定された目標の正確さから事前設定された正確さ範囲と、を判定してもよい。例えば、ユーザによって設定された目標遅延時間は、０．２秒であってもよく、事前設定された時間範囲は、－０．０５秒～＋０．０５秒であってもよい。さらに、ユーザによって設定された目標の正確さは、０．０３であってもよく、事前設定された正確さ範囲は、－０．０２５～０．０３５であってもよい。この場合、外部デバイス２００は、図１９のＲＯＩを規定してもよい。

【0237】

一方、ユーザによって設定された目標性能は、範囲値であってもよい。この場合、外部デバイス２００は、ユーザによって設定された目標性能を拡張することなく、ＲＯＩを規定してもよい。例えば、ユーザは、目標遅延時間を０．１５秒～０．２５秒に設定し、目標の正確さを０．０２５～０．０３５に設定してもよい。この場合、外部デバイス２００は、ユーザによって設定された目標性能をそのまま反映させることにより、図１９のＲＯＩを規定してもよい。

【0238】

図１９は、ＲＯＩが２つの軸によって規定されることを示すが、これは単なる例であり、ＲＯＩは、単一の軸に基づいて規定されてもよい。例えば、ＲＯＩは、目標遅延時間に基づいて規定されてもよい。外部デバイス２００は、ＲＯＩとして目標遅延時間から事前設定された時間範囲を規定してもよい、

【0239】

ＵＩ要素１９１０、１９２０、１９３０、１９４０、１９５０、及び１９６０のうち、外部デバイス２００は、区別のため、ＲＯＩに含まれるＵＩ要素１９１０及び１９２０と、ＲＯＩに含まれないＵＩ要素１９３０、１９４０、１９５０、及び１９６０を表示してもよい。例えば、外部デバイス２００は、ＵＩ要素１９１０及び１９２０の視覚的特性（例えば、形状、色等）を、ＵＩ要素１９３０、１９４０、１９５０、及び１９６０とは異なって表示してもよい。ここで、ＵＩ要素１９１０及び１９２０は、ニューラルネットワークモデルの目標性能から事前設定された範囲内の性能を有する候補ニューラルネットワークモデルに対応してもよい。ＵＩ要素１９３０、１９４０、１９５０、及び１９６０は、ニューラルネットワークモデルの目標性能から事前設定された範囲外に性能を有する候補ニューラルネットワークモデルに対応し得る。

【0240】

外部デバイス２００は、ＲＯＩに含まれるＵＩ要素１９１０及び１９２０を有効化してもよい。これに応じて、ＵＩ要素１９１０又は１９２０のうちの少なくとも一方が選択されるとき、外部デバイス２００は、少なくとも１つの選択されたＵＩ要素に対応するニューラルネットワークモデルの情報を表示してもよい。例えば、第１のＵＩ要素１９１０が選択されるとき、外部デバイス２００は、第１のＵＩ要素１９１０に対応する第１のニューラルネットワークモデルの情報を表示してもよい。

【0241】

外部デバイス２００は、ＲＯＩに含まれないＵＩ要素１９３０、１９４０、１９５０、及び１９６０を無効化してもよい。これに応じて、ＵＩ要素１９３０、１９４０、１９５０、及び１９６０は、選択不能となってもよい。

【0242】

一方、ニューラルネットワークモデルについての情報を表示する方法は、訓練モードに応じて変動し得る。例えば、訓練モードが第１の訓練モードとして設定されるとき、ニューラルネットワークモデルの情報は、図１７に示されるとおり、表示されてもよい。訓練モードが第２の学習モードとして設定されるとき、ニューラルネットワークモデルの情報は、図１８及び図１９に示されるとおり、表示されてもよい。

【0243】

図２０は、本開示の一実施形態に係るニューラルネットワークモデルの性能を導出する方法を説明するための図である。

【0244】

図２０を参照すると、電子機器１００は、デバイスファーム２０１０を使用してニューラルネットワークモデル２０３０の性能を取得してもよい。ニューラルネットワークモデル２０３０は、ベースモデル又は訓練済モデルであってもよい。デバイスファーム２０１０には、種々のデバイスに関連の情報が含まれてもよい。電子機器１００は、ユーザによって入力された目標デバイスの情報に基づき、デバイスファーム２０１０において目標デバイス２０２０を特定してもよい。電子機器１００は、目標デバイス２０２０においてニューラルネットワークモデル２０３０を実行することにより、ニューラルネットワークモデル２０３０の性能を測定してもよい。デバイスファーム２０１０は、電子機器１００に含まれるＤＢとして実装されてもよい。

【0245】

電子機器１００は、デバイスファーム２０１０を使用して取得されたニューラルネットワークモデル２０３０の性能に基づき、ルックアップテーブルを生成してもよい。上述のとおり、ルックアップテーブルには、複数のニューラルネットワークモデルの性能を含む複数のニューラルネットワークモデルの情報が含まれてもよい。

【0246】

電子機器１００は、ニューラルネットワークモデル２０３０の性能に基づき、ニューラルネットワークモデル２０３０を圧縮してもよい。例えば、電子機器１００は、ニューラルネットワークモデル２０３０の遅延時間に基づき、ニューラルネットワークモデル２０３０の圧縮のための設定値を取得してもよい。

【0247】

図２１は、本開示の一実施形態に係る電子機器を制御する方法を説明するための図である。

【0248】

図２１を参照すると、電子機器１００は、ニューラルネットワークモデルが実行される目標デバイスの情報を外部デバイスから受信し、ニューラルネットワークモデルが目標デバイスにおいて実行されるときのニューラルネットワークモデルの目標性能を受信してもよい（Ｓ２１１０）。目標性能には、目標遅延時間及び目標の正確さが含まれてもよい。

【0249】

電子機器１００は、目標デバイスの情報及び目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出してもよい（Ｓ２１２０）。候補ニューラルネットワークモデルは、ベースモデル又は訓練済モデルであってもよい。例えば、電子機器１００は、プロジェクトを実施することによって候補ニューラルネットワークモデルを取得してもよい。

【0250】

電子機器１００は、目標性能に基づいて、複数の候補ニューラルネットワークモデルの情報を表示するために、外部デバイスの指令を送信してもよい（Ｓ２１３０）。電子機器１００によって送信された指令に基づいて複数の候補ニューラルネットワークモデルの情報を表示する方法は、図１７～図１９を参照して明確に理解され得る。

【0251】

図２２は、本開示の一実施形態に係る電子機器の動作を説明するための図である。

【0252】

図２２を参照すると、電子機器１００は、モデル取得部２２１０、圧縮部２２２０、及びランチャ部２２３０を備えてもよい。モデル取得部２２１０、圧縮部２２２０、及びランチャ部２２３０は、ソフトウェアモジュールとして実装されてもよい。プロセッサ１３０は、各ユニットに関連の指示をメモリ１２０にロードし、実行してもよい。

【0253】

モデル取得部２２１０は、ターゲットセット２２０１及び目標デバイス情報２２０２（又は目標デバイスの情報）に基づき、訓練済モデル２２１５を取得してもよい。例えば、モデル取得部２２１０は、第１のプロジェクトを実施して第１の訓練済モデルを取得してもよい。モデル取得部２２１０は、圧縮部２２２０から圧縮モデル２２２５を受信してもよい。モデル取得部２２１０は、圧縮モデル２２２５に基づいて設定された第３のプロジェクトを実施することにより、再訓練済モデルを取得してもよい。

【0254】

モデル取得部２２１０は、圧縮部２２２０又はランチャ部２２３０に訓練済モデル２２１５送信してもよい。例えば、モデル取得部２２１０は、第１の訓練済モデルを圧縮部２２２０に送信してもよい。モデル取得部２２１０は、再訓練済モデルをランチャ部２２３０に送信してもよい。モデル取得部２２１０に関連の電子機器１００の他の動作（例えば、プロジェクトを実施する動作）については上述したため、その詳細な説明は省略する。

【0255】

圧縮部２２２０は、入力モデルに圧縮を実施することによって軽量モデルを出力してもよい。圧縮部２２２０は、訓練済モデル２２１５又はニューラルネットワークモデル２２３５を圧縮して圧縮モデル２２２５を生成してもよい。ニューラルネットワークモデル２２３５は、モデル取得部２２１０によって取得されていない所定のモデルであってもよい。圧縮部２２２０は、圧縮モデル２２２５をランチャ部２２３０又はモデル取得部２２１０を送信してもよい。

【0256】

圧縮部２２２０は、ユーザによって設定された圧縮設定情報に基づき、入力モデルを圧縮してもよい。圧縮設定情報には、圧縮モード、圧縮方法、圧縮設定値、又は入力モデルに含まれる複数のチャンネルから圧縮目標を判定する参照情報のうちの少なくとも１つが含まれてもよい。圧縮モードには、入力モデルの圧縮のためにユーザによって設定されたモデル圧縮設定値に基づき、入力モデルを圧縮するための第１の圧縮モードが含まれてもよい。圧縮モードには、入力モデルに含まれるブロックの情報をユーザに提供し、ブロック圧縮のためにユーザによって設定されたブロック圧縮設定値にもとづき、訓練済モデルを圧縮する第２の圧縮モードが含まれてもよい。圧縮部２２２０は、コンプレッサと称され得る。

【0257】

ランチャ部２２３０は、目標デバイス上に展開される入力モデルに対応するダウンロードデータ２２４５を出力してもよい。ランチャ部２２３０に入力されたモデルには、圧縮モデル２２２５、ニューラルネットワークモデル２２３５、及び再訓練済モデルが含まれてもよい。

【0258】

ランチャ部２２３０は、目標デバイス情報２２０２に基づき、入力モデルに量子化を実施してもよい。目標デバイス情報２２０２には、目標デバイスによってサポートされるデータ種別（例えば、８ビット整数タイプ）が含まれてもよい。ランチャ部２２３０は、入力モデルのデータ種別を目標デバイスによってサポートされるデータ種別に変換してもよい。

【0259】

ランチャ部２２３０は、入力モデルに較正を実施してもよい。ランチャ部２２３０は、ユーザによって入力されたコード又は事前に記憶されたコードに基づき、較正を実施してもよい。例えば、ランチャ部２２３０は、量子化間隔を調整してもよい。ランチャ部２２３０は、調整された量子化間隔に基づき、量子化を実施してもよい。これに応じて、入力モデル又は量子化モデルのパラメータ値（例えば、重量値）が変更されてもよい。

【0260】

ランチャ部２２３０は、ダウンロードデータ２２４５をユーザに提供してもよい。ダウンロードデータ２２４５は、ダウンロードファイル、ダウンロードパッケージ、又は同様の収集データを意味し得る。ユーザがダウンロードデータ２２４５をリクエストすると、ランチャ部２２３０は、ダウンロードデータ２２４５をユーザデバイスに送信してもよい。これに応じて、目標デバイスに合わせて最適化されたニューラルネットワークモデルがユーザデバイスにインストールされてもよい。

【0261】

以上に記載の本開示の種々の例としての実施形態は、ソフトウェア、ハードウェア、又はソフトウェア及びハードウェアの組み合わせを使用して、コンピュータ又はコンピュータ可読記録媒体において実装されてもよい。場合によっては、本開示に記載の実施形態は、プロセッサ自身として実装されてもよい。ソフトウェア実装によると、本開示に記載の手順及び機能等の実施形態は、別々のソフトウェアモジュールとして実装されてもよい。ソフトウェアモジュールは、各々、本開示に記載の１つ以上の機能及び動作を実施してもよい。

【0262】

上述の本開示の多様な実施形態に係る処理動作を実施するためのコンピュータ指示が、持続性コンピュータ可読媒体に記憶されてもよい。持続性コンピュータ可動媒体に記憶されたコンピュータ指示により、プロセッサによる実行時、特定の機械に、上述の多様な実施形態に係る処理動作を実施させる。

【0263】

持続性コンピュータ可読媒体は、レジスタ、キャッシュ、メモリ等、暫時的にデータを記憶する媒体ではなく、半恒久的にデータを記憶し、装置によって読み取り可能な媒体である。持続性コンピュータ可読媒体の具体例として、コンパクトディスク（ＣＤ）、デジタル多用途ディスク（ＤＶＤ）、ハードディスク、ブルーレイディスク、ユニバーサルシリアルバス（ＵＳＢ）、メモリカード、リードオンリーメモリ（ＲＯＭ）等が挙げられる。

【0264】

機械可読記憶媒体が、持続性記憶媒体の形態で提供されてもよい。ここで「持続性記憶媒体」とは、記憶媒体が有形デバイスであり、信号（例えば、電磁波）を含まない記憶媒体を意味し、この用語は、データが半恒久的に記憶媒体上に記憶される場合と、データが一時的にそこに記憶される場合との間で区別しない。例えば、「持続性記憶媒体」には、データが一時的に記憶されるバッファが含まれ得る。

【0265】

本文書に開示の多様な実施形態に係る方法は、コンピュータプログラム製品に含まれて提供されてもよい。コンピュータプログラム製品は、販売人と購買人との間で商品としてやりとりされ得る。コンピュータプログラム製品は、機械可読記憶媒体（例えば、コンパクトディスクリードオンリーメモリ（ＣＤ－ＲＯＭ））の形態で配布されてもよく、又はアプリケーションストア（例えば、Ｐｌａｙ Ｓｔｏｒｅ（登録商標））を通じて配布（例えば、ダウンロード又はアップロード）されてもよく、又は２つのユーザデバイス（例えば、スマートフォン）間にてオンラインで直接配布（例えば、ダウンロード又はアップロード）されてもよい。オンライン配布の場合、コンピュータプログラム製品の少なくとも一部（例えば、ダウンロード可能なアプリ）が、メーカのサーバ、アプリケーションストアのサーバ、又は中継サーバのメモリ等、機械可読記憶媒体に少なくとも一時的に記憶されてもよく、一時的に生成されてもよい。

【0266】

上述の本開示の種々の実施形態によると、ターゲットデバイスに合わせて最適化されたニューラルネットワークモデルを提供することができる。

【0267】

上述の本開示の種々の実施形態によると、ユーザによって入力されたデータセットに基づいて訓練されたニューラルネットワークモデルを提供することができる。

【0268】

上述の本開示の種々の実施形態によると、ユーザによって入力された圧縮のための設定値に基づき、圧縮ニューラルネットワークモデルを提供することができる。

【0269】

上述の本開示の種々の実施形態によると、圧縮ニューラルネットワークモデルに対応するダウンロードデータを提供することができる。

【0270】

これに応じて、ユーザの利便性と満足度を向上することができる。

【0271】

多くの場合、実体は、他の実体に連結されるものとして説明した。「連結された」及び「接続された」（又はこれらの形態の任意のもの）の用語は、本明細書中、相互に読み替え可能に使用されており、双方の場合において、２つの実体が直接的に連結されること（無視できない（例えば寄生的な）介在実体を伴うことなく）、及び（１つ以上の無視できない介在実体を伴って）２つの実体が間接的に連結されることを包括的にいうものであることが理解されなければならない。実体が互いに直接連結されているように図示される場合、又はいずれの介在実体の記載も伴うことなく、ともに連結されるものとして記載される場合、これらの実体は、文脈によって別段の明示のないかぎり、非間接的に連結され得ることが理解されなければならない。

【0272】

記載された本発明のバリエーションの最適な特徴が、独立に、又は本明細書に記載の特徴のうちの１つ以上との組み合わせにおいて記載及びクレームされ得ることが考えられる。さらに、クレームが一実施形態に対する任意の要素を除外して設計され得ることにさらに留意されたい。このように、本記載は、クレーム要素の列挙との関連で使用される「単に」「のみ」等の排他的用語の使用、又は「ネガティブな」限定の使用の先行しとして機能することが意図されている。本明細書中、別段の規定のない限り、本明細書において使用されるすべての技術的及び科学的用語は、本発明が属する技術分野の当業者が一般に理解するのと同一の意味を有する。本発明の広がりは、本明細書によって限定されるものでなく、採用されたクレーム用語の率直な意味によっても限定される。

【0273】

さらに、本開示の実施形態によって得られる、又は予測され得る効果について、本開示の実施形態の詳細な説明において直接又は暗示的に開示した。例えば、本開示の実施形態において予測される種々の効果は、上述の詳細な説明に開示されている。

【0274】

本明細書に記載の実施形態及びそのクレームは、特許性のある主題に向けられたものである。これらの実施形態は、いくつかの理由により、抽象的着想を構成するものでない。そのような理由の１つとして、いずれのクレームもニューラルネットワーク最適化の能力を提供するものであるためである。これらの装置及びコンピュータ実施方法により、ターゲットデバイスの属性を判定するようにし、ターゲットデバイスに合わせて最適化されたニューラルネットワークモデルを取得及び／又は使用させることで、コンピュータ自体の機能を向上させるもので、そうでなければ副次的に最適化されたニューラルネットワークを稼働してしまうことで、抽象的着想を「著しく上回る」ものと見なされ得る。

【0275】

当業者にとって、本開示の他の態様、効果、及び顕著な特徴については、添付の図面とともに行った、本開示の種々の実施形態を開示した以上の詳細な説明により、明らかとなるであろう。

【0276】

本開示の実施形態について以上に図示及び説明したが、本開示は、上述の特定の実施形態に限定されるものでなく、添付の請求項に開示された本開示の要旨から逸脱することなく、本開示の関連する技術分野の当業者によって、種々に修正され得る。これらの修正も、本開示の範囲及び趣旨の範囲内であることも理解されなければならない。
［その他の可能な項目］
［項目１］
電子機器によって実施されるニューラルネットワークモデルの情報を提供する方法であって、
電子機器のプロセッサにおいて、ニューラルネットワークモデルが実行される目標デバイスの情報、及び前記目標デバイスに対する前記ニューラルネットワークモデルの目標性能を外部デバイスから受信することと、
前記プロセッサにより、前記目標デバイスの情報及び前記受信された目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出することと、
前記受信した目標性能に基づき、前記複数の候補ニューラルネットワークモデルの情報を表示するために、コンピュータネットワークを介して、外部デバイスに指令を送信することと、を備え、前記複数の候補ニューラルネットワークの情報には、前記複数の候補ニューラルネットワークモデルの名称、前記複数の候補ニューラルネットワークモデルの性能、又は前記複数の候補ニューラルネットワークモデルの入力データのサイズのうちの少なくとも１つが含まれ、
前記複数の候補ニューラルネットワークモデルを導出するための訓練モードが第１の訓練モードとして設定されるとき、
各々、前記複数の候補ニューラルネットワークモデルの各々の情報を表す複数のＵＩ要素には、
各々、ユーザによって設定された前記入力データの前記サイズに基づいて導出された複数の第１の候補ニューラルネットワークモデルの各々に対応する第１のＵＩ要素、及び
各々、前記ユーザによって設定された目標性能に基づいて導出された複数の第２の候補ニューラルネットワークモデルの各々に対応する第２のＵＩ要素が含まれ、
前記第１のＵＩ要素及び前記第２のＵＩ要素は、異なるエリアに表示され、
前記訓練モードが第２の訓練モードとして設定されるとき、
前記複数のＵＩ要素は、第１の性能パラメータに対応する第１の軸と、第２の性能パラメータに対応し、前記１の軸と直交する第２の軸とによって規定された２次元グラフ上に表示される方法。
［項目２］
前記訓練モードが前記第１の訓練モードとして設定されるとき、
前記複数のＵＩ要素は、前記複数のＵＩ要素の各々に対応する前記候補ニューラルネットワークモデルの性能と前記受信した目標性能との間の差の昇順で表示される項目１に記載の方法。
［項目３］
前記第１の性能パラメータが遅延時間であり、前記第２の性能パラメータが正確さである項目１に記載の方法。
［項目４］
前記複数のＵＩ要素には、各々、前記受信した目標性能から所定範囲内である性能を有した複数の第３の候補ニューラルネットワークモデルの各々に対応する第３のＵＩ要素、各々、前記受信した目標性能から前記所定範囲外である性能を有した複数の第４の候補ニューラルネットワークモデルの各々に対応する第４のＵＩ要素とが含まれ、
前記送信することには、前記第３のＵＩ要素を有効化し、前記第４のＵＩ要素を無効化するために、前記外部デバイスに指令を送信することが含まれる項目１に記載の方法。
［項目５］
前記複数のＵＩ要素は各々、ユーザによる選択時、前記複数の候補ニューラルネットワークモデルの各々の情報を表示する項目１に記載の方法。
［項目６］
前記複数の候補ニューラルネットワークモデルの情報は、ルックアップテーブルに基づいて取得され、
前記ルックアップテーブルには、複数のニューラルネットワークモデルの識別情報、前記複数のニューラルネットモデルが実行される複数のデバイスの情報、及び前記複数のデバイスのための前記複数のニューラルネットワークモデルの性能情報が含まれる項目１に記載の方法。
［項目７］
前記導出することには、前記複数のニューラルネットワークモデルのうち、ランキングが所定ランキング以上のニューラルネットワークモデルの情報を導出することが含まれ、前記ランキングは、前記目標性能からの性能差に基づく項目６に記載の方法。
［項目８］
前記導出することには、前記複数のニューラルネットワークモデルのうち、前記目標性能からの性能差が事前設定された範囲内であるニューラルネットワークモデルの情報を導出することが含まれる項目６に記載の方法。
［項目９］
ニューラルネットワークモデルの情報を提供する電子機器であって、
データネットワークを介してデータを送受信するように構成され、少なくとも１つの通信回路を有する通信インタフェースと、
少なくとも１つの動作指示を記憶するように構成された持続性メモリと、
プロセッサと、を備え、
前記少なくとも１つの動作指示の実行は、前記プロセッサに、
前記ニューラルネットワークモデルが実行される目標デバイスの情報、及び前記目標デバイスに対する前記ニューラルネットワークモデルの目標性能を、外部デバイスから受信することと、
前記目標デバイスの情報及び前記受信した目標性能に基づき、複数の候補ニューラルネットワークモデルの情報を導出することと、
前記受信した目標性能に基づき、前記複数の候補ニューラルネットワークモデルの情報を表示するために、前記外部デバイスに指令を送信することと、を行わせるものであり、前記複数の候補ニューラルネットワークモデルの情報には、前記複数の候補ニューラルネットワークモデルの名称、前記複数の候補ニューラルネットワークモデルの性能、又は前記複数の候補ニューラルネットワークモデルの入力データのサイズのうちの少なくとも１つが含まれ、
前記複数のニューラルネットワークモデルを導出するための訓練モードが第１の訓練モードとして設定されるとき、
各々、前記複数の候補ニューラルネットワークモデルの各々の情報を表す複数のＵＩ要素には、
各々、前記ユーザによって設定された前記入力データのサイズに基づいて導出された前記複数の第１の候補ニューラルネットワークモデルの各々に対応する第１のＵＩ要素と、
各々、ユーザによって設定された目標性能に基づいて導出された前記複数の第２の候補ニューラルネットワークモデルの各々に対応する第２のＵＩ要素と、が含まれ、
前記第１のＵＩ要素及び前記第２のＵＩ要素は、異なるエリアに表示され、
前記訓練モードが第２の訓練モードとして設定されるとき、
前記複数のＵＩ要素は、第１の性能パラメータに対応する第１の軸と、第２の性能パラメータに対応し、前記第１の軸に直交する第２の軸とによって規定された２次元グラフ上に表示される電子機器。
［項目１０］
前記訓練モードが前記第１の訓練モードとして設定されるとき、
前記複数のＵＩ要素は、前記複数のＵＩ要素の各々に対応する前記候補ニューラルネットワークモデルの前記性能と前記受信した目標性能との差の昇順に表示される項目９に記載の電子機器。
［項目１１］
前記第１の性能パラメータが遅延時間であり、前記第２の性能パラメータが正確さである項目９に記載の電子機器。
［項目１２］
前記複数のＵＩ要素には、各々、前記受信した目標性能から所定範囲内に性能を有する複数の第３の区補ニューラルネットワークモデルの各々に対応する第３のＵＩ要素と、各々、前記受信した目標性能から前記所定範囲外に性能を有する複数の第４の候補ニューラルネットワークモデルの各々に対応する第４のＵＩ要素とが含まれ、
前記プロセッサは、前記通信インタフェースを制御し、前記第３のＵＩ要素を有効化し、前記第４のＵＩ要素を無効化するために、前記外部デバイスに指令を送信するようにさらに構成される項目９に記載の電子機器。
［項目１３］
前記プロセッサは、ルックアップテーブルに基づき、前記複数の候補ニューラルネットワークモデルの情報を導出するようにさらに構成され、
前記ルックアップテーブルには、複数のニューラルネットワークモデルの識別情報、前記複数のニューラルネットワークモデルが実行される複数のデバイスの情報、前記複数のデバイスに対する前記複数のニューラルネットワークモデルの性能情報が含まれる項目９に記載の電子機器。
［項目１４］
前記プロセッサは、前記複数のニューラルネットワークモデルのうち、ランキングが所定のランキング以上であるニューラルネットワークモデルの情報を導出するようにさらに構成され、前記ランキングは、前記目標性能からの性能差に基づく項目１３に記載の電子機器。
［項目１５］
前記プロセッサは、前記複数のニューラルネットワークモデルのうち、前記目標性能からの性能差が事前設定された範囲内であるニューラルネットワークモデルの情報を導出するようにさらに構成される項目１３に記載の電子機器。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】