(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-09-17
(45)【発行日】2024-09-26
(54)【発明の名称】情報処理装置、情報処理システム及び帯域制御方法
(51)【国際特許分類】
H04L 47/10 20220101AFI20240918BHJP
H04L 12/28 20060101ALI20240918BHJP
【ＦＩ】
H04L47/10
H04L12/28 200B
【請求項の数】
8
(21)【出願番号】P 2021002413
(22)【出願日】2021-01-08
(65)【公開番号】P2022107451
(43)【公開日】2022-07-21
【審査請求日】2023-09-07
(73)【特許権者】
【識別番号】000005223
【氏名又は名称】富士通株式会社
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】白木 長武
【審査官】長谷川 未貴
(56)【参考文献】
【文献】特開２０１７－０４１８５８（ＪＰ，Ａ）
【文献】国際公開第２０１６／００３８４０（ＷＯ，Ａ１）
【文献】米国特許出願公開第２０１５／０３３３９９４（ＵＳ，Ａ１）
【文献】米国特許出願公開第２０１６／００９４４１３（ＵＳ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｌ ４１／００－１０１／００
(57)【特許請求の範囲】
【請求項1】
複数のテナントそれぞれについて複数のワークロードを備える情報処理装置であって、他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理装置。
【請求項2】
前記取得部は、他の情報処理装置とテナントごとの使用帯域情報を交換することで他の情報処理装置におけるテナントごとの使用帯域情報を取得することを特徴とする請求項１に記載の情報処理装置。
【請求項3】
前記取得部は、他の情報処理装置とテナントごとの使用帯域情報を、前記複数の情報処理装置が共通にアクセスできる記憶領域を介して交換することで他の情報処理装置におけるテナントごとの使用帯域情報を取得することを特徴とする請求項１に記載の情報処理装置。
【請求項4】
前記計算部は、前記複数の情報処理装置を含む情報処理システムにおいて各テナントに分配される帯域の割合に基づいて、自装置で処理するワークロードに分配する帯域を計算することを特徴とする請求項１、２又は３に記載の情報処理装置。
【請求項5】
帯域を設定するワークロードを決定する決定部をさらに有し、前記設定部は、前記決定部により決定されたワークロードについて前記計算部により計算された帯域を設定する
ことを特徴とする請求項１～４のいずれか１つに記載の情報処理装置。
【請求項6】
前記決定部は、自装置で処理するワークロードの数が帯域の設定可能数を超える場合には、ワークロードで用いられるポートについて、帯域の使用情報から帯域の設定情報を引いた差分に応じて、ポートに対応するワークロードを帯域制御対象として決定することを特徴とする請求項５に記載の情報処理装置。
【請求項7】
複数のテナントそれぞれについて複数のワークロードを複数の情報処理装置を用いて処理する情報処理システムにおいて、各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理システム。
【請求項8】
複数のテナントそれぞれについて複数のワークロードを複数の情報処理装置を用いて処理する情報処理システムにおける帯域制御方法であって、各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得し、
自装置で処理するワークロードに分配する帯域を、取得した使用帯域情報に基づいて計算し、
該計算した帯域を設定する
処理を実行することを特徴とする帯域制御方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理装置、情報処理システム及び帯域制御方法に関する。
【背景技術】
【0002】
近年、複数のテナントそれぞれについて複数のアプリケーションが、複数のノードを含む情報処理システムを共有して実行されるようになった。ここで、ノードは、情報処理を行う情報処理装置である。このような情報処理システムでは、各ノードで複数のワークロードが実行される。ここで、ワークロードは、ミドルウェアなどを含めたアプリケーションの実行イメージである。
【0003】
特に、コンテナによりアプリケーションを実行する場合、ＶＭ（Virtual Machine）上でアプリケーションを実行する場合と比較して、多く（１００のオーダー）のワークロードが１つのノードで実行される。ここで、コンテナは、他のユーザーから隔離されたアプリケーション実行環境であることはＶＭと同様であるが、ＯＳ（Operating System）を有さないことがＶＭと異なる。すなわち、１つのＯＳ上で複数のコンテナが実行される。
【0004】
なお、帯域制御に関する従来技術として、仮想環境において帯域確保サービス及び帯域分配サービスを実現する帯域制御を行う帯域制御システムがある。この帯域制御システムは、ホストサーバで利用可能な帯域から、一定の帯域を確保する帯域確保サービスを利用する仮想マシンに対して一定の帯域を優先して割り当てる。そして、この帯域制御システムは、利用可能な帯域から帯域確保サービスが実際に利用している帯域を除いた帯域を分配する帯域分配サービスを利用する仮想マシンに割り当てる帯域を、ホストサーバの通信による負荷状況に応じて調整する。
【0005】
また、帯域制御に関する従来技術として、複数のセッションを収容する複数の通信装置と、複数の通信装置の各々と接続する帯域制御サーバと、を備え、帯域利用率を向上させるネットワークシステムがある。このネットワークシステムでは、帯域制御サーバは、メモリ、及び、ネットワークインターフェースを備え、複数のセッションの各々に最低限割り当てられるべき最低帯域を算出するための情報を含む通信品質情報を、メモリに有する。そして、帯域制御サーバは、複数の通信装置の各々から、収容するセッションに関するセッション情報を、ネットワークインターフェースを介して受信し、受信したセッション情報と、通信品質情報とに基づいて、複数のセッションの各々に、最低帯域を割り当てる。そして、帯域制御サーバは、割り当てた最低帯域の各々を、複数の通信装置の各々に通知する。
【0006】
また、従来技術として、設定されたＱｏＳポリシにしたがって各ノードにおけるポリシの運用状況を監視することができ、ポリシの運用自体を保証するネットワーク管理システムがある。このネットワーク管理システムでは、管理者端末を介し設定されたネットワーク内の複数のノードに対するＱｏＳポリシを、ポリシサーバがそれぞれ固有のポリシＩＤを付与しポリシ情報として一元管理する。そして、ポリシサーバは、ＱｏＳポリシを、ノード情報を参照して、ポリシサーバに付与されているポリシサーバＫＥＹとともに各ノードに対して設定する。各ノードは、ＱｏＳパラメータ管理テーブルに設定されたＱｏＳポリシで指定されるフローを識別し、ポリシＩＤごとにＱｏＳレポート管理テーブルに帯域監視情報を収集する。そして、各ノードは、一定時間Ｔ１ごとにポリシＩＤとポリシサーバＫＥＹが含まれる帯域監視データをポリシサーバに送信する。ポリシサーバでは、帯域レポート処理部により一定時間Ｔ２ごとに、各ノードからの帯域監視データについて帯域分析とアラーム分析とが行われる。
【先行技術文献】
【特許文献】
【0007】
【文献】特開２０１７－４１８５８号公報
【文献】特開２０１４－１１６７７５号公報
【文献】特開２００１－２３７８３１号公報
【発明の概要】
【発明が解決しようとする課題】
【0008】
複数のテナントそれぞれについて複数のアプリケーションが複数のノードを含む情報処理システムを共有して実行される場合、情報処理システム全体として通信リソースの割り当てがテナント間で公平でないという問題がある。
【0009】
図２１は、通信リソースの割り当てがテナント間で公平でないことを説明するための図である。図２１において、情報処理システムは、ノード１とノード２を有する。また、Ｗｔｉはテナントｔのノードｉにおけるワークロードであり、ＲｔｉはＷｔｉの生成するトラフィックのレートであり、Ｃｊはスイッチポートｊの帯域幅である。
【0010】
また、ＲｔをＲｔｉのｉに関する総和（Ｒt＝ΣiＲti）とし、図示しないＬｔをテナントｔに与えられる帯域の割合とする。また、Ｒ1：Ｒ2＝Ｌ1：Ｌ2の状態を「公平」とする。そして、帯域が不足した場合、例えばＲ１１＋Ｒ２１＞Ｃ１のとき、Ｒ1：Ｒ2＝Ｌ1：Ｌ2と帯域制限するとする。また、このときＣ２＞Ｒ１２＋Ｒ２２となっており、Ｃ２側は帯域制限がかからないとする。
【0011】
ローカルノード内の情報のみで帯域を制御する場合、制御後の帯域ｒ１１、ｒ２１は以下のようになる。
ｒ１１＝Ｌ１Ｃ１／（Ｌ１＋Ｌ２）、ｒ２１＝Ｌ２Ｃ１／（Ｌ１＋Ｌ２）
ｒ１１＝Ｌ１Ｃ１／（Ｌ１＋Ｌ２）、ｒ２１＝Ｌ２Ｃ１／（Ｌ１＋Ｌ２）
【0012】
しかし、この帯域制御には、リモートノード（ノード２）の状態（Ｒ１２、Ｒ２２）が反映されておらず、情報処理システム全体としてテナント間の帯域の割り当てが不公平な場合がある。例えば、Ｒ１２が他のトラフィックと比較して非常に大きい場合、Ｒ1：Ｒ2＝（Ｒ１１＋Ｒ１２）：（Ｒ２１＋Ｒ２２）なので、テナント間の帯域の割り当てが不公平となる。
【0013】
本発明は、１つの側面では、情報処理システム全体としてテナント間で公平になるように帯域を制御することを目的とする。
【課題を解決するための手段】
【0014】
１つの態様では、情報処理装置は、複数のテナントそれぞれについて複数のワークロードを備える情報処理装置であって、他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、前記計算部により計算された帯域を設定する設定部と、を有する。
【発明の効果】
【0015】
１つの側面では、本発明は、情報処理システム全体としてテナント間で公平になるように帯域を制御することができる。
【図面の簡単な説明】
【0016】
【発明を実施するための形態】
【0017】
以下に、本願の開示する情報処理装置、情報処理システム及び帯域制御方法の実施例を図面に基づいて詳細に説明する。なお、実施例は開示の技術を限定するものではない。
【実施例1】
【0018】
まず、実施例１に係る情報処理システムによる帯域制御について説明する。図１は、実施例１に係る情報処理システムによる帯域制御を説明する図である。図１に示すように、実施例１に係る情報処理システム１は、ノード１及びノード２で表される２台のノード１０を有する。２台のノード１０は、ネットワーク２により接続される。なお、ここでは説明の便宜上、２台のノード１０のみを示したが、情報処理システム１は、３台以上のノード１０を有してよい。
【0019】
ノード１０は、情報処理を行う情報処理装置である。ノード１０ではワークロード１１が実行される。図１では、ワークロード１１はＷ１１と表される。Ｗｔｉはテナントｔのノードｉにおけるワークロード１１であり、ＲｔｉはＷｔｉの生成するトラフィックのレートである。なお、ワークロード１１とは、例えば、コンテナ環境におけるコンテナのことをいう。
【0020】
ノード１０では、仮想スイッチ１２及びエージェント１３が動作する。図１では、仮想スイッチ１２はＶＳＷ１２と表される。ワークロード１１は、仮想スイッチ１２の仮想ポート１４を介して通信を行う。
【0021】
エージェント１３は、仮想スイッチ１２の統計情報を監視し、各ワークロード１１の仮想ポート１４における使用帯域を取得する。また、エージェント１３は、他のノード１０で動作するエージェント１３とネットワーク２を介して情報交換を行い、他のノード１０における通信状態を示す情報をテナントごとに取得する。そして、エージェント１３は、各ワークロード１１の仮想ポート１４における使用帯域、及び、他のノード１０から取得した情報に基づいて、情報処理システム１の全体においてテナント間で公平になるように自ノード１０の仮想ポート１４に分配する帯域を計算する。そして、エージェント１３は、計算した帯域を自ノード１０の仮想ポート１４に設定する。
【0022】
このように、エージェント１３が、他のノード１０で動作するエージェント１３と情報交換を行い、他のノード１０と交換した情報に基づいて、情報処理システム１全体においてテナント間で公平になるように自ノード１０の仮想ポート１４に分配する帯域を計算する。したがって、情報処理システム１は、全体としてテナント間で公平になるように帯域を制御することができる。
【0023】
次に、ノード１０のハードウェア構成について説明する。図２は、ノードのハードウェア構成を示す図である。図２に示すように、ノード１０は、プロセッサ２１と、ＲＡＭ（Random Access Memory）２２と、ディスク２３と、グラフィックＩ／Ｆ（InterFace）２４と、入力Ｉ／Ｆ２５と、ストレージＩ／Ｆ２６と、ネットワークＩ／Ｆ２７とを有する。プロセッサ２１、ＲＡＭ２２、ディスク２３、グラフィックＩ／Ｆ２４、入力Ｉ／Ｆ２５、ストレージＩ／Ｆ２６及びネットワークＩ／Ｆ２７はバス２８に接続される。
【0024】
プロセッサ２１は、ＲＡＭ２２からプログラムを読み出して実行する処理装置である。ＲＡＭ２２は、プログラムやプログラムの実行途中結果などを記憶するメモリである。ディスク２３は、プログラムやデータを格納する不揮発性記憶装置である。グラフィックＩ／Ｆ２４は、表示装置３との接続に用いられるインタフェースである。入力Ｉ／Ｆ２５は、マウス、キーボードなどの入力装置４との接続に用いられるインタフェースである。ストレージＩ／Ｆ２６は、ポータブルストレージ５との接続に用いられるインタフェースである。ネットワークＩ／Ｆ２７は、ネットワーク２との接続に用いられるインタフェースである。ネットワークＩ／Ｆ２７は、仮想スイッチ１２の機能を備える。
【0025】
エージェント１３は、ノード１０により読み出し可能な記録媒体の一例であるＤＶＤに記憶され、ＤＶＤから読み出されてノード１０にインストールされる。あるいは、エージェント１３は、ネットワークＩ／Ｆ２７を介して接続された他の情報処理システムのデータベースなどに記憶され、これらのデータベースから読み出されてノード１０にインストールされる。そして、インストールされたエージェント１３は、ディスク２３に記憶され、ＲＡＭ２２に読み出されてプロセッサ２１によって実行される。
【0026】
次に、エージェント１３の機能構成について説明する。図３は、実施例１に係るエージェントの機能構成を示す図である。図３に示すように、エージェント１３は、ポート情報取得部３１と、利用状況テーブル３２と、情報交換部３３と、ローカルテーブル３４と、グローバルテーブル３５とを有する。また、エージェント１３は、帯域設定テーブル３６と、帯域計算部３７と、設定情報テーブル３８と、ポート情報設定部３９とを有する。なお、情報交換部３３は、取得部の一例である。また、帯域計算部３７は、計算部の一例である。また、ポート情報設定部３９は、設定部の一例である。
【0027】
ポート情報取得部３１は、各仮想ポート１４の帯域使用状況を取得して利用状況テーブル３２に格納する。ポート情報取得部３１は、例えば、仮想スイッチ１２のポート統計情報を監視して各仮想ポート１４の帯域使用状況を取得する。
【0028】
利用状況テーブル３２は、各ワークロードの帯域利用状況を記憶するテーブルである。図４は、利用状況テーブルの一例を示す図である。図４に示すように、利用状況テーブル３２は、ワークロードＩＤと利用帯域とを対応付けて記憶する。ワークロードＩＤは、ワークロード１１を識別する識別子である。利用帯域は、ワークロード１１が利用する、仮想ポート１４における帯域である。例えば、ワークロードＷ１１は帯域をＢ１１利用する。なお、仮想ポート１４とワークロード１１は、設定情報テーブル３８の情報に基づいて対応付けられる。
【0029】
図３に戻って、情報交換部３３は、利用状況テーブル３２が記憶する情報に基づいてローカルテーブル３４を作成する。また、情報交換部３３は、他のノード１０のエージェント１３とローカルテーブル３４の内容を交換し、他のノード１０の帯域使用状況とローカルテーブル３４が記憶する情報に基づいてグローバルテーブル３５を作成する。
【0030】
ローカルテーブル３４は、自ノード１０における帯域利用状況をテナントごとに記憶する。図５は、ローカルテーブルの一例を示す図である。図５に示すように、ローカルテーブル３４は、テナントＩＤとローカル利用帯域を対応付けて記憶する。テナントＩＤは、テナントを識別する識別子である。ローカル利用帯域は、テナントが自ノード１０で利用している帯域である。例えば、図４に示した利用状況テーブル３２に基づいて、Ｂ１＝Ｂ１１＋Ｂ１２、Ｂ２＝Ｂ２１＋Ｂ２２、Ｂ３＝Ｂ３１が計算される。
【0031】
図３に戻って、グローバルテーブル３５は、情報処理システム１に含まれる各ノード１０における帯域利用状況をテナントごとに記憶する。図６は、グローバルテーブルの一例を示す図である。図６に示すように、グローバルテーブル３５は、テナントＩＤとグローバル利用帯域を対応付けて記憶する。テナントＩＤは、テナントを識別する識別子である。グローバル利用帯域は、テナントが情報処理システム１で利用している帯域である。グローバル利用帯域には、情報交換部３３が他ノード１０から受信した情報と自ノード１０についてローカルテーブル３４からコピーした情報がノード１０ごとに記憶される。例えば、テナントＴ１は、ノード１において帯域Ｒ１１を使用し、ノード２において帯域Ｒ１２を使用し、・・・、ノードＮにおいて帯域Ｒ１Ｎを使用している。
【0032】
図３に戻って、帯域設定テーブル３６は、帯域の割合（重み）をテナントごとに記憶する。図７は、帯域設定テーブルの一例を示す図である。図７に示すように、帯域設定テーブル３６は、テナントＩＤと帯域設定を対応付けて記憶する。テナントＩＤは、テナントを識別する識別子である。帯域設定は、テナントに割り当てられた帯域の割合である。例えば、テナントＴ１、テナントＴ２、テナントＴ３で識別される３つのテナントにＬ１、Ｌ２、Ｌ３の割合の帯域が割り当てられた場合、テナントＴ１、テナントＴ２、テナントＴ３で識別される３つのテナントの帯域利用がＬ１：Ｌ２：Ｌ３となるように制御されることが期待される。
【0033】
図３に戻って、帯域計算部３７は、自ノード１０の各仮想ポート１４の割り当て帯域を計算して設定情報テーブル３８に格納する。帯域計算部３７は、情報処理システム１全体でテナントに割り当てられる帯域が帯域設定テーブル３６によって記憶される割合になるように各仮想ポート１４の割り当て帯域を計算する。なお、計算方法の一例は、後述する。
【0034】
設定情報テーブル３８は、ワークロード１１の情報を記憶する。図８は、設定情報テーブルの一例を示す図である。図８に示すように、設定情報テーブル３８は、ワークロードＩＤとテナントＩＤとポートＩＤと帯域初期設定と帯域設定とを対応付けて記憶する。
【0035】
ワークロードＩＤは、ワークロード１１を識別する識別子である。テナントＩＤは、テナントを識別する識別子である。ポートＩＤは、仮想ポート１４を識別する識別子である。帯域初期設定は、ワークロード１１に割り当てられる帯域の割合であり、帯域調整前の値である。例えば、Ｃ１１が、テナントＴ１のポートＩＤとしてＰ１１を利用するワークロード１１の帯域初期設定であり、Ｃ１２が、テナントＴ１のポートＩＤとしてＰ１２を利用するワークロード１１の帯域初期設定であるとする。テナントＴ１の他のテナントＴ２，Ｔ３との帯域の割り当ての割合がＬ１であるとする。すると、Ｃ１１＝Ｃ１２＝Ｌ１／２など、Ｃ１１＋Ｃ１２＝Ｌ１になるように割り当てられる。帯域設定は、ワークロード１１に割り当てられる帯域の割合であり、帯域調整後の値である。なお、帯域設定＝０の場合、仮想ポート１４への帯域設定は行われない。
【0036】
例えば、ワークロードＷ１１については、テナントはＴ１であり、使用する仮想ポート１４はＰ１１であり、帯域調整前の帯域の割合はＣ１１であり、帯域調整後の帯域の割合はＡ１１である。
【0037】
図３に戻って、ポート情報設定部３９は、帯域制限を行う仮想ポート１４に対して帯域設定を行う。ポート情報設定部３９は、帯域設定＝０の場合、仮想ポート１４への帯域設定を行わない。
【0038】
次に、エージェント１３による処理のフローについて図９～図１４を用いて説明する。図９は、ポート情報取得処理のフローを示すフローチャートである。なお、ポート情報取得処理は、所定の時間間隔で実行される。図９に示すように、ポート情報取得部３１は、ワークロード１１をＷとし、全てのワークロードＷについて、以下のステップＳ１～ステップＳ２を実行する。すなわち、ポート情報取得部３１は、ワークロードＷの接続された仮想ポート１４の統計情報（利用帯域）を仮想スイッチ１２から取得し（ステップＳ１）、取得した利用帯域をワークロードＷに対応付けて利用状況テーブル３２に登録する（ステップＳ２）。
【0039】
このように、ポート情報取得部３１がワークロードＷの接続された仮想ポート１４の利用帯域を取得して利用状況テーブル３２に登録するので、エージェント１３は、各ワークロードＷの帯域使用状況を特定することができる。
【0040】
図１０は、情報交換処理のフローを示すフローチャートである。図１０Ａは自ノード１０の情報を送信する場合を示し、図１０Ｂは他ノード１０から情報を受信する場合を示す。なお、情報交換処理は、所定の時間間隔で実行される。
【0041】
図１０Ａに示すように、情報交換部３３は、ワーク領域ｂ［］をクリアする（ステップＳ１１）。そして、情報交換部３３は、ワークロード１１をＷとし、全てのワークロードＷについて、ワークロードＷのテナントをｔとしてｂ［ｔ］にワークロードＷの利用帯域を加算する（ステップＳ１２）。例えば、情報交換部３３は、利用状況テーブル３２を参照して、テナントｔごとに各テナントｔで利用しているワークロードＷの利用帯域を加算する。
【0042】
そして、情報交換部３３は、ｂ［］の情報をローカルテーブル３４に登録し（ステップＳ１３）、ローカルテーブル３４の情報をグローバルテーブル３５の自ノード相当部分に登録する（ステップＳ１４）。そして、情報交換部３３は、ローカルテーブル３４の情報を他ノード１０に送信する（ステップＳ１５）。
【0043】
このように、情報交換部３３がローカルテーブル３４の情報を他ノード１０に送信することによって、他ノード１０は、自ノード１０以外のノード１０の帯域利用状況を取得することができる。
【0044】
また、図１０Ｂに示すように、情報交換部３３は、他ノードから送られてきたテナントごと帯域利用状況を他ノード１０に対応させてグローバルテーブル３５に登録する（ステップＳ２１）。
【0045】
このように、情報交換部３３が他ノードから送られてきたテナントごと帯域利用状況を他ノード１０に対応させてグローバルテーブル３５に登録するので、エージェント１３は、情報処理システム１全体において公平な帯域の割り当てを行うことが可能になる。
【0046】
図１１は、帯域計算処理のフローを示すフローチャートである。なお、帯域計算処理は、所定の時間間隔で実行される。
【0047】
図１１に示すように、帯域計算部３７は、テナントをｔとし、全てのテナントについて、以下のステップＳ３１を実行する。すなわち、帯域計算部３７は、現ノード１０におけるテナントｔの割り当て帯域計算処理を実行する（ステップＳ３１）。ここでは、テナントｔの割り当て帯域計算処理の結果、現ノード１０におけるテナントｔの割り当て帯域は、Ｂ［ｔ］と計算されたとする。なお、テナントｔの割り当て帯域計算処理のフローを示すフローチャートは、後述する。
【0048】
そして、帯域計算部３７は、ワークロードをｗとし、全てのワークロードについて、以下のステップＳ３２を実行する。すなわち、帯域計算部３７は、現ノード１０におけるワークロードｗの帯域設定Ａ［ｗ］を、以下の式（１）のように計算する（ステップＳ３２）。なお、以下の式におけるＣ［ｗ］は、現ノード１０におけるワークロードｗの帯域初期設定を示す。帯域初期設定は、設定情報テーブル３８に格納されている。また、Ｔ［ｔ］は、現ノード１０におけるテナントｔのワークロードの総帯域を示す。テナントｔのワークロードの総帯域の計算処理のフローを示すフローチャートは、後述する。
Ａ［ｗ］＝Ｂ［ｔ］×Ｃ［ｗ］／Ｔ［ｔ］・・・（１）
つまり、現ノード１０に、テナントｔのワークロードｗが複数存在する場合には、現ノード１０におけるテナントｔの割り当て帯域Ｂ［ｔ］をテナントｔの複数のワークロードｗで分配する。この後、帯域計算部３７は、設定情報テーブル３８の、該当するワークロードｗに対応する帯域設定に、分配されたＡ［ｗ］を格納する。
Ａ［ｗ］＝Ｂ［ｔ］×Ｃ［ｗ］／Ｔ［ｔ］・・・（１）
つまり、現ノード１０に、テナントｔのワークロードｗが複数存在する場合には、現ノード１０におけるテナントｔの割り当て帯域Ｂ［ｔ］をテナントｔの複数のワークロードｗで分配する。この後、帯域計算部３７は、設定情報テーブル３８の、該当するワークロードｗに対応する帯域設定に、分配されたＡ［ｗ］を格納する。
【0049】
図１２は、割り当て帯域計算処理のフローを示すフローチャートである。図１２に示すように、帯域計算部３７は、送信ポート（仮想ポート１４）の帯域が不足しているか否かを判定する（ステップＳ４１）。送信ポート（仮想ポート１４）の帯域が不足していないと判定した場合には（ステップＳ４１；Ｎｏ）、帯域計算部３７は、割り当て帯域計算処理を終了する。
【0050】
一方、送信ポート（仮想ポート１４）の帯域が不足していると判定した場合には（ステップＳ４１；Ｙｅｓ）、帯域計算部３７は、グローバルテーブル３５を参照し、テナントｔごとに、各ノード（現ノードｉを除く）の利用帯域Ｒｔｉを加算して、テナントｔのレートＲｔを以下の式（２）のように計算する（ステップＳ４２）。
Ｒｔ＝ΣｉＲｔｉ・・・（２）
Ｒｔ＝ΣｉＲｔｉ・・・（２）
【0051】
そして、帯域計算部３７は、現ノード１０におけるテナントｔの割り当て帯域ｒｔを計算する（ステップＳ４３）。
【0052】
例えば、テナント数が２の場合、現ノード１０におけるテナントＴ１の割り当て帯域ｒ１の計算式は、以下の式（３）で表わせる。なお、Ｌ１は、テナントＴ１の他のテナントＴ2との帯域の割り当ての割合を示す。Ｌ２は、テナントＴ２の他のテナントＴ１との帯域の割り当ての割合を示す。Ｃは、現ノード１０における仮想ポート１４の帯域を示す。Ｒ１は、式（２）で計算されたテナントＴ１のレートを示す。Ｒ２は、式（２）で計算されたテナントＴ２のレートを示す。
ｒ１＝Ｌ１Ｃ／（Ｌ１＋Ｌ２）－Ｌ２Ｒ１／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２／（Ｌ１＋Ｌ２）・・・（３）
ｒ１＝Ｌ１Ｃ／（Ｌ１＋Ｌ２）－Ｌ２Ｒ１／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２／（Ｌ１＋Ｌ２）・・・（３）
【0053】
また、テナント数が２の場合、現ノード１０におけるテナントＴ２の割り当て帯域ｒ２の計算式は、以下の式（４）で表わせる。
ｒ２＝Ｌ２Ｃ／（Ｌ１＋Ｌ２）－Ｌ２Ｒ１／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２／（Ｌ１＋Ｌ２）・・・（４）
ｒ２＝Ｌ２Ｃ／（Ｌ１＋Ｌ２）－Ｌ２Ｒ１／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２／（Ｌ１＋Ｌ２）・・・（４）
【0054】
そして、帯域計算部３７は、割り当て帯域計算処理を終了する。
【0055】
図１３は、帯域初期設定処理のフローを示すフローチャートである。なお、帯域初期設定処理は、設定情報テーブル３８の帯域初期設定が変更される時に実行される。図１３に示すように、帯域計算部３７は、現ノード１０におけるテナントごとの総帯域領域Ｔ［］をクリアする（ステップＳ５１）。
【0056】
そして、帯域計算部３７は、ワークロード１１をｗとし、全てのワークロードｗについて、テナントｔごとに、Ｔ［ｔ］にワークロードｗの帯域初期設定を加算する（ステップＳ５２）。帯域初期設定は、設定情報テーブル３８に格納されている。そして、帯域計算部３７は、帯域初期設定処理を終了する。
【0057】
このように、帯域計算部３７が、各テナントに分配される帯域の割合に基づいて、自ノード１０で処理するワークロードに分配する帯域を計算するので、エージェント１３は、情報処理システム１全体において公平な帯域の割り当てを行うことが可能になる。
【0058】
図１４は、ポート情報設定処理のフローを示すフローチャートである。なお、ポート情報設定処理は、所定の時間間隔で実行される。
【0059】
図１４に示すように、ポート情報設定部３９は、ワークロード１１をｗとし、全てのワークロードｗについて、以下のステップＳ５１～Ｓ５４を実行する。すなわち、ポート情報設定部３９は、設定情報テーブル３８を参照し、ワークロードｗに該当する帯域設定の値ｖを取り出す（ステップＳ５１）。そして、ポート情報設定部３９は、値ｖが０より大きいか否かを判定する（ステップＳ５２）。値ｖが０より大きいと判定した場合には（ステップＳ５２；Ｙｅｓ）、ポート情報設定部３９は、ワークロードｗの接続されたポートに帯域制御の値ｖを設定する（ステップＳ５３）。一方、値ｖが０より大きくないと判定した場合には（ステップＳ５２；Ｎｏ）、ポート情報設定部３９は、ワークロードｗの接続されたポートの帯域制御を無効化する（ステップＳ５４）。
【0060】
そして、ポート情報設定部３９は、ポート情報設定処理を終了する。
【0061】
このように、ポート情報設定部３９が、ワークロードｗについて、帯域計算部３７によって計算された帯域をワークロードｗの接続されたポートに設定するので、エージェント１３は、情報処理システム１全体において公平な帯域で通信を行うことが可能になる。
【0062】
図１５は、帯域計算の一例を示す図である。図１５において、情報処理システム１は、ノード１とノード２を有する。また、Ｗｔｉはテナントｔのノードｉにおけるワークロードであり、ＲｔｉはＷｔｉの生成するトラフィックのレートであり、Ｃｊはスイッチポートｊの帯域幅である。なお、テナントは２つであり、テナントＴ1、テナントＴ2で識別される２つのテナントにＬ1、Ｌ2の割合の帯域が割り当てられているとする。
【0063】
ここで、ワークロードＷ１１の生成するトラフィックの帯域がＲ１１であったとする。ワークロードＷ２１の生成するトラフィックの帯域がＲ２１であったとする。そして、ノード１側のＣ１の帯域が不足したとする。すると、帯域計算部３７は、ワークロードＷ１１の割り当て帯域ｒ１１を、式（３）を用いて計算する。式（３）は、以下のように求められる。
【0064】
まず、２つのテナントにＬ１、Ｌ２の割合の帯域が割り当てられているので、（ｒ１１＋Ｒ１２）：（ｒ２１＋Ｒ２２）は、Ｌ１：Ｌ２の関係となる。したがって、ｒ２１は、以下の式（５）となる。
ｒ２１＝Ｌ２（ｒ１１＋Ｒ１２）／Ｌ1－Ｒ２２・・・（５）
ｒ２１＝Ｌ２（ｒ１１＋Ｒ１２）／Ｌ1－Ｒ２２・・・（５）
【0065】
そして、Ｃ１は、（ｒ１１＋ｒ２１）であるので、Ｃ１は、式（５）を用いて、以下の式（６）のように変換できる。
Ｃ１＝ｒ１１＋Ｌ２（ｒ１１＋Ｒ１２）／Ｌ1－Ｒ２２・・・（６）
さらに、Ｃ１は、以下の式（７）（８）のように変換できる。
Ｃ１＝（１＋Ｌ２／Ｌ１）ｒ１１＋Ｒ１２Ｌ２／Ｌ１－Ｒ２２・・・（７）
（１＋Ｌ２／Ｌ１）ｒ１１＝Ｃ１－Ｒ１２Ｌ２／Ｌ１＋Ｒ２２・・・（８）
Ｃ１＝ｒ１１＋Ｌ２（ｒ１１＋Ｒ１２）／Ｌ1－Ｒ２２・・・（６）
さらに、Ｃ１は、以下の式（７）（８）のように変換できる。
Ｃ１＝（１＋Ｌ２／Ｌ１）ｒ１１＋Ｒ１２Ｌ２／Ｌ１－Ｒ２２・・・（７）
（１＋Ｌ２／Ｌ１）ｒ１１＝Ｃ１－Ｒ１２Ｌ２／Ｌ１＋Ｒ２２・・・（８）
【0066】
そうすると、ｒ１１は、以下の式（９）となる。
ｒ１１＝Ｌ１Ｃ１／（Ｌ１＋Ｌ２）－Ｌ２Ｒ12／（Ｌ１＋Ｌ２）＋Ｌ１Ｒ２２／（Ｌ１＋Ｌ２）・・・（９）
すなわち、ｒ１１は、式（３）と同じ式となる。
ｒ１１＝Ｌ１Ｃ１／（Ｌ１＋Ｌ２）－Ｌ２Ｒ12／（Ｌ１＋Ｌ２）＋Ｌ１Ｒ２２／（Ｌ１＋Ｌ２）・・・（９）
すなわち、ｒ１１は、式（３）と同じ式となる。
【0067】
同様に、ｒ２１は、以下の式（１０）となる。
ｒ２１＝Ｌ２Ｃ１／（Ｌ１＋Ｌ２）＋Ｌ２Ｒ１２／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２２／（Ｌ１＋Ｌ２）・・・（１０）
すなわち、ｒ２１は、式（４）と同じ式となる。
ｒ２１＝Ｌ２Ｃ１／（Ｌ１＋Ｌ２）＋Ｌ２Ｒ１２／（Ｌ１＋Ｌ２）－Ｌ１Ｒ２２／（Ｌ１＋Ｌ２）・・・（１０）
すなわち、ｒ２１は、式（４）と同じ式となる。
【0068】
なお、この一例では、ノード１について、テナントに１つのワークロードが存在する。しかしながら、ノード１には、テナントに複数のワークロードが存在する場合がある。かかる場合には、帯域計算部３７は、式（９）のように、テナントごとに帯域を割り当てた後、割り当てた帯域を複数のワークロードで分配すれば良い（図１１のループ２を参照）。
【0069】
ここで、図１５で示した帯域計算について、具体的に数値を入力して効果を示す。例えば、２つのテナントに割り当てられる帯域の割合Ｌ１，Ｌ２を各「１」とする。ノード１における仮想ポート１４およびノード２における仮想ポート１４のそれぞれの帯域幅Ｃ１、Ｃ２を各「１０」とする。ノード１におけるテナントＴ1のワークロードＷ１１のトラフィックのレートＲ１１を「１０」とする。ノード１におけるテナントＴ２のワークロードＷ２1のトラフィックのレートＲ２１を「１０」とする。ノード２におけるテナントＴ1のワークロードＷ12のトラフィックのレートＲ１２を「４」とする。ノード２におけるテナントＴ２のワークロードＷ22のトラフィックのレートＲ２２を「２」とする。
【0070】
このような状況の下、r１１は、式（９）に基づいて計算される。すなわち、r１１は、「４」と計算される。また、ｒ２１は、式（１０）に基づいて計算される。すなわち、ｒ２１は、「６」と計算される。すると、テナントＴ1に割り当てられる帯域Ｒ１は、ｒ１１とＲ１２とを加算した値となるので、「８」（＝４＋４）となる。また、テナントＴ２に割り当てられる帯域Ｒ２は、ｒ２１とＲ２２とを加算した値となるので、「８」（＝６＋２）となる。つまり、帯域計算処理は、テナント間で公平になるように帯域を計算できる。
【0071】
なお、ノード１内の情報のみで帯域を計算する場合では、r１１、ｒ２１は、それぞれ以下の式に基づいて計算される。
ｒ１１＝Ｌ1Ｃ1／（Ｌ1＋Ｌ2）
ｒ２１＝Ｌ2Ｃ1／（Ｌ1＋Ｌ2）
ｒ１１＝Ｌ1Ｃ1／（Ｌ1＋Ｌ2）
ｒ２１＝Ｌ2Ｃ1／（Ｌ1＋Ｌ2）
【0072】
すなわち、r１１、r２１は、それぞれ「５」と計算される。すると、テナントＴ1に割り当てられる帯域Ｒ１は、ｒ１１とＲ１２とを加算した値となるので、「９」（＝５＋４）となる。また、テナントＴ２に割り当てられる帯域Ｒ２は、ｒ２１とＲ２２とを加算した値となるので、「７」（＝５＋２）となる。つまり、ノード１内の情報のみで帯域を計算する処理では、テナント間で不公平に帯域を計算してしまう。
【0073】
［実施例１の効果］
このようにして、上記実施例１では、複数のテナントそれぞれについて複数のワークロードを備えるノード１０であって、各ノード１０は、以下の処理を行う。ノード１０は、他のノード１０におけるテナントごとの使用帯域情報を取得する。ノード１０は、自装置で処理するワークロード１１に分配する帯域を、取得された使用帯域情報に基づいて計算する。ノード１０は、計算された帯域を設定する。かかる構成によれば、情報処理システム１は、情報処理システム１全体としてテナント間で公平になるように帯域を制御することができる。
このようにして、上記実施例１では、複数のテナントそれぞれについて複数のワークロードを備えるノード１０であって、各ノード１０は、以下の処理を行う。ノード１０は、他のノード１０におけるテナントごとの使用帯域情報を取得する。ノード１０は、自装置で処理するワークロード１１に分配する帯域を、取得された使用帯域情報に基づいて計算する。ノード１０は、計算された帯域を設定する。かかる構成によれば、情報処理システム１は、情報処理システム１全体としてテナント間で公平になるように帯域を制御することができる。
【0074】
また、上記実施例１では、ノード１０は、他のノード１０とテナントごとの使用帯域情報を交換することで他のノード１０におけるテナントごとの使用帯域情報を取得する。かかる構成によれば、ノード１０は、他のノード１０のテナントごとの使用帯域情報を取得することで、情報処理システム１全体としてテナント間で公平になるように帯域を制御することが可能になる。
【0075】
また、上記実施例１では、ノード１０は、情報処理システム１において各テナントに分配される帯域の割合に基づいて、自装置で処理するワークロードに分配する帯域を計算する。かかる構成によれば、ノード１０は、情報処理システム１全体においてテナント間で公平な帯域の割り当てを行うことが可能になる。
【0076】
また、上記実施例１では、ノード１０は、帯域を設定するワークロード１１を決定し、決定されたワークロード１１について計算された帯域を設定する。かかる構成によれば、ノード１０は、情報処理システム１全体において公平な帯域で通信を行うことが可能になる。
【実施例2】
【0077】
ところで、実施例１では、ノード１０は、自装置で処理するワークロード１１に分配する帯域を、他のノード１０におけるテナントごとの使用帯域情報に基づいて計算し、計算された帯域を設定すると説明した。しかしながら、ハードウェアリソースの制約により、帯域を設定できるポート数には、限りがある場合がある。
【0078】
そこで、実施例２では、ノード１０が、帯域を設定できる仮想ポート１４を決定し、決定した仮想ポート１４に対して計算された帯域を設定する場合を説明する。
【0079】
ここで、情報処理システム１による帯域制御について、図１６を参照して説明する。図１６は、実施例２に係る情報処理システムによる帯域制御を説明する図である。図１６に示すように、コンテナ環境では、１台のノード１０に１００を超えるコンテナ（ワークロード１１）が実行される。ところが、ハードウェアリソースの制約により、帯域を設定できる仮想ポート１４の数には、限りがある。そこで、ノード１０は、帯域を設定できる仮想ポート１４を決定し、決定した仮想ポート１４に対して計算された帯域を設定する。
【0080】
図１７は、実施例２に係るエージェントの機能構成を示す図である。なお、図３に示すエージェント１３と同一の構成については同一符号を示すことで、その重複する構成および動作の説明ついては省略する。実施例１と実施例２とが異なるところは、帯域制御決定部４１を追加した点にある。なお、帯域制御決定部４１は、決定部の一例である。
【0081】
帯域制御決定部４１は、帯域制御をするワークロード１１を決定する。例えば、帯域制御決定部４１は、自ノード１０の全てのワークロード１１について、ワークロード１１の帯域を制御するか否かを決定する。一例として、帯域制御決定部４１は、各ワークロード１１について、利用帯域の値から設定帯域（割り当て帯域）の値を引いて得られる値のリストを生成する。そして、帯域制御決定部４１は、ｎが帯域制御可能な数とした場合に、生成したリストの中で上位ｎ個のワークロード１１を帯域制御対象のワークロード１１として決定する。そして、帯域制御決定部４１は、設定情報テーブル３８の帯域設定であって帯域制御対象でないワークロード１１の帯域設定の値を「０」に設定する。すなわち、帯域制御決定部４１は、帯域制御対象でないワークロード１１の帯域設定を無効化する。
【0082】
帯域計算部３７は、帯域制御決定部４１によって決定された帯域制御対象のワークロード１１について、ワークロード１１に分配する帯域を計算する。例えば、図１５で示した帯域計算の図において、ノード１にテナント１に関するワークロードＷ１３があるとする。そして、帯域制御可能な数ｎを２とした場合に、ワークロードＷ１３が帯域制御対象のワークロード１１として決定されず、ワークロードＷ１１とＷ２１が帯域制御対象のワークロード１１として決定されたとする。すると、帯域計算部３７は、式（９）を用いて、テナント１に属するワークロードの帯域をｒ１１と計算する。帯域計算部３７は、式（１０）を用いて、テナント２に属するワークロードの帯域をｒ２１と計算する。そして、帯域計算部３７は、ワークロードＷ１１の帯域設定の値を、ｒ１１からワークロードＷ１３の帯域設定の値「０」を引いた値とすれば良い。なお、帯域計算部３７は、ワークロードＷ１３の帯域設定は無効化されているので、帯域計算しない。
【0083】
【0084】
図１８Ａに示すように、帯域制御決定部４１は、自ノード１０について、各ワークロード１１の帯域を制御するか否かを決定する（ステップＳ６１）。なお、各ワークロード１１の帯域を制御するか否かを決定する処理のフローを示すフローチャートは、後述する。
【0085】
そして、帯域制御決定部４１は、ワークロード１１をｗとし、全てのワークロードｗについて、以下のステップＳ６２～Ｓ６３を実行する。すなわち、帯域制御決定部４１は、ワークロードｗについて、帯域制御するか否かを判定する（ステップＳ６２）。帯域制御しないと判定した場合には（ステップＳ６２；Ｎｏ）、帯域制御決定部４１は、ワークロードｗに対応する設定情報テーブル３８の帯域設定の値を「０」に設定する（ステップＳ６３）。一方、帯域制御すると判定した場合には（ステップＳ６２；Ｙｅｓ）、帯域制御決定部４１は、以降で帯域計算をすべく、帯域制御決定処理を終了する。
【0086】
図１８Ｂに示すように、帯域制御決定部４１は、設定情報テーブル３８、利用状況テーブル３２を参照し、自ノード１１（ｉ）の帯域超過情報Ｄｔｉ（＝Ｂｔｉ－Ａｔｉ）を計算する（ステップＳ７１）。ここでは、Ｂｔｉは、ノードｉにおけるワークロードＷｔｉの帯域利用状況（利用状況テーブル３２の利用帯域）を示す。Ａｔｉは、ノードｉにおけるワークロードＷｔｉの帯域設定情報（設定情報テーブル３８の帯域設定）を示す。
【0087】
そして、帯域制御決定部４１は、Ｄｔｉが大きい順にｎ個選択し、対応するワークロードＷｔｉを帯域制御対象と決定する（ステップＳ７２）。
【0088】
［実施例２の効果］
このようにして、上記実施例２では、ノード１０は、自ノード１０で処理するワークロード１１の数が帯域の設定可能数を超える場合には、以下の処理を行う。ノード１０は、ワークロード１１で用いられる仮想ポート１４について、帯域の使用情報から帯域の設定情報を引いた差分に応じて、仮想ポート１４に対応するワークロード１１を帯域制御対象として決定する。そして、ノード１０は、帯域制御対象として決定したワークロード１１に分配する帯域を計算する。かかる構成によれば、ハードウェアリソースの制約により、帯域を設定できるポート数に限界がある場合であっても、ノード１０は、自ノード１０で処理するワークロード１１に分配する帯域を、テナント間で公平になるように制御することが可能となる。
このようにして、上記実施例２では、ノード１０は、自ノード１０で処理するワークロード１１の数が帯域の設定可能数を超える場合には、以下の処理を行う。ノード１０は、ワークロード１１で用いられる仮想ポート１４について、帯域の使用情報から帯域の設定情報を引いた差分に応じて、仮想ポート１４に対応するワークロード１１を帯域制御対象として決定する。そして、ノード１０は、帯域制御対象として決定したワークロード１１に分配する帯域を計算する。かかる構成によれば、ハードウェアリソースの制約により、帯域を設定できるポート数に限界がある場合であっても、ノード１０は、自ノード１０で処理するワークロード１１に分配する帯域を、テナント間で公平になるように制御することが可能となる。
【実施例3】
【0089】
ところで、実施例１では、ノード１０は、テナントごとの使用帯域情報を、他のノード１０と交換することで、他のノード１０におけるテナントごとの使用帯域情報を取得すると説明した。しかしながら、ノード１０は、これに限定されず、テナントごとの使用帯域情報を、複数のノード１０が共通にアクセスできる記憶領域を介して他のノード１０と交換することで、他のノード１０におけるテナントごとの使用帯域情報を取得するとしても良い。
【0090】
そこで、実施例３では、ノード１０が、テナントごとの使用帯域情報を、複数のノード１０が共通にアクセスできる記憶領域を介して他のノード１０と交換することで、他のノード１０におけるテナントごとの使用帯域情報を取得する場合を説明する。
【0091】
ここで、実施例３に係る情報処理システム１の構成について、図１９を参照して説明する。図１９は、実施例３に係る情報処理システムの構成の一例を示す図である。図１９に示すように、情報処理システム１は、複数のノード１０に加えて、Ｓｔａｔ５１を有する。Ｓｔａｔ５１は、複数のノード１０が共通にアクセスできる記憶領域である。各ノード１０のエージェント１３は、Ｓｔａｔ５１を複数のノード１０が共通にアクセスできる記憶領域として自身のテナントごとの使用帯域情報を書き込む。そして、エージェント１３は、Ｓｔａｔ５１から他のノード１０のテナントごとの使用帯域情報を読み込む。
【0092】
例えば、エージェント１３の情報交換部３３は、自ノード１０の利用状況テーブル３２が記憶する情報に基づいてローカルテーブル３４を作成する。そして、情報交換部３３は、Ｓｔａｔ５１を介して、他のノード１０のエージェント１３とローカルテーブル３４の内容を交換する。そして、情報交換部３３は、他のノード１０の帯域使用状況とローカルテーブル３４が記憶する情報に基づいてグローバルテーブル３５を作成する。
【0093】
［実施例３の効果］
このようにして、上記実施例３では、ノード１０は、他のノード１０とテナントごとの使用帯域情報を、複数のノード１０が共通にアクセスできる記憶領域を介して交換することで他のノード１０におけるテナントごとの使用帯域情報を取得する。かかる構成によれば、ノード１０は、複数のノード１０が共通にアクセスできる記憶領域を用いることで、他のノード１０とのテナントごとの使用帯域情報を、ノード１０が必要なときに取得することができる。
このようにして、上記実施例３では、ノード１０は、他のノード１０とテナントごとの使用帯域情報を、複数のノード１０が共通にアクセスできる記憶領域を介して交換することで他のノード１０におけるテナントごとの使用帯域情報を取得する。かかる構成によれば、ノード１０は、複数のノード１０が共通にアクセスできる記憶領域を用いることで、他のノード１０とのテナントごとの使用帯域情報を、ノード１０が必要なときに取得することができる。
【実施例4】
【0094】
ところで、実施例１では、各ノード１０のエージェント１３が、利用状況テーブル３２が記憶する情報に基づいてローカルテーブル３４を作成し、他のノード１０のエージェント１３とローカルテーブル３４の内容を交換し、グローバルテーブル３５を作成する。そして、エージェント１３は、グローバルテーブル３５を用いて、自ノード１０の各仮想ポート１４の割り当て帯域を、情報処理システム１全体でテナントに割り当てられる帯域が設定された割合になるように計算して各テナントのワークロード１１に分配する。また、実施例３では、各ノード１０が、テナントごとの使用帯域情報を、複数のノード１０が共通にアクセスできる記憶領域を介して他のノード１０と交換する。しかしながら、情報処理システム１は、これに限定されず、複数のノード１０が共通にアクセスできる記憶領域に加えて、この記憶領域を処理するコントローラを備える場合であっても良い。
【0095】
そこで、実施例４では、情報処理システム１が、複数のノード１０が共通にアクセスできる記憶領域に加えて、この記憶領域を処理するコントローラを備える場合を説明する。
【0096】
ここで、実施例４に係る情報処理システム１の構成について、図２０を参照して説明する。図２０は、実施例４に係る情報処理システムの構成の一例を示す図である。図２０に示すように、情報処理システム１は、複数のノード１０に加えて、Ｓｔａｔ５１およびコントローラ６１を有する。Ｓｔａｔ５１は、複数のノード１０が共通にアクセスできる記憶領域である。コントローラ６１は、Ｓｔａｔ５１を管理し、各ノード１０の帯域分配を計算して、各ノード１０のエージェント１３に指示を出す。
【0097】
例えば、各ノード１０において、エージェント１３の情報交換部３３が、自ノード１０の利用状況テーブル３２が記憶する情報に基づいてローカルテーブル３４を作成して、自ノード１０のローカルテーブル３４をＳｔａｔ５１に書き込む。そして、コントローラ６１は、各ノード１０のローカルテーブル３４からグローバルテーブル３５を作成する。そして、コントローラ６１は、グローバルテーブル３５を用いて、ノード１０ごとに、テナントに割り当てる帯域を、情報処理システム１全体でテナントに割り当てられる帯域が設定された割合になるように計算する。そして、コントローラ６１は、各ノードに、計算したテナントに割り当てる帯域を通知する。そして、各ノード１０において、エージェント１３の帯域計算部３７が、通知されたテナントに割り当てる帯域を用いて、各テナントのワークロード１１に分配する。
【0098】
［実施例４の効果］
このようにして、上記実施例４では、コントローラ６１が、Ｓｔａｔ５１から各ノード１０におけるテナントごとの使用帯域情報を取得し、取得された使用帯域情報に基づいて各ノード１０におけるテナントごとの帯域を計算する。そして、コントローラ６１は、計算された各ノード１０におけるテナントごとの帯域を、各ノード１０に通知する。また、各ノード１０は、自ノード１０におけるテナントごとの使用帯域情報をＳｔａｔ５１に書き込む。そして、各ノード１０は、通知された自ノード１０におけるテナントごとの帯域に基づいて、自ノード１０で処理するワークロード１１に分配する帯域を計算する。そして、各ノード１０は、計算された帯域を仮想ポート１４に設定する。かかる構成によれば、コントローラ６１が各ノード１０におけるテナントごとの帯域を計算するので、各ノード１０は、帯域計算処理にかかる負荷を軽減することができる。また、コントローラ６１が、一括して各ノード１０におけるテナントごとの帯域を計算するので、情報処理システム１全体としてテナント間で公平になるように確実に帯域を制御することが可能になる。
このようにして、上記実施例４では、コントローラ６１が、Ｓｔａｔ５１から各ノード１０におけるテナントごとの使用帯域情報を取得し、取得された使用帯域情報に基づいて各ノード１０におけるテナントごとの帯域を計算する。そして、コントローラ６１は、計算された各ノード１０におけるテナントごとの帯域を、各ノード１０に通知する。また、各ノード１０は、自ノード１０におけるテナントごとの使用帯域情報をＳｔａｔ５１に書き込む。そして、各ノード１０は、通知された自ノード１０におけるテナントごとの帯域に基づいて、自ノード１０で処理するワークロード１１に分配する帯域を計算する。そして、各ノード１０は、計算された帯域を仮想ポート１４に設定する。かかる構成によれば、コントローラ６１が各ノード１０におけるテナントごとの帯域を計算するので、各ノード１０は、帯域計算処理にかかる負荷を軽減することができる。また、コントローラ６１が、一括して各ノード１０におけるテナントごとの帯域を計算するので、情報処理システム１全体としてテナント間で公平になるように確実に帯域を制御することが可能になる。
【0099】
なお、各ノード１０は、既知のパーソナルコンピュータ、ワークステーション等の情報処理装置に、上記したエージェント１３等の機能を搭載することによって実現することができる。
【0100】
また、実施例１～４では、ワークロード１１が、例えば、コンテナ環境におけるコンテナの場合について説明したが、本発明はこれに限定されるものではなく、例えば、テナントに属するアプリケーションの場合にも適用することができる。
【0101】
また、図示したノード１０の各構成要素は、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、ノード１０の分散・統合の具体的態様は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。例えば、帯域計算部３７を、テナントごとの帯域を計算する第１の帯域計算部と、テナントごとの帯域から各テナントのワークロード１１に割り当てる帯域を計算する第２の帯域計算部とに分散しても良い。また、ポート情報取得部３１とポート情報設定部３９とを統合しても良い。また、各種テーブルを記憶する記憶部（図示せず）をノード１０の外部装置としてネットワーク経由で接続するようにしても良い。
【0102】
以上の実施例１～４を含む実施形態に関し、さらに以下の付記を開示する。
【0103】
（付記１）複数のテナントそれぞれについて複数のワークロードを備える情報処理装置であって、
他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理装置。
他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理装置。
【0104】
（付記２）前記取得部は、他の情報処理装置とテナントごとの使用帯域情報を交換することで他の情報処理装置におけるテナントごとの使用帯域情報を取得する
ことを特徴とする付記１に記載の情報処理装置。
ことを特徴とする付記１に記載の情報処理装置。
【0105】
（付記３）前記取得部は、他の情報処理装置とテナントごとの使用帯域情報を、前記複数の情報処理装置が共通にアクセスできる記憶領域を介して交換することで他の情報処理装置におけるテナントごとの使用帯域情報を取得する
ことを特徴とする付記１に記載の情報処理装置。
ことを特徴とする付記１に記載の情報処理装置。
【0106】
（付記４）前記計算部は、前記情報処理システムにおいて各テナントに分配される帯域の割合に基づいて、自装置で処理するワークロードに分配する帯域を計算することを特徴とする付記１、２又は３に記載の情報処理装置。
【0107】
（付記５）帯域を設定するワークロードを決定する決定部をさらに有し、
前記設定部は、前記決定部により決定されたワークロードについて前記計算部により計算された帯域を設定する
ことを特徴とする付記１～４のいずれか１つに記載の情報処理装置。
前記設定部は、前記決定部により決定されたワークロードについて前記計算部により計算された帯域を設定する
ことを特徴とする付記１～４のいずれか１つに記載の情報処理装置。
【0108】
（付記６）前記決定部は、自装置で処理するワークロードの数が帯域の設定可能数を超える場合には、ワークロードで用いられるポートについて、帯域の使用情報から帯域の設定情報を引いた差分に応じて、ポートに対応するワークロードを帯域制御対象として決定する
ことを特徴とする付記５に記載の情報処理装置。
ことを特徴とする付記５に記載の情報処理装置。
【0109】
（付記７）複数のテナントそれぞれについて複数のワークロードを複数の情報処理装置（１０）を用いて処理する情報処理システムにおいて、
各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理システム。
各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算する計算部と、
前記計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理システム。
【0110】
（付記８）複数のテナントそれぞれについて複数のワークロードを複数の情報処理装置を用いて処理する情報処理システムにおける帯域制御方法であって、
各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得し、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算し、
前記計算部により計算された帯域を設定する
処理を実行することを特徴とする帯域制御方法。
各情報処理装置は、
他の情報処理装置におけるテナントごとの使用帯域情報を取得し、
自装置で処理するワークロードに分配する帯域を前記取得部により取得された使用帯域情報に基づいて計算し、
前記計算部により計算された帯域を設定する
処理を実行することを特徴とする帯域制御方法。
【0111】
（付記９）複数のテナントそれぞれについて複数のワークロードを備える複数の情報処理装置と、コントローラと、共通の記憶領域を有する情報処理システムであって、
前記コントローラは、
前記記憶領域から各情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
前記取得部によって取得された使用帯域情報に基づいて各情報処理装置におけるテナントごとの帯域を計算する第１の計算部と、
前記第１の計算部によって計算された各情報処理装置におけるテナントごとの帯域を、各情報処理装置に通知する通知部と、を有し、
各情報処理装置は、
自装置におけるテナントごとの使用帯域情報を前記記憶領域に書き込む書込部と、
前記通知部によって通知された自装置におけるテナントごとの帯域に基づいて、自装置で処理するワークロードに分配する帯域を計算する第２の計算部と、
前記第２の計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理システム。
前記コントローラは、
前記記憶領域から各情報処理装置におけるテナントごとの使用帯域情報を取得する取得部と、
前記取得部によって取得された使用帯域情報に基づいて各情報処理装置におけるテナントごとの帯域を計算する第１の計算部と、
前記第１の計算部によって計算された各情報処理装置におけるテナントごとの帯域を、各情報処理装置に通知する通知部と、を有し、
各情報処理装置は、
自装置におけるテナントごとの使用帯域情報を前記記憶領域に書き込む書込部と、
前記通知部によって通知された自装置におけるテナントごとの帯域に基づいて、自装置で処理するワークロードに分配する帯域を計算する第２の計算部と、
前記第２の計算部により計算された帯域を設定する設定部と
を有することを特徴とする情報処理システム。
【符号の説明】
【0112】
１ 情報処理システム
２ ネットワーク
１０ ノード
１１ ワークロード
１２ 仮想スイッチ
１３ エージェント
１４ 仮想ポート
３１ ポート情報取得部
３２ 利用状況テーブル
３３ 情報交換部
３４ ローカルテーブル
３５ グローバルテーブル
３６ 帯域設定テーブル
３７ 帯域計算部
３８ 設定情報テーブル
３９ ポート情報設定部
４１ 帯域制御決定部
２ ネットワーク
１０ ノード
１１ ワークロード
１２ 仮想スイッチ
１３ エージェント
１４ 仮想ポート
３１ ポート情報取得部
３２ 利用状況テーブル
３３ 情報交換部
３４ ローカルテーブル
３５ グローバルテーブル
３６ 帯域設定テーブル
３７ 帯域計算部
３８ 設定情報テーブル
３９ ポート情報設定部
４１ 帯域制御決定部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10A】
【図10B】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18A】
【図18B】
【図19】
【図20】
【図21】