特許 7578735 クラスター、クラスターの管理方法およびクラスター管理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-28

(45)【発行日】2024-11-06

(54)【発明の名称】クラスター、クラスターの管理方法およびクラスター管理プログラム

(51)【国際特許分類】

   G06F 11/20 20060101AFI20241029BHJP

   H04L 61/4511 20220101ALI20241029BHJP

【ＦＩ】

G06F11/20 623

H04L61/4511

【請求項の数】 12

(21)【出願番号】P 2023014130

(22)【出願日】2023-02-01

(65)【公開番号】P2024109375

(43)【公開日】2024-08-14

【審査請求日】2023-07-04

(73)【特許権者】

【識別番号】000005108

【氏名又は名称】株式会社日立製作所

(74)【代理人】

【識別番号】110001689

【氏名又は名称】青稜弁理士法人

(72)【発明者】

【氏名】金城 教幸

【審査官】田中 幸雄

(56)【参考文献】

【文献】特開２００７－１５６５６９（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１５／０２９５８３４（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ １１／２０

Ｈ０４Ｌ ６１／４５１１

(57)【特許請求の範囲】

【請求項1】

ネットワークに接続されているクライアント端末からの要求に応じて実行するプログラムを格納する記憶部と、前記プログラムを実行するプロセッサと、を有する複数のノードを備えるクラスターにおけるクラスターの管理方法であって、
前記プロセッサは、
代替クラスターが格納している少なくとも１つの代替プログラムを、クラスターが格納している少なくとも１つの対象プログラムの代替で実行する場合に、
前記クライアント端末から送信された前記対象プログラムへの要求を取得すると、
前記対象プログラムへの要求に応じて前記代替プログラムを実行するように、前記対象プログラムへの要求を前記代替クラスターに転送する、要求転送処理を実行する、
クラスターの管理方法。

【請求項2】

請求項１に記載のクラスターの管理方法であって、
前記クラスターは、少なくとも１つのワーカーポッドを有しており、
前記要求転送処理にて、全ての前記ワーカーポッドのプログラムへの要求を、前記対象プログラムへの要求として、前記代替クラスターに転送する、
クラスターの管理方法。

【請求項3】

請求項２に記載のクラスターの管理方法であって、
前記クラスター及び前記代替クラスターは、それぞれ異なるＩＰアドレスが割り当てられており、
ＤＮＳサーバは、前記クラスターのドメイン名に対して前記クラスターのＩＰアドレスを対応付けたＤＮＳレコードを保存しており、
前記プロセッサは、さらに、
代替クラスターが有する代替プログラムを、前記対象プログラムの代替で実行する場合に、
前記ＤＮＳサーバに保存されている前記ＤＮＳレコードを、前記クラスターのドメイン名に対して前記代替クラスターのＩＰアドレスを対応付けたＤＮＳレコードに書き換える旨の情報を含むＤＮＳレコード更新情報を、前記ＤＮＳサーバに送信するＤＮＳレコード変更処理を、実行する、
クラスターの管理方法。

【請求項4】

請求項３に記載のクラスターの管理方法であって、
前記代替クラスターのプロセッサは、
代替クラスターが有する代替プログラムを、前記対象プログラムの代替で実行する場合に、
前記代替プログラムの実行に問題がある否かを判定する代替プログラム判定処理を実行し、
前記代替プログラム判定処理にて、前記代替プログラムの実行に問題があると判定した場合には、ＤＮＳレコード更新処理を実行し、
前記代替プログラム判定処理にて、前記代替プログラムの実行に問題があると判定した場合には、転送を停止する旨の情報を含む転送中止情報を、前記クラスターに送信する、転送中止要求処理を実行し、
前記クラスターの前記プロセッサは、さらに、
前記転送中止情報を受け取ると、前記対象プログラムへの要求を前記代替クラスターに転送する前記要求転送処理の実行を停止する、転送中止処理を実行する、
クラスターの管理方法。

【請求項5】

請求項４に記載のクラスターの管理方法であって、
前記要求転送処理は、前記クラスターに設けられた転送ポッドが実行し、
前記クラスターの前記プロセッサは、
所定の時間間隔の間に、前記クライアント端末から前記クラスターに送信された前記対象プログラムへの要求のデータ量を取得し、
取得した前記クライアント端末から前記クラスターに送信された前記対象プログラムへの要求のデータ量が、所定のデータ送信量下限値よりも小さい場合に、転送ポッドを削除する、転送ポッド削除処理を実行する
クラスターの管理方法。

【請求項6】

請求項１に記載のクラスターの管理方法であって、
前記要求転送処理は、前記クラスターに設けられた転送ポッドが実行する、
クラスターの管理方法。

【請求項7】

請求項６に記載のクラスターの管理方法であって、
前記プロセッサは、さらに、
所定の時間間隔の間に、前記クライアント端末から前記クラスターに送信された前記対象プログラムへの要求のデータ量を取得し、
取得した前記クライアント端末から前記クラスターに送信された前記対象プログラムへの要求のデータ量が、所定のデータ送信量下限値よりも小さい場合に、転送ポッドを削除する、転送ポッド削除処理を実行する
クラスターの管理方法。

【請求項8】

請求項１に記載のクラスターの管理方法であって、
前記代替クラスターのプロセッサは、
代替クラスターが有する代替プログラムを、前記対象プログラムの代替で実行する場合に、
前記代替プログラムの実行に問題がある否かを判定する代替プログラム判定処理を実行し、
前記代替プログラム判定処理にて、前記代替プログラムの実行に問題があると判定した場合には、転送を停止する旨の情報を含む転送中止情報を、前記クラスターに送信する、転送中止要求処理を実行し、
前記クラスターの前記プロセッサは、さらに、
前記転送中止情報を受け取ると、前記対象プログラムへの要求に応じて前記代替プログラムを実行するように、前記対象プログラムへの要求を前記代替クラスターに転送する前記要求転送処理の実行を停止する、転送中止処理を実行する、
クラスターの管理方法。

【請求項9】

請求項８に記載のクラスターの管理方法であって、
前記代替クラスターの前記プロセッサは、
前記代替プログラムのエラーの頻度を取得し、
取得した前記代替プログラムのエラーの頻度が、所定のエラー頻度上限値よりも高い場合に、前記代替プログラムの実行に問題があると判定する、第１代替プログラム問題検出処理を実行する、
クラスターの管理方法。

【請求項10】

請求項８に記載のクラスターの管理方法であって、
前記代替クラスターの前記プロセッサは、
前記クラスターから前記代替クラスターに転送される前記対象プログラムへの要求のデータ量を取得し、
取得した前記クラスターから前記代替クラスターに転送される前記対象プログラムへの要求の転送速度が、所定のデータ転送速度上限値よりも大きい場合に、前記代替プログラムの実行に問題があると判定する、第２代替プログラム問題検出処理を実行する、
クラスターの管理方法。

【請求項11】

ネットワークに接続されているクライアント端末からの要求に応じて実行するプログラムを格納する記憶部と、前記プログラムを実行するプロセッサと、を有する複数のノードを備えるクラスターであって、
代替クラスターが格納している少なくともの１つの代替プログラムを、クラスターが格納している少なくとも１つの対象プログラムの代替で実行する場合に、
前記クライアント端末から送信された前記対象プログラムへの要求を取得すると、
前記対象プログラムへの要求に応じて前記代替プログラムを実行するように、前記対象プログラムへの要求を前記代替クラスターに転送する、要求転送処理を実行する、
クラスター。

【請求項12】

ネットワークに接続されているクライアント端末からの要求に応じて実行するプログラムを格納する記憶部と、前記プログラムを実行するプロセッサと、を有する複数のノードを備えるクラスターに実行させるクラスター管理プログラムであって、
前記プロセッサに、
前記クライアント端末から送信された対象プログラムへの要求を取得すると、
前記対象プログラムへの要求に応じて代替プログラムを実行するように、前記対象プログラムへの要求を代替クラスターに転送する、要求転送処理を実行させる、
クラスター管理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、クラスター、クラスターの管理方法およびクラスター管理プログラムに関する。

【背景技術】

【0002】

クラスターと呼ばれるシステムが用いられている。クラスターは、複数のコンピュータをまとめて、あたかも１台のコンピュータの様に動作させるシステムである。多くの場合、クラスターは、ネットワークに接続されている。そして、ユーザは、クライアント端末にネットワークを介してクラスターに接続させ、クライアント端末を操作して、クラスターのソフトウェアを使用することができる。

【0003】

クラスターの構成要素であるコンピュータのうちのいくつかが障害などで故障して停止する場合であっても、ユーザは、クライアント端末を使用して、クラスターを使用できる。そして、故障したコンピュータの修理や交換を行う間も、ユーザは、クライアント端末を使用して、クラスターを使用できる。

【0004】

クラスターの構成要素であるサーバで作動するプログラムを変更する場合がある。例えば、サーバのオペレーティングシステムのアップデートや、サーバのアプリケーションのアップデートや、新たにサーバにソフトウェアを導入する場合がある。そして、クラスターのサーバで作動するプログラムの構成を変更する場合に、不具合が生じることを抑制する技術がある。例えば、特許文献１に記載されている技術では、コンテナを用いる本番サーバで、使用しているコンテナイメージのバージョンよりも、新しいバージョンのコンテナイメージがリリースされている場合に、新しいバージョンのコンテナイメージを検証用サーバで使用する。そして、特許文献１に記載されている技術では、その際に、新しいバージョンのコンテナイメージの動作の監視と検証を行う。従って、特許文献１に記載されている技術を用いれば、本番サーバで使用しているバージョンよりも新しいバージョンのコンテナイメージを、本番サーバに用いる前に、新しいバージョンのコンテナイメージが問題なく使用できるか否かの検証はできる。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２０１９－５６９８６号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

ところで、特許文献１に記載されている技術では、本番サーバから、本番サーバの構成の一部を変更した別のサーバに切り替えて使用する場合を想定していない。従って、特許文献１に記載されている技術を用いても、本番サーバから、本番サーバの構成の一部を変更した別のサーバに切り替えて使用する場合に生じる問題に対して、対処できない。

【0007】

例えば、従来、第１のクラスターを、第２のクラスターに切り替えて使用する場合には、次の様に、ＤＮＳサーバに保存されている第１のクラスターのドメイン名のＤＮＳレコード（以下、「第１ＤＮＳレコード」と称する）を書き換える。切り替える前は、ＤＮＳサーバの、第１ＤＮＳレコードには、第１のクラスターのドメイン名と、第１のクラスターのＩＰアドレスと、が対応付けて保存されている。クライアント端末が、第１のクラスターのドメイン名を用いて、第１のクラスターにアクセスしようとすると、ＤＮＳサーバの第１ＤＮＳレコードに保存されている第１のクラスターのＩＰアドレスが参照され、クライアント端末は第１のクラスターにアクセスできる。

【0008】

切り替える際、ＤＮＳサーバの第１ＤＮＳレコードに、第１のクラスターのドメイン名と、第２のクラスターのＩＰアドレスとを対応付けて保存する。その結果、クライアント端末が、第１のクラスターのドメイン名を用いて、第１のクラスターにアクセスしようとすると、ＤＮＳサーバの第１ＤＮＳレコードに保存されている第２のクラスターのＩＰアドレスが参照され、クライアント端末は第２のクラスターにアクセスできる。この様に、第１ＤＮＳレコードに保存されているＩＰアドレスを変更することで、第１のクラスターから第２のクラスターに切り替えることができる。

【0009】

ところで、数多くのＤＮＳサーバが存在する。全てのＤＮＳサーバの第１ＤＮＳレコードを、直ちに変更することは容易ではない。全てのＤＮＳサーバの、第１ＤＮＳレコードの変更が完了するまで、クライアント端末が、第１のクラスターのドメイン名を用いて、第１のクラスターにアクセスしようとして、第１ＤＮＳレコードが変更されていないＤＮＳサーバの、第１ＤＮＳレコードを参照し、第１のクラスターにアクセスするおそれがある。従って、一部のＤＮＳサーバの第１ＤＮＳレコードを書き換えたとしても、全てのＤＮＳサーバの、第１ＤＮＳレコードの変更が完了するまで、第１クラスターから第２クラスターに切り替えることが完了しない。

【0010】

さらに、クライアント端末は、通常、ＤＮＳレコードを保存しているキャッシュを有する。そして、キャッシュに保存されている第１ＤＮＳレコードの変更が完了するまで、クライアント端末は、第１のクラスターにアクセスしようとすると、第１のクラスターにアクセスする。すなわち、クライアント端末のキャッシュに保存されている第１ＤＮＳレコードの変更が完了するまで、第１のクラスターから第２のクラスターに切り替えることが完了しない。

【0011】

この様に、従来のクラスターを切り替える方法では、ＤＮＳサーバのＤＮＳレコードを変更しても、直ちにクラスターの切り替えが完了できないおそれがある。また、従来のクラスターを切り替える方法では、クラスター単位の切り替えはできても、アプリケーション（プログラム）単位での切り替えはできない。

【0012】

そこで、本発明の目的は、クラスターの切り替えをより早く行うことができる、クラスター、クラスターの管理方法およびクラスター管理プログラムを提供することを目的とする。

【課題を解決するための手段】

【0013】

上記目的を達成するため、本発明のクラスターの管理方法の一態様は、ネットワークに接続されているクライアント端末からの要求に応じて実行するプログラムを格納する記憶部と、前記プログラムを実行するプロセッサと、を有する複数のノードを備えるクラスターにおけるクラスターの管理方法であって、前記プロセッサは、代替クラスターが格納している少なくとも１つの代替プログラムを、クラスターが格納している少なくとも１つの対象プログラムの代替で実行する場合に、前記クライアント端末から送信された前記対象プログラムへの要求を取得すると、前記対象プログラムへの要求に応じて前記代替プログラムを実行するように、前記対象プログラムへの要求を前記代替クラスターに転送する、要求転送処理を実行する。

【0014】

また、本発明のクラスターの一態様は、ネットワークに接続されているクライアント端末からの要求に応じて実行するプログラムを格納する記憶部と、前記プログラムを実行するプロセッサと、を有する複数のノードを備えるクラスターであって、代替クラスターが格納している少なくトンの１つの代替プログラムを、クラスターが格納している少なくとも１つの対象プログラムの代替で実行する場合に、前記クライアント端末から送信された前記対象プログラムへの要求を取得すると、前記対象プログラムへの要求に応じて前記代替プログラムを実行するように、前記対象プログラムへの要求を前記代替クラスターに転送する、要求転送処理を実行する。

【発明の効果】

【0015】

本発明の代表的な形態によれば、クラスターの切り替えをより早く行うことができる。前述した以外の課題、構成及び効果は、以下の実施例の説明により明らかにされる。

【図面の簡単な説明】

【0016】

【図1】図１は、実施例のクラスターシステムの構成の概要を示すブロック図である。

【図2】図２は、ワーカーノード２００Ａのハードウェア構成例を示すブロック図である。

【図3】図３は、ワーカーポッド２３０の機能構成例を示すブロック図である。

【図4】図４は、リクエストキューに格納されているデータの一例を示す図である。

【図5】図５は、クラスター１Ａを使用し、代替クラスター１Ｂを使用していない状態（切り替え前の状態）の構成を説明する説明図である。

【図6】図６は、実施例の（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順の例を示すフローチャートである。

【図7】は、ステップＳ１０１にて、転送ポッド２１０Ａ、２１０Ｂがデプロイされた状態を示す説明図である。

【図8】図８は、ステップＳ１０２にて、ロードバランサー３００Ａ、３００Ｂおよびルーターポッド２２０Ａ、２２０Ｂが設定された状態を示す説明図である。

【図9】図９は、ステップＳ１０３にて、転送ポッド２１０Ａが設定された状態を示す説明図である。

【図10】図１０は、ステップＳ１０７にて、ＤＮＳサーバ６００が設定された状態を示す説明図である。

【図11】図１１は、ステップＳ１１０にて、ロードバランサー３００Ａ、３００Ｂが設定され、転送ポッド２１０Ａ、転送ポッド２１０Ｂが削除された状態を示す説明図である。

【図12】図１２は、（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順を実行する前の状態（切り替え前の状態）の構成を説明する説明図である。

【図13】図１３は、（Ｂ）クラスター１Ａのワーカーポッド２３０Aｘを、代替クラスター１Ｂのワーカーポッド２３０Bに切り替える手順の例を示すフローチャートである。

【図14】図１４は、ステップＳ２０１にて、転送ポッド２１０Ａ、２１０Ｂがデプロイされた状態を示す説明図である。

【図15】図１５は、ステップＳ２０２にて、ロードバランサー３００Ａ、３００Ｂおよびルーターポッド２２０Ａ、２２０Ｂが設定された状態を示す説明図である。

【図16】図１６は、ステップＳ２０３にて、転送ポッド２１０Ａが設定された状態を示す説明図である。

【発明を実施するための形態】

【0017】

以下、本発明の実施例を、図面を用いて説明する。ただし、本発明は以下に示す実施例の記載内容に限定して解釈されるものではない。本発明の思想ないし趣旨から逸脱しない範囲で、その具体的構成を変更し得ることは当業者であれば容易に理解される。

【0018】

以下に説明する発明の構成において、同一又は類似する構成又は機能には同一の符号を付し、重複する説明は省略する。

【0019】

本明細書等における「第１」、「第２」、「第３」等の表記は、構成要素を識別するために付するものであり、必ずしも、数又は順序を限定するものではない。

【0020】

本明細書等において、各種情報の例として、「ＸＸテーブル」との表現にて説明することがあるが、「ＸＸリスト」、「ＸＸキュー」等のデータ構造で表現されてもよい。また、「ＸＸテーブル」は、「ＸＸ情報」としてもよい。識別情報について説明する際に、「識別情報」、「識別子」、「名」、「ＩＤ」、「番号」等の表現を用いるが、これらについてはお互いに置換が可能である。

【0021】

＜＜システム構成＞＞
図１は、実施例のクラスターシステム１０００の構成の概要を示すブロック図である。図１に示すように、クラスターシステム１０００は、クラスター１Ａと、ロードバランサー３００Ａと、代替クラスター１Ｂと、ロードバランサー３００Ｂとを有する。クラスターシステム１０００は、ネットワークＮＷを介して、クライアント端末５００と、６００と、に接続されている。

【0022】

クラスターは、複数のコンピュータをまとめて、あたかも１台のコンピュータの様に動作させるシステムである。クラスターは、複数のノードを有する。ノードは、仮想的または物理的なコンピュータである。また、ノードには、コンテナやポッドが作成されている。コンテナは、ソフトウェアを含む仮想的なＯＳ環境である。また、ポッドは、１つ以上のコンテナを含む。ポッドには、１つ以上のボリュームを含むものもある。

【0023】

クラスター１Ａは、ロードバランサー３００Ａや、クライアント端末５００や、ＤＮＳサーバ６００や、代替クラスター１Ｂに、ネットワークＮＷを介して接続されている。代替クラスター１Ｂは、クラスター１Ａの代替に使用するクラスターである。代替クラスター１Ｂは、クラスター１Ａと同様の構成を有する。

【0024】

クラスター１Ａは、１つのマスターノード１００Ａと、複数のワーカーノード２００Ａと、を有する。クラスター１Ａは、クラスターの一種である。本実施例では、クラスター１Ａは、クラスターの例として、仮想的なＯＳ環境（コンテナ）をポッドの形態で複数のサーバに作成して運用するクラスターである。

【0025】

マスターノード１００Ａおよびワーカーノード２００Ａは、ノードであり、記憶装置およびプロセッサを備えている。マスターノード１００Ａおよびワーカーノード２００Ａは、例えばＰＣやサーバコンピューターのような一般的な情報処理装置で実現できる。また、ワーカーノード２００Ａは１つ以上あればよい。

【0026】

マスターノード１００Ａは、複数のワーカーノード２００Ａを管理する。図１に示すように、ワーカーノード２００Ａそれぞれには、ポッドとして、転送ポッド２１０Ａや、ルーターポッド２２０Ａや、ワーカーポッド２３０Ａ１～ワーカーポッド２３０Ａｎが作成（デプロイ）されている。ワーカーポッド２３０Ａ～ワーカーポッド２３０Ａｎの総称を「ワーカーポッド２３０Ａ」と呼ぶ。ワーカーポッド２３０Ａ１～２３０Ａｎそれぞれの数は、１つ以上であればよい。

【0027】

マスターノード１００Ａは、複数のワーカーノード２００Ａのポッド（転送ポッド２１０Ａや、ルーターポッド２２０Ａや、ワーカーポッド２３０Ａ）を管理するコントロールプレーン１１０Ａを有する。コントロールプレーン１１０Ａを構成するプログラムは１つ以上のプログラムを実行して実現されている。

【0028】

転送ポッド２１０Ａは、クラスター１Ａの代替として代替クラスター１Ｂを用いる場合に、ワーカーポッド２３０Ａに対するクライアント端末５００からの要求を、代替クラスター１Ｂに転送するポッドである。ルーターポッド２２０Ａは、クライアント端末５００からの要求を、負荷が比較的かかっていないワーカーポッド２３０Ａに転送するポッドである。ルーターポッド２２０Ａの転送先は、ルーターポッド２２０Ａが作成されているワーカーノード２００Ａ以外のワーカーノード２００Ａのワーカーポッド２３０Ａでもよい。ワーカーポッド２３０Ａはプログラムを含み、クライアント端末５００からの要求に応じて、処理を実行するポッドである。転送ポッド２１０Ａと、代替クラスター１Ｂの転送ポッド２１０Ｂとの総称を「転送ポッド２１０」と呼ぶ。また、ルーターポッド２２０Ａと、代替クラスター１Ｂのルーターポッド２２０Ｂとの総称を、「ルーターポッド２２０」と呼ぶ。

【0029】

ロードバランサー３００Ａは、クライアント端末５００からの要求を、負荷が比較的かかっていないワーカーノード２００Ａに転送する。ロードバランサー３００Ａと、ロードバランサー３００Ｂとの総称を「ロードバランサー３００」と呼ぶ。

【0030】

マスターノード１００Ａおよびワーカーノード２００Ａそれぞれと、ロードバランサー３００Ａ、３００Ｂと、クライアント端末５００と、ＤＮＳサーバ６００とには、ＩＰアドレスが割り当てられている。そして、ノードに作成されているポッド（転送ポッド２１０Ａ、２１０Ｂと、ルーターポッド２２０Ａ、２２０Ｂと、ワーカーポッド２３０Ａ、２３０Ｂ）それぞれには、ポート番号が割り当てられている。

【0031】

クラスター１Ａに対してドメイン名（例えば、「ｅｘａｍｐｌｅ．ｃｏｍ」）が割り当てられている。また、複数のワーカーポッド２３０Ａのうちで、同一構成のワーカーポッド２３０Ａには、同一のサブドメイン名（例えば、「ａｐｐ１」）が割り当てられている。

【0032】

ＤＮＳサーバ６００において、クラスター１Ａのドメイン名（例えば、「ｅｘａｍｐｌｅ．ｃｏｍ」）は、ロードバランサー３００ＡのＩＰアドレスに対応付けられている。そして、ワーカーポッド２３０Ａのドメイン名は、クラスター１Ａのドメイン名に、ワーカーポッド２３０Ａのサブドメイン名を加えたドメイン名（例えば、「ａｐｐ１．ｅｘａｍｐｌｅ．ｃｏｍ」）である。ワーカーポッド２３０Ａ１～ワーカーポッド２３０Ａｎのうちで、ユーザが使用するワーカーポッド２３０は、ワーカーポッド２３０のドメイン名（例えば、「ａｐｐ１．ｅｘａｍｐｌｅ．ｃｏｍ」）で指定できる。

【0033】

ＤＮＳサーバ６００は、クラスターのドメイン名に対して、クラスターのＩＰアドレスを対応付けた情報を含むＤＮＳレコード６０１を保存している。図１等では、多数のＤＮＳレコードを省略して、クラスター１Ａに関するＤＮＳレコード６０１を示した。

【0034】

ネットワークＮＷは、有線のネットワークでもよいし、無線のネットワークでもよい。また、ネットワークＮＷは、インターネットのようなグローバルネットワークであってもよい。

【0035】

ユーザは、次の様に、クライアント端末５００を操作して、ワーカーポッド２３０Ａの有するプログラムを実行することができる。ここで、ワーカーポッド２３０Ａの有するプログラムに対する命令と、ワーカーポッド２３０Ａのドメイン名とを含む情報を、「ワーカーポッド２３０Ａへの要求」と称する。

【0036】

ユーザは、クライアント端末５００を操作して、ワーカーポッド２３０Ａへの要求を、ワーカーポッド２３０Ａのドメイン名（例えば、「ａｐｐ１．ｅｘａｍｐｌｅ．ｃｏｍ」）で指定される宛先に送信する。すると、ＤＮＳサーバ６００等が参照されて、ワーカーポッド２３０への要求は、ロードバランサー３００Ａに送信される。

【0037】

ロードバランサー３００Ａは、ワーカーポッド２３０Ａへの要求を受信すると、ワーカーノード２００Ａのうちで、負荷が比較的かかっていないワーカーノード２００Ａに、ワーカーポッド２３０Ａへの要求を転送する。

【0038】

ワーカーノード２００Ａでは、通常、ルーターポッド２２０Ａがワーカーポッド２３０Ａへの要求を受信して、ワーカーポッド２３０Ａへの要求で指定されているワーカーポッド２３０Ａのうちで、負荷が比較的かかっていないワーカーポッド２３０Ａに、ワーカーポッド２３０Ａへの要求を送信する。

【0039】

ワーカーポッド２３０Ａは、ワーカーポッド２３０Ａへの要求を受信すると、ワーカーポッド２３０Ａへの要求に応じた処理を、ワーカーポッド２３０Ａが有するプログラムが実行する。

【0040】

代替クラスター１Ｂをクラスター１Ａの代わりに試しに使用して、代替クラスター１Ｂに問題がなければ、クラスター１Ａの代わりに代替クラスター１Ｂを使用する場合がある。この様に、代替クラスター１Ｂをクラスター１Ａの代わりに用いる場合には、以下で詳細を説明するように、ワーカーノード２００Ａでは、ルーターポッド２２０Ａがワーカーポッド２３０Ａへの要求を受信する代わりに、転送ポッド２１０Ａが受信する。

【0041】

代替クラスター１Ｂは、クラスター１Ａと同様に、コントロールプレーン１１０Ｂを有するマスターノード１００Ｂと、転送ポッド２１０Ｂ、ルーターポッド２２０Ｂ、ワーカーポッド２３０Ｂ（２３０Ｂ１～２３０Ｂｎ）を有するワーカーノード２００Ｂと、を備えている。

【0042】

＜ワーカーノード２００Ａのハードウェア構成、図２＞
図２はワーカーノード２００Ａのハードウェア構成例を示すブロック図である。図２に示すように、ワーカーノード２００Ａは、プロセッサ２１、主記憶装置２２、副記憶装置２３、入力装置２４、出力装置２５、ネットワークＩ／Ｆ２６、これらを接続するバス２７を有している。ワーカーノード２００Ａは、例えばＰＣやサーバコンピューターのような一般的な情報処理装置で実現できる。

【0043】

プロセッサ２１は、副記憶装置２３に記憶されたデータやプログラムを主記憶装置２２に読み出して、プログラムによって定められた処理を実行する。図１を用いて上述した転送ポッド２１０Ａは、副記憶装置２３に記憶されている転送ポッドイメージ２１０Ａａを主記憶装置２２にデプロイ（配置）したものである。同様に、ルーターポッド２２０Ａ、ワーカーポッド２３０Ａ１～２３０Ａｎは、副記憶装置２３に記憶されているルーターポッドイメージ２２０Ａａ、ワーカーポッドイメージ２３０Ａ１ａ～２３０Ａｎａを、主記憶装置２２にデプロイ（配置）したものである。これらのポッド（転送ポッド２１０Ａ、ルーターポッド２２０Ａ、ワーカーポッド２３０Ａ１～２３０Ａｎ）のデプロイは、マスターノード１００Ａのコントロールプレーン１１０Ａの指示によって実行される。

【0044】

また、転送ポッドイメージ２１０Ａａ、ルーターポッドイメージ２２０Ａａ、ワーカーポッドイメージ２３０Ａ１ａ～２３０Ａｎａが保存されている場所は、ワーカーノード２００Ａとした。転送ポッドイメージ２１０Ａａ、ルーターポッドイメージ２２０Ａａ、ワーカーポッドイメージ２３０Ａ１ａ～２３０Ａｎａが保存されている場所は、コントロールプレーン１１０Ａが読み出せる場所であればよい。

【0045】

主記憶装置２２は、ＲＡＭなどで、揮発性記憶素子を有し、プロセッサ２１が実行するプログラムや、データを記憶する。

【0046】

副記憶装置２３は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などで、不揮発性記憶素子を有し、プログラムやデータ等を記憶する装置である。副記憶装置２３は、転送ポッドイメージ２１０Ａａ、ルーターポッドイメージ２２０Ａａ、ワーカーポッドイメージ２３０Ａ１ａ～２３０Ａｎａ等を格納している。

【0047】

入力装置２４は、キーボードやマウスなどのユーザの操作を受け付ける装置であり、ユーザの操作により入力された情報を取得する。出力装置２５は、ディスプレイなど情報を出力する装置であり、例えば画面への表示により情報をユーザに提示する。なお、ワーカーノード２００Ａは、入力装置２４および出力装置２５を兼ねるタッチパネルを備えても良い。

【0048】

ネットワークＩ／Ｆ２６は、マスターノード１００Ａ、ロードバランサー３００Ａ、３００Ｂ、代替クラスター１Ｂ、クライアント端末５００、ＤＮＳサーバ６００等の装置と、ネットワークＮＷを介してデータを送受信可能なインターフェース（送受信装置）である。ワーカーノード２００Ａは、ネットワークＩ／Ｆ２６を用いて、ネットワークＮＷに接続されている、マスターノード１００Ａ、ロードバランサー３００Ａ、３００Ｂ、代替クラスター１Ｂ、クライアント端末５００、ＤＮＳサーバ６００等の装置とデータの送受信を行うことができる。

【0049】

マスターノード１００Ａと、代替クラスター１Ｂのマスターノード１００Ｂおよびワーカーノード２００Ｂと、ロードバランサー３００Ａ、３００Ｂと、クライアント端末５００と、ＤＮＳサーバ６００とは、ワーカーノード２００Ａと同様に、例えばＰＣやサーバコンピューターのような一般的な情報処理装置で実現できる。

【0050】

＜転送ポッド２１０の構成、図３＞
図３は、転送ポッド２１０Ａの構成の概要を示すブロック図である。図３に示すように、転送ポッド２１０Ａは、受信ＡＰＩ部２１１と、キュー部２１２と、転送ＡＰＩ部２１３と、プロキシ部２１４と、監視部２１５とを備えている。

【0051】

受信ＡＰＩ部２１１は、転送ポッド２１０Ａに向けて送信されたワーカーポッド２３０Ａへの要求を受信する。受信ＡＰＩ部２１１は、ワーカーポッド２３０Ａへの要求の受信を待機する。受信ＡＰＩ部２１１は、ワーカーポッド２３０Ａへの要求を受信すると、受信したワーカーポッド２３０Ａへの要求を、キュー部２１２のリクエストキューに保存する。

【0052】

キュー部２１２は、ワーカーポッド２３０Ａへの要求を保存するリクエストキューを有する。そしてキュー部２１２は、リクエストキューに保存したワーカーポッド２３０Ａへの要求を、転送ＡＰＩ部２１３の問い合わせに応じて、転送ＡＰＩ部２１３に送信する。

【0053】

図４は、リクエストキューに格納されているデータの一例を示す図である。図４に示すように、リクエストキューに保存されている情報には、ワーカーポッド２３０Ａへの要求を受信した受信時刻４０１と、ワーカーポッド２３０Ａへの要求を送信した送信元ホストのアドレス４０２と、ワーカーポッド２３０Ａへの要求を転送ポッド２１０Ａに転送した転送元のポート番号４０３と、転送先のワーカーポッド２３０Ａのドメイン名である宛先ホスト４０４と、転送先のワーカーポッド２３０Ａのポート番号である宛先ポート４０５と、ワーカーポッド２３０Ａへの要求に含まれるワーカーポッド２３０Ａへの命令であるリクエストメソッド４０６と、ワーカーポッド２３０Ａのドメイン名に関するリクエストＵＲＬ４０７と、を含む。

【0054】

転送ＡＰＩ部２１３は、図３に示すように、キュー部２１２のリクエストキューに、未処理のワーカーポッド２３０Ａへの要求が保存されているか否かを問い合わせる。そして、転送ＡＰＩ部２１３は、未処理のワーカーポッド２３０Ａへの要求がリクエストキューに保存されている場合には、リクエストキューから未処理のワーカーポッド２３０Ａへの要求を取得して、プロキシ部２１４に送信する。

【0055】

プロキシ部２１４は、転送ＡＰＩ部２１３から、ワーカーポッド２３０Ａへの要求を受信する。また、監視部２１５から送信された転送先情報に基づいて算出した、ワーカーポッド２３０Ａへの要求の送信先に、受信したワーカーポッド２３０Ａへの要求を転送する。

【0056】

監視部２１５は、キュー部２１２、ワーカーポッド２３０Ａ、ロードバランサー３００Ａを監視する。すなわち、監視部２１５は、キュー部２１２のリクエストキューに蓄積されている未処理のワーカーポッド２３０Ａへの要求のデータ量をキュー部２１２から取得する。また、監視部２１５は、ワーカーポッド２３０Ａが有するプログラムを実行して発生するエラーの頻度を、ワーカーポッド２３０Ａから取得する。そして、監視部２１５は、クライアント端末５００からロードバランサー３００Ａ（クラスター１Ａ）に送信されたワーカーポッド２３０への要求（対象プログラムへの要求）のデータ量を、ロードバランサー３００Ａから取得する。

【0057】

また、監視部２１５は、未処理のワーカーポッド２３０Ａへの要求の転送先が「ロードバランサー３００」の旨を受信すると、未処理のワーカーポッド２３０Ａへの要求の転送先を「ロードバランサー３００」にする旨の転送先情報を、プロキシ部２１４に送信する。同様に、監視部２１５は、未処理のワーカーポッド２３０Ａへの要求の転送先を「ルーターポッド２２０Ａ」にする旨を受信すると、未処理のワーカーポッド２３０Ａへの要求の転送先を「ルーターポッド２２０Ａ」にする旨の転送先情報を、プロキシ部２１４に送信する。

【0058】

＜＜処理手順＞＞
次に、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順（図６～図１１参照）、（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順（図１２～図１６参照）について説明する。

【0059】

図５は、クラスター１Ａを使用し、代替クラスター１Ｂを使用していない状態（切り替え前の状態）の構成を説明する説明図である。図５に示すように、切り替え前の状態では、クラスター１Ａのおよび代替クラスター１Ｂには、転送ポッド２１０（転送ポッド２１０Ａ、２１０Ｂ）は作成されていない。

【0060】

＜（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順、図６～図１１＞
（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える場合には、次の場合がある。例えば、クラスター１Ａのコンテナ基盤のアップデートのために、クラスター１Ａのコンテナ基盤をアップデートしたシステムを代替クラスター１Ｂに構築する場合がある。そして、以下に説明するように、代替クラスター１Ｂをクラスター１Ａの代わりに試験的に使用して、代替クラスター１Ｂに問題がなければ、クラスター１Ａの代わりに代替クラスター１Ｂを使用する。

【0061】

クラスター１Ａを代替クラスター１Ｂに切り替える準備として、代替クラスター１Ｂの設定や構成の変更を完了した後に、以下に説明する、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順で、クラスター１Ａを代替クラスター１Ｂに切り替えることができる。
図６は、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順の例を示すフローチャートである。

【0062】

まず、クラスター１Ａに転送ポッド２１０Ａをデプロイし、代替クラスター１Ｂに転送ポッド２１０Ｂをデプロイする（ステップＳ１０１）。すなわち、クラスター１Ａでは、マスターノード１００Ａのコントロールプレーン１１０Ａは、ワーカーノード２００Ａそれぞれに対して、転送ポッドイメージ２１０Ａａ（図２参照）を用いて、転送ポッド２１０Ａをデプロイする。また、代替クラスター１Ｂでは、マスターノード１００Ｂのコントロールプレーン１１０Ｂは、ワーカーノード２００Ｂそれぞれで、転送ポッドイメージ２１０Ｂａ（図示省略）を用いて、転送ポッド２１０Ｂをデプロイする。

【0063】

図７は、ステップＳ１０１にて、転送ポッド２１０Ａ、２１０Ｂがデプロイされた状態を示す説明図である。ここで、クライアント端末５００が送信した、ワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ａが受信する。そして、ロードバランサー３００Ａは、ワーカーポッド２３０Ａへの要求を、ワーカーノード２００Ａのルーターポッド２２０Ａに送信する。ここで、転送ポッド２１０Ａは、ワーカーポッド２３０Ａへの要求を受信しない。ルーターポッド２２０Ａは、ワーカーポッド２３０Ａへの要求を、ワーカーポッド２３０Ａに転送する。ワーカーポッド２３０Ａは、ワーカーポッド２３０Ａへの要求に応じた処理を実行する。

【0064】

次に、クライアント端末５００が送信した、ワーカーポッド２３０Ａへの要求を、ロードバランサー３００Ａおよび転送ポッド２１０Ａを介して、ルーターポッド２２０Ａが受信するように、ロードバランサー３００Ａおよび転送ポッド２１０Ａを設定し、代替クラスター１Ｂのロードバランサー３００Ｂおよび転送ポッド２１０Ｂも同様に設定する（ステップＳ１０２）。

【0065】

図８は、ステップＳ１０２にて、ロードバランサー３００Ａ、３００Ｂおよびルーターポッド２２０Ａ、２２０Ｂが設定された状態を示す説明図である。ステップＳ１０２にて、クラスター１Ａでは、マスターノード１００Ａのコントロールプレーン１１０Ａは、転送ポッド２１０Ａが、ワーカーポッド２３０Ａへの要求を受信すると、受信したワーカーポッド２３０Ａへの要求をルーターポッド２２０Ａに送信するように、転送ポッド２１０Ａを設定する。この時点では、クライアント端末５００が送信した、ワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ａおよびルーターポッド２２０Ａを介して、ワーカーポッド２３０Ａに送信される。従って、この時点では、ワーカーポッド２３０Ａへの要求は、転送ポッド２１０Ａに送信されず、ワーカーポッド２３０Ａに送信されるため、ワーカーポッド２３０Ａは、ワーカーポッド２３０Ａへの要求に応じた処理を実行できる。

【0066】

さらに、マスターノード１００Ａのコントロールプレーン１１０Ａは、ロードバランサー３００Ａが、ワーカーポッド２３０Ａへの要求を受信すると、ロードバランサー３００Ａが、受信したワーカーポッド２３０Ａへの要求を転送ポッド２１０Ａに送信するように、ロードバランサー３００Ａを設定する。以上の結果、クライアント端末５００が送信したワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａおよびルーターポッド２２０Ａを介してワーカーポッド２３０Ａに送信される。

【0067】

また、代替クラスター１Ｂでは、上記と同様に、マスターノード１００Ｂのコントロールプレーン１１０Ｂが、転送ポッド２１０Ｂおよびロードバランサー３００Ｂを設定する。すなわち、マスターノード１００Ｂのコントロールプレーン１１０Ｂは、転送ポッド２１０Ｂが、ワーカーポッド２３０Ａへの要求を受信すると、受信したワーカーポッド２３０Ａへの要求をルーターポッド２２０Ｂに送信するように、転送ポッド２１０Ｂを設定する。また、マスターノード１００Ｂは、ロードバランサー３００Ｂが、ワーカーポッド２３０Ａへの要求を受信すると、ロードバランサー３００Ｂが、受信したワーカーポッド２３０Ａへの要求を転送ポッド２１０Ｂに送信するように、ロードバランサー３００Ｂを設定する。

【0068】

次に、クラスター１Ａにて、マスターノード１００Ａは、転送ポッド２１０Ａがワーカーポッド２３０Ａへの要求をロードバランサー３００Ｂに転送するように、転送ポッド２１０Ａを設定する（ステップＳ１０３）。

【0069】

図９は、ステップＳ１０３にて、転送ポッド２１０Ａが設定された状態を示す説明図である。図９に示すように、クライアント端末５００が送信したワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａおよびロードバランサー３００Ｂ、転送ポッド２１０Ｂ、ルーターポッド２２０Ｂを介して、代替クラスター１Ｂのワーカーポッド２３０Ｂに転送される。そして、ワーカーポッド２３０Ｂは、ワーカーポッド２３０Ａへの要求に応じた処理を実行する。

【0070】

次に、代替クラスター１Ｂのワーカーノード２００Ｂそれぞれで、転送ポッド２１０Ｂは、ワーカーポッド２３０が有する代替プログラムの実行に問題があるか否かを判定する（ステップＳ１０４）。代替プログラムとは、ワーカーポッド２３０Ａへの要求に応じて実行されるワーカーポッド２３０Ｂのプログラムである。代替プログラムの実行に問題があると判定した場合（ステップＳ１０４：Ｙｅｓ）は、ステップＳ１０５に進み、続くステップＳ１０６にて代替クラスター１Ｂの使用を停止する。一方、代替プログラムの実行に問題がないと判定した場合（ステップＳ１０４：Ｎｏ）は、ステップＳ１０７に進む。

【0071】

転送ポッド２１０Ｂは、次の２つの条件を少なくとも一つを満たす場合に、ワーカーポッド２３０が有する代替プログラムの実行に問題があると判定（ステップＳ２０４：Ｙｅｓ）する。また、転送ポッド２１０Ｂは、次の２つの条件を両方とも満たさない場合に、ワーカーポッド２３０が有する代替プログラムの実行に問題がないと判定（ステップＳ１０４：Ｎｏ）する。
（条件１）ワーカーポッド２３０Ｂが有するプログラム（代替プログラム）を実行して発生するエラーの頻度が、所定のエラー頻度上限値よりも高い場合。この場合は、代替クラスター１Ｂのワーカーポッド２３０Ｂに問題がある。図３を用いて上述した様に、転送ポッド２１０Ｂそれぞれの監視部２１５は、自身が存在するワーカーノード２００Ｂのワーカーポッド２３０Ｂ１～２３０Ｂｎ（全てのワーカーポッド２３０Ｂ）のエラーの頻度を取得する。ここで、ワーカーポッド２３０Ｂ１～２３０Ｂｎ（全てのワーカーポッド２３０Ｂ）それぞれのエラーの頻度は、ワーカーポッド２３０Ｂ１～２３０Ｂｎ（全てのワーカーポッド２３０Ｂ）それぞれの有する代替プログラムのエラー頻度である。さらに、監視部２１５は、取得したエラー頻度（代替プログラムのエラーの頻度）が、所定のエラー頻度上限値よりも高い場合に、代替プログラムの実行に問題があると判定する。そして、ワーカーポッド２３０Ｂ１～２３０Ｂｎの監視部１５のうちで、少なくとも１つの監視部１５が、代替プログラムの実行に問題があると判定した場合に、「代替プログラムの実行に問題がある」と判定する。
（条件２）クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａへの要求（対象プログラムへの要求）の転送速度が、所定のデータ転送速度上限値よりも大きい場合。図３を用いて上述した様に、転送ポッド２１０Ｂの監視部２１５は、キュー部２１２のリクエストキューに保存されているワーカーポッド２３０Ａへの要求のデータ量を、クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａへの要求（対象プログラムへの要求）の転送速度とみなす。そして、監視部２１５は、キュー部２１２に保存されているワーカーポッド２３０Ａへの要求のデータ量が、所定のデータ転送速度上限値よりも大きい場合に、ワーカーポッド２３０Ｂ１～２３０Ｂｎ（全てのワーカーポッド２３０Ｂ）が、ワーカーポッド２３０Ａへの要求に応じた処理をしきれてないと考えることができるため、監視部２１５は、代替プログラムの実行に問題があると判定する。ここで、ワーカーポッド２３０Ｂ１～２３０Ｂｎの監視部１５のうちで、すべての監視部１５が、所定の時間間隔で代替プログラムの実行に問題があるか否かを判定する。そしてワーカーポッド２３０Ｂ１～２３０Ｂｎの監視部１５のうちで、すべての少なくとも１つの監視部１５が、所定の時間間隔の間に、代替プログラムの実行に問題があると判定した場合に、「代替プログラムの実行に問題がある」と判定する。

【0072】

次に、代替クラスター１Ｂの転送ポッド２１０Ｂのプロキシ部２１４は、転送を停止する旨の情報を含む転送中止情報を、クラスター１Ａの転送ポッド２１０Ａに向けて送信する（ステップＳ１０５）。ステップＳ１０５の処理は、ステップＳ１０４にて、転送ポッド２１０Ｂが、ワーカーポッド２３０が有する代替プログラムの実行に問題があると判定した場合（ステップＳ１０４：Yes）に実行される処理である。ステップＳ１０５では、代替クラスター１Ｂの転送ポッド２１０Ｂのプロキシ部２１４は、クラスター１Ａのマスターノード１００Ａのコントロールプレーン１１０Ａに向けて、転送を停止する旨の情報を含む転送中止情報を送信する。コントロールプレーン１１０Ａは、転送中止情報を受信すると、ワーカーノード２００Ａそれぞれの転送ポッド２１０Ａに向けて転送中止情報を送信する。

【0073】

次に、クラスター１Ａのワーカーノード２００それぞれの転送ポッド２１０Ａは、コントロールプレーン１１０Ａから、転送中止情報を受信すると、転送ポッド２１０Ａが受信したワーカーポッド２３０Ａへの要求をルーターポッド２２０Ａに転送するように設定して、転送ポッド２１０Ａが受信したワーカーポッド２３０Ａへの要求をロードバランサー３００Ｂ（代替クラスター１Ｂ）に転送することを中止し、処理を終了する（ステップＳ１０６）。これにより、図８を用いて上述したように、ワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａ、ルーターポッド２２０Ａを介して、ワーカーポッド２３０Ａに送信される。

【0074】

以上で説明したステップＳ１０４からステップＳ１０６の処理によって、ワーカーノード２００Ｂの転送ポッド２１０Ｂが、代替プログラムの実行に問題があると判定した場合（ステップＳ１０４：Ｙｅｓ）に、ワーカーポッド２３０Ａへの要求がクラスター１Ａから代替クラスター１Ｂに転送することを中止する。そして、クラスター１Ａのワーカーノード２００のワーカーポッド２３０Ａ１～２３０Ａｎ（全てのワーカーポッド２３０Ａ）で、ワーカーポッド２３０Ａへの要求に応じた処理を実行する。

【0075】

次に、ＤＮＳサーバ６００のＤＮＳレコード６０１を、クラスター１Ａのドメイン名と代替クラスター１ＢのＩＰアドレスとを対応付けるように変更する（ステップＳ１０７）。すなわち、代替クラスター１Ｂの転送ポッド２１０Ｂうちで、少なくとも１つの転送ポッド２１０Ｂは、ＤＮＳサーバ６００に保存されているＤＮＳレコード６０１を、クラスターのドメイン名に対して代替クラスター１ＢのＩＰアドレスを対応付けたＤＮＳレコードに書き換える旨の情報を含むＤＮＳレコード更新情報を、ＤＮＳサーバ６００に送信する。ＤＮＳサーバ６００は、ＤＮＳレコード更新情報を受信すると、ＤＮＳレコード６０１を、クラスター１Ａのドメイン名と代替クラスター１ＢのＩＰアドレスとを対応付けるように変更する。

【0076】

ステップＳ１０７のＤＮＳレコード６０１（クラスター１Ａのドメイン名と、ＩＰアドレスとを対応づけて保存しているレコード）を変更する処理によって、クライアント端末５００が、ワーカーポッド２３０Ａへの要求を送信する送信先を、クラスター１Ａから代替クラスター１Ｂに変更する。その結果、クラスター１Ａのワーカーポッド２３０Ａへの要求に対する処理を実行するクラスターが、クラスター１Ａから代替クラスター１Ｂに切り替わる。

【0077】

しかし、ＤＮＳサーバ６００として、数多くのＤＮＳサーバが存在するため、全てのＤＮＳサーバのＤＮＳレコード６０１を直ちに変更することは容易ではない。全てのＤＮＳサーバの、ＤＮＳレコード６０１の変更が完了するまで、クライアント端末５００が、ワーカーポッド２３０Ａへの要求（クラスター１Ａのドメイン名を含む）を送信しても、ＤＮＳレコード６０１が変更されていないＤＮＳサーバの、ＤＮＳレコード６０１を参照し、クラスター１Ａにアクセスするおそれがある。従って、ステップＳ１０７の処理を実行することで、クライアント端末５００が、ワーカーポッド２３０Ａへの要求を送信する送信先を、クラスター１Ａから代替クラスター１Ｂに変更したとしても、全てのＤＮＳサーバの、ＤＮＳレコード６０１の変更が完了するまでは、クラスター１Ａから代替クラスター１Ｂに切り替えることが完了しない。

【0078】

これに対して、ステップＳ１０３の処理の実行後は、クラスター１Ａに向けて送信された、全てのワーカーポッド２３０Ａへの要求を、転送ポッド２１０Ａが、代替クラスター１Ｂに転送する。このため、ステップＳ１０３の処理を実行することで、ワーカーポッド２３０Ａへの要求に対する処理を実行するクラスターを、クラスター１Ａから代替クラスター１Ｂに、直ちに切り替えることができる。

【0079】

ステップＳ１０３にて、ワーカーポッド２３０Ａへの要求に対する処理を実行するクラスターを、クラスター１Ａから代替クラスター１Ｂに直ちに切り替えた後に、ステップＳ１０４にて、ワーカーポッド２３０の代替プログラムの実行に問題がないと判定した場合（ステップＳ１０４：Ｎｏ）には、ステップＳ１０７の処理を実行する。ステップＳ１０７の処理によって、クライアント端末５００が、ワーカーポッド２３０Ａへの要求を送信する送信先を、クラスター１Ａから代替クラスター１Ｂに変更する。このため、ステップＳ１０７の処理の後、必要な時間（例えば、数十分）が経過後転送ポッド２１０Ａが、ワーカーポッド２３０Ａへの要求を転送する必要がなくなる。

【0080】

また、ワーカーポッド２３０の代替プログラムの実行に問題がないと判定した場合（ステップＳ１０４：Ｎｏ）に、ＤＮＳサーバ６００のＤＮＳレコード６０１を変更するかわりに、ステップＳ１０５およびステップＳ１０６にて、ワーカーポッド２３０Ａのワーカーポッド２３０Ａへの要求の転送を中止することで、ワーカーポッド２３０Ａを用いて、ワーカーポッド２３０Ａへの要求に対する処理を実行するクラスターを、代替クラスター１Ｂからクラスター１Ａに切り替える（ステップＳ１０５およびＳ１０６）。ここで、転送ポッド２１０Ａおよび転送ポッド２１０Ｂの設定を変更することで、代替クラスター１Ｂからクラスター１Ａへの切り替えるため、切り替えは比較的速やかに完了できる。

【0081】

図１０は、ステップＳ１０７にて、ＤＮＳサーバ６００が設定された状態を示す説明図である。図１０に示すように、ＤＮＳサーバ６００のＤＮＳレコード６０１は、クラスター１Ａのドメイン名と代替クラスター１ＢのＩＰアドレスとを対応付けた情報を保存している。

【0082】

次に、クラスター１Ａが、ワーカーポッド２３０への要求を受信しているか否かを判定する（ステップＳ１０８）。クラスター１Ａが、ワーカーポッド２３０への要求を受信していると判定した場合（ステップＳ１０８：Ｙｅｓ）は、ステップＳ１０９に進む。一方、クラスター１Ａが、ワーカーポッド２３０への要求を受信していないと判定した場合（ステップＳ１０８：Ｎｏ）は、ステップＳ１１０に進み、クラスター１Ａの転送ポッド２１０Ａ、２１０Ｂを削除する。

【0083】

ここで、クラスター１Ａのワーカーポッド２３０Ａ１～２３０Ａｎ（全てのワーカーポッド２３０Ａ）のうちの少なくとも１つの監視部２１５（図３参照）は、所定の時間間隔の間に、クライアント端末５００からロードバランサー３００Ａ（クラスター１Ａ）に送信された対象プログラムへの要求のデータ量を、ロードバランサー３００Ａを監視して取得する。そして、監視部２１５は、取得したクライアント端末５００からロードバランサー３００Ａ（クラスター１Ａ）に送信された対象プログラムへの要求のデータ量が、所定のデータ送信量下限値よりも小さい場合に、クラスター１Ａが、ワーカーポッド２３０への要求を受信していないと判定する。一方、監視部２１５は、取得したクライアント端末５００からクラスター１Ａに送信された対象プログラムへの要求のデータ量が、所定のデータ送信量下限値以上の場合に、クラスター１Ａが、ワーカーポッド２３０への要求を受信していると判定する。

【0084】

次に、クラスター１Ａの転送ポッド２１０Ａの監視部２１５は、所定時間待機し、ステップＳ１０８の処理を実行する（ステップＳ１０９）。ここで、ステップＳ１０８およびステップＳ１０９の処理を繰り返すことで、クラスター１Ａが、ワーカーポッド２３０への要求を受信していないと判定（ステップＳ１０８：Ｎｏ）できるまで、所定時間毎に、ステップＳ１０８にてワーカーポッド２３０への要求を受信しているか否かの判定を行う。

【0085】

次に、ロードバランサー３００Ａ、３００Ｂの設定を戻し、クラスター１Ａの転送ポッド２１０Ａおよび代替クラスター１Ｂの転送ポッド２１０Ｂを削除し、処理を終了する（ステップＳ１１０）。すなわち、クラスター１Ａのマスターノード１００Ａは、ロードバランサー３００Ａが、ワーカーポッド２３０Ａへの要求を受信すると、受信したワーカーポッド２３０Ａへの要求をルーターポッド２２０Ａに送信するように、ロードバランサー３００Ａを設定する。同様に代替クラスター１Ｂのマスターノード１００Ｂのコントロールプレーン１１０Ｂは、ロードバランサー３００Ｂを設定する。

【0086】

図１１は、ステップＳ１１０にて、ロードバランサー３００Ａ、３００Ｂが設定され、転送ポッド２１０Ａ、転送ポッド２１０Ｂが削除された状態を示す説明図である。図１１に示すように、クライアント端末５００が送信したワーカーポッド２３０Ａへの要求は、ロードバランサー３００Ｂおよびルーターポッド２２０Ｂを介してワーカーポッド２３０Ｂに送信される。

【0087】

以上で説明したステップＳ１０８およびステップＳ１１０の処理により、ワーカーノード２００のプロセッサは、所定の時間間隔の間に、クライアント端末５００からクラスター１Ａに送信された対象プログラムへの要求のデータ量を取得し、取得したクライアント端末５００からクラスター１Ａに送信された対象プログラムへの要求のデータ量が、所定のデータ送信量下限値よりも小さい場合に、転送ポッドを削除する。

【0088】

なお、ステップＳ１０３の処理により、図９および図１０において、転送ポッド２１０Ａは、次の要求転送処理を実行している。すなわち、要求転送処理では、代替クラスター１Ｂが格納している少なくとも１つのワーカーポッド２３０Ｂのプログラム（代替プログラム）を、クラスター１Ａが格納している少なくとも１つのワーカーポッド２３０Ａのプログラム（対象プログラム）の代替で実行する場合に、クライアント端末５００から送信されたワーカーポッド２３０Ａへの要求（対象プログラムへの要求）を取得すると、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）に応じてワーカーポッド２３０Ｂのプログラム（代替プログラム）を実行するように、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）を代替クラスター１Ｂに転送する。

【0089】

また、ステップＳ１０４の処理は、次の代替プログラム判定処理を含む。すなわち、代替プログラム判定処理では、ステップＳ１０４で、転送ポッド２１０Ｂが、代替クラスター１Ｂのワーカーポッド２３０Ｂのプログラム（代替プログラム）の実行に問題があるか否かの判定を行う処理を実行している。

【0090】

また、ステップＳ１０４の処理は、次の第１代替プログラム問題検出処理を含む。すなわち、第１代替プログラム問題検出処理では、ステップＳ１０４で、ワーカーポッド２３０Ｂのエラーの頻度（ワーカーポッド２３０Ｂの有する代替プログラムのエラー頻度）が、所定のエラー頻度上限値よりも高い場合に、ワーカーポッド２３０Ｂの代替プログラムの実行に問題があると判定する。

【0091】

また、ステップＳ１０４の処理は、次の第２代替プログラム問題検出処理を含む。なわち、第２代替プログラム問題検出処理では、ステップＳ１０４で、クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａへの要求（対象プログラムへの要求）の転送速度が、所定のデータ転送速度上限値よりも大きい場合に、ワーカーポッド２３０Ｂの代替プログラムの実行に問題があると判定する。

【0092】

また、ステップＳ１０７の処理は、次のＤＮＳレコード変更処理を含む。すなわち、ＤＮＳレコード変更処理では、ステップＳ１０７で、転送ポッド２１０Ｂは、転送ポッド２１０ＤＮＳサーバ６００に保存されているＤＮＳレコード６０１を、クラスター１Ａのドメイン名に対して代替クラスター１ＢのＩＰアドレスを対応付けたＤＮＳレコード６０１に書き換える旨の情報を含むＤＮＳレコード更新情報を、ＤＮＳサーバ６００に送信する。

【0093】

また、ステップＳ１０５の処理は、次の転送中止要求処理を含む。すなわち、転送中止要求処理では、代替クラスター１Ｂのワーカーポッド２３０Ｂのプログラム（代替プログラム）の実行に問題があると判定した場合（図６のフローチャートのステップＳ１０４：Ｙｅｓ）には、転送を停止する旨の情報を含む転送中止情報を、クラスター１Ａの転送ポッド２１０Ａに送信する。

【0094】

また、ステップＳ１０６の処理は、次の転送中止処理を含む。すなわち、転送中止処理では、クラスター１Ａの転送ポッド２１０Ａ（プロセッサ２１）は、転送中止情報を受け取ると、ワーカーポッド２３０Ａへの要求の転送（対象プログラムへの要求を代替クラスターに転送する要求転送処理の実行）を停止する。

【0095】

また、ステップＳ１０８およびＳ１１０の処理は、次の転送ポッド削除処理を含む。すなわち、転送ポッド削除処理では、ステップＳ１０８およびＳ１１０では、所定の時間間隔の間に、クライアント端末５００からクラスター１Ａに送信されたワーカーポッド２３０Ａへの要求（対象プログラムへの要求）のデータ量を取得する（ステップＳ１０８）。そして、取得したクライアント端末５００からクラスター１Ａに送信されたワーカーポッド２３０Ａへの要求（対象プログラムへの要求）のデータ量が、所定のデータ送信量下限値よりも小さい場合に、転送ポッドを削除する（ステップＳ１１０）。

【0096】

＜（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順、図１２～図１６＞
図６～図１１を用いて上述した、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順では、クラスター単位で、切り替えを行っている。以下に説明する（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える場合は、ワーカーポッド２３０（プログラム）単位で、切り替える場合である。この場合の以下の説明および図面において、クラスター１Ａのワーカーポッド２３０のうちのワーカーポッド２３０Ａｘから、代替クラスター１Ｂのワーカーポッド２３０Ｂｘに切り替える。すなわち、ワーカーポッド２３０Ａｘは、切り替え元のワーカーポッド２３０である。また、ワーカーポッド２３０Ｂｘは、切り替え先のワーカーポッド２３０である。

【0097】

（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順を実行する前に、代替クラスター１Ｂの設定やワーカーポッド２３０Ｂｘのデプロイを完了する。

【0098】

図１２は、（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順を実行する前の状態（切り替え前の状態）の構成を説明する説明図である。図１２に示すように、切り替え前の状態では、クラスター１Ａのおよび代替クラスター１Ｂには、転送ポッド２１０（転送ポッド２１０Ａ、２１０Ｂ）が作成されていない
図１３は、（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順の例を示すフローチャートである。

【0099】

まず、クラスター１Ａに転送ポッド２１０Ａをデプロイし、代替クラスター１Ｂに転送ポッド２１０Ｂをデプロイする（ステップＳ２０１）。すなわち、クラスター１Ａでは、マスターノード１００Ａのコントロールプレーン１１０Ａは、ワーカーノード２００Ａそれぞれで、転送ポッドイメージ２１０Ａａを用いて、転送ポッド２１０Ａをデプロイする。また、代替クラスター１Ｂでは、マスターノード１００Ｂのコントロールプレーン１１０Ｂは、ワーカーノード２００Ｂそれぞれで、転送ポッドイメージ２１０Ｂａを用いて、転送ポッド２１０Ｂをデプロイする。

【0100】

図１４は、ステップＳ２０１にて、転送ポッド２１０Ａ、２１０Ｂがデプロイされた状態を示す説明図である。ここで、クライアント端末５００が送信した、ワーカーポッド２３０Ａｘへの要求は、ロードバランサー３００Ａが受信する。そして、ロードバランサー３００Ａは、ワーカーポッド２３０Ａｘへの要求を、ワーカーノード２００Ａのルーターポッド２２０Ａに送信する。ルーターポッド２２０Ａは、ワーカーポッド２３０Ａｘへの要求を、ワーカーポッド２３０Ａｘに転送する。ワーカーポッド２３０Ａｘは、ワーカーポッド２３０Ａｘへの要求に応じた処理を実行する。

【0101】

次に、クライアント端末５００が送信した、ワーカーポッド２３０Ａｘへの要求を、ロードバランサー３００Ａｘおよび転送ポッド２１０Ａｘを介して、ルーターポッド２２０Ａｘが受信するように、ロードバランサー３００Ａｘおよび転送ポッド２１０Ａｘを設定し、代替クラスター１Ｂのロードバランサー３００Ｂｘおよび転送ポッド２１０Ｂｘも同様に設定する（ステップＳ２０２）
図１５は、ステップＳ２０２にて、ロードバランサー３００Ａ、３００Ｂおよびルーターポッド２２０Ａ、２２０Ｂが設定された状態を示す説明図である。ステップＳ２０２にて、クラスター１Ａでは、マスターノード１００Ａのコントロールプレーン１１０Ａは、転送ポッド２１０Ａが、ワーカーポッド２３０Ａｘへの要求を受信すると、受信したワーカーポッド２３０Ａｘへの要求をルーターポッド２２０Ａに送信するように、転送ポッド２１０Ａを設定する。この時点では、クライアント端末５００が送信した、ワーカーポッド２３０Ａｘへの要求は、ロードバランサー３００Ａおよびルーターポッド２２０Ａを介して、ワーカーポッド２３０Ａｘに送信される。従って、この時点では、ワーカーポッド２３０Ａｘへの要求は、転送ポッド２１０Ａに送信されず、ワーカーポッド２３０Ａｘに送信されるため、ワーカーポッド２３０Ａｘは、ワーカーポッド２３０Ａへの要求に応じた処理を実行できる。

【0102】

さらに、マスターノード１００Ａのコントロールプレーン１１０Ａは、ロードバランサー３００Ａが、ワーカーポッド２３０Ａｘへの要求を受信すると、ロードバランサー３００Ａが、受信したワーカーポッド２３０Ａｘへの要求を転送ポッド２１０Ａに送信するように、ロードバランサー３００Ａを設定する。以上の結果、クライアント端末５００が送信したワーカーポッド２３０Ａｘへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａおよびルーターポッド２２０Ａを介してワーカーポッド２３０Ａｘに送信される。

【0103】

また、代替クラスター１Ｂでは、上記と同様に、マスターノード１００Ｂのコントロールプレーン１１０Ｂが、転送ポッド２１０Ｂおよびロードバランサー３００Ｂを設定する。すなわち、マスターノード１００Ｂのコントロールプレーン１１０Ｂは、転送ポッド２１０Ｂが、ワーカーポッド２３０Ａｘへの要求を受信すると、受信したワーカーポッド２３０Ａｘへの要求をルーターポッド２２０Ｂに送信するように、転送ポッド２１０Ｂを設定する。また、マスターノード１００Ｂは、ロードバランサー３００Ｂが、ワーカーポッド２３０Ａｘへの要求を受信すると、ロードバランサー３００Ｂが、受信したワーカーポッド２３０Ａｘへの要求を転送ポッド２１０Ｂに送信するように、ロードバランサー３００Ｂを設定する。

【0104】

次に、クラスター１Ａにて、マスターノード１００Ａは、転送ポッド２１０Ａがワーカーポッド２３０Ａｘへの要求をロードバランサー３００Ｂに転送するように、転送ポッド２１０Ａを設定する（ステップＳ２０３）。

【0105】

図１６は、ステップＳ２０３にて、転送ポッド２１０Ａが設定された状態を示す説明図である。図１６に示すように、クライアント端末５００が送信したワーカーポッド２３０Ａｘへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａおよびロードバランサー３００Ｂ、転送ポッド２１０Ｂ、ルーターポッド２２０Ｂを介して、代替クラスター１Ｂのワーカーポッド２３０Ｂｘに転送される。そして、ワーカーポッド２３０Ｂｘは、ワーカーポッド２３０Ａｘへの要求に応じた処理を実行する。

【0106】

次に、代替クラスター１Ｂのワーカーノード２００Ｂそれぞれで、転送ポッド２１０Ｂは、ワーカーポッド２３０Ｂｘが有する代替プログラムの実行に問題があるか否かを判定する（ステップＳ２０４）。代替プログラムとは、ワーカーポッド２３０Ａｘへの要求に応じて実行されるワーカーポッド２３０Ｂｘのプログラムである。代替プログラムの実行に問題があると判定した場合（ステップＳ２０４：Ｙｅｓ）は、ステップＳ２０５に進み、代替クラスター１Ｂの使用を停止する。一方、代替プログラムの実行に問題がないと判定した場合（ステップＳ２０５：Ｎｏ）は、処理を終了する。

【0107】

転送ポッド２１０Ｂは、次の２つの条件を少なくとも一つを満たす場合に、ワーカーポッド２３０Ｂｘが有する代替プログラムの実行に問題があると判定（ステップＳ２０４：Ｙｅｓ）する。また、転送ポッド２１０Ｂは、次の２つの条件を両方とも満たさない場合に、ワーカーポッド２３０が有する代替プログラムの実行に問題がないと判定（ステップＳ１０４：Ｎｏ）する。
（条件１）ワーカーポッド２３０Ｂｘが有するプログラム（代替プログラム）を実行して発生するエラーの頻度が、所定のエラー頻度上限値よりも高い場合。この場合は、代替クラスター１Ｂのワーカーポッド２３０Ｂｘに問題がある。図３を用いて上述した様に、転送ポッド２１０Ｂそれぞれの監視部２１５は、自身が存在するワーカーノード２００Ｂのワーカーポッド２３０Ｂｘのエラーの頻度を取得する。ここで、ワーカーポッド２３０Ｂｘのエラーの頻度は、ワーカーポッド２３０Ｂｘの有する代替プログラムのエラー頻度である。さらに、監視部２１５は、取得したエラー頻度（代替プログラムのエラーの頻度）が、所定のエラー頻度上限値よりも高い場合に、代替プログラムの実行に問題があると判定する。そして、ワーカーポッド２３０Ｂｘの監視部１５のうちで、少なくとも１つの監視部１５が、代替プログラムの実行に問題があると判定した場合に、「代替プログラムの実行に問題がある」と判定する。
（条件２）クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）の転送速度が、所定のデータ転送速度上限値よりも大きい場合。図３を用いて上述した様に、転送ポッド２１０Ｂの監視部２１５は、キュー部２１２のリクエストキューに保存されているワーカーポッド２３０Ａｘへの要求のデータ量を、クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）の転送速度とみなす。そして、監視部２１５は、キュー部２１２に保存されているワーカーポッド２３０Ａｘへの要求のデータ量が、所定のデータ転送速度上限値よりも大きい場合に、ワーカーポッド２３０Ｂｘが、ワーカーポッド２３０Ａへの要求に応じた処理をしきれてないと考えることができるため、監視部２１５は、代替プログラムの実行に問題があると判定する。ここで、ワーカーポッド２３０Ｂｘの監視部１５のうちで、すべての監視部１５が、所定の時間間隔で代替プログラムの実行に問題があるか否かを判定する。そしてワーカーポッド２３０Ｂｘの監視部１５のうちで、すべての少なくとも１つの監視部１５が、所定の時間間隔の間に、代替プログラムの実行に問題があると判定した場合に、「代替プログラムの実行に問題がある」と判定する。

【0108】

次に、代替クラスター１Ｂの転送ポッド２１０Ｂのプロキシ部２１４は、転送を停止する旨の情報を含む転送中止情報を、クラスター１Ａの転送ポッド２１０Ａに向けて送信する（ステップＳ２０５）。ステップＳ２０５では、代替クラスター１Ｂの転送ポッド２１０Ｂのプロキシ部２１４は、クラスター１Ａのマスターノード１００Ａのコントロールプレーン１１０Ａに向けて、転送を停止する旨の情報を含む転送中止情報を送信する。コントロールプレーン１１０Ａは、転送中止情報を受信すると、ワーカーノード２００Ａそれぞれの転送ポッド２１０Ａに向けて転送中止情報を送信する。

【0109】

次に、クラスター１Ａのワーカーノード２００それぞれの転送ポッド２１０Ａは、コントロールプレーン１１０Ａから、転送中止情報を受信すると、転送ポッド２１０Ａが受信したワーカーポッド２３０Ａｘへの要求をルーターポッド２２０Ａに転送するように設定して、転送ポッド２１０Ａが受信したワーカーポッド２３０Ａｘへの要求をロードバランサー３００Ｂ（代替クラスター１Ｂ）に転送することを中止し、処理を終了する（ステップＳ２０６）。これにより、図８を用いて上述したように、ワーカーポッド２３０Ａｘへの要求は、ロードバランサー３００Ａ、転送ポッド２１０Ａ、ルーターポッド２２０Ａを介して、ワーカーポッド２３０Ａｘに送信される。

【0110】

また、以上で説明したステップＳ２０４からステップＳ２０６の処理によって、ワーカーノード２００Ｂの転送ポッド２１０Ｂが、代替プログラムの実行に問題があると判定した場合（ステップＳ２０４：Ｙｅｓ）に、ワーカーポッド２３０Ａｘへの要求がクラスター１Ａから代替クラスター１Ｂに転送することを中止する。そして、クラスター１Ａのワーカーノード２００のワーカーポッド２３０Ａｘが、ワーカーポッド２３０Ａｘへの要求に応じた処理を実行する。

【0111】

なお、ステップＳ２０６の処理を実行した後、ロードバランサー３００Ａが、ワーカーポッド２３０Ａｘへの要求をルーターポッド２２０Ａに転送するように設定し、さらに、転送ポッド２１０Ａ、２１０Ｂを削除してもよい。

【0112】

なお、ステップＳ２０３の処理により、図１６において、転送ポッド２１０Ａは、次の要求転送処理を実行している。すなわち、要求転送処理では、代替クラスター１Ｂが格納している少なくとも１つのワーカーポッド２３０Ｂｘのプログラム（代替プログラム）を、クラスター１Ａが格納している少なくとも１つのワーカーポッド２３０Ａｘのプログラム（対象プログラム）の代替で実行する場合に、クライアント端末５００から送信されたワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）を取得すると、ワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）に応じてワーカーポッド２３０Ｂｘのプログラム（代替プログラム）を実行するように、ワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）を代替クラスター１Ｂに転送する。

【0113】

また、ステップＳ２０４の処理は、次の代替プログラム判定処理を含む。すなわち、代替プログラム判定処理では、ステップＳ２０４で、転送ポッド２１０Ｂが、代替クラスター１Ｂのワーカーポッド２３０Ｂｘのプログラム（代替プログラム）の実行に問題があるか否かの判定を行う処理を実行している。

【0114】

また、ステップＳ２０４の処理は、次の第１代替プログラム問題検出処理を含む。すなわち、第１代替プログラム問題検出処理では、ステップＳ２０４で、ワーカーポッド２３０Ｂｘのエラーの頻度（ワーカーポッド２３０Ｂｘの有する代替プログラムのエラー頻度）が、所定のエラー頻度上限値よりも高い場合に、ワーカーポッド２３０Ｂｘの代替プログラムの実行に問題があると判定する。

【0115】

また、ステップＳ２０４の処理は、次の第２代替プログラム問題検出処理を含む。すなわち、第２代替プログラム問題検出処理では、ステップＳ２０４で、クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａｘへの要求（対象プログラムへの要求）の転送速度が、所定のデータ転送速度上限値よりも大きい場合に、ワーカーポッド２３０Ｂｘの代替プログラムの実行に問題があると判定する。

【0116】

また、ステップＳ２０５の処理は、次の転送中止要求処理を含む。すなわち、転送中止要求処理では、代替クラスター１Ｂのワーカーポッド２３０Ｂｘのプログラム（代替プログラム）の実行に問題があると判定した場合（図１３のフローチャートのステップＳ２０４：Ｙｅｓ）には、転送を停止する旨の情報を含む転送中止情報を、クラスター１Ａの転送ポッド２１０Ａに送信する。

【0117】

また、ステップＳ２０６の処理は、次の転送中止処理を含む。すなわち、転送中止処理では、クラスター１Ａの転送ポッド２１０Ａ（プロセッサ２１）は、転送中止情報を受け取ると、ワーカーポッド２３０Ａｘへの要求の転送（対象プログラムへの要求を代替クラスターに転送する要求転送処理の実行）を停止する。
＜発明の効果＞
このように、実施例において、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順（図６参照）および（Ｂ）クラスター１Ａのワーカーポッド２３０Ａｘを、代替クラスター１Ｂのワーカーポッド２３０Ｂに切り替える手順（図１３参照）は、本発明のクラスターの管理方法である。

【0118】

クラスターの管理方法は、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）に応じて、代替クラスター１Ｂのワーカーポッド２３０Ｂのプログラム（代替プログラム）を実行するように、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）を、代替クラスター１Ｂに転送する（図６のフローチャートのステップＳ１０３、図１３のフローチャートのステップＳ２０３参照）する。

【0119】

ここで、クライアント端末が、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）を、クラスター１Ａに送信すると、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）は、代替クラスター１Ｂに転送される。このため、確実に、代替クラスター１Ｂが格納しているワーカーポッド２３０Ｂのプログラム（代替プログラム）を、クラスター１Ａが格納しているワーカーポッド２３０Ａのプログラムの代替で、使用できる。従って、本発明のクラスターの管理方法は、クラスターの切り替えをより早く行うことができる。

【0120】

なお、ここでのクラスター１Ａのプログラムから、代替クラスター１Ｂの代替プログラムへの切り替えは、クラスター１Ａの有する全てのプログラムから、代替クラスター１Ｂの有する全てのプログラムに切り替える、クラスターの切り替えでもよい。

【0121】

また、切り替え前のクラスター１Ａに、セキュリティーホール等の不具合が発見された場合、クラスター１Ａから代替クラスター１Ｂに速やかかつ確実に切り替えることができる。これにより、本発明のクラスターの管理方法は、クラスターを使用する際のセキュリティリスクの低減等の安全性を高めることができる。また、代替クラスター１Ｂに切り替えた後に、代替クラスター１Ｂに不具合が見つかった場合に、切り替えを速やかに中止（使用するクラスターを、代替クラスター１Ｂからクラスター１Ａに、速やかに切り替える）できる。これにより、切り替えた後の不具合による被害の発生を抑制できる。

【0122】

また、本発明のクラスターの管理方法の、（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順（図６参照）では、全てのワーカーポッド２３０Aのプログラムへの要求（ワーカーポッドのプログラムへの要求）を、対象プログラムへの要求として、代替クラスターに転送する。換言すれば、この（Ａ）クラスター１Ａを代替クラスター１Ｂに切り替える手順（図６参照）では、クラスターの切り替えを実行している。本発明のクラスターの管理方法は、クラスターの切り替えを実行する場合にも、クラスターの切り替えをより早く行うことができる。

【0123】

また、本発明のクラスターの管理方法では、ＤＮＳサーバ６００に保存されているＤＮＳレコード６０１を、クラスター１Ａスのドメイン名に対して、代替クラスター１ＢのＩＰアドレス（ロードバランサー３００ＢのＩＰアドレス）を対応付けたＤＮＳレコードに書き換える旨の情報を含むＤＮＳレコード更新情報を、ＤＮＳサーバ６００に送信する。その結果、ＤＮＳサーバ６００が、クラスター１Ａスのドメイン名に対する、名前解決の問い合わせを受け付けると、ＤＮＳサーバ６００は、クラスター１Ａスのドメイン名に対して、代替クラスター１ＢのＩＰアドレスを返すようになる。このため、より確実に、クラスター１Ａのワーカーポッド２３０Ａ（プログラム）から、代替クラスター１Ｂのワーカーポッド２３０Ｂ（代替プログラム）に切り替えることができる。

【0124】

また、本発明のクラスターの管理方法では、代替クラスター１Ｂのワーカーポッド２３０Ｂのプログラム（代替プログラム）の実行に問題があると判定した場合（図６のフローチャートのステップＳ１０４：Ｙｅｓ）には、転送を停止する旨の情報を含む転送中止情報を、クラスター１Aの転送ポッド２１０Aに送信する（図６のフローチャートのステップＳ１０５）。そして、クラスター１Ａの転送ポッド２１０Ａ（プロセッサ２１）は、転送中止情報を受け取ると、ワーカーポッド２３０Ａへの要求の転送（対象プログラムへの要求を代替クラスターに転送する要求転送処理の実行）を停止する（図６のフローチャートのステップＳ１０６）。従って、代替クラスター１Ｂに問題が生じた場合に、クラスター１Ａを使用するため。代替クラスター１Ｂに生じる問題による悪影響を抑制できる。そして、クラスターの切り替えをより早く行うことができる。

【0125】

また、本発明のクラスターの管理方法では、クライアント端末５００からクラスター１Ａに送信された、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）のデータ量が、所定のデータ送信量下限値よりも小さい場合に、転送ポッド２１０Ａ、２１０Ｂを削除する（図６のフローチャートのステップＳ１０８およびステップＳ１１０）を実行する。これにより、転送ポッド２１０Ａ、２１０Ｂが必要なときに、転送ポッド２１０Ａ、２１０Ｂを削除することを抑制できる。そして、転送ポッド２１０Ａ、２１０Ｂが確実に不要なときに、転送ポッド２１０Ａ、２１０Ｂを削除できる。

【0126】

また、クラスターの管理方法は、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）に応じて、代替クラスター１Ｂのワーカーポッド２３０Ｂのプログラム（代替プログラム）を実行するように、ワーカーポッド２３０Ａへの要求（対象プログラムへの要求）を、代替クラスター１Ｂに転送する（図６のフローチャートのステップＳ１０３、図１３のフローチャートのステップＳ２０３参照）するのは、転送ポッド２１０Ａ、２１０Ｂ（転送ポッド）である。転送ポッド２１０Ａ、２１０Ｂ（転送ポッドポッド）は、ポッドであるため、必要に応じて作成（デプロイ）および削除が容易である。本発明のクラスターの管理方法を用いる必要がないときに、容易に転送ポッド２１０Ａ、２１０Ｂ（転送ポッド）を容易に削除できる。これにより、本発明のクラスターの管理方法では、クラスターのリソースをより無駄なく活用できる。

【0127】

さらに、転送ポッドイメージ２１０Ａａ（転送ポッド２１０Ａ、２１０Ｂのイメージ）は、容易に転用できる。従って、クラスターの管理方法を、容易に新規のクラスター対して適用できる。

【0128】

また、本発明のクラスターの管理方法では、ワーカーポッド２３０Ｂのエラーの頻度（ワーカーポッド２３０Ｂの有する代替プログラムのエラー頻度）が、所定のエラー頻度上限値よりも高い場合に、ワーカーポッド２３０Ｂの代替プログラムの実行に問題があると判定する（図６のフローチャートのステップＳ１０４、図１３のフローチャートのステップＳ２０４）。その結果、代替クラスター１Ｂを代替で使用する場合の不具合を容易に検出できる。そして、クラスターの切り替えの際の不具合の抑制を容易にする。

【0129】

また、本発明のクラスターの管理方法では、クラスター１Ａから代替クラスター１Ｂに転送されるワーカーポッド２３０Ａへの要求（対象プログラムへの要求）の転送速度が、所定のデータ転送速度上限値よりも大きい場合に、ワーカーポッド２３０Ｂの代替プログラムの実行に問題があると判定する（図６のフローチャートのステップＳ１０４、図１３のフローチャートのステップＳ２０４）。その結果、代替クラスター１Ｂを代替で使用する場合の代替クラスター１Ｂの処理能力不足を容易に検出できる。そして、クラスターの切り替えの際の不具合の抑制を容易にする。

【0130】

なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。また、例えば、上記した実施例は本発明を分かりやすく説明するために構成を詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、各実施例の構成の一部について、他の構成に追加、削除、置換することが可能である。

【0131】

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、本発明は、実施例の機能を実現するソフトウェアのプログラムコードによっても実現できる。この場合、プログラムコードを記録した記憶媒体をコンピュータに提供し、そのコンピュータが備えるプロセッサが記憶媒体に格納されたプログラムコードを読み出す。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施例の機能を実現することになり、そのプログラムコード自体、及びそれを記憶した記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、光ディスク、光磁気ディスク、ＣＤ－Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどが用いられる。

【0132】

また、本実施例に記載の機能を実現するプログラムコードは、例えば、アセンブラ、Ｃ／Ｃ＋＋、ｐｅｒｌ、Ｓｈｅｌｌ、ＰＨＰ、Ｐｙｔｈｏｎ、Ｊａｖａ（登録商標）等の広範囲のプログラム又はスクリプト言語で実装できる。

【0133】

さらに、実施例の機能を実現するソフトウェアのプログラムコードを、ネットワークを介して配信することによって、それをコンピュータのハードディスクやメモリ等の記憶手段又はＣＤ－ＲＷ、ＣＤ－Ｒ等の記憶媒体に格納し、コンピュータが備えるプロセッサが当該記憶手段や当該記憶媒体に格納されたプログラムコードを読み出して実行するようにしてもよい。

【0134】

上述の実施例において、制御線や情報線は、説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。全ての構成が相互に接続されていてもよい。

【符号の説明】

【0135】

１０００；クラスターシステム
１Ａ；クラスター
１Ｂ；代替クラスター
２１；プロセッサ
２２；主記憶装置
２３；副記憶装置
２４；入力装置
２５；出力装置
２７；バス
１００Ａ、１００Ｂ；マスターノード
１１０Ａ、１１０Ｂ；コントロールプレーン
２００Ａ、２００Ｂ；ワーカーノード
２１０Ａ、２１０Ｂ；転送ポッド
２１０Ａａ；転送ポッドイメージ
２１１；受信ＡＰＩ部
２１２；キュー部
２１３；転送ＡＰＩ部
２１４；プロキシ部
２１５；監視部
２２０Ａ、２２０Ｂ；ルーターポッド
２２０Ａａ；ルーターポッドイメージ
２３０、２３０Ａ、２３０Ａ１－２３０Ａｎ；ワーカーポッド
２３０Ａ１ａ；ワーカーポッドイメージ
３００、３００Ａ、３００Ｂ；ロードバランサー
５００；クライアント端末
６００；ＤＮＳサーバ
ＮＷ；ネットワーク

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】