ホーム > 特許ランキング > 日本電信電話株式会社
知財求人 - 知財ポータルサイト「IP Force」
特許7176633仮想化基盤制御装置、仮想化基盤制御方法および仮想化基盤制御プログラム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-11-14
(45)【発行日】2022-11-22
(54)【発明の名称】仮想化基盤制御装置、仮想化基盤制御方法および仮想化基盤制御プログラム
(51)【国際特許分類】
G06F 9/50 20060101AFI20221115BHJP
G06F 9/455 20060101ALI20221115BHJP
【ＦＩ】
G06F9/50 150Z
G06F9/455 150
【請求項の数】
5
(21)【出願番号】P 2021528729
(86)(22)【出願日】2019-06-26
(86)【国際出願番号】 JP2019025321
(87)【国際公開番号】W WO2020261412
(87)【国際公開日】2020-12-30
【審査請求日】2021-11-09
(73)【特許権者】
【識別番号】000004226
【氏名又は名称】日本電信電話株式会社
(74)【代理人】
【識別番号】110001807
【氏名又は名称】弁理士法人磯野国際特許商標事務所
(72)【発明者】
【氏名】太田 正純
【審査官】加藤 優一
(56)【参考文献】
【文献】特開２０１４－１４２６７８（ＪＰ，Ａ）
【文献】特開２０１１－２４８６１６（ＪＰ，Ａ）
【文献】国際公開第２０１７／００２８１２（ＷＯ，Ａ１）
【文献】国際公開第２０１６／１２１７２８（ＷＯ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｆ ９／５０
Ｇ０６Ｆ ９／４５５
(57)【特許請求の範囲】
【請求項1】
ＶＭ（Virtual Machine）またはコンテナのマイグレーションをコンピュートに実行させる仮想化基盤制御装置であって、ライブマイグレーションを実行する上で制約となり得る状態か否かを判定するための動作パラメータを取得する動作パラメータ監視部と、
前記コンピュートについての所定の負荷情報を取得するリソース監視部と、
前記コンピュートに搭載され、サービスを提供する前記ＶＭまたはコンテナごとに、前記ライブマイグレーションかヒーリングかのいずれかを、前記マイグレーションの実行手法として選択するマイグレーション判定部と、を備え、
前記マイグレーション判定部は、
前記ライブマイグレーションが実行可能と判定するための所定の動作条件を前記動作パラメータが満たしており、かつ、前記所定の負荷情報について、前記ライブマイグレーションが実行可能であると判定するための所定の閾値と比較することにより負荷が低いと判定した場合に、前記ライブマイグレーションを実行すると判定し、
前記動作パラメータが前記所定の動作条件を満たさない、若しくは、前記所定の負荷情報について、前記所定の閾値と比較することにより負荷が高いと判定した場合に、ヒーリングを実行すると判定する
ことを特徴とする仮想化基盤制御装置。
【請求項2】
前記サービスを提供する前記ＶＭまたはコンテナごとの構成情報を取得する構成情報監視部と、前記構成情報に基づき、前記サービス全体として、複数の前記ＶＭまたはコンテナについて判定された前記ライブマイグレーションまたは前記ヒーリングの処理時間の合計値が低減されるように、前記サービスを構成する前記ＶＭまたはコンテナの実行順序の指示するマイグレーション指示部と、をさらに備えること
を特徴とする請求項１に記載の仮想化基盤制御装置。
【請求項3】
前記構成情報には、複数の前記ＶＭまたはコンテナについての冗長構成を示す情報が含まれており、前記マイグレーション指示部は、
前記構成情報を取得した場合に、前記冗長構成を示す情報があるときには、複数の前記ＶＭまたはコンテナについて判定された前記ライブマイグレーションまたは前記ヒーリングを順次実行するように指示し、前記冗長構成を示す情報がないときには、複数の前記ＶＭまたはコンテナについて判定された前記ライブマイグレーションまたは前記ヒーリングを並列で実行させるように指示すること
を特徴とする請求項２に記載の仮想化基盤制御装置。
【請求項4】
ＶＭまたはコンテナのマイグレーションをコンピュートに実行させる仮想化基盤制御装置の仮想化基盤制御方法であって、前記仮想化基盤制御装置は、
ライブマイグレーションを実行する上で制約となり得る状態か否かを判定するための動作パラメータを取得する動作パラメータ監視ステップと、
前記コンピュートについての所定の負荷情報を取得するリソース監視ステップと、
前記コンピュートに搭載され、サービスを提供する前記ＶＭまたはコンテナごとに、前記ライブマイグレーションかヒーリングかのいずれかを、前記マイグレーションの実行手法として選択するマイグレーション判定ステップと、を実行し、
前記マイグレーション判定ステップにおいて、
前記ライブマイグレーションが実行可能と判定するための所定の動作条件を前記動作パラメータが満たしており、かつ、前記所定の負荷情報について、前記ライブマイグレーションが実行可能であると判定するための所定の閾値と比較することにより負荷が低いと判定した場合に、前記ライブマイグレーションを実行すると判定し、
前記動作パラメータが前記所定の動作条件を満たさない、若しくは、前記所定の負荷情報について、前記所定の閾値と比較することにより負荷が高いと判定した場合に、ヒーリングを実行すると判定する
ことを特徴とする仮想化基盤制御方法。
【請求項5】
請求項４に記載の仮想化基盤制御方法を、コンピュータに実行させるための仮想化基盤制御プログラム。【発明の詳細な説明】
【技術分野】
【0001】
本発明は、仮想化基盤においてマイグレーションを実行させる仮想化基盤制御装置、仮想化基盤制御方法および仮想化基盤制御プログラムに関する。
【背景技術】
【0002】
近年、通信サービスにおいて、仮想化技術を適用したネットワーク機能の仮想化（ＮＦＶ：Network Functions Virtualization）の採用が進展している。ネットワークの仮想化は、従来専用のハードウェアを用いて実現されていたネットワーク機能をソフトウェア化して汎用サーバ上で動作させるように構成する。このようなネットワーク機能の仮想化技術をキャリア網に適用することで、経済的にスケーラビリティと信頼性を両立させることや、迅速なサービスの提供、サービス毎の需要に応じた柔軟なリソース割当、ハードウェアの寿命に縛られないサービス展開等が実現できると期待されている。
【0003】
この仮想化技術を用いてサーバやネットワークといった物理資源を抽象化・隠蔽し、複数のアプリケーションやサービスに対して共通基盤を提供するシステムを仮想化基盤という。
【0004】
仮想化基盤上では、新たなＶＭ（Virtual Machine：仮想マシン）／コンテナの生成や、既存のＶＭ／コンテナの削除が容易になり、キャリアＮＷにおいて仮想化基盤上に搭載したアプリケーションをマイグレーションする際には、処理の停止を伴うヒーリングの手法が採用されるケースが存在する。なお、マイグレーションとは、システムやソフトウェアなどを、別の物理装置等へ移行することをいう。具体的には、ＡＣＴ（Active）／ＳＢＹ（Standby）構成のシステムの例では、ＳＢＹ側を他の物理サーバに再立ち上げするヒーリング処理を用いて、マイグレーションを実現することが多い。
【0005】
一方、ＶＭ／コンテナ自体の処理能力を継続したままマイグレーションする手法が存在する。その代表的な技術であるライブマイグレーションでは、サービスを中断させずにマイグレーションすることができる。
【0006】
仮想化基盤において、このマイグレーションを実行する際の条件を判定する技術としては、例えば、VMware vSphere（「VMware vSphere」は登録商標）のＤＲＳ（Distributed Resource Scheduler）が知られている（非特許文献１参照）。ＤＲＳによれば、ＣＰＵやメモリ等の閾値を確認して、マイグレーションの実行および移行先ホストの選定等の処理を行うことができる（非特許文献２参照）。
【先行技術文献】
【非特許文献】
【0007】
【文献】“DRS PERFORMANCE，” ［online］， VMware，［令和1年6月15日検索］，インターネット＜https://www.vmware.com/content/dam/digitalmarketing/vmware/en/pdf/techpaper/drs-vsphere65-perf.pdf＞
【文献】“Japan Cloud Infrastructure Blog，” ［online］， VMware，［令和1年6月15日検索］，インターネット＜https://blogs.vmware.com/jp-cim/2017/10/vexpert-nakagawa-vmware-vsphere-6-5-part6.html＞
【発明の概要】
【発明が解決しようとする課題】
【0008】
上記した仮想化基盤のシステムにおけるマイグレーションを実行する場合に、ヒーリングの手法では、以下のような課題がある。
（１）サービス停止を伴うため、ＳＢＹ系システムへの適用が必要となり、系切替処理などの付随する多くの作業が必要になる。
（２）ヒーリング処理に伴い、事前事後のコンフィグ投入などの工程が発生する。
（３）ＳＢＹ系システムのダウンを伴うため片系運転の時間が多く発生する。
（１）サービス停止を伴うため、ＳＢＹ系システムへの適用が必要となり、系切替処理などの付随する多くの作業が必要になる。
（２）ヒーリング処理に伴い、事前事後のコンフィグ投入などの工程が発生する。
（３）ＳＢＹ系システムのダウンを伴うため片系運転の時間が多く発生する。
【0009】
これに対し、ライブマイグレーションでは、ＶＭ／コンテナの生成を伴わないため、ヒーリングに比べ短時間で処理が完了するというメリットがある。しかしながら、ライブマイグレーションを実行しようとする場合に、動作条件に制約があるケースや、メモリ更新が高頻度で発生するようなアプリケーションでは、メモリ転送がタイムアウトとなり処理が終わらないケースや、ヒーリングよりも時間がかかってしまうケースがある。
【0010】
このような点を鑑みて本発明がなされたのであり、本発明は、サービスの運用状況に合わせて、ヒーリングとライブマイグレーションのうち適切なマイグレーション手法を判定して実行させることができる、仮想化基盤制御装置、仮想化基盤制御方法および仮想化基盤制御プログラムを提供する。
【課題を解決するための手段】
【0011】
本発明に係る仮想化基盤制御装置は、ＶＭまたはコンテナのマイグレーションをコンピュートに実行させる仮想化基盤制御装置であって、ライブマイグレーションを実行する上で制約となり得る状態か否かを判定するための動作パラメータを取得する動作パラメータ監視部と、前記コンピュートについての所定の負荷情報を取得するリソース監視部と、前記コンピュートに搭載され、サービスを提供する前記ＶＭまたはコンテナごとに、前記ライブマイグレーションかヒーリングかのいずれかを、前記マイグレーションの実行手法として選択するマイグレーション判定部と、を備え、前記マイグレーション判定部が、前記ライブマイグレーションが実行可能と判定するための所定の動作条件を前記動作パラメータが満たしており、かつ、前記所定の負荷情報について、前記ライブマイグレーションが実行可能であると判定するための所定の閾値と比較することにより負荷が低いと判定した場合に、前記ライブマイグレーションを実行すると判定し、前記動作パラメータが前記所定の動作条件を満たさない、若しくは、前記所定の負荷情報について、前記所定の閾値と比較することにより負荷が高いと判定した場合に、ヒーリングを実行すると判定することを特徴とする。
【発明の効果】
【0012】
本発明によれば、サービスの運用状況に合わせて、ヒーリングとライブマイグレーションのうち適切なマイグレーション手法を判定して実行させる、仮想化基盤制御装置、仮想化基盤制御方法および仮想化基盤制御プログラムを提供することができる。
【図面の簡単な説明】
【0013】
【図1】本実施形態に係る仮想化基盤制御装置を含む仮想化基盤制御システムの構成を示すブロック図である。
【図2】本実施形態に係るリソース管理テーブル（リソース管理情報）のデータ構成の一例を示す図である。
【図3】本実施形態に係る構成管理テーブルのデータ構成の一例を示す図である。
【図4】本実施形態に係るマイグレーション手法判定処理およびマイグレーション実行制御処理の全体の流れを示すフローチャートである。
【図5】本実施形態に係るマイグレーション手法判定処理の流れを示すフローチャートである。
【図6】本実施形態に係る仮想化基盤制御装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。
【発明を実施するための形態】
【0014】
次に、本発明を実施するための形態（以下、「本実施形態」と称する。）について説明する。まず、本実施形態に係る仮想化基盤制御装置１０（図１参照）を含む仮想化基盤制御システム１について説明する。
図１は、本実施形態に係る仮想化基盤制御装置１０を含む仮想化基盤制御システム１の構成を示すブロック図である。
仮想化基盤制御システム１は、１つ以上のコンピュート（Compute）３０（物理リソース：ＶＭ／コンテナが動作するホスト（コンピュータ））と、仮想化基盤制御装置１０とが、ネットワーク（ＮＷ）５を介して通信接続される。なお、以下に示す実施形態においては、コンピュート３０上にＶＭ２０を構築した例として説明するが、コンピュート３０上にコンテナ２５を構築した場合でも同様の作用効果を奏する。
図１は、本実施形態に係る仮想化基盤制御装置１０を含む仮想化基盤制御システム１の構成を示すブロック図である。
仮想化基盤制御システム１は、１つ以上のコンピュート（Compute）３０（物理リソース：ＶＭ／コンテナが動作するホスト（コンピュータ））と、仮想化基盤制御装置１０とが、ネットワーク（ＮＷ）５を介して通信接続される。なお、以下に示す実施形態においては、コンピュート３０上にＶＭ２０を構築した例として説明するが、コンピュート３０上にコンテナ２５を構築した場合でも同様の作用効果を奏する。
【0015】
コンピュート３０には、仮想化基盤制御装置１０の制御に基づき、仮想化環境として１つ以上のＶＭ２０を構築することができる。また、ＶＭ２０には、１つ以上のアプリケーションを配置（搭載）することができ、ユーザ端末（図示省略）からの要求に基づくサービスを提供する。
このコンピュート３０は、図１に示すように、仮想マシン設定ファイル３１および仮想化層３２を備える。仮想マシン設定ファイル３１には、ＶＭ２０の設定情報が格納される。仮想化層３２は、ＶＭ２０の生成や処理の制御を行う。
このコンピュート３０は、図１に示すように、仮想マシン設定ファイル３１および仮想化層３２を備える。仮想マシン設定ファイル３１には、ＶＭ２０の設定情報が格納される。仮想化層３２は、ＶＭ２０の生成や処理の制御を行う。
【0016】
仮想化基盤制御装置１０は、各コンピュート３０やＶＭ２０等に通信接続され、ＶＭ２０の制御やリソースの割当を行うとともに、ＶＭ２０のマイグレーションに関する指示を行う。
以下、仮想化基盤制御装置１０について、詳細に説明する。
以下、仮想化基盤制御装置１０について、詳細に説明する。
【0017】
＜仮想化基盤制御装置＞
本実施形態に係る仮想化基盤制御装置１０は、コンピュート３０がライブマイグレーションを実行できる動作条件を満たすか否かを判定するとともに、コンピュート３０やＶＭ２０の運用状況（後記する「動作パラメータ」や「負荷情報」等）を監視し、ヒーリングとライブマイグレーションのうち適切なマイグレーション手法を判定して実行させる。具体的には、仮想化基盤制御装置１０は、各ＶＭ２０のマイグレーションの実行に際して、動作条件を満たしかつ負荷の低い場合では、ライブマイグレーションを実行すると判定し、動作条件を満たさない若しくは負荷の高い場合では、ヒーリングを実行すると判定する。
さらに、仮想化基盤制御装置１０は、複数のＶＭ２０をマイグレーションする場合において、サービス単位での影響を考慮してマイグレーションを実行する順序を決定する。このようにすることで、マイグレーションによるサービスへの影響を低減することが可能となる。
本実施形態に係る仮想化基盤制御装置１０は、コンピュート３０がライブマイグレーションを実行できる動作条件を満たすか否かを判定するとともに、コンピュート３０やＶＭ２０の運用状況（後記する「動作パラメータ」や「負荷情報」等）を監視し、ヒーリングとライブマイグレーションのうち適切なマイグレーション手法を判定して実行させる。具体的には、仮想化基盤制御装置１０は、各ＶＭ２０のマイグレーションの実行に際して、動作条件を満たしかつ負荷の低い場合では、ライブマイグレーションを実行すると判定し、動作条件を満たさない若しくは負荷の高い場合では、ヒーリングを実行すると判定する。
さらに、仮想化基盤制御装置１０は、複数のＶＭ２０をマイグレーションする場合において、サービス単位での影響を考慮してマイグレーションを実行する順序を決定する。このようにすることで、マイグレーションによるサービスへの影響を低減することが可能となる。
【0018】
図１に示す仮想化基盤制御装置１０は、制御部、入出力部（いずれも図示省略）および記憶部１３を備えるコンピュータ等により実現される。
入出力部は、情報の送受信を行うための通信インタフェース、および、タッチパネルやキーボード等の入力装置や、モニタ等の出力装置との間で情報の送受信を行うための入出力インタフェースからなる。
入出力部は、情報の送受信を行うための通信インタフェース、および、タッチパネルやキーボード等の入力装置や、モニタ等の出力装置との間で情報の送受信を行うための入出力インタフェースからなる。
【0019】
記憶部１３は、フラッシュメモリやハードディスク、ＲＡＭ（Random Access Memory）等により構成される。この仮想化基盤制御装置１０の記憶部１３には、図１に示すように、リソース情報リポジトリ１３０と仮想マシンイメージリポジトリ１３５とが記憶される。
リソース情報リポジトリ１３０には、各コンピュート３０に構築するＶＭ２０の情報（リソースの割当先の情報）を含むリソース管理テーブル１３１（リソース管理情報）（図２参照）と、アプリケーションを実行するＶＭ２０の構成情報が記憶される構成管理テーブル１３２（構成管理情報）（図３参照）とが格納される。また、仮想マシンイメージリポジトリ１３５には、インストール済みのゲストＯＳを含む仮想インスタンス（ＶＭ）を起動するためのテンプレートであるＶＭイメージが格納される。
なお、この記憶部１３には、制御部の各機能を実行させるためのプログラム（仮想化基盤制御プログラム）や、制御部の処理に必要な情報（後記する、閾値の情報等）が記憶される。なお、この記憶部１３には、仮想化基盤を実現するために必要となる他の既存情報も備える。
リソース情報リポジトリ１３０には、各コンピュート３０に構築するＶＭ２０の情報（リソースの割当先の情報）を含むリソース管理テーブル１３１（リソース管理情報）（図２参照）と、アプリケーションを実行するＶＭ２０の構成情報が記憶される構成管理テーブル１３２（構成管理情報）（図３参照）とが格納される。また、仮想マシンイメージリポジトリ１３５には、インストール済みのゲストＯＳを含む仮想インスタンス（ＶＭ）を起動するためのテンプレートであるＶＭイメージが格納される。
なお、この記憶部１３には、制御部の各機能を実行させるためのプログラム（仮想化基盤制御プログラム）や、制御部の処理に必要な情報（後記する、閾値の情報等）が記憶される。なお、この記憶部１３には、仮想化基盤を実現するために必要となる他の既存情報も備える。
【0020】
図２は、本実施形態に係るリソース管理テーブル１３１（リソース管理情報）のデータ構成の一例を示す図である。
リソース管理テーブル１３１には、コンピュート３０の識別情報である「Compute ID」に対応付けて、「割当先」の情報が格納される。
この「割当先」には、その「Compute ID」で示されるコンピュート３０に構築されたＶＭ２０の識別情報が格納される。図２では、例えば、Compute IDが「＃０」のコンピュート３０において、「ＶＭ＃１」「ＶＭ＃２」「ＶＭ＃５」のＶＭ２０が割り当てられていることを示す。
リソース管理テーブル１３１には、コンピュート３０の識別情報である「Compute ID」に対応付けて、「割当先」の情報が格納される。
この「割当先」には、その「Compute ID」で示されるコンピュート３０に構築されたＶＭ２０の識別情報が格納される。図２では、例えば、Compute IDが「＃０」のコンピュート３０において、「ＶＭ＃１」「ＶＭ＃２」「ＶＭ＃５」のＶＭ２０が割り当てられていることを示す。
【0021】
図１に戻り、制御部は、マイグレーション制御部１１と、監視部１２とを含んで構成される。なお、この制御部には、仮想化基盤を実現するために必要となる他の既存機能も備える。
【0022】
監視部１２は、コンピュート３０およびＶＭ２０の構成や負荷状態を監視しており、リソース監視部１２１、動作パラメータ監視部１２２、構成情報監視部１２３を備える。
【0023】
リソース監視部１２１は、各コンピュート３０やＶＭ２０を監視し、ＣＰＵ使用率、メモリ使用率等の負荷状態を示す情報（所定の負荷情報）を、メトリクス情報として取得する。所定の負荷情報には、この他にも、例えば、イメージサイズ、ローカルディスクのディスクＩ／Ｏ（Input／Output）、メモリ搭載量、メモリ更新頻度、有効ＮＷ帯域幅等が監視対象として設定される。
【0024】
動作パラメータ監視部１２２は、コンピュート３０に設定される動作パラメータの状態を取得する。動作パラメータの状態は、例えば、ＣＰＵ割付状態のemulatorpinの指定有無、共有Diskのマウント有無、CPU Pinning指定有無、SR-IOV（Single Root I/O Virtualization）の利用有無など、ライブマイグレーションを実行する上で制約となり得る動作条件を示す情報である。動作パラメータ監視部１２２は、これらの動作パラメータのうち、予め設定された所定の動作パラメータの状態を監視する。
動作パラメータ監視部１２２は、仮想マシン設定ファイル３１を確認してこれらの動作パラメータの状態を取得してもよいし、各ＶＭ２０に問い合わせることにより動作パラメータの状態を取得してもよい。
動作パラメータ監視部１２２は、仮想マシン設定ファイル３１を確認してこれらの動作パラメータの状態を取得してもよいし、各ＶＭ２０に問い合わせることにより動作パラメータの状態を取得してもよい。
【0025】
構成情報監視部１２３は、移動（マイグレーション）の対象となるアプリケーションを実行してサービスを提供しているＶＭ２０の構成情報を取得する。この構成情報には、例えば、アプリケーションを連携動作する複数のＶＭ２０の情報や、アプリケーションを実行するＶＭ２０が冗長構成（ＡＣＴ／ＳＢＹ）であることの情報を含む。ここで、冗長構成（ＡＣＴ／ＳＢＹ）構成の情報には、現時点でそのＶＭ２０がＡＣＴ状態であるのかＳＢＹ状態であるのか等の情報も含まれる。そして、構成情報監視部１２３は、取得した構成情報を、リソース情報リポジトリ１３０内の構成管理テーブル１３２に格納する。
【0026】
図３は、本実施形態に係る構成管理テーブル１３２のデータ構成の一例を示す図である。
構成管理テーブル１３２には、アプリケーション名（Ａｐｐ）およびアプリケーションＩＤ（Ａｐｐ ＩＤ）に対応付けて、連携して動作するＶＭ２０のＩＤ（識別子）（ＶＭ ＩＤ）が格納される。
図３に示すように、例えば、アプリケーション名（Ａｐｐ）が「ＶＮＦ１」でアプリケーションＩＤ（Ａｐｐ ＩＤ）が「＃０１」のアプリケーションに対応するＶＭ２０の構成は、ＶＭ ＩＤ「＃１」「＃１１」のＶＭ２０について冗長構成（ＡＣＴ／ＳＢＹ）のペアあることを示している。また、アプリケーション名（Ａｐｐ）が「ＶＮＦ１０」でアプリケーションＩＤ（Ａｐｐ ＩＤ）が「＃０１０」のアプリケーションは、ＶＭＩＤが「＃５」のＶＭ２０と「＃６」の２つのＶＭ２０で、一連のサービス（１つのサービス）を提供していることを示している。
構成管理テーブル１３２には、アプリケーション名（Ａｐｐ）およびアプリケーションＩＤ（Ａｐｐ ＩＤ）に対応付けて、連携して動作するＶＭ２０のＩＤ（識別子）（ＶＭ ＩＤ）が格納される。
図３に示すように、例えば、アプリケーション名（Ａｐｐ）が「ＶＮＦ１」でアプリケーションＩＤ（Ａｐｐ ＩＤ）が「＃０１」のアプリケーションに対応するＶＭ２０の構成は、ＶＭ ＩＤ「＃１」「＃１１」のＶＭ２０について冗長構成（ＡＣＴ／ＳＢＹ）のペアあることを示している。また、アプリケーション名（Ａｐｐ）が「ＶＮＦ１０」でアプリケーションＩＤ（Ａｐｐ ＩＤ）が「＃０１０」のアプリケーションは、ＶＭＩＤが「＃５」のＶＭ２０と「＃６」の２つのＶＭ２０で、一連のサービス（１つのサービス）を提供していることを示している。
【0027】
図１に戻り、マイグレーション制御部１１は、ヒーリングとライブマイグレーションのうち適切なマイグレーション手法を判定してコンピュート３０に実行を指示する制御を行う。このマイグレーション制御部１１は、マイグレーション判定部１１１、マイグレーション指示部１１２、マイグレーション実行部１１３を備える。
【0028】
マイグレーション判定部１１１は、不図示のネットワーク管理装置等から、例えば、システムの保守やアップグレードなどのためにサービス実行中のＶＭ２０について、現時点の物理装置（コンピュート３０）から別の物理装置（コンピュート３０）にマイグレーションする指示（後記する「マイグレーション要求」）を受け付けると、以下の処理を実行する。
マイグレーション判定部１１１は、リソース監視部１２１が取得したメトリクス情報（負荷情報）や動作パラメータ監視部１２２が取得した動作パラメータの状態情報を用いて、ＶＭ２０単位で、ヒーリングとライブマイグレーションのうち、適切なマイグレーション手法を判定（選択）する。
マイグレーション判定部１１１は、リソース監視部１２１が取得したメトリクス情報（負荷情報）や動作パラメータ監視部１２２が取得した動作パラメータの状態情報を用いて、ＶＭ２０単位で、ヒーリングとライブマイグレーションのうち、適切なマイグレーション手法を判定（選択）する。
【0029】
具体的には、マイグレーション判定部１１１は、動作パラメータ監視部１２２が取得した動作パラメータ情報を用いて、ライブマイグレーションを実行するための所定の動作条件を満たすか否かを判定する。そして、マイグレーション判定部１１１は、当該所定の動作条件を満たさない場合には、ヒーリングによるマイグレーションを実行すると判定する。
【0030】
また、マイグレーション判定部１１１は、リソース監視部１２１が取得した負荷状態を示すメトリクス情報を用いて、所定の判定基準を満たすか否かにより、ライブマイグレーションが実行可能か否かを判定する。
マイグレーション判定部１１１は、負荷状態による判定に用いる指標（負荷情報）として、例えば、イメージサイズ、ローカルディスクＩ／Ｏ、メモリ搭載量、メモリ更新頻度、有効ＮＷ帯域幅などを、予め設定しておく。そして、採用した負荷状態の指標に対して所定の閾値を設定しておき、その閾値と比較することにより、ライブマイグレーションが実行可能か否かを判定する。
負荷状態の指標については、事前に設定される固定的な値であってもよいし、動的な変更情報（例えば、ディスク空き容量、ディスクの空き読込帯域、ＮＷの空き帯域など）であってもよい。
マイグレーション判定部１１１は、負荷状態による判定に用いる指標（負荷情報）として、例えば、イメージサイズ、ローカルディスクＩ／Ｏ、メモリ搭載量、メモリ更新頻度、有効ＮＷ帯域幅などを、予め設定しておく。そして、採用した負荷状態の指標に対して所定の閾値を設定しておき、その閾値と比較することにより、ライブマイグレーションが実行可能か否かを判定する。
負荷状態の指標については、事前に設定される固定的な値であってもよいし、動的な変更情報（例えば、ディスク空き容量、ディスクの空き読込帯域、ＮＷの空き帯域など）であってもよい。
【0031】
マイグレーション指示部１１２は、マイグレーション判定部１１１が各ＶＭ２０について判定したマイグレーション手法（ヒーリングまたはライブマイグレーション）の情報を取得すると、以下の処理を実行する。
マイグレーション指示部１１２は、例えばアプリケーションを実行する複数のＶＭ２０の構成情報を構成情報監視部１２３に問い合わせる。なお、構成情報監視部１２３は、この問い合わせを受けて、最新（現時点）のＶＭ２０の構成情報を取得し、マイグレーション指示部１１２に応答するとともに、取得した構成情報を構成管理テーブル１３２に格納する。また、構成情報監視部１２３は、ＶＭ２０の構成情報の変更を所定の時間間隔で監視し、その監視結果を構成管理テーブル１３２に格納しておき、その構成情報を、マイグレーション指示部１１２が取得するようにしてもよい。
マイグレーション指示部１１２は、例えばアプリケーションを実行する複数のＶＭ２０の構成情報を構成情報監視部１２３に問い合わせる。なお、構成情報監視部１２３は、この問い合わせを受けて、最新（現時点）のＶＭ２０の構成情報を取得し、マイグレーション指示部１１２に応答するとともに、取得した構成情報を構成管理テーブル１３２に格納する。また、構成情報監視部１２３は、ＶＭ２０の構成情報の変更を所定の時間間隔で監視し、その監視結果を構成管理テーブル１３２に格納しておき、その構成情報を、マイグレーション指示部１１２が取得するようにしてもよい。
【0032】
マイグレーション指示部１１２は、取得した構成情報に基づき、サービス単位での影響を考慮して、各ＶＭ２０の実行順序を決定する。具体的には、マイグレーション指示部１１２は、複数のＶＭ２０それぞれについて判定された、ライブマイグレーションまたはヒーリングの処理時間の合計値が低減されるように、各ＶＭ２０の実行順序を決定する。なお、本実施形態では、マイグレーション指示部１１２が、複数のＶＭ２０が冗長構成であるか否か判定して、マイグレーションの実行順序を決定し指示情報を生成する例として説明する。
【0033】
マイグレーション指示部１１２は、取得した構成情報に基づき、複数のＶＭ２０の構成が冗長構成であると判定した場合には、各ＶＭ２０についてマイグレーション判定部１１１が判定したマイグレーション処理（ヒーリング、ライブマイグレーション）を順次実行するようにした指示情報を生成する。
【0034】
このとき、マイグレーション指示部１１２は、冗長構成を持つ複数のＶＭ２０について判定されたマイグレーション手法がすべてヒーリングであった場合には、その複数のＶＭ２０それぞれに対するヒーリングの実行を順次行うようにした指示情報を生成する。
また、マイグレーション指示部１１２は、冗長構成を持つ複数のＶＭ２０について判定されたマイグレーション手法がすべてライブマイグレーションであった場合には、その複数のＶＭ２０それぞれに対するライブマイグレーションの実行を順次行うようにした指示情報を生成する。
さらに、マイグレーション指示部１１２は、冗長構成を持つ複数のＶＭ２０について判定されたマイグレーション手法において、ヒーリングとライブマイグレーションが混在する場合には、順次ヒーリング、ライブマイグレーションの実行するようにした指示情報を生成する。
また、マイグレーション指示部１１２は、冗長構成を持つ複数のＶＭ２０について判定されたマイグレーション手法がすべてライブマイグレーションであった場合には、その複数のＶＭ２０それぞれに対するライブマイグレーションの実行を順次行うようにした指示情報を生成する。
さらに、マイグレーション指示部１１２は、冗長構成を持つ複数のＶＭ２０について判定されたマイグレーション手法において、ヒーリングとライブマイグレーションが混在する場合には、順次ヒーリング、ライブマイグレーションの実行するようにした指示情報を生成する。
【0035】
一方、マイグレーション指示部１１２は、取得した構成情報に基づき、複数のＶＭ２０の構成が冗長構成でないと判定した場合には、各ＶＭ２０のマイグレーション（ヒーリング、ライブマイグレーション）を並列で実行する指示情報を生成する。
このように、各ＶＭ２０のマイグレーション（ヒーリング、ライブマイグレーション）を並列で実行させることにより、サービス全体でのマイグレーションにかかる処理時間を低減させることができる。
そして、マイグレーション指示部１１２は、生成した指示情報を、マイグレーション実行部１１３に出力する。
このように、各ＶＭ２０のマイグレーション（ヒーリング、ライブマイグレーション）を並列で実行させることにより、サービス全体でのマイグレーションにかかる処理時間を低減させることができる。
そして、マイグレーション指示部１１２は、生成した指示情報を、マイグレーション実行部１１３に出力する。
【0036】
マイグレーション実行部１１３は、コンピュート３０の仮想化層３２に対して、マイグレーション指示部１１２から取得した指示情報に基づくマイグレーション実行通知を送信する。これにより、マイグレーション実行部１１３は、各コンピュート３０に、マイグレーション処理を実行させる。
【0037】
具体的には、例えば、指示情報によるマイグレーションの手法がヒーリングの場合に、マイグレーション実行部１１３は、ＶＭ２０のＳＢＹ遷移を必要に応じて実行させる。その後、ヒーリングによりＳＢＹ系のＶＭ２０を異なるコンピュート３０に退避させる。そして、必要なコンフィグ投入などを行わせ、ＡＣＴ系との同期を経て系に組み込む処理を行わせる。
【0038】
＜処理の流れ＞
次に、仮想化基盤制御装置１０が実行する処理の流れについて説明する。
図４は、本実施形態に係るマイグレーション手法判定処理およびマイグレーション実行制御処理の全体の流れを示すフローチャートである。
ここでは、不図示のネットワーク管理装置などから仮想化基盤制御装置１０が、あるサービスを提供するアプリケーションに関するマイグレーションの要求情報（以下「マイグレーション要求」と称する。）を取得したものとして説明する。このマイグレーション要求には、マイグレーションの対象となる１つ以上のＶＭ２０の識別情報が含まれる。なお、以下においては、あるサービスを提供する複数のＶＭ２０のマイグレーションの指示を受けたものとして説明する。なお、マイグレーションの対象が１つのＶＭ２０のみであった場合には、マイグレーション手法判定処理（図５）を行い、ヒーリングまたはライブマイグレーションのいずれかを選択して実行させるようにする。
次に、仮想化基盤制御装置１０が実行する処理の流れについて説明する。
図４は、本実施形態に係るマイグレーション手法判定処理およびマイグレーション実行制御処理の全体の流れを示すフローチャートである。
ここでは、不図示のネットワーク管理装置などから仮想化基盤制御装置１０が、あるサービスを提供するアプリケーションに関するマイグレーションの要求情報（以下「マイグレーション要求」と称する。）を取得したものとして説明する。このマイグレーション要求には、マイグレーションの対象となる１つ以上のＶＭ２０の識別情報が含まれる。なお、以下においては、あるサービスを提供する複数のＶＭ２０のマイグレーションの指示を受けたものとして説明する。なお、マイグレーションの対象が１つのＶＭ２０のみであった場合には、マイグレーション手法判定処理（図５）を行い、ヒーリングまたはライブマイグレーションのいずれかを選択して実行させるようにする。
【0039】
まず、仮想化基盤制御装置１０のマイグレーション判定部１１１は、マイグレーション要求を参照し、サービスを構成する複数のＶＭ２０のうちの１つを選択する（ステップＳ１）。
続いて、マイグレーション判定部１１１は、マイグレーション手法判定処理を実行する（ステップＳ２）。このマイグレーション手法判定処理により、マイグレーション判定部１１１は、そのＶＭ２０に最適な手法として、ヒーリングまたはライブマイグレーションのいずれかを選択する。なお、このマイグレーション手法判定処理の詳細は、図５を参照して後記する。
続いて、マイグレーション判定部１１１は、マイグレーション手法判定処理を実行する（ステップＳ２）。このマイグレーション手法判定処理により、マイグレーション判定部１１１は、そのＶＭ２０に最適な手法として、ヒーリングまたはライブマイグレーションのいずれかを選択する。なお、このマイグレーション手法判定処理の詳細は、図５を参照して後記する。
【0040】
次に、マイグレーション判定部１１１は、サービスを構成するＶＭ２０のすべてを処理したか否かを判定する（ステップＳ３）。そして、まだマイグレーション判定処理を行っていないＶＭ２０があれば（ステップＳ３→Ｎｏ）、ステップＳ１に戻り、マイグレーション手法判定処理を続ける。一方、マイグレーション判定部１１１は、すべてのＶＭ２０の処理を終えた場合には、次のステップＳ４へ進む。
なお、ここで、マイグレーション判定部１１１のマイグレーション手法判定処理により、サービスを構成するＶＭ２０について、次の３つのケースの判定結果が得られる。
（ケース１）すべてのＶＭ２０について、ヒーリングを実行する。
（ケース２）ヒーリングとライブマイグレーションを併用して実行する。
（ケース３）すべてのＶＭ２０について、ライブマイグレーションを実行する。
なお、ここで、マイグレーション判定部１１１のマイグレーション手法判定処理により、サービスを構成するＶＭ２０について、次の３つのケースの判定結果が得られる。
（ケース１）すべてのＶＭ２０について、ヒーリングを実行する。
（ケース２）ヒーリングとライブマイグレーションを併用して実行する。
（ケース３）すべてのＶＭ２０について、ライブマイグレーションを実行する。
【0041】
続いて、仮想化基盤制御装置１０のマイグレーション指示部１１２は、構成情報監視部１２３に、サービスを構成するＶＭ２０の構成情報を問い合わせる（ステップＳ４）。構成情報監視部１２３は、最新の構成情報をコンピュート３０の仮想マシン設定ファイル３１や、各ＶＭ２０から取得する。このとき、構成情報監視部１２３が取得する情報には、各ＶＭ２０が冗長構成となっているか否かの情報や、冗長構成の場合に、そのＶＭ２０が現時点でＡＣＴ状態かＳＢＹ状態かを示す情報が含まれる。そして、構成情報監視部１２３は、取得した構成情報を記憶部１３内の構成管理テーブルに格納するとともに、マイグレーション指示部１１２に応答する。
【0042】
次に、マイグレーション指示部１１２は、ＶＭ２０の構成が冗長構成であるか否かを判定する（ステップＳ５）。ここで、マイグレーション指示部１１２は、冗長構成でなければ（ステップＳ５→Ｎｏ）、ステップＳ６へ進む。
【0043】
ステップＳ６において、マイグレーション指示部１１２は、各ＶＭ２０のマイグレーションを並列で実行する指示情報を生成する。そして、マイグレーション指示部１１２は、生成した指示情報をマイグレーション実行部１１３に出力する。
このようにＶＭ２０毎のマイグレーション（ヒーリング、ライブマイグレーション）を並列で処理させることにより、サービス全体でのサービス断時間を低減することができる。
なお、マイグレーション指示部１１２は、サービス構成要素（ＶＭ２０）間の連携動作によるサービス単位の影響や、コンピュート３０の処理負荷を考慮して、すべてのＶＭ２０のマイグレーションを並列で実行するのではなく、例えば、各コンピュート３０の処理負荷が均等になるように処理を実行するＶＭ２０のグループ分けを行い、そのグループごとにマイグレーション処理を実行させてもよい。
このようにＶＭ２０毎のマイグレーション（ヒーリング、ライブマイグレーション）を並列で処理させることにより、サービス全体でのサービス断時間を低減することができる。
なお、マイグレーション指示部１１２は、サービス構成要素（ＶＭ２０）間の連携動作によるサービス単位の影響や、コンピュート３０の処理負荷を考慮して、すべてのＶＭ２０のマイグレーションを並列で実行するのではなく、例えば、各コンピュート３０の処理負荷が均等になるように処理を実行するＶＭ２０のグループ分けを行い、そのグループごとにマイグレーション処理を実行させてもよい。
【0044】
一方、ステップＳ５において、ＶＭ２０の構成が冗長構成であると判定された場合には（ステップＳ５→Ｙｅｓ）、ステップＳ７において、マイグレーション指示部１１２は、各ＶＭ２０の処理を順次実行するようにした指示情報を生成する。そして、マイグレーション指示部１１２は、生成した指示情報をマイグレーション実行部１１３に出力する。
ここで、マイグレーション指示部１１２は、ステップＳ４において、冗長構成となるＶＭ２０が、ＡＣＴ状態であるかＳＢＹ状態であるかの情報を用いて、ＳＢＹ状態であるＶＭ２０を先にマイグレーション処理するような順序を設定した指示情報を生成する。このようにすることで、ＳＢＹ状態とＡＣＴ状態との間の系切替処理を減らすことができるため、サービス全体でのサービス断時間を低減することができる。
ここで、マイグレーション指示部１１２は、ステップＳ４において、冗長構成となるＶＭ２０が、ＡＣＴ状態であるかＳＢＹ状態であるかの情報を用いて、ＳＢＹ状態であるＶＭ２０を先にマイグレーション処理するような順序を設定した指示情報を生成する。このようにすることで、ＳＢＹ状態とＡＣＴ状態との間の系切替処理を減らすことができるため、サービス全体でのサービス断時間を低減することができる。
【0045】
次に、ステップＳ８において、マイグレーション実行部１１３は、コンピュート３０の仮想化層３２に対して、マイグレーション指示部１１２の指示情報に基づくマイグレーション実行通知を送信することにより、各ＶＭ２０のマイグレーション処理を実行させる。
【0046】
このように、仮想化基盤制御装置１０は、ヒーリングとライブマイグレーションを適切に選択することにより、サービス全体でのサービス断時間を低減することができる。また、ヒーリングとライブマイグレーションを併用することにより、マイグレーション処理をすべてヒーリングで実行する場合に比べ、片系運転の時間を低減することができる。
【0047】
（マイグレーション手法判定処理）
図５は、本実施形態に係るマイグレーション手法判定処理の流れを示すフローチャートである。
まず、マイグレーション判定部１１１は、図４のステップＳ１において選択したＶＭ２０について、そのＶＭ２０が割当てられているコンピュート３０をリソース管理テーブル１３１を参照して特定し、動作パラメータ監視部１２２を介して、当該コンピュート３０の動作パラメータを取得する（ステップＳ２１）。
図５は、本実施形態に係るマイグレーション手法判定処理の流れを示すフローチャートである。
まず、マイグレーション判定部１１１は、図４のステップＳ１において選択したＶＭ２０について、そのＶＭ２０が割当てられているコンピュート３０をリソース管理テーブル１３１を参照して特定し、動作パラメータ監視部１２２を介して、当該コンピュート３０の動作パラメータを取得する（ステップＳ２１）。
【0048】
続いて、マイグレーション判定部１１１は、取得した動作パラメータの動作状態が、ライブマイグレーションの実行可能な所定の動作条件を満たしているか否かを判定する（ステップＳ２２）。
マイグレーション判定部１１１は、ライブマイグレーションの実行可能な所定の動作条件として、例えば、ＣＰＵ割付状態のemulatorpinの指定がある場合、共有Diskのマウントがない場合、CPU Pinning指定がない場合、SR-IOVの利用がない場合などに、ライブマイグレーションが実行可能な動作条件を満たすと判定する。
マイグレーション判定部１１１は、ライブマイグレーションの実行可能な所定の動作条件として、例えば、ＣＰＵ割付状態のemulatorpinの指定がある場合、共有Diskのマウントがない場合、CPU Pinning指定がない場合、SR-IOVの利用がない場合などに、ライブマイグレーションが実行可能な動作条件を満たすと判定する。
【0049】
ここで、所定の動作条件を満たしていない場合（ステップＳ２２→Ｎｏ）、マイグレーション判定部１１１は、マイグレーションの手法としてヒーリングを選択する（ステップＳ２６）。
【0050】
一方、ステップＳ２２において、マイグレーション判定部１１１は、ライブマイグレーションの実行可能な所定の動作条件を満たしている場合には（ステップＳ２２→Ｙｅｓ）、次のステップＳ２３に進む。
【0051】
ステップＳ２３において、マイグレーション判定部１１１は、当該ＶＭ２０および当該ＶＭ２０を搭載するコンピュート３０のメトリクス情報を、リソース監視部１２１を介して取得する。
【0052】
続いて、マイグレーション判定部１１１は、メトリクス情報に基づき、所定の負荷情報（イメージサイズ、ローカルディスクＩ／Ｏ、メモリ搭載量、メモリ更新頻度、有効ＮＷ帯域幅など）について、予め設定した閾値と比較することにより、ライブマイグレーションが実行可能か否かを判定する（ステップＳ２４）。
【0053】
そして、マイグレーション判定部１１１は、ライブマイグレーションが実行可能であると判定した場合（ステップＳ２４→実行可能）、マイグレーションの手法としてライブマイグレーションを選択する（ステップＳ２５）。一方、マイグレーション判定部１１１は、ライブマイグレーションが実行不可であると判定した場合（ステップＳ２４→実行不可）、マイグレーションの手法として、ヒーリングを選択する（ステップＳ２６）。
【0054】
このようにすることで、仮想化基盤制御装置１０は、所定の動作条件を満たし、かつ、負荷の低いコンピュートのマイグレーションには、ライブマイグレーションを選択する。また、仮想化基盤制御装置１０は、所定の動作条件を満たさない、若しくは、負荷の高いコンピュートのマイグレーションには、ヒーリングを選択することができる。また、現時点の運用状況（動作パラメータや負荷情報など）に基づいて、ヒーリングとライブマイグレーションのどちらを選択すべきかを判定するため、リアルタイムの運用状態にあわせた最適なマイグレーション手法の選択が可能となる。
【0055】
＜ハードウェア構成＞
本実施形態に係る仮想化基盤制御装置１０は、例えば図６に示すような構成のコンピュータ９００によって実現される。
図６は、仮想化基盤制御装置１０の機能を実現するコンピュータ９００の一例を示すハードウェア構成図である。コンピュータ９００は、ＣＰＵ（Central Processing Unit）９０１、ＲＯＭ（Read Only Memory）９０２、ＲＡＭ（Random Access Memory）９０３、ＨＤＤ（Hard Disk Drive）９０４、入出力Ｉ／Ｆ（Interface）９０５、通信Ｉ／Ｆ９０６およびメディアＩ／Ｆ９０７を有する。
本実施形態に係る仮想化基盤制御装置１０は、例えば図６に示すような構成のコンピュータ９００によって実現される。
図６は、仮想化基盤制御装置１０の機能を実現するコンピュータ９００の一例を示すハードウェア構成図である。コンピュータ９００は、ＣＰＵ（Central Processing Unit）９０１、ＲＯＭ（Read Only Memory）９０２、ＲＡＭ（Random Access Memory）９０３、ＨＤＤ（Hard Disk Drive）９０４、入出力Ｉ／Ｆ（Interface）９０５、通信Ｉ／Ｆ９０６およびメディアＩ／Ｆ９０７を有する。
【0056】
ＣＰＵ９０１は、ＲＯＭ９０２またはＨＤＤ９０４に記憶されたプログラムに基づき作動し、図１の制御部（マイグレーション制御部１１、監視部１２）による制御を行う。ＲＯＭ９０２は、コンピュータ９００の起動時にＣＰＵ９０１により実行されるブートプログラムや、コンピュータ９００のハードウェアに係るプログラム等を記憶する。
【0057】
ＣＰＵ９０１は、入出力Ｉ／Ｆ９０５を介して、マウスやキーボード等の入力装置９１０、および、ディスプレイやプリンタ等の出力装置９１１を制御する。ＣＰＵ９０１は、入出力Ｉ／Ｆ９０５を介して、入力装置９１０からデータを取得するともに、生成したデータを出力装置９１１へ出力する。
【0058】
ＨＤＤ９０４は、ＣＰＵ９０１により実行されるプログラム（仮想化基盤制御プログラム）および当該プログラムによって使用されるデータ等を記憶する。通信Ｉ／Ｆ９０６は、通信網（例えば、ネットワーク５）を介して図示せぬ他の装置（例えば、ネットワーク管理装置など）からデータを受信してＣＰＵ９０１へ出力し、また、ＣＰＵ９０１が生成したデータを、通信網を介して他の装置へ送信する。
【0059】
メディアＩ／Ｆ９０７は、記録媒体９１２に格納されたプログラム（仮想化基盤制御プログラム）またはデータを読み取り、ＲＡＭ９０３を介してＣＰＵ９０１へ出力する。ＣＰＵ９０１は、目的の処理に係るプログラムを、メディアＩ／Ｆ９０７を介して記録媒体９１２からＲＡＭ９０３上にロードし、ロードしたプログラムを実行する。記録媒体９１２は、ＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto Optical disk）等の光磁気記録媒体、磁気記録媒体、導体メモリテープ媒体又は半導体メモリ等である。
【0060】
例えば、コンピュータ９００が実施形態に係る仮想化基盤制御装置１０として機能する場合、コンピュータ９００のＣＰＵ９０１は、ＲＡＭ９０３上にロードされたプログラムを実行することにより、仮想化基盤制御装置１０の機能を実現する。また、ＨＤＤ９０４には、ＲＡＭ９０３内のデータが記憶される。ＣＰＵ９０１は、目的の処理に係るプログラムを記録媒体９１２から読み取って実行する。この他、ＣＰＵ９０１は、他の装置から通信網（ネットワーク５）を介して目的の処理に係るプログラムを読み込んでもよい。
【0061】
＜効果＞
以下、仮想化基盤制御装置の効果について説明する。
本発明に係る仮想化基盤制御装置は、ＶＭ２０またはコンテナ２５のマイグレーションをコンピュート３０に実行させる仮想化基盤制御装置１０であって、ライブマイグレーションを実行する上で制約となり得る状態か否かを判定するための動作パラメータを取得する動作パラメータ監視部１２２と、コンピュートについての所定の負荷情報を取得するリソース監視部１２１と、コンピュートに搭載され、サービスを提供するＶＭ２０またはコンテナ２５ごとに、ライブマイグレーションかヒーリングかのいずれかを、マイグレーションの実行手法として選択するマイグレーション判定部１１１と、を備え、マイグレーション判定部１１１が、ライブマイグレーションが実行可能と判定するための所定の動作条件を動作パラメータが満たしており、かつ、所定の負荷情報について、ライブマイグレーションが実行可能であると判定するための所定の閾値と比較することにより負荷が低いと判定した場合に、ライブマイグレーションを実行すると判定し、動作パラメータが所定の動作条件を満たさない、若しくは、所定の負荷情報について、所定の閾値と比較することにより負荷が高いと判定した場合に、ヒーリングを実行すると判定することを特徴とする。
以下、仮想化基盤制御装置の効果について説明する。
本発明に係る仮想化基盤制御装置は、ＶＭ２０またはコンテナ２５のマイグレーションをコンピュート３０に実行させる仮想化基盤制御装置１０であって、ライブマイグレーションを実行する上で制約となり得る状態か否かを判定するための動作パラメータを取得する動作パラメータ監視部１２２と、コンピュートについての所定の負荷情報を取得するリソース監視部１２１と、コンピュートに搭載され、サービスを提供するＶＭ２０またはコンテナ２５ごとに、ライブマイグレーションかヒーリングかのいずれかを、マイグレーションの実行手法として選択するマイグレーション判定部１１１と、を備え、マイグレーション判定部１１１が、ライブマイグレーションが実行可能と判定するための所定の動作条件を動作パラメータが満たしており、かつ、所定の負荷情報について、ライブマイグレーションが実行可能であると判定するための所定の閾値と比較することにより負荷が低いと判定した場合に、ライブマイグレーションを実行すると判定し、動作パラメータが所定の動作条件を満たさない、若しくは、所定の負荷情報について、所定の閾値と比較することにより負荷が高いと判定した場合に、ヒーリングを実行すると判定することを特徴とする。
【0062】
このように、仮想化基盤制御装置１０は、現時点の運用状況（動作パラメータや負荷情報など）に基づいて、ヒーリングとライブマイグレーションのどちらを選択すべきかを判定するため、リアルタイムの運用状態に合わせた最適なマイグレーション手法の選択が可能となる。よって、マイグレーションによるサービスへの影響を低減することが可能となる。
【0063】
また、仮想化基盤制御装置１０において、サービスを提供するＶＭ２０またはコンテナ２５ごとの構成情報を取得する構成情報監視部１２３と、構成情報に基づき、サービス全体として、複数のＶＭ２０またはコンテナ２５について判定されたライブマイグレーションまたはヒーリングの処理時間の合計値が低減されるように、サービスを構成するＶＭ２０またはコンテナ２５の実行順序の指示するマイグレーション指示部１１２と、をさらに備えることを特徴とする。
【0064】
このように、仮想化基盤制御装置１０は、サービス全体として、複数のＶＭ２０またはコンテナ２５について判定されたライブマイグレーションまたはヒーリングの処理時間の合計値が低減されるようにする。つまり、サービスを構成する複数のＶＭ２０またはコンテナ２５間の連携動作によるサービス単位での影響を考慮して、ＶＭ２０またはコンテナ２５に関するマイグレーションの実行順序を決定できる。
特に、仮想化基盤制御装置１０によれば、すべてをヒーリングで実行する場合に比べ、ライブマイグレーションと組み合わせて実行することが可能となるため、ＳＢＹ系システムのダウンに伴う片系運転の時間を低減することができる。
特に、仮想化基盤制御装置１０によれば、すべてをヒーリングで実行する場合に比べ、ライブマイグレーションと組み合わせて実行することが可能となるため、ＳＢＹ系システムのダウンに伴う片系運転の時間を低減することができる。
【0065】
また、仮想化基盤制御装置１０において、構成情報には、複数のＶＭ２０またはコンテナ２５についての冗長構成を示す情報が含まれており、マイグレーション指示部１１２は、構成情報を取得した場合に、冗長構成を示す情報があるときには、複数のＶＭ２０またはコンテナ２５について判定されたライブマイグレーションまたはヒーリングを順次実行するように指示し、冗長構成を示す情報がないときには、複数のＶＭ２０またはコンテナ２５について判定されたライブマイグレーションまたはヒーリングを並列で実行させるように指示することを特徴とする。
【0066】
このように、仮想化基盤制御装置１０は、構成情報に、複数のＶＭ２０またはコンテナ２５についての冗長構成を示す情報があるときには、サービスを停止させないように順次マイグレーションを実行させる。また、仮想化基盤制御装置１０は、構成情報に、複数のＶＭ２０またはコンテナ２５についての冗長構成を示す情報がないときには、マイグレーションを並列で実行させることで、サービス断時間を低減することができる。
【符号の説明】
【0067】
１ 仮想化基盤制御システム
５ ネットワーク
１０ 仮想化基盤制御装置
１１ マイグレーション制御部
１２ 監視部
１３ 記憶部
２０ ＶＭ
２５ コンテナ
３０ コンピュート
３１ 仮想マシン設定ファイル
３２ 仮想化層
１１１ マイグレーション判定部
１１２ マイグレーション指示部
１１３ マイグレーション実行部
１２１ リソース監視部
１２２ 動作パラメータ監視部
１２３ 構成情報監視部
１３０ リソース情報リポジトリ
１３１ リソース管理テーブル（リソース管理情報）
１３２ 構成管理テーブル（構成管理情報）
１３５ 仮想マシンイメージリポジトリ
５ ネットワーク
１０ 仮想化基盤制御装置
１１ マイグレーション制御部
１２ 監視部
１３ 記憶部
２０ ＶＭ
２５ コンテナ
３０ コンピュート
３１ 仮想マシン設定ファイル
３２ 仮想化層
１１１ マイグレーション判定部
１１２ マイグレーション指示部
１１３ マイグレーション実行部
１２１ リソース監視部
１２２ 動作パラメータ監視部
１２３ 構成情報監視部
１３０ リソース情報リポジトリ
１３１ リソース管理テーブル（リソース管理情報）
１３２ 構成管理テーブル（構成管理情報）
１３５ 仮想マシンイメージリポジトリ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】