在大規(guī)模云平臺(tái)的日常運(yùn)營中不可避免的會(huì)存在升級(jí)或者修復(fù)宿主機(jī)的情況，如內(nèi)核安全漏洞、內(nèi)核、基礎(chǔ)軟件或驅(qū)動(dòng) Bug，甚至潛在的硬件故障和計(jì)劃性停機(jī)維護(hù)都需要宿主機(jī)進(jìn)行重啟操作，導(dǎo)致其上的 VM 存在服務(wù)不可用的情況，如 AWS Xen Issue 導(dǎo)致大規(guī)模的宿主機(jī)重啟(http://aws.amazon.com/blogs/aws/ec2-maintenance-update/)。宿主機(jī)的停機(jī)維護(hù)在實(shí)踐中是一個(gè)不可避免的任務(wù)，通過內(nèi)核熱補(bǔ)丁技術(shù)只能解決需要停機(jī)重啟的部分情況。云平臺(tái)運(yùn)營商需要切實(shí)有效的技術(shù)方案來降低或比買呢宿主機(jī)的重啟問題造成的影響。

Save/Restore VM

比如AWS 在重啟大規(guī)模宿主機(jī)就利用了 Xen 的 save/restore vm 特性來避免 VM 級(jí)的重啟操作，實(shí)現(xiàn)用戶在短暫服務(wù)不可用時(shí)間內(nèi)無需額外的上線運(yùn)維操作即可服務(wù)生效。VM Save/Restore 特性實(shí)際上廣受歡迎應(yīng)該是在 VirtualBox 上，通過保存 VM State 到持久化設(shè)備上來實(shí)現(xiàn)快速恢復(fù) VM State 的能力，有效的避免了 VM 重啟導(dǎo)致的額外操作和時(shí)間。

Live Migration

（圖片來自VMWare）

熱遷移技術(shù)是目前解決宿主機(jī)重啟最通用且有效的方式，在預(yù)先計(jì)劃的系統(tǒng)故障或者停機(jī)維護(hù)前，通過熱遷移將宿主機(jī)上所有 VM 遷移到其他機(jī)器上并保持 VM 的可用性。KVM 的 Live Migration 就是一個(gè)典型的例子，在啟動(dòng) Live Migration 后，KVM 會(huì)在對(duì)端機(jī)器上啟動(dòng)一個(gè)新的 VM 然后開啟監(jiān)聽端口等待來源數(shù)據(jù)，Source VM 會(huì)將目前 VM 的瞬間內(nèi)存拷貝過去，并且在接下來的內(nèi)存變化會(huì)在完整內(nèi)存拷貝完成進(jìn)行增量傳輸。塊設(shè)備的傳輸是一個(gè)主要的問題，如果 VM 采用本地存儲(chǔ)，那么通過網(wǎng)絡(luò)來傳輸巨大的容量會(huì)成為一個(gè)非常不穩(wěn)定的熱遷移失敗因素。因此，通常熱遷移需要共享存儲(chǔ)的支持來徹底避免塊數(shù)據(jù)傳輸使得 VM 的熱遷移可以在分鐘內(nèi)完成。這樣，像 KVM 只需要將所有設(shè)備驅(qū)動(dòng)(包括塊設(shè)備)和內(nèi)存數(shù)據(jù)通過網(wǎng)絡(luò)方式傳輸?shù)綄?duì)端，可以在 ms 級(jí)別的服務(wù)不可用時(shí)間內(nèi)完成遷移。具體 VM Live Migration 算法如 Pre-Copy 策略

Slave OS Hosting

因?yàn)闊徇w移需要 VM 全部使用能容災(zāi)的共享存儲(chǔ)方案，使得一些特殊性能需求的云平臺(tái)存在一定困難。云平臺(tái)共享存儲(chǔ)系統(tǒng)***的痛點(diǎn)之一就是 IO 延遲，因此很多云平臺(tái)會(huì)采取本地存儲(chǔ)加上遠(yuǎn)端異步災(zāi)備的方式來實(shí)現(xiàn)高性能塊存儲(chǔ)和高可用的折中。因?yàn)闉?zāi)備是異步的原因，熱遷移的塊設(shè)備遷移復(fù)雜性會(huì)大大提高，因此需要探索新的宿主機(jī)重啟并不影響 VM 的方式。這就出現(xiàn)了以雙系統(tǒng)為原型的宿主機(jī)重啟方案，本質(zhì)就是每個(gè)宿主機(jī)存在兩個(gè)系統(tǒng)，一個(gè)主系統(tǒng)就是通常意義上的宿主系統(tǒng)，而副系統(tǒng)是一個(gè)只支持部分能力的 mini OS。在需要宿主機(jī)操作系統(tǒng)重啟恢復(fù)的時(shí)候，主系統(tǒng)會(huì)將硬件的抽象服務(wù)(也就是操作系統(tǒng)的服務(wù))轉(zhuǎn)交給副系統(tǒng)提供服務(wù)，這時(shí) VM 仍然能夠進(jìn)行正常的 CPU 計(jì)算和內(nèi)存服務(wù)，只是提供服務(wù)的系統(tǒng)從原來的主系統(tǒng)變成了副系統(tǒng)。另外，mini OS 會(huì)在一些困難的服務(wù)轉(zhuǎn)交如 IO 服務(wù)上采取妥協(xié)的方式，mini OS 會(huì) block 或者減慢部分服務(wù)的能力。然后主系統(tǒng)在重載后啟動(dòng)重新接管，VM 恢復(fù)正常，期間可能會(huì)造成 VM 的 IO 能力下降等等問題，但是可以保證大部分 VM 業(yè)務(wù)服務(wù)的正常運(yùn)作。

小結(jié)

本文簡(jiǎn)要介紹了目前云平臺(tái)在對(duì)不可避免的宿主機(jī)重啟處理上的優(yōu)化技術(shù)，來減少用戶 VM 不可服務(wù)時(shí)間來提升云平臺(tái)的可用性。云平臺(tái)服務(wù)商通過會(huì)根據(jù)自身系統(tǒng)和 Hypervisor 的類型來選擇和實(shí)現(xiàn)特定的技術(shù)來實(shí)現(xiàn)這個(gè)目的。