Proxmox VE超融合集群實(shí)踐真?zhèn)?/h1>

第 1 章 “老司機(jī)”眼中的私有云 / 1 
1.1 私有云的定義 / 1 
1.2 私有云適用場(chǎng)景 / 3 
1.2.1 傳統(tǒng)行業(yè) / 3 
1.2.2 互聯(lián)網(wǎng)行業(yè) / 3 
1.3 私有云行業(yè)現(xiàn)狀 / 4 
1.4 私有云技術(shù)要求（針對(duì) Proxmox VE 平臺(tái)） / 5 
第 2 章 開(kāi)源私有云神器 Proxmox VE / 6 
2.1 Proxmox VE 的主要特征 / 6 
2.2 Proxmox VE 的功能亮點(diǎn) / 8 
2.3 服務(wù)與支持 / 15 
2.4 題外話 / 15 
第 3 章 牛刀小試：安裝 Proxmox VE / 17 
3.1 用 U 盤(pán) / 光盤(pán)安裝 Proxmox VE / 19 
3.1.1 準(zhǔn)備安裝介質(zhì) / 19 
3.1.2 開(kāi)始 Proxmox VE 系統(tǒng)安裝 / 22 
3.1.3 安裝后的處理 / 24 
3.2 在 Debian 上安裝 Proxmox VE / 26 
3.2.1 修改“/etc/hosts”文件 / 26 
3.2.2 添加軟件包更新源 / 26 
3.2.3 安裝 Proxmox VE 相關(guān)的軟件包 / 27 
3.2.4 后續(xù)處理工作 / 28 
3.3 驗(yàn)證安裝的正確性 / 28 
3.4 安裝注意事項(xiàng) / 29 
第 4 章 配置和管理 Proxmox VE / 31 
4.1 管理平臺(tái)登錄 / 31 
4.2 網(wǎng)絡(luò)配置與管理 / 33 
4.3 存儲(chǔ)管理 / 37 
4.3.1 增加本地存儲(chǔ) / 38 
4.3.2 增加遠(yuǎn)程共享存儲(chǔ) NFS / 42 
4.4 備份與恢復(fù) / 43 
4.4.1 數(shù)據(jù)備份 / 43 
4.4.2 虛擬機(jī)或容器恢復(fù) / 44 
4.4.3 備份不可再生數(shù)據(jù) / 46 
4.5 其他管理操作 / 46 
第 5 章 在 Proxmox VE 上創(chuàng)建虛擬機(jī) / 47 
5.1 用常規(guī)方式創(chuàng)建虛擬機(jī) / 47 
5.1.1 準(zhǔn)備操作系統(tǒng) ISO 鏡像文件 / 48 
5.1.3 在 Proxmox VE 上創(chuàng)建虛擬機(jī) / 49 
5.1.4 虛擬機(jī)資源及屬性變更 / 53 
5.1.5 修改虛擬機(jī)配置舉例 / 55 
5.2 為虛擬機(jī)安裝操作系統(tǒng) / 59 
5.2.1 安裝 Linux 操作系統(tǒng)（CentOS 7） / 60 
5.2.2 安裝 Windows 操作系統(tǒng) / 62 
5.3 創(chuàng)建虛擬機(jī)的其他方法 / 65 
第 6 章 虛擬機(jī)日常管理 / 66 
6.1 虛擬機(jī)硬件配置變更 / 66 
6.1.1 減少虛擬機(jī) CPU 核數(shù) / 67 
6.1.2 減少虛擬機(jī)內(nèi)存容量 / 67 
6.1.3 虛擬機(jī)磁盤(pán)擴(kuò)容 / 68 
6.2 虛擬機(jī)克隆 / 70 
6.3 虛擬機(jī)遷移 / 71 
6.4 快速創(chuàng)建虛擬機(jī) / 73 
6.5 虛擬機(jī)銷毀 / 74 
6.6 操作失敗鎖定解除 / 76 
第 7 章 Proxmox VE 單節(jié)點(diǎn)虛擬化 / 77 
7.1 應(yīng)用場(chǎng)景描述 / 78 
7.2 系統(tǒng)規(guī)劃 / 78 
7.3 功能具體實(shí)現(xiàn) / 79 
7.3.1 安裝部署 Proxmox VE / 79 
7.3.2 安裝部署 pptpd / 79 
7.3.3 配置 pptpd / 81 
7.3.4 網(wǎng)絡(luò)地址轉(zhuǎn)換及 IP 偽裝 / 82 
7.3.5 Windows 客戶端撥號(hào)驗(yàn)證 / 83 
7.4 創(chuàng)建虛擬機(jī)、安裝操作系統(tǒng)并部署應(yīng)用 / 84 
7.5 為宿主機(jī)部署 HAProxy / 84 
7.6 項(xiàng)目實(shí)施效果 / 88 
第 8 章 Proxmox VE 多節(jié)點(diǎn)虛擬化 / 89 
8.1 只用集群、不要求高可用的場(chǎng)景 / 90 
8.2 創(chuàng)建 Proxmox VE 集群 / 90 
8.2.1 安裝 Proxmox VE 前的準(zhǔn)備工作 / 91 
8.2.2 在物理節(jié)點(diǎn)安裝 Proxmox VE / 91 
8.2.3 正式創(chuàng)建 Proxmox VE 集群 / 92 
8.3 準(zhǔn)備 NFS 共享服務(wù)器 / 95 
8.4 創(chuàng)建虛擬機(jī)及安裝虛擬機(jī)操作系統(tǒng) / 97 
8.5 虛擬機(jī)部署應(yīng)用 / 98 
8.6 創(chuàng)建虛擬機(jī)模板并克隆虛擬機(jī) / 98 
8.7 部署并配置負(fù)載均衡 / 100 
8.8 數(shù)據(jù)備份與恢復(fù) / 100 
8.9 系統(tǒng)可用性測(cè)試 / 101 
第 9 章 Proxmox VE 最高可用性超融合集群 / 102 
9.1 最高可用性集群方案設(shè)計(jì) / 103 
9.1.1 總體目標(biāo) / 103 
9.1.2 平臺(tái)組成 / 104 
9.1.3 資源配置 / 105 
9.1.4 實(shí)施計(jì)劃 / 107 
9.2 安裝 Proxmox VE 到物理服務(wù)器 / 108 
9.3 創(chuàng)建 Proxmox VE 集群 / 108 
9.4 創(chuàng)建 Ceph 去中心化分布式存儲(chǔ) / 110 
9.4.1 安裝 Ceph 相關(guān)的包 / 111 
9.4.2 初始化 Ceph 存儲(chǔ)網(wǎng)絡(luò) / 112 
9.4.3 創(chuàng)建 Ceph 監(jiān)視器 / 113 
9.4.4 創(chuàng)建 CephOSD / 115 
9.4.5 創(chuàng)建 CephPool / 116 
9.5 創(chuàng)建高可用虛擬機(jī)或容器（VM/LXC HA） / 117 
9.5.1 在集群的主機(jī)節(jié)點(diǎn)建立起 HA 組 / 118 
9.5.2 在集群上創(chuàng)建虛擬機(jī) / 118 
9.5.3 實(shí)現(xiàn)虛擬機(jī)高可用（VMHA） / 119 
9.5.4 高可用 HA 功能測(cè)試 / 120 
9.6 后續(xù)操作 / 121 
9.7 遷移驗(yàn)收及效果 / 122 
9.8 三個(gè)基本概念 / 122 
第 10 章 Proxmox VE 超融合集群日常維護(hù) / 124 
10.1 Proxmox VE 升級(jí) / 125 
10.1.1 Proxmox VE 升級(jí)的前提條件及注意事項(xiàng) / 125 
10.1.2 Proxmox VE 升級(jí)條件檢查 / 126 
10.1.3 升級(jí)集群同步服務(wù) Corosync / 126 
10.1.4 準(zhǔn)備 Proxmox VE 6 的更新源 / 128 
10.1.5 升級(jí)到 Proxmox VE 6.X / 129 
10.1.6 Proxmox VE 6.4 版本功能驗(yàn)證 / 133 
10.2 Proxmox VE 超融合集群容量管理 / 134 
10.2.1 Proxmox VE 非增加節(jié)點(diǎn)方式擴(kuò)充容量 / 134 
10.2.2 新增物理節(jié)點(diǎn)擴(kuò)充超融合集群容量 / 135 
10.2.3 從超融合集群中撤離節(jié)點(diǎn) / 137 
10.3 監(jiān)控 Proxmox VE 超融合集群 / 139 
10.3.1 用 Centreon 監(jiān)控 Proxmox VE超融合集群 / 140 
10.3.2 監(jiān)控 Proxmox VE 超融合集群上的虛擬機(jī) / 144 
10.4 打造炫酷的 Proxmox VE 監(jiān)控界面 / 145 
10.4.1 準(zhǔn)備工作 / 145 
10.4.2 整合工作 / 147 
第 11 章 Proxmox VE 的備份與恢復(fù) / 152 
11.1 虛擬機(jī)應(yīng)用數(shù)據(jù)備份與恢復(fù) / 153 
11.1.1 非結(jié)構(gòu)化數(shù)據(jù)備份與恢復(fù) / 153 
11.1.2 結(jié)構(gòu)化數(shù)據(jù)備份與恢復(fù) / 153 
11.2 Proxmox VE 虛擬機(jī)備份形式 / 154 
11.3 將 Proxmox VE 上的虛擬機(jī)備份到 NFS / 154 
11.3.1 準(zhǔn)備共享存儲(chǔ) NFS / 154 
11.3.2 備份 Proxmox VE 集群上的虛擬機(jī) / 156 
11.4 Proxmox VE 虛擬機(jī)恢復(fù) / 161 
11.4.1 Proxmox VE 目標(biāo)節(jié)點(diǎn)添加 NFS 共享存儲(chǔ) / 162 
11.4.2 從備份中還原 Proxmox VE 虛擬機(jī) / 162 
11.4.3 后續(xù)工作 / 163 
11.5 Proxmox Backup Server 專用備份 / 163 
11.5.1 部署 Proxmox Backup Server 2.0 / 164 
11.5.2 配置主 Proxmox Backup Server / 168 
11.5.3 將 Proxmox VE 連接到Proxmox Backup Server / 173 
11.5.4 將 Proxmox VE 備份到 Proxmox Backup Server 功能測(cè)試 / 176 
11.5.5 設(shè)置 Proxmox VE 集群自動(dòng)備份 / 176 
11.6 把 PBS 的數(shù)據(jù)同步到另一個(gè)PBS / 178 
11.6.1 為輔助 PBS 進(jìn)行同步配置 / 180 
11.6.2 將主 PBS 的數(shù)據(jù)添加到輔助 PBS / 180 
11.6.3 為輔助 PBS 添加同步作業(yè) / 181 
11.7 備份非 Proxmox VE 系統(tǒng)數(shù)據(jù)到Proxmox Backup Server / 183 
11.7.1 安裝客戶端軟件 Proxmox-backup-client / 183 
11.7.2 遠(yuǎn)端 Proxmox Backup Server 設(shè)置備份路徑并授權(quán) / 184 
11.7.3 從 CentOS 備份數(shù)據(jù)到 PBS / 185 
11.7.4 CentOS 從 Proxmox Backup Server 備份中恢復(fù)數(shù)據(jù) / 187 
第 12 章 Proxmox VE 常見(jiàn)故障分析 / 189 
12.1 Proxmox VE 集群節(jié)點(diǎn)崩潰處理 / 189 
12.1.1 問(wèn)題描述 / 189 
12.1.2 從集群中刪除故障節(jié)點(diǎn) / 190 
12.2 Proxmox VE 升級(jí)導(dǎo)致 Ceph 健康檢測(cè)告警 / 192 
12.2.1 Ceph 故障描述 / 193 
12.2.2 Ceph 故障分析 / 194 
12.2.3 Ceph-mgr 故障處理 / 196 
12.3 Proxmox VE 集群升級(jí)過(guò)程導(dǎo)致節(jié)點(diǎn)離群 / 198 
12.4 Proxmox VE 性能故障 / 199 
12.4.1 磁盤(pán) I/O 引起的性能故障 / 199 
12.4.2 網(wǎng)絡(luò) I/O 引起的性能故障 / 199 
12.5 Proxmox VE 備份性能優(yōu)化 / 200 
12.5.1 問(wèn)題描述 / 201 
12.5.2 臨時(shí)措施 / 201 
12.5.3 方案設(shè)計(jì) / 202 
12.5.4 方案實(shí)施 / 203 
12.5.5 實(shí)施效果 / 204 
12.6 Proxmox VE 超融合集群掛載 NFS出錯(cuò)處理 / 205 
12.7 Proxmox VE 超融合集群 CephOSD 磁盤(pán)塞滿 / 206 
12.8 Proxmox VE 集群 Ceph 報(bào)“ceph 1pg inconsistent”錯(cuò)誤 / 208 
第 13 章 不停服務(wù)將系統(tǒng)原樣遷移到 Proxmox VE 集群 / 209 
13.1 系統(tǒng)遷移基本架構(gòu) / 210 
13.2 部署系統(tǒng)遷移控制中心 / 210 
13.2.1 安裝操作系統(tǒng) CentOS 7 / 210 
13.2.2 部署系統(tǒng)遷移控制中心軟件 / 214 
13.2.3 控制中心軟件授權(quán) / 218 
13.2.4 安裝本地功能模塊“遷移 Move” / 219 
13.3 為源系統(tǒng)安裝數(shù)據(jù)遷移客戶端 / 220 
13.4 準(zhǔn)備目標(biāo)系統(tǒng) / 222 
13.4.1 為 Proxmox VE 集群創(chuàng)建虛擬機(jī) / 222 
13.4.2 啟動(dòng)虛擬機(jī)并連接到控制中心 / 223 
13.4.3 將目標(biāo)系統(tǒng)連接到控制中心 / 225 
13.5 系統(tǒng)在線遷移 / 226 
13.5.1 添加遷移任務(wù) / 227 
13.5.2 源系統(tǒng)向目標(biāo)系統(tǒng)整體遷移 / 229 
13.6 目標(biāo)系統(tǒng)切換 / 230 
13.7 在線遷移 Windows 系統(tǒng) / 231 
第 14 章 Proxmox VE 桌面虛擬化或桌面云 / 232 
14.1 辦公場(chǎng)景使用 PC 面臨的問(wèn)題 / 232 
14.2 解決傳統(tǒng)電腦辦公問(wèn)題的思路 / 233 
14.2.1 30 ～ 50 人規(guī)模桌面云方案設(shè)計(jì) / 233 
14.2.2 200 人左右規(guī)模桌面云方案設(shè)計(jì) / 234 
14.3 Proxmox VE 桌面虛擬化 / 235 
14.3.1 實(shí)驗(yàn)設(shè)施準(zhǔn)備 / 235 
14.3.2 Proxmox VE 桌面虛擬化實(shí)施步驟 / 237 
14.3.3 安裝創(chuàng)建 Windows 虛擬機(jī) / 237 
14.3.4 用 SPICE 客戶端連接虛擬機(jī) / 245 
14.3.5 云終端盒子連接虛擬機(jī) / 249 
14.4 Proxmox VE 桌面虛擬化不足之處 / 251 
14.5 Proxmox VE 桌面虛擬化改進(jìn)設(shè)想 / 251 
第 15 章 Proxmox VE 常見(jiàn)問(wèn)題交流及功能期待 / 252 
15.1 Proxmox VE 常見(jiàn)問(wèn)題交流 / 252 
15.2 Proxmox VE 集群部署位置 / 256 
15.3 Proxmox VE 有待完善的地方 / 256 
附錄 A 基于 Proxmox VE 的云桌面系統(tǒng)嘗鮮 / 257 
A.1 準(zhǔn)備好云桌面管理平臺(tái) / 258 
A.2 恢復(fù)虛擬機(jī)模板 / 259 
A.3 生成虛擬機(jī) / 260 
A.3.1 添加宿主機(jī) / 260 
A.3.2 創(chuàng)建云桌面 / 261 
A.4 云終端連接遠(yuǎn)程桌面 / 262 
A.4.1 云終端入網(wǎng) / 262 
A.4.2 云終端連接虛擬機(jī)（云桌面） / 262 
A.5 改進(jìn)意見(jiàn) / 264