VMware 虚拟机搭 Proxmox VE 集群(一):安装、组集群与带盘在线迁移
VMware 虚拟机搭 Proxmox VE 集群(一):安装、组集群与带盘在线迁移
目标:三台 PVE 节点组成一个集群,每台挂本地 ZFS 盘,验证”带盘在线迁移”,不使用共享存储。
环境:Windows 宿主机 + VMware Workstation 17 + Proxmox VE 9.2.32(Debian 13 trixie,内核 7.0.14-30-pve)。
规划
| 节点 | Hostname | IP | 系统盘 | 数据盘 |
|---|---|---|---|---|
| pve1 | pve1.lab | 192.168.88.11 | 32 GiB | 60 GiB |
| pve2 | pve2.lab | 192.168.88.12 | 32 GiB | 60 GiB |
| pve3 | pve3.lab | 192.168.88.13 | 32 GiB | 60 GiB |
网络使用 VMware NAT(VMnet8),网关 192.168.88.2。静态 IP 要避开 VMware 的 DHCP 池(通常是 .128 到 .254),否则会和自动分配的地址冲突。
系统盘装 PVE,数据盘留空,装完后单独做成 ZFS 池。这样”系统”和”虚拟机磁盘”分离,也方便后面测试迁移。
1. 宿主机准备
嵌套 KVM 要求 VMware 把 VT-x/AMD-V 透传给虚拟机,Windows 上最大的干扰是 Hyper-V。
1 | |
VMware Workstation 17 即可(个人使用免费)。宿主机建议 16GB 内存以上、8 核、100GB 空闲磁盘。
2. 创建三台虚拟机
| 项目 | 配置 |
|---|---|
| 客户机系统 | Linux → Debian 12/13 64 位 |
| CPU | 2 vCPU,勾选”虚拟化 Intel VT-x/EPT 或 AMD-V/RVI” |
| 内存 | 4096 MB |
| 硬盘 1 | 32 GiB,SCSI |
| 硬盘 2 | 60 GiB,SCSI |
| 网络 | NAT(VMnet8) |
| CD/DVD | Proxmox VE ISO |
每台都要勾选嵌套虚拟化,这是硬性要求。三台配置保持一致。
PVE ISO 从 https://www.proxmox.com/en/downloads 的下载页获取,文件名形如 proxmox-ve_9.2-1.iso,大小约 1.5 到 2GB。下载后校验:
1 | |
3. 安装 PVE(虚拟机要开intel VT-x)
挂载 ISO 启动,选择 Install Proxmox VE (Graphical),然后按向导走:
- 接受 EULA
- Target Harddisk 选系统盘(32GiB 那块),文件系统选 ext4
- 时区、键盘
- 设置 root 密码和邮箱
- 网络配置
网络页按规划填写:
1 | |
要点:
- Hostname 必须是带点的 FQDN,三台分别用 pve1.lab / pve2.lab / pve3.lab
- 数据盘(60GiB 那块)不要选、不要格式化,装完保持空白
- 安装器显示的是十进制 GB,32GiB 会显示成 34.4GB,不是错误
- pve2、pve3 只改 Hostname 和 IP,其余步骤完全相同
4. 首次登录与检查
浏览器打开 https://192.168.88.11:8006,用 root 加安装时设置的密码登录,领域选 Linux PAM。自签名证书的警告直接跳过。
登录后在 Shell 里检查:
1 | |
5. 换源
PVE 9 使用 deb822 格式的 .sources 文件,不再是 pve-enterprise.list。默认只配了企业源,没有订阅会 401。
1 | |
写入免费源,官方地址和清华镜像二选一:
1 | |
Signed-By 仍指向本机已有的官方 keyring,镜像只转发文件,签名校验不受影响。
顺手把 Debian 基础源也换成镜像:
1 | |
更新并确认:
1 | |
升级过程中如果刷屏 “Tried to start delayed item … but failed”,是 apt 3.0.3 的已知 bug,由临时下载失败触发,apt 3.0.4 已修复。确认 apt –version 在 3.0.4 以上即可忽略。
pve2、pve3 装完后,把源文件从 pve1 拷过去,省得重复改:
1 | |
6. 组集群
先统一三台的名称解析,每台都覆盖写入同样的内容:
1 | |
在 pve1 创建集群:
1 | |
在 pve2、pve3 加入(确保此时没有虚拟机):
1 | |
三台都加入后检查:
1 | |
7. ZFS 池与存储
每台节点各建一个同名池。先确认哪块是 60GiB 的空盘——认大小,不认设备名,VMware 里不同虚拟机的盘序可能相反。
1 | |
如果 ZFS 报 “is in use”,说明选到了系统盘,停下来重新确认,不要加 -f 强推。
三台的池都建好后,在一台上添加存储(storage.cfg 是集群共享配置,只需一次):
1 | |
8. 测试 VM 与带盘在线迁移
先下载镜像,然后上传,镜像会上传到 “/var/lib/vz/template/iso” 下面

建一台最小 VM,系统盘放在 vmdata:
1 | |
控制台登录后跑一个时间戳循环,用来观察迁移过程中虚拟机是否中断:
1 | |
迁移前必须弹出光驱。PVE 不会迁移 local 存储上的 ISO,配置里带着 cdrom 镜像会直接拒绝:
1 | |
失败时的典型日志:
1 | |
执行在线迁移:
1 | |
实测日志(8GiB 磁盘):
1 | |
整个过程中 Alpine 控制台的时间戳连续,首次迁移停机约 14 毫秒,反向迁移到 pve3 时停机 6 毫秒。
迁移后核对:
1 | |
最后修正启动顺序,否则关机后无法启动:
1 | |
9. 当前进度
- pve1 / pve2 / pve3 安装,内核统一到 7.0.14-30-pve
- 三台换源、更新
- 集群组建完成(3 节点、3 票、Quorate)
- 每台创建 ZFS 池 vmdata
- 集群存储 vmdata 添加完成,三台 active
- 测试 VM 创建,磁盘落在 vmdata
- 带盘在线迁移验证(pve1 到 pve2,停机 14 ms)
- 反向迁移复测(pve2 到 pve3,停机 6 ms)
10. 注意
- PVE 9 的企业源文件是 pve-enterprise.sources,不是旧版的 .list,旧命令会报 “No such file”。
- 升级时满屏 “Tried to start delayed item”,是 apt 3.0.3 的已知 bug,升到 3.0.4 后消失。
- 新内核装好后必须重启才会生效,用 uname -r 和已安装内核对比确认。
- 迁移报 local cdrom image:PVE 不迁移 local 存储上的 ISO,迁移前先执行 qm set –ide2 none,media=cdrom。
- 弹出光驱后忘记改 boot order,虚拟机关机后会提示 no bootable device。
11. 后续更新内容(可能)
- 给关键 VM 配置 pvesr 复制,迁移时只传增量,节点故障也能在对面直接拉起。
- 部署 Proxmox Backup Server,做一次整机备份与恢复演练。
- 评估何时需要共享存储:只有要求秒级迁移或自动故障切换时,才值得上 Ceph 副本 2。
bote因为比较忙所以不能像以前一样手写文档了,现在都是大肥鱼写完我再改,后面的内容更新也会慢一点。