前两篇文章,我们分别介绍 Kubevirt 的安装、基本使用 以及 将 oVirt 虚拟机迁移到 KubeVirt,我们留了两个ToDo,一个是本地磁盘的动态分配,一个是固定 IP 的需求,本期我们先解决第一个,本地磁盘的动态分配。
使用 OpenEBS-LVM 替换 local-storage
OpenEBS-LVM 对比 local-storage,主要新增了容量限额、动态分配PV、resize 功能,本文不做过多介绍,后面会单独讲 。
创建 sc 时,注意两个点,开启卷扩展,
allowVolumeExpansion: true
,卷绑定方式选择延迟绑定,volumeBindingMode: WaitForFirstConsumer
kubevirt 进阶功能介绍
kubectl -n kubevirt edit kubevirts.kubevirt.io kubevirt
...
spec:
configuration:
developerConfiguration:
cpuAllocationRatio: 2 # CPU 超卖2倍
memoryOvercommit: 200 # 内存超卖2倍
...
示例,设置虚拟机规格为 8c16g,不声明 Request
...
spec:
domain:
cpu:
cores: 8
memory:
guest: 16Gi
...
创建成功后, 查看 Pod 的 Request 值,发现是设置值的1/2 ,符合预期
requests:
cpu: "4"
devices.kubevirt.io/kvm: "1"
devices.kubevirt.io/tun: "1"
devices.kubevirt.io/vhost-net: "1"
ephemeral-storage: 50M
memory: 8506Mi
登录虚拟机查看,为 8c16g,符合预期
如果声明了 Request 值,则优先走 Request 值
修改 CPU/MEM 值, 重启 VM 即可
virtctl restart <vmi>
Kubevirt 也支持热升配[2],不停机,但有些限制,比如内核版本,存储读写模式等,后续实践后分享
开启磁盘扩容功能
kubectl -n kubevirt edit kubevirts.kubevirt.io kubevirt
spec:
configuration:
developerConfiguration:
featureGates:
- ExpandDisks
查看当前数据盘大小,为500Gi
在线扩容到 600G 步骤, 手动修改关联 PVC 的大小即可, openebs-lvm 会自动扩容
...
spec:
resources:
requests:
storage: "600Gi"
登录服务器,扩容文件系统
resize2fs /dev/vdb # ext4 文件系统,数据盘为 vdb
因为暂时还没实现固定 IP, 但是担心 虚拟机重启, IP 发生改变,对业务产生影响,所以暂时,指定 Node 进行分配 VM
从指定 的 Node 上选择 VMI IP:
# 查看 Node 分配的 block
kubectl get blockaffinities.crd.projectcalico.org
# 挑选一个 没有分配的 IP
calicoctl ipam show --ip=$(ip_addr)
# 指定 Pod IP
...
spec:
template:
metadata:
annotations:
cni.projectcalico.org/ipAddrs: '["pod-ip"]'
指定 Node 亲和性
...
spec:
nodeSelector:
kubernetes.io/hostname: "nodename"
...
VM 完整 Yaml 文件如下:
apiVersion: kubevirt.io/v1
kind:VirtualMachine
metadata:
labels:
kubevirt.io/vm:<vmi-name>
name:<vmi-name>
spec:
running:false
template:
metadata:
labels:
kubevirt.io/vm:<vmi-name>
annotations:
cni.projectcalico.org/ipAddrs:'["pod-ip"]'
spec:
nodeSelector:
kubernetes.io/hostname:"nodename"
domain:
cpu:
cores:8
memory:
guest:16Gi
devices:
disks:
-disk:
bus:virtio
name:datavolumedisk1-sys
-disk:
bus:virtio
name:datavolumedisk1-data
interfaces:
-name:default
bridge:{}
#resources:
# requests:
# memory: 8Gi
networks:
-name:default
pod:{}
volumes:
-dataVolume:
name:demo-1-sys
name:datavolumedisk1-sys
-dataVolume:
name:demo-1-data
name:datavolumedisk1-data
dataVolumeTemplates:
-metadata:
name:demo-1-sys
spec:
storage:
storageClassName:openebs-lvm
accessModes:
-ReadWriteOnce
resources:
requests:
storage:80Gi
source:
http:
url:<img_url>
-metadata:
name:demo-1-data
spec:
storage:
storageClassName:openebs-lvm
accessModes:
-ReadWriteOnce
resources:
requests:
storage:500Gi
source:
blank:{}
参考链接:
[1] Node overcommit:https://kubevirt.io/user-guide/compute/node_overcommit/#node-overcommit
[2] CPU Hotplug:https://kubevirt.io/user-guide/compute/cpu_hotplug/#cpu-hotplug
Memory Hotplug:https://kubevirt.io/user-guide/compute/memory_hotplug/#memory-hotplug
[3] disk expansion https://kubevirt.io/user-guide/storage/disks_and_volumes/#disk-expansion
[4] Node assignment https://kubevirt.io/user-guide/compute/node_assignment/#node-assignment