zhouzhongping/wiki
1
0
Fork 0
Code

KVM：存储管理

Browse Source
This commit is contained in:
周中平 2024-07-19 17:00:41 +08:00
parent c0ab30e23b
commit 8a27772ac8
Signed by: zhouzhongping
GPG Key ID: 6666822800008000
1 changed files with 635 additions and 45 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

680
Tech/operating-system/Virtualization/2.KVM虚拟化/5. KVM 存储管理.md
View File

@ -1,101 +1,691 @@
--- ---
title: 标题 title: 5. KVM 存储管理
description: 描述 description: 本文深入探讨了KVM虚拟化环境中的存储管理，涵盖了磁盘映像文件、逻辑卷管理（LVM）、网络存储（NFS、iSCSI）的配置方法，以及存储池和存储卷的创建与管理。
keywords: keywords:
- 关键字 - KVM
- 存储管理
- 磁盘映像文件
- LVM
- 网络存储
- 存储池
- 存储卷
tags: tags:
- 标签 - 技术/操作系统
- 虚拟化/KVM
author: 仲平 author: 仲平
date: 2024-07-16 date: 2024-07-16
--- ---
## KVM 存储基础 ## KVM 存储
### KVM 存储的基本概念 ### 存储概念
KVM（Kernel-based Virtual Machine）存储是指在 KVM 虚拟化环境中，为虚拟机提供的存储资源。KVM 支持多种存储类型，包括磁盘映像文件、逻辑卷管理（LVM）和网络存储。虚拟机的存储设备可以像物理机的硬盘一样使用，并且可以通过不同的存储格式和协议进行管理和访问。
### 虚拟机存储类型 ### 虚拟机存储类型
- 磁盘映像文件（qcow2, raw 等） #### 磁盘映像文件（qcow2, raw）
- 逻辑卷管理（LVM）
- 网络存储（NFS, iSCSI）
## KVM 存储安装与准备 | 类型 | 特点 | 使用场景 |
| ---------------------------------------- | ------------------------------------------------------------ | ------------------------------------ |
| **qcow2** (QEMU Copy On Write version 2) | 支持动态分配、快照、压缩和加密。磁盘空间在实际使用时才分配，可以节省存储空间。 | 适合需要多快照和动态存储分配的环境。 |
| **raw** | 不支持快照、压缩和加密，直接映射磁盘数据。性能更高，适合需要最大化性能的场景。 | 适合高性能需求和简单存储管理的环境。 |
### 安装必要的软件包 #### 其他常见磁盘映像文件类型
- `libvirt` | 类型 | 特点 | 使用场景 |
- `qemu-kvm` | -------------------------------- | ------------------------------------------------------------ | --------------------------------------------- |
| **qcow** (QEMU Copy On Write) | qcow2 的前身，支持动态分配和快照，但性能和功能不及 qcow2。 | 已有 qcow 格式的旧环境。 |
| **vmdk** (Virtual Machine Disk) | 主要用于 VMware 虚拟机，可以兼容 KVM。支持多种虚拟磁盘格式和快照。 | 需要在 KVM 和 VMware 之间进行迁移的环境。 |
| **vdi** (Virtual Disk Image) | 主要用于 Oracle VirtualBox 虚拟机，可以兼容 KVM。支持动态分配和快照。 | 需要在 KVM 和 VirtualBox 之间进行迁移的环境。 |
| **vhd/vhdx** (Virtual Hard Disk) | 主要用于 Microsoft Hyper-V 虚拟机，可以兼容 KVM。vhdx 是 vhd 的改进版本，支持更大容量和更高性能。 | 需要在 KVM 和 Hyper-V 之间进行迁移的环境。 |
#### 逻辑卷管理（LVM）
逻辑卷管理（LVM）提供灵活的存储管理，可以动态调整逻辑卷大小、快照和卷组管理。性能较高，适合企业级应用和需要高性能、灵活存储管理的环境。
1. 创建物理卷和卷组：
```shell
sudo pvcreate /dev/sdX
sudo vgcreate vg_kvm /dev/sdX
```
2. 创建逻辑卷：
```shell
sudo lvcreate -n lv_myvm -L 20G vg_kvm
```
#### 网络存储（NFS, iSCSI）
NFS（Network File System）通过网络共享文件系统，适合共享存储和集中存储管理，以及多台虚拟机需要共享同一存储资源的环境。
挂载 NFS 存储：
```shell
sudo mount -t nfs server:/path/to/nfs /mnt/nfs
```
**iSCSI（Internet Small Computer Systems Interface）**：
通过网络提供块级存储，适合高性能需求的存储应用，以及需要集中管理和高性能存储访问的环境。
1. 安装 iSCSI 客户端：
```shell
sudo apt install open-iscsi # Ubuntu
sudo yum install iscsi-initiator-utils # CentOS/RHEL
```
1. 发现和登录 iSCSI 目标：
```shell
sudo iscsiadm -m discovery -t sendtargets -p <iSCSI_server_IP>
sudo iscsiadm -m node --login
```
### 配置系统存储支持 ### 配置系统存储支持
- 确认存储驱动加载情况 #### 确认存储驱动加载情况
- 准备存储设备和挂载点
1. **检查存储驱动**：
使用 `lsmod` 命令检查存储驱动是否加载：
```shell
lsmod | grep -E 'virtio_blk|virtio_scsi'
```
2. **加载存储驱动**：
如果存储驱动未加载，可以手动加载：
```shell
sudo modprobe virtio_blk
sudo modprobe virtio_scsi
```
#### 准备存储设备和挂载点
1. **准备本地存储设备**：
分区和格式化存储设备：
```shell
sudo fdisk /dev/sdX
sudo mkfs.ext4 /dev/sdX1
```
创建挂载点并挂载：
```shell
sudo mkdir -p /mnt/kvm_storage
sudo mount /dev/sdX1 /mnt/kvm_storage
```
2. **准备网络存储设备（NFS 例子）**：
安装 NFS 客户端：
```shell
sudo apt install nfs-common # Ubuntu
sudo yum install nfs-utils # CentOS/RHEL
```
挂载 NFS 共享：
```shell
sudo mkdir -p /mnt/nfs_storage
sudo mount -t nfs server:/path/to/nfs /mnt/nfs_storage
```
3. **配置自动挂载**：
编辑 `/etc/fstab` 文件，添加以下内容确保重启后自动挂载：
```text
/dev/sdX1 /mnt/kvm_storage ext4 defaults 0 2
server:/path/to/nfs /mnt/nfs_storage nfs defaults 0 0
```
通过以上步骤，可以为 KVM 环境配置各种存储支持，包括磁盘映像文件、LVM 和网络存储。确保存储驱动已加载，并准备好存储设备和挂载点，为虚拟机提供可靠的存储资源。
## 配置存储池 ## 配置存储池
### 什么是存储池 ### 存储池是什么
- 存储池的概念 #### 存储池的概念
- 存储池的类型
存储池（Storage Pool）是 KVM 虚拟化环境中的一种抽象概念，用于管理和组织底层存储资源。存储池可以包含多个存储卷（Storage Volume），每个存储卷对应虚拟机的一个磁盘映像文件、逻辑卷或网络存储块。通过存储池，管理员可以更方便地管理和分配存储资源。
#### 存储池的类型
| 类型 | 特点 | 使用场景 |
| --------------------------------------- | ------------------------------------------------------------ | ------------------------------ |
| **目录存储池** (Directory Storage Pool) | 使用本地或挂载的目录作为存储池。简单易用，适合中小型部署。 | 适合中小型部署。 |
| **逻辑卷存储池** (LVM Storage Pool) | 基于 LVM（Logical Volume Manager）创建和管理逻辑卷。提供灵活的卷管理和快照功能。 | 适合企业级部署。 |
| **网络存储池** (Network Storage Pool) | 使用网络存储协议（如 NFS、iSCSI）创建存储池。适合分布式存储和集中存储管理。 | 适合分布式存储和集中存储管理。 |
### 创建和管理目录存储池 ### 创建和管理目录存储池
- 使用 `virsh` 创建目录存储池 #### 使用 `virsh` 创建目录存储池
- 配置目录存储池
1. **创建目录存储池**：
创建一个目录存储池的 XML 配置文件，例如 `dir-pool.xml`：
```xml
<pool type='dir'>
<name>dir-pool</name>
<target>
<path>/mnt/kvm_storage</path>
</target>
</pool>
```
2. **定义并启动存储池**：
使用 `virsh` 命令定义并启动目录存储池：
```shell
sudo virsh pool-define dir-pool.xml
sudo virsh pool-start dir-pool
sudo virsh pool-autostart dir-pool
```
#### 配置目录存储池
1. **查看存储池信息**：
```shell
sudo virsh pool-info dir-pool
```
2. **查看存储池中的存储卷**：
```shell
sudo virsh vol-list dir-pool
```
3. **创建存储卷**：
```shell
sudo virsh vol-create-as dir-pool volume1 10G
```
### 创建和管理逻辑卷存储池 ### 创建和管理逻辑卷存储池
- 使用 `virsh` 创建 LVM 存储池 #### 使用 `virsh` 创建 LVM 存储池
- 配置 LVM 存储池
1. **创建 LVM 存储池**：
创建一个 LVM 存储池的 XML 配置文件，例如 `lvm-pool.xml`：
```xml
<pool type='logical'>
<name>lvm-pool</name>
<source>
<device path='/dev/vg_kvm'/>
<name>vg_kvm</name>
<format type='lvm2'/>
</source>
<target>
<path>/dev/vg_kvm</path>
</target>
</pool>
```
2. **定义并启动存储池**：
使用 `virsh` 命令定义并启动 LVM 存储池：
```shell
sudo virsh pool-define lvm-pool.xml
sudo virsh pool-start lvm-pool
sudo virsh pool-autostart lvm-pool
```
#### 配置 LVM 存储池
1. **查看存储池信息**：
```shell
sudo virsh pool-info lvm-pool
```
2. **查看存储池中的存储卷**：
```shell
sudo virsh vol-list lvm-pool
```
3. **创建存储卷**：
```shell
sudo virsh vol-create-as lvm-pool lv_volume1 20G
```
### 创建和管理网络存储池 ### 创建和管理网络存储池
- 使用 `virsh` 创建 NFS 存储池 #### 使用 `virsh` 创建 NFS 存储池
- 使用 `virsh` 创建 iSCSI 存储池
1. **创建 NFS 存储池**：
创建一个 NFS 存储池的 XML 配置文件，例如 `nfs-pool.xml`：
```xml
<pool type='netfs'>
<name>nfs-pool</name>
<source>
<host name='nfs-server'/>
<dir path='/path/to/nfs'/>
</source>
<target>
<path>/mnt/nfs_storage</path>
</target>
</pool>
```
2. **定义并启动存储池**：
使用 `virsh` 命令定义并启动 NFS 存储池：
```shell
sudo virsh pool-define nfs-pool.xml
sudo virsh pool-start nfs-pool
sudo virsh pool-autostart nfs-pool
```
#### 使用 `virsh` 创建 iSCSI 存储池
1. **创建 iSCSI 存储池**：
创建一个 iSCSI 存储池的 XML 配置文件，例如 `iscsi-pool.xml`：
```xml
<pool type='iscsi'>
<name>iscsi-pool</name>
<source>
<host name='iscsi-server'/>
<device path='/dev/sdX'/>
</source>
<target>
<path>/dev/disk/by-path/</path>
</target>
</pool>
```
2. **定义并启动存储池**：
使用 `virsh` 命令定义并启动 iSCSI 存储池：
```shell
sudo virsh pool-define iscsi-pool.xml
sudo virsh pool-start iscsi-pool
sudo virsh pool-autostart iscsi-pool
```
#### 配置网络存储池
1. **查看存储池信息**：
```shell
sudo virsh pool-info nfs-pool
sudo virsh pool-info iscsi-pool
```
2. **查看存储池中的存储卷**：
```shell
sudo virsh vol-list nfs-pool
sudo virsh vol-list iscsi-pool
```
3. **创建存储卷**：
```shell
sudo virsh vol-create-as nfs-pool volume1 10G
sudo virsh vol-create-as iscsi-pool volume2 20G
```
## 配置存储卷 ## 配置存储卷
### 什么是存储卷 ### 存储卷的概念
- 存储卷的概念 **存储卷（Storage Volume）是存储池（Storage Pool）中的一个逻辑单元，类似于传统文件系统中的文件。**存储卷为虚拟机提供存储空间，用于存储操作系统、应用程序和数据。每个存储卷可以对应一个磁盘映像文件、逻辑卷或网络存储块。通过存储卷，管理员可以灵活管理和分配存储资源。
- 存储卷的类型
### 创建和管理磁盘映像文件 ### 创建和管理磁盘映像文件
- 使用 `virsh` 创建磁盘映像文件 #### 使用 `virsh` 创建磁盘映像文件
- 配置磁盘映像文件的大小和格式
1. **创建磁盘映像文件**：
使用 `virsh` 创建一个磁盘映像文件：
```shell
sudo virsh vol-create-as dir-pool mydisk.qcow2 20G --format qcow2
```
以上命令将在 `dir-pool` 存储池中创建一个名为 `mydisk.qcow2` 的磁盘映像文件，大小为 20GB，格式为 qcow2。
2. **查看磁盘映像文件信息**：
查看创建的磁盘映像文件信息：
```shell
sudo virsh vol-info mydisk.qcow2 --pool dir-pool
```
#### 配置磁盘映像文件的大小和格式
1. **调整磁盘映像文件大小**：
可以使用 `qemu-img` 工具调整磁盘映像文件的大小：
```shell
qemu-img resize /path/to/mydisk.qcow2 +10G
```
以上命令将 `mydisk.qcow2` 的大小增加 10GB。
2. **转换磁盘映像文件格式**：
可以使用 `qemu-img` 工具转换磁盘映像文件的格式：
```shell
qemu-img convert -f qcow2 -O raw /path/to/mydisk.qcow2 /path/to/mydisk.raw
```
以上命令将 `mydisk.qcow2` 转换为 `mydisk.raw`，格式从 qcow2 转换为 raw。
### 创建和管理逻辑卷 ### 创建和管理逻辑卷
- 使用 `virsh` 创建逻辑卷 #### 使用 `virsh` 创建逻辑卷
- 配置逻辑卷的大小和格式
1. **创建逻辑卷**：
使用 `virsh` 创建一个逻辑卷：
```shell
sudo virsh vol-create-as lvm-pool lv_mydisk 20G
```
以上命令将在 `lvm-pool` 存储池中创建一个名为 `lv_mydisk` 的逻辑卷，大小为 20GB。
2. **查看逻辑卷信息**：
查看创建的逻辑卷信息：
```shell
sudo virsh vol-info lv_mydisk --pool lvm-pool
```
#### 配置逻辑卷的大小和格式
1. **调整逻辑卷大小**：
可以使用 `lvresize` 工具调整逻辑卷的大小：
```shell
sudo lvresize -L +10G /dev/vg_kvm/lv_mydisk
```
以上命令将 `lv_mydisk` 的大小增加 10GB。
2. **格式化逻辑卷**：
在使用逻辑卷之前，需要对其进行格式化：
```shell
sudo mkfs.ext4 /dev/vg_kvm/lv_mydisk
```
通过以上步骤，可以使用 `virsh` 创建和管理磁盘映像文件和逻辑卷，并灵活配置其大小和格式。这些存储卷为虚拟机提供了可靠和高效的存储解决方案。
## 虚拟机的存储配置 ## 虚拟机的存储配置
### 添加和删除虚拟机磁盘 ### 使用 `virsh` 添加和删除虚拟机磁盘
- 使用 `virt-manager` 添加和删除虚拟机磁盘 **添加虚拟机磁盘**
- 使用 `virsh` 添加和删除虚拟机磁盘
### 配置虚拟机的启动磁盘 1. 创建一个新的磁盘映像文件（如果需要）：
- 设置启动磁盘顺序 ```shell
- 配置虚拟机 BIOS 设置 sudo qemu-img create -f qcow2 /var/lib/libvirt/images/mydisk.qcow2 20G
```
2. 使用 `virsh` 命令编辑虚拟机的 XML 配置文件：
```shell
sudo virsh edit <vm_name>
```
3. 在 `<devices>` 部分中添加以下内容，指定新的磁盘设备：
```xml
<disk type='file' device='disk'>
<driver name='qemu' type='qcow2'/>
<source file='/var/lib/libvirt/images/mydisk.qcow2'/>
<target dev='vdb' bus='virtio'/>
<address type='pci' domain='0x0000' bus='0x00' slot='0x09' function='0x0'/>
</disk>
```
4. 保存并退出编辑器，启动或重启虚拟机以使新磁盘生效：
```shell
sudo virsh start <vm_name>
```
**删除虚拟机磁盘**
1. 使用 `virsh` 命令编辑虚拟机的 XML 配置文件：
```shell
sudo virsh edit <vm_name>
```
2. 找到需要删除的 `<disk>` 节点，并将其删除：
```xml
<disk type='file' device='disk'>
<driver name='qemu' type='qcow2'/>
<source file='/var/lib/libvirt/images/mydisk.qcow2'/>
<target dev='vdb' bus='virtio'/>
<address type='pci' domain='0x0000' bus='0x00' slot='0x09' function='0x0'/>
</disk>
```
3. 保存并退出编辑器，启动或重启虚拟机以应用更改：
```shell
sudo virsh start <vm_name>
```
### `virsh` 配置虚拟机的启动磁盘
1. 使用 `virsh` 命令编辑虚拟机的 XML 配置文件：
```shell
sudo virsh edit <vm_name>
```
2. 在 `<os>` 部分中，找到 `<boot dev='...'>` 节点并调整顺序。例如，将磁盘设备设为首选启动设备：
```xml
<os>
<type arch='x86_64' machine='pc-i440fx-2.9'>hvm</type>
<boot dev='hd'/>
<boot dev='cdrom'/>
</os>
```
3. 保存并退出编辑器，启动或重启虚拟机以应用更改：
```shell
sudo virsh start <vm_name>
```
#### 配置虚拟机 BIOS 设置
1. 使用 `virsh` 命令编辑虚拟机的 XML 配置文件：
```shell
sudo virsh edit <vm_name>
```
2. 在 `<os>` 部分中，添加或修改 `<bios>` 节点。例如，启用 BIOS 引导菜单：
```xml
<os>
<type arch='x86_64' machine='pc-i440fx-2.9'>hvm</type>
<loader readonly='yes' type='pflash'>/usr/share/OVMF/OVMF_CODE.fd</loader>
<nvram>/var/lib/libvirt/qemu/nvram/<vm_name>.fd</nvram>
<bootmenu enable='yes'/>
</os>
```
3. 保存并退出编辑器，启动或重启虚拟机以应用更改：
```shell
sudo virsh start <vm_name>
```
## 高级存储管理 ## 高级存储管理
### 快照管理 ### 快照管理
- 创建和管理磁盘快照 #### 创建和管理磁盘快照
- 使用 `virt-manager` 管理快照
- 使用 `virsh` 管理快照
### 存储池的扩展和缩减 快照是虚拟机在某一时刻的状态，包括虚拟机的磁盘和内存状态。通过快照，您可以在需要时恢复虚拟机到之前的状态。
- 扩展存储池容量 **创建磁盘快照**
- 缩减存储池容量
使用 `virsh` 创建磁盘快照：
```shell
sudo virsh snapshot-create-as <vm_name> <snapshot_name> --disk-only --atomic
```
以上命令创建一个仅包含磁盘状态的快照。
**管理磁盘快照**
使用 `virsh` 列出所有快照：
```shell
sudo virsh snapshot-list <vm_name>
```
**恢复快照**
使用 `virsh` 恢复快照：
```shell
sudo virsh snapshot-revert <vm_name> <snapshot_name>
```
#### 扩展存储池容量
**扩展目录存储池**
确保文件系统有足够的空间，然后直接添加更多存储卷到目录存储池即可。
**扩展 LVM 存储池**
1. 添加新的物理卷到卷组：
```shell
sudo pvcreate /dev/sdX
sudo vgextend vg_kvm /dev/sdX
```
2. 更新存储池配置：
```shell
sudo virsh pool-refresh lvm-pool
```
**扩展网络存储池**
对于 NFS 和 iSCSI，直接在网络存储服务器上扩展存储容量，然后刷新存储池即可。
#### 缩减存储池容量
**缩减 LVM 存储池**
1. 移动逻辑卷中的数据到其他物理卷：
```shell
sudo pvmove /dev/sdX
```
2. 移除物理卷并减少卷组大小：
```shell
sudo vgreduce vg_kvm /dev/sdX
sudo pvremove /dev/sdX
```
**缩减目录存储池和网络存储池**
一般不直接缩减这些存储池，建议清理不需要的存储卷以释放空间。
### 磁盘镜像和克隆 ### 磁盘镜像和克隆
- 创建磁盘镜像 #### 创建磁盘镜像
- 克隆虚拟机磁盘
**创建磁盘镜像**
使用 `qemu-img` 创建磁盘镜像：
```shell
qemu-img create -f qcow2 /var/lib/libvirt/images/mydisk.qcow2 20G
```
**转换磁盘镜像格式**
使用 `qemu-img` 转换磁盘镜像格式：
```shell
qemu-img convert -f qcow2 -O raw /path/to/mydisk.qcow2 /path/to/mydisk.raw
```
#### 克隆虚拟机磁盘
1. 使用 `qemu-img` 克隆磁盘映像：
```shell
qemu-img create -f qcow2 -b /var/lib/libvirt/images/source-disk.qcow2 /var/lib/libvirt/images/clone-disk.qcow2
```
2. 使用 `virsh` 定义新的虚拟机，并指定克隆的磁盘映像：
创建虚拟机 XML 文件：
```xml
<domain type='kvm'>
<name>clone-vm</name>
<memory unit='KiB'>1048576</memory>
<vcpu placement='static'>1</vcpu>
<os>
<type arch='x86_64' machine='pc-i440fx-2.9'>hvm</type>
</os>
<devices>
<disk type='file' device='disk'>
<driver name='qemu' type='qcow2'/>
<source file='/var/lib/libvirt/images/clone-disk.qcow2'/>
<target dev='vda' bus='virtio'/>
<address type='pci' domain='0x0000' bus='0x00' slot='0x04' function='0x0'/>
</disk>
</devices>
</domain>
```
3. 使用 `virsh` 定义并启动新的虚拟机：
```shell
sudo virsh define /path/to/clone-vm.xml
sudo virsh start clone-vm
```