从VMware ESXi到Proxmox：超融合架构下的iSCSI存储配置与性能实测对比

VMware ESXi与Proxmox VE超融合架构下的iSCSI存储实战评测

在构建企业级私有云或超融合基础架构时，存储性能往往是决定整体系统效能的关键瓶颈。iSCSI作为一种经济高效的存储网络协议，允许虚拟化平台通过网络访问远程存储设备，如同操作本地磁盘一般。本文将深入对比VMware ESXi与Proxmox VE两大虚拟化平台在iSCSI存储配置、性能表现及实际应用中的差异，为技术选型提供数据支撑。

1. 超融合架构中的iSCSI技术解析

iSCSI协议通过将SCSI命令封装在TCP/IP数据包中，实现了块级存储设备在标准以太网上的传输。这种技术使得服务器能够像访问本地SCSI设备一样访问远程存储资源，特别适合虚拟化环境中的共享存储需求。

在超融合架构中，iSCSI存储通常承担以下关键角色：

• 虚拟机磁盘存储：为虚拟机提供高性能的块存储空间
• 共享存储池：实现多主机间的存储资源共享
• 高可用基础：配合集群技术实现虚拟机故障自动迁移

与传统的FC-SAN相比，iSCSI解决方案具有以下优势：

提示：在实际部署中，建议为iSCSI流量配置独立的VLAN或物理网络，避免与其他业务流量产生干扰。

2. VMware ESXi平台iSCSI配置详解

VMware ESXi作为企业虚拟化市场的领导者，其对iSCSI的支持已经非常成熟。下面我们将逐步演示如何在ESXi 7.0环境中配置软件iSCSI适配器。

2.1 初始环境准备

首先确保ESXi主机已正确配置网络连接，建议为iSCSI流量分配至少两个物理网口用于多路径I/O（MPIO）。在vSphere Client中执行以下操作：

1. 导航至"主机"→"配置"→"网络"→"VMkernel适配器"
2. 添加新的VMkernel适配器，选择"iSCSI"服务类型
3. 分配适当的IP地址和子网掩码

2.2 软件iSCSI适配器配置

# 通过SSH连接到ESXi主机后，可以检查现有存储适配器 esxcli storage core adapter list # 启用软件iSCSI适配器 esxcli iscsi software set --enabled=true

在vSphere Client中的配置步骤：

1. 进入"存储"→"适配器"→"添加软件iSCSI适配器"
2. 记录自动生成的iSCSI名称（IQN）
3. 在"动态发现"中添加iSCSI目标服务器地址
4. 配置多路径策略（推荐使用Round Robin）

2.3 性能优化建议

为提高ESXi环境下iSCSI存储的性能，可考虑以下调优措施：

• Jumbo Frames：在网络设备和ESXi主机上启用9000字节的MTU
• 队列深度调整：适当增加磁盘设备的队列深度

esxcli system module parameters set -m iscsi_vmk -p iscsivmk_LunQDepth=32

• TCP参数优化：调整网络栈参数减少延迟

esxcli system module parameters set -m tcp -p tcp_ipv4_tcp_retries2=8

3. Proxmox VE平台iSCSI配置指南

Proxmox VE作为开源的虚拟化平台，同样提供了完善的iSCSI支持。以下是在Proxmox VE 7.x中配置iSCSI存储的详细流程。

3.1 初始网络配置

Proxmox VE建议使用Debian网络配置方式设置iSCSI网络：

# /etc/network/interfaces 示例配置 auto enp3s0f0 iface enp3s0f0 inet manual auto vmbr1 iface vmbr1 inet static address 192.168.100.10/24 bridge-ports enp3s0f0 bridge-stp off bridge-fd 0 mtu 9000

3.2 iSCSI存储添加

在Proxmox WEB界面中添加iSCSI存储：

1. 导航至"数据中心"→"存储"→"添加"→"iSCSI"
2. 填写iSCSI目标服务器IP和端口（默认3260）
3. 指定发现门户并选择目标
4. 配置多路径选项（如适用）

3.3 命令行高级配置

对于需要精细控制的场景，可以使用命令行工具：

# 发现iSCSI目标 iscsiadm -m discovery -t st -p 192.168.100.20 # 查看发现的节点 iscsiadm -m node # 设置自动登录 iscsiadm -m node -T iqn.2023-01.com.example:storage -p 192.168.100.20:3260 --op update -n node.startup -v automatic # 建立连接 iscsiadm -m node -T iqn.2023-01.com.example:storage -p 192.168.100.20:3260 -l

4. 性能实测对比与分析

为客观评估两种平台下的iSCSI性能表现，我们搭建了以下测试环境：

• 存储服务器：Dell R740xd，12块SAS SSD配置RAID10，CentOS 8 + targetcli
• 网络环境：双端口25GbE，MPIO配置
• 测试工具：fio 3.27

4.1 随机读写性能对比

使用以下fio参数测试4K随机IOPS：

[global] ioengine=libaio direct=1 runtime=60 size=10G numjobs=4 group_reporting=1 [randread] rw=randread bs=4k [randwrite] rw=randwrite bs=4k

测试结果对比：

4.2 顺序吞吐量测试

使用1M块大小测试顺序读写性能：

[seqread] rw=read bs=1M [seqwrite] rw=write bs=1M

性能数据对比：

4.3 多虚拟机并发测试

模拟实际生产环境中多虚拟机并发访问iSCSI存储的场景：

# 创建10个并发测试任务 for i in {1..10}; do fio --name=vm$i --filename=/mnt/iscsi/vm$i.img --size=5G \ --rw=randrw --bs=4k --runtime=300 --time_based --iodepth=32 \ --ioengine=libaio --direct=1 --group_reporting & done

关键观察指标：

• ESXi平台：IOPS下降约15%，平均延迟增加20%
• Proxmox VE：IOPS下降约18%，平均延迟增加25%

5. 生产环境部署建议

根据实测数据和实际部署经验，针对不同场景给出以下建议：

5.1 VMware ESXI适用场景

• 需要最高级别的稳定性和性能可预测性
• 企业级功能需求（如vMotion、Storage DRS等）
• 已有VMware技术栈和运维团队

配置技巧：

# 优化ESXi内存预分配策略 esxcli system settings advanced set -o /Mem/ShareForceSalting -i 2

5.2 Proxmox VE适用场景

• 预算有限但需要企业级功能
• 开源技术栈偏好
• 定制化需求较高的环境

性能调优建议：

# 调整Linux内核参数提升iSCSI性能 echo "vm.dirty_ratio = 10" >> /etc/sysctl.conf echo "vm.dirty_background_ratio = 5" >> /etc/sysctl.conf sysctl -p

5.3 通用最佳实践

• 网络隔离：为iSCSI流量配置专用VLAN或物理网络
• 多路径配置：至少两条独立路径实现冗余和负载均衡
• 监控策略：实时监控存储延迟和错误计数

# ESXi监控命令 esxtop -d 2 -n 100 -a

在实际项目部署中，我们发现ESXi的iSCSI实现对突发流量的处理更为平滑，而Proxmox VE在持续高负载下需要更精细的参数调优才能达到最佳性能。两种平台都能满足企业级需求，选择应基于具体的技术栈、预算和运维能力。