部署iSCSI存储的时候会面临两种接入方式ESXi自带的软件iSCSI适配器以及专用硬件iSCSI HBA卡。不少人以为硬件HBA会带来成倍的性能飞跃实际环境并不会差距巨大。 硬件iSCSI HBA最大价值并不单纯是带宽而是把iSCSI协议的报文封装、校验、卸载工作交给硬件芯片处理降低ESXi主机CPU负载吞吐层面一般仅有10‑20%左右提升。不同业务负载下差距会波动高IOPS场景差异会被放大。下面拆解底层机制、实测表现、适用场景。一、两种适配器工作原理软件iSCSI适配器Software iSCSI由ESXi内核软件完成iSCSI协议处理普通万兆网卡即可使用。TCP/IP封装、CRC校验、iSCSI PDU处理全部交由ESXi主机CPU完成。网卡仅做普通数据包收发没有协议卸载能力。业务IO压力大的时候会明显占用主机CPU资源。硬件iSCSI HBA适配器专用iSCSI HBA卡自带处理器iSCSI协议栈全部在硬件卡上完成TCP、报文封装、校验、CRC全部硬件卸载。IO处理几乎不消耗ESXi主机CPU中断处理开销也大幅下降。操作系统只需要下发块存储指令不用参与iSCSI协议运算。二、实际性能与开销差异吞吐量、IOPS性能差距同等带宽条件下例如10Gbps网络硬件HBA相比软件iSCSI整体性能提升大约10‑20%。 轻量业务负载IO压力不高时两者读写速度几乎感知不到区别。当压力拉满跑满带宽、高IOPS小IO场景软件iSCSI会受CPU处理能力限制此时硬件HBA优势会更加明显。CPU开销是核心差距这才是硬件iSCSI HBA最关键优势。软件iSCSI高负载场景会消耗可观的CPU大量的TCP中断与iSCSI报文处理占用物理核心会和虚拟机争抢CPU资源。 硬件HBA把协议处理卸载到板载芯片主机CPU开销大幅下降高压力下主机CPU不会被存储IO打满虚拟机业务更稳定。其他方面差异硬件HBA支持BOOT FROM iSCSI可以从iSCSI存储直接引导ESXi系统软件iSCSI无法实现网络启动软件iSCSI依赖VMkernel网络栈需要配置VMkernel网卡硬件HBA独立处理不占用VMkernel协议栈硬件HBA卡成本更高需要单独采购硬件软件iSCSI随ESXi自带零额外硬件成本三、不同业务场景表现特征普通业务场景IO压力中等虚拟机数量不多IO压力中等软件iSCSI完全够用性能和硬件HBA几乎没有差距CPU占用也在可接受范围优先选软件iSCSI节省硬件成本。高IOPS、小IO、大吞吐量压力场景数据库、大量虚拟机并发读写IO压力很高。软件iSCSI的CPU开销会明显上涨容易出现CPU成为瓶颈。此时硬件iSCSI HBA优势凸显除了10‑20%性能提升更重要的是释放主机CPU避免存储IO抢占虚拟机计算资源。低带宽千兆网络环境千兆iSCSI环境带宽本身就是瓶颈软件与硬件适配器几乎看不出性能差距没必要采购硬件HBA。四、实操调优要点软件iSCSI调优重点使用支持TCP卸载的普通网卡开启网卡的TOE、校验和卸载一定程度降低软件iSCSI的CPU开销。配置多路径MPIO多张网卡做端口聚合提升带宽与冗余。监控ESXi主机CPU留意iscsi_vmk进程CPU占用。硬件iSCSI HBA注意事项使用HBA卡务必安装对应版本VIB驱动驱动版本不匹配会直接抵消硬件卸载优势。同样配置MPIO多路径做好链路冗余。硬件HBA不代表不会出现性能问题存储阵列、交换机带宽依旧是瓶颈。五、故障选型对照表业务场景推荐适配器关键点一般虚拟化业务IO压力适中软件iSCSI适配器节省硬件成本万兆网卡开启硬件卸载MPIO做多路径数据库、大量虚拟机并发高IOPS小IO硬件iSCSI HBA降低主机CPU开销获取约10‑20%性能增益避免CPU瓶颈需要iSCSI网络引导ESXi系统硬件iSCSI HBA软件iSCSI不支持BOOT iSCSI千兆网络iSCSI环境软件iSCSI适配器带宽本身是瓶颈硬件HBA几乎无收益软件iSCSI高负载CPU占用居高不下更换硬件iSCSI HBA确认瓶颈确实来自iSCSI协议处理不是存储阵列、交换机瓶颈六、运维常见误区1.误区硬件iSCSI HBA性能会翻倍性能碾压软件iSCSI纠正同等网络条件下性能提升大多仅10‑20%核心收益是降低CPU开销不是带宽成倍提升。2.误区只要上iSCSI存储就必须采购硬件HBA卡纠正多数虚拟化业务高质量万兆网卡配合软件iSCSI完全满足需求不必盲目采购硬件HBA。3.误区硬件HBA就一定不会出现CPU高纠正驱动异常、固件版本老旧会关闭硬件卸载能力CPU依旧会很高需要定期升级HBA固件与VIB驱动。4.误区软件iSCSI天生不稳定纠正软件iSCSI经过大量生产验证做好多路径、网络冗余稳定性完全可以满足生产业务。七、全文总结ESXi软件iSCSI与硬件iSCSI HBA对比硬件HBA通过芯片完成iSCSI协议卸载性能层面大概带来10‑20%提升最大价值是显著降低ESXi主机CPU开销。 中等压力业务场景软件iSCSI足够高IOPS、数据库业务对CPU资源敏感的环境更适合硬件iSCSI HBA。选型不要单纯追逐性能数字结合业务压力、硬件成本综合判断。无论哪一种方式都需要做好MPIO多路径、网络冗余。