网云科技

标题: Gen8安装ESXI 6.5 5310538版本实测磁盘性能 [打印本页]

作者: qypw 时间: 2017-9-13 16:06
标题: Gen8安装ESXI 6.5 5310538版本实测磁盘性能
本帖最后由 qypw 于 2017-11-26 12:37 编辑

首先6.5 5310538 的RAID磁盘性能并没修复。可替换84或88驱动解决。
--------------题外话--------------------

VMware-ESXi-6.5.0-5969303-Update1-HPE-650.U1.10.1.0.14-Jul2017 这个最新版的ESXI 同样存在磁盘性能的问题。
下面是官方的6.5 U1更新说明，其中包含了Gen8的两个网卡驱动，不过由于这个版本vSphereClient无法登陆，而且网卡并没发现有问题,就没正式使用最新版了。

ESXi 6.5 Update 1 版本包含下列新增功能。

驱动程序更新：
- Cavium qlnativefc 驱动程序
- VMware nvme 驱动程序
- 支持 Lewisburg 10G 网卡的 Intel i40en 驱动程序
- 支持 Lewisburg 1G 网卡的 Intel ne1000 驱动程序
- Intel igbn 驱动程序
- Intel ixgben 驱动程序
- Broadcom ntg3 驱动程序

-----------------------------------------------
安装好ESXI后先配置好管理网络参数，默认情况会通过DHCP获取到IP，可以在控制台看到。
然后进入ESXI的Web管理开启Shell和安全Shell和维护模式，
我是直接使用WinSCP登录ESXI，上传驱动驱动到/var/log/vmware/ (这是一个临时目录)
然后使用puTTY打开会话，
输入esxcli software vib remove -n scsi-hpvsa -f
回车即可卸载scsi-hpvsa驱动。
在输入cd /var/log/vmware/
回车即跳转到刚才上传的目录
在输入esxcli software vib install -v file:88.vib --force --no-sig-check --maintenance-mode
回车即安装官方上传的88.vib驱动
安装结束后输入esxcli system module set --enabled=false --module="vmw_ahci"
回车即强制禁用通用驱动，然后重启就可以了。

另外我测试多个版本的驱动均无法解决性能问题，
5.5.0-84OEM.550.0.0.1198611 有用
5.5.0-88OEM.550.0.0.1331820 有用
5.5.0-90OEM.550.0.0.1331820 没用
5.5.0.98-1OEM.550.0.0.1331820 没用
5.5.0.102-1OEM.550.0.0.1331820 没用

查看驱动版本：esxcli software vib list | grep scsi-hpvsa

啥？你要看图？宝宝懒，稍候给你们上个磁盘性能截图就好了。过程我没截图，不懂跟帖询问吧。

这个性能不是伪直通(RDM直连)的哦，只是虚拟磁盘厚置备(即分配多大的虚拟硬盘就占用多大空间,默认是动态的，使用多少占用多少)

懒得打命令的在软件包搜索scsi-hpvsa也是可以看到驱动版本的

现在跑一个DSM 6.1.3-15152 Update 4和一个Win7挂号。CPU占用8%，功耗50W，CPU换了1230，温度ILO显示一直40(显示比内核温度低很多)
另外各种功耗测试温度测试也折腾过了，懒得发帖，总的来说用1230没必要担心散热问题，
关了睿频和1265L是一个样的，不加散热的情况下长期满载可到BIOS改散热方案FAN 70%起飞，单选FPU烤鸡不超90度
正常烤鸡三选FAN40%就能把核心温度控制到90左右。感觉风扇转速跟不上CPU核心温度的节奏,可能它是按照ILO探测的CPU温度来调整的吧。
如果你能把1230用到长期满载的话大部分也不会选gen8了吧，我这是东莞,室温要比你们那高很多。
根据我当前的使用体验芯片组才是最烫手的,原因是机箱风扇转速太低，而且芯片位置偏低空气流动偏差,温度时长七十多,于是我给加个风扇吹控制到五六十

本人比较懒，懒得发详细的帖子，资源网上到处都是，自己下载吧，按懒得整理了

作者: coredesign 时间: 2017-9-15 16:57
感谢楼主向西的介绍

作者: ddkink!@163.com 时间: 2017-9-17 04:29
楼主使用的是RAID，还是ACHI模式？如果是RAID，我这样设置了，esxi6.5里面看不到组RAID的盘，默认都变为了单独的磁盘。

作者: qypw 时间: 2017-9-17 11:45

ddkink!@163.com 发表于 2017-9-17 04:29
楼主使用的是RAID，还是ACHI模式？如果是RAID，我这样设置了，esxi6.5里面看不到组RAID的盘，默认都变为了 ...

安装结束后输入esxcli system module set --enabled=false --module="vmw_ahci"
你肯定是没打这条命令！我用的是RAID 0 ，不打这条命令的话也会变成单个磁盘

作者: uambw 时间: 2017-9-26 22:09
谢谢分享！学习学习！

作者: uambw 时间: 2017-9-28 08:03
谢谢分享！学习学习！

作者: bucom 时间: 2017-10-6 16:20
感谢分享！！！！

作者: fance068 时间: 2017-10-9 19:31
学习一下

作者: moyawang 时间: 2017-10-13 07:36
谢谢分享~~~~~

作者: luzai 时间: 2017-10-27 21:40

qypw 发表于 2017-9-17 11:45
安装结束后输入esxcli system module set --enabled=false --module="vmw_ahci"
你肯定是没打这条命令！ ...

我也遇到一样的问题，好久以前弄过的，后面只能换6.0了
至于你这条命令我不大记得是否曾经执行过
请问你的RAID0是多个硬盘组成一个RAID0还是每个硬盘组一个RAID0？
我有个RADI1所以就遇到变成单个硬盘了

作者: miss420 时间: 2017-10-30 12:00
谢谢分享~~~~~

作者: qypw 时间: 2017-10-31 00:22

luzai 发表于 2017-10-27 21:40
我也遇到一样的问题，好久以前弄过的，后面只能换6.0了
至于你这条命令我不大记得是否曾经执行过
请问 ...

两个3T机械组RAID0，一个SSD组RAID0

作者: arms0322 时间: 2017-12-17 15:06
mark一下，重装的时候当做教程

作者: andrawsun 时间: 2017-12-23 18:09

谢谢分享！学习学习！

作者: shluochen 时间: 2017-12-24 22:37
感觉gen10不知道怎么弄esxi

作者: andrawsun 时间: 2017-12-25 13:02
好东西，谢谢分享。

作者: Roger 时间: 2017-12-31 11:06
试了一下，88驱动还是没有解决问题，区域网拷贝的时候开始的1分钟左右大概可以稳定在100M，但是也会下降到20~30M

作者: qypw 时间: 2017-12-31 12:26

Roger 发表于 2017-12-31 11:06
试了一下，88驱动还是没有解决问题，区域网拷贝的时候开始的1分钟左右大概可以稳定在100M，但是也会下降到2 ...

自己看图，自己算时间，自己看曲线，自己排查问题。

作者: Roger 时间: 2018-1-1 20:12
本帖最后由 Roger 于 2018-1-1 20:16 编辑

qypw 发表于 2017-12-31 12:26
自己看图，自己算时间，自己看曲线，自己排查问题。

感谢回复。

顺便问个问题，我发现我的情况和大家的相反，用RAID模式的时候进入系统没有运行任务的时候风扇就到50%左右了，这个时候硬盘温度大概在43度左右，换到AHCI就正常稳定在12%，不知道是什么原因。

等我把这个问题解决后再测试一下性能。

作者: qypw 时间: 2018-1-2 16:42

Roger 发表于 2018-1-1 20:12
感谢回复。

顺便问个问题，我发现我的情况和大家的相反，用RAID模式的时候进入系统没有运行任务的时候 ...

我猜测是硬盘温度引起的。你可以单独接个固态硬盘试试。

作者: Roger 时间: 2018-1-2 23:33

qypw 发表于 2018-1-2 16:42
我猜测是硬盘温度引起的。你可以单独接个固态硬盘试试。

应该是的，我的固态硬盘还在别的机器上，就接了一个旧的2.5寸机械硬盘在用，感觉Gen8的风扇主要和环境温度和硬盘温度相关，40度以上风扇就狂转了。

作者: Roger 时间: 2018-2-21 21:16

qypw 发表于 2017-12-31 12:26
自己看图，自己算时间，自己看曲线，自己排查问题。

发现还是要打开BIOS里面的写缓存，这样写入性能就上去了，而且最新的HPE定制ESXi 6.5(Nov 2017)也没有AHCI模式的性能问题了。看来可以稳定的使用ESXi了，过几天再买张LSI SAS 9211 8i直通卡。

作者: jeson998 时间: 2018-3-14 17:56
ipmi 用法呢

作者: jeson998 时间: 2018-3-14 17:56
raid的支持力度如何

作者: jeson998 时间: 2018-3-14 17:57
iops的极限如何测试呢

作者: jeson998 时间: 2018-3-14 17:57
感觉gen8还是飞铲更不错的

作者: fak7758521 时间: 2018-10-1 21:18
我测试了不行传输速度还是有问题求解

作者: moonjz023 时间: 2020-12-20 21:20

谢谢分享~~~~~

作者: lycben2008 时间: 2020-12-30 16:56
感谢分享，整了一个全新的gen8，折腾一下玩玩

作者: sunjc1977 时间: 2021-3-1 17:25
感谢分享，学习了

欢迎光临网云科技 (http://www.8x6x.com/)