日本电子维修技术 网络关于 MS Gen8 上万兆网卡拷贝文件时速度波动



16年海淘了一台HP ProLiant MicroServer Gen8,一直没时间折腾,想着今年年终抽点时间把NAS搭建好,仓库盘什么的也都早准备好了,就缺个万兆网卡,所以春节前买了Supermicro AOC-STG-I2T,详见这篇帖子:https://www.chiphell.com/thread-2297397-1-1.html

到手上机一切顺利,通过网络跳线与之前那台HP Z230 SSF工作站上的HP Ethernet 10Gb 2-port 561T Adapter直连,链路速度自动协商为10.00 Gbps 全双工

IMG_20210206_095936.jpg (283.5 KB, 下载次数: 0)

2021-2-23 23:15 上传


IMG_20210206_134047.jpg (603.79 KB, 下载次数: 0)

2021-2-23 23:16 上传


IMG_20210206_134058.jpg (432.27 KB, 下载次数: 0)

2021-2-23 23:17 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (boot ui).JPG (146.84 KB, 下载次数: 0)

2021-2-23 23:19 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (drv).JPG (259.91 KB, 下载次数: 0)

2021-2-23 23:20 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (proset).JPG (238.74 KB, 下载次数: 0)

2021-2-23 23:21 上传



在主机两端分别用命令行 PSTools>psping -b -l 1048576 -n 105000 192.168.11.14:139 对端口带宽进行测试,结果为9.9 Gbps,曲线平滑,基本跑满了万兆 \(^o^)/~
-b 代表将进行带宽测试
-l  1500代表使用大小1500Bytes的数据包
-n 15000代表使用15000个数据包

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 psping to gen8).JPG (182.45 KB, 下载次数: 0)

2021-2-23 23:24 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 psping to gen8) (2).JPG (176.78 KB, 下载次数: 0)

2021-2-23 23:25 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 psping to z230).JPG (235.38 KB, 下载次数: 0)

2021-2-23 23:26 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 psping to z230) (2).JPG (211.11 KB, 下载次数: 0)

2021-2-23 23:28 上传



以下是从两端分别拷贝单个大文件时的实际表现,两台主机的存储环境配置如下:

MS Gen8 板载软阵列 HP Dynamic Smart Array B120i Controller
单盘 RAID 0 Intel SSD Pro 1500 Series 180G 系统盘
单盘 RAID 0 HGST HUS726060ALE610 6T 企业级数据盘
OS Windows Server 2016

HP Z230 工作站 Intel(R) 8 Series/C220 Chipset Family SATA AHCI Controller
SATA 0 HPE Intel SSD S4600 1.9T 系统盘
SATA 2 HP HDD MB4000GEQNH 4T 企业级数据盘
SATA 3 HP HDD MB4000GEQNH 4T 企业级数据盘
OS Windows Server 2019

首先是从MS Gen8的SSD复制文件到HP Z230的SSD,可以看出基本跑满了磁盘I/O的带宽

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 ssd to ssd z230).JPG (175.26 KB, 下载次数: 0)

2021-2-23 23:29 上传



但不知什么原因,从HP Z230的SSD复制文件到MS Gen8的SSD,速度慢的像HDD机械盘
是Intel Pro 1500写入性能就这样,还是MS Gen8板载软阵列B120i驱动兼容性问题?

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 ssd to ssd gen8).JPG (181.43 KB, 下载次数: 0)

2021-2-23 23:32 上传



同样是从HP Z230复制文件到MS Gen8,机械盘到机械盘的速度却能达到200 MB/s,曲线也比较平滑,只不过从另一个数据盘测试看又有所下降,而且从固态盘复制文件到机械盘,速度波动幅度很大

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd to hdd gen8) (2).JPG (181.33 KB, 下载次数: 0)

2021-2-23 23:35 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd to hdd gen8).JPG (183.38 KB, 下载次数: 0)

2021-2-23 23:36 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 ssd to hdd gen8).JPG (181.46 KB, 下载次数: 0)

2021-2-23 23:37 上传



这是从MS Gen8数据盘复制文件到HP Z230数据盘的测试图,可以看出已经跑满了HDD机械盘的I/O带宽,表现正常

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 hdd to hdd z230).JPG (180.94 KB, 下载次数: 0)

2021-2-23 23:39 上传



可奇怪的是,如果用千兆网卡双机直连对拷文件,速度都能跑满1.0 Gbps,详见下图:

从HP Z230的HDD复制文件到MS Gen8的SSD,可见曲线非常平滑笔直,完全不像以上万兆网卡下的样子

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd to ssd gen8).JPG (183.05 KB, 下载次数: 0)

2021-2-23 23:42 上传



从HP Z230的HDD复制文件到MS Gen8的HDD

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd to hdd gen8) (3).JPG (183.05 KB, 下载次数: 0)

2021-2-23 23:44 上传



总的来说,从MS Gen8复制文件到HP Z230是曲线波动变化最小的,下图就是从MS Gen8数据盘复制两部电影到HP Z230数据盘的表现

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 hdd to hdd z230) (2).JPG (183.72 KB, 下载次数: 0)

2021-2-23 23:45 上传


ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (gen8 hdd to hdd z230) (3).JPG (184.35 KB, 下载次数: 0)

2021-2-23 23:46 上传



最让我百思不得其解的是,以上所描述的从HP Z230复制文件到MS Gen8的操作方式是先在MS Gen8系统上创建一个具有读写权限的用户账户,然后再在HP Z230系统环境下通过Windows资源管理器登录这个账户,直接复制粘贴的文件

可同样是类似的操作,不同之处是复制粘贴的过程改成在MS Gen8系统环境下,通过Windows资源管理器访问HP Z230的共享目录,将文件拷贝到指定目录下。但就是这种操作,如果走的是万兆网卡,曲线波动幅度会非常大,传输速度在35~198 MB/s之间反复波动,且大部分时间维持在30 MB/s左右,详见下图:

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd copy to gen8 hdd).JPG (247.04 KB, 下载次数: 0)

2021-2-23 23:49 上传



如果换成走千兆网卡,则传输速度表现得又非常平稳,基本跑满了千兆带宽,详见下图:

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd copy to gen8 hdd) (2).JPG (234.96 KB, 下载次数: 0)

2021-2-23 23:50 上传



而且如果将Supermicro AOC-STG-I2T万兆网卡降速协商为千兆模式,对拷文件时立刻就能像上面一样跑满1.0 Gbps,且速度稳定曲线平滑笔直,详见下图:

ProLiant MicroServer Gen8 - Supermicro AOC-STG-I2T (z230 hdd copy to gen8 hdd) (3).JPG (234.03 KB, 下载次数: 0)

2021-2-23 23:53 上传


以上这种情况大家有没有遇到过,是否可以确定和网卡链路无关,是HP Dynamic Smart Array B120i Controller驱动兼容性问题?

评论
好像我也这样,

评论

看来不搞企业级整套解决方案就无法做到各方面都完美,只能凑合着用了

评论
都2021了都还在折腾这老掉牙的机器,快丢了吧,万兆和nvme才是真搭档!

评论

再NVMe不也得靠HDD机箱盘组NAS囤数据吗,我只是想跑满RAID 0/10

评论

HDD RAID跑万兆当然OK,在SSD诞生之前很多企业就用HDD RAID来配合万兆网络传输,前提是你盘位够多速度才会有很大提升,gen8四盘位RAID最多500M,而且空间利用率也急剧下降,如果是存放4K原盘最多两年会撑爆!

评论
99%是固态问题,我家里有个硬盘叠瓦的,写的同时往外读,速度只有20-30MB/S,iperf测都是没问题

评论
iperf测没问题网络就没问题,在其他地方找原因吧

评论
直连我好像只能从gen8拷出来,无法拷进去,但上交换机就没问题了

评论
换个系统或弄个FTP测试下?

评论

4K原盘暂时先不玩儿了,对我来说2K转制的片源肉眼看着就已经很满足了,如今这个时代新上映的影片也没几部值得收藏的,我主要存放一些几十年前的经典老片,都是自己比较喜欢的,所以四盘位组个RAID 10存个上千部也差不多够了


评论

SMR叠瓦式在写入操作时本来就需要往外读吧,必须搬运转移数据块,有点类似于SSD的写入原理一样,无法像PMR机械盘那样直接盖写

评论

iperf没用过,有图形化版本吗?我是用PSTools>psping命令测的,网络没问题

评论

你这个更难以理解了,怎么可能无法拷进去,难道直连后不是全双工模式,有什么提示信息吗?

评论

@tedaz 都说MS Gen8官方驱动兼容性优化最好的系统就是Windows Server 2008 R2,回头我试试 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收
 ·日本中文新闻 唐田绘里香为新剧《极恶女王》剃光头 展现演员决心
·日本中文新闻 真子小室夫妇新居引发隐私担忧
·日本中文新闻 前AKB48成员柏木由纪与搞笑艺人交往曝光
·日本学校 {日本国际学校}梅田インターナショナルスクール
·日本学校 LINE:sm287 陳雨菲、20歳、台湾からの留学生、東京に来たばかり
·日本留学生活 出售平成22年走行48000km 代步小车
·日本华人网络交流 円相場 一時1ドル=140円台まで上昇?
·日本华人网络交流 问日本华人一个问题
·日本旅游代购 富山接机
 ·生活百科 英国转澳大利亚转换插头
·汽车 【求助】修车遇到困难怎么办?

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...