日本电子维修技术 NAS关于SSD缓存回写速度问题
最近打算升级家用网络至万兆。万兆环境下,普通硬盘8盘位NAS raid 6的理论速度为200MB/s * (8-2) = 1200MB/s (假设单盘200MB/s的普通3.5硬盘)接近了万兆网络极限 1100MB/s,还是顺序写入、读取的状态下。所以考虑加入SSD缓存。由于本人穷...所以是hbm卡软raid的模式,就是考虑mdadm,zfs,或者黑群晖。这大概是背景情况。
具体问题源于一个smzdm的帖子:https://post.smzdm.com/p/aqnldxw ... 2057&from=other (应该不违反版规吧...我没看到说不能发别的网站的链接...违反了麻烦版主联系我,我删)
SSD写入缓存原理是,将写入的内容先缓存在SSD上,等系统待机的时候再写回普通硬盘/raid。所以SSD大小决定了高速读写的时间,SSD满了自然就降速到原本机械盘的速度,这些都是基本内容。
但是,假设我SSD是500GB,我第一次拷贝进去300GB的内容(假设这些内容是被缓存了的,不是大个整文件由系统跳过缓存直接写入机械盘),然后系统进入待机。这时候系统开始将文件移出SSD,写入机械盘。这时候,我又有300GB的内容要拷贝进去。前面的300GB还没有完全移出,就导致200GB的高速以后,最后100GB会低速。虽然300GB还是在500GB的缓存容量之内,但是这就产生了所谓的“贤者时间”。
帖子里提到,缓存在SSD中的内容,在系统空闲时,写入机械盘的速度非常的低,在10MB/s。这就产生了一个问题,就是这个贤者时间过长了。虽然我在第一次拷入数据的时候,享受了SSD的缓存速度,可能20分钟的拷贝变成了10分钟。但是这个恢复需要1000分钟大概就是17个小时。相当于500GB的缓存需要17小时才能全部写入,这样SSD的缓存效果就很差了。
请问各位大佬有没有了解过这个问题?zfs系统下的缓存回写状况是否会更好?原帖子中产生的问题是由于硬件选择导致的(cpu,硬盘性能等)还是群晖系统的问题?
目前没有查到关于回写速度的帖子...群晖客服也无法解答,要求我提交产品支持(我没有群晖的设备,所以自然也无法提交正式的产品支持)...
谢谢大家
评论
软的,就ZFS吧
你有多少内存,他就吃掉当做缓存,万兆对于内存来说就是个屁
关于你说的SSD这块,你先别考虑贤者时间了,先考虑,SSD挂掉,数据丢失怎么办吧
这篇文章里写的就是俩250的ssd过热,群辉系统挂掉重新修复的情况,所以SSD做写缓存是一定要raid1的
至于贤者时间,没记错是,只要SSD,没地方了,就老老实实等SSD往硬盘里写,因为无论怎么样,机械的写入速度还是要慢于SSD的写入的。但是无论怎样,你第二个300G进去的时候,SSD之前的300G不是没减少啊,他也是在往硬盘里做拷贝啊,就算慢,你原始数据万兆给SSD 1GB写入,那边写入硬盘再慢也有个500才对,所以,情况没有你想的那么糟糕
群辉啊,你这样想就好了,白裙那6 7K的好几个盘位的,是什么配置?? 性能上,基本上也就那样了
其他的系统,ZFS,虽然比较简陋,但是,你要纯粹给他搞数据进去,他还是吃的下的
你就高一个E5的300的U,然后相应的板子,REGECC的内存,8条插进去,找个大机箱,盘位多的,往里面干硬盘,性能上,比群辉好很多
当然啊,有一点ZFS不好,那就是,80%数据量以上的时候,性能下降~
ZFS官方的说法,SDD写缓存,如果不是负载率特别大,比如说,多用户数据同时读写的情况下,都不建议用SSD的,意思是还不如拖着内存跑呢,但是我觉得,如果你这么往里面倒数据的话,准备俩500G,SSD,再配合ZFS本身的内存机制,应该可以把性能发挥出来
评论
这个10MB/s速度的问题好像是群辉的问题,这边记错了,mdadm好像并不支持直接添加SSD缓存吧,反正Unraid的缓存机制我感觉是不太好用,他是自己设定时间回写到硬盘上,最少好像是一个小时,也就是说你一个小时内不能写入大于你SSD容量的文件,不然直接爆缓存
评论
ZFS的问题是不能随意扩充硬盘,你仔细看一下ZFS的操作,就会发现这个问题。还有种方案是LVM,可以直接添加缓存盘
评论
ZFS没有SSD写缓存,楼主不用费脑筋了
评论
Unraid的写缓存是以文件为单位的,并且是定时回写,不是闲时回写。但有个好处是没回写的时候,还可以充当读缓存。
评论
Unraid搞个国产2TSSD做缓存,一般个人用户的数据量,可以做到半月或1月回写一次,读写都能跑满万兆,很爽。
评论
抱歉刚看到(不知道为啥CHH不提示我有新回复...)
我现在用的一台就是ZFS。主要是碎片整理的问题,长期使用总会有删掉一部分文件什么的。ZFS的碎片整理要两个大池子对拷有点麻烦(很难有一个大容量的空池子来干这件事)...所以才考虑的黑裙。
个人喜欢小机箱(家里还没地方上一个机柜,不然服务器机箱我倒是也挺喜欢的)所以unas810a最多matx主板的那种上很多内存不太实际
数据丢失不怕,我是从一个下载机拷过去。拷的过程中挂这种事,只要不剪切用复制就不怕了
目前配置是3400G(x570主板自带8个sata还便宜,可以省hbm卡的钱)+8个14tb组raid6。
主要是看帖子说群晖的回写速度是10MB/s,远低于一个正常8盘raid6阵列的速度(怎么也有500+)。如果说,第二个300G写入的时候,我只需要等待100G写进HDD的时间的话,那贤者时间其实还是很短的(比较理想)
评论
对,mdadm不支持直接添加SSD,需要用dm-cache之类的。感谢关于unraid的信息,划掉一个可能性!
zfs不能加盘我倒是无所谓,我是插满党,不满难受233。所以不存在以后需要加盘的问题哈哈
评论
zfs有zil和l2arc...
我需求大概是3天到一星期会拷入300G左右的新数据...要是一个月回写,需要3个T的SSD缓存...不实际....
评论
回这贴里吧, 群晖目前就这样了,基本你就用你自己日常的写入量来估自己需要的缓存, 毕竟是缓存不是全盘nvme, 总要爆缓存的对不对?
unRAID看起来nvme缓存很美好, 但是SMB性能实在太低, 默认万兆下写nvme( 不论你设成缓存还是数据盘), 大概都是500MB/s顶天了 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01
·日本中文新闻 唐田绘里香为新剧《极恶女王》剃光头 展现演员决心
·日本中文新闻 真子小室夫妇新居引发隐私担忧
·日本中文新闻 前AKB48成员柏木由纪与搞笑艺人交往曝光
·日本学校 {日本国际学校}梅田インターナショナルスクール
·日本学校 LINE:sm287 陳雨菲、20歳、台湾からの留学生、東京に来たばかり
·日本留学生活 出售平成22年走行48000km 代步小车
·日本华人网络交流 円相場 一時1ドル=140円台まで上昇?
·日本华人网络交流 问日本华人一个问题
·日本旅游代购 富山接机
·生活百科 英国转澳大利亚转换插头
·汽车 【求助】修车遇到困难怎么办?