日本电子维修技术 NAS关于SSD缓存回写速度问题



最近打算升级家用网络至万兆。万兆环境下,普通硬盘8盘位NAS raid 6的理论速度为200MB/s * (8-2) = 1200MB/s (假设单盘200MB/s的普通3.5硬盘)接近了万兆网络极限 1100MB/s,还是顺序写入、读取的状态下。所以考虑加入SSD缓存。由于本人穷...所以是hbm卡软raid的模式,就是考虑mdadm,zfs,或者黑群晖。这大概是背景情况。
具体问题源于一个smzdm的帖子:https://post.smzdm.com/p/aqnldxw ... 2057&from=other (应该不违反版规吧...我没看到说不能发别的网站的链接...违反了麻烦版主联系我,我删)
SSD写入缓存原理是,将写入的内容先缓存在SSD上,等系统待机的时候再写回普通硬盘/raid。所以SSD大小决定了高速读写的时间,SSD满了自然就降速到原本机械盘的速度,这些都是基本内容。
但是,假设我SSD是500GB,我第一次拷贝进去300GB的内容(假设这些内容是被缓存了的,不是大个整文件由系统跳过缓存直接写入机械盘),然后系统进入待机。这时候系统开始将文件移出SSD,写入机械盘。这时候,我又有300GB的内容要拷贝进去。前面的300GB还没有完全移出,就导致200GB的高速以后,最后100GB会低速。虽然300GB还是在500GB的缓存容量之内,但是这就产生了所谓的“贤者时间”。
帖子里提到,缓存在SSD中的内容,在系统空闲时,写入机械盘的速度非常的低,在10MB/s。这就产生了一个问题,就是这个贤者时间过长了。虽然我在第一次拷入数据的时候,享受了SSD的缓存速度,可能20分钟的拷贝变成了10分钟。但是这个恢复需要1000分钟大概就是17个小时。相当于500GB的缓存需要17小时才能全部写入,这样SSD的缓存效果就很差了。
请问各位大佬有没有了解过这个问题?zfs系统下的缓存回写状况是否会更好?原帖子中产生的问题是由于硬件选择导致的(cpu,硬盘性能等)还是群晖系统的问题?
目前没有查到关于回写速度的帖子...群晖客服也无法解答,要求我提交产品支持(我没有群晖的设备,所以自然也无法提交正式的产品支持)...
谢谢大家

评论
软的,就ZFS吧

你有多少内存,他就吃掉当做缓存,万兆对于内存来说就是个屁

关于你说的SSD这块,你先别考虑贤者时间了,先考虑,SSD挂掉,数据丢失怎么办吧

这篇文章里写的就是俩250的ssd过热,群辉系统挂掉重新修复的情况,所以SSD做写缓存是一定要raid1的

至于贤者时间,没记错是,只要SSD,没地方了,就老老实实等SSD往硬盘里写,因为无论怎么样,机械的写入速度还是要慢于SSD的写入的。但是无论怎样,你第二个300G进去的时候,SSD之前的300G不是没减少啊,他也是在往硬盘里做拷贝啊,就算慢,你原始数据万兆给SSD 1GB写入,那边写入硬盘再慢也有个500才对,所以,情况没有你想的那么糟糕

群辉啊,你这样想就好了,白裙那6 7K的好几个盘位的,是什么配置??  性能上,基本上也就那样了

其他的系统,ZFS,虽然比较简陋,但是,你要纯粹给他搞数据进去,他还是吃的下的

你就高一个E5的300的U,然后相应的板子,REGECC的内存,8条插进去,找个大机箱,盘位多的,往里面干硬盘,性能上,比群辉好很多

当然啊,有一点ZFS不好,那就是,80%数据量以上的时候,性能下降~

ZFS官方的说法,SDD写缓存,如果不是负载率特别大,比如说,多用户数据同时读写的情况下,都不建议用SSD的,意思是还不如拖着内存跑呢,但是我觉得,如果你这么往里面倒数据的话,准备俩500G,SSD,再配合ZFS本身的内存机制,应该可以把性能发挥出来

评论

这个10MB/s速度的问题好像是群辉的问题,这边记错了,mdadm好像并不支持直接添加SSD缓存吧,反正Unraid的缓存机制我感觉是不太好用,他是自己设定时间回写到硬盘上,最少好像是一个小时,也就是说你一个小时内不能写入大于你SSD容量的文件,不然直接爆缓存

评论
ZFS的问题是不能随意扩充硬盘,你仔细看一下ZFS的操作,就会发现这个问题。还有种方案是LVM,可以直接添加缓存盘

评论
ZFS没有SSD写缓存,楼主不用费脑筋了

评论
Unraid的写缓存是以文件为单位的,并且是定时回写,不是闲时回写。但有个好处是没回写的时候,还可以充当读缓存。

评论
Unraid搞个国产2TSSD做缓存,一般个人用户的数据量,可以做到半月或1月回写一次,读写都能跑满万兆,很爽。

评论

抱歉刚看到(不知道为啥CHH不提示我有新回复...)
我现在用的一台就是ZFS。主要是碎片整理的问题,长期使用总会有删掉一部分文件什么的。ZFS的碎片整理要两个大池子对拷有点麻烦(很难有一个大容量的空池子来干这件事)...所以才考虑的黑裙。
个人喜欢小机箱(家里还没地方上一个机柜,不然服务器机箱我倒是也挺喜欢的)所以unas810a最多matx主板的那种上很多内存不太实际
数据丢失不怕,我是从一个下载机拷过去。拷的过程中挂这种事,只要不剪切用复制就不怕了
目前配置是3400G(x570主板自带8个sata还便宜,可以省hbm卡的钱)+8个14tb组raid6。
主要是看帖子说群晖的回写速度是10MB/s,远低于一个正常8盘raid6阵列的速度(怎么也有500+)。如果说,第二个300G写入的时候,我只需要等待100G写进HDD的时间的话,那贤者时间其实还是很短的(比较理想)

评论

对,mdadm不支持直接添加SSD,需要用dm-cache之类的。感谢关于unraid的信息,划掉一个可能性!
zfs不能加盘我倒是无所谓,我是插满党,不满难受233。所以不存在以后需要加盘的问题哈哈

评论

zfs有zil和l2arc...
我需求大概是3天到一星期会拷入300G左右的新数据...要是一个月回写,需要3个T的SSD缓存...不实际....

评论
回这贴里吧, 群晖目前就这样了,基本你就用你自己日常的写入量来估自己需要的缓存, 毕竟是缓存不是全盘nvme, 总要爆缓存的对不对?

unRAID看起来nvme缓存很美好, 但是SMB性能实在太低, 默认万兆下写nvme( 不论你设成缓存还是数据盘), 大概都是500MB/s顶天了 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01
 ·日本中文新闻 唐田绘里香为新剧《极恶女王》剃光头 展现演员决心
·日本中文新闻 真子小室夫妇新居引发隐私担忧
·日本中文新闻 前AKB48成员柏木由纪与搞笑艺人交往曝光
·日本学校 {日本国际学校}梅田インターナショナルスクール
·日本学校 LINE:sm287 陳雨菲、20歳、台湾からの留学生、東京に来たばかり
·日本留学生活 出售平成22年走行48000km 代步小车
·日本华人网络交流 円相場 一時1ドル=140円台まで上昇?
·日本华人网络交流 问日本华人一个问题
·日本旅游代购 富山接机
 ·生活百科 英国转澳大利亚转换插头
·汽车 【求助】修车遇到困难怎么办?

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...