开启左侧

无法跑满万兆,磁盘读写速度波动,有与Truenas的对比

发表于:2025-1-12 00:54:48 其他 685

设备环境:(物理机、局域网、V0.8.32)

NAS:cpu8600 8代系统,ASRT71605直通卡,x520华为版,5212m4硬盘笼*2,HDD 24**14T,raid6

以上也用过12400+z690p,24 sata pcie卡,速度都是一样的

PC端试过两套,AMD 3900,Intel 13700k+b660,插槽都在pcie3*4,实际运行在pcie2**8(x520限制)

iperf3内网测试跑满万兆

BUG现象:磁盘读写速度慢,对比Truenas波动明显

出现频率:必现,从v0.8.27到最新版都是这个问题

分别针对24盘 raid6 HDD读写,以及两块NVME raid0 读写进行了测试,同样条件下Truenas速度波动小很多,也更快一些。

请问这是什么问题。能否在下个版本优化磁盘读写速度及稳定

FNNASHDD写入速度.png

FNNASnvme写入速度.png

FNNASHDD读取速度.png

FNNASnvme读取速度.png

TruenasNVME写入速度.png

TruenasHDD写入速度.png

TruenasNVME读取速度.png

微信截图_20250111170525.png

TruenasHDD读取速度.png

微信截图_20250112004650.png

收藏
送赞 2
分享

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x

发表回复

评论列表(12)

感谢反馈,我们后期会注意优化的
2025-1-13 15:12:32 1 回复
收到,关注飞牛,也决定一直追随,但nas最重要的其实就是磁盘性能和网络性能,期待飞牛的进步。 另外补充一下,同样这套板u,阵列卡,配合另一块12盘的背板,群晖可以跑满1g稳定,但我现在两块5212m4无法安装sa6400  详情 回复
2025-1-14 22:55
收到,关注飞牛,也决定一直追随,但nas最重要的其实就是磁盘性能和网络性能,期待飞牛的进步。
另外补充一下,同样这套板u,阵列卡,配合另一块12盘的背板,群晖可以跑满1g稳定,但我现在两块5212m4无法安装sa6400 群晖系统,所以无法复现群晖的速度。
2025-1-14 22:55:25 回复
写入速度特别不稳定不知道什么情况,读取就没问题
2025-1-15 00:06:40 回复
我估计还是对不同硬件的调试问题吧。我除了HBA直通卡,还试过pci转24口sata的卡,对比结果是一样的。FN这块有比较大的提升空间  详情 回复
2025-1-16 08:32
都,动态链路聚合(802.3ad mode ),局域网上传,我这还是可能会忽高忽低,一下19MB/S一下23,32MB/S。
2025-1-15 23:39:56 回复
动态链路聚合我也测试过,帮助不大,还是无法解决raid的性能问题,虽说软raid性能都比较一般,但是truenas和群晖这块的它俩水平几乎一致(黑群我测试了12盘,和truenas的24盘性能基本一致,超过8盘应该一样了)  详情 回复
2025-1-16 08:34
我估计还是对不同硬件的调试问题吧。我除了HBA直通卡,还试过pci转24口sata的卡,对比结果是一样的。FN这块有比较大的提升空间
2025-1-16 08:32:03 回复
动态链路聚合我也测试过,帮助不大,还是无法解决raid的性能问题,虽说软raid性能都比较一般,但是truenas和群晖这块的它俩水平几乎一致(黑群我测试了12盘,和truenas的24盘性能基本一致,超过8盘应该一样了)
2025-1-16 08:34:12 回复
仔细又看了你图,24个盘的raid6,不应该是这样,你可以内部复制测试,比如从nv盘拷到24盘阵列,目前看都是网络传输,你可以试试这样,把网卡都最大发包改成9014,电脑网卡那里也做一下修改都是9014,试试看看速度有  详情 回复
2025-1-16 15:25
我自己是12盘raid5,实测最高跑1.2G速度,磁盘是20t的希捷,raid6也测过,可以稳定1G,当然,如果用4.x内核,起码提升30%速度。  详情 回复
2025-1-16 15:15
raid方面,除raid0,受linux5以上的内核约束,速度对比linux4有30%左右的损失。内核是个双刃剑,老的内核在raid方面确定快,但是对于新硬件支持就比较差。群晖一直停留在4.X内核上,飞牛是Linux6.6,在硬件驱动兼容上  详情 回复
2025-1-16 15:08
raid方面,除raid0,受linux5以上的内核约束,速度对比linux4有30%左右的损失。内核是个双刃剑,老的内核在raid方面确定快,但是对于新硬件支持就比较差。群晖一直停留在4.X内核上,飞牛是Linux6.6,在硬件驱动兼容上高很多。raid的问题一直与内核组织沟通,但是他们改变不大,这块很有可能飞牛要自己突破。
2025-1-16 15:08:28 1 回复
谢谢您的讲解  详情 回复
2025-1-22 23:34
我自己是12盘raid5,实测最高跑1.2G速度,磁盘是20t的希捷,raid6也测过,可以稳定1G,当然,如果用4.x内核,起码提升30%速度。
2025-1-16 15:15:49 回复
仔细又看了你图,24个盘的raid6,不应该是这样,你可以内部复制测试,比如从nv盘拷到24盘阵列,目前看都是网络传输,你可以试试这样,把网卡都最大发包改成9014,电脑网卡那里也做一下修改都是9014,试试看看速度有没有稳定下来
2025-1-16 15:25:24 回复
能帮我看看https://club.fnnas.com/forum.php?mod=viewthread&tid=14426&extra=page%3D1的问题么,我是7盘sata的ssd阵列自动恢复期间总读和总写各自只有500m左右的速度,如果使用dd命令同时往阵列里面写,单个线程40  详情 回复
2025-2-14 13:46
巨大帧在nas和pc端都修改了,包括传输缓存这些都已做优化。成功安装了黑群晖,轻松跑满,可能就是您所说的内核问题。  详情 回复
2025-1-22 23:35
铁人_R5r33 发表于 2025-1-16 15:08
raid方面,除raid0,受linux5以上的内核约束,速度对比linux4有30%左右的损失。内核是个双刃剑,老的内核在 ...

谢谢您的讲解
2025-1-22 23:34:26 回复
巨大帧在nas和pc端都修改了,包括传输缓存这些都已做优化。成功安装了黑群晖,轻松跑满,可能就是您所说的内核问题。
2025-1-22 23:35:33 回复
能帮我看看https://club.fnnas.com/forum.php ... &extra=page%3D1的问题么,我是7盘sata的ssd阵列自动恢复期间总读和总写各自只有500m左右的速度,如果使用dd命令同时往阵列里面写,单个线程400,两个平均250,3个评论170,也就是就算用dd命令内部写总速度也就500,raid写文件进程cpu100%,此时没有网络占用,但是如果通过nfs往里面写文件基本没速度,同样的盘直通到win11虚拟机里面同时读写分别能有1.2g/s以上
2025-2-14 13:46:50 回复

作者推荐

话题