求教: 关于建立 RAID5
版主: Jack12345
Re: 求教: 关于建立 RAID5
是的,没人搞这个了,R1吧,
不过你想400MB/S, 可能不大
USB3之间相互拷贝,最多也就200MB
如果有USB2的,速度低于20MB,
硬盘速度绝对是瓶颈
不过你想400MB/S, 可能不大
USB3之间相互拷贝,最多也就200MB
如果有USB2的,速度低于20MB,
硬盘速度绝对是瓶颈
Re: 求教: 关于建立 RAID5
我也是感觉raid好像需要一直折磨硬盘的样子,看起来很可怕。newkids_on_the_block 写了: 2023年 5月 31日 15:57 从对硬盘的磨损来讲,还是不要弄任何RAID。我知道的IT部门可是每天都要不停的换硬盘(主要是RAID 对硬盘损坏太严重,当然IT部门的用户对硬盘也是用的更频繁)。
我就是把8个12T在Linux 里用 mergerfs 建成一个大的逻辑盘。没有弄任何RAID, 到现在至少有7-8年了,一点问题没有。
这种系统就是把一个盘一个盘地按顺序地写完,不会8个盘一起写,因此对盘的磨损很小。如果数据丢失了,也就是影响某一个盘的一个文件而已。这个对懒人很适用。如果不够了,再加一个硬盘也是很方便进入那个大的逻辑盘。
当然这样读/写盘的数据就是一个盘的数据。
刚刚看了一下你说的mergerfs这个工具,似乎这种方式可以随意往里面加减带数据的硬盘?我觉得这一点非常的好。多谢了!
似乎还有个mhddfs,也是类似的功能。待我仔细研究一下。
Re: 求教: 关于建立 RAID5
多谢分享经验! 我看了上面的各种意见,暂时放弃做raid了,毕竟我只是想要读文件快一点,另外把许多硬盘连起来。 我昨天发现LVM可以把几个硬盘以stripe形式并联,有点类似raid0。 于是拿俩SSD试了一下,确实很快,这我就满足了,哈哈。yanb 写了: 2023年 5月 30日 23:32 我的工作站是8x16TB raid6,MegaRAID 9460-16i PCIe 3.1,前段时间硬盘坏了一块,换了块盘两三天就rebuild了,其间也不影响工作,否则这么大的数据丢了或停工简直是灾难。
Linux装在Dual 1TB M.2 NVMe SSD RAID1,不过我用的是LVM,就是说在raid1 os + raid6 data的硬件之上建立LVM,感觉也有点傻,但是os安装的时候用LVM好像最简单。
外接usb-c或文件服务器只适合备份,用起来就太慢了。
Re: 求教: 关于建立 RAID5
建议你看看proxmox, 它可以让你用zfs.
你的18tb是6gbps的还是12gbps的。
我raid1, 5, 6 都做。 全是hardware raid. Soft raid速度上不去。
你的lvm没有任何redundancy. 有一个硬盘挂了就麻烦了。
Proxmox zfs 可以选raid levels.
Re: 求教: 关于建立 RAID5
是这样的。前面我提到了加盘。减盘也是可以的。因为这个工具把每一个文件只写在一个硬盘上,不会存在因为减盘数据丢失的问题。huangchong 写了: 2023年 6月 5日 01:46 我也是感觉raid好像需要一直折磨硬盘的样子,看起来很可怕。
刚刚看了一下你说的mergerfs这个工具,似乎这种方式可以随意往里面加减带数据的硬盘?我觉得这一点非常的好。多谢了!
似乎还有个mhddfs,也是类似的功能。待我仔细研究一下。
mhddfs 是早期开发的工具,也是我最开始用的。 现在很多人都换成了 mergerfs 这个工具。
曾经的 newkids_on_the_block
-
- 见习写手
cattywh 的博客 - 帖子互动: 1
- 帖子: 90
- 注册时间: 2023年 1月 14日 10:56
Re: 求教: 关于建立 RAID5
快只是一方面,很多时候redundancy更重要啊。huangchong 写了: 2023年 6月 5日 01:50 多谢分享经验! 我看了上面的各种意见,暂时放弃做raid了,毕竟我只是想要读文件快一点,另外把许多硬盘连起来。 我昨天发现LVM可以把几个硬盘以stripe形式并联,有点类似raid0。 于是拿俩SSD试了一下,确实很快,这我就满足了,哈哈。
Re: 求教: 关于建立 RAID5
如果有数据的那个盘出问题,mergerfs无能为力吧?newkids_on_the_block 写了: 2023年 6月 5日 07:28 是这样的。前面我提到了加盘。减盘也是可以的。因为这个工具把每一个文件只写在一个硬盘上,不会存在因为减盘数据丢失的问题。
mhddfs 是早期开发的工具,也是我最开始用的。 现在很多人都换成了 mergerfs 这个工具。
Re: 求教: 关于建立 RAID5
一般的小问题,就把出问题的那个盘用OS自动对硬盘修理一下,就可以了。如果问题开始严重了,就需要换盘(并把旧盘的东西拷在新盘)就行了。
如果是非常重要的东西,简单的处理方法就是再建一个Mirror 就可以了。
曾经的 newkids_on_the_block
Re: 求教: 关于建立 RAID5
raid啥5, 都什么年头了, 搜一下unraid, 加个nvme cache盘, 个人用最理想的配置, 公司用truenas, 不是专门的服务器没必要用raidhuangchong 写了: 2023年 5月 30日 19:02 最近我买了8个18TB的大硬盘,想做个RAID5,给linux普通台式计算机送数据。我的数据一般都是几T几T的连续读,希望能有400MB/s或者更好的速度。速度要求其实也不太高,赶上SATA SSD就很知足。主要目的是有点冗余度,顺便获得比单个机械硬盘稍快的速度。
目前有几个方案:
1 买个专门的8-bay RAID外接盒子,用usbC连在台式机上。但是看到的盒子是个软raid盒子,说他们的软件只支持windows或者mac os。 不知道买来以后能不能在linux里用。还看到amazon上有5bay USB3.1的盒子,倒是很便宜,也支持RAID5(OS没提)但是说明很老实,说测出来可以有200MB/s的速度。速度如果真是这样就有点让人失望了,因为我现在的单硬盘就180MB/s,下面方案2不花钱应该就可以轻松达到这种性能.
2 直接搞个台式机,把硬盘用主板上的SATA口接进去,用linux里自带的工具mdadm做软RAID5。目前比较倾向这个方案,就是不知道最后得到的性能会如何,理论上似乎是8个硬盘可以得到7x150MB/s的读取速度,但是不清楚是不是会受主板SATA带宽的限制,会不会放了8个硬盘才得到2x150MB/s的速度。不过其实这也可以接受了。
这个方法不需要什么投资,似乎值得先试试。就是目前的电脑机箱里面空间不大够,再有有点担心电源和散热(似乎合理的解决方案是花两三百买个合适的机箱换上)。
3 买个二手的文件服务器。ebay上看到一些带很多SAS口的,也不算贵。如果可行的话,用它们做个类似2的结构,然后想办法建立一个10G网。这个感觉会非常吵,而且特别占地方,特别费电,接口可能还比较古老,怕花一大笔钱买个古董回来。
4 买RAID卡,装载pcie插口上。这个方法,除了可能快一点外,似乎跟用主板SATA口比优势不太大。新一些的主板似乎都自带RAID功能。再说PCIE口也很宝贵,不一定能腾出来,所以这个选项优先级不高。
请问大家有没有这方面的经验?能否分享一下?先谢谢了!