求教: 关于建立 RAID5

电脑,手机,硬件,软件,电子产品等

版主: Jack12345

BCQ1
论坛支柱
论坛支柱
帖子: 11771
注册时间: 7月 29, 2022, 7:45 pm
昵称(选填): BCQ1

Re: 求教: 关于建立 RAID5

帖子 BCQ1 »

是的,没人搞这个了,R1吧,
不过你想400MB/S, 可能不大
USB3之间相互拷贝,最多也就200MB
如果有USB2的,速度低于20MB,
硬盘速度绝对是瓶颈
头像
RedOrange
修改邮箱后未激活修改邮箱后未激活
帖子: 176
注册时间: 5月 31, 2023, 11:38 am
昵称(选填): 红桔

Re: 求教: 关于建立 RAID5

帖子 RedOrange »

彭智 兄台这么有米啊,买这么多大硬盘?难道是有天量数据?
图片
湖南 常德
吸烟有害健康
头像
YouHi
论坛元老
论坛元老
帖子: 19812
注册时间: 7月 22, 2022, 10:36 pm

Re: 求教: 关于建立 RAID5

帖子 YouHi »

RedOrange 写了: 6月 4, 2023, 12:54 pm 彭智 兄台这么有米啊,买这么多大硬盘?难道是有天量数据?
估计是大量的porn。他在研究ML。
BCQ1
论坛支柱
论坛支柱
帖子: 11771
注册时间: 7月 29, 2022, 7:45 pm
昵称(选填): BCQ1

Re: 求教: 关于建立 RAID5

帖子 BCQ1 »

YouHi 写了: 6月 4, 2023, 12:55 pm 估计是大量的porn。他在研究ML。
哈哈哈哈,怎么提高ANDROID电视盒子的SMB的速度啊,
有知道的吗
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

drifter 写了: 5月 30, 2023, 10:50 pm 现在还用raid5 知识还停留在20年前 😄
属实 这方面是初学 从来没研究过
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

newkids_on_the_block 写了: 5月 31, 2023, 3:57 pm 从对硬盘的磨损来讲,还是不要弄任何RAID。我知道的IT部门可是每天都要不停的换硬盘(主要是RAID 对硬盘损坏太严重,当然IT部门的用户对硬盘也是用的更频繁)。

我就是把8个12T在Linux 里用 mergerfs 建成一个大的逻辑盘。没有弄任何RAID, 到现在至少有7-8年了,一点问题没有。

这种系统就是把一个盘一个盘地按顺序地写完,不会8个盘一起写,因此对盘的磨损很小。如果数据丢失了,也就是影响某一个盘的一个文件而已。这个对懒人很适用。如果不够了,再加一个硬盘也是很方便进入那个大的逻辑盘。

当然这样读/写盘的数据就是一个盘的数据。
我也是感觉raid好像需要一直折磨硬盘的样子,看起来很可怕。

刚刚看了一下你说的mergerfs这个工具,似乎这种方式可以随意往里面加减带数据的硬盘?我觉得这一点非常的好。多谢了!

似乎还有个mhddfs,也是类似的功能。待我仔细研究一下。
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

yanb 写了: 5月 30, 2023, 11:32 pm 我的工作站是8x16TB raid6,MegaRAID 9460-16i PCIe 3.1,前段时间硬盘坏了一块,换了块盘两三天就rebuild了,其间也不影响工作,否则这么大的数据丢了或停工简直是灾难。

Linux装在Dual 1TB M.2 NVMe SSD RAID1,不过我用的是LVM,就是说在raid1 os + raid6 data的硬件之上建立LVM,感觉也有点傻,但是os安装的时候用LVM好像最简单。

外接usb-c或文件服务器只适合备份,用起来就太慢了。
多谢分享经验! 我看了上面的各种意见,暂时放弃做raid了,毕竟我只是想要读文件快一点,另外把许多硬盘连起来。 我昨天发现LVM可以把几个硬盘以stripe形式并联,有点类似raid0。 于是拿俩SSD试了一下,确实很快,这我就满足了,哈哈。
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

YouHi 写了: 5月 31, 2023, 2:28 am 买个二手dell sff,装Unraid或者TrueNAS。
看了一下QNAP的产品之后,我也是在考虑是不是弄个二手dell mini tower改造成文件服务器。看网上现在6代intel的才200块钱,时间真是利器啊。
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

MaLaRabbit 写了: 5月 31, 2023, 2:14 am Sas raid controller + 24bay sas enclosure.
eBay 上买二手,不贵
o, 我正发愁 硬盘没地方安放。这是个好办法!
头像
huangchong楼主
论坛元老
论坛元老
帖子: 24294
注册时间: 7月 22, 2022, 1:22 am
昵称(选填): 净坛使者

Re: 求教: 关于建立 RAID5

帖子 huangchong楼主 »

多谢各位的宝贵意见,一层层看下来,学了不少东西啊!!不能一一回复了,再次表示感谢!
noles
著名点评
著名点评
帖子: 3552
注册时间: 7月 31, 2022, 10:07 am

Re: 求教: 关于建立 RAID5

帖子 noles »

huangchong 写了: 6月 5, 2023, 1:57 am 多谢各位的宝贵意见,一层层看下来,学了不少东西啊!!不能一一回复了,再次表示感谢!
建议你看看proxmox, 它可以让你用zfs.

你的18tb是6gbps的还是12gbps的。

我raid1, 5, 6 都做。 全是hardware raid. Soft raid速度上不去。

你的lvm没有任何redundancy. 有一个硬盘挂了就麻烦了。

Proxmox zfs 可以选raid levels.
noles
著名点评
著名点评
帖子: 3552
注册时间: 7月 31, 2022, 10:07 am

Re: 求教: 关于建立 RAID5

帖子 noles »

huangchong 写了: 6月 5, 2023, 1:56 am o, 我正发愁 硬盘没地方安放。这是个好办法!
要看你的盘是SAS 接口的还是SATA接口的。另外和主机接的口也很重要。不然会成瓶颈。
nk
著名点评
著名点评
帖子: 4004
注册时间: 3月 15, 2023, 6:49 am

Re: 求教: 关于建立 RAID5

帖子 nk »

huangchong 写了: 6月 5, 2023, 1:46 am 我也是感觉raid好像需要一直折磨硬盘的样子,看起来很可怕。

刚刚看了一下你说的mergerfs这个工具,似乎这种方式可以随意往里面加减带数据的硬盘?我觉得这一点非常的好。多谢了!

似乎还有个mhddfs,也是类似的功能。待我仔细研究一下。
是这样的。前面我提到了加盘。减盘也是可以的。因为这个工具把每一个文件只写在一个硬盘上,不会存在因为减盘数据丢失的问题。

mhddfs 是早期开发的工具,也是我最开始用的。 现在很多人都换成了 mergerfs 这个工具。
cattywh
知名人士
知名人士
cattywh 的博客
帖子: 64
注册时间: 1月 14, 2023, 10:56 am

Re: 求教: 关于建立 RAID5

帖子 cattywh »

大硬盘,硬盘多,raid5不合适了。重建时间太长,重建过程再坏一个盘就全完蛋了。

上raid 10,还能提升速度

raid5只适合全ssd
MaLaRabbit
知名作家
知名作家
帖子: 962
注册时间: 7月 24, 2022, 2:16 am

Re: 求教: 关于建立 RAID5

帖子 MaLaRabbit »

huangchong 写了: 6月 5, 2023, 1:56 am o, 我正发愁 硬盘没地方安放。这是个好办法!
用下来其实如果盘不是太多的话,用synology最省心
yanb
职业作家
职业作家
帖子: 701
注册时间: 10月 24, 2022, 7:21 pm

Re: 求教: 关于建立 RAID5

帖子 yanb »

huangchong 写了: 6月 5, 2023, 1:50 am 多谢分享经验! 我看了上面的各种意见,暂时放弃做raid了,毕竟我只是想要读文件快一点,另外把许多硬盘连起来。 我昨天发现LVM可以把几个硬盘以stripe形式并联,有点类似raid0。 于是拿俩SSD试了一下,确实很快,这我就满足了,哈哈。
快只是一方面,很多时候redundancy更重要啊。
yanb
职业作家
职业作家
帖子: 701
注册时间: 10月 24, 2022, 7:21 pm

Re: 求教: 关于建立 RAID5

帖子 yanb »

newkids_on_the_block 写了: 6月 5, 2023, 7:28 am 是这样的。前面我提到了加盘。减盘也是可以的。因为这个工具把每一个文件只写在一个硬盘上,不会存在因为减盘数据丢失的问题。

mhddfs 是早期开发的工具,也是我最开始用的。 现在很多人都换成了 mergerfs 这个工具。
如果有数据的那个盘出问题,mergerfs无能为力吧?
nk
著名点评
著名点评
帖子: 4004
注册时间: 3月 15, 2023, 6:49 am

Re: 求教: 关于建立 RAID5

帖子 nk »

yanb 写了: 6月 14, 2023, 1:49 pm 如果有数据的那个盘出问题,mergerfs无能为力吧?
一般的小问题,就把出问题的那个盘用OS自动对硬盘修理一下,就可以了。如果问题开始严重了,就需要换盘(并把旧盘的东西拷在新盘)就行了。

如果是非常重要的东西,简单的处理方法就是再建一个Mirror 就可以了。
oldfriend
小有名气
小有名气
帖子: 42
注册时间: 7月 28, 2022, 7:45 am
昵称(选填): 老友记

Re: 求教: 关于建立 RAID5

帖子 oldfriend »

huangchong 写了: 5月 30, 2023, 7:02 pm 最近我买了8个18TB的大硬盘,想做个RAID5,给linux普通台式计算机送数据。我的数据一般都是几T几T的连续读,希望能有400MB/s或者更好的速度。速度要求其实也不太高,赶上SATA SSD就很知足。主要目的是有点冗余度,顺便获得比单个机械硬盘稍快的速度。

目前有几个方案:

1 买个专门的8-bay RAID外接盒子,用usbC连在台式机上。但是看到的盒子是个软raid盒子,说他们的软件只支持windows或者mac os。 不知道买来以后能不能在linux里用。还看到amazon上有5bay USB3.1的盒子,倒是很便宜,也支持RAID5(OS没提)但是说明很老实,说测出来可以有200MB/s的速度。速度如果真是这样就有点让人失望了,因为我现在的单硬盘就180MB/s,下面方案2不花钱应该就可以轻松达到这种性能.

2 直接搞个台式机,把硬盘用主板上的SATA口接进去,用linux里自带的工具mdadm做软RAID5。目前比较倾向这个方案,就是不知道最后得到的性能会如何,理论上似乎是8个硬盘可以得到7x150MB/s的读取速度,但是不清楚是不是会受主板SATA带宽的限制,会不会放了8个硬盘才得到2x150MB/s的速度。不过其实这也可以接受了。

这个方法不需要什么投资,似乎值得先试试。就是目前的电脑机箱里面空间不大够,再有有点担心电源和散热(似乎合理的解决方案是花两三百买个合适的机箱换上)。



3 买个二手的文件服务器。ebay上看到一些带很多SAS口的,也不算贵。如果可行的话,用它们做个类似2的结构,然后想办法建立一个10G网。这个感觉会非常吵,而且特别占地方,特别费电,接口可能还比较古老,怕花一大笔钱买个古董回来。


4 买RAID卡,装载pcie插口上。这个方法,除了可能快一点外,似乎跟用主板SATA口比优势不太大。新一些的主板似乎都自带RAID功能。再说PCIE口也很宝贵,不一定能腾出来,所以这个选项优先级不高。



请问大家有没有这方面的经验?能否分享一下?先谢谢了!
raid啥5, 都什么年头了, 搜一下unraid, 加个nvme cache盘, 个人用最理想的配置, 公司用truenas, 不是专门的服务器没必要用raid
回复

回到 “电脑手机(IT)”