主题:究竟要不要搞RAID5,实在是拿不了主意
正序浏览
主题图片汇总
主题内检索
浏览:104175 回帖:365
游客没有回帖权限
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
小鱼背包 发表于 2016-3-23 19:19
方案一:
如上所示,买一个1T的SSD。剪辑完后移回机械硬盘。

总容量:12T
需要用到的硬盘数量:
1个1T SSD
3个4T普通机械硬盘,日常使用。

基本上,一周备份一次。对于我来说,这个备份频率足够了。

备份数据可以先不用买硬盘,先利用我已有的4个硬盘,比较杂,2个2T(日立和东芝各一),1个3T,1个4T,共11T。

费用:
1个1T SSD    2900 RMB
3个4T 普通机械硬盘  做日常使用。979x3=2937 RMB
备份:使用已有的4个硬盘共11T做备份。暂时不花钱。

总费用:5837 RMB
速度:肯定很快
缺陷:需要把素材移动来移动去,担心工程文件出问题。如果能有一个好的流程,也许能解决这个问题。


还是SSD的方案好。企业级硬盘,Raid5都是坑,跳进去没啥好处。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 23.096
主题: 54
帖子: 5012
注册: 2007年12月
八大行星 发表于 2016-3-23 18:05
我觉得还是要利用SSD的快速访问。可以把素材先复制到SSD里的一个工作目录里,工程文件也放在这里。这样避免以后产生链接问题。然后整个目录在项目完成后放到硬盘上备份起来。如果有很多的重复文件,可以利用Windows的除重功能。重复数据删除这个功能windows server有,windows 8需要手工安装。


方案一:
如上所示,买一个1T的SSD。剪辑完后移回机械硬盘。

总容量:12T
需要用到的硬盘数量:
1个1T SSD
3个4T普通机械硬盘,日常使用。

基本上,一周备份一次。对于我来说,这个备份频率足够了。

备份数据可以先不用买硬盘,先利用我已有的4个硬盘,比较杂,2个2T(日立和东芝各一),1个3T,1个4T,共11T。

费用:
1个1T SSD    2900 RMB
3个4T 普通机械硬盘  做日常使用。979x3=2937 RMB
备份:使用已有的4个硬盘共11T做备份。暂时不花钱。

总费用:5837 RMB
速度:肯定很快
缺陷:需要把素材移动来移动去,担心工程文件出问题。如果能有一个好的流程,也许能解决这个问题。

方案二:

总容量:12T

4个4T硬盘组RAID5,好像最少得用4个硬盘,而且最好是一样的硬盘还得是企业级的,对吧。先假设用RAID5。容量相当于3x4=12T
备份:也是用现有的这4个硬盘做备份,暂时不花钱。
也是一个星期备份一次。

4个4T 企业级硬盘  1399x4=5596 RMB
RAID5 卡?:小白,不懂。

备份:使用已有的4个硬盘共11T做备份。暂时不花钱。
速度:和SSD比应该有比较大的差距吧。不知道差距多少。

总费用:5596+RAID卡+UPS
听说在运行的时候,比如说正在剪辑的时候,只要一断电,RAID5会所有盘的数据全丢,真的吗?
如果属实,是否需要加UPS?

写完了,自己重新看了一遍,也许用SSD才是最安全的做法。速度应该也是SSD胜过RAID5。
需要花时间研究一个工作流程,如何迁移素材数据,不会影响工程文件。我想这应该能做到。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 23.096
主题: 54
帖子: 5012
注册: 2007年12月
八大行星 发表于 2016-3-23 17:58
premiere能更新这些错误的链接吗?


没法更新,提示出错,然后就没了。这是最吐血的地方。
如果能更新的话,我倒愿意一个个更新,不花多少时间的。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
小鱼背包 发表于 2016-3-23 16:30
目前将近1T,但是,目前的视频仅仅是1080P格式的,还是佳能的低码率的那种,只有20多M。

准备上4K,码率达到百M,对硬盘容量和硬盘的速度都是一个挑战。

我现在能想到的方案就是:买一个500G或者1T的SSD做剪辑素材盘,需要剪辑的就拷贝到SSD上去。弄完了就拷贝回机械硬盘。
但是,有个很大的问题,剪辑的时候软件会进行各种调用。
拷贝来拷贝去,就有可能乱套了。

我以前的视频就碰到这样的问题,工程文件都在,但premiere老是提示链接错误。
花了无数时间剪辑出来的东西,就这么没了。
当然,输出的最后视频还在。
但工程文件没用了,就没法再加工了。吐血!


我觉得还是要利用SSD的快速访问。可以把素材先复制到SSD里的一个工作目录里,工程文件也放在这里。这样避免以后产生链接问题。然后整个目录在项目完成后放到硬盘上备份起来。如果有很多的重复文件,可以利用Windows的除重功能。重复数据删除这个功能windows server有,windows 8需要手工安装。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
小鱼背包 发表于 2016-3-23 16:30
目前将近1T,但是,目前的视频仅仅是1080P格式的,还是佳能的低码率的那种,只有20多M。

准备上4K,码率达到百M,对硬盘容量和硬盘的速度都是一个挑战。

我现在能想到的方案就是:买一个500G或者1T的SSD做剪辑素材盘,需要剪辑的就拷贝到SSD上去。弄完了就拷贝回机械硬盘。
但是,有个很大的问题,剪辑的时候软件会进行各种调用。
拷贝来拷贝去,就有可能乱套了。

我以前的视频就碰到这样的问题,工程文件都在,但premiere老是提示链接错误。
花了无数时间剪辑出来的东西,就这么没了。
当然,输出的最后视频还在。
但工程文件没用了,就没法再加工了。吐血!


premiere能更新这些错误的链接吗?
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 23.096
主题: 54
帖子: 5012
注册: 2007年12月
八大行星 发表于 2016-3-23 13:03
视频素材是怎样的一个数量级呢?几百GB还是几TB?


目前将近1T,但是,目前的视频仅仅是1080P格式的,还是佳能的低码率的那种,只有20多M。

准备上4K,码率达到百M,对硬盘容量和硬盘的速度都是一个挑战。

我现在能想到的方案就是:买一个500G或者1T的SSD做剪辑素材盘,需要剪辑的就拷贝到SSD上去。弄完了就拷贝回机械硬盘。
但是,有个很大的问题,剪辑的时候软件会进行各种调用。
拷贝来拷贝去,就有可能乱套了。

我以前的视频就碰到这样的问题,工程文件都在,但premiere老是提示链接错误。
花了无数时间剪辑出来的东西,就这么没了。
当然,输出的最后视频还在。
但工程文件没用了,就没法再加工了。吐血!
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 30.214
主题: 10
帖子: 2579
注册: 2006年3月
如果数据非常重要,当然要上Raid,我家里的NAS做了Raid6,因为如果Raid5重建的时候,会有可能第二块盘出现损坏。这些年NAS都是24小时开着,总共坏过2块盘,数据安全是绝对有保障的。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 32.393
主题: 91
帖子: 1088
注册: 2001年11月
小鱼背包 发表于 2016-3-22 15:40
请教一下,如果做视频剪辑怎么办呢?
视频剪辑需要比较高的硬盘速度,机械硬盘太慢。
用SSD的话,又装不下那么多视频素材,视频素材体积太大了。

有钱买大容量SSD的,自然就没有问题。

有个同学问过了,视频达到多大的数量级?我做视频几乎只是转码,没怎么玩过剪辑,对我来说硬盘从来不是性能瓶颈。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
小鱼背包 发表于 2016-3-22 15:40
请教一下,如果做视频剪辑怎么办呢?
视频剪辑需要比较高的硬盘速度,机械硬盘太慢。
用SSD的话,又装不下那么多视频素材,视频素材体积太大了。

有钱买大容量SSD的,自然就没有问题。


视频素材是怎样的一个数量级呢?几百GB还是几TB?
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.995
主题: 26
帖子: 1311
注册: 2008年6月
huanzhu 发表于 2016-3-22 13:15
目前做raid主要是容量和可靠性了,性能肯定和ssd没法比,但用ssd一定要备份。


哎,说到备份, 已经被SSD害过一次了, SSD的GC垃圾回收做的太好了,迅速回收(擦出)了数据,想恢复被删除/格式化的分区文件门都没有。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 23.096
主题: 54
帖子: 5012
注册: 2007年12月
kookoo 发表于 2016-3-2 11:36
如果是为了“玩玩”Raid,那就上啊,玩的就是它!

如果是个人家用,坚决不要任何Raid,否则稍有问题就面临丢失数据的风险

我有宝宝这几年的照片几万张,连同自己工作上积累的文档,总共也有几个T,全部直接挂在Windows上管理,各个硬盘只有一个分区。最最重要的就是要有离线备份。这几年经历过主板烧毁、突然断电导致系统蓝屏、主存储硬盘莫名丢失分区、自己误操作删了大批文件、小宝宝乱砸键盘把文件目录弄乱,种种事故都有。但是靠着简单、容易维护也容易更新的硬件,以及完善的备份,至今没丢过任何数据,电脑都前后换过三代了。

其实要说个人动手能力,我也不算差。曾经主要工作内容就是设计电信级的平台,各种Raid是每天都要用的。但是自己家里用,我是绝不会用Raid。


请教一下,如果做视频剪辑怎么办呢?
视频剪辑需要比较高的硬盘速度,机械硬盘太慢。
用SSD的话,又装不下那么多视频素材,视频素材体积太大了。

有钱买大容量SSD的,自然就没有问题。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.948
主题: 0
帖子: 68
注册: 2009年9月
223sywj 发表于 2016-03-06 17:06
是啊,SSD一出,机械硬盘以及硬盘相关的玩艺儿就没啥意思了,Intel 750 PCI-E SSD  400G 型号读写速度达到22...


目前做raid主要是容量和可靠性了,性能肯定和ssd没法比,但用ssd一定要备份。
本帖由 iPad Mini2 (wifi) 客户端发布
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.995
主题: 26
帖子: 1311
注册: 2008年6月
八大行星 发表于 2016-3-7 00:36
同意!我也是这样应用的。


是啊,SSD一出,机械硬盘以及硬盘相关的玩艺儿就没啥意思了,Intel 750 PCI-E SSD  400G 型号读写速度达到2200MB/s和/900 MB/s,仅需要1999元还包邮。
硬盘要是搞RAID需要多少个盘RAID0才行?价格呢?可靠性呢?占用多少空间呢?能耗多少呢?
我现在用的老主板微星P45D3 + E5450@4Ghz + 16GB + 128GM5S + GTX460TOP 感觉还能在战两年。
等到下一次换极器其它先不说,俺的C盘至少是Intel 750 PCI-E SSD  400G......
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
223sywj 发表于 2016-3-6 22:05
嗯,比来比去,现在搞RAID主要为了提高数据安全性,Raid1也好Raid5也罢,性能跟普通单盘SSD比没法比的。所以重要数据用主板软RAID1实现就好了,兼容性高,数据迁移也很容易。速度用固态硬盘解决。一块中端硬件RAID卡要2000元左右,两块4TB硬盘也就1600~1700,一块MX200系列 250G固态硬盘才550元。哪个更适合?我想大家心中应该有数了。


同意!我也是这样应用的。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.995
主题: 26
帖子: 1311
注册: 2008年6月
八大行星 发表于 2016-3-4 23:47
我用DELL的H310 Raid卡新建过一次Raid0,新建时会提示完整重做硬盘,操作很慢,完成后比之前的容量小一些。看上去是在做低级格式化,并且用了自己的格式。我怀疑它这样做是有硬件依赖性的。


嗯,比来比去,现在搞RAID主要为了提高数据安全性,Raid1也好Raid5也罢,性能跟普通单盘SSD比没法比的。所以重要数据用主板软RAID1实现就好了,兼容性高,数据迁移也很容易。速度用固态硬盘解决。一块中端硬件RAID卡要2000元左右,两块4TB硬盘也就1600~1700,一块MX200系列 250G固态硬盘才550元。哪个更适合?我想大家心中应该有数了。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.656
主题: 49
帖子: 8336
注册: 2014年2月
IBMX31 发表于 2016-3-5 19:57
RAID0+1可不叫“兼顾”,叫做不要容量只要容错

损失50%空间。

好像RAID1+0 从容错的角度更加好些。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 38.421
主题: 89
帖子: 12843
注册: 2004年8月
zephyrxie 发表于 2016-3-5 12:23
可以RAID0+1, 先两两做RAID0, 然后两组条带再做镜像,兼顾容量和备份容灾。


RAID0+1可不叫“兼顾”,叫做不要容量只要容错
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.656
主题: 49
帖子: 8336
注册: 2014年2月
huanzhu 发表于 2016-3-4 23:52
对于非企业环境,不建议raid5,企业级也都是raid6了:
1、目前sata盘都是大容量,坏了重建时间太长,很容易再坏一块,导致数据丢失。
2、4块盘做raid5,性价比并不高。
3、如果数据很重要需要保护,可以两块raid0,两块raid1。0用来放不重要数据和备份数据,1用来放重要数据。还可以定期用移动硬盘做增量备份,多重保护,性价比极高。

可以RAID0+1, 先两两做RAID0, 然后两组条带再做镜像,兼顾容量和备份容灾。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.948
主题: 0
帖子: 68
注册: 2009年9月
对于非企业环境,不建议raid5,企业级也都是raid6了:
1、目前sata盘都是大容量,坏了重建时间太长,很容易再坏一块,导致数据丢失。
2、4块盘做raid5,性价比并不高。
3、如果数据很重要需要保护,可以两块raid0,两块raid1。0用来放不重要数据和备份数据,1用来放重要数据。还可以定期用移动硬盘做增量备份,多重保护,性价比极高。

本帖由 iPad Mini2 (wifi) 客户端发布
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
223sywj 发表于 2016-3-4 20:40
我估计RAID1这个情况所有的RAID卡都是这样。


我用DELL的H310 Raid卡新建过一次Raid0,新建时会提示完整重做硬盘,操作很慢,完成后比之前的容量小一些。看上去是在做低级格式化,并且用了自己的格式。我怀疑它这样做是有硬件依赖性的。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 29.179
主题: 320
帖子: 14187
注册: 2008年6月
tempsf2sad2xf 发表于 2016-3-4 20:54
这样会造成碎片化吗


会的,zfs设计时只考虑怎么可靠,对于性能不重视。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 2.208
主题: 360
帖子: 1845
注册: 2016年1月
tempsf2sad2xf 发表于 2016-3-4 20:54
这样会造成碎片化吗


会啊,zfs最容易产生碎片 本帖最后由 马克布克普若 于 2016-3-4 21:04 编辑

(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.639
主题: 136
帖子: 5549
注册: 2009年6月
nahcooo 发表于 2016-03-04 12:51
ZFS可以提供Raid-5或者Raid-6那样的磁盘冗余(称呼为raid-z),当然也可以不提供,不提供的情况下,就相当于JBOD。...
这样会造成碎片化吗
本帖由 iPhone 5s (GSM CDMA) 客户端发布
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 29.179
主题: 320
帖子: 14187
注册: 2008年6月
灰溜溜 发表于 2016-3-3 17:19
没有硬盘冗余,zfs能提供什么安全特性?


ZFS可以提供Raid-5或者Raid-6那样的磁盘冗余(称呼为raid-z),当然也可以不提供,不提供的情况下,就相当于JBOD。

raid-z1比raid-5来说,增强的安全性主要来自于raid-5的写入漏洞。当你修改一个文件的时候,源文件写到一半断电,造成校验码和源文件不同步,这个文件就坏了,当然也无法恢复。raid-z任何时候断电也不会导致raid-5那样的“写入漏洞”

本帖最后由 nahcooo 于 2016-3-4 20:54 编辑

(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.995
主题: 26
帖子: 1311
注册: 2008年6月
八大行星 发表于 2016-3-3 23:16
所以楼下有人说Intel这个Raid不是硬Raid,实质是软Raid,是不是就是这个原因呢?


我估计RAID1这个情况所有的RAID卡都是这样。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 30.28
主题: 504
帖子: 10380
注册: 2006年8月
223sywj 发表于 2016-3-3 19:38
不会啊,我在Intel ICH10R的主板上做的RAID1,硬盘从RAID1阵列中单独拿出来放到任何主板上都认啊,都能正常识别正常读写里面的数据。


所以楼下有人说Intel这个Raid不是硬Raid,实质是软Raid,是不是就是这个原因呢?
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 11.995
主题: 26
帖子: 1311
注册: 2008年6月
八大行星 发表于 2016-3-2 23:47
板载raid会让磁盘和raid绑定。过几年后,raid坏了,找到同型号raid很难。而找不到的话,硬盘里的数据读不出来。


不会啊,我在Intel ICH10R的主板上做的RAID1,硬盘从RAID1阵列中单独拿出来放到任何主板上都认啊,都能正常识别正常读写里面的数据。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.656
主题: 49
帖子: 8336
注册: 2014年2月
家用就用镜像RAID 1吧. 简单,安全有保障,出问题重建时间短。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
泡菜
泡网分: 6.073
主题: 11
帖子: 2794
注册: 2011年1月
知你有多深 发表于 2016-01-21 11:27
去看看zfs的特性就明白了,迄今为止最安全的文件系统,也是操作非常方便的文件系统,raid是无法比拟的

...
没有硬盘冗余,zfs能提供什么安全特性?
本帖由安卓客户端发布
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
资深泡菜
泡网分: 22.685
主题: 9
帖子: 2406
注册: 2006年3月
八大行星 发表于 2016-3-2 23:43
raid1就好,为何要0+1?


读写速度翻番阿,否则内圈读写速度有点悲剧,千兆网速跑不满。
(0)
(0)
只看该作者
不看该作者
加入黑名单
举报
返回顶部
个人图文集
个人作品集
回复主题: 究竟要不要搞RAID5,实在是拿不了主意
功能受限
游客无回复权限,请登录后再试