讨论下控制成本的前提下,家用安全保存20年数据的备份方案

讨论下控制成本的前提下,家用安全保存20年数据的备份方案

讨论下控制成本的前提下,家用安全保存20年数据的备份方案。讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

2016年2月3日更新,最后配置为 家用服务器 HP ProLiant MicroServer Gen8 体积 13.2LCPU:英特尔 至强 E3-1220主板:惠普 ProLiant C204 Server Board with iLO 4内存:金士顿 惠普专用 DDR3 1600 ECC UDIMM 8G + HP SmartMemory DDR3 1600 ECC UDIMM 4G显卡:Matrox G200eH VGA固态:Intel DC S3500 800G,Intel DC S3500 480G(暂时用Intel 520 240G代替)仓库:西部数据 NAS WD 红盘 Red 4T x 2,东芝企业级5T SATA MG04ACA500A x 1电源:台达200瓦,自制SATA+散热风扇一拖三线

讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

讨论下控制成本的前提下,家用安全保存20年数据的备份方案 

讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

讨论下控制成本的前提下,家用安全保存20年数据的备份方案 ----------------------------15年11月更新----------------------------之前说的都是废话,楼主已经德淘下单HP MicroServer Gen8 含DHL运费一共217欧元,就看海关大爷心情睡不睡了。从写帖子到现在新添加的存储设备——5T希捷移动硬盘拆盘一块,楼主知道4盘封装希捷DM001是定时炸弹,就尝试一把看看多久爆炸吧

讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

讨论下控制成本的前提下,家用安全保存20年数据的备份方案但是炸弹一块就够了,下一块硬盘也就是装在Gen8上面的第二块硬盘打算购买希捷(Seagate)4TB 7200转 128M SATA 6GB/秒 企业级硬盘(ST4000NM0033)现有的希捷2T和东芝2T已经超过3年,打算趁还没有坏道二手处理掉。Gen8还有2个盘位留给2块480G SSD做高速游戏软件共享盘,SATA 5丢个64G 三星830 SSD装系统

讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

讨论下控制成本的前提下,家用安全保存20年数据的备份方案无敌分割线

讨论下控制成本的前提下,家用安全保存20年数据的备份方案2016年2月3日更新,最后配置为家用服务器HPProLiantMicroServerGen8体积13.2LCPU:英特尔至强E31220主...

讨论下控制成本的前提下,家用安全保存20年数据的备份方案下面几个月前还没有决定入手NAS或者HP Gen8的心路历程,纯属倒垃圾,大家可以无视简单的说一下中心思想:家庭PC(群)系统,备份数据数据安全是长期的过程,楼主已经做了15年,最近10年没有丢失过数据,还要持续下去。所以想考虑一下未来10年的规划,这是跟其他网友讨论的结果:

可靠的数据安全思路基本是 ,多介质异地交叉同步备份。依据个人认知的重要性, 对数据进行等级划分,最大限度减少个人有价值数据。不可替代的个人著作,或打印,或冲洗,还是多介质另外,恐怕对数据容量的估算和资金方面,一定会超。

我总结的思路:

  • 可以借助的就是免费的2T百度云了

  • 需要时间整理数据,照片可以精简30%不成问题。

  • 添加NAS也是增加没有容量后顾之忧的存储介质,集中给全部数据做一个备份。

楼主计划未来10年的个人家庭数据保全策略是:

  • NAS 存储全部数据,这是主要备份。包括提到的全部家庭个人数据

  • 蓝光高清片源只存在NAS上面,丢了就丢了,不备份

  • 百度云2.5T容量存储全部数码照片和个人/工作数据,作为灾难备份。

  • 每台机器有一个机械硬盘,存储最常用的部分Snapshot数据备份,比如2013年以后的数据和文档。超过的部分年限数据就要去NAS去寻找——这部分有办法自动同步备份到NAS去最好

然后开始讲楼主数据备份的故事,大概的目的是说楼主怎么否决掉光盘/独立硬盘备份,不耐可以直接跳到问题提问环节:

从楼主自己家庭PC开始成为一个“家用电器”(就是全家都开始使用它),PC硬盘中开始存储私有用户数据,到现在已经过去15年(更早的五年史前阶段是当成计算机启蒙工具,那时候的数据不要也罢)。如何留住这15年累积的数据,可以说花费了不少心思。因为经验表明,PC里30年来最常见的的存储设备——温侧斯特机械硬盘是不靠谱的。2000年起PC介入“家用电器”,跟很多家里老人不愿意学用电脑不一样,我爸妈丈母娘都在我们两口子熏陶下,学会了炒股,爱奇艺,PPS,QQ。所以家里一共保有着8台电脑,5台台式 3台笔记本电脑。15年内先后购置15块机械硬盘(含笔记本自带和后购置升级机械硬盘)。最后统计机械硬盘的实际使用寿命如下:
  • Maxor 20G 购于2000年,现状态:无法开机启动系统。状态:不可靠

  • Maxor 120G 购于2004年,使用3天,卒,送店家换三星160G 7200 状态:死亡

  • 三星 7200转 160G 2004年售后置换,现状态:工作2年零8个月后,卒,送售后换同容量160G 5400 状态:死亡

  • 三星 5400转 160G 售后置换,现状态:开机启动随机蓝屏。状态:不可靠

  • 西数 7200转 80G 购于2005,现状态:开机启动随机蓝屏。状态:不可靠

  • 富士通 5400 60G 明基S73随机盘,购于2006,现状态:开机启动随机蓝屏。 状态:不可靠

  • 日立 7K160 80G 购于2006年,现完好。状态:可靠,然并卵,因为是笔记本PATA并口,而且只有80G容量

  • 日立 5K100 100G 索尼 CR13/R随机盘购于2007年,2012年监测发现2黄衰退奇慢无比,二手甩卖 状态:不可靠

  • 日立 5K320 320G 购于2009年,老妈炒股机用盘,仅作仓库盘。状态:不可靠,C5黄,文件拷贝出错

  • 西部数据蓝盘 320G 联想Y450随机盘购于2009年,两黄,快慢扫均大量坏道,报废状态。状态:死亡

  • 希捷 7200转 320G 戴尔 Inspiron 13R随机盘,购于2010,2年后S.M.A.R.T数据全无,Dell快速检测通不过,送售后换新黑天蝎 状态:不可靠

  • 日立 7K750 750G 购于2011年,女王淘宝机用仓库盘 ,现完好。状态:可靠

  • 西部数据黑天蝎 320G 2012年戴尔客服置换,现老爸炒股机用盘,完好。状态:可靠

  • 西部数据蓝盘 750G 联想Y480M随机盘,原女王淘宝机用仓库盘。状态:不可靠,C5黄,文件拷贝出错

  • 东芝 2T 7200转,2013年新蛋购买,我主力仓库盘,现完好。状态:可靠

  • 希捷Backup Plus 2T 2.5英寸,我主力仓库盘  京东2015年618购买。状态:可靠

2006年前,光盘介质备份——现已否决2006年前用的是CD-R和DVD-R,结果发现光盘介质备保存是Bullshit。它的离线特性决定了你很能难Review所有备份的完整性和可靠性。最大的灾难发生在2005年,我发现大约一桶2002~2003年刻录备份数据的50张CD-R放在光盘存储箱里面,接触那种很常见的无纺布光盘收纳套的备份数据光盘盘面受潮——全!部!发!霉!了。也就是说,光盘只有传统的聚酯CD核——CD唱片那种标准盒子才是安全的,因为非接触盘面,不需要防潮箱,否则南方梅雨季节还需要防潮箱才能安全存放光盘,这种数据备份成本接受不了。光盘的数据密度也是一个大难题,当年已经备份了上百张光盘,因为充分了解光盘数据易丢失的特性,甚至重要数据刻录2张一模一样的的备份,家里盘片数量在2006年停止使用DVD-R的时候已经超过了200张!已经多年累积下来,把15年前刻录的低容量CD-R全部拷贝下来,翻刻更高容量光盘的工作量也无法想象——事实上我到现在2006年之前的数据都没有统一从那些DVD-R备份中取出过,现在能不能全部取回数据还是个未知数。即使是双重备份,也会因为保管不善,盘片质量问题丢失数据。上周楼主想到读取一张2000年拍摄的VCR视频,当时用的非大厂盘片,现在看反射层已经半透明微微透光,结果换了3个光驱那张光盘最后最外道的5min视频都会导致死机,无法正常读取。幸亏有一个神奇的工具CloneCD,它的RAW读取能力还能帮我恢复了这种读取困难的光盘数据。所以光盘介质备份——坚决否决。2006年起,机械硬盘备份——心太累,否决。使用机械硬盘备份数据其实对于有十几年使用经验,懂数据恢复,恢复过多次坏盘数据的楼主来说,是非常非常提心吊胆的。上面家用在役硬盘列表大家也可以看到,楼主的家用机械硬盘使用到第3~5年,几乎必挂!2006年楼主终于碰到一次惨烈的突然死亡,2003年买的三星SP80 160G数据全丢。所以2006年起,楼主需要做的事情就是在每月都定期巡视各机器硬盘S.M.A.R.T数据,在发现S.M.A.R.T异常苗头之前,购买新的更大容量的硬盘,在旧硬盘嗝屁之前拷贝出数据,备份数据在新的硬盘上。12,16号硬盘都是因为这个原因购买的。2011年起,增加离线机械硬盘备份——心太累,否决。因为机器硬盘返修之前需要先备份下原有300G个人用户数据,增加一个离线机械硬盘备份,最初是750G,目前扩容到2T,使用移动硬盘底座。但是楼主知道这东西绝对不靠谱,机械硬盘对12V供电要求高,96元USB 3.0移动硬盘底座的变压器12V供电波纹质量,用膝盖想就知道了。只是因为只做离线备份用途,使用频率极少,目前还没出过问题。离线机械硬盘备份第二个缺点就是跟光盘介质一样,离线状态,你完全不知道你离线硬盘的备份文件里哪些文件过时了可以删掉了,哪些文件重复了,哪些文件遗漏了没有备份下来。甚至这个缺点可以推广到现在楼主家一机一硬盘的PC存储结构上,这是多硬盘存储的通病。每台机器硬盘都有不完全相同的差量照片存储,每台机器都有不同时期下载的系统ISO,应用软件备份和驱动程序,但是都不是最新的同步的版本。2012年起,增加百度云PC同步盘备份最早是Dropbox,但是太慢和免费容量限制导致转向免费2T的百度云。国内云备份是个操蛋的东西——三天两头无法同步,PC客户端崩溃,文件自动同步不及时(有时候第二天都没同步,导致每天下班关机前我都养成了神经质的手动选择“立即同步”菜单的习惯)。对被锁定编辑中的Word,代码文档支持极差,傻逼一样不停尝试上传编辑锁定文件,会造成大量的版本冲突文件。不支持同步.GIT/.SVN这样的程序猿专属目录(仅有Dropbox支持,但是墙和网速>_<你懂得) 注定只能当最后的那根救命稻草,不能用来做当真的备份手段使用。好了,目前已知上面那些数据存储和备份手段都不靠谱。楼主希望在重复的“发现坏道迹象,买新大容量硬盘,拷贝备份数据”的怪圈中脱离出来。考虑部署一个能够预警坏道(工作性质,维护服务器时候看见,硬盘抽取盒指示灯的橙灯亮了,那就是要换盘了)有高性能,高可靠性,讲究性价比的家用NAS方案。
现状:总的家庭数据,已经超越合理成本下的一块机械硬盘容量。也就是楼主现在的全部个人数据无法用千元以下一块硬盘装下。分散管理统计备份都非常的麻烦,容易遗漏,文件重复占用空间,整理起来效率也不高,所以觉得是时候增加一个NAS做统一存储备份了。楼主计划未来10年的个人家庭数据保全策略是:

  • NAS 存储全部数据,这是主要备份。包括提到的全部家庭个人数据

  • 蓝光高清片源只存在NAS上面,丢了就丢了,不备份

  • 百度云2.5T容量存储全部数码照片和个人/工作数据,作为灾难备份。

  • 每台机器有一个机械硬盘,存储最常用的部分Snapshot数据备份,比如2013年以后的数据和文档。超过的部分年限数据就要去NAS去寻找——这部分有办法自动同步备份到NAS去最好

数据量统计家庭照片单反十年,存储了600G RAW照片,太多重要的回忆,很重要,绝对不能丢,部分备份状态。而且分散在3台机器(我的,爸妈的,全家摄影爱好者)个人文档数据,100G,基本上都同步在百度云了,虽然很重要,但是有最后的救命稻草。工作项目文档,50G,基本上都同步在百度云了,虽然很重要,但是有最后的救命稻草。无损音乐200G,很多自己抓的,CD已经找不到了,有的无损单曲很难找,最好别丢,部分备份状态,分散在2机。美剧/IMDB Top500高清片源现在有3T左右(虽然很难收集,至少50%有种子备份,尽量不要丢),容量太大,无法备份PC游戏 500G,有游民星空和三大妈,种子文件有备份,可以丢硬件驱动,BIOS MOD,Android和办公软件,300G,这个主要需求是版本同步,现在每台PC机器都有一部分文件,版本严重冲突。需求:1、“家庭云”私有云存储用户文件,可以在同城的2家,超过3台PC机上面互相自由访问保存,就跟存储在本地硬盘一样。包括我的文档,我的图片,我的照片,我的音乐,我的视频,我的游戏,我的工作,我的代码,浏览器,电驴和BT的下载保存目录为了最快的读写响应操作速度,“我的文档”和“我的照片”,“我的工作”最好是本机SSD上有实际存储映射(能实现自动离线文件镜像最好),同步镜像文件方式保存到NAS存储。然后问题来了,问题宝宝的问题有好多。NAS的硬盘存储(组织)架构方式?

  • 硬件 Raid-5 (LSI 9621-8i 要实现硬盘告警指示灯),现在看最美好,起步价3盘,可用容量等于n-1盘

  • ZFS

  • Raid 0+1 (要实现硬盘告警指示灯) 磁盘可用容量只有50%,肉痛

  • 多盘,单盘独立访问——没有自动容错能力,还要依赖楼主个人主观能动性来发现和替换坏道硬盘,跟现在的备份方式无本质区别。

楼主关心的无非就是:容错和预警:能够允许BOOM 1,2盘而保障数据无损?有监控软件或者声光告警——最好就是硬盘托架上的橙色LED灯啦。换盘后重构数据的时间,2T/8~10小时可以接受,5T容量最多1天重构完成可以吗?在线扩容:因为这是10年长期规划,楼主要求必须能够在不解除原有超过5T容量大小的lun/vol的状态下扩容,包括盘数的扩容和空间扩容。因为包括单位的NetApp,现在还没尝试过NAS存储扩容。楼主凭借脑补,NAS单卷的文件数据量一旦累积超过5T(现在已经快了)倒腾换盘就非常非常痛苦了,总不能再买一个更大的NAS才能把旧的扩容吧?根据楼主的了解,LSI 9260以上的MegaRAID阵列卡都支持阵列迁移,但是不清楚支持加盘,感觉更渺茫的是支持换盘扩容,就是2T*4在线换成5T*4。最糟的情况,我希望能够一张阵列卡支持做新旧2个4盘Raid-5,然后手动把2T*4的数据拷贝进5T*4去,然后处理掉旧的2T*4阵列,使用新的5T*4阵列。根据浴室说ZFS扩盘和扩容有优势,但是好像限定于FreeNAS系统?Server 2012和EXSi能否支持?谁能告诉我优势和劣势?接入PC客户端的方式?
  • iSCSI方式接入为NAS存储为虚拟本地磁盘。”用户验证“最好能够保存密码或者和Windows用户绑定,最好不需要人工干预,自动登录,系统要求支持Windows,Mac,Linux(CentOS),IOS,Android。

  • SMB协议,映射为Windows系统的网络驱动器,基本上NAS/Windows Server都支持这种方式。

  • 私有云同步,爸妈家的摄影照片除了百度云只能使用这个方式同步备份到楼主家的未来部署的NAS上面。

  • 公有云同步,百度云PC同步盘,现成方案。

  • 听说过但是没用过的高科技协议:CIFS,NFS,ZFS(这个我不知道是划为Raid同级的(可以认为是数据链路层,还是算在应用层上)

楼主不知道还有没有遗漏其他访问和同步数据的方式,楼主想知道那些没听说过的那些网络文件协议和xxFS的优缺点。解决方案?EXSi是否是必须?Windows Server 20121、HP MicroServer Gen8,使用惠普P222阵列卡或者LSI MegaRAID 9260能够实现更换坏盘的指示灯?2、自装ITX,4盘位机箱,热拔插硬盘架——不知道组装机的热拔插硬盘架能否支持更换坏盘的指示灯?两个方案都倾向于添加LSI MegaRAID 9260和锂电池,疑问就是面板上的硬盘架能否支持更换坏盘的指示灯?商品NAS,性价比问题目前非常不倾向……群辉
QNAP硬件性能3~4个5T机械硬盘 Raid 5,单盘损坏容错,热拔插升级替换。要求最低配置下最小持续吞吐量100MB/s,内存标准SODIMM或者DIMM可以扩充升级,支持双网口千兆链路聚合,典型持续读写吞吐量200MB/s 。(这点留着YY,实际不重要)拥有高阶扩展能力,理论极限配置使用10GE万兆网卡和SSD Raid,最大持续吞吐量可以扩展到1000MB/s。NAS协议和远程网管功能,高清播放支持iSCSI,SMB,支持用户权限分区访问,支持挂机迅雷,eMule/BT下载带PC端远程管理,非常倾向于惠普iLo支持S.M.A.R.T坏盘预警报警NAS放在电视柜,视频输出可以接电视,客厅需要放片,最好能支持HTPC,无线键鼠+PotPlayer即可,不矫情。如果Gen8显卡实现困难,可以考虑添加高清播放器链接NAS播放高清不矫情手机播放,在家里有55寸电视不看看,有27寸4K显示器不看,有24寸1080p显示器不看,偏要在手机平板上看NAS,说得难听就是矫情。盘片选择,NAS的迭代升级和磁盘扩容方式目前有东芝2T,希捷2T家用级各一块,计划使用拆盘大法拆希捷Backup Plus的5T移动硬盘来用。计划起步大概是第一次部署,Raid 5,3*5T,预计可用空间10T,4盘位还能扩展一次,但是不知道NAS Raid 5从3盘扩展到4盘需不需要腾空3个盘上已经存储的所有数据?阵列卡选择?惠普SmartArray P222LSI MegaRAID 9260-8iLSI MegaRAID 9261-8iibm m5014 成本——预计NAS+4*5T,6年使用期限,成本控制在1000/年。