V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
hotsun168
V2EX  ›  程序员

折腾 NAS 丢失大量珍贵数据后有感

  •  5
     
  •   hotsun168 · 2020-08-20 11:45:36 +08:00 · 38082 次点击
    这是一个创建于 1535 天前的主题,其中的信息可能已经有所发展或是发生改变。

    背景

    1. 第一版 NAS 已用 5 年,为占美无风扇工控机、一块 WD60EFRX 、优越者 Y-3359R 进行 DIY,稳定时千兆可跑满。

    2. 为了顺便当做远程桌面,没有使用黑群晖或 Linux,使用了 Win7 系统。Samba 服务经常无故卡死,遇到网络无法连接、0x00000000XX 等类似错误或“服务器存储空间不足无法处理此命令”等错误无数次,每次基本都需要重启。花了无数时间来解决这些问题,无果。一直在忍受,后续甚至写了脚本做定时重启。

    3. 第二版(在用)为群晖 DS920+、一块 WD140EMFZ,以及上面的 6T,买之前提前了解了很久 RAID5 是否安全,后选择 SHR 。

    灾难

    1. 因计划把 6T 和 14T 硬盘都放入群晖,但硬盘插入群晖会被格式化,所以 14T 硬盘到货当天,用外接硬盘座接入 14T 硬盘,在 Win7 下进行 6T 到 14T 文件全量复制,期间报错无数,推测可能是 6T 磁盘长时间运行导致文件分配表错误。搜索相关资料提示 chkdsk 修复 NTFS 分区。

    2. [重点] chkdsk 完毕后,6T 硬盘中大量资料丢失(超过 80%),其中包括各种重要文件,尝试 DiskGenius 修复未果(不光是无法找回文件分配表,而且连 RAW 数据都无法找回)。

    3. 不幸中的万幸,其中少部分文件在各个网盘有备份,另一部分几年前有刻盘备份,但其中一些珍贵的资料再也无法找回(包括结婚视频、小孩照片、老光盘 ISO 等个人产生文件,与老游戏、各种收藏的视频等网络下载资源)。

    4. 花费几天时间在各种平台搜索网络下载资源,因年份久远,几乎全部失效,近似于无法找回。

    现状与未来

    1. 计划在过一段时间之后再买一块 14T,尽可能避开同批次,2 块盘开 SHR 。

    2. 每隔一段时间继续买 14T,加到 4 块,开 SHR2 。

    教训与体会

    1. 任何情况下大量数据复制尽可能先备份,或者使用专门的工具进行,谨慎进行 chkdsk 等硬盘修复措施。不要因为是程序员身份就各种放心大胆地操作,稍有不慎就会产生非常严重的后果。

    2. 脑子要清楚,选择方案要合理可行。其实可以选择先把 6T 使用 Ghost 备份一份到 14T 硬盘,再进行数据复制,反正空间足够。

    3. 重要资料放在 NAS 一定要开 RAID,硬盘少就用 RAID1,硬盘多可考虑 RAID5 、RAID6 或者群晖的 SHR 或 SHR2,其中尽可能选择允许 2 块盘故障时可恢复的方案。同时使用多份备份,网盘、冷备、刻盘等。

    4. 网络下载资料可考虑使用脚本生成 ed2k 链接,文件丢失后可以重新下载,或使用网盘快速离线。

    5. 从 2015 年第一版 NAS 到今年买群晖中间的 5 年里,硬盘柜里一直只有一块硬盘,最开始选择的 5 盘位硬盘柜产生了严重的浪费。感慨自己想得太多,有美好的愿望但却一直没有落实,又感叹运气太好,这 5 年中唯一的一块硬盘居然没坏。

    6. 第一版 NAS 使用的这 5 年中,是人生大事接连不断的几年,根本存不下钱,更别提这种大额投入了。所以钱真的可以解决绝大部分问题。如果有钱,最开始我就买群晖并放满硬盘,开各种灾备,就可以避免这种大量数据搬运,数据丢失的概率会大大降低。

    7. 只有栽跟头才能让人积累经验,只有疼痛才能让记忆更深。不舍得投入成本保护数据,还是因为数据对你不够重要。

    第 1 条附言  ·  2020-08-20 14:00:42 +08:00
    8. 漏了一点,为避免突然断电损坏硬盘,尽可能上 UPS 。目前家中所有的有硬盘设备都接在 UPS 后面,包括群晖,而且 UPS 切换电池模式后会通知群晖转到安全模式,也算是进一步降低意外损坏的风险。
    第 2 条附言  ·  2020-08-21 16:56:05 +08:00
    这贴居然超过 100 条回复,非常感谢大家!
    针对大家提出的方案,我会再进行详细的考虑与设计,感谢真诚提出见解或建议的每位同学。
    154 条回复    2021-09-26 15:12:08 +08:00
    1  2  
    wandehul
        1
    wandehul  
       2020-08-20 11:50:37 +08:00
    重要数据多备
    manzhiyong
        2
    manzhiyong  
       2020-08-20 11:54:28 +08:00   ❤️ 1
    工控机重启那种大概率是过热造成的,你查下温度,硬盘温度大于 40 度就是太热了。可以换专门的 nas 机箱,我原来一般 pc 机箱,各种死机蓝屏坏内存条,换了银欣 nas 机箱后就屁事没有了,安逸的很。
    XDash
        3
    XDash  
       2020-08-20 11:55:07 +08:00
    现在都是重要数据 NAS + GDrive 双重备份,文档代码还同时提交到 Github,照片 Google Photos 同步一份
    lshero
        4
    lshero  
       2020-08-20 12:01:38 +08:00
    用 NAS 的自动同步备份一份到 backblaze 或者 wasabi 上面吧,这两个性价比高一些。
    zjsxwc
        5
    zjsxwc  
       2020-08-20 12:08:31 +08:00
    楼主,我无脑 raid1 可以吗? 我对数据都在同一目录的需求不大,比如 6 块 8T 硬盘,我做 raid1 是不是 可以获得 3 个 8T 的存储空间?
    anubu
        6
    anubu  
       2020-08-20 12:14:14 +08:00
    个人用户优先考虑多点备份或者离线备份,建立合理的备份分级和管理体系。RAID 主要用于高可用场景,对个人用户来说优先级不太高,甚至不需要。当然,非要把高可用和容灾混用也不是不行。
    Smash
        7
    Smash  
       2020-08-20 12:17:05 +08:00
    我的是 DS1019+,外接了一个威马硬盘盒两块 2T 共 4T 硬盘做备份,然后再 HyperBackup 在京东云做备份。
    shellus
        8
    shellus  
       2020-08-20 12:23:18 +08:00   ❤️ 3
    我把我的西数 8T 从硬盘盒拿出来放到 nas 里的 ubuntu 里面,发现 ntfs 格式 cpu 占用高,于是找了个无损转换 ntfs 到 ext4 的工具,转换时间预计一周,结果转完数据丢了,也是一样用 DiskGenius 数据恢复失败,能看见文件名,恢复出来都是打不开的文件, 和楼主一样,丢了旅游照,结婚照,小孩照片,伤心死了
    Kiriya
        9
    Kiriya  
       2020-08-20 12:29:12 +08:00
    重要数据比如照片视频还是要冷备份,建议用 1T 以下的 CMR 硬盘备份并断电存放
    jsnjfz
        10
    jsnjfz  
       2020-08-20 12:31:12 +08:00
    普通硬盘非企业用尽量别 RAID5,我觉得无脑 RAID1 就挺好
    wenwen226400
        11
    wenwen226400  
       2020-08-20 12:31:16 +08:00
    raid 不是备份,那些连 journal 都没有的 raid 更加别用了 还有团灭风险
    群晖 你硬件坏了 更难修 还不如 windows 呢
    windows 可以用 snapraid
    能扔到 google photo 的 就扔啊
    电源要买 10 年保质期,1 元 1 瓦的
    硬盘座 都是坑
    mpz7
        12
    mpz7  
       2020-08-20 12:39:23 +08:00 via Android
    不说别的,照片都不洗出来吗?
    wazon
        13
    wazon  
       2020-08-20 12:41:23 +08:00   ❤️ 1
    不一定是 chkdsk 损坏的吧?
    a1044634486
        14
    a1044634486  
       2020-08-20 12:43:33 +08:00 via Android
    6t 复制到 14t,复制完之后被复制的 6t 硬盘资料丢失,太吓人了
    waruqi
        15
    waruqi  
       2020-08-20 12:46:16 +08:00 via Android
    我是定期刻光盘
    imn1
        16
    imn1  
       2020-08-20 12:47:07 +08:00
    60T 无 NAS 路过,就一个四位无 raid 硬盘箱
    LokiSharp
        17
    LokiSharp  
       2020-08-20 12:47:31 +08:00 via iPhone
    我买的 HGST 企业盘也只敢 RAID1...
    love
        18
    love  
       2020-08-20 12:51:19 +08:00 via Android   ❤️ 1
    我没用 nas,而是买了一堆移动硬盘,因为我不需随时访问资料,要用的时候接上就行。离线放置硬盘相当耐用,从 10 年前买到现在一块都没坏。
    hotsun168
        19
    hotsun168  
    OP
       2020-08-20 12:55:20 +08:00
    @manzhiyong 工控机温度和硬盘温度没关系,硬盘是放在硬盘柜的。
    @zjsxwc RAID1 当然可以,我考虑 SHR 是为了更充分利用磁盘空间。
    @anubu 有很多人觉得 RAID 对个人用户没用,所以我也没有过多的去思考,就这么做了。
    @shellus 只有丢失过这种超级珍贵的数据,才能对数据的安全性有更深刻的认识。
    @wenwen226400 群晖硬件损坏我还真没考虑过,我去官网咨询一下。
    @mpz7 照片数量很多,全都洗出来不可能,而且纸质会丢失像素细节吧。
    @wazon chkdsk 前文件可读,只是拷贝出错,chkdsk 后文件丢失。所以我判断 chkdsk 有问题。
    @waruqi 也打算这么做了,目前看好的是威宝千年光盘。
    Osk
        20
    Osk  
       2020-08-20 12:55:48 +08:00 via Android
    重要的东西:
    在线:raid1 + 定期 scrub + 文件内容 crc,都由文件系统和其下的存储池管理层完成。
    离线:本地离线备份,网盘加密备份。

    不重要的东西:无 raid,scrub + crc 要不要都不影响。

    下载的电影啥的:raid0 走起,大不了挂了重下。
    Osk
        21
    Osk  
       2020-08-20 12:56:24 +08:00 via Android
    楼主第一个 nas,估计没定期监视硬盘 s.mart, 没定期 fsck,其实数据在之前可能已经出错了,只是没发现
    Osk
        22
    Osk  
       2020-08-20 12:57:10 +08:00 via Android
    c.h.k.d.s.k 为啥会触发关键词????
    CismonX
        23
    CismonX  
       2020-08-20 12:57:30 +08:00 via iPhone
    你说的这些珍贵资料,我都是走蓝光冷备然后压箱底的。毕竟这辈子可能都不会再打开看一次,但如果真的想看却丢失了就很难受
    mosfet
        24
    mosfet  
       2020-08-20 13:07:59 +08:00
    重要的再冷备份一份吧
    或者同步网盘上去
    terrancesiu
        25
    terrancesiu  
       2020-08-20 13:12:51 +08:00
    我自己创造的数据,如文档、图片、视频等我基本都直接上传到 Google One,目前 200G 够用,但是每年我会下载回本地 2 次归档。而归档盘我使用了希捷的叠瓦盘,一共 2 块,每次归档完成后就放硬盘箱里保存。目前我在考虑做第三份副本。不是我自己的数据,我基本放 gsuite 了,gsuite 来源是各种 edu 嫖来的,翻车机率高,但是我基本在 n 个 gsuite 之间做同步,每天都做。所有的操作只使用了 rclone 。目前暂时未出现问题。工作用内容目前还是 Dropbox 免费的 20g,足够用了。
    Tyuans
        26
    Tyuans  
       2020-08-20 13:26:23 +08:00
    你再查查,会发现群晖的 raid 也不安全,尤其是 TB 级数太高,恢复起来会很麻烦,甚至很多都无法恢复。

    最好的方法还是多地方备份,分开存储,我的群晖里都是 basic,没有 raid 。照片视频重要性最高的,多地方手动备份,自动备份,都用上。收藏电影游戏那些,不行就刻盘,但是刻完盘后会发现其实很多自己都不会再看再用第二次,跟照片那些一起备份起来也都是浪费空间。
    whatv3
        27
    whatv3  
       2020-08-20 13:37:29 +08:00
    我的做法是 NAS + 云盘 ...
    qiaobeier
        28
    qiaobeier  
       2020-08-20 13:39:07 +08:00
    我也碰到过一次 NAS 硬盘突然损坏的事故。
    幸好项目代码等等有各种 git 服务器,照片及重要数据有本机(各种 PC,MAC,Phone )+云,最后就是损失了电影音乐及各种设备的定期备份,所以算是没损失。

    但还是有一点后怕。 现在买了银河企业硬盘,不知道是不是好一点。
    crazycarry
        29
    crazycarry  
       2020-08-20 13:40:20 +08:00
    多年的种子没有了吧
    henyi2211
        30
    henyi2211  
       2020-08-20 13:43:02 +08:00
    没用 raid, 我上了 unraid 系统, 挺顺心的
    winterx
        31
    winterx  
       2020-08-20 13:45:51 +08:00
    个人观点:
    不嫌占用地方,光驱绝对是最好的存储介质。
    有钱买磁带机,没钱买移动硬盘。

    准备入手几个移动硬盘做冷备份,只在备份时通电。
    hotsun168
        32
    hotsun168  
    OP
       2020-08-20 13:48:13 +08:00
    @wenwen226400 官方客服回复,群晖硬件损坏,同型号的机器把硬盘按原位插回去直接可用。
    @Tyuans 等第二块 14T 到了,我考虑要不要改成 RAID1 。冷备也在考虑,集中花钱比较压力大,下个月吧。
    hotsun168
        33
    hotsun168  
    OP
       2020-08-20 13:54:28 +08:00
    @Osk 可能是早就出错了,确实长时间插着没有管过。
    @CismonX 我是个怀旧的人,说不定会时常拿出来看看。只不过现在没机会了。
    @qiaobeier 企业级开销目前还无法承受,毕竟家庭小孩无时无刻不需要用钱,先考虑冷备吧。
    @crazycarry 种子真的无所谓,认真找还是能找到的。
    @henyi2211 看了一下,确实是个好系统,有空研究一下。感谢分享。
    @winterx 准备上蓝光做冷备了。
    techotaku2233
        34
    techotaku2233  
       2020-08-20 14:00:04 +08:00
    @hotsun168 我觉得 RAID1 不理想,首先并不是有那么多重要的数据都需要备份,RAID1 严重浪费空间。其次 RAID1 无法解决极端情况的数据丢失,如遭贼,火灾,等等天灾人货。还是需要一份异地备份,网盘也好,蓝光冷备也好。
    Tyuans
        35
    Tyuans  
       2020-08-20 14:05:51 +08:00
    @hotsun168 #32 我群晖里占地大的是下载的电影,个人资料少,每次用 hyperbackup 运行之后再考出来都行。我建议是把数据分等级备份,会轻松。
    superszy
        36
    superszy  
       2020-08-20 14:11:01 +08:00
    虽然都说 raid5 不安全,但是我在 4T 红盘 x 4 组成的 raid5 中,坏了一块硬盘后,还是保住了所有数据(没敢重建 raid,而是直接备份出来的)。
    sarices
        37
    sarices  
       2020-08-20 14:24:55 +08:00
    多重备份才是王道,重要数据我都一份 nas,一份网盘,一份冷备份
    otakustay
        38
    otakustay  
       2020-08-20 14:36:28 +08:00
    我 RAID 的 NAS,一块硬盘坏了换新的,RAID 重建的时候第二块当场坏掉数据丢了
    后来想了想也对,同一时间买的同品牌型号硬盘,同样的写入量,寿命本来就差不多,要死一起死,RAID 个毛线
    zjsxwc
        39
    zjsxwc  
       2020-08-20 14:38:15 +08:00 via Android
    @otakustay 所以买不同品牌的 raid 硬盘?
    matolv
        40
    matolv  
       2020-08-20 14:39:03 +08:00
    要安全就前后端,软硬件都做到位。
    硬件自己买,i3 9100/r3 3100+16G ecc 内存+可以 headless 主板。
    操作系统用 debian/centos 。
    文件系统用 zfs raid10 或 3 盘 raid50 的方案。
    维护一月一次的 scrub,200 小时一次 smart 短测,5000 小时一次 smart 长测。
    重要数据半年一次增量备份,你基本就万无一失了
    zjsxwc
        41
    zjsxwc  
       2020-08-20 14:40:07 +08:00 via Android
    @zjsxwc 或者同品牌不同批次的硬盘,比如一块淘宝一块京东
    icyalala
        42
    icyalala  
       2020-08-20 14:44:14 +08:00
    我最早的硬盘放地上硬盘盒被别人踢到废了。
    有次搬家二十几块硬盘放盒子里被搬家的摔地上了。
    买过一次渣渣 orico 硬盘盒
    到现在为止加起来损失了十几块硬盘了。。

    我的结论是一定要保证硬盘的物理安全、NAS 或硬盘座的可靠性。
    不要上 raid,没必要并且恢复数据很恶心和看运气。
    多备份才是正道。
    calpes
        43
    calpes  
       2020-08-20 15:03:19 +08:00
    每次看到这种丢数据的,我都想非常认真地问一句,到底是什么数据有这么重要啊?
    chevalier
        44
    chevalier  
       2020-08-20 15:08:13 +08:00
    重要资料,关键是要多重备份,比如 nas 存一份,移动硬盘再存一份冷数据,台式机里再存一份

    单一设备,神马 SHR 、RAID 都不好使,一次电涌 /病毒攻击灰飞烟灭
    testver
        45
    testver  
       2020-08-20 15:20:10 +08:00
    pc 一份数据,群晖 1018plus 一份,群晖 216play 一份。

    数据无价。
    caicaiwoshishui
        46
    caicaiwoshishui  
       2020-08-20 15:21:12 +08:00
    6T 的数据不一定全部都是重要的数据吧,我的也是 win7 nas,分文件夹吧
    1. 重要的文件,加密网盘备份,台式机备份
    2.非重要的文件,使用各种网盘全量备份

    win nas 主要的好处是可以装各种软件。
    nullboy
        47
    nullboy  
       2020-08-20 15:21:53 +08:00
    我是搞不懂难道硬盘直通不香么
    ----------------------------------------------------------------
    因计划把 6T 和 14T 硬盘都放入群晖,但硬盘插入群晖会被格式化
    ackfin01
        48
    ackfin01  
       2020-08-20 15:26:33 +08:00
    我现在是一个笔记本部署 nas,再加一块硬盘自动增量备份,另外一台电脑手工全量备份。。。
    IllBeBack
        49
    IllBeBack  
       2020-08-20 15:29:40 +08:00
    一定要有离线备份,不然被勒索软件锁定,也很麻烦。
    wenwen226400
        50
    wenwen226400  
       2020-08-20 15:33:35 +08:00
    @hotsun168 假如你买了个 4 盘位以上的高端产品,在保质期里坏掉了,要维修很久,你是再买一个,还是等维修呢? gamers nexus 这个 youtuber 的群晖挂了后 出了个视频的,就说的这个问题
    shuianfendi6
        51
    shuianfendi6  
       2020-08-20 15:35:13 +08:00
    恢复数据花了 2000 块后直接两块 8t raid1 了,加上笔记本上的两备份,应该能满足一定需求了
    msg7086
        52
    msg7086  
       2020-08-20 15:35:57 +08:00 via Android
    @Osk 你仔细看看,里面是不是有两个敏感字母……
    luzhh
        53
    luzhh  
       2020-08-20 15:36:14 +08:00
    我是两块使用时间差了几千小时的两个 4t 做了 raid1,存重要东西,然后有个 8t 的盘定时增量备份 4t 里面的数据,后面准备搞个云存储,目前还没想好用哪家,冷备的也在考虑中。
    每周也有 smart 完整测试。
    systemcall
        54
    systemcall  
       2020-08-20 15:37:07 +08:00 via Android
    真正重要的数据用蓝光光盘备份,每年检查一下,一定要有冗余。这个 rar 可以做,而且还可以生成刚刚好刻盘的分卷
    硬盘旧了确实会出错,不信的话先把文件算一遍 sha256,过几年比对一下,十有八九会有些文件变了。NTFS 的日志之类的功能救不了这种错误,raid 重建的时候可能会因为这种错误重建失败。重要数据最好加上光盘和网盘备份,光盘请用蓝光光盘,网盘请加密,记得加冗余。国内的网盘也不是什么很可靠的东西,有时候一样会坏文件
    systemcall
        55
    systemcall  
       2020-08-20 15:39:21 +08:00 via Android
    重要数据不要放在一种介质上,千万不要考虑闪存。最好还是硬盘+蓝光光盘。选择蓝光光盘,是因为原理不一样,比以前的 DVD 刻录盘之类的寿命长很多,后者还不见得有闪存可靠
    闪存丢文件见多了,完全靠不住
    jzphx
        56
    jzphx  
       2020-08-20 15:55:36 +08:00
    常在河边走哪有不湿鞋,建议 raid5 也不要考虑,重要数据做 raid1 + 移动硬盘冷备份
    Bear13023
        57
    Bear13023  
       2020-08-20 16:13:44 +08:00
    真的不要去考虑 什么 raid5 或者那些个高级磁盘格式,这些东西的接入和恢复真的非常的复杂和难操作。

    还是 unraid 里面丢一个校验盘,定期帮你校验一下。我前两个月刚挂了一块 2TB,还好直接插上新的硬盘他就自己网新硬盘上恢复了。感觉特别好。
    Ansen
        58
    Ansen  
       2020-08-20 16:14:02 +08:00
    其实这时候 国内的各大云就有用了,把文件加密后,传到这些云上面去,虽然取回比较麻烦,数据总还在
    missqso
        59
    missqso  
       2020-08-20 16:19:42 +08:00
    @love 大哥有牌子推荐没
    Terry05
        60
    Terry05  
       2020-08-20 16:22:51 +08:00
    真正重要的数据,不可再生的数据,什么技术都不靠谱,一定要定期多点冗余备份
    supereater
        61
    supereater  
       2020-08-20 16:35:10 +08:00
    我是双 nas 异地定时同步备份,隔一段时间有空了就冷备份一次,同时 nas 实时进行百度网盘(貌似有数量限制,此处求高手解答)和谷歌云同步。我觉得除了 raid 没做,其他已经做到足够了。raid0 我觉得作用不大,个人用户场景下,硬件故障直接两盘报废的情况好像还挺容易发生的。
    supereater
        62
    supereater  
       2020-08-20 16:36:37 +08:00
    上面写错了,raid1
    Visitor233
        63
    Visitor233  
       2020-08-20 16:43:46 +08:00
    光驱笔记本万岁,除了内存小了,完美保存各种小文件,还不怕摔坏、进水、占地方
    winglight2016
        64
    winglight2016  
       2020-08-20 16:44:55 +08:00
    lz 最主要的数据是视频照片之类吧?我是把所有这种文件都同步到 google drive,反正压缩版是不限容量的。

    其他重要文件占不了多少空间,一块移动硬盘就能备份了。
    giesler
        65
    giesler  
       2020-08-20 16:48:14 +08:00
    我的群晖是 4 盘位,做了两个单独的 raid1 分区,只要其中一个盘出问题,马上该分区的双盘都不要了,买市面上能买得起的品质最好的 nas 盘。两个分区 一个分区存放最重要的工作和生活资料,另一个分区放当年积累的视频或其他临时数据。nas 盘,除了备份外,偶尔读取使用,不做任何其他用途,此外还有十几个各类单独硬盘,接在路由器上使用 或 临时下载使用。我家保存的数据从上世纪末到现在有二十年了,从未丢失过。 依我看,楼主自己吸取的教训并不是你舍不舍得投钱,而是对数据的重视程度,以及保存数据的思路,我看你自己维护的过程,缺少整体思路,缺少对意外情况的预案,总感觉还是不够完善。
    qwepoidjdj
        66
    qwepoidjdj  
       2020-08-20 16:50:49 +08:00
    作为 200T 用户说说心得吧
    10T X 20 5 个主机每个带 4 个盘
    没有 raid 成本过高了 直接 basic 裸跑 2 年了还没出问题
    几个关键点
    1 盘要好 我这些都是 wb 的 mybook 或者 element 都是氮气盘质量刚刚的
    2 电源要好 用电环境要稳定 断电是丢失数据的最大因素之一 一定要避免
    3 系统里少装乱七八糟的东西 只装必要的软件就行了
    4 同盘避免并发操作 大数据又删又写真的容易卡主 卡主就感觉很危险
    5 当盘的使用时间过长后 可以考虑数据迁移 /封存 完毕后就下线放到保存盒里封印
    6 重点数据多份保存 一般重点数据其实不会很多 很难超过 1T 直接 3 份定时冷备就好 我个人的冷备数据也就 60G 左右 图片视频多

    不知道 5 年后这些盘还能不能撑住 :D
    wanguorui123
        67
    wanguorui123  
       2020-08-20 16:53:42 +08:00
    1 、硬盘长时间运行后莫名其妙的会出现数据丢失问题,由于一般的 NAS 没有自动巡检功能,很难发现存储单元级别的错误,当硬盘损坏时这些细小的错误都会被暴露出来
    2 、NAS 接入网络存在被黑掉的风险
    3 、鸡蛋不能放到一个篮子里,重要数据冷备份是很有必要的
    4 、专业的数据容灾都是:1+2+3
    zvl0reqglvd
        68
    zvl0reqglvd  
       2020-08-20 16:56:31 +08:00
    买个磁带机,录成磁带,效果很好的。
    hotsun168
        69
    hotsun168  
    OP
       2020-08-20 16:58:38 +08:00
    @Tyuans 电影等可以随时下载的东西我倒是不往 NAS 里放。都是直接在线看了。
    @superszy 所以和自己期望值不太一样的事情容易记得清楚。
    @otakustay RAID6 或 SHR2 呢加非同批次硬盘呢。
    @matolv 群晖也有 S.M.A.R.T 定时任务,一个月短测,半年长测。我买群晖主要是觉得省心。
    @icyalala 我也怕家里小孩直接把群晖砸地上,所以考虑上蓝光冷备。
    @calpes 主贴已经写了,包括结婚视频、小孩满月照,已经足够珍贵了。脑子被驴踢了没有把这两个东西做备份。
    @chevalier @testver 先 RAID1,有钱了再弄第二台设备。目前也只能在数据保全与财政负担做平衡。
    @wenwen226400 所以您认为只有单盘无 RAID 加各种同步冷备才是最优方案?
    @luzhh 看来群晖默认的 S.M.A.R.T 频率太低,我给他改小了。每月长测,每周短测。
    @Bear13023 Unraid 前面有人推荐。我了解一下。感谢分享。
    sonxzjw
        70
    sonxzjw  
       2020-08-20 17:00:53 +08:00   ❤️ 1
    @nullboy 群晖就这德行,要加密你的硬盘所以都会按它要求重新格式化。你以后要取数据也必须通过群晖。

    所以我下一个是打算威联通了,直通。拔出来后就是随便用。
    hotsun168
        71
    hotsun168  
    OP
       2020-08-20 17:09:58 +08:00
    @giesler 从未拥有过 14T 这么大的空间,之前 6T 的空间已经抠抠搜搜用了 5 年,所以不免有些激动,现在回想起来后悔至极。
    @qwepoidjdj 数据丢了之后我就在搜各种可能导致 NAS 出问题的原因。上 UPS 就是为了防止突然断电,测试过效果还不错。
    wenwen226400
        72
    wenwen226400  
       2020-08-20 17:13:53 +08:00
    @hotsun168 如果非要用 raid,就用 zfs 的,不过看你连硬盘都舍不得买,我推荐你用 snapraid,介绍自己搜,这个方案也有缺点,比如硬盘挂了,要修复好之后才能用,不能用于生产,但家用比别的方案都好,还是最便宜的,冷备不需要的
    NetCobra
        73
    NetCobra  
       2020-08-20 17:15:32 +08:00
    “用外接硬盘座接入 14T 硬盘”,这个可能是个问题。
    记忆里见过不少外界硬盘底座导致硬盘出问题得帖子了。

    我的 NAS 是一台 HP MicroServer Gen8,宿主机是 Win Server 2019 + Hyper-V,里面跑 Debian Linux 运行下载、Samba 、Git 、nginx 等等服务,重要数据在 Win 宿主机和 Linux 之间用 Syncthing 同步。

    当然了,物理上这两个系统还是在同一台电脑上的,所以隔段时间自己手工做冷备。
    ladypxy
        74
    ladypxy  
       2020-08-20 17:15:42 +08:00 via iPhone
    家庭使用没必要 R1,使用 SHR 即可,这玩意就是 linux 的 LVM 。好处是硬盘容量不需要一致,适合家庭用户这种不定期加一块盘或者换一块盘的情况
    JasperYanky
        75
    JasperYanky  
       2020-08-20 17:18:34 +08:00
    iCloud 2T 可以保平安么
    Archeb
        76
    Archeb  
       2020-08-20 17:18:47 +08:00
    我是 NAS 数据全量同步两个云盘,本地单盘(因为没有钱 _(:з)∠)_
    tankren
        77
    tankren  
       2020-08-20 17:18:59 +08:00 via Android
    所以什么 raid 什么 shr 都不如 UPS 加多盘多点备份
    我的照片都是多盘备份加网盘
    系统是 omv 文件系统 ext4 不要太稳啊 兼容性还高
    ryd994
        78
    ryd994  
       2020-08-20 17:28:59 +08:00 via Android   ❤️ 3
    你不应该买 14T 的盘
    单盘容量大对数据安全性是负面的

    同等总可用容量,单盘大就意味着你的故障范围更大了,或者想要保证相同冗余度的前提下需要更高的成本
    单盘*(数据盘数量+冗余盘数量)
    2*(6+2) vs 4*(3+2) vs 4*(3+1)

    而且无论单盘多大,现代的硬盘单盘传输速率都是差不多的,至少不成比例。
    以上面的例子:如果挂了一块盘,恢复 4t 单盘的时间几乎是 2t 单盘的两倍
    重建时间长,就意味着你有更长的时间处于冗余度降级的危险状态下。反过来说你就需要预备更多的冗余度以应对连续故障。

    当然,太多盘也不好,这会使今后的升级成本很高。管理起来也复杂。同时 raid 计算会需要很多资源。随机写入会更差。


    楼上说 raid1 的,恐怕是没有真的计算过损坏几率。没人真的组 4 盘 raid1 吧?说的恐怕是 raid10 。
    4 盘 raid10,按照墨菲定律,最坏的情况下你可以坏几块而不损失数据?你只能坏一块。因为这时它的镜像就是单点。而 raid6 呢?任意两块。所以从安全性来说,raid6 是必定超过 raid10 的。
    如果考虑 6 盘,结论还是不变,因为那个单点永远在哪里。更多的冗余盘并不一定能提供更好的冗余度。只要你还是两两组 raid1,你就永远只有 1 度冗余。而 raid6 有 2 度。
    而且 raid6 这时还提供了更多的可用空间。

    为什么生产环境中还是经常用 raid10 ?因为 raid10 的性能,特别是随机写性能显著高于 raid6 。如果写 1 字节,raid10 只需要在两个盘上各写一字节就够了。raid6 需要在六个盘上读一整块,通常是数 MB,重新计算校验,再写回。连续写的话 raid6 不吃亏,因为可以整块在内存里计算好再连续写入。

    生产数据肯定还有更多备份。真挂了就再恢复就可以了。三盘组 raid1 也行,反正不差这点成本。超过这个级别的 sla,那就不是靠加 raid 能解决的。还不如上分布式文件系统,或者异地冗余,毕竟除了硬盘你还要考虑其他部件故障的几率。还有区域性故障的几率。

    一般认为,超过单盘 2T 就不可以再用 raid5 了,因为重建时间太长。不能用 raid5 就意味着也不能用 raid1,因为他们的冗余度是一样的。
    nbweb
        79
    nbweb  
       2020-08-20 17:44:27 +08:00
    最近 diy 了一台 nas,也在做环境搭建和数据迁移的工作。

    新 nas 放了两个 14T 做 raid 1,把家里两个 4T 的分开存的,全部了迁移到 14T 上面来。

    装的 esxi,虚拟了 debian 和黑群。
    hanqi7012
        80
    hanqi7012  
       2020-08-20 18:00:26 +08:00 via iPhone   ❤️ 1
    其实一开始卡死的时候硬盘就有问题了

    这个时候就该换了

    群辉等 nas 系统有一个好就是 s.m.a.r.t 的监控和报警

    定时重启有可能加速了死亡

    另外复制不行 ghost 也弄不出来啊想啥呢
    limbo0
        81
    limbo0  
       2020-08-20 19:01:35 +08:00
    云端存一分
    suley
        82
    suley  
       2020-08-20 19:08:15 +08:00
    @ryd994 我看了下网上有个人测试 ZFS,RAIDZ1 综合的读写性能是最好的。而且也能有一块盘的冗余量。
    cwbsw
        83
    cwbsw  
       2020-08-20 19:33:19 +08:00
    这是硬盘转接盒的锅吧。
    Greatshu
        84
    Greatshu  
       2020-08-20 20:08:46 +08:00
    不想被勒索软件毁掉数据,就按照「 3-2-1 原则」来备份文件: https://sspai.com/post/39591

    我是 NAS 一份,离线的硬盘一份,两个稳定的网盘各一份。
    77alex
        85
    77alex  
       2020-08-20 20:22:28 +08:00
    raid5 在坏一块盘的情况下,重建数据会接连 引发后续其他 硬盘的损坏....
    所以当时考虑再三,还是用了 raid1..毕竟数据无价
    ArJun
        86
    ArJun  
       2020-08-20 20:45:18 +08:00
    你们都存了什么宝藏,看好多都是几十 T 的存储,个人有这么多的数据量嘛··,就算放岛国片也不至于这么多吧··
    tfykimi
        87
    tfykimi  
       2020-08-20 21:07:11 +08:00
    @ArJun 估计蓝光影片比较多,这玩意是真的超级占用空间。
    fffang
        88
    fffang  
       2020-08-20 21:22:44 +08:00
    hhhhhh 所以我选择百度网盘
    lixon166
        89
    lixon166  
       2020-08-20 21:28:42 +08:00
    所以至少要买 3 个 NAS 分布式备份才安全
    ipixeloldc
        90
    ipixeloldc  
       2020-08-20 21:35:41 +08:00 via iPhone
    重建分区表我一般是 DG,恢复数据我一直是 R-Studio,都在 PE 下操作,救了我的数据无数次了。虽然有一次翻车了……我没在 PE 下操作,因为手贱直接彻底删除,又用了段时间硬盘跑其他东西,然后突然又想找回....结果 R-Studio 没完全修复那个压缩包,然后就没然后了,也懒得重找了,反正 BD 版早有了,只是怀恋那个未知字幕组的字幕而已……哎
    henryshen233
        91
    henryshen233  
       2020-08-20 21:36:07 +08:00
    你最重要的数据居然只存一份,这是最关键的问题
    wowodavid
        92
    wowodavid  
       2020-08-20 21:40:35 +08:00
    群晖 raid 还不如不 raid,安全性更差,拔了都读不出。
    我现在的办法,底层用 esxi,直通硬盘给一个手熟好打理的系统,比如 debian 、centos,然后 raid1,然后 iscsi ; esxi 再搭一个群晖,iscsi 映射上面那个硬盘做存储。这样操作,只要即使出事了,硬盘插到其他的 debian 也能读取恢复。
    群晖搭软 raid,一出事其他电脑都读不出来,更麻烦。
    Junn
        93
    Junn  
       2020-08-20 22:06:53 +08:00
    NAS+云盘+少折腾。
    重要数据多处备份(一般没多少)
    任何一处备份都不能百分百信任会一直完好!!! raid 没啥用。
    volvo007
        94
    volvo007  
       2020-08-20 22:09:50 +08:00
    群晖 raid 真的又慢又折腾……
    整个小机器(比如 A300 )挂个 linux 跑会不会稳一点

    个人感觉,民用级别的稳定性很难和企业级匹敌,所以不如减少中间的环节,管理越简单越直接越好
    xi_lin
        95
    xi_lin  
       2020-08-20 22:33:05 +08:00
    现在全盘互倒还用 ghost 吗? dd 能用么。。
    laminux29
        96
    laminux29  
       2020-08-20 22:45:40 +08:00
    理论上来说,数据存储,要做完美,需要处理很多问题。比如备份,冗余,整个存取环节的每一个操作的数据正确性、存取性能等问题,越要处理地好,成本越高。

    数据存储产品,从家用的几百块,到工业级的十万百万千万,都有对应的解决方案。

    价格差这么大,解决方案的区别在哪?区别在于对于上述问题的解决程度。

    我觉得,对于经济水平一般的人来说,以下两种方案,虽然仍然有风险,但是比较实际,可操作性较高:

    1.自己电脑上保存一份,然后用 rar 打包、切片、压缩、加密、加入恢复记录后,在百度网盘上再存一份。每年只要花几百元的成本。

    2.在移动硬盘 或 外接 USB 机械硬盘 或 大容量 U 盘 或 自己的 nas 上存一份,电脑上存一份。每月对数据进行一次增量的校验,每半年对所有数据进行一次全量检查。

    这两种方案对于大部分人来说,都差不多了。再深入下去,就开始走入企业级存储的范畴,成本就急剧上升。不做这一行,没必要花这个钱。
    laminux29
        97
    laminux29  
       2020-08-20 22:46:53 +08:00
    另外题主遇到的问题,我很多年前遇到过一次。

    那时,内存条已经有坏块,然后我又对大量数据做 c.h.k.d.s.k,结果一整个磁盘的珍贵数据全没了。
    Tink
        98
    Tink  
       2020-08-20 22:58:39 +08:00 via Android
    你用 win7 复制这么多数据本身就是灾难
    geniussoft
        99
    geniussoft  
       2020-08-20 23:02:49 +08:00
    尽量使用 raid6,定期做数据清理,会校验所有盘的数据,并发现坏块。

    重要的数据要多重备份。

    群晖使用的是很标准的软 raid,电脑当然也能读得出来(而且,实在不行也完全可以在虚拟机里跑黑裙读)。
    群晖的 raid 性能不差,差的是一些人的机器配置而已。
    ftu
        100
    ftu  
       2020-08-20 23:21:46 +08:00 via iPhone
    心疼楼主
    1  2  
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1420 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 17:22 · PVG 01:22 · LAX 10:22 · JFK 13:22
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.