V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
lslvxy
V2EX  ›  程序员

求大佬帮我安排一下 gen10 plus

  •  
  •   lslvxy · 2022-01-18 00:27:56 +08:00 · 7513 次点击
    这是一个创建于 1039 天前的主题,其中的信息可能已经有所发展或是发生改变。

    gen10 plus 已经到手了,目前的配置已经有 2 块 2T 的 ssd ,一块 512G 的 ssd ,一块 8T 机械硬盘 pice 口接了个 512 的 M2 盘 ** 主要需求就是备份照片和资料,然后就是需要支持开发工作和 Docker

    大佬们帮我看下我的部署方案行不行 方案一

    1. M2 安装 PVE
    2. PVE 安装 openwrt 作为软路由
    3. PVE 安装 Ubuntu 日常玩和测试
    4. PVE 安装 DSM 存储照片,两块 2T 直通组 raid1 ,备份我的白裙 DSM7 (后续考虑卖掉)

    方案二 类似方案一,把 DSM 替换为 trueNAS 作为存储

    方案三

    1. 再买个 U 盘安装 unraid
    2. 后续怎么搞还没有规划好

    疑问点

    1. PVE 对比 unraid ,哪个对虚拟化以及直通硬件和 Docker 支持好一点
    2. trueNAS 如何支持媒体和照片备份
    3. 有朋友强烈案例 unraid ,有什么比较好的方案
    59 条回复    2022-03-30 15:11:17 +08:00
    iMercer
        1
    iMercer  
       2022-01-18 01:20:42 +08:00
    建议 truenas 方案, 复杂度比较低, 或者直接在 ubuntu 上部署 zfs. unraid 就有个校验盘的功能, 感觉和 raid5 区别不大
    ZRS
        2
    ZRS  
       2022-01-18 01:24:43 +08:00 via iPhone
    TrueNAS
    pxiphx891
        3
    pxiphx891  
       2022-01-18 08:12:07 +08:00   ❤️ 1
    软路由用独立硬件设备;系统只装一个 ubuntu server
    Pogbag
        4
    Pogbag  
       2022-01-18 08:44:26 +08:00
    推荐方案一
    czhu
        5
    czhu  
       2022-01-18 08:51:56 +08:00
    truenas
    媒体和照片备份要看具体需求
    一般 rsync 就行
    nbweb
        6
    nbweb  
       2022-01-18 08:59:32 +08:00
    方案一是最多人的选择,我就是。
    Y29tL2gwd2Fy
        7
    Y29tL2gwd2Fy  
       2022-01-18 09:03:22 +08:00 via Android
    esxi
    nbweb
        8
    nbweb  
       2022-01-18 09:13:10 +08:00
    @Y29tL2gwd2Fy esxi 坑比较多,各种硬件不兼容,没有驱动,唉。。。。
    lslvxy
        9
    lslvxy  
    OP
       2022-01-18 09:15:36 +08:00
    @nbweb 你装的 DSM6 还是 7 ,我这边 6 能运行,7 装好了 assistant 一直搜索不到
    ohmyself
        10
    ohmyself  
       2022-01-18 09:17:24 +08:00 via iPhone
    用了三四年的 all in one 了,现在准备把 NAS 独立出来用 truenas 。之前是 dq77kb 主板装 ESXi ,下面装了 ikuai ,Ubuntu ,DSM 。系统一直很稳的,就是挂了三块硬盘了,后面我复盘感觉最有可能的事因为几次断电造成的。所以也不是因为坏硬盘换方案,就是想折腾了。其他都无所谓就是感觉数据没必要折腾。
    nbweb
        11
    nbweb  
       2022-01-18 09:18:27 +08:00
    @lslvxy 6 和 7 都有装,都没有问题,搜不到 ip ,建议先改下 img 里面的 mac 地址和 sn 号。

    参考一下我之前录的视频,下载视频里提供的 img ,我已改好 mac 地址和 sn 号了。
    fanguangwei
        12
    fanguangwei  
       2022-01-18 09:23:46 +08:00
    unraid 适合折腾,图形化安装 docker 应用相对比较容易上手,稳定性不好说,我垃圾工控主板跑了 1 年了,没出过大问题
    Wpaengd
        13
    Wpaengd  
       2022-01-18 09:24:52 +08:00
    pcie 上了 M2 ,就没啥驱动的问题了
    官方也推荐而且
    那我也推荐 esxi ,在主板上的 usb2.0 装个 U 盘装 ESXI

    另外,iLo5 不来一个完全形态吗
    lslvxy
        14
    lslvxy  
    OP
       2022-01-18 09:29:06 +08:00
    @nbweb 我试下能不能装上 DSM7 ,不行我就换 trueNAS 了
    lslvxy
        15
    lslvxy  
    OP
       2022-01-18 09:30:11 +08:00
    @Wpaengd iLo5 感觉用不上啊
    Wpaengd
        16
    Wpaengd  
       2022-01-18 09:37:20 +08:00
    我跟方案一类似
    esxi 主板 usb 上,pcie 装 m2
    存储我选的是 OMV ,直接把 SATA 控制器给直通了,然后再配置 iSCSI 给需要大盘的虚拟机,选择 OMV 主要有个 SnapRAID 挺适合我目前使用习惯
    几个虚拟机系统选 VMware Photon OS 跑 Docker 、PLEX 和 AdGuard
    还有个 3.1WTG 盘,用的时候插上就好了
    软路由因为有淘汰的 Mac mini+Surge ,就没再 Gen10 Plus 上装了
    FanError
        17
    FanError  
       2022-01-18 09:37:42 +08:00
    @Y29tL2gwd2Fy gen10plus 装了 esxi ,普通机械硬盘磁盘性能差的一 P
    Wpaengd
        18
    Wpaengd  
       2022-01-18 09:39:38 +08:00
    @lslvxy 我没接显示器,iLo5 很好用
    lslvxy
        19
    lslvxy  
    OP
       2022-01-18 09:46:33 +08:00
    @nbweb 我用了你这里下的引导文件还是一样搜不到
    lslvxy
        20
    lslvxy  
    OP
       2022-01-18 09:47:08 +08:00
    @Wpaengd 我的显示器接了两根线可以无缝切换
    nbweb
        21
    nbweb  
       2022-01-18 09:47:42 +08:00
    @lslvxy 脸黑了?引导设置都对吗?我的 esxi 和 pve 引导都没有问题,注意一下,引导要用 sata
    sairoa
        22
    sairoa  
       2022-01-18 09:50:19 +08:00
    iLo5 接个诱骗卡就行,然后买个高级授权很便宜,加起来不到五十块钱。
    我的话是直接装的 Windows Server ,一块 sata 的 ssd ,三块 hdd ,虚拟化用 hyper-v ,感觉很稳,就是不太极客。
    原来服务器上还有邮件服务器 VPN 之类的,现在就只剩 BT 、Ubnt 的 AC 、存储,其他业务都在白裙上。
    磁盘全部裸盘, 对于磁盘阵列真是不放心,工作中磁盘阵列 5 重建导致数据丢失是不知道碰到多少次了,1 的话不如定时备份。
    现在手里没闲钱,等有钱了搞块大硬盘,搞个 iscsi 。
    lslvxy
        23
    lslvxy  
    OP
       2022-01-18 09:55:10 +08:00
    nbweb
        24
    nbweb  
       2022-01-18 10:06:33 +08:00
    @lslvxy 网络设置不要用 e1000 ,用半虚拟化,这个很重要。另外,先用一个网卡,如果装上了,把另外一个网卡再加上去。

    选项,引导顺序,这里把 sata 拉到第一位。
    czwen1993
        25
    czwen1993  
       2022-01-18 10:13:17 +08:00
    TrueNAS 不知为何,总是装不上插件。
    最近折腾 esxi ,个人觉得挺香的。
    czwen1993
        26
    czwen1993  
       2022-01-18 10:14:52 +08:00
    @FanError 我用 m2 ssd ,损失了三分一,机械硬盘不敢想象
    lslvxy
        27
    lslvxy  
    OP
       2022-01-18 10:14:53 +08:00
    @nbweb 我看其他的教程都是 E1000 ,我还过来了还是搜不到,引导只选了一个 sata0
    defunct9
        28
    defunct9  
       2022-01-18 10:25:45 +08:00
    换我就是直接 kvm
    nbweb
        29
    nbweb  
       2022-01-18 10:27:55 +08:00
    @lslvxy 如果局域网内有其它的群晖,先关掉,只开这一个,看能不能搜到。参考一下我的。

    ![1.png]( https://s2.loli.net/2022/01/18/8WasMv3rqXoihBm.png)

    ![2.png]( https://s2.loli.net/2022/01/18/HulF4Gnrf2ReNYs.png)
    urzz
        30
    urzz  
       2022-01-18 10:27:57 +08:00
    @lslvxy #27 建议检查下 cpu 配置,之前试过,改了 cpu 为 host 之后就搜不到了
    lslvxy
        31
    lslvxy  
    OP
       2022-01-18 10:36:06 +08:00
    @urzz
    @nbweb
    能搜到了,cpu 改为默认了,网卡也改成默认了,其它的群晖都关掉了
    正在安装
    lslvxy
        32
    lslvxy  
    OP
       2022-01-18 10:39:49 +08:00
    urzz
        33
    urzz  
       2022-01-18 10:40:48 +08:00
    @lslvxy #31 可以,挺折腾的,我之前试过,cpu 必须是默认的 kvm64 ,否则 dhcp 压根不会生效,ip 根本拿不到,所以 find 那个服务压根搜不到。。
    lslvxy
        34
    lslvxy  
    OP
       2022-01-18 10:44:45 +08:00
    @urzz
    @nbweb
    后面我准备把我的白裙数据同步过来,然后白裙就可以卖了,回点血
    nbweb
        35
    nbweb  
       2022-01-18 10:47:51 +08:00
    @lslvxy 哈哈哈。。。跟我一样,就是个折腾。
    https://kzpu.com/archives/4824.html
    lslvxy
        36
    lslvxy  
    OP
       2022-01-18 10:51:28 +08:00
    @urzz
    @nbweb
    群辉硬盘显示 QEMU HARDDISK(SDD) 算是直通成功了么
    czhu
        37
    czhu  
       2022-01-18 11:03:27 +08:00
    @FanError 是呀 为什么会这样?
    urzz
        38
    urzz  
       2022-01-18 12:14:33 +08:00
    @lslvxy #36 是否直通成功,看有没有 smart 信息吧。。我已经黑转白了。。
    lslvxy
        39
    lslvxy  
    OP
       2022-01-18 13:32:42 +08:00
    @urzz 可以看到 SMART 信息的
    Siefy1983
        40
    Siefy1983  
       2022-01-18 14:42:23 +08:00 via iPhone
    好贵的服务器
    pota
        41
    pota  
       2022-01-18 14:57:00 +08:00
    借楼问问 二手低配 gen 10 plus 现在大概能卖多少钱 装了 nas 放那发现没什么应用场景
    clf
        42
    clf  
       2022-01-18 15:19:55 +08:00
    方案一的话其实可以考虑一下 exsi ,印象里官方有 exsi 固件的,里面驱动什么的都打好了。

    ilo5 的话直接弄个导电的短接一下 PCIE 上的两个金手指就行。( CHH 有电路图)
    275761919
        43
    275761919  
       2022-01-18 15:50:39 +08:00
    @ohmyself 我的也是这块板子,挂了 3 年多,现在电源坏了。。。
    madao2015
        44
    madao2015  
       2022-01-18 16:50:38 +08:00
    我的就直接 win10 2019 ltsc + hyper-v 虚拟化,还是很稳
    lincolnhuang
        45
    lincolnhuang  
       2022-01-18 17:57:07 +08:00
    我的 Gen10 Plus 方案,供参考:PCI-E+M2 ,装 PVE ,PVE 虚 CentOS ,WinServer 和 DSM ,其中 DSM 直通 4 块机械盘做 Raid10 ,CentOS 和 WinServer 的数据盘使用 M2 的 SSD 。4 网口绑定 PVE 、CentOS 、WinServer 、DSM
    lincolnhuang
        46
    lincolnhuang  
       2022-01-18 18:00:21 +08:00
    @lincolnhuang #45 好处是,4 块机械盘可以拔走,放到同版本的 DSM ,在不同的硬件版本下,都不丢数据
    lslvxy
        47
    lslvxy  
    OP
       2022-01-18 18:01:30 +08:00
    @lincolnhuang 学习了 ,我目前跟你的很类似,PVE 虚 Ubuntu ,win10 ltsc 和 DSM ,DSM 直通 2 块 SSD 做 Raid1 的
    Ubuntu 直通了一块 ssd ,剩下一个机械盘留给 win 做资料备份, 没那么多网口就连了一跟到路由器上。
    Itoktsnhc
        48
    Itoktsnhc  
       2022-01-18 18:02:40 +08:00
    Hyper-V Server + 对应的 Admin center
    lincolnhuang
        49
    lincolnhuang  
       2022-01-18 18:04:29 +08:00
    @lslvxy #47 可以搞个水星 SG105M 5 口千兆交换机,1 跟接路由器,4 跟接服务器的 4 个网口,买个 DC 转 USB 的,让 Gen10+给交换机供电,这样 PVE 虚出来的虚机之间的交互可以打满千兆
    xinh
        50
    xinh  
       2022-01-18 22:50:03 +08:00 via iPhone
    我是一个 8 盘的万由机箱,没装扩展卡实际只接了主板 6 个 sata 硬盘,系统是 pve ,直接在 pve 下用 zfs ,3 个 12t 硬盘组 riadz ,两个闲置硬盘做单盘存储池下载用。
    pve 装了 openwrt 软路由和 win10 ,一个 lxc 容器装 docker ,就是家里使用的 jellyfin ,照片和下载等各种服务,专门装了一个 turnkey fileserver 用于提供局域网内共享服务,因为路由器广告过滤总出毛病又开了一个 lxc 去广告和做 nginx 反向代理。

    文件共享服务 turnkey fileserver 已经很好用,个人觉得唯一缺点是 zfs 没有 web ui 管理快照。
    manfred4527
        51
    manfred4527  
       2022-01-19 14:32:09 +08:00
    我 esxi all in one 已经跑了两年多了,这机器就是 pcie 插槽太少,而且不支持 sriov
    lslvxy
        52
    lslvxy  
    OP
       2022-01-19 15:05:47 +08:00
    @sairoa 这个卡哪里能买到,我也整一个
    jrbt123
        53
    jrbt123  
       2022-01-20 09:05:46 +08:00 via iPhone
    @lincolnhuang 哈哈,和我差不多,我是 pcie 装了个物理 Debian 做主力,u 盘搞了一个 pve 玩玩。我在 pve7 里物理直通 pcie sata ,也就是 4 块 hdd 同时直通了,我比较好奇能否直通一块给群晖,另外的给其他虚拟机,如果 4 块硬盘同时物理直通给两个虚拟机,同时读写会不会搞坏硬盘?
    jrbt123
        54
    jrbt123  
       2022-01-20 09:27:13 +08:00
    @Wpaengd 想问一下 pcie 的硬盘是不是要装什么驱动,我一块 wd 的黑盘显示不出来,三星的 evo 可以
    billytom
        55
    billytom  
       2022-01-20 10:17:47 +08:00   ❤️ 1
    我家里是这样做的,装 Unraid ,PCIE 上的 NVIDIA P1000 专业显卡(用来做 emby 和 plex 的硬解),两个 HC550 16T 做存储盘,2 个 870 evo SSD 做 raid0 接 unraid 里的磁盘 cache 。一直在等 gen11 plus ,我要求不多,多给我一个 pcie ,或者网卡换成万兆的,我现在怎么都差一个 pcie 槽( HPE 这机器设计得真失败),我要一块显卡用来硬解,也想接一个 raid 卡做磁盘阵列,还想接一个万兆网卡。等吧
    sairoa
        56
    sairoa  
       2022-01-20 10:37:37 +08:00
    @lslvxy 咸鱼搜索 gen10 plus 共享卡就有了。
    EricInBj
        57
    EricInBj  
       2022-01-20 11:21:18 +08:00
    @lslvxy 共享卡很便宜,不花钱也行,搜一下短接大法,我就是自己焊了一下。
    BOGU
        58
    BOGU  
       2022-03-30 13:38:03 +08:00
    @billytom 跟我的配置差不多,主板上 PCIE 接了 NVIDIA 的 P400 。一个 16T+4T+2T*2 HHD 。有个不一样的是,因为我主板上的 PCIE 被显卡占用了,我是买了三星 T7 1T 固态 USB3.0 Gen1 来做 Unraid 缓存盘的。用了一段时间,感觉也没什么问题。
    billytom
        59
    billytom  
       2022-03-30 15:11:17 +08:00
    @BOGU USB SSD 做不了缓存盘的,4K 随机性能太差了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1010 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 22:21 · PVG 06:21 · LAX 14:21 · JFK 17:21
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.