V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
ccloving
V2EX  ›  问与答

你们公司上本地 DeepSeek 了吗?

  •  
  •   ccloving · 1 天前 · 323 次点击
    好奇这么多公司搞大模型私有化部署,都用来干啥呢?感觉也就个知识库问答,没有太大价值。
    supuwoerc
        1
    supuwoerc  
       1 天前
    上了 v3,r1 还有蒸馏的小模型,一部分给内部部门在 dify 放工作流做问答,一部分给开发用 roo code 和 continue 。

    没啥特别大的价值,但是自己部署的不卡,而且领导不担心内部资料流出。
    Mandyer
        2
    Mandyer  
       1 天前
    @supuwoerc 请问机器配置是什么样子的,多少参数的模型?
    supuwoerc
        3
    supuwoerc  
       1 天前
    @Mandyer
    DeepSeek-R1:总参数 671B, 激活 37B,16 张 H800 一个实例
    DeepSeek-R1-Distill-Qwen-32B:总参数 32B ,激活 32B ,1 张卡一个实例
    ccloving
        4
    ccloving  
    OP
       1 天前
    @supuwoerc 同感,只是做个问答,感觉真没必要花这么多钱。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5440 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 08:50 · PVG 16:50 · LAX 00:50 · JFK 03:50
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.