V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
weishao666
V2EX  ›  机器学习

大模型底下的踩和赞是如何进一步影响到大模型的

  •  1
     
  •   weishao666 · 198 天前 · 797 次点击
    这是一个创建于 198 天前的主题,其中的信息可能已经有所发展或是发生改变。

    大模型了解的比较模糊,主流的大模型平台对话框底下的踩和赞应该就是 RLHF 的前置步骤,即数据的收集,收集了之后一般是怎么影响到模型的呢,是不是还要隔一段时间将数据处理成指令数据集的格式,进行一轮微调?

    2 条回复    2024-05-08 10:19:12 +08:00
    laimailai
        1
    laimailai  
       198 天前
    隔一段时间将数据处理成指令数据集的格式,进行一轮微调。
    ------
    正解!还需要进行一轮数据清洗过滤。
    weishao666
        2
    weishao666  
    OP
       198 天前
    @laimailai 谢谢!
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5340 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 20ms · UTC 07:58 · PVG 15:58 · LAX 23:58 · JFK 02:58
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.