V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
tlerbao
V2EX  ›  OpenAI

如何提高 ChatGPT 的 API 速度?

  •  
  •   tlerbao · 2023-11-08 15:04:13 +08:00 · 1889 次点击
    这是一个创建于 375 天前的主题,其中的信息可能已经有所发展或是发生改变。

    现在 ChatGPT 官网 3.5 模型回答速度飞快,基本瞬间就回答完了。

    但是我用 ChatBox 对接 API ,回答的速度非常慢,而且不稳定。

    如何提高 ChatGPT 的 API 速度!

    12 条回复    2023-11-09 12:47:24 +08:00
    wipbssl
        1
    wipbssl  
       2023-11-08 15:06:47 +08:00
    用 azure 的 api
    tlerbao
        2
    tlerbao  
    OP
       2023-11-08 15:16:41 +08:00
    @wipbssl 啥意思? azure 有提供 chatgpt 的 api ?
    bakaft
        3
    bakaft  
       2023-11-08 15:41:14 +08:00
    bakaft
        4
    bakaft  
       2023-11-08 15:41:44 +08:00
    @bakaft 只是发一下 Azure OpenAI 服务入口,我不觉得这能提速
    BardOS
        5
    BardOS  
       2023-11-08 15:43:24 +08:00
    官网的我觉得也还不错,速度也挺快
    vacuitym
        6
    vacuitym  
       2023-11-08 15:44:48 +08:00
    zhhmax
        7
    zhhmax  
       2023-11-08 17:48:57 +08:00
    实测:充 100 美元到 L3 可以极大提升速度。

    如果有老账号以前就绑过卡上个月有一波提速,这种账号现在速度也快,还是后付费。

    去注册账号试用一下我的站:one.luee.net ,3.5 和 4 都支持,L3 账号的速度我个人感觉还是挺满意的。
    simonsww
        8
    simonsww  
       2023-11-08 19:20:52 +08:00
    今天官方好像调整了 api 的单 ip 访问频率,之前应该没有限制,今天很容易出现了 slow down 的 429 状态码返回。
    riddle4ever
        9
    riddle4ever  
       2023-11-08 21:40:25 +08:00 via iPhone
    @simonsww 下午的时候服务 down 了 才会 429
    chris555
        10
    chris555  
       2023-11-08 23:47:07 +08:00
    充钱
    simonsww
        11
    simonsww  
       2023-11-09 01:24:07 +08:00
    @riddle4ever 不是,我的反代 api 服务器,以前都是正常的,现成一会儿就变成 429 ,返回 slow down 的情况
    mmdsun
        12
    mmdsun  
       2023-11-09 12:47:24 +08:00 via iPhone
    Azure OpenAI 服务比较稳定,但速度也不是很快吧。返回是一段一段的。这种情况要么你得自己分割一下,要么找微软客服提速。

    你这个情况先开全局梯子看看,加日志观察,说不定是你电脑网络慢。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3522 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 04:50 · PVG 12:50 · LAX 20:50 · JFK 23:50
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.