V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Livid
V2EX  ›  服务器

nginx 做 caching proxy

  •  
  •   Livid · 2010-10-29 00:01:44 +08:00 · 6463 次点击
    这是一个创建于 5171 天前的主题,其中的信息可能已经有所发展或是发生改变。
    18 条回复    1970-01-01 08:00:00 +08:00
    napoleonu
        1
    napoleonu  
       2010-10-29 07:05:15 +08:00
    napoleonu
        2
    napoleonu  
       2010-10-29 07:09:25 +08:00
    记得原来在哪还看过一张图,找不到了。
    iiduce
        3
    iiduce  
       2010-10-29 08:54:46 +08:00
    有用,mark。
    gonbo
        4
    gonbo  
       2010-10-29 09:14:16 +08:00
    @Livid #you8g 已经使用上了,nginx proxy-cache 。但是里面还有一个问题,不能对后端的链接keepalive,而是每个请求都要一个链接。负载多的话,系统设置不好的话,很容易出问题。
    gonbo
        5
    gonbo  
       2010-10-29 09:15:09 +08:00
    @livid #you8g现在的策略是,*.*的强制缓存,其它的自己定义。
    AntiGameZ
        6
    AntiGameZ  
       2010-10-29 09:29:33 +08:00
    我比较好奇一个问题,动辄300M-1G的文件,怎样cache比较好,尤其是当文件可能来自于不同的服务器的时候。
    predator
        7
    predator  
       2010-10-29 10:10:03 +08:00
    单nginx来做这个事情,还是磁盘为主,OS的内存缓冲为辅

    内存充裕的情况下varnish强一些

    还有一个比较好玩的做法是nginx+memcache module或者redis module

    @AntiGameZ 那个是CDN的事情
    AntiGameZ
        8
    AntiGameZ  
       2010-10-29 10:16:03 +08:00
    @predator 我的环境CDN不适用。自己YY把大文件在二进制层面上切片,然后以片文件丢在内存里头。既然丢在内存,用memcache或者redis之类应该都能跑,我手头也有几台64G内存的机器,就是不知道有没有人尝试过。
    gonbo
        9
    gonbo  
       2010-10-29 10:31:49 +08:00
    @AntiGameZ 大文件连续读取这个,不正是磁盘可以做的事情么?
    AntiGameZ
        10
    AntiGameZ  
       2010-10-29 10:36:58 +08:00
    @gonbo 磁盘顶不住啊,所以才在想别的方案。
    gonbo
        11
    gonbo  
       2010-10-29 11:01:10 +08:00
    @AntiGameZ 做个raid,上ssd。而且你也最多是1000M网卡吧,怎么磁盘顶不住?
    AntiGameZ
        12
    AntiGameZ  
       2010-10-29 11:18:41 +08:00
    @gonbo 我手上的一把畸形服务器,都是32G或者64G内存,但是硬盘都是SATA。
    gonbo
        13
    gonbo  
       2010-10-29 12:14:08 +08:00
    @AntiGameZ 服务器送给我吧,哈哈。

    其实SATA也够了,弄几个sata就可以。
    AntiGameZ
        14
    AntiGameZ  
       2010-10-29 12:50:23 +08:00
    @gonbo 与其加东西,还是想吧现有的资源利用利用好。2,3台服务器,100多G的内存,空着多可惜。
    samt
        15
    samt  
       2010-10-29 21:39:52 +08:00
    mark
    gonbo
        16
    gonbo  
       2010-10-29 21:47:45 +08:00
    @AntiGameZ 这个,如果你使用squid可以memcache搞大点。

    但是,对于千M的网卡来说,大文件连续读取硬盘也是没有问题的。

    看具体了。
    8989
        17
    8989  
       2011-01-03 01:00:40 +08:00
    vps下用ng做缓存还是很给力的
    CupTools
        18
    CupTools  
       2011-01-03 03:10:38 +08:00
    @AntiGameZ 可以弄个LVS玩玩。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5594 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 06:32 · PVG 14:32 · LAX 22:32 · JFK 01:32
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.