V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
niu0619
V2EX  ›  Python

es 挂了,导致 Redis 阻塞,怎么处理 log?

  •  
  •   niu0619 · 2017-12-03 10:18:04 +08:00 · 1906 次点击
    这是一个创建于 2526 天前的主题,其中的信息可能已经有所发展或是发生改变。
    之前因为 es 挂了,导致 redis 阻塞,应用写入一直在等待,直到机器上所有进程都被阻塞。
    期望是让 log 的功能更完善,更灵活,如果当某种通道出现故障的时候,不可影响应用程序
    1 如何判断出通道故障了?比如 10 秒内连续出现错误
    2 自动关闭该通道,或切换至其他通道
    3 尝试自动恢复该通道
    4 报警手段 + 恢复后提醒手段

    有没有什么其他的思路,请大家指教,小弟对这个项目还不是很熟,可能描述的不是很清楚。希望大家指点指点。
    tlday
        1
    tlday  
       2017-12-03 11:27:12 +08:00 via Android
    1 的话,kafka 加消息从产生到消费之间延迟的检测? 2,4,查找微服务的服务发现,负载均衡相关的东西。3,守护进程通知重启吧,挂的原因是未知的,可能很难自动化。重启解决大部分问题,然后记录下重启前的事故现场,分析以便以后作规避吧。
    我的经验也不多,看看楼下怎么说。
    tlday
        2
    tlday  
       2017-12-03 11:28:15 +08:00 via Android
    发帖的节点似乎不是很合适
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2499 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 10:28 · PVG 18:28 · LAX 03:28 · JFK 06:28
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.