V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
niu0619
V2EX  ›  Python

es 挂了,导致 Redis 阻塞,怎么处理 log?

  •  
  •   niu0619 · Dec 3, 2017 · 2564 views
    This topic created in 3066 days ago, the information mentioned may be changed or developed.
    之前因为 es 挂了,导致 redis 阻塞,应用写入一直在等待,直到机器上所有进程都被阻塞。
    期望是让 log 的功能更完善,更灵活,如果当某种通道出现故障的时候,不可影响应用程序
    1 如何判断出通道故障了?比如 10 秒内连续出现错误
    2 自动关闭该通道,或切换至其他通道
    3 尝试自动恢复该通道
    4 报警手段 + 恢复后提醒手段

    有没有什么其他的思路,请大家指教,小弟对这个项目还不是很熟,可能描述的不是很清楚。希望大家指点指点。
    tlday
        1
    tlday  
       Dec 3, 2017 via Android
    1 的话,kafka 加消息从产生到消费之间延迟的检测? 2,4,查找微服务的服务发现,负载均衡相关的东西。3,守护进程通知重启吧,挂的原因是未知的,可能很难自动化。重启解决大部分问题,然后记录下重启前的事故现场,分析以便以后作规避吧。
    我的经验也不多,看看楼下怎么说。
    tlday
        2
    tlday  
       Dec 3, 2017 via Android
    发帖的节点似乎不是很合适
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1180 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 23:51 · PVG 07:51 · LAX 16:51 · JFK 19:51
    ♥ Do have faith in what you're doing.