V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
0987363
V2EX  ›  Kubernetes

新需求,要求所有 k8s 里的服务把日志都保存到本地磁盘

  •  
  •   0987363 · 14 小时 39 分钟前 · 1244 次点击
    机房托管,自建的 k8s ,几台 es 物理机做日志集群。

    k8s 里跑的普通业务,没有什么特殊要求。

    现在是要求把 k8s 里跑的各种服务打印的日志全部保存到本地磁盘,理由是日志服务器会挂,会丢日志。。。
    15 条回复    2025-03-04 12:34:20 +08:00
    cdlnls
        1
    cdlnls  
       14 小时 27 分钟前   ❤️ 4
    根据我的经验,90%不是日志服务器挂了,而是压根没打印。
    joyhub2140
        2
    joyhub2140  
       14 小时 20 分钟前
    对日志服务器做远程备份啊。

    打本地快照也行。
    Jokesy
        3
    Jokesy  
       14 小时 5 分钟前
    Pod 的日志默认都是在磁盘内部,/var/lib/docker/* 去可以找的到。
    idihs
        4
    idihs  
       9 小时 6 分钟前
    bro, try a random LLM(large language model
    birdhk
        5
    birdhk  
       4 小时 42 分钟前
    fluent-bit 、vector 这些日志收集组件不都可以直接收集 k8s 中的日志吗?收集到了想保存哪里就保存到哪里
    birdhk
        6
    birdhk  
       4 小时 36 分钟前
    直接 fluent-bit 收集或 vector 收集然后直接写入到 es 不就行了,没啥问题
    runzhliu
        7
    runzhliu  
       3 小时 57 分钟前
    k8s 节点也会挂,磁盘也可能有问题,光存本地肯定不行
    defunct9
        8
    defunct9  
       3 小时 54 分钟前
    最近正在搞这个,用 ilogtail 吧,满足你的需求
    dbak
        9
    dbak  
       2 小时 55 分钟前
    搞一个 nfs 网盘 挂载到容器/data/logs 下 把应用的日志都保存到这里 定期压缩归档
    cheng6563
        10
    cheng6563  
       2 小时 47 分钟前
    看你怎么部署的,比如直接用 vector daemonset 把/var/log/pods/全收集就完了。
    yelog
        11
    yelog  
       2 小时 33 分钟前
    直接 hostPath 落盘
    kd9yYw2RyhQwAwzn
        12
    kd9yYw2RyhQwAwzn  
       2 小时 31 分钟前
    这种碰到 pod 漂移 日志翻看起来会很痛苦吧
    tairan2006
        13
    tairan2006  
       1 小时 23 分钟前
    容器的 stdout 本来就保存在本地啊……
    set
        14
    set  
       1 小时 6 分钟前
    @Jokesy #3 对的
    $ cp /var/lib/docker/* /root/
    报个 1 个月开发工时, 其后就可以摸鱼拿钱了
    oudemen
        15
    oudemen  
       45 分钟前
    存本地的话用 victorialogs 吧,兼容多种协议。也一天一个目录,方便归档和备份
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   4033 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 05:19 · PVG 13:19 · LAX 21:19 · JFK 00:19
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.