V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
FreeEx
V2EX  ›  分享创造

你还在手动敲命令来管理 kafka 吗?试试我写的这款 kafka 面板吧,个人觉得还是蛮好用的。

  •  
  •   FreeEx ·
    dushixiang · 2021-04-19 23:19:05 +08:00 · 2435 次点击
    这是一个创建于 1305 天前的主题,其中的信息可能已经有所发展或是发生改变。

    目前支持的功能有:

    • 多集群管理
    • topic 监控 —— 查看分区数量、副本数量、存储大小、offset
    • topic 管理 —— 创建、删除、扩容
    • broker 查看 —— Partitions as Leader 、 Partitions as Follower
    • consumer 管理(查看、删除)
    • 重置 offset
    • 消费消息 —— 支持 String 和 json 方式展示

    新增了拉取消息时的 key 和 value 过滤

    topic-data

    优化了消费者详情,和脚本命令输出内容一致

    consumer-detail

    GitHub 地址: https://github.com/dushixiang/kafka-map

    19 条回复    2021-04-20 14:43:49 +08:00
    zagfai
        1
    zagfai  
       2021-04-20 00:31:07 +08:00   ❤️ 2
    手动敲命令行有什么不好?比界面操作得更快吧
    FreeEx
        2
    FreeEx  
    OP
       2021-04-20 09:38:08 +08:00   ❤️ 9
    @zagfai 您说的对
    mritd
        3
    mritd  
       2021-04-20 09:54:42 +08:00 via iPhone
    @FreeEx 哈哈哈 可以啊 兄弟,我有时候就忍不住,我得向你学习
    FreeEx
        4
    FreeEx  
    OP
       2021-04-20 10:03:47 +08:00
    @mritd 一起加油
    QLeelulu
        5
    QLeelulu  
       2021-04-20 10:06:54 +08:00
    zoharSoul
        7
    zoharSoul  
       2021-04-20 10:09:49 +08:00
    cco
        8
    cco  
       2021-04-20 10:12:44 +08:00
    我用的滴滴开源的 kafka-mananger,凑合用吧。
    JKeita
        9
    JKeita  
       2021-04-20 10:27:05 +08:00
    话说 kafka 你们都有用权限验证嘛?感觉权限验证才是最需要界面管理的。
    FreeEx
        10
    FreeEx  
    OP
       2021-04-20 10:31:46 +08:00
    @QLeelulu 试试我这个就知道哪个香了,安装很简单的
    @cco 滴滴的那个很强,做了很多扩展,但是很多东西我都用不到
    @JKeita kafka 本身是没有权限验证的,能连上的都能操作,因此常见的策略是只允许某些 IP 访问,然后做一个 web 的系统管理 kafka,在这个 web 的系统上再做管控
    dier
        11
    dier  
       2021-04-20 10:48:57 +08:00
    我试了一下,很简洁。挺不错的,要是能做用户权限管理就更好了
    JKeita
        12
    JKeita  
       2021-04-20 10:58:35 +08:00
    @FreeEx kafka 是有 SASL_PLAIN 权限验证功能的
    est
        13
    est  
       2021-04-20 11:05:50 +08:00
    重置 offset 支持对单个 partition 生效吗?
    FreeEx
        14
    FreeEx  
    OP
       2021-04-20 11:31:10 +08:00
    @JKeita 学习了,之前一直没用过这东西
    FreeEx
        15
    FreeEx  
    OP
       2021-04-20 11:31:21 +08:00
    @est 生效
    xuanyuanaosheng
        16
    xuanyuanaosheng  
       2021-04-20 12:48:38 +08:00 via Android
    楼主可以写个 prometheus 的 exporter
    zhuawadao
        17
    zhuawadao  
       2021-04-20 12:50:12 +08:00
    @FreeEx 为二楼素养点赞
    FreeEx
        18
    FreeEx  
    OP
       2021-04-20 14:43:40 +08:00
    @xuanyuanaosheng 周期性统计某些消费组的 lag 来监控消费能力?
    FreeEx
        19
    FreeEx  
    OP
       2021-04-20 14:43:49 +08:00
    @zhuawadao 谢谢
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1144 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 22:56 · PVG 06:56 · LAX 14:56 · JFK 17:56
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.