V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
The Go Programming Language
http://golang.org/
Go Playground
Go Projects
Revel Web Framework
hheedat
V2EX  ›  Go 编程语言

confluent-kafka-go 和 sarama 选哪个库好? golang 消费 kafka

  •  
  •   hheedat · 2018-11-30 16:31:39 +08:00 · 7461 次点击
    这是一个创建于 2187 天前的主题,其中的信息可能已经有所发展或是发生改变。

    https://github.com/confluentinc/confluent-kafka-go kafka 的核心开发人员弄的公司负责维护,包了一个 C 库,装环境成本稍微高点

    https://github.com/Shopify/sarama 纯 go 的,但是网上很多人说它坑

    官方推荐的其他几个我看 star、用户数都太少了,不敢用

    有经验的同学分享一下?我每秒大概消费 1.5w 个消息

    6 条回复    2018-11-30 18:56:02 +08:00
    rillhu
        1
    rillhu  
       2018-11-30 16:49:09 +08:00
    不了解,在学习 go,关注
    icqdany
        2
    icqdany  
       2018-11-30 16:55:04 +08:00
    项目中大量使用 sarama
    rrfeng
        3
    rrfeng  
       2018-11-30 16:55:21 +08:00
    跟每秒多少消息关系不大,跟功能关系比较大。

    当然是官方的比较好(如果尽力在维护的话),现在 kafka 变动也很快,第三方不一定跟的上
    hheedat
        4
    hheedat  
    OP
       2018-11-30 17:59:26 +08:00
    @rrfeng 网上有人说 sarama 在消费压力大的时候有问题
    hheedat
        5
    hheedat  
    OP
       2018-11-30 18:00:10 +08:00
    @rrfeng 也不是官方的,是核心开发人员跳槽后搞的
    taozle
        6
    taozle  
       2018-11-30 18:56:02 +08:00
    消息量很大用 confluent-kafka-go, sarama 在消息量很大的时候好像有点跟不上,当然一般使用是没什么问题的
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3809 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 10:38 · PVG 18:38 · LAX 02:38 · JFK 05:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.