V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  ZZ74  ›  全部回复第 15 页 / 共 26 页
回复总数  511
1 ... 11  12  13  14  15  16  17  18  19  20 ... 26  
@Tongwin
设计时,同一个消费者组,一般一个消费者能分到至少一个分区。建议你看看项目代码,确定消费者和分区数量配比
@Tongwin
无法理解你设计的时候为什么会有没分配到分区的消费者...
这和分区无关,每个 consumer 都负责 1...N 个分区,简单的就是确保每个 consumer 在上一批完成后再拉取。
你上一次拉了 500 只 commit 了 200 条,consumer 内部也不会让你本地堆积 800 条。
@tomorrow092
OP 的问题很有可能是把拉取到任务提交到线程池后就 commit offset 了,对于 kafka broker 和 consumer 来说就是消费完了。
所以就导致了线程池任务还在跑,consumer 又拉一批过来...然后满了 爆了... rebalance 了等等....
自己写代码调用 poll ,可以定时,也可以用 future 控制上一批消费完了再 poll ,注意 rebalance

如果你要控制所有消费者和对应 topic 一起的单批次数量,那就麻烦了。
190 天前
回复了 RichardX2023 创建的主题 Java Java -多线程事务无法完美实现吗
@RichardX2023
trx_id 说明了一切....
190 天前
回复了 aCarefreeLife 创建的主题 职场话题 兄弟们被裁了 怎么申请最大赔偿?
甭管多少个月薪资,主张 n+1 基数就是你过去一年的收入除以 12
@doanything
拿到离职证明后 继续仲裁。 人家耍赖就是拿捏这个把柄,现在把柄没了 还不硬起来
录音也没用,旧公司那种属于用离职证明胁迫你。法院判的时候肯定会看到这一点。
190 天前
回复了 RichardX2023 创建的主题 Java Java -多线程事务无法完美实现吗
@ppto
OP 和我们说的不在同一个线~~~~~ 所以我才说上锁
lock conn
exec select & read result
unlock
这样就不会了。

@RichardX2023
共享同一个数据连接的两个任务 是不会死锁的。
190 天前
回复了 RichardX2023 创建的主题 Java Java -多线程事务无法完美实现吗
@ppto
每次用到 fd 去操作时 加锁就好了。
190 天前
回复了 godleon 创建的主题 程序员 请教个 Java list 处理数据的问题?
@twofox
绷不住了,看了 OP 回复 1 楼给的提示才是真的绷不住
191 天前
回复了 ZZ74 创建的主题 问与答 闲置一台 think station tiny ,能干啥呢
@Greendays

有考察过显卡,这玩意只能装半高显卡,都是专业拿来绘图的,打游戏性价比很低不适合
@janus77
在国内这环境,等你意识到开始用思想的时候 就已经来不及了。
其实 CS 的人本科阶段,把 C 用好,算法和数据结构学好。操作系统也熟悉,最好看一些 linux kernel 源码,体会一下数据结构和算法的在里面的应用 就够了
不考研的话,等到大四,再补一点 CPP 或者 Java 就够了

ACM ,数学建模,编译原理接触下就行了。
外面不缺程序员是真的
但是外面这样工资的工作找起来很容易也是真的
194 天前
回复了 RichardX2023 创建的主题 Java Java -多线程事务无法完美实现吗
这和线程多少有什么关系?也不需要分布式事务。这一批任务无论多少,开多少线程,从头到尾只是用一个数据库连接。 开始时关闭自动提交,所有任务跑完 commit 一下就好了
194 天前
回复了 daydreamcafe 创建的主题 职场话题 公司要求穿西装上班,我不想执行
@akiyamamio
看了窗外,发现外面没人想坐在我这位置上。因为窗外看到的是军用机场,人们更想做到战斗机或者 Y20 的位置上的
194 天前
回复了 hk94 创建的主题 Java 单体架构下 Java Web 各层之间的传参问题
定义一种或者两种 O 就行了 再多就是自找麻烦
194 天前
回复了 icoming 创建的主题 VPS Cloudcone 洛杉矶 1h512m 有货了
@icoming
没活动的时候 2C1G 是 $16.5
怎么感觉还是没活动的时候 合算啊
1c512MB 几乎没其他用途,2C1G 用处就多很多啊
194 天前
回复了 icoming 创建的主题 VPS Cloudcone 洛杉矶 1h512m 有货了
@icoming
有时候还能刷出来 刚就刷出来了 不过我还要注册 ...
195 天前
回复了 kisshere 创建的主题 问与答 货运铁路旁边的房子能不能买?
自住的话 能不买就不买。除非你不敏感,且其他条件真的很好
195 天前
回复了 wohefengyiyang 创建的主题 程序员 前端如何从 0~1,我只会从 1~n...
@crazyTanuki 对前端一无所知 给点具体的提示或者样例网址么?
195 天前
回复了 icoming 创建的主题 VPS Cloudcone 洛杉矶 1h512m 有货了
进去提示没货
但是下面有
1 vCPU Core
512 MB Dedicated RAM
30 GB RAID10 SSD Cached Disk
3 TB/Mo Bandwidth at 1 Gb/s
1x IPv4 and 3x IPv6
9.50/YR

和 OP 说的是同一个东西吗?
1 ... 11  12  13  14  15  16  17  18  19  20 ... 26  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5727 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 32ms · UTC 01:58 · PVG 09:58 · LAX 18:58 · JFK 21:58
Developed with CodeLauncher
♥ Do have faith in what you're doing.