V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  qq8331199  ›  全部回复第 3 页 / 共 3 页
回复总数  59
1  2  3  
@tabris17 为什么不,说一下你的理由
我们公司一直在招 go 开发,做金融方面的,主要做一级市场的数据,如有有意愿可以在内推你,
公司不是很大,目前是 40~50 人的团队
2021-09-15 10:11:34 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@tulumu
我要的是查另一张表的数据,和主表没上面关系,瓶颈在全量同步,因为全量同步的时候查 1.5 亿的表慢,现在想解决的是查询慢的问题
2021-09-15 10:08:42 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@aragakiyuii
company_id 普通索引 varchar 类型,上面已经说了,explain 显示是走索引的,
你有试过 1.5 亿里面查 1W 数据要多久吗?不是走主键索引,走普通索引
2021-09-14 17:31:32 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@tiiis 我不是单独的查一个主键的记录,我这个是一次去另一张表查一批主键的记录
2021-09-14 17:28:15 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@abccccabc
我有 6000W 数据要跑,不是 1w,1w 是我一个批次的量
2021-09-14 17:26:52 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@zhengsidao
es 也不太行,1.5 亿的数据是全部需要查的,其实我还要 3 张过亿的表需要查,之前试过全部放 es,一起查这 4 张表,速度并没有很快,还很容易超时
2021-09-14 17:19:52 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@zhengsidao
说错了 1W id 我测试的时候应该有人操作数据库,后面再测了一次 只用 2 分钟,但是还是慢
2021-09-14 17:19:09 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@tiiis
索引生效的
@ericbize
mysql 5.7
@abccccabc
就是离线同步太慢了 单纯的查询 1W id 放到 1.5 亿的表查询 需要 2 分钟
@ddkk1112
这个应用场景不太使用,我需要的是所有列的数据
2021-09-14 14:18:17 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@wzq001
全量同步 6000w 数据,不可能查 6000W 次吧
2021-09-14 14:15:58 +08:00
回复了 qq8331199 创建的主题 程序员 关于大数据(千万级,亿级)的查询问题
@zoharSoul @ericbize
2t 机器硬盘+128G 内存

@goobai @yidinghe
试过了,es 不适合做单纯的查询,我对分词没要求,只是想查出表的数据

@wzq001
不是批量变更,是数据同步,需要根据查其他表,计算出衍生数据,比如新的表里面会标记出公司是否有资本增长,类似这种字段
2021-02-07 16:11:16 +08:00
回复了 lixiangzhixin 创建的主题 求职 试用期没有年终
去年 3 月下旬入职新公司 试用期 6 个月,试用期全额工资,
今年还拿了 2 个月年终奖,一对比感觉好多了 狗头
2021-02-01 14:16:26 +08:00
回复了 visli 创建的主题 深圳 现在有哪些大的招聘网?
boss 直聘
拉勾
2020-10-27 18:30:49 +08:00
回复了 jamfer 创建的主题 推广 回馈 V2,送一把樱桃红轴的 71 键双模机械键盘
拉低中奖率
2020-10-13 18:58:48 +08:00
回复了 duruoduruo1258 创建的主题 酷工作 [小步网络/宝安坪洲] 诚邀前端开发小伙伴关注
双休吗
2020-05-06 13:59:28 +08:00
回复了 yizhimamong 创建的主题 职场话题 你多久没有调薪了?
从 2017 年 6 月到今年 3 月 跳了三家公司 基本工资涨了 2.7 倍,
要不是大公司,不要想公司主动给你调薪太多。要考自己争取,想调薪就和上级说,不行就跳,画大饼谁都会
2019-03-15 17:47:14 +08:00
回复了 qq8331199 创建的主题 求职 [求职][深圳][ web 前端][两年经验]
没有没有老哥看看
1  2  3  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3649 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 26ms · UTC 00:11 · PVG 08:11 · LAX 16:11 · JFK 19:11
Developed with CodeLauncher
♥ Do have faith in what you're doing.