V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  sead  ›  全部回复第 4 页 / 共 5 页
回复总数  96
1  2  3  4  5  
201 天前
回复了 ModiKa2022 创建的主题 数据库 大数据量联表操作
@ModiKa2022 PG 不应该这么菜啊,SQL 层面优化是否下足功夫?我测试过单 SQL 10 多张表一起处理( 70 万单表有多张),整体比分开查快。。。后端减少了请求次数,处理数据所用的内存对象也大量减少;以前经常用 ORM ,怎么写都提升不了性能,后面手撸 SQL 差异肉眼可见
209 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@InsideSeed 有一个 SVG 结构图,后续我会发布文档和一些常见场景的用法
只要是境内的站点,就要远离爬虫;走正规渠道的 api
212 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@kiroli https://github.com/serping/express-scraper 可以参考下这种方式怎样?里面有很直观的例子。
212 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@Amose2024 https://github.com/serping/express-scraper 基于轮子的 API 应用版本,线上部署了。

其中 SERP 的较为复杂,不过按树结构方法解析,应该还是比较容易看懂的。
212 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@good1uck https://github.com/serping/express-scraper DEMO 发布了,目前有三个 API 例子。

这个是 expressjs api , 扩展非常方便
214 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@good1uck 文档和 demo 后续会更新,近几天基于这个会发布一个 express api 辅助开发,同时可以用于生产环境的 api ,会有更新详细的 demo 。
214 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@kiroli 写原生? 可能是不会设计代码结构,数据复杂时维护起来很痛苦。。之前用 python 撸了一个 amazon asin 铲子,数据过于复杂,维护起来头大。 基于痛点才撸了这个。
@lzblalala 有点好奇,这种造飞机的简历,一般市场什么标准薪资
215 天前
回复了 sead 创建的主题 分享创造 基于 cheerio, 写了个低代码,高效解析轮子
@Amose2024 cheerio 和 beautifulSoup 解决的需求都差不多,但是多数场景都是一些重复的数据处理逻辑,维护起来也是比较头大;目前用这个撸 serp 暂时还没碰到解决不了的.

https://serpchecking.com/ 完全基于 Cheerio-Tree 撸
@monkeyWie 看起来像是 nextui
请教大佬,这个速率限制是用什么实现的?
222 天前
回复了 a7851578 创建的主题 生活 最近感觉身体很累 有没调节方法
三伏是一年中阳最猛的,只要阴虚就会失眠, 夏天睡眠时长最短也跟阳有关。
考虑就业,HR 的角度去选学校;
多数都是自学的,能碰到好老师就是锦上添花
240 天前
回复了 saviorjiang 创建的主题 职场话题 有没有裁员躺平的?都在家干什么?
@Jack9527 看机遇,年轻没有负担就干; 以前这么干过,搞了几年发现收入最后跟上班没什么差异,还操碎了心。
让我再选一次依旧还是干
240 天前
回复了 legstrong 创建的主题 酷工作 [上海][美企] Web Developer
@slmaaw 华人身份开的也可以是外企
259 天前
回复了 cowcomic 创建的主题 程序员 后台学前端用什么技术栈比较好
出海: react ,nextjs ,ts
大陆: vue
1  2  3  4  5  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1428 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 29ms · UTC 17:04 · PVG 01:04 · LAX 09:04 · JFK 12:04
Developed with CodeLauncher
♥ Do have faith in what you're doing.