Home
Sign Up
Sign In
爱意满满的作品展示区。
Advertisement
V2EX
›
分享创造
AnyCrawl: 基于 TS 的高性能爬虫,用于将任意 Web 转为干净的数据喂给 Agent
thans
·
PRO
·
Aug 6
· 2001 views
This topic created in 106 days ago, the information mentioned may be changed or developed.
求 Star:
https://github.com/any4ai/AnyCrawl
主打这些功能:
搜索引擎抓取:支持多个搜索引擎,批量操作友好
网页内容提取:精准抓取单页内容
整站爬取:完整遍历采集网站内容
性能强劲:支持多线程/多进程
批量任务:稳定高效处理海量任务
AI 智能解析:用大语言模型( LLM )从网页提取结构化数据( JSON 格式)
完美适配 LLM:集成简单,开箱即用
爬虫
抓取
数据
2 replies
•
2026-08-06 11:46:20 +08:00
YAFEIML
Aug 6
1
star 支持
thans
OP
PRO
Aug 6
2
@
YAFEIML
感谢!
About
·
Help
·
Advertise
·
Blog
·
API
·
FAQ
·
Privacy
·
Solana
·
2413 Online
Highest 6679
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms ·
UTC 04:53
·
PVG 12:53
·
LAX 20:53
·
JFK 23:53
♥ Do have faith in what you're doing.
❯