V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

This topic created in 2958 days ago, the information mentioned may be changed or developed.

tumblr 爬虫（爬取指定主页）

suyuanhxx · 2018-03-28T07:29:19Z

tumblr 爬虫（爬取指定主页） -- 食用方法在 sites.txt 中添加指定 tumblr 主页，比如 http://allthingseurope.tumblr.com/ 只需要添加 allthingseurope 多条分行添加修改代理。将 common/proxyHttp.go 中的 127.0.0.1:1080 改成自己代理下一步工作，获取高清大图......、项目链接: https://github.com/suyuanhxx/crawler

-- 食用方法

在sites.txt中添加指定 tumblr 主页，比如http://allthingseurope.tumblr.com/只需要添加allthingseurope
多条分行添加
修改代理。将common/proxyHttp.go中的127.0.0.1:1080改成自己代理
下一步工作，获取高清大图......、

项目链接:https://github.com/suyuanhxx/crawler

Tumblr

127.0.0.1

主页

爬虫

10 replies • 2018-04-27 07:56:11 +08:00