欢迎光临
我们一直在努力

这东西谁搭建过吗?采集各大网站热榜

aipage牛人:
https://github.com/pangxiaobin/CrawlerHot
这东西谁搭建过吗?采集各大网站热榜-图1

liuxu牛人:
说来也巧,我做过,没什么意思

aipage牛人:


说来也巧,我做过,没什么意思

收录怎么样?是不是要本地运行PYTHON?

Yime牛人:
没做过

teardrops牛人:
可以参考 dz的 cron .

第一个访客激活条件, 瞬时抓取 json 缓存1小时 (或你想要的时间)

liuxu牛人:


收录怎么样?是不是要本地运行PYTHON?

恩,用scrapy写的爬虫,跑了两个月没打理就下线了,除了WB热搜5分钟1次,其他的半天1天或者一周访问一次就可以了

黄阿玛牛人:
似乎挺好玩的

aipage牛人:


恩,用scrapy写的爬虫,跑了两个月没打理就下线了,除了WB热搜5分钟1次,其他的半天1天或者一周访问一次 …

好像我见过上次谁搭了,也有爬LOC的热榜。

赞(0) 打赏
未经允许不得转载:砸漏网 » 这东西谁搭建过吗?采集各大网站热榜

评论 抢沙发

评论前必须登录!

 

APP开发 更专业 更方便

AD赞助联系我们

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

微信扫一扫打赏