全球主机交流论坛

标题: 这东西谁搭建过吗？采集各大网站热榜 [打印本页]

作者: aipage 时间: 2021-1-3 20:29
标题: 这东西谁搭建过吗？采集各大网站热榜
https://github.com/pangxiaobin/CrawlerHot

作者: liuxu 时间: 2021-1-3 20:33
说来也巧，我做过，没什么意思

作者: aipage 时间: 2021-1-3 20:35

liuxu 发表于 2021-1-3 20:33
说来也巧，我做过，没什么意思

收录怎么样？是不是要本地运行PYTHON？

作者: Yime 时间: 2021-1-3 20:35
没做过

作者: teardrops 时间: 2021-1-3 20:37
可以参考 dz的 cron .

第一个访客激活条件, 瞬时抓取 json 缓存1小时 (或你想要的时间)

作者: liuxu 时间: 2021-1-3 20:44

aipage 发表于 2021-1-3 20:35
收录怎么样？是不是要本地运行PYTHON？

恩，用scrapy写的爬虫，跑了两个月没打理就下线了，除了WB热搜5分钟1次，其他的半天1天或者一周访问一次就可以了

作者: 黄阿玛 时间: 2021-1-3 20:47
似乎挺好玩的

作者: aipage 时间: 2021-1-3 20:50

liuxu 发表于 2021-1-3 20:44
恩，用scrapy写的爬虫，跑了两个月没打理就下线了，除了WB热搜5分钟1次，其他的半天1天或者一周访问一次 ...

好像我见过上次谁搭了，也有爬LOC的热榜。

作者: liuxu 时间: 2021-1-3 20:57

aipage 发表于 2021-1-3 20:50
好像我见过上次谁搭了，也有爬LOC的热榜。

其实都还算好爬，就是没什么用，没必要，之前有个搞聚合热搜上了app，然后被下线了

作者: myseil 时间: 2021-1-3 20:57
宝塔应该也可以搭建等着试试！

作者: aipage 时间: 2021-1-3 20:58

myseil 发表于 2021-1-3 20:57
宝塔应该也可以搭建等着试试！

等大佬一个教程。

作者: umb 时间: 2021-1-3 21:06
提示: 作者被禁止或删除内容自动屏蔽

作者: aipage 时间: 2021-1-3 21:25

umb 发表于 2021-1-3 21:06
https://mo.fish
ps:不是我的

多了反而显得杂。眼花花的

作者: whl32 时间: 2021-1-3 21:50
经常上的一个站https://tophub.today/，这个感觉不错，可以仿一下

欢迎光临全球主机交流论坛 (https://mjj.022333.xyz/)