各大平台热榜聚合-实时更新
00.简介
最近几天逛了一下 V 站,发现不少人分享自己做的榜单聚合,评论不少要求开源学习的,但是却少有人开源! 分享是互联网的精神之一。自己闲的没事,今天也写了一下!自己也是菜鸡,而写的又略仓促,欢迎大家指出错误。现在发出来给大家耍一耍。
演示地址: http://bangdan.lookcos.cn
源码地址: https://github.com/LookCos/hotspot-online
我暑假空闲比较多,可以加群 8805926,咱们一起交流编程技术,这里的代码看不懂的地方,直接群里 @我一下,我就出来解答了。下面说一下运行流程。
共三个文件:data_spider.py 、hotapi.php 、index.html
01.采集数据 Python 每十分钟更新一次数据(可自由设置时间,例如每秒一次)
-
requests 模块发送请求获得网页数据,
-
lxml 模块解析 html 并清洗出自己想要的数据
-
本地化处理(写入到本地 json 文件[不是标准 json 格式])
02.处理并返回数据
接口文件 hotapi.php 会将本地 json 文件读取并按照需求返回为 json 格式接口
返回格式如下:

03.前端展示
前端采用 Bootstrap4 来展示,用 jsonp 从远程接口获取数据,来渲染页面。 所以,你可以直接将 html 拿去做前端,直接填写我的接口地址就行。

