Weibo_Hot_Search
1.0.0
都说互联网人的记忆只有七秒钟,可我却想记录下这七秒钟的记忆。
项目已部署在服务器,会在每天的上午 11 点和晚上11 点定时爬取微博的热搜榜内容,保存为 Markdown 文件格式,然后上传备份到 GitHub 你可以随意下载查看。
不要问我为什么选择 11 这两个时间点,因为个人总感觉这两个时间点左右会有大事件发生。
不管微博热搜上是家事国事天下事,亦或是娱乐八卦是非事,我只是想忠实的记录下来...
Python 3.0 +
pip install requests
pip install lxml
pip install bs4
或者执行
pip install -r requirements.txt
进行安装运行所需的环境
weibo_Hot_Search_bs4.py
(新增) 或 weibo_Hot_Search.py
python weibo_Hot_Search_bs4.py
(新增) 或 python weibo_Hot_Search.py
运行结束后会在当前文件夹下生成以时间命名的文件夹,如下:
2019年11月08日
(已停更)并且会生成以具体小时为单位的具体时间命名的 Markdown 文件,如下:
2019年11月08日15点.md
(继续更)并且会生成以具体小时为单位的具体时间命名的csv文件,如下:
2020年08月27日00点.csv
使用的是新浪微博的公开热搜榜单 链接:https://s.weibo.com/top/summary/
本项目的所有数据来源均来自 新浪微博 数据内容及其解释权归新浪微博所有。
weibo_Hot_Search_bs4.py
./bs4版数据/
目录下,存储数据格式为序号-标题-热度(或置顶)
,该格式易于处理,便于后续进行数据可视化和其他分析.csv
文件统一存放于bs4[.csv]版数据
文件夹中bs4[txt]版数据
和lxml版数据
已停更,所有新数据均保存在bs4[.csv]
版数据文件中GNU General Public License v3.0