使用AI制作了一个可以交互式抓取、下载人民日报文章的小脚本工具。

1

使用方法也非常简单,如上图所示,在脚本所在的文件夹执行 ↓ 便会进入交互式选择模式,

python3 rmrb_opinion_scraper.py

1.抓取模式,会一步步查询下去,直到具体的某篇文章,然后选择下载相应的文章即可。

2.下载模式,会批量下载某个板块下的所有文章,比如05版:评论,选2.下载模式不满意的话,还可以回退到1.抓取模式。

最终确定后,脚本会抓取下载相应的文章,保存为标题.md格式,存放在执行脚本所在的文件夹内。

脚本下载:rmrb_opinion_scraper.py