博客园随笔内容进行爬取至本地并转md格式

将博客园随笔保存至本地并转md格式

1.首先博客园的robots协议

User-Agent: *
Allow: /

2.项目目的

方便博主将以上传的md随笔从新根据输入url进行下载,方便博主修改随笔

3.项目介绍功能介绍

• 功能一：批量爬取博客园首页的全部随笔字典并保存JSON文件，且随笔所有转成MD格式文件

• 功能二：输入指定随笔网址把随笔内容转成MD而且保存

因为不一样博客具备不一样的见状性`要根据博客能让进行适当的修改就能够使用此程序

不要加多进程与多线程进去增长博客园的负担

爬取内容请不要用作商业用途

4.项目连接

https://github.com/a568972484/html_to_md

项目中的注释我都去掉了,有注释的在压缩文档中须要的话联系我,内容与Crawl_blog_post_3中彻底相同只是有注释而已

如今收到有些博客的见状性修改,已经升级到3.0版本,哈哈

内容会不断更新完善