当前位置: 移动技术网 > IT编程>脚本编程>Python > 博客园随笔内容进行爬取至本地并转md格式

博客园随笔内容进行爬取至本地并转md格式

2019年07月06日  | 移动技术网IT编程  | 我要评论

邯郸晚报电子版,阿里巴巴中国供应商,精灵五子棋

将博客园随笔保存至本地并转md格式

1.首先博客园的robots协议

user-agent: *
allow: /

2.项目目的

方便博主将以上传的md随笔重新根据输入url进行下载,方便博主修改随笔

3.项目介绍功能介绍

  • 功能一:批量爬取博客园首页的所有随笔字典并保存json文件,且随笔全部转成md格式文件

  • 功能二:输入指定随笔网址把随笔内容转成md并且保存

由于不同博客具有不同的见状性`要根据博客能让进行适当的修改就可以使用此程序

不要加多进程多线程进去增加博客园的负担

爬取内容请不要用做商业用途

4.项目链接

项目中的注释我都去掉了,有疑问私聊我,不要想着白嫖哦,内容都是完整的

如对本文有疑问,请在下面进行留言讨论,广大热心网友会与你互动!! 点击进行留言回复

相关文章:

验证码:
移动技术网