当前位置： 移动技术网 > IT编程>脚本编程>Python > Python爬取知乎单个问题下的回答

Python爬取知乎单个问题下的回答

2019年11月29日  | 移动技术网IT编程  | 我要评论

法证先锋第3部粤语,类似斯卡布罗集市,广东省2a大学排名

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。

作者： 努力学习的渣渣哦

ps：如有需要python学习资料的小伙伴可以加点击下方链接自行获取

步骤：

  1. 打开需要获取的问题,f12，找到回答的想要数据的api,就是json

  2. 因为知乎下拉知乎页面，上方的url不会变化，动态加载的网站我们一般使用抓包，拼接url

  3. 完善程序

一. 选题：【如何看待上海新推行的垃圾分类办法？】

在这里插入图片描述

二. 【f12】——【寻找含有文本数据的url】

  1. 如图：依次点开【network】——【xhr】，我们找到【ansers？include=data%.........】，点开【preview】看到里面的【data】数据，点开就是我们需要的回答信息。 在这里插入图片描述

  2. 点到【header】——【request url】，打开该网址。（建议用火狐浏览器打开，json格式比较规范），找到这个就跟【获取微博】的方法一样了，只需要读取json文件里面的内容就好了。 在这里插入图片描述

  3. 【拼接url】 多找几个，发现只有后面offset不一样。【topics&limit=5&offset=10&platform=desktop&sort_by=default】 url = 'xxxxxx.topics&offset={}&limit=20&sort_by=created'.format((i-1)*20)' 在这里插入图片描述

  4. 三. 输出结果

  5. 先输出 json，看看有没有获取到

在这里插入图片描述

2 . 完整输出

在这里插入图片描述

结束：此处我只获取了【回答的内容】，json里面包含很多信息，如评论时间、昵称等这些，有需要的按照上述方法获取就可以了

您可能感兴趣的文章:

如对本文有疑问，请在下面进行留言讨论，广大热心网友会与你互动！！ 点击进行留言回复

相关文章:

验证码：
最近更新的文章
大家感兴趣的文章
移动技术网