当前位置： 移动技术网 > IT编程>脚本编程>Python > 最近在练习爬虫，分享一些简单入门的知识

最近在练习爬虫，分享一些简单入门的知识

2018年07月10日  | 移动技术网IT编程  | 我要评论

石贞善照片,政协原常委孙怀山被双开,烧碱价格

我用的PYCharm3.5.4，安装了requests

 

使用requests模块发送简单的get请求、获取响应

import requests 

# 目标url
url = 'https://www.网页地址.com' 

# 向目标url发送get请求
response = requests.get(url)

# 打印响应内容
print(response.text)
response的常见属性：
  • response.text 响应体 str类型
  • respones.content 响应体 bytes类型
  • response.status_code 响应状态码
  • response.request.headers 响应对应的请求头
  • response.headers 响应头
  • response.request.cookies 响应对应请求的cookie
  • response.cookies 响应的cookie（经过了set-cookie动作）

获取网页源码的常用方法：

  1. response.content.decode()
  2. response.content.decode("GBK")
  3. response.text

以上三种方法从前往后尝试，能够100%的解决所有网页解码的问题

您可能感兴趣的文章:

如对本文有疑问，请在下面进行留言讨论，广大热心网友会与你互动！！ 点击进行留言回复

相关文章:

验证码：
最近更新的文章
大家感兴趣的文章
移动技术网