使用requests

使用requests

Table of Contents

• 1. 使用rquests
  • 1.1. 官方快速指导文档(最新版本,使用特定版本时注意版本号)
  • 1.2. 打开一个网址
  • 1.3. 发送其他请求
    • 1.3.1. 发送post请求请使用requests.post(url)
    • 1.3.2. 类似的,需要发送何种请求应该使用该种方法
    • 1.3.3. 包含cookies 在浏览器中得到cookies,传递给get(url,cookies=cookies)
  • 1.4. 判断是否正确打开并判断文件编码
    • 1.4.1. requests.codes.ok 成功
  • 1.5. 获得返回的内容
    • 1.5.1. 获取文本
    • 1.5.2. 获取二进制值
    • 1.5.3. 响应json
    • 1.5.4. 原始响应内容
  • 1.6. 写到文件
  • 1.7. 解析内容 BeautifulSoup
  • 1.8. 使用select寻找指定的对象
    • 1.8.1. 使用select获取指定标签,寻找的语法类似于css的选择器
    • 1.8.2. 获取标签名称和内容
• 2. 实例
  • 2.1. 传递一些键值对来使用百度搜索
  • 2.2. 传递cookies登录微博
  • 2.3. 下载小说<道医天下>

1 使用rquests

 

1.1 官方快速指导文档(最新版本,使用特定版本时注意版本号)

http://docs.python-requests.org/zh_CN/latest/user/quickstart.html#id2

1.2 打开一个网址

res = requests.get(url)

1.3 发送其他请求

 

1.3.1 发送post请求请使用requests.post(url)

1.3.2 类似的,需要发送何种请求应该使用该种方法

如: requests.put() requests.delete() requests.put() requests.options()

1.3.3 包含cookies 在浏览器中得到cookies,传递给get(url,cookies=cookies)

在chrome中获取cookies 在需要获取的页面上点开右上角竖着排列的三个点 更多工具–>开发者工具 NetWork中的name中的Headers中带有cookies

例如:微博登录的cookies就