位置: 编程技术 - 正文
推荐整理分享Python Requests 基础入门,希望有所帮助,仅作参考,欢迎阅读内容。
文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!
首先,Python 标准库中的 urllib2 模块提供了你所需要的大多数 HTTP 功能,但是它的 API 不友好。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务,所以学习reuqests模块,比较简洁好用(以后慢慢会学习scapy,更强大的库),安装就不用说了
1 导入模块
>>> import requests
2 直观感受一下发送请求的简洁
>>> r = requests.get('your url') >>> r = requests.post('your url') #put delete head options方法也是这种用法
3 为url传递参数
>>> url_params = {'key':'value'} #字典传递参数,如果值为None的键不会被添加到url中>>> r = requests.get('your url',params = url_params)>>> print(r.url) your urlkey=value
4 响应的内容
>>> r.encoding #获取当前的编码 >>> r.encoding = 'utf-8' #设置编码 >>> r.text #以encoding解析返回内容 >>> r.content #以字节形式(二进制)返回 >>> r.json() #以json形式返回,前提返回的内容确保是json格式的,不然解析出错会抛异常
5 定制头和coookie信息
>>> header = {'User-Agent':'Mozilla/5.0 (Windows NT .0) AppleWebKit/. (KHTML, like Gecko) Chrome/.0.. Safari/. SE 2.X MetaSr 1.0'} >>> cookie = {'key':'value'} >>> r = requests.get/post('your url',headers=header,cookies=cookie)
6 发送post数据请求
>>> send = {'key':'value'} >>> r = requests.post('your url',data = send) # 如果你传递一个 string 而不是一个dict ,那么数据会被直接发布出去,这个也可以上传文件
7 响应状态码
>>> r.status_code #如果不是,可以使用 r.raise_for_status() 抛出异常
8 响应
>>> r.headers #返回字典类型,头信息 # r.requests.headers 返回发送到服务器的头信息 >>> r.cookies #返回cookie >>> r.history #返回重定向信息,当然可以在请求是加上allow_redirects = false 阻止重定向
9 超时
>>> r = requests.get('url',timeout=1)#设置秒数超时,仅对于连接有效
会话对象,让你能够跨请求保持某些参数
>>> s = requests.Session() >>> s.auth = ('auth','passwd') >>> s.headers = {'key':'value'} >>> r = s.get('url') >>> r1 = s.get('url1')
代理
>>> proxies = {'http':'ip1','https':'ip2' } >>> requests.get('url',proxies=proxies)
积木网推荐阅读:
Python Requests安装与简单运用
Python Requests安装与简单运用 requests是python的一个HTTP客户端库,跟urllib,urllib2类似,那为什么要用requests而不用urllib2呢?官方文档中是这样说明的:python的标准库urllib2提供了大部分
Python抓取电影天堂电影信息的代码 Python2.7MacOS抓取的是电影天堂里面最新电影的页面。链接地址:
python3使用urllib模块制作网络爬虫 urlliburllib模块是python3的URL处理包其中:1、urllib.request主要是打开和阅读urls个人平时主要用的1:打开对应的URL:urllib.request.open(url)用urllib.request.build_opene
友情链接: 武汉网站建设