urllib2的Openers和handlers

最新推荐文章于 2019-08-19 20:27:55 发布

Penguinbupt

最新推荐文章于 2019-08-19 20:27:55 发布

阅读量1.2k

点赞数

CC 4.0 BY-SA版权

分类专栏：爬虫文章标签：爬虫

本文链接：https://blog.csdn.net/u010566813/article/details/46459607

爬虫专栏收录该内容

8 篇文章

订阅专栏

本文详细解析了urllib2模块中的Opener和Handler的概念与使用方法，包括HTTPCookieProcessor、HTTPHandler、HTTPSHandler等处理器的实例应用，并介绍了如何构建和安装Opener。同时解释了返回对象response的info()和geturl()方法的作用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

urllib2的两个重要的东西： Openers和Handlers

Openers：

   默认的opener是urlopen
   Opener对象都有一个open方法
Handlers:
   Openers使用处理器handlers，由它处理一些东西

handler = urllib2.HTTPCookieProcessor(cookie)

httpHandler = urllib2.HTTPHandler(debuglevel=1)

httpsHandler= urllib2.HTTPSHandler(debuglevel=1)

opener = urllib2.build_opener(handler,httpHandler,httpsHandler)

urllib2.install_opener(opener)

response = opener.open(request)

返回的对象 response,有两个方法info()和geturl()有两个方法

geturl()：返回真实的URL，因为有的时候会302重定向，原来的请求和真实的请求不一致

response.geturl()

info():返回的对象的字典响应头