python3.x以上 爬虫 使用问题 urllib（不能使用urllib2）

内容简介：python3.x以上 爬虫 使用问题 urllib（不能使用urllib2）

问题一： python 3.x 以上版本揽括了 urllib2，把urllib2 和 urllib 整合到一起。

 并且引入模块变成一个，只有 import urllib

# import urllib
# import urllb2

#正确使用

import urllib

　　所以不能使用 urllib2.urlopen()方法，否则会报错无此模块。

NameError: name 'urllib2' is not defined

　3.x以上版本　# urllib2.open  不能使用，用urllib.request 模块 代替urllib2

1 import urllib.request
2 
3 response = urllib.request.urlopen('http://www.baidu.com')

问题二： 变量名不能与引入模块名方法相同，否则会引起错误

 1 import urllib.request
 2 
 3 #错误写法
 4 
 5 request = urllib.request.urlopen('http://www.baidu.com')
 6 
 7 #否则 TypeError: 'module' object is not callable
 8 
 9 #正确写法
10 
11 rqs = urllib.request.urlopen('http://www.baidu.com')

问题四 print 输出问题

　　3.x  版本 print 已经成为一个方法， 输出任何东西都要需要被 （）括号 包括，不然会出现问题

第一步初步 方法 爬去百度首页

1 import urllib.request
2 
3 rqs = urllib.request.urlopen('http://www.baidu.com')
4 
5 html = rqs.read()
6 
7 print(html)

以上所述就是小编给大家介绍的《python3.x以上 爬虫 使用问题 urllib（不能使用urllib2）》，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持！

关注我们，获取更多IT资讯^_^

标签： python

• Python爬虫之使用celery加速爬虫
• python网络爬虫（14）使用Scrapy搭建爬虫框架
• 11、web爬虫讲解2—Scrapy框架爬虫—Scrapy使用
• Nodejs爬虫，使用cheerio+request+phantomjs实现超简单爬虫
• 使用logging管理爬虫
• 如何使用Nodejs爬虫看漫画

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。