python爬虫爬取糗百成 人的妹子图片(urllib2)

栏目: Python · 发布时间: 8年前

内容简介:python爬虫爬取糗百成 人的妹子图片(urllib2)

本帖最后由 写代码的贺大师 于 2018-1-26 10:01 编辑

我一个朋友,单身已久,每天让我给介绍妹子,于是我写了一个 python 爬虫来暂时满足他。

python爬虫爬取糗百成 人的妹子图片(urllib2) python爬虫爬取糗百成 人的妹子图片(urllib2)

整个程序可以直接运行,并且亲自测试,没有下载的图片,出现破损,不能看的问题。图片有点小劲爆

说说写这个小爬虫遇到的小问题,urllib.urlretrieve()保存图片,有无法打开的问题解决办法:设置了详细的headers。

python爬虫爬取糗百成 人的妹子图片(urllib2)

这个爬虫实现了哪些功能1.可以按照页面来创建文件夹

2当出现了http_code ,500问题时,自动重新下载2次

3,下载过的图片,自动跳过

4,解决了图片下载不能打开的问题

python爬虫爬取糗百成 人的妹子图片(urllib2)

完整代码下载:

游客,如果您要查看本帖隐藏内容请回复


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

Kafka权威指南

Kafka权威指南

Neha Narkhede、Gwen Shapira、Todd Palino / 薛命灯 / 人民邮电出版社 / 2017-12-26 / 69.00元

每个应用程序都会产生数据,包括日志消息、度量指标、用户活动记录、响应消息等。如何移动数据,几乎变得与数据本身一样重要。如果你是架构师、开发者或者产品工程师,同时也是Apache Kafka新手,那么这本实践指南将会帮助你成为流式平台上处理实时数据的专家。 本书由出身于LinkedIn的Kafka核心作者和一线技术人员共同执笔,详细介绍了如何部署Kafka集群、开发可靠的基于事件驱动的微服务,......一起来看看 《Kafka权威指南》 这本书的介绍吧!

HTML 压缩/解压工具
HTML 压缩/解压工具

在线压缩/解压 HTML 代码

在线进制转换器
在线进制转换器

各进制数互转换器

RGB HSV 转换
RGB HSV 转换

RGB HSV 互转工具