WebMagic 0.7.1 版本发布,Java 爬虫框架

栏目: Java · 发布时间: 8年前

内容简介:WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架 黄亿华 发布于2017年06月04日 收藏 0

WebMagic 0.7.1 版本发布,Java 爬虫框架

【上云狂欢节】6元虚机+9元建站+免费套餐,将普惠进行到底!>>> WebMagic 0.7.1 版本发布,Java 爬虫框架

WebMagic 0.7.1 版本发布,Java 爬虫框架

此次更新包含几个比较大的Bugfix,以及一些遗留问题的改进。

  • 修复0.7.0引入的RedisScheduler无法使用的bug。 #583

  • 注解模式的JsonPath默认会指定source为RawText,不再会出现自动为头尾加了<html>标签导致无法解析的情况。 #589

  • RegexSelector之前版本默认匹配group1,并通过对无捕获组的正则头尾加括号的形式来统一抽取内容。在0.7.1版本改为不再改变正则,而是通过匹配group0还是group1来实现匹配,见 #559 。新做法可以减少一些特殊用法的出错几率,例如零宽断言( #556 )。

  • 重构了ObjectFormatter部分,修复了ObjectFormatter无法初始化参数的bug。 #570

相关链接

  • WebMagic 的详细介绍:点击查看
  • WebMagic 的下载地址:点击下载

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。

转载请注明: 文章转载自 开源中国社区 [http://www.oschina.net]

本文标题: WebMagic 0.7.1 版本发布,Java 爬虫框架

本文地址: https://www.oschina.net/news/85474/webmagic-0-7-1


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

硅谷之火

硅谷之火

迈克尔·斯韦因 / 王建华 / 机械工业出版社 / 2001-1-1 / 34.00

我们今天正处于这样一个时代:充满幻想的人们发现他们获得了他们曾经梦寐以求的力量,并且可以利用这个力量来改造我们的世界。 这是个转折的时代,跨国公司迷失了发展方向,而小企业家却举起了计算机革命的大旗,成了开拓未来的先锋。在这个时代里,计算机奇才的脸上露出了胜利的微笑,胸怀 大志者成了富有理想的人,而富有理想的人则成了亿万富翁。这是一场真正的革命,它促使人们变得伟大,变得富有而充满理想,自豪而富......一起来看看 《硅谷之火》 这本书的介绍吧!

JS 压缩/解压工具
JS 压缩/解压工具

在线压缩/解压 JS 代码

URL 编码/解码
URL 编码/解码

URL 编码/解码

MD5 加密
MD5 加密

MD5 加密工具