Apache Nutch 1.14 发布,Web 爬虫

栏目: 软件资讯 · 发布时间: 7年前

内容简介:Apache Nutch 1.14 发布了。Nutch是一个成熟的、可用于生产的 Web 爬虫。 Nutch 1.x 可以依靠 Apache Hadoop™ 数据结构进行细粒度配置,这对于批处理非常有用。 更新内容: Bug 修复 [NUTCH-2071] - A parser fa...

Apache Nutch 1.14 发布了。Nutch是一个成熟的、可用于生产的 Web 爬虫。 Nutch 1.x 可以依靠 Apache Hadoop™ 数据结构进行细粒度配置,这对于批处理非常有用。

更新内容:

Bug 修复

  • [NUTCH-2071] - A parser failure on a single document may fail crawling job

  • [NUTCH-2235] - Classpath discrepancy with protocol-selenium in deploy mode

  • [NUTCH-2269] - Clean not working after crawl

  • [NUTCH-2295] - Nutch master docker container broken

  • [NUTCH-2297] - CrawlDbReader -stats wrong values for earliest fetch time and shortest interval

  • [NUTCH-2316] - Library conflict with Parser-Tika Plugin and Lib Folder

提升

  • [NUTCH-1763] - Improving comments on the Injector Class

  • [NUTCH-2034] - CrawlDB filtered documents counter.

  • [NUTCH-2035] - Regex filter using case sensitive rules.

  • [NUTCH-2046] - The crawl script should be able to skip an initial injection.

  • [NUTCH-2135] - Ant Eclipse build does not include protocol-interactiveselenium

  • [NUTCH-2193] - Upgrade feed parser plugin to use rome 1.5

完整更新内容请查看发布说明

下载地址:


【声明】文章转载自:开源中国社区 [http://www.oschina.net]


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

网页艺术设计

网页艺术设计

彭钢 / 高等教育出版社 / 2006-9 / 39.00元

《网页艺术设计》将软件技术与艺术理论进行整合,注重知识性与研究性、实践性与理论性、系统性与逻辑性,全面介绍网页艺术设计的基础知识与基本实践技能,既培养学习者的网页技术应用能力,又培养学习者的艺术审美、艺术创新和研究性学习能力,使学习者在有效的课时内学习和掌握网页艺术设计的理论与实践。 《网页艺术设计》的特点是具有完整的知识结构、合理的教学设计以及立体化的教学资源。教材共分为8章,包括网页艺术......一起来看看 《网页艺术设计》 这本书的介绍吧!

图片转BASE64编码
图片转BASE64编码

在线图片转Base64编码工具

SHA 加密
SHA 加密

SHA 加密工具

正则表达式在线测试
正则表达式在线测试

正则表达式在线测试