提升 maven 编译 scala 的速度

栏目: Java · 发布时间: 7年前

内容简介:我们 spark 的计算任务是用 scala 来写的,maven 编译,但是随着 scala 源文件的数量越来越多,(现在一个 project 已经 800+ 源文件了),编译速度成为了一个很大瓶颈,编译一次都要 10+ 分钟,大大影响了开发效率首先想到的是,排除掉一些与自己计算任务无关的代码,看看能不能加速,从这里看到但是我实际测试下来,发现并没有什么卵用,下面评论有人提到,是否是 src/main/scala 前缀的问题,但是不管我加不加这个前缀,都一样没用

我们 spark 的计算任务是用 scala 来写的,maven 编译,但是随着 scala 源文件的数量越来越多,(现在一个 project 已经 800+ 源文件了),编译速度成为了一个很大瓶颈,编译一次都要 10+ 分钟,大大影响了开发效率

首先想到的是,排除掉一些与自己计算任务无关的代码,看看能不能加速,从这里看到 https://stackoverflow.com/ques… 通过 exclude 的方式可以排除

<plugin>
  <groupId>org.apache.maven.plugins</groupId>
  <artifactId>maven-compiler-plugin</artifactId>
  <configuration>
    <excludes>
      <exclude>**/api/test/omi/*.java</exclude>
    </excludes>
  </configuration>
</plugin>

但是我实际测试下来,发现并没有什么卵用,下面评论有人提到,是否是 src/main/scala 前缀的问题,但是不管我加不加这个前缀,都一样没用

然后重新换个方向放狗搜,看到这里 https://www.lightbend.com/blog… 这个文件介绍了 zinc 的神奇功效,堪比大力丸,然后又看到这里 http://hohonuuli.blogspot.com/… 这个文章介绍了 zinc server 的具体安装配置方式,于是就照葫芦画瓢,试试呗

首先从 https://github.com/typesafehub… 下载 zinc 的 zip 包,然而,发现这个东西在 Windows 上不好搞,卒

最终通过修改 eclipse 的启动参数 -Xmx8G -Xms4G 来加速,囧


以上所述就是小编给大家介绍的《提升 maven 编译 scala 的速度》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

组合数学教程

组合数学教程

范林特 / 刘振宏、赵振江 / 机械工业出版社 / 2007-4 / 49.00元

本书介绍组合数学中的基础理论和实际应用,讲述的内容非常广泛,讨论的问题涵盖组合数学所涉及的绝大部分领域。本书不仅包含了通常组合数学教科书中的经典内容,而且收集了若干新的内容,如Lovász筛法、范德瓦尔登积和式猜想、结合区组设计、码和设计等。 本书阐述深入浅出,简明易懂,适合作为高等院校高年级本科生与低年级研究生的组合数学课程教材,也适合作为数学和其他学科的研究人员的参考书。一起来看看 《组合数学教程》 这本书的介绍吧!

正则表达式在线测试
正则表达式在线测试

正则表达式在线测试

RGB HSV 转换
RGB HSV 转换

RGB HSV 互转工具

RGB CMYK 转换工具
RGB CMYK 转换工具

RGB CMYK 互转工具