内容简介:来自首次Ray聚会的记录Ray已经开始被用来给大规模实时人工智能应用进行赋能
来自首次Ray聚会的记录
Ray已经开始被用来给大规模实时人工智能应用进行赋能
Ben Lorica, 2018年8月15日
编者注:如果想学习使用Ray,读者参考2018年9月5日在旧金山(或10月9日在伦敦)召开的人工智能大会上3小时的教学议程“ 用Ray来构建强化学习应用 ”。
由于大量的标记数据集、面向数据科学家的语言(R、Julia、Python)、诸如scikit-learn、PyTorch、TensorFlow等的框架以及用于构建支持端到端应用的基础架构 工具 越来越多地出现, 机器学习正在被加速采用 。虽然无监督学习的一些有趣应用开始出现,但当前大多数的机器学习应用依然依赖于监督学习。在最近的 一系列博文 中,Ben Recht 说明 了为什么一些最有趣的问题可能实际上属于强化学习(RL)的范畴。特别是那些能够根据过去的数据采取行动的系统,使用强化学习能让它们以更安全、鲁棒和可靠的方式运行。
但是,首先我们要能有从业人员可用的强化学习的工具。不像监督学习,在过去一段时间里,并没有一个开源工具可以让大家很容易地尝试大规模强化学习。我认为现在不同了。我非常幸运地被邀请参加首次专门针对 Ray 的聚会。Ray是 RISE实验室 开发的高性能分布式的计算引擎,专门针对新出现的人工智能应用,也包括那些依赖强化学习的应用。这个聚会是由 OpenAI 组织的一个小型、只邀请参加的聚会。大部分与会人员都对强化学习非常感兴趣。
下面是这次聚会的一个简要概述。
- Robert Nishihara 和 Philipp Moritz 对Ray项目做了简单的概述和进展更新。也讲述了Ray项目近期路线图里的一些项目的情况。
- Eric Liang 和 Richard Liaw 针对构建于Ray上的两个库做了简要的教学讲解。这两个库是 RLib (针对可扩展的强化学习)和 Tune (一个超参数调优框架)。他们也介绍了最近一篇关于 RLib的ICML的论文 。这两个库对于熟悉 Python 的人而言都很容易使用,而且会在数据科学家群体内变的流行起来。
图1 RLib和强化学习。图片由RISE实验室友情提供
- Eugene Vinitsky 展示了一些不错的视频。它们讲述了Ray是如何帮助他们实时地理解和预测交通流量模型,以及Ray是如何帮助研究人员 研究大型交通网络 的。这些视频是我所见过的整合IoT、传感器网络和强化学习的最好的例子。
- 来自蚂蚁金服的Alex Bao 讲述了他们找到的应用Ray的三个场景。我不太确定我是否可以在这里透露这些场景。但是它们都是非常有趣和重要的场景。 这个夜晚最重要的收获是蚂蚁金服已经在三个场景中的两个的生产系统里使用了 Ray 。而且他们也已经即将在第三个场景里部署 Ray 了。 鉴于 蚂蚁金服 是 世界上最大的独角兽公司 ,这可以说是对Ray的最佳背书。
根据这个夜晚的演讲人所提供的信息以及已经出现的生产系统里的早期案例,我认为本次Ray聚会将点燃其他地区对Ray的热情。我们尚处于采用机器学习技术的早期阶段。本次聚会的演讲验证了:一个类似Ray这样可获取和可扩展的平台可以激发出很多强化学习和在线学习的应用。
想更多了解Ray:
- 访问 Ray项目在GitHub上的网页
- 参加在 2018年9月5日在旧金山 (或 10月9日在伦敦 )召开的人工智能大会上3小时长的教学议程“用Ray来构建强化学习应用”。
- 《 RLib库简介:一个可组合和可扩展的强化学习的库 》
- Robert Nishihara和Philipp Moritz的 O’Reilly数据播客秀 《 Ray是如何让持续学习可触及和更容易扩展 》
This article originally appeared in English: " Notes from the first Ray meetup ".
Ben Lorica
Ben Lorica是O’Reilly Media公司的首席数据科学家,同时也是Strata数据会议和O’Reilly人工智能会议的内容日程主管。他曾在多种场景下应用商业智能、数据挖掘、机器学习和统计分析技术,这些场景包括直销、消费者与市场研究、定向广告、文本挖掘和金融工程。他的背景包括在投资管理公司、互联网初创企业和金融服务公司就职。
Building blocks (source: Pixabay)
以上所述就是小编给大家介绍的《来自首次Ray聚会的记录》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!
猜你喜欢:- 图数据库爱好者的聚会在谈论什么?
- 玛氏集团推出 “The Cocoa Exchange” 巧克力主题家庭聚会策划活动
- 玛氏集团推出 “The Cocoa Exchange” 巧克力主题家庭聚会策划活动
- 当飞跃式技术遇上无界 er,12.28 第 12 期 MIXLAB 上海线下聚会
- 来自程序员老婆的吐槽
- 来自GitHub的系列渗透测试工具
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
世界是平的(3.0版)
[美] 托马斯·弗里德曼 / 何帆、肖莹莹、郝正非 / 湖南科学技术出版社 / 2008-9 / 58.00元
世界变得平坦,是不是迫使我们跑得更快才能拥有一席之地? 在《世界是平的》中,托马斯·弗里德曼描述了当代世界发生的重大变化。科技和通信领域如闪电般迅速的进步,使全世界的人们可以空前地彼此接近——在印度和中国创造爆炸式增长的财富;挑战我们中的一些人,比他们更快占领地盘。3.0版新增两章,更新了报告和注释方面的内容,这些内容均采自作者考察世界各地特别是整个美国中心地带的见闻,在美国本土,世界的平坦......一起来看看 《世界是平的(3.0版)》 这本书的介绍吧!