视频演讲: Twitter Heron: Streaming at Scale

栏目: 服务器 · 发布时间: 6年前

内容简介:符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意

个人简介

符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意分享工业化成果,在多个学术会议,大数据相关峰会,以及学校做过专题演讲。此外,我们在 2011年开源了Storm,后者成为目前业界最流行的分布式实时分析框架。分布式领域水深, 我也是初窥门径,目前也在编写实时分析相关技术书籍,很希望可以和大家多多交流,合作。

视频演讲: Twitter Heron: Streaming at Scale QCon是由InfoQ主办的全球顶级技术盛会,每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来,已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区,演讲嘉宾依据热点话题,面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

Programming Python

Programming Python

Mark Lutz / O'Reilly Media / 2006-8-30 / USD 59.99

Already the industry standard for Python users, "Programming Python" from O'Reilly just got even better. This third edition has been updated to reflect current best practices and the abundance of chan......一起来看看 《Programming Python》 这本书的介绍吧!

SHA 加密
SHA 加密

SHA 加密工具

XML 在线格式化
XML 在线格式化

在线 XML 格式化压缩工具

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具