视频演讲: Twitter Heron: Streaming at Scale

栏目: 服务器 · 发布时间: 7年前

内容简介:符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意

个人简介

符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意分享工业化成果,在多个学术会议,大数据相关峰会,以及学校做过专题演讲。此外,我们在 2011年开源了Storm,后者成为目前业界最流行的分布式实时分析框架。分布式领域水深, 我也是初窥门径,目前也在编写实时分析相关技术书籍,很希望可以和大家多多交流,合作。

视频演讲: Twitter Heron: Streaming at Scale QCon是由InfoQ主办的全球顶级技术盛会,每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来,已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区,演讲嘉宾依据热点话题,面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

大数据时代的IT架构设计

大数据时代的IT架构设计

IT架构设计研究组 / 电子工业出版社 / 2014-4 / 49.00元

《大数据时代的IT架构设计》以大数据时代为背景,邀请著名企业中的一线架构师,结合工作中的实际案例展开与架构相关的讨论。《大数据时代的IT架构设计》作者来自互联网、教育、传统行业等领域,分享的案例极其实用,代表了该领域较先进的架构。无论你就职于哪一行业都可以从本书中找到相关的架构经验,对您在今后的架构设计工作中都能起到很好的帮助作用。 《大数据时代的IT架构设计》适合具备一定架构基础和架构经验......一起来看看 《大数据时代的IT架构设计》 这本书的介绍吧!

在线进制转换器
在线进制转换器

各进制数互转换器

随机密码生成器
随机密码生成器

多种字符组合密码

Markdown 在线编辑器
Markdown 在线编辑器

Markdown 在线编辑器