2016云栖大会|阿里云唐洪:飞天,向世界要一个答案【网页版登陆】

本文摘要:仅次于1500台机器的集群,经常因为错误而被客户吐槽。

亚博在线登录网页版

仅次于1500台机器的集群,经常因为错误而被客户吐槽。当时,阿里巴巴的许多数据处理任务仍在开源软件Hadoop系统上创建,该集团约有3000-4000台机器。

【阿里巴巴集团技术委员会主席王坚】但Hadoop不管是安全性还是运营逻辑,都不是为公共云计算设计的。Hadoop的存储和计算是一体的,也就是说,如果需要10台机器的存储,但是不需要10台机器的计算能力,还需要10台机器的集群,这是浪费。

其他方法可以解决问题,但运营效率不会大幅度降低。Hadoop的账户系统不是面向网络租户的账户系统,而是面向当地的管理者。这要求不能像现在的蚂蚁云那样卖给网络水平的用户。此外,Hadoop具有很高的灵活性,允许应用层用户采访基础文件。

这不存在很大的安全隐患,也不可能以很多租户共享的形式在公共云上跑步。唐洪告诉他,以上所有缺点都很难通过修复来回避Hadoop。更重要的问题是,阿里巴巴当时业务的增长速度,已经是无限Hadoop集团的计算能力无限大。

超过瓶颈,必须减少业务水平,积极允许业务规模。到目前为止,阿里巴巴已经尝试了很多次,用飞天代替Hadoop,但结束了。

当时的阿里巴巴,CTO王坚对所有蚂蚁的童鞋说,这个任务必须让飞行分担。因为他心里有把飞行制作成5000台服务器的集团的计划。这个当时被很多同事嘲笑的可怕的想法是5K。

从1500到5000,在某种程度上买3500台机器很简单。唐洪说:摩尔法则预测计算机硬件性能随时间指数迅速增长。从1500台杨家机到5000台新机,算力减少了8倍到10倍。

仅仅半年就构筑了这么大跨度的软件能力升级,对于熟悉软件工程规则的人来说是不可能的挑战。但是,我知道了飞行。世界上负担得起五千台服务器的公司很多,但是需要自己开发的技术计划这么大的集团,一只手就能数出来。

为什么阿里云必建5000台机组?唐洪告诉他,对阿里巴巴来说,很多计算任务不能废除,必须在计算集团中完成。这么多相互联系的数据,必须有这么多机器在集团中共同分析。在2012年底的社长会上,明确提出了新的依赖。

但是,最后社长们要求两条路一起回顾,Hadoop也要飞。但是在我看来,这个决策分流了技术力量。

但是,当时我根据团队内部的模拟实验结果,心里确实超过了,5K已经不是结构设计的问题,而是产品细节的研磨过程。但其他部门的同事可能并没有这么指出。

这样两条路一起回顾,技术力量大幅度分流,5K必须早于一天,早于一天结束争论。他说。2013年8月15日,是唐洪脱口而出的日子。

这一天,事实判断王坚、唐洪、飞天的辨别是正确的。5K集团在线,同时在线2个5K集团。在阿里巴巴云栖的城镇,建立了尊的雕像。

这个雕像比想象的小,但是无法阻止周围充满理想的质感,很多路经的人停下来看。【位于阿里云浅海町的飞翔5K像】唐洪告诉他(公共编号:),之后的事实证明,Hadoop集团打破4000台机械集团后,不会遇到无法逾越的瓶颈。

网页版登陆

如果当时阿里巴巴自由依赖Hadoop系统的话,这么低的业务会迅速增加,不会遇到计算性能的悬崖,结果是无法想象的。像当时波音的747飞机、Intel的x86芯片、Spacex的火箭一样,所有最优秀的构造都来自孤注一掷。唐洪这么感叹。

不吃自己的狗粮在2012年或2013年我们开展学校招生时,清华北大的学生很少来试镜,而且很多同学得到我们的报价,他们的第一自由选择不是百度和腾讯。唐洪把这个悲伤的事实作为段落讲话。在今年的阿里星试镜中,唐洪回答同学问为什么自由选择来阿里云,得到的问题是阿里云的云计算技术领先。他简单地表现了现在的飞行:单集群万台,世界上共有数十万台服务器,每天数据平台处理的数据达到了1PB。

但是,他实际上不能说明飞行的强度,确实有说服力的是阿里巴巴不吃自己的狗粮,也就是说包括淘宝天猫在内的最重要的业务,包括瞬间计算的量令人难以置信的双十一,飞行负责云计算计算计划。也就是说,阿里巴巴自己也为其他客户提供完全相同的云服务,没有特权和差异。我相信国内一些竞争对手们自己的服务没有在自己家里得到的云里跑。

他说。引以为豪的阿里云数据之一是,中国37%的韩国网站在阿里云上。我们的预测是,未来世界上可能只有几台计算机,他们都是由超大规模的计算组成的。此时,计算能力不会完全和平。

如果唐洪的期待实现了,那时计算出腹纸箱石,就不会得出比现在更像真凶的解法。也许有一天我们总是去找接近正确的答案,但是机器接近正确的答案是不可避免的。每年向世界寻求答案,蚂蚁云在大本营杭州召开云栖大会,发表蚂蚁云和飞行的最新进展。在今年的大会上,马云公开发表了热情的演讲。

原来的机器生产不会成为人工智能,原来的机器不吃的是电,将来的机器不吃的是数据。马云说。机器学习和人工智能是飞行的下一步棋。

对于人来说,岔路口背后的岔路口,自由选择背后的自由选择,让我们感觉好像很焦虑。为了应对命运的世界,我们的发明者是云计算,我们的发明者是人工智能。

对唐洪和飞行来说,这些无数运行的芯片,无数网络中川流不断的电流,只有向世界寻求答案的目的。原始文章允许禁止发布。下一篇文章发表了注意事项。

本文关键词:亚博,网页版登陆,亚博在线登录网页版

本文来源:亚博-www.smyf7mall.com

相关文章