首页|新闻|图片|评论|共青团|娱乐|时尚|财经|军事|体育|青年之声|高校|旅游|发现|视频|游戏|汽车|青春励志
阿里云计算能力三大突破 流计算2.0每秒峰值达千万QPS

发稿时间:2017-10-13 11:08:00 来源: 中国青年网

  中国青年网杭州10月13日电(记者 栗鹏菲)10月12日,阿里巴巴集团副总裁周靖人在云栖大会上发布了阿里云在大数据计算能力上的新突破:将BigBench数据规模扩展到100T;流计算2.0每秒峰值达千万QPS,整体链路延时亚秒级;E-MapReduce对比同类产品平均性能提升3倍。

 

  阿里巴巴集团副总裁周靖人与英特尔公司数据中心事业部副总裁Rob Hays。中国青年网记者栗鹏菲摄

  周靖人说,数据是机器智能创新的基础,拥有充沛的计算能力才能全面释放数据的价值。我们希望通过不断地释放阿里云的计算红利,帮助开发者抓住更多市场机遇。

  BigBench全球首次达到100TB

  TPCx-BigBench是大数据端到端真实复杂的业界领先测试基准,目前,TPC官网公布的测试最大规模为10TB,最佳性能是1491.23BBQpm。

  当天,阿里云与Intel合作,在最新的Intel硬件上,基于公共云发布的BigBench On MaxCompute+PAI,全球首次将规模拓展到100TB,达到7000 BBQpm,也是首个基于公共云服务的Benchmark。

  据介绍,大会结束后,MaxCompute会在公共云开放一个月的测试环境,并开源BigBench On MaxCompute+PAI的SDK(继承自TPCx-Bigbench,并使之运行在阿里云的大数据环境上),供开发者验证试用。

  在规模上的优秀表现,得益于MaxCompute的海量数据处理能力和机器学习算法高效性,MaxCompute基于阿里云自主研发的分布式操作系统飞天,单集群服务器规模可以达到万台以上,数据规模达到EB级。

  在性能上,MaxCompute新一代处理引擎从Compiler、Optimizer、Runtime等模块进行的持续深度优化。此外,MaxCompute与Intel开展深度合作,软硬结合深度优化。

  英特尔数据中心事业部副总裁Robert Hays - ”我们非常高兴能够和阿里云共同在最新的英特尔? 至强? 可扩展处理器平台上,对MaxCompute进行深度优化,并见证阿里云MaxCompute在BigBench测试中表现出的优异成绩。“”

  更快的流计算StreamCompute 2.0

  在流计算方面,周靖人透露将于10月底在公共云发布新的版本。StreamCompute 2.0基于Apache Flink,并为开源社区提供了大量阿里内部的改进和优化。

  新版流式计算2.0的特点包括:

  1. 高吞吐低时延处理能力,单作业峰值达数千万的QPS,相比于StreamCompute 1.0有10+倍提升

  2.SQL化的流式分析语言,由阿里巴巴计算事业部实时计算团队主导开发并回馈社区的BlinkSQL;BlinkSQL支持完备的流式处理语义,支持包括多种窗口、乱序容忍、完整DDL支持

  3. 精准的数据处理语义,提供Exactly-once处理语义,同时为减少磁盘IO,提供增量CheckPoint,优化存储空间。

  E-MapReduce性能3倍提升

  E-MapReduce产品是阿里云上基于开源大数据的云服务产品,包括15+个开源组件的一站式大数据解决方案。周靖人现场发布了基于本地硬盘以及计算存储分离的大数据解决方案。

  周靖人介绍,为了解决大数据处理以及机器学习的统一调度难题,E-MapReduce产品实现了CPU/GPU的混合调度方案,使得数据预处理以及数据训练可以在一个平台上解决。

  E-MapReduce对于数据读写的性能至关重要,产品通过对于对象存储OSS的优化,使得读写OSS的性能是同类产品的3倍,对于计算和存储分离的大数据解决方案的产品化形式变得可以落地。

责任编辑:高蕾
最新推荐
时搜热点
热点推荐

扫描二维码进入

“青年之声”移动版

扫描二维码进入

中国青年网公众号

x

关于我们太阳城娱乐乐天堂广告服务人才招聘申博驴彩彩票 www.hin.133426.com. 请发送qnb至10658000 订阅手机青年报

共青团中央主办 共青团中央网络影视中心承办 版权所有:中国青年网
信息网络传播视听节目许可证0105108号 京|ICP备11020872号-17 京公网安备110105007246
申博网址登入 菲律宾申博77登入 www.shenbo2.com 太阳城提款最快网址 申博下载
新葡京澳门 申博官方正网登入 澳门奔驰赌场备用网址 申博游戏优发娱乐 申博太阳城开户申博直营网
葡京娱乐场登入 现金牛牛赌场 太阳城娱乐和成彩票 www.38818.com 澳门乐中乐赌场开户
申博现金网能玩吗 彩票999娱乐直营网 申博彩客网 申博官网88娱乐 申博188娱乐平台