MaxCompute 发展历程

内容纲要

一、前言

本文为您介绍了MaxCompute从诞生到成熟的发展历程。

二、关键性里程碑

  • 2009年9月,ODPS(即现在的MaxCompute)大数据平台飞天项目正式启动。

  • 2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。

  • 2013年8月,平台的单集群规模已达到5000台。

  • 2014年7月,平台开始对外提供服务,完全替换开源体系。

  • 2015~2018年,平台开始日趋成熟,ODPS更名为MaxCompute。单集群已过万台,性能再优化,实现了全球部署。

  • 2018-2022年,MaxCompute 3.0发布,性能再提升,综合成本降低30%,企业级安全性能持续增强,发布智能数仓及Hadoop联邦计算。

三、产品荣誉

  • 2022年11月,自研一体化大数据计算平台和数据仓库产品ODPS获世界互联网领先科技成果奖。

  • 2022年8月,MaxCompute在TPCx-BB 100TB标准测试中,连续6连贯全球冠军,保持性能和性价比第一。

  • 2021年12月,IDC发布《IDC MarketScape:中国政务大数据管理平台市场厂商评估2021》报告,阿里云位居行业领导者位置,产品能力居中国第一。

  • 2021年3月,以MaxCompute为核心代表的阿里云数仓进入 Forrester Wave 2021 Q1 云数据仓库卓越表现者象限,成为入选此次评测的唯一中国厂商。

  • 2020年11月,Gartner全球数据库魔力象限,阿里云位于领导者象限,MaxCompute和E-MapReduce提供了安全、稳定、高性能的计算平台。

  • 2020年11月,IDC Marketscape中国大数据管理平台,MaxCompute位居领导者象限。

  • 2018年11月,MaxCompute,DataWorks和AnalyticDB代表阿里云入选Forrester Wave™ Q4 2018云数据仓库报告。

  • 2018年9月,基于公共云的BigBench在100 TB规模上,MaxCompute的性能指标较2017年10月提升了一倍,达到18176.71 QPM(Queries Per Minute)。此外,在超小型10 TB规模的指标上,MaxCompute的性能是其他开源竞品性能的3倍。

  • 2018年4月,MaxCompute的多个客户案例荣获“2017大数据优秀产品和应用解决方案案例”奖。

  • 2018年3月,MaxCompute登上Forrester 《2018年一季度云端数据仓库》大数据服务榜单。

  • 2018年3月,Gartner发布了《2017年分析型数据管理解决方案(DMSA)魔力象限》报告,阿里云作为云服务商成功冲进Gartner魔力象限。

  • 2017年10月,TPC的benchmark适配MaxCompute,进行了全球首次基于公共云的BigBench大数据基准测试,数据规模拓展到100 TB,成为首个突破7000分的引擎,性能达到7830 QPM。

  • 2017年6月, MaxCompute获得中国国际软件博览会金奖。

  • 2016年11月,在CloudSort竞赛中,MaxCompute以$0.82/TB的成绩获得Indy(专用目的排序)和Daytona(通用目的排序)两个子项的世界冠军,打破了AWS(Amazon Web Services)在2014年保持的纪录$4.51/TB。

  • 2015年10月,在GraySort竞赛中,MaxCompute用377秒完成了100 TB的数据排序,打破了此前Apache Spark创造的1406秒的纪录。

四、产品认证

  • 中国内地首家工信部单集群万台扩展能力认证。

  • 工信部信通院和中电标准化研究院认证。

  • MaxCompute通过了独立的第三方审计师针对阿里云对AICPA可信服务标准中关于安全性、可用性和机密性原则符合性描述的审计。审计报告请参见SOC 3报告。

  • 中国信通院分布式批处理平台稳定性测试。

  • MaxCompute 以单集群三万以上节点通过中国信通院分布式批处理平台(大规模)测试评审认证。

五、深度参与和推动全球大数据领域标准化建设

  • MaxCompute代表阿里巴巴计算平台,成为国际TPC(Transaction Processing Performance Council)委员会大数据评测标准BigBench的委员会委员,是中国担任此国际性能标准化测试组织委员的唯一企业。

  • 全球两大热门计算存储标准化开源体系之一的ORC(Optimized Row Columnar)社区的PMC(Project Management Committee),MaxCompute成为近两年贡献代码量最多的贡献者,引导存储标准化。

  • MaxCompute积极投入全球热门的优化器项目Calcite,拥有一个专委席位,是中国内地前两家具备该领域影响力的公司。

原文地址:MaxCompute 发展历程

1 Comment

Leave a Comment

您的电子邮箱地址不会被公开。 必填项已用*标注

close
arrow_upward