您现在的位置是:主页 > 手机快讯 > 三星 >
阿里云用377秒实现100TB数据排序,超越三星和百度!
发布时间:2015年10月28日 17:50:10 三星 人已围观
简介Sort Benchmark今日公布了2015年排序竞赛的最终成绩。阿里云以377秒的优异表现完成了100TB数据排序,成功打破了Apache Spark原有的23.4分钟纪录。此次赛事吸引了全球多家科技公司的参与,展...
今天,新标360快讯报道称,Sort Benchmark在其官方网站上发布了2015年排序赛事的最终结果。其中,阿里云用时仅为377秒完成了100TB数据的排序,创造了比Apache Spark原有的23.4分钟纪录更短的新成绩。Sort Benchmark被誉为全球科技企业的“计算奥林匹克”,而此前Hadoop的纪录为72分钟。
Sort Benchmark的排序赛事包含四个项目,其中GraySort和MinuteSort主要评估计算系统的规模与效率,属于四项赛事中价值最高的两项。每项赛事又分为通用排序(Daytona)和专用排序(Indy)两个类别。阿里云的飞天分布式计算系统在这两项重要赛事中创下了全部四个项目的世界纪录。
GraySort测试的是极大规模数据排序的速度,飞天系统在377秒内完成对100TB数据的排序,也就是说每分钟可排序15.9TB数据,而去年的Apache Spark仅得到4.35TB/分钟的成绩。MinuteSort则测试系统在一分钟内完成的排序数据量,飞天系统在一分钟内排序了7.7TB数据,而去年的冠军三星的成绩为3.7TB。
阿里云的首席架构师唐洪指出,排序是最基本的计算问题。100TB的排序意味着将1万亿条随机的100字节记录,按照从小到大的顺序排列,这考验了分布式系统在存储、调度和通信等子系统中的性能,能够真实反映出一个平台的整体计算能力。GraySort和MinuteSort竞赛充分展示了阿里云在计算能力方面的实力。
据悉,Sort Benchmark是一个专注于排序基准测试的非盈利机构,每年举办一次国际级排序基准测试比赛,被认为是计算领域的奥林匹克盛会。全球领先的公司和学术机构都会参与,展示他们的最新研究成果。
世界排序大赛官方网站公布的结果:http://sortbenchmark.org/