北京时间2016年11月15日,全球超级计算大会(SC16)在美国盐湖城召开,每年公布两次的TOP500榜单令人关注,TOP500.org也在大会前夕提前放出了最新榜单,来自中国的“神威·太湖之光”再夺榜首,这款性能接近于第二名性能三倍的超级计算机自今年6月的ISC上就开启了HPC新时代。作为现在的榜眼曾经3年6次获得状元的天河二号来说也继续保持TOP500榜单夺冠次数最多记录,不知道“神威·太湖之光”在未来是否能够打破这一记录。
往日的Sequoia到了Titan,今朝的天河2号到了太湖之光。中国HPC市场愈发受到全球瞩目,而一场没有硝烟的战争也随之而起。
中美超算大战
在整个TOP500榜单里,中国和美国均以171套入选,并列第一,两者占总体近70%份额,无论是入选数量和性能表现上都势均力敌,这和今年6月ISC上榜单结果相似,中美两国在全球范围内的HPC竞赛角逐已经开始。
特别要提到的是:在171套入选TOP500的中国所属系统中,82套属于联想,占比48%,相比6月份ISC上再次提升2个百分点。接下来是曙光47套、浪潮18套、华为9套、国防科学技术大学(NUDT)4套、中国国家并行计算机工程和技术研究中心(NRCPC)2套,其它厂商合计9套。
事实上,TOP500自1993年开始对全球超级计算机排座次以来,中国在整体份额上和美国一直差距较大,直到SC15上才稍显起色,在今年则全面爆发,笔者截取最近5年10次TOP500中美榜单入选套数对比便可一目了然。
到底是什么原因让中国HPC在短时间内大幅进步?
从今年SC16榜单看,联想坐定了国内头把交椅,下面看看同时段下联想入围TOP500套数的变化:
我们看到在最近一年,联想入选TOP500套数数量快速提高,曲线整体走向与中国5年来曲线相似度极高,细节处在于中国入选套数上下波动的前4年,联想依旧保持了正增长。再结合SC16中国第一、HPC China 2016中国第一以及ISC 2016中国第一的成绩看:
现在的联想已经成为中国HPC市场的核心驱动力。
蜕变中的联想HPC
在SC16现场,联想数据中心业务集团产品及方案副总裁Madhu Matta提供了一张区域策略图,从网络、服务器、网络,扩大到整个生态系统。除了云端之外,也覆盖到了HPC、人工智能等很多的范围。
从2001年开始,联想就布局HPC领域,并不断丰富发展路线,从深腾系列到GPU+CPU异构架构,让联想一直处在行业前列,特别是联想在收购IBM x86业务后,从技术环节到方案设计,联想都获得了极大的发展助力,也逐渐在HPC市场形成规模效应,仅用2-3年时间入选TOP500套数就提高了近10倍。
联想数据中心业务集团全球高性能计算高级总监Scott Tease表示:今年跟CINECA合作的解决方案已经达到了6.2 PFlop/s,最终成绩欧洲第二,全球第12。未来,CINECA的分享会越来越多,在HPC 500里的重要性也会越来越大。联想给CINECA提供的解决方案已经进入了第二阶段。第一阶段在今年5月完成,里面有1500个计算结点,第二阶段有3600个英特尔Xeon Phi KNL系统。
当然,不断的技术创新和基于用户需求定制合理化方案也是联想HPC不断高歌猛进的动力之一。在SC16联想展台上,笔者看到Lenovo NeXtScal、数据中心架构、分布式存储解决方案、人工智能、机器学习、开源软件管理平台等产品与方案的展示。
NeXtScal采用联想首创的45℃温水水冷技术,性能更高、能耗噪音更低,为处理器、内存和I/O卡等组件提供降温,现场联想工作人员表示,会展上已经受到用户广泛关注,甚至包括友商人员的主动咨询。
联想NeXtScalnx360 m5
IDC预测HPC在未来主要挑战是软件、数据存储速度以及管理,联想具备全面的开发和应用经验,包括LiCO智能超算平台、基于混插的存储设备和面向HPC的设备管理系统,已经完整解决了未来将可能遇到的挑战。
除此之外,从2012年联想就与航天部共同创建载人航天工程总体仿真实验室至今,联想陆续提供的高性能计算设备已经超过千台。正在进行的神舟十一号载人航天任务中,联想提供了HPC和工作站产品助力航天工程。
对于HPC市场来说,应用化是最终商业路径的形态,联想在气象、制造、能源等行业都提供了解决方案,尤其在人工智能和深度学习方面更是提供了应用级方案。
整体来讲,联想结合自身丰富的产品线资源,为用户提供全面整合的解决方案。在DCG整体业务战略的推动下,联想HPC解决方案将更加市场化、商用化、普及化。
联想中国的HPC团队也通过项目快速成长,销售团队已经可以触及到三四级城市,覆盖市场更深,这也体现了联想在方案的市场化、普及化和商用化上的坚持。
HPC与云计算的博弈
随着基于云平台的系统进入TOP500,以及公有云厂商提供云端HPC服务,这两种在应用场景上有些背道而驰的计算形态开始出现交集。Gartner2016技术成熟曲线显示,在教育行业,Cloud HPC已经正式进入应用阶段,这对通过云端解决HPC业务的用户来说是一个重要信号,Cloud HPC在快速部署科研环境下较便捷、低成本的选项。
恰恰联想的HPC大都基于民用实用领域,这对客户的经济意义和实用效果很重要,而云端HPC正是面向在成本、运维等角度无法使用物理机的客户,这会不会在商业市场上形成竞争和冲突呢?
联想方面表示:云计算专注的还是通用计算,主要提供动态部署能力,甚至在很多情况下为了灵活而牺牲性能也在所不惜,HPC刚好反过来。以HPC云端应用来讲,HPC的资料非常多,把资料从这个数据库移到另一个云端数据库将会成为HPC云端所遇到的最大的挑战。
这种冲突目前看是非常直接的,因为几十年物理机的发展不可能被云计算快速替换掉,用户在追求HPC高性能的同时如何将资源利用的更有效率会显得更有意义。这是一个行业性问题,但联想已经在客户需求把控和产品方案融合上做到领先,我认为这反而会是联想一个新的竞争力。
最后,虽然联想在全球HPC领域已经取得了不错成绩,尤其是在中国市场确立了领袖地位,但笔者认为这才是联想爆发期的开始,通过10多年的积累,获得了强大的爆发势能,借助商业市场获取更多客户需求信息,建立行业多种成熟方案,进而转换成内部优势加速前进,两者叠加将进一步放大联想HPC前进的脚步。联想官方说其HPC进入了大满贯时代,其实,联想大满贯后时代更值得我们期待。