服务器之家:专注于服务器技术及软件下载分享
分类导航

服务器资讯|IT/互联网|云计算|区块链|软件资讯|操作系统|手机数码|百科知识|免费资源|头条新闻|

服务器之家 - 新闻资讯 - 服务器资讯 - 百度智能云副总经理谢广军:开源生态推动云计算技术变革

百度智能云副总经理谢广军:开源生态推动云计算技术变革

2019-06-29 12:27中关村在线徐鹏 服务器资讯

2019年6月25日,由浪潮与OCP开放计算社区联合主办的首届OCP China Day(开放计算中国日)在北京正式开启。本届OCP China Day聚焦人工智能、边缘计算、OpenRack、OpenRMC、SONiC、OAM等前沿技术话题,来自Facebook、LinkedIn、Intel、微软、百度、腾讯

2019年6月25日,由浪潮与OCP开放计算社区联合主办的首届OCP China Day(开放计算中国日)在北京正式开启。本届OCP China Day聚焦人工智能、边缘计算、OpenRack、OpenRMC、SONiC、OAM等前沿技术话题,来自Facebook、LinkedIn、Intel、微软、百度、腾讯、阿里、诺基亚、中国移动、浪潮等资深技术专家分享了最新技术进展。近千名工程师和数据中心从业者参加了此次大会。

百度智能云副总经理谢广军:开源生态推动云计算技术变革

百度智能云副总经理谢广军

OCP是全球最大的开放硬件社区,2011年由Facebook发起成立,其宗旨是以开源开放的方式,重构当前的数据中心硬件,发展面向下一代数据中心的服务器、存储、网络、基础设施等创新硬件。目前,OCP核心会员超过200家。

百度于2019年3月14日,宣布加入OCP开放计算项目(Open ComputeProject),成为该项目的铂金级会员,致力于加强与项目成员在数据中心、AI硬件标准等方面的技术交流和联动,推动AI新硬件技术的加速落地,并通过制定统一的硬件标准降低落地成本。在本次OCP China Day上,百度智能云副总经理谢广军以《新技术驱动基础设施变革》为题进行了分享。

以下为大会演讲实录:

谢广军:大家早上好,刚才听了很多嘉宾的分享,我们可以看到过去十年中,开源开放,不管是软件的开源开放还是以OCP为代表的硬件的开源开放,对云计算产生了非常巨大的推动力。刚才英特尔的嘉宾讲,我们有很多新的技术、新的设计,也在不断推动着云计算的变革。今天我作为云计算的从业者,会从云的应用视角跟大家分享一下这些新的技术怎么样推动基础的云计算方面的变革,我们有哪些新的趋势。

云计算,用户需要的有这么几方面。我们需要为客户降低成本,需要有更低的成本,需要有极致的性能,有更为弹性的基础设施,有计算力驱动应用往前的发展。新的趋势是云、边缘和端的协同计算。当前云的计算,我们认为有几方面新变革推动着新的云计算模式往前发展,首先是我觉得和今天的主题很契合的,就是硬件,我们新的硬件技术推动着云计算产生了什么样的变革,第二是新的模式,比如Serverless化的模式,第三是智能化,第四是边缘。

硬件,我们在通用计算、存储、网络、异构计算有很多新的模式,比如存储领域,今天有英特尔的Optane这样的方式,网络我们有25G、100G已经广泛应用,软硬协同方面我们有DPDK、SPDK,我们有新的协议栈,有新的offload的方式,带来的是在云软件的设计上我们做的新的引擎、新的分布式协议、新的线程模型,给用户带来的更高的性能、更低的成本,比如新的模式,Cloud Native的数据库等等,这些最近几年发生了很深刻的变化。

我们举几个例子。我们在AI的时代,所谓的异构计算算力由通用向更专用的方向发展,百度也在自己做昆仑芯片,我们下半年会基于昆仑芯片的计算实例计算云主机,这个云主机的性能或性价比我们需要做到业界最高。我们要求芯片能够实现完整的虚拟化,一个芯片能分配给多个云主机同时进行使用,使得我们在异构上需要以更低的成本提供更好的性能。

比如在网络这块,以前纯靠软件做云的network,今天我们有很多软硬件协同的方式,比如我们的SmartNIC,把我们的协议栈、分布式块存储的storage的前端接入,比如VXLAN的解析,我们把它offload到SmartNIC上,使得我们获得极致的性能。我们会做Hyper的Offload,使得云主机既有裸金属的性能又有传统的可管理性。在存储领域,比如我们的块存储,大家都知道云上用的磁盘分成本地化和分布式的块存储,分布式块存储有很多好处,比如管理更灵活。今天我们新的网络的性能,我们有25G、100G,我们有新的存储介质,我们有RDMA,我们现在推出一款Nearlocal的block storage,既有接近本地的吞吐和延时的能力,同时我们还会有云磁盘的快照、备份、DR等可管理性,这块也是软硬件协同的结果。

在存储领域,比如我们的对象存储,今天市面上见到的更多的是标准的冷的存储等东西,今天应用磁带接入到对象存储中,我们提供了归档的存储模式,这种归档的存储模式使得单个带库的容量会提高很多,单GB的存储成本会急速下降。当我们推出这样一个东西的时候,成本是我们以前做到的对象存储里最冷的那一档成本的15%,这块我们有接近一个数量级的成本的降低,在很多场景有非常大的性价比的提升。

在存储领域,我们再举个例子。尤其在机器学习和HPC领域我们有大量的非结构化的小文件需要读取写入。传统是用全闪的分布式文件系统承载它的存储,今天我们把存储系统的设计用新硬件和软件重新做一些设计,比如我们把存储系统的源数据的cache用更高性能的比如英特尔的Optane承载,我们推出了一款适合于机器学习的storage的产品,它能够在读写混合的场景和纯读的场景IOPS差别不超过10%。我们曾经测试过文件数从1亿涨到80亿,对文件访问性能的降低不超过5%,相对于全闪方案我们成本能降低22%。

刚才讲的新的硬件或软硬协同给我们带来的一些变化,接下来的一个趋势,我们在云这块一直强调,上一代的云是我们的主机实力,我们的存储大家最常见的IaaS,接下来会发生什么变化,我们认为是Serverless,为什么是Serverless,这里面有几个原因。无服务器带来的好处是使得我们站在用户的视角来看,我们有更好的弹性、更好的成本节省,使得我们的用户只专注于自己的业务逻辑而无需关注底层的资源,屏蔽底层资源的编程,所有资源都是按需提供的而且是很细粒度按需提供的。这里面有一些业界同行的例证,未来几年对AWS来说最重要的趋势是什么,应该是在Container和Lambda上,Serverless将成为未来云计算时代默认的计算算例,很大程度上会取代今天基于服务器的计算,我们如果梳理一下这个东西,我们从底层资源的角度从物理机到虚拟化,今天到云,再到函数,到Serverless。从应用的架构来说,从C/S、B/S到SOA到微服务,现在再提函数计算,这个趋势现在已经非常明显了。顺应这个趋势,我们今天在Serverless化上也会做很多的布局。以前传统的云计算会变成一个底座,比如VPC、主机、Storage,我们会提供新的Serverless化的基础设施,比如我们的安全容器、冷启动预热、存储计算分离等等一些技术平台。

接下来的趋势是智能化,我们前些年一直在提一个词叫自治,比如数据库自治。再早的时候对数据库来讲SQL的调优是靠人做的,自治是这个系统能不能自我完成,今天我们有了人工智能,我们有了智能化的武器,使得我们的基础设施也能够完全做到自治。比如我们通过大数据的统计、通过AI的技术使得我们的基础设施能够顺应智能化的趋势,带来的是降低成本、提高效益、优化体验和提升管理等等。

举两个例子,拿我们的存储系统举例,今天对于存储系统来,我们的对象存储从性价比上分了很多级。标准的访问性能最高,但是单GB的存储成本也是最高的。往下推出一个低频的,低频的访问性能比标准的低一些,但是存储成本也会更低。我们还有冷存储,刚才介绍了还有归档的冷存储,这些数据靠客户用户认识到自己的数据到底归到哪一档里是非常困难的,这个运维起来也非常麻烦。怎么办?我们需要提供智能化的生命周期,也就是说数据的流动不再依靠客户的感知,而是依靠我们自动给他的数据冷热程度的判断。今天业内首发了一个智能生命周期管理的服务,使得客户的数据在刚才讲的这些档次当中可以自由的流动,能为客户节省成本。根据我们的访谈公测用户反馈,单8K的消费相比以前客户自己管理的能降低30%,这是切切实实给我们客户带来的自身的价值。

再举个例子。我们的安全,以前的安全最头疼的就是我们需要不断的更新策略,安全攻防里有新的威胁我们就要有新的策略,策略需要不断的升级,今天我们有了智能化的武器,我们会推出安全大脑的解决方案,我们需要把整个感知数据进行汇聚,通过我们的模型,通过我们的专家系统进行安全思维的分析,再把它反馈到我们安全的设施当中,这样形成一个闭环,自动化地为用户提供更有保障的安全服务,这就是我们整体运用分析、决策和思维能力推出的安全的产品。

最后一点趋势,很多专家讲边缘计算的发展趋势和应用。从应用的角度来说,边缘计算给我们提供了很多的可能,比如我们就地的处理,我们提供更低延时的数据分析,有更好的娱乐互动的效果。从边缘的基础设施来说,基础设施IaaS、CDN也能成为一种边缘,CDN覆盖的是省或城市,随着5G的到来还有MEC,MEC可能覆盖一个小区或楼宇。同时在物联网上还有真正的端,如何使端、边、云能协同起来,这是未来计算新的格局。网络这块我们需要高带宽低延时的网络全面拥抱边缘计算。Cloud Native或Serverless对边缘计算对云边协同的计算有计算范式上非常大的促进作用。顺应这种形势,我们推出了一系列的云+边+端的计算解决方案,比如边缘上我们可以提供IaaS,可以在CDN上提供容器、计算的能力、SDN网络的能力、Storage的能力,我们怎么分发计算呢?我们需要Serverless的分发计算的方式。今天有很多新的技术新的模式使得今天的云计算的内涵往前做了很大的拓展,我们接下来的云计算会有非常大的变化很深刻的变革,我觉得和传统有很大的不同,我们百度云希望能跟大家一起分享技术的前景带来的收益。

今天我的分享就到这里,谢谢大家。

延伸 · 阅读

精彩推荐