原标题:中国移动云能力中心首席科学家钱岭:中国移动云计算开源实践和策略
来源:移动Labs
 导语在日前召开的“第九届中国云计算标准和应用大会”上,中国移动云能力中心首席科学家、战略技术部总经理钱岭表示,开源和云计算是“相生相爱”的关系。同时他表示,借助开源社区的力量,中国移动快速构建了团队和能力,在云计算、大数据等领域,已经成为业界一支重要的力量,具备一定的话语权。但在某种程度上,难以全部掌控开源软件也带来了很多重复的代码合并工作量,并带来了潜在的合规风险。此外,钱岭强调,中国移动云计算的产品研发基本原则是“IaaS以我为主,PaaS为我所用,SaaS开放合作”。在云计算开源演进方面,中国移动坚持“IaaS产品逐步由转向自主研发,提升效率;PaaS产品引入开源并加强在开源社区的影响力,同时构建自己的开源生态;SaaS产品由合作单位的开源风险和问题。”01开源和云计算的“相生相爱”“开源既是行业生态,也是商业模式。”钱岭指出,开源给ICT行业生态带来了天翻地覆的变化;软件企业则充分利用开源模式构建新型竞争模式。开源给ICT行业生态带来的变化是天翻地覆。从系统软件延伸到全栈软件、从IT延伸到CT、从软件蔓延到硬件;从个别软件开发人员的行为,发展成为大批软件开发人员,还诞生专职开源软件开发人员和企业;从分散无序的个人英雄主义,逐步演变为全球化团队,并形成大教堂模式+分布式配置管理系统的流程和工具;从单纯地软件开发,进一步发展出来商业化服务;另一方面,开源软件形成了事实标准,打破了原先标准优先的行业态势;开源社区成为可以与标准化机构分庭抗礼的单位;开发人员通过发布开源软件、在开源社区积极贡献获得更高地认可度和任职机会等。此外,开源模式构建新型竞争模式。一些行业排名靠后的企业通过开源来打击排名靠前的企业;头部企业利用开源来展示技术能力,形成广告效应;初创企业通过开源软件快速构建技术能力获得客户和投资;最终用户通过开源软件降低采购成本;云服务商把开源软件包装为云计算服务,获得收入;集成商用开源软件取代商用软件为客户提供解决方案;ISV在软件开发中合法合规引入开源软件增强产品能力、缩短开发周期,增强竞争力。此外,一些软件企业还通过核心开源、工具或者服务收费的方式获得差异化竞争力
。少数企业面向付费用户开源增强用户粘性。部分企业通过销售限定使用范围的源代码获得高额收入等。钱岭指出,开源运动和云计算都是改变传统ICT行业的重要推手,前者是由具有开发能力的用户发起,后者由提供商发起。在他看来,“没有开源就没有云计算。”开源运动让全社会可以自由/免费获得包括Linux操作系统、Xen和KVM虚拟化、GCC等开发工具链、OVS虚拟交换机、Ceph和GlusterFS等分布式存储、MySQL和PostgreSQL数据库、Tomcat中间件、Redis缓存库等构建云计算系统的全部组成部分。钱岭表示,“包括AWS、Salesforce、GAE、阿里巴巴等国内外头部云计算服务商都采用了开源软件、商用软件和自研系统相结合的模式构建了云计算服务平台并对外服务;同时引入开源软件构建云计算生态系统。”“由于种种原因,开源系统会给云计算系统带来潜在风险,主要包括质量、安全、合规等问题。成熟活跃的开源软件,质量和安全问题相对较少,问题修复时间也比较短。新出现的开源软件质量较差。”钱岭认为,目前开源给云计算带来了三大风险。一是开源软件的质量层次不齐,一些主流开源软件质量较好、国内一些开源软件质量较差。二是开源代码库多数存在安全问题,78%包含至少一个安全漏洞,平均每个代码库包含64个漏洞。三是开源软件几十种协议,其中GPL系列、MPL均有传染性,要求提供用户代码,且涉及著作权等问题在钱岭看来,开源和云计算是相生相爱的关系。云计算服务商明明使用了大量开源软件,但是一般更强调自主研发是卖点。部分企业宁愿重新发明轮子,也不愿意使用开源软件。希望开源主导企业上云建设生态。积极参加开源社区,获得一定影响力。积极新建开源软件,引领社区,获得竞争优势。开源社区/开源主导企业方面,企业主导的开源软件修改许可协议,不允许云计算服务商免费使用,或者要求收费、或者要求修改开源。通过自建或者托管在公有云的方式,与云计算服务商利益共享。企业主导的社区中,其他人始终不可能获得统治权。云服务商积极加入到开源主导企业中,形成新的企业导开源社区。02云计算开源的“得与失”“从业务上看,云计算是中国移动基础性、战略性业务。”钱岭指出,云计算已经成为所有IT系统的对外服务方式;随着SDN、5G时代的到来,网络和通信系统CT也随之云化;5G和移动边缘计算(MEC)在工业领域的应用,工业互联网OT也成为云计算平台上的应用。中国移动对外服务的云品牌是移动云。移动云业务ToB业务的主入口、主品牌,业务的承载平台和分发平台;移动云分为公有云、私有云和混合云等形态,目前更广义的多云(Multi
Cloud)成为云计算业务的新形态。此外,钱岭特别指出,中国移动未来3年投入达千亿元,
拉动云计算、大数据、人工智能、边缘计算等相关产业上下游伙伴共同投入,共谋发展。从技术方面来看,云计算是中国移动5G+AICDE的承载技术。钱岭指出,“在数字化经济中,云管端边,缺一不可。云计算成为承载数据、提供算力、连接边缘、赋能终端的基础承载技术。”云网一体“没有云就没有网,得云者得未来”、
“云即是网,网即是云”。云数融合方面,数据的存储和计算均需要采用云计算技术,视敏感程度,决定采用公有云还是私有云承载。云智能方面,由于数据智能化处理的不同方式对云计算底层处理器提出了不同的要求,形成不同的云计算资源池。云边协同方面,数据和信息从终端、网关到边缘云和中心云,边缘计算和云计算是分工不同的云。中国移动从2007年启动“大云”云计算研发项目,历年来,不仅支持了内部IT系统改造,也支持了外部公有云服务。“中国移动做云计算十二年,“大云”5.0见证了云计算开源演进。”钱岭指出,“大云”5.0已经形成全栈云+云网一体能力,2019年开始,研发和运营重心全面转向公有云业务。在谈到中国移动“大云”5.0技术架构和产品体系时,钱岭指出,“大云”现有云计算、大数据、信息系统(BM域)、网管(O域)四大产品线,主要以云计算、大数据、信息系统的平台层和能力层为核心,产品覆盖面广、可以满足客户85%以上的云数需求。纵向上:往下向基础设施、硬件层钻研底层技术,为IT基础架构夯实基础;往上丰富上层应用,形成端到端解决方案,满足客户多样化需求。横向上:在技术驱动下,向
人工智能、边缘计算、物联网领域
延展;应用场景上,聚焦IT架构转型,逐步拓展至网络云化、垂直行业信息化。在介绍中国移动在主要云计算领域的参与情况时,钱岭总结道,“2018年主流开源项目贡献补丁
260余个,Ceph贡献国内第3、OpenStack贡献国内第6、Hadoop、PostgreSQL-XL等其他系统国内贡献排名5-8名,OpenStack全球黄金会员、中国首个OpenStack
SuperUser。”在谈到云计算开源得与失时,钱岭表示,借助开源社区的力量,中国移动快速构建了团队和能力,在云计算、大数据等领域,已经成为业界一支重要的力量,具备一定的话语权。但在某种程度上,难以全部掌控开源软件也带来了很多重复的代码合并工作量,并带来了潜在的合规风险。云计算开源的“得”的方面,中国移动取得了三大成绩:一是形成了一批可以商用交付的云数产品;培养了一支熟悉云计算技术、研发、方案和交付的核心团队,团队的招募和培养助力多、速度比较快。二是对内实现能力内化,大幅度降低了云计算和大数据系统的建设成本;对外获得收入、树立高技术形象。三是大规模开源云数软件的集成能力形成了中国移动的核心能力。同时,钱岭坦诚,在云计算开源的方面中国移动还存在四大不足:一是业务需求无法快速得到社区支持,需自主实现相关需求,导致产品代码和开源代码之间差异逐步增大,在产品化代码和开源代码之间的同步消耗了大量的人力。二是开源代码终究不是自己100%完成,在遇到故障时,需要投入更大的人力和时间来排查和定位问题。三是开源软件架构复杂、模块多,单个模块性能尚好,整个系统性能往往不足,且难以全局优化。四是开源软件许可协议复杂,除了相对友好的MIT、BSD、Apache协议外,往往还有具备传染性的GPL、AGPL、SSPL协议,内外、云化交付必须分别考虑合规性。03中国移动云计算开源演进策略钱岭指出,2014~2019年中国移动云计算以线下交付的私有云业务为主的“大云”交付业务为主,2019年我们的业务转变成以线上交付的公有云业务为主的“移动云”,业务模式变化带来开源策略的调整。技术产品(X)方面,传统软硬件产品,一般均可被转化为在线服务。例如短彩信网关、CRM软件等传统软硬件产品。业务产品(XaaS)方面可以是IaaS、PaaS、SaaS和融合类业务产品等(不含线下的解决方案和人工服务)。业务化(aaS)方面包含两方面。一方面改造工作,可伸缩性增强、多租户、用户界面和体验、增加API、移植到公有云IaaS和PaaS平台带来的改造等。另一方面是集成工作,与计费系统、网管监控告警系统、运营管理平台或SaaS市场集成等。据钱岭介绍,公有云业务产品有三种主要构建方式:早期,技术产品云化是构建业务产品的重要方式,包括自主研发、开源集成、技术引入技术产品等方式。随着公有云和生态的发展,还可以通过云原生开发、合营转售第三方云平台服务等方式构建业务产品。“云化主要适用于IaaS和技术类PaaS;云原生主要适用于能力类PaaS和SaaS;合营和转售主要适用于各种场景。”钱岭指出,三种构建方式对开源软件的引入和使用方法存在不同的要求。在谈到对于开源策略演进的思考时,钱岭强调,我们的产品研发基本原则是“IaaS以我为主,PaaS为我所用,SaaS开放合作”。技术产品云化技术PaaS及以下,IaaS“有选择使用开源”,新技术新产品方面保持开源路线,以合规方式快速形成能力;成熟产品逐步采用自有节奏开发,不再执行开源路线。技术PaaS“引入并开源”PaaS基础平台基于通用开源软件开发并产品化,时机成熟时,采用国产许可证发布为开源软件,构建PaaS
社区。此外,中国移动会积极引入各种开源技术PaaS。云原生开发能力PaaS及以上方面,通过能力PaaS“使用开源”,引入移动内部各种能力PaaS能力,包括各类行业等能力;开发行业云中台框架,并以开源方式建立社区,帮助企业上云。应用SaaS“使用开源”,自主研发,以合规方式引入部分通用开源软件。最后,钱岭总结道,“IaaS产品逐步由转向自主研发,提升效率;PaaS产品引入开源并加强在开源社区的影响力,同时构建自己的开源生态;SaaS产品由合作单位的开源风险和问题。”

C114讯
5月24日消息2019中国移动云计算大会今天苏州盛大举行,本次大会以“云启智能未来”为主题
,吸引了全行业超过1500名参会者。

澳门金莎娱乐手机版 1

中国移动在本次大会上正式发布了面向5G时代的战略级产品——“大云5.0”,全新推出了行业云、行业智能应用、超融合一体机、电信云、下一代网管等产品与解决方案。中移软件技术有限公司副总经理孙少陵发表了题为“云网融合,共创5G智能时代”的演讲,并对“大云5.0”进行了详细介绍。

云计算,这是自2008年全球金融危机以来全世界最热的词汇之一。世界各国、大街小巷,上至国家元首、下至家中老人,几乎全社会所有人都知道有这样一种新科技,叫“云计算”。

澳门金莎娱乐手机版 2

自从2006年,亚马逊公司对外发布了一种名为“Amazon Web
Services”的新型互联网服务以来,云计算的概念就逐渐被全球所熟知和接受。此后,几乎所有全球的高科技公司都卷入了云计算的大潮中,造就了一批明星公司或再造公司成为市场明星:包括中国的阿里云、腾讯云、百度云、华为云、紫光云、京东云、金山云、浪潮云等,美国的微软、谷歌、IBM、Oracle、VMware等公司,以及欧洲的SAP和工业4.0,无不因“云”而生/再生。

大云5.0,5G时代应用而生

2018年,全球企业、政府机构和组织等对云计算基础设施的花费达到8000亿美元,同比增长45%。这是美国市场调查公司Canalys于2019年2月发布的数据,云计算已经成为全球IT市场最重要的组成部分,而这一市场在2006年AWS推出的时候还为零。如果说云计算造就了亚马逊的新繁荣,那么微软在2018年底再登全球最高市值公司宝座的事实,又一次催生了全球对于云计算的热情。自微软新一任CEO
Satya
Nadella上任以来,大力扭转了微软在移动互联网时代的颓势,通过全力投入云计算特别是公有云服务业务,让微软成为新时代的新王者。据有关统计,仅2016年,微软、亚马逊和谷歌三家在云计算业务上的投入就高达315亿美元,平均每家当年投入百亿美元以上。

孙少陵表示,5G带了来“新3C”,使行业应用能够跟通信更好融合,从而使未来的社会真正步入智能化社会。为此,中国移动提出了5G+的计划,5G+AICDE,其中云计算是重要组成部分,将成为新型基础设施和战略入口。

而中国的阿里云也在云计算业务上投入高达百亿人民币,2008年到2018年的十年间,阿里云累计支出高达430亿人民币。根据2019年1月30日,阿里巴巴发布的2019财年Q3财报,2018自然年阿里云营收规模达到213.6亿元,首次突破200亿大关,阿里云4年间增长了约20倍,2018年底已成为亚洲最大的云服务公司。根据有关统计,40%的中国500强企业、近一半中国上市公司、80%中国科技类公司在使用阿里云。IDC的2018上半年中国云计算市场份额数据,阿里云已经占据中国43%的市场份额,连续三年排名第一,而在IDC的全球市场份额排名中为第三位,仅次于AWS和微软。

“大云5.0是我们5G重要的组成部分,它包含C、D和E三个部分,同时也对我们5G中的A和I提供支持。”他说。

而就在2010中国IT首领峰会上,腾讯马化腾当时认为云计算为时过早,百度李彦宏则认为云计算是新瓶装旧酒,只有阿里当时坚定投入云计算,马云曾承诺王坚对阿里云计算每年投入十亿研发费用。到2018年,腾讯宣布第三次组织战略转型,坚决投入云计算和ToB业务,晚了阿里云整整十年。而百度则一直在拓展非搜索业务方面乏力,百度云计算业务也远远落后于阿里云和腾讯云。到底什么是云计算,让BAT的三大佬曾经产生如此巨大的分歧,又在8年后达到一致的认同?不仅仅是BAT的三大佬,全球科技产业的领袖们都曾经对云计算有着各异的理解,例如硅谷传奇、Oracle创始人Larry
Ellison就曾经对云计算嗤之以鼻但后来又强力跟进并宣布全面向云计算转型,而IBM也曾经对云计算业务一度犹豫不决但后来通过收购的方式坚决进入了云计算领域。

相较于大云4.0,大云5.0实现了全新定位、全新升级、全栈支持。大云5.0为支撑5G发展,具有IaaS、PaaS、SaaS全栈服务能力,同时遵循中国移动融合、融通、融智发展理念,将与5G、人工智能、物联网等信息技术紧密协同,在互联网+时代,可以为客户提供一体化新型服务能力,助力行业数字化创新。

“All-In”是近年来经常听到的对于云计算业务的承诺,几乎所有科技企业高管都在重金投入云计算业务。而云计算也是最新一轮数字化转型的基础和“底座”,无论是人工智能技术、物联网技术、区块链技术还是产业互联网、金融科技、零售科技等都是搭载在云计算基础之上。云计算更是未来数字经济的基础设施,就是蒸汽和电之于上两轮的工业革命那样,云计算正在托起新一轮的工业革命——智能制造、工业4.0和数字经济。因此,想要理解数字化转型、想要理解数字经济,就必须要理解其底座:云计算。

详解大云5.0五大特点

到底什么是云计算?

具体来看,大云5.0具有五大特点,包括全栈的能力提供、电信级能力增强、广泛的产品兼容、高度的自主可控和优质的服务保障。

关于到底什么是云计算?这个争论持续了很多年,直到2017年到2018年才有了基本统一的理解。

在全栈能力提供方面,分别包括云管理平台能力、PaaS能力和IaaS能力的增强。据介绍,在IaaS层面,目前中国移动可以通过ODM和JDM的方式对硬件进行深度定制化,从而精细地匹配业务要求。在PaaS层面,中国移动增强了对各种中间件的支持,同时在PaaS上也提供了基于研发运营一体化的创新环境。在云管理平台方面,则适应云网融合要求打造了云网编排器,可以提供云互联、云专线以及云宽带等产品。同时中国移动也进一步提升了智能化运维的水平,来保证电信级的可运营、可管理的要求。

云计算的鼻祖AWS在2006年发布最初的云计算服务产品时,并没有采用“云计算”这个名字,而是以“网络服务”命名。AWS最早在2002年7月发布,最开始的时候是服务于对外开放亚马逊电商网站的技术和产品数据,以供外部开发者和商户调用和使用,围绕亚马逊电商网站而构建应用程序,例如帮助其它商户更好地在亚马逊电商网站上销售产品。2006年AWS重新发布的时候,推出的第一个产品就是S3,也是AWS最经典的产品,当时的新闻稿里是这样描述S3的:Amazon
S3是面向互联网的存储。

在电信级能力增强方面,分别包括电信级高性能和电信级可运营可管理。孙少陵表示,目前中国移动的云计算可以支持跨数据中心的容灾备份和高可靠的能力,同时支持电信级的可运营、可管理,“我们在多数据中心和多厂家异构管理这方面开展了很多工作,同时我们也配合集团打造了5G的网管,可以进行这种网络级的管理。”此外,中国移动还针对电信级要求,对云做了深度的优化,包括采用实时内核等技术,去降低转发时延,同时引入了SRV等技术来提高网络的转发性能。

最开始的S3,其核心技术思想就是通过互联网向开发者提供存储服务:S3让基于互联网的存储服务成为可能,开发者们不再需要关注到底在哪里存储数据、是否安全可靠、成本如何、存储空间是否足够等,通过互联网址“”,开发者就可以按需使用存储服务而不用自己购买、部署和维护存储服务器设备。S3在最开始发布时的价格为0.15$/每月/每GB数据存储服务以及0.2$/每GB数据传输服务。而S3的核心设计思想包括:去中心化、异步机制、自治系统、本地节点质量自控、可控的并发机制、容错、可控的并行计算、对称节点、简化、化大为小而美的构建模块,这些核心设计思想都成为了后来云计算系统设计的灵魂。

澳门金莎娱乐手机版 3

简单的理解,云计算就是把过去的企业IT,包括服务、存储、网络以及数据库、中间件、开发工具再加上CRM、ERP、HRM等应用软件,都通过互联网以网络服务的方式交付给企业用户使用。以前,企业需要自建多个数据中心,再购买相应的软硬件搭建起企业IT及企业IT服务,再通过内部网络服务于企业内部的各个业务部门,整个IT和IT资产全部都由企业自行投资、负担和运维。现在,由云服务厂商建立数据中心,把所有的企业IT服务都形成互联网上的网络服务,再以即用即租的方式供企业使用,这就是公有云。公有云让企业不必投资初始的数据中心以及后续的运营和维护,而只是像使用水和电一样从公有云厂商处租用即可。此外,由于通过互联网服务的方式向企业提供企业IT,那么其支持的企业IT和软件规模就从过去一个小范围区域上升到整个国家甚至可以全球支持,相应的云数据中心的组织和运营方式也与传统的中小型企业数据中心有所不同。

在广泛的产品兼容方面,包括安全管理层、中台能力层和基础设施层在内都有非常好的兼容性。在基础设施层,中国移动已与一些主流的虚拟化计算、存储厂家做了很好的对接的工作。“值得一提的是在SDN这块,SDN目前标准化程度较低,但它在云计算系统当中起的作用越来越大,所以我们现在跟所有主流SDN厂家都能够进行对接。”在中台能力层,中国移动现在与各种各样的中间件都实现了很好的对接,在安全层面也与主流的厂家都进行了合作。

2018年11月26日,《纽约杂志》intelligencer栏目刊登了对AWS CEO Andy
Jassy的采访,他亲述了AWS诞生过程:2000年到2003年间,亚马逊开始考虑和筹划后来的AWS,当时的起因是亚马逊网站增加了很多软件开发工程师,但开发软件项目所花费的时间却和以前一样多,其原因在于仅为了部署底层的存储、数据库或计算中的一项就要花费2-3个月的时间。为了方便亚马逊内部的软件工程开发,加速亚马逊互联网服务的上线速度,亚马逊高层启动了后来被称为AWS的项目,即像亚马逊擅长的运营零售行业基础设施那样,构建和运营可靠、可扩展、高性价比的企业IT和互联网IT基础设施。

在高度的自主可控方面,中国移动始终坚持自主研发云计算核心产品。“中国移动大云开发十几年来,深切体会到,只有我们坚持自主研发,掌握核心能力,才能给我们的客户带来持续不断的服务。我们的系统是基于开源,但是我们进行深度的。自己的定制,坚持自主研发。目前我们已提交发明专利258项,软件著作权96项。在云计算最主要的系统上,包括操作系统、数据库和服务器这方面,我们都做到了自主可控。”孙少陵介绍道。

2003年夏天的时候,亚马逊的高层问了自己一个问题:如果有公司会使用这些基础设施服务从头构建应用程序,那么这是否能够形成一套“互联网操作系统”,它的关键组件会有哪些?而在2003年夏天的时候,世界上还没这样的“互联网操作系统”。而亚马逊当时决定,要么就不做、要做就做大,于是时隔三年后的2006年才推出了AWS的第一项服务S3。

在优质的服务保障方面。中国移动可以提供公有云、私有云、混合云、电信云、行业云完整的解决方案,同时中国移动有很强的交付能力。目前中国移动已经交付的云计算项目超过一千个,现网交付的节点数超过十万。这几年中国移动也建立了从售前、售中到售后比较完整的服务体系,在加强管理的同时也积极申请各种资质,目前中国移动苏州研发中心是系统集成二级资质,也拥有核心云认证。

无独有偶,虽然微软晚了一步才开始对于云计算特别是公有云的投入,但微软公有云的名称“Azure”却也不是“云”的意思。Azure本身在英文中为“蓝天”的意思,也就是说微软Azure公有云的本意是为全世界做一个“虚拟”
操作系统,如果把全世界的计算设备都连在一起形成一台虚拟计算机的话,它的操作系统就是Azure。

基于大云5.0打造“移动云”全栈云解决方案

提到微软公有云Azure,就不得不提到微软两个首席软件架构师中除了比尔盖茨的另外一位,Ray
Ozzie。Ray
Ozzie曾接替比尔盖茨,于2006年到2010年出任微软的第二任也是最后一任首席软件架构师。在微软曾发布的一篇关于Windows
Azure的介绍中,提到Windows
Azure的最初想法来自于2005年10月,时为一份名为《The Internet Services
Disruption》的备忘录,其要点在于推动微软整体向互联网服务转型,而这份备忘录就是由当时刚加入微软不久的Ray
Ozzie起草的。

据了解,中国移动大云产品从2007年开始投入研发以来,经过十多年的发展,已经在金融、政务、教育、医疗、交通等行业均实现了广泛应用,服务超过25万家行业客户。

Ray
Ozzie在这篇纲领性文件中,记述了他针对后PC时代、面向互联网的计算架构最基本的思想。他提出了由面向服务的软件架构所实现的“无缝用户体验”,并将之解析为“无缝操作系统”、“无缝沟通”、“无缝生产力”、“无缝娱乐”、“无缝市场”、“无缝解决方案”和“无缝IT”。其中,“无缝市场”的思想已经基本由今天的电子商务网站所实现,阿里巴巴在美国纽交所的上市、亚马逊在中国开展海外直购、京东开拓政府采购市场等等,全世界逐渐被几张电子商务网络所覆盖。但当时Ray
Ozzie其它的思想,目前仍在实现中。

目前中国移动基于大云5.0打造了包括公有云、私有云、混合云等各种解决方案。在公有云方面,目前移动云采用了5+31+X的全国布局,节点数超过了一万节点。2018年移动云全网收入突破10亿元,在网客户数超过25万。

微软公有云为什么不被命名为Windows Cloud或Microsoft
Cloud,而是Azure?如果看过美国电影《终结者》,无一例外会对电影里设想的“天网Skynet”印象深刻。“天网”描述了一个所有的机器都连接进一个庞大的网络,从而形成了像天空那样的覆盖,让机器的智能无处不在。而深入研究Windows
Azure的架构,就不难发现,其实Azure的整体架构设计就反映了这样一个终极梦想场景下的“操作系统”。Azure有三个最基础的功能:计算、存储和网络通信,每个功能都通过庞大的数据中心以虚拟的方式实现。而如果对操作系统有最基本的了解,就会知道PC时代的操作系统其实就是由“计算、存储和网络通信”三个基础模块构成。不同的是,PC时代的操作系统由CPU、硬盘和网卡对应实现这三个基础模块,而在“全球所有计算设备连接成一台巨型虚拟计算机”的终极时代,这三个基础模块分别由庞大而互联的数据中心实现。

在私有云方面有两个典型案例。第一个是电信行业,中国移动集团内部的IT支撑云采用了“一级平台、两级管理”的架构,管理规模超过三万节点,这是基于开放平台打造的全球最大的云计算系统,直管的服务器集群规模达到了两万台,SDN商用集群的规模也是全球最大的,同时支持多厂商异构SDN解决方案。

如此,就不难理解,为什么微软公有云叫Azure蓝天,因为它为“天空”而生。而理解了这样的终极梦想,也就不难理解,为什么“软件定义一切”的时代终将来临。因为当全世界只剩下一台无所不在的虚拟计算机的时候,还有什么不是被“软件”所定义?在微软2018
Build开发者大会,微软CEO Satya
Nadella发表了演讲,他谈到了自己对智能云与智能边缘时代的看法,其中提到:“Azure正在成为一个世界计算机”,“如果你把世界想象成一台计算机,那么开发人员就是这个数字连接世界的新力量”。

澳门金莎娱乐手机版 4

Satya Nadella还提到:将近30年前,时任施乐PARC的首席科学家Mark
Weiser在一篇颇具影响力的论文中这样预测——在未来,计算将无处不在。这个预测正在成为现实,计算不仅仅是一个接口,还可以嵌入到任何地方、任何事物上,无论是家庭中还是城市中——世界就是一台计算机。

另一个是金融行业的私有云。中国移动从2017年开始配合工商银行打造全行的IaaS私有云系统,这个私有云系统实际上是涵盖了两地三中心,生产云、研发云、测试云一共23套基于Open
Stack的云计算资源池系统,目前服务器已经达到了4500台的规模,。

把整个世界看作一台大型计算机是微软CEO Satya
Nadella的愿景,也是很多计算机系统研究者的实践者的梦想。实际上,云计算特别是公有云,它成功让遍布世界的数据中心吸纳了全球大部分的计算和存储,而联网在一起的数据中心可以看作是由计算、内存、存储和网络及互联等部分组成的一台大型计算机,公有云软件系统就是从全局的角度考虑如何高效而可靠地协同各种软硬件和网络工作并对外为用户提供简单即用的互联网服务。

最后是混合云,中国移动在浙江移动打造了一个混合云的案例,它纳管了浙江移动的公有云以及中国移动集团的移动云还有阿里的公有云,实现了多云融合。此外中国移动还针对政务、教育、金融、工业等各个行业的特征,也能够提供行业的云解决方案。

从大型机、PC、传统数据中心到云计算数据中心,全球的计算体系结构经历了私有集中化到个人分散化再到集中化和社会化的过程。那么,什么是云计算呢?首先,云计算是针对企业IT和互联网IT的一种计算供应方式,是整个企业IT和互联网IT供应链的重组,即通过由公有云服务商统一拥有和管理的遍布全球的数据中心,为企业和政府机构的IT部门以及互联网公司的IT部门提供按需付费的计算能力。

“三位一体”打造云生态体系

这里面有两个视角,一个是从用户即企业、政府机构和互联网公司的角度来说,就不再需要自建数据中心和企业IT的能力,相应减少了固定资本和一定的可变资本,同时也不需要维护一个庞大的IT基础设施运维团队,也不需要2-3个月才能部署一个新应用所需要的底层存储、计算或网络,企业应用开发和更新周期可以缩短到一周多次甚至一天多次,企业IT人员也可以集中精力于业务和应用创新,而企业的IT成本也改为使用量付费,也无需在一开始就支付一大笔的数据中心及设备的固定投资。

在打造云计算生态体系方面,目前中国移动将其分为内、中、外三个环。内环:中国移动在积极地与各方合作,在其技术研发以及开源方面与行业企业进行能力的对接;中环:中国移动在积极地去集成,在产品和服务这方面进行互相之间的对接;外环:主要是在云上,中国移动的开放生态系统会提供丰富多彩的SaaS服务。

另一个角度是公有云服务商的角度,对于公有云服务商来说其实是要建设一个全社会共享的计算基础设施,AWS一开始也确实是从这个角度切入,即数据中心的资产所有权从企业让渡到公有云服务商手里,由公有云服务商统一打理和运营,公有云服务在此基础上再开发让多个租户共享使用计算能力的软件,这就是公有云的“操作系统”,即前面提到的互联网操作系统。

澳门金莎娱乐手机版 5

2016年初,美国寿险公司Tower Watson与微软智能云的HPC高性能计算和Big
Compute超大规模计算组一起,测试了一个计算量惊人的项目,即把地球上每一个人的寿险成本计算一遍。如果是一台单核计算机的话大约需要19年时间完成这个实验,而当时仅调用了微软在全球14个区域的云计算资源,就在12个小时内完成了这顶“壮举”。这项实验不仅证明了全球性超大规模计算的可能性,还在于12个小时后这些被“抽取”出来的巨量计算资源又被释放回了各国的“云基地”。而在进行这个实验的12小时内,外界还在同时使用其它的Azure云计算资源,并没有受到丝毫影响。这个实验形象的说明了,云计算提供了海量计算资源和强大的调度能力,让全球用户可以并行、并发地大规模地使用流动的计算资源,而不会因某个用户大量占有计算资源而阻碍了其他用户。

同时,中国移动现在也有三大创新的载体,第一个是和创空间,昨天中国移动云计算和大数据的和创空间正式落户在苏州研发中心;第二是移动云,中国移动此前启动了千帆计划,可以把一些优秀的SaaS应用整合到移动云上,通过收入共享分成的方式来打造一个共赢的生态系统;第三个,中国移动已经宣布在苏州成立一个工业互联网的示范区,苏州研发中心是其中的重要参与方,中国移动的云计算、边缘计算等能力,未来也会跟产业各方积极的整合,为苏州的产业转型升级贡献力量。

那么,问题就来了,排除了其它一切困难和挑战,谁有能力建成一个全世界共享的“计算机”?IT系统是人类社会秩序的映像,如果人类社会都无法统一成一个地球村,那么又怎么会出现一个真正的全社会共享的统一计算基础设施呢?因此,抛开不同的云计算技术而言,云数据中心的建设者也无法统一到一家云服务商的手里,而是像各国电信网络一样既有顶级和一级运营商也有二三四级运营商,形成一个既有商用属性、又有公用事业基础设施属性的新型数字经济基础设施网络。

不同的云计算技术流派

再谈回到云计算技术本身。前面已经讲了,所谓云计算就是把全社会的计算资源连接在一起,其中由公有云服务商运营的计算资源将占据越来越主要的份额。而超大型公有云服务商包括AWS、微软、阿里云、谷歌云、IBM云等,将有机会发展出超大规模跨地域互连数据中心的“操作系统”,这就是公有云软件,而把公有云软件缩小规模运行到中小型企业私有数据中心里就是私有云软件,连接公有云和私有云并且能跨两边调度计算资源的就是混合云软件。

公有云、私有云、混合云和传统IT是按照计算资源的所有属性进行的划分。而公认的云计算系统框架分为三层:IaaS、PaaS和SaaS,这三层可以理解为IaaS即底层的基础计算资源、PaaS即IaaS之上和应用层之下的中间层、SaaS即各类云应用。这三层的云计算系统架构,即适用于公有云,也适用于私有云和混合云。但架构仅仅是指导性,不同云计算厂商在实现的时候各有各的侧重和实现方式,因此导致了三层之间的边界混淆,也就导致了对云计算概念理解的混乱。

从前面的分析可以看出,所谓公有云软件或者“互联网操作系统”,主要是调用资源的规模大小有所不同。之前的Windows、Windows
Server、Unix、Linux已经形成主流的PC和服务器的操作系统,而云计算软件则在2006年之后的十年发展过程中经历了百花齐放再到收归市场主流地位的几大流派:

超大规模公有云软件。其中包括微软的Azure、亚马逊的AWS、阿里的Aspara飞天和Google云软件,这四家是经过实践锻炼出来的获得市场认可的云计算操作系统软件。微软提供了完整的从公有云到私有云再到混合云的微软体系软件,AWS提供了公有云和混合云的AWS体系软件,阿里云提供了公有云、私有云的阿里体系软件,Google主要是公有云软件,这四大家都是自行研发的软件体系且均覆盖IaaS和PaaS层以及有限的SaaS应用软件。

OpenStack和CloudFoundry开源云软件,主要是面向IaaS的建设。其中OpenStack本身是适合私有云的“操作系统”,而私有云的规模要远远小于公有云,不过随着OpenStack技术的发展,也有公有云服务商基于OpenStack技术提供公有云服务,当然是达不到四大超级公有云服务的规模;类似的,CloudFoundry主要是面向私有云的PaaS开源软件,也可以用于提供公有云服务,例如IBM
Bluemix云计算软件就是基于CloudFoundry;CloudFoundry的主要扶持厂商为VMware、DellEMC、微软、IBM等,因此更适合企业级IT环境。

VMware则是源自企业级虚拟化技术,成功向云计算模式转型,推出了适合于私有云系统的SDDC系列软件产品Cloud
Foundation,完全兼容传统的VMware虚拟化技术,同时也推出多种兼容和管理主流公有云软件的技术,是私有云和混合云IaaS市场的主导技术。

各类开源PaaS技术,其中包括著名的开源大数据技术Hadoop和Spark,也包括MongoDB、MySQL、PostgreSQL等云化和分布式数据库,分布式消息队列和应用服务器等技术,以及Docker容器和Kubernetes容器集群管理编排技术等。主流的开源PaaS技术由开源社交CNCF基金会主导,属于2016年以后开始兴起的技术体系。之前,开源社区的主要精力和热点主要集中于2010年开始兴起的OpenStack等基础IaaS开源技术,随着OpenStack等的逐渐成熟而开始转向PaaS开源技术,而2019年也被视为云原生PaaS技术的商业化元年。

Oracle和SAP公有云。Oracle是传统的数据库和企业级应用厂商,从2010年开始全力向云计算转型,在Oracle公有云数据中心里运行的是基于Oracle技术的软件,Oracle了推出了面向企业本地和私有环境的软件和硬件一体机,Oracle云的强项在于以云数据库为核心的PaaS技术以及ERP等企业级SaaS应用套件。SAP是传统的ERP厂商,2015年2月推出了面向云计算时代的第四代ERP产品S/4
HANA,可运行在多种云环境中,SAP还收购了多种SaaS应用以补充其ERP核心。

中小规模以及在开发中的公有云软件、私有云等,包括中国的腾讯云、百度云、华为云、紫光云、网易云、浪潮云等,还有创业公司UCloud、青云、EasyStack等,这些多以开放开源软件为基础并进行了改进,其软件也可以对外。而私有云软件主要是Linux、OpenStack、KVM、CloudFoundry等开放开源为基础,为企业提供集成服务;还有以VMware为主的非开源私有云软件,主要是为企业降低了人才以及技术更新的成本。

开源软件为云计算带来了DIY模式。什么是云计算DIY模式?简单说,就是提供不带任何软件的裸机服务器产品,由客户自行安装所需要的软件,思科高密度存储服务器就是这样的产品。除了裸机服务器外,裸机交换机也开始流行起来,不仅带来成本的大幅降低,更重要的是可以把裸机交换机纳入到数据中心的编排系统里,进行服务器、存储和网络的整体自动化管理。云计算DIY模式是建立在软件定义基础设施SDI之上,也就是把软件与硬件剥离,用通用软件管理通用硬件。比如原先的思科交换机就是专有软件加上专有硬件,而SDN软件定义网络则把通用X86服务器作为底层硬件,上层用软件交换实现交换机的功能。基于英特尔处理架构的服务器、存储和网络,就是标准化、模块化和通用化的硬件资源池。

说到开源云软件,就必须要提到OpenStack开源IaaS软件体系。简单来说,OpenStack是云时代的Linux。OpenStack为开源爱好者提供了一整套自由代码,可实现几乎所有IaaS类型的云环境,其目标是提供实施简单、可大规模扩展、丰富而标准统一的云计算平台。OpenStack是一个由NASA和Rackspace合作研发并发起的、以Apache许可证授权的自由软件和开放源代码项目。在2010年7月份NASA和Rackspace公司将OpenStack开源时,获得了25个企业和组织的支持。开源一年后,OpenStack就从42个组织成员和95个开发者增长到80个组织成员和1200个开发者及217个注册贡献者。得益于OpenStack的开放性,几乎所有的硬件厂商都在尝试往OpenStack加入对自己存储或网络硬件的支持,
OpenStack能支持所有的 x86架构服务器。

OpenStack项目最开始的想法是要与亚马逊云AWS对抗,通过开源的方式打破亚马逊云的市场垄断。OpenStack作为全球公认的私有云技术标准,也被部分公有云服务商用于提供公有云服务。截止到2018年5月,OpenStack基金会在全球182个国家有近9万会员、672家支持企业,开发了近2000万行代码。其中,来自中国企业的参与热情高涨,OpenStack基金会的8席白金会员中有两家来自中国,21家黄金会员中有浪潮、中国电信、中国移动等近十家中国企业。

根据2018年上半年的OpenStack用户调查,中国在OpenStack部署数量方面排名全球第三。在2017年11月于悉尼召开的OpenStack峰会的SuperUser的评选中,入围的四家当中就有三家中国企业。中国厂商占据OpenStack基金会黄金会员的半壁江山,特别是三家中国电信运营商的出现,表明OpenStack在运营商基础架构中的重要地位。加上腾讯晋级白金会员,而IBM、Ubuntu等退出白金会员,都说明中国厂商在OpenStack基金会的规模、层级、影响力不断提升,逐步成长为全球性领导力量。

OpenStack作为一种强大的基础架构解决方案,适用于发展中公司和成熟企业,并在企业级范围内得到验证。用户选择OpenStack的原因包括:避免供应商锁定、标准化全球公有云、私有云网络的相同开放平台及
API、提高运营效率、加快创新能力、实现安全/隐私目标、吸引顶尖技术人才等。到2018年,OpenStack比以往任何时候都更加丰富,由互补的技术服务组成的生态系统,可以让用户以一种高度灵活和高效的方式管理数据中心。作为基于开源技术基础的首选IaaS环境,OpenStack已经达到企业级成熟度。

随着OpenStack的成熟以及容器技术的发展,2018年5月21-24日,第十七届OpenStack峰会在温哥华开幕,峰会的主题为“Open
Infrastructure”。凸显OpenStack基金会积极拥抱变化、主动求变的态度更加清晰,也是OpenStack基金会开放代码、开放设计、开放开发、开放社区的四个开放原则的最佳实践。也就是从2017年开始,OpenStack已经扩展了自己的技术堆栈,以更加开放的方式,广泛连接企业基础IT技术生态,成为新的企业IT集成管理平台。不过,OpenStack是一个工程师的思维下的产物,本身比较复杂、技术性强,对企业的技术水平要求非常高。而市场缺的是运维和管理,这也造就了大量的商业机会。

作为一个开源软件与代码集成的引擎,OpenStack为企业数据中心网络中的裸金属服务器、虚拟机和容器等计算资源提供API接口,这让OpenStack越来越像是企业云数据中心的“操作系统”。HPE、思科、DellEMC、IBM、华为、联想、浪潮等国内外企业软硬件厂商,都支持OpenStack技术体系。在PC和PC服务器时代,DIY模式带来了整个生态系统的大繁荣,也让英特尔赚的盆满钵满。在云计算时代,英特尔当然也想重新建立DIY模式。英特尔从OpenStack社区一开始就给予大力支持。除了最早加入OpenStack基金会之外,英特尔还积极投资OpenStack公司。2015年英特尔向OpenStack社区最大的代码贡献企业Mirantis投资1亿美元,又陆续投资中国的OpenStack企业九州云和海云捷讯。在北美,2015年英特尔与Rackspace合作投资了两个1000节点的OpenStack集群,供开发者免费使用,建成后为全球最大的OpenStack开发云,双方还将组建全球最大的OpenStack开发团队。在中国,2012年英特尔联合发起了中国开源云联盟。

为什么云计算时代,开源软件能够成为一大主流派系?以网易为例,网易自己就全面采用了开源基础技术,仅有少量场景是自己研发,大部分的网易应用都采用了OpenStack、Kubernetes、MySQL等开源技术;而且在同类型的开源技术中,网易也是选择了更为主流的开源技术,比如在OpenStack和CloudStack中,网易就在OpenStack还不太成熟而CloudStack已经成熟的情况下,选择了OpenStack。为什么网易要坚定站在开源、开放这条路上?显然,一个很重要的原因是开源开放基础技术已经形成了一个完整的生态,有大量的技术公司、人才、高校、政府机构和用户的参与,相对在操作系统、数据库、中间件、应用管理与运行等对标过去软件体系的每一个软件堆栈,都形成了完整的标准体系和参与者生态,这个市场的形态已经成熟并且可以规模化扩展。

开源技术的坚定支持者还有IBM。在2019年2月12日-15日的IBM Think
2019大会上,IBM董事长、总裁及首席执行官Ginni
Rometty亲自参与了除主旨演讲之外的唯一一个分论坛并担任对话环节主持人,这就是“开源:企业的未来和创新的基石”分论坛。究竟开源这件事对IBM有多么重要,以至于Rometty要亲自站台并担任对话环节主持人?在2018年,IBM还耗资340多亿美元收购了Red
Hat红帽公司,这是一家专注开源领域长达25年之久的软件公司。然而,可能令外界意外的是,收购红帽公司并不IBM唯一在开源软件方面的投入。实际上,IBM对开源领域投资可以一直追溯到Linux时代,而著名的WebSphere
Application Server的70%以上都是开源的,包括了700多个开源组件。

在广泛的范围内,IBM参与上千个开源项目和社区。除了大量采用开源代码外,IBM还是向GitHub组织和代码库提供开源代码贡献最多的公司之一。IBM对开源项目的重大贡献包括:将Java运行时J9作为Eclipse
OpenJ9孵化器贡献给了Eclipse基金会、将用于Java
EE和MicroProfile应用程序的OpenLiberty
runtime贡献给了openliberty.io、向开放区块链项目Hyperledger
Fabric贡献了源码、向Apache
OpenWhisk贡献了无服务器平台源码、开放了IBM量子计算API Qiskit、开放了IBM
AI Fairness 360工具包和AI Robustness Toolbox
(ART)、开放了多个分析项目源代码并成为Apache Toree和 Apache
SystemML,以及2018年过去的3年里还有超过100个其它贡献。

IBM对开源的承诺和贡献在业界是长期而持续的,IBM服务于许多开源基金会董事会,包括Linux、Eclipse、Apache、CNCF、Node.js、Hyperledger等,成千上万的IBM员工在使用和贡献开源软件。IBM重视并致力于开放治理,因为IBM认为这是确保开源项目长期成功和可行性的最佳方式。IBM开发人员每天都在重要的开源项目中工作,每个月都为数百个开源项目做出数以千计的贡献。

2017年底,IBM基于主流开源技术推出了新一代的IBM私有云产品IBM Cloud
Private。ICP软件体系架构主要是基于开源的Kubernetes、Cloud
Foundry和各类管理工具。ICP是一个完整的私有云软件体系,从底层的传统企业硬件和IaaS到中间的PaaS以及向上层应用的“中间件”层和应用生命周期管理,还包括最上层的机器学习和人工智能开发平台以及现成的Watson应用,并支持其它企业SaaS应用。整个ICP是完全的开源开放,能够灵活的让企业选择不同的开源组件以及IBM专有软硬件,通过敏捷架构进行集成,让企业可以根据自己的数字化进程选择技术方案并连接整个转型和重塑的生命周期。更重要的是Kubernetes、容器和微服务这样一套技术体系,让IBM的软件可以运行在所有IT环境中,不管是公有云、私有云、混合云、混合IT还是IBM专有系统,Watson
Anywhere、Blockchain Anywhere等都成为了可能。

云原生技术

在整个2018年,有很多关于数字化转型的讨论。以云、大数据、人工智能、物联网和区块链等数字技术所驱动的企业数字化转型,最终的目标是什么?这就是云原生的数字企业,或者称为数字原生企业。简单的理解,数字原生企业,其核心竞争力在于大规模的云软件的开发、运维及运营能力。

数字化转型的目标一是让软件成为企业的核心能力,二是把软件作为数字服务对外输出成为企业的核心业务,最终成为数字原生企业。在这个过程中,就必须要提到Red
Hat红帽公司的Openshift、Cloud
Foundry基金会和CNCF云原生基金会,也就是OpenShift、Cloud
Foundry和Kubernetes这三大开源PaaS框架,也是数字原生或云原生的核心技术。

在了解三大开源PaaS框架之前,还要了解什么是Docker容器和容器化软件开发与部署。Docker翻译成中文是“码头搬运工”的意思,那么“码头搬运工”搬运的是什么?是标准化的“集装箱”,这个标准化“集装箱”里装的是应用程序。“码头搬运工”在世界上任何提供了标准化接驳的“码头”就可以接收标准化“集装箱”,然后快速安装、运行和管理“集装箱”里的应用程序,而提供标准化接驳“码头”的就是各类云服务商。借此,Docker把云计算环境下的应用程序开发和分发带进了工业化生产的时代,这就是Docker的意义。

在Docker环境下,程序开发者按一定的打包标准生产程序,生产出来的标准化程序被装进标准化的容器里,也就是“集装箱”。世界各国的云服务商都提供了标准化的“码头”,可以很容易地接收标准化的容器和里面的应用程序,再把这些标准化的应用程序以即插即用的方式组装到自己的个性化解决方案里,然后提供给最终用户。而与Docker“集装箱”对应的标准化程序架构,就是微服务。

Container与Docker是两个英文单词,Docker相当于是标准化了的容器,是容器技术近30多年历史发展出的最新结果。容器本质上是一种操作系统技术,是基于操作系统的虚拟化技术。基于容器开发的应用软件可以达到“一处开发、处处运行”的效果,而无关乎底层到底是什么样的操作系统或什么样的IaaS云服务环境。

作为操作系统级的虚拟化技术,容器技术本身的历史最早可以追溯到1982年。当时Unix推出的Chroot技术被公认为操作系统级虚拟化的起源,也就是容器技术最早的状态。2008年的时候,LXC也就是Linux容器开源项目成立,容器技术开始在业界广泛使用。

2010年,dotCloud公司成立了。dotCloud早期是基于LXC技术的PaaS平台,它的理念是提供跨底层IaaS云、支持多种开发语言的开发云平台。dotCloud的创始人在LXC的基础上,对容器技术进行了简化和标准化,命名为Docker后将其开源,同时推出了开放容器计划,Docker和Docker开源社区随后迅速火起来。2013年10月29日,dotCloud公司更名为Docker公司。随后,多家厂商开始宣布支持Docker。可以说X86架构的PC服务器是异构硬件架构的赢家,Linux和Windows是异构操作系统的赢家,Docker为基于X86服务器和Linux/Windows操作系统的云数据中心提供了统一的虚拟操作系统,异构架构时代开始结束。

说到容器和微服务,就必须要提到谷歌。谷歌在全球运维了上千万台的服务器,这个规模已经远远超出了很多现有技术供应商的上限,因此谷歌自己发明了诸多技术用于管理千万台规模服务器。比如谷歌研发了顶级的网络交换机,就连思科都造不出来这样的网络交换机。原因很简单,因为没有相应的实验环境。谷歌自1998年成立以来,已经研发和储备了很多“核弹级技术”,但这些技术绝大多数都被谷歌封锁,只能通过谷歌对外发表的学术论文找到蛛丝马迹。

谷歌为了避免使用市面上昂贵的基于物理机的虚拟化产品,同时也是为了更快、更便宜的发布自己的软件和服务,从一开始就研发了基于容器的新型虚拟化技术,通过这一技术简化了谷歌全部服务运行所需要的底层操作系统环境。2007年左右,谷歌刚开始研发容器技术,当时谷歌容器技术团队只有两个人。2015年的时候,谷歌所有的服务都运行在容器中,这包括了Gmail、地图、GFS文件系统、MapReduce等;谷歌每秒会启动大约7000个容器,每周会发布超过20亿个容器。每周运行20亿之多的容器,这让谷歌有能力发明很多关键性的容器技术,包括容器管理系统。谷歌容器管理系统的第一个版本被称为Borg,后续又发布了名为Omega的版本。通过这个管理系统,可以在谷歌的大规模集群资源上使用容器技术。后来业界根据谷歌的相关学术论文,模仿Borg开发出来的Mesos系统,被Airbnb、Twitter、苹果Siri等在使用。而后来著名的Kubernetes开源容器集群管理系统,就是由谷歌贡献出来的开源技术。

再说回Openshift、Cloud Foundry和Kubernetes。Openshift是一组由Red
Hat红帽公司开发和维护的基于Docker和Kubernetes构建的开源的容器云产品,可帮助企业和组织搭建及管理基于容器应用的私有云解决方案。通过OpenShift,企业可以快速地搭建稳定、安全、高效的容器私有云应用平台。OpenShift
Container
Platform是一个在企业数据中心本地部署的基于Docker和Kubernetes的PaaS平台,属于Kubernetes的社区发行版,该平台基于Red
Hat Enterprise Linux。Openshift
Origin是由开源社区维护的基于Docker和Kubernetes开源应用容器平台,OKD是Openshift
Online、Openshift Dedicated、Openshift Container
Platform的核心。Openshift Online是Red
Hat红帽公司的公有云应用开发和托管服务,该服务运行在AWS上。Openshift
Dedicated是Red
Hat红帽公司的托管私有云,运行在AWS和Google云平台上。此外,Openshift.io是Red
Hat红帽公司的应用开发环境。Istio是与Kubernetes配合的微服务网格治理开源框架,为Service
Mesh提供了一个完整的解决方案,以满足微服务应用的多样性需求。通过OpenShift家族系列产品,Red
Hat红帽公司构建了一整套服务于企业私有云PaaS需求的解决方案,这是也IBM于2018年以340亿美元收购Red
Hat红帽公司的重要原因。

Cloud Foundry由资深Java程序员Chris
Richardson于2008年开发,后2009年被SpringSource收购,而SpringSource则由大名鼎鼎的微服务架构Spring框架创建者所创建。SpringSource通过一系列收购获得了Tomcat、Hyperic、Groovy、Grail等领域的顶尖程序员和工程师,初步构建了覆盖软件开发、运行部署和管理等全生命周期的开源PaaS解决方案。SpringSource于2009年以4.2亿美元被VMware收购,VMware随后又收购了开源消息队列RabbitMQ、开源缓存计算Redis、分布式内存数据库Gemstone等。2013年,EMC、VMware、GE成立合资公司,VMware把面向应用的软件资产与EMC收购的分布式大规模并行处理分析数据库GreenPlum等合并,成立了Pivotal公司。Pivotal于2014年3月宣布创立Cloud
Foundry基金会,用开放管理的方式把Cloud
Foundry运作成为全球PaaS云操作系统标准。在CloudFoundry基金会的平台之上,成员企业所使用的代码都是相同的,以减少碎片化版本,成员企业主要通过提供差异化服务赢利。Cloud
Foundry是目前为止支持最多种开发语言和中间件的开源PaaS框架,IBM当时就宣布投资10亿美元开发基于Cloud
Foundry的Bluemix PaaS云平台。

Openshift与Cloud
Foundry是两大PaaS开源框架,相互之间既有区别也有相似之处。Openshift主要基于Kubernetes的社区发行版,因此与Kubernetes是天然的原生支持。而Cloud
Foundry是基于Pivotal自行研发后开源的技术。在对Docker容器技术的支持方面,Openshift也是原生支持,而Cloud
Foundry原生支持Pivotal自行开发而后开源的Garden,Garden是一种类似Docker的容器技术。Openshift的主要支持者是Red
Hat红帽公司,而Cloud
Foundry则有大批支持者,包括IBM、HP、DellEMC等。因此,如何选择Cloud
Foundry的话,则有广泛的供应商选择;而选择Openshift的话,则主要只有Red
Hat红帽公司可选。实际上,Docker、Kubernetes、Openshift这是一个体系,Garden、Diego、Cloud
Foundry这是一个体系。其中,Diego是与Kubernetes竞争的同类型技术。这两条路线都是容器技术的实现路线,一个是有大批企业IT公司支持,另一个是逐渐获得了广泛的开源社区支持,这两个技术路线属于同时并行发展,只是Kubernetes在2018年的时候获得了业界广泛的认可而成为了容器集群编排技术的主流,因此导致IBM在2018年以340亿美元收购Red
Hat红帽公司,以获得Docker、Kubernetes、Openshift技术体系的原生支持。

说到Kubernetes就必须要提到CNCF基金会。CNCF成立于2015年12月,该基金会由Google主导组建,隶属于Linux
Foundation,是一家非营利性组织。CNCF为Github上高速发展的开源项目提供完全中立的平台,并促进业界顶级开发者、最终用户以及供应商之间的紧密合作。在CNCF的官网上,定义了CNCF的使命:创建一个可持续的生态体系,围绕高质量的开源项目群体而培育开源社区,确保容器成为微服务架构的基础之一。作为一个开源软件基金会组织,CNCF致力于推广“云原生计算”并确保其可持续性,而“云原生计算”是一个用于部署微服务应用的开源软件堆栈,其方式是把各个组件都打包到容器中并动态调度容器以优化计算资源利用率。

CNCF对云原生的初始定义包含以下三个方面:应用容器化、面向微服务架构、应用支持容器的编排调度。到了2018年,随着云原生生态的不断壮大,所有主流云计算供应商都加入了该基金会,而且云原生有意兼容非云原生应用的部分。随着CNCF基金会中的会员以及容纳的项目越来越多,CNCF为“云原生”进行了重新定位:云原生技术有利于各组织在公有云、私有云和混合云等新型动态环境中,构建和运行可弹性扩展的应用。

云原生的代表技术包括容器、服务网格、微服务、不可变基础设施和声明式API。结合可靠的自动化手段,云原生技术使工程师能够轻松地对系统作出频繁和可预测的重大变更。CNCF致力于培育和维护一个厂商中立的开源生态系统,以推广云原生技术。

CNCF
所关注的“云原生计算”侧重于云软件开发后的交付与部署,主要针对以容器为基础的云软件部署,即把一个云应用软件所需要和依赖的底层软件组件打包到一个一个的标准化容器中,而容器可以把一次编写的云应用程序部署到从本地数据中心到公有云的多种底层计算环境中,进而由无数的“小”容器横向连接起来就形成了云软件的规模化扩展能力。在容器化部署的过程中,容器的调度技术和能力就显得尤为重要,相当于是应用层的“操作系统”,其中一种已经取得市场主导地位的容器调度与编排技术就是Kubernetes。

在 2018 开源领袖峰会上,CNCF 基金会、Google Cloud 工程总监 Chen Goldberg
宣布,Kubernetes 成为第一个从 CNCF
毕业的项目。这也意味着该开源项目已经成熟并且足够灵活,可在任何行业、各种规模的公司中大规模地管理容器。到了2018年,Kubernetes成为整个云原生计算的核心、灵魂和平台级技术,正因为Kubernetes技术、商业和生态的成熟,才导致了2019年开始全面进入云原生技术的商业化之年,也导致了Kubernetes成为整个云原生产业的灵魂。

截止2019年2月,CNCF已经毕业的项目有五个,分别是Kubernetes、Prometheus、Envoy、CoreOS和Containered,在孵化的项目和初级项目还有27个左右。CNCF提供了建议的整个云原生计算技术全景图,实际上就是面向云原生应用的“操作系统”上层架构,又称为aPaaS:以容器技术为核心,分为运行时和
Orchestration 两层,Runtime
负责容器的计算、存储、网络,包括云原生存储、容器运行时、云原生网络等;Orchestration
负责容器集群的调度、服务发现和资源管理,包括调度与编排、协调与服务发现、远程程序调用、服务代理、API网关和服务网格等。在运行时之下为基础设施和配置管理,作为容器底层技术。容器可以运行在各种系统上,包括公有云、私有云、物理机等;这之上为容器的“计算资源供应层”,提供容器运行所依赖的自动化部署工具、镜像工具、安全工具等运维系统。而在Orchestration之上为应用层,即“App定义与开发层”,包括数据库、流与消息、应用定义和Image构建、持续集成与交付等。

在云原生计算技术全景图的各个组成部分中,既有CNCF所托管和孵化的顶级开源项目作为可选实现技术之一,也有其它开源项目和技术商提供的解决方案,例如数据库部分既有CNCF在孵化的Vitess,也有Oracle、IBM、SQL
Server、MariaDB、Redis等可选,这些可选技术之间既有竞争关系也有互补关系,组合起来就可以实现一个完整的支撑云原生应用的aPaaS操作系统。

在2018年之前,整个云计算领域围绕着底层计算资源的管理形成了共识:OpenStack、AWS、微软Azure、谷歌云、IBM云、阿里云、VMware
SDDC等IaaS软件业已成熟,而面向DevOps的云原生应用PaaS支撑技术则在2018年全面成熟起来,这就是CNCF所代表的云原生开源项目群体。

结束百家争鸣、云计算“抱元归一”

2013年的时候,中国市场掀起了一波“云计算”热,整个IT产业甚至整个社会都在热议一项叫做“云计算”的技术。到底什么是云计算?到底云计算是怎么构成的?到底云计算能做什么?其实从几个角度可以最终理解云计算的本质。

首先,云计算是企业级IT技术。不同于消费互联网和消费IT技术,云计算的本质是通过互联网向企业、政府和组织等交付IT服务。这十分类似过去的企业数据中心外包,但云计算是把企业的数据中心收归到云计算厂商手中,由云计算厂商统一运营和管理,再统一以按使用量付费和通过互联网交付的方式向企业提供IT服务。企业只需要打开一个互联网浏览器,就可以登录到公有云厂商的服务界面,勾选相应的计算需求和配置,就可以马上使用这些计算资源,而不再像过去那样还要经过采购、部署、安装、配置、上线、调试等一系列复杂且需要一定周期的工程。而私有云就是按公有云的架构和体验,重新构建企业内部IT系统,企业内部人员也像使用公有云一样通过浏览器使用私有云。把公有云和私有云连接在一起的,就是混合云技术。而在这些云技术之外,还有无法云化的传统企业IT技术,它们通过某种方式连入云计算资源池,成为可以调用的计算资源。

其次,云计算是共享计算资源。公有云就是社会化的大规模共享计算资源,公有云的最终目标是让计算资源像水和电一样成为标准化的社会基础设施。而企业无论大小,都可以接入同样水平的计算资源,而仅按使用量付费。共享计算资源不仅仅是全社会共同节约IT基础设施,因为随着越来越多的企业开始展开基于互联网的商业模式,整个社会对于服务器、存储和网络等计算硬件的需求激增,而承载这些计算资源的数据中心还要耗费大量的工业用电和冷却水资源,例如在阿里电商的发展历史上,杭州的电力资源就一度无法满足阿里数据中心的用电需求,因此阿里不得不在贵州、张北等有自然风冷等条件且有电力容量的地方兴建数据中心。不论对亚马逊、阿里等互联网公司,还是正在建设大规模数据中心的传统企业,数据中心的计算资源如果是按照满足互联网流量峰值而建,那么在互联网流量洪峰过后无疑就可以共享给社会上其它企业和组织。

第三,云计算是更大规模的虚拟化计算。过去,有VMware、微软等虚拟化解决方案供应商,它们解决了中小规模的企业计算虚拟化,例如数百台服务器连接在一起的数据中心虚拟化,这些虚拟化技术虽然无法承载更大规模的互联网计算,但却能完成很多具有复杂业务逻辑的计算任务,并且满足企业级安全、合规等各种要求。而上千台服务器、上万台服务器甚至像前三大公有云厂商那样上百万台服务连在一起的虚拟化技术,这就云计算。在阿里云的历史上,曾经有著名的5K飞天之战,就是阿里通过自研技术解决5000台服务器连接在一起形成一个虚拟计算资源的挑战。

2009年,自阿里云写下第一行代码,就要自主研发出以“飞天”为代号的大规模分布式计算系统。飞天的设计宗旨就是通过构建一套综合性的软硬件系统,将数以千计的服务器连成一台“超级计算机”,并最终实现两个目标:对内,通过对这台超级计算机进行物理资源分配、程序运行操控,以及保障服务及数据安全的操作系统,支撑阿里集团服务的核心技术平台;对外,将这台超级计算机的计算、存储等资源,以公共服务的方式,输送给互联网上的用户或者其他应用系统。飞天平台从1500台的集群规模到3000台的集群规模,再到2013年8月最终成功实现单集群超越5000台、同时支持多集群跨机房计算的目标,阿里云整整花费了5年的时间,因此5K集群的难度可想而知。

第四,实现云计算有多种技术方案。世界几大公有云厂商,AWS、谷歌、微软、阿里、Oracle、SAP等,都是自行研发的技术方案,例如阿里就是基于C语言自行开发的云计算技术方案。也正因为如此,云计算的第一个十年也可视为“孤岛”云的十年,云计算是更大规模的IT“孤岛”,不同技术方案的云计算之间很难实现互联互通,而且一旦上了某个云计算技术方案就很容易被“锁死”,导致“上云容易、下云难”的情况。不过,到了云计算的第二个十年,也就是从2018年开始,开源技术逐渐成熟并成了产业主导地位。例如到了2018年,也可以用OpenStack实现5K集群,当然这晚于阿里2013年的5K飞天整整5年,但2017年开始建设的云计算系统都可以受益于成熟的开源云计算技术。此外,OpenStack等IaaS基础设施的开源技术也开始走向开放架构,成为企业新IT资源和系统的集成器和连接器,统一的开源技术开始主导云计算的技术方向。而到了PaaS应用平台层面,以Kubernetes为代表的开源技术更在2018年取得了绝对的产业主导地位,所有的IaaS技术都开始与Kubernetes连接,Kubernetes从应用层面统一了云计算的架构,这样就开始出现可以真正互联互通的云计算技术。到了Docker容器和DevOps敏捷开发,这又是统一的SaaS应用技术。这样,“全世界一台计算机”的梦想开始成为现实。

第五,云计算技术是“互联网+”技术,而基于云计算的新商业模式就是“+互联网”。可以理解云计算特别是公有云是整个社会的共享数字中台,所有的企业共享一个互联互通的基于互联网架构和计算系统,这样所有的企业都可以互联互通起来,相当于是企业整体上网,这就是“互联网+”。而一旦企业整体上网,整个企业以及所有企业和组织都运行在一个计算平台上时,就可以通过大数据、人工智能、区块链等增值技术实现新的商业模式,这就是“+互联网”。例如,在过去的技术条件下,无法追踪一个人在整个社会中的轨迹,因此传统的经济学只能通过少量的观测数据分析人的行为以及其对经济的影响;而在全社会都基于“一台计算机”的前提下,可以很容易的追踪一个人的全社会数字轨迹,或是研究所有消费者在线的全量数字行为,这将打开全新的经济学理论空间。而当所有企业都在线的时候,很容易打开企业的边界形成新的社会化合作,到时候的企业形态也将发生巨大的变化,网络化组织和平台型组织也由此出现。而365辆互联的智能汽车,一天在全球各地的驾驶数据汇集起来,就能抵过一台汽车跑365天的数据,这相当把一年的学习时间缩短到了一天,同样还能缩短到一小时、一分钟甚至一秒,人工智能正在云计算的基础上改变人类文明和知识的发现方式。

总体而言,云计算是一种新的计算范式,它并不是新发明或新的技术,而是对原有技术的重新组织和重新架构,以支撑各种程度的共享计算。在全社会共享计算的基础上,人类正在进入新的数字文明时代,人类正在由工业革命的个体时代进入到数字革命的社群和群体时代。云计算不仅是现代社会的神经网络,更是新社会的启动机器。

声明:本网站发布的内容以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-62778877-8306;邮箱:hyg@west.cn。本站原创内容未经允许不得转载,或转载时需注明出处::西部数码资讯门户
到底什么是云计算?

相关文章