亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

开篇:立异是亚马逊云科技展开的最耐久驱动力

云核算,新世纪以来最伟大的技能进步之一,从2006年 Amazon Web Service 草创时的小试牛刀,到现在生长为一个巨大的工作和生态,现已走过16年的风雨进程。

Java之父詹姆斯高斯林 (James Gosling)在一次针对亚马逊云科技 re:Invent 峰会的采访中说道:“云核算概念的呈现要远早于云核算的真实完结。在云核算展开早期,人们仅仅继续运用自己早已开发完结的一般运用程序,直接把它们运转在云服务商的设备上。后来,人们开端编写出专为云环境规划的运用程序。所以,工作中才连续涌现出云数据库等在传统集中式数据中心内看不到的技能方案。曩昔几年,数字化转型现已全面掀起浪潮。而这波转型也凸显出新的现实:咱们还有更多的探索空间和机会。对我个人而言,最让人眼前一亮的应该是 Gravition3 的发布。它给很多运用带来了良好的运转环境。它被集成在亚马逊云核算架构当中,能够为用户希望在云端执行的全部负载供给良好支撑。的确,亚马逊云科技现已改动整个 IT 工作。”

亚马逊云科技已生长为全球最大的公有云渠道。在根底设施层面,亚马逊云科技具有遍及全球27个地舆区域的87个可用区,掩盖245个国家。它无处不在,从城市中心的作业楼宇到工厂,到农田,到偏远地区的石油钻井和远洋作业渠道,乃至看似遥不可及的太空。在工作领导力层面,亚马逊云科技连续12年被 Gartner 评为云核算工作的领导者。在商场占有率层面,亚马逊云科技占据全球公有云商场的1/3以上。在产品服务层面,亚马逊云科技是全球功用最全面的云渠道,供给超越 200 项功用齐全的服务,并且每年推出的新功用或服务数量飞快上涨。在用户及生态层面,不只具有数百万客户,还具有最大且最具生机的社区。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图1 Gartner2022年云根底设施和渠道服务法力象限

那么,终究是什么驱动亚马逊云科技一向在高速展开?是立异!立异是亚马逊云科技展开的最大最耐久驱动力。在笔者看来,亚马逊云科技的立异系统至少包含技能立异、商业立异、生态立异、用户立异四大层次。

  • 技能立异

    亚马逊云科技技能上的立异不胜枚举。2006年首开工作先河,发布 S3 存储服务、SQS 音讯队列及 EC2 虚拟机服务,正式宣告了云核算年代的敞开。2007年发表了被以为是NoSQL技能开山之作的 Dynamo 论文,2012年进而发布 Amazon DynamoDB 服务。2014年推出 Amazon Lambda 服务,开创了无服务器核算范畴的先河,第一次使开发人员无需预置或办理服务器即可运转其代码。2017年发布彻底保管的机器学习服务 Amazon SageMaker,让日常开发人员和科学家无需任何前置经验即可运用机器学习。亚马逊云科技一向在探索前人未走过的路,许多都是改动游戏规则的立异。它一向被仿照,从未被逾越。(补白:关于 Amazon Serverless,可阅览笔者的《亚马逊云科技 15 年:从 Serverful 到 Serverless》一文)。

  • 事务形式立异

    亚马逊云科技在事务形式立异上一向在移风易俗。亚马逊云科技的呈现,本身便是一项伟大的事务立异。2006年,Amazon 将搁置 IT 资源变成服务卖给其它企业,选用订阅制和按量付费的计费方法,开了云核算先河,开端改动整个 IT 国际。2009年,亚马逊云科技将搁置的 EC2 实例以拍卖的方法供给给用户,发布了 Amazon Spot Instance,这又发明了搁置云资源的全新售卖形式。在散布式云形式上,亚马逊云科技具有掩盖范围抢先的全球云根底设施,从各地舆区域和全球骨干网向各种边际拓宽,包含中心城市、5G公网、5G专网、客户本地数据中心、物联网乃至太空。(补白:关于亚马逊云科技散布式云,可阅览笔者《从混合云到散布式云》一文)。

  • 生态立异

    亚马逊云科技具有全球最大且最具生机的云上生态社区。云生态现已成为云核算棋局中的胜负手。当用户对云核算的重视点从根底架构延展到云上运用时,势必对供给云核算服务的厂商提出更多更高的要求,这也促使云厂商与运用开发者更严密地进行生态协作和交融,努力于供给一个架构灵敏、灵敏开发、安全可靠的云核算根底渠道,而很多的开发者和 SaaS 厂商则努力供给种类丰厚的运用。亚马逊云科技一向在引领云生态立异,其立异性产品和服务也层出不穷。2012年亚马逊云科技成为第一个推出云商场的云根底设施供给商。现在,亚马逊云科技在全球有超越12万家协作伙伴,散布在150多个国家,其云商场供给12000多个软件产品,已成为最大最健全最活跃最有生命力的云生态系统。

  • 用户立异

    亚马逊云科技一向努力于成就探路者。视频工作中,十多年前 Netflix 斗胆地把全部IT根底设施迁移到了亚马逊云科技上,不只重塑了自己的事务,更是重塑了整个文娱工业,成为云核算展开史上的经典用户事例。金融业中,Capital One 在2020年完结了从数据中心到 亚马逊云科技的迁移,成为美国首家宣告全面转向云的银行。广告工作中,Untold Studios 彻底根据云端的作业室,重塑广告制造形式。亚马逊云科技上的客户立异效果比方不胜枚举。应该说,假如没有如此多的客户的成功,那就不会有今日亚马逊云科技的成功。

接下来,笔者将用8个具体生动的比方来论述亚马逊云科技是怎么进行立异的。

技能立异事例两则

1. Amazon Ground Station 服务,软件界说的卫星地面站。

自从1957年前苏联发射了人类前史上第一颗人造卫星,迄今为止,国际各国已将数以万计的卫星送上太空。卫星对地球人的日常日子越来越重要,比方文娱、军事、通信和导航等。2020年,我国初次将卫星互联网归入新基建范畴,卫星互联网建造上升至国家战略性工程。2021年,SpaceX 首席执行官埃隆马斯克表明,SpaceX 正在快速推进其星链卫星互联网方案,将发射数万颗卫星上天。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图2 人造卫星

卫星通信系统是指运用人造地球卫星作为中继站转发或发射无线电波,完结两个或多个地面站之间,或地面站与卫星之间通信的一种通信系统,首要由空间段、地面段与用户段构成。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图3 卫星通信系统原理暗示

其间,地面站,又称地球站或地球终端站,是卫星通信系统的一个重要组成部分。地面站的基本作用是向卫星发射讯号,一同接纳由其它地面站经卫星转发来的信号。卫星地面站的建造和卫星数据获取才能现已成为国家生态环境、国防安全、地球科学技能展开的重要部分。国际各国以巨大的投入在全球建立卫星地面接纳站,其推动力即在于此。

曩昔,卫星地面站一般都需求卫星全部者自行建立或租借,并且为了确保接纳和发送效果,要求地面站散布在全球各个地方。所以,一方面,需求许多的本钱投入和运营本钱;一同,站点的数量很难满意大规划卫星运用的需求。如此高昂的本钱,对许多用户尤其是近年来蓬勃鼓起的卫星草创公司来说是难以承担的。因而,这种传统地面站建造和运用形式亟待立异性重塑。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图4 卫星地面站天线

2000年,亚马逊前 CEO 杰夫贝佐斯创立了蓝色来源 Blue Origin,这家火箭公司想低本钱的将卫星送入太空。2018年,亚马逊云科技立异性地推出名为 Amazon Ground Station 的新服务,向卫星草创公司供给低本钱的软件界说的地面站根底设施。

Amazon Ground Station 供给了一个可分时租借的、云服务形式的、由散布在全球多个区域的地面站组成、紧邻亚马逊云科技根底设施区域全球网络的全球网络。凭借 Amazon Ground Station,用户无需再担心购买、租借、构建、扩展或办理您自己的卫星地面站。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

Amazon Ground Station 服务可让客户运用由全球数十个地面站组成的全保管网络,经济高效地从卫星下载数据到亚马逊云科技全球根底设施区域。这是一项彻底保管的服务,可用于操控卫星通信、处理数据和扩展运营,而无需考虑怎么构建或办理自己的地面站根底设施。凭借它,用户能够直接拜访亚马逊云科技服务和亚马逊云科技全球根底设施(包含低延迟全球光纤网络)。

例如,运用 Amazon S3 存储已下载的卫星数据,运用 Amazon Kinesis Data Streams 办理从卫星接纳的数据,运用 Amazon SageMaker 构建适用于您的数据集的自界说机器学习运用程序。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图6 Amazon Ground Station 服务架构原理

和其它云核算服务相同,用户无需做出长期运用许诺,只需按实践运用时刻付费;可依靠地面站的全球掩盖范围随时随地下载数据,依据事务情况按需快速扩展卫星通信规划,然后节约多达 80% 的地面站本钱。

Amazon Ground Station 地域分步广泛,每个区域都配备多个天线,您能够直接将卫星数据下载到某个亚马逊云科技区域进行即时处理。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图7 亚马逊云科技卫星地面站网络节点散布

Amazon Ground Station 是全球第一个全保管的地面站即服务,它正在改动卫星地面站的建造和运营形式,必将深刻地影响卫星通信工作。这项服务也使得亚马逊云科技服务网络从地面延伸至太空。

2. 亚马逊云科技自研定制芯片,敞开以云从头界说 IT 硬件的新年代。

曩昔,云核算的立异集中在软件范畴;现在,云核算深化整个根底设施。其间,芯片立异是发生在最底层的立异,往往也是最具颠覆性的,芯片层面的立异是改动云核算游戏规则的才能。亚马逊云科技的自研芯片之路,开业界先河,引业界潮流。一路走来,走得十分坚决,十分快速,效果丰硕。它是一个亚马逊云科技强壮技能立异才能的例子。

2013年亚马逊云科技推出首颗 Nitro 芯片,2015年以3.5亿美元收购芯片制造商 Annapurna Labs,2018年发布第一代服务器芯片 Graviton,2020年起推出第一代定制推理芯片 Inferentia 和练习芯片 Trainium。这家最早涉足自研芯片的公有云厂商,已具有网络芯片、服务器芯片、人工智能机器学习芯片三条产品线。产品上包含4代网络芯片 Nitro、3代服务器芯片Graviton、1代 AI 推理芯片、1代 AI 练习芯片。从现在这个穿越的视角往回看, 这3.5亿美元就撬动了超越4000亿美元的全球云核算商场 。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图8 亚马逊云科技自研芯片宗族

Amazon 网络芯片 – Nitro芯片

Amazon Nitro 芯片的研制可追溯到2013年。亚马逊云科技出色工程师 James Hamilton 早在2014年就有意无意地说过,根据 Arm 的数据中心芯片的研制速度太慢,功用也无法和x86芯片比较。在2016年的 re:Invent 大会上,James Hamilton 就从口袋里拿出了亚马逊云科技自研的第一颗数据中心芯片。它其实并不是 CPU 处理器,而是一个网络芯片,首要用来支撑2x25G以太网的数据包处理。这便是亚马逊云科技第一颗 Nitro 芯片。

一年之后,亚马逊云科技发布了新一代的 Amazon EC2 C5 实例。和前一代的产品比较,C5完结了25% ~ 50%的能效进步,并且也引入了对裸金属的支撑。这些进步背面,便是 Amazon Nitro 带来的系统重构。

为什么一代 Nitro 就能带来这么高的能效进步呢?这是由于,Nitro 将虚拟化功用从宿主机服务器卸载到 Amazon Nitro 专用芯片上运转,配合一个轻量级的 Hypervisor,将虚拟化对物理机功用的损耗下降到低于1%。而传统物理服务器中,Hypervisor 一般会占用大约30%的系统资源。在下图所示的高功用核算测试场景中,根据 Nitro 的虚机实例宿主机和裸金属服务器比较功用上相差无几。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图9 裸金属物理机和 Nitro 宿主机在 HPC 场景下的功用比照(来源:亚马逊云科技)

Amazon 服务器定制芯片 – Graviton芯片

2018年的 re:Invent 大会上,亚马逊云科技发布了Amazon Graviton第一代处理器。接着,2020年推出了第二代,2021年推出了第三代。推出速度之快令人咂舌,并且,更难能可贵的是每代都取得了极大的飞跃和进步。Graviton 系列Arm服务器芯片能够说是当今数据中心商场上产值最大的Arm服务器芯片。

根据 Graviton2 的实例相关于可比较的根据第五代x86的实例,它们为各式各样的作业负载供给了高达40%的性价比进步。这种进步的关键是在其架构规划上。与x86不同的是,Graviton2每一个核只跑一个线程,只完结一个使命,并且每个核有自己独享的L1和L2的缓存,相互不搅扰,这使得它能够最大程度地去适应云原生环境中需求平行扩展的微服务化运用。从前有用户表明,“经过运用 Amazon Graviton2 实例来处理咱们在 MQTT 网关服务的协议解析和长衔接状态,CPU功用进步100%,服务器单价下降了20%,整体的性价比进步了2.5倍”。现在,亚马逊云科技有12个实例系列由 Amazon Graviton2处理器驱动。

Graviton3 处理器与Graviton2 处理器比较,其核算功用进步多达 25%,浮点功用进步多达 2 倍,以及加密作业负载功用最多加速 2 倍,根据前沿 DDR5内存技能的内存拜访速度进步了50%,在相同的功用上最多能够节约60%的动力。2022年5月,亚马逊云科技宣告了其由最新的 Amazon Graviton3 处理器支撑的 Amazon EC2 C7g 实例。该实例支撑高达128GiB 的内存装备、30Gbps 的网络功用和20Gbps 的 Amazon Elastic Block Store 功用。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图10 Amazon根据 Gravition3 芯片的实例 C7g

现在,Graviton 仍然是亚马逊云科技上性价比最好的 CPU 芯片。所谓性价比,便是用价格除以功用,在单位功用下,价格越低越好。关于那些每天都得跑不计其数次核算的大公司,用Graviton芯片能让他们每年省下几百万乃至几千万美金。

亚马逊云科技定制 AI 推理芯片 – Inferentia

最近十年,AI 兴起,机器学习浪潮经久不息。尤其是深度学习这个分支,现已运用到了咱们日子的方方面面,比方各种 App 和网站的推荐算法、语音辨认、视觉辨认等。深度学习模型的规划也在爆炸性增加,从几年前的几百万参数,到最近新出模型的几百亿参数。这些都对底层的核算渠道提出了十分高的要求。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图11 机器学习模型复杂度展开曲线(来源:亚马逊云科技)

深度学习分为练习和推理两步。深度学习模型先经过练习把全部误差降到最低,然后投入运用,也便是进行推理。练习进程是很难很慢的,大的模型需求练习几天乃至几周。好在进程是一次性的,一个练习好了的模型能够被很多次重复运用。大的商用模型每天要跑上万次推理。所以一般推理所需的花费才是公司开销的大头。

亚马逊云科技坐拥国际上最大的云核算渠道,有极好的用户根底。2018年,在亚马逊云科技的 AI 战略布局下,Annapurna labs 开端做机器学习芯片。2018年底在亚马逊云科技 re:Invent 上宣告,2020年正式推出 Inferentia 芯片和 Amazon Inf1 实例。Inferentia 是专门为深度学习规划的芯片,旨在以低本钱供给高功用推理。Inf1是其时云端深度学习推理范畴性价比最好的实例,它具有多达 16 个 Amazon Inferentia 芯片。与其时根据 GPU 的 Amazon EC2 实例比较,吞吐量最高可进步 2.3 倍,每次推理的本钱下降多达70%。

Inferentia 面世不久就收获了许多大大小小的客户。Amazon 内部最大的客户是 Alexa,它被加速了25%,本钱被下降了30%。在 Amazon 外部,最开端的客户包含 Airbnb, Snapchat, Pinterest 等,后来又逐步吸纳了 Bytedance, Facebook, Apple 等大公司。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图12 Amazon Inferentia 机器学习推理定制芯片

AWmazon 定制 AI 练习芯片 – Trainium

Inferentia 推理芯片取得成功之后,Annapurna labs 又开端马不停蹄地开端练习芯片 Trainium 的开发。2020年,亚马逊云科技宣告推出专门用于练习机器学习模型的定制芯片Trainium。Amazon Trainium 支撑 TensorFlow、 PyTorch 和 MXNet,能够供给比任何竞赛对手更高的功用。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图13 亚马逊云科技机器学习练习定制芯片 Trainium

两年后的2022年10月,亚马逊云科技发布了 Trn1 EC2 实例。该实例支撑多达16颗 Trainium 芯片,是云端最快的深度学习实例。在 Trn1 上运转 Hugging Face BERT 大模型,其功用比照GPU实例有42%的进步,本钱下降了54%。Trn1第一次把实例的网络带宽进步到了800GB,而10年前连10GB的网络带宽都难以达到。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图14 亚马逊云科技根据机器学习练习定制芯片Trainium的实例Trn1

亚马逊云科技的三大类自研芯片组成的宗族是其强壮技能立异才能的出色代表。他们一方面“量体裁衣”,把更丰厚的产品的挑选权交给客户,为客户不断改动的作业负载供给更好的云服务,一同为客户不断优化云服务的性价比。

最后,实事求是的说,比起Nvidia的GPU和Google的TPU,亚马逊云科技的两款AI定制芯片在普适性以及软件工具链的老练度上都还有很长的路要走。可是,有亚马逊云科技这个独一无二全球第一的云核算渠道为其供给源源不断的客源和运用场景,信任亚马逊云科技的芯片之路会越走越好,越走越宽。

事务形式立异事例两则

1. 自亚马逊云科技鼓起,云核算永久地改动了 IT 形式。

许多人说,云核算的核心立异是事务形式的立异,由于云核算永远地改动了 IT 事务形式。

在云核算呈现之前,假如用户想供给根据 Web 的解决方案,就需求具有实践的服务器等硬件。在事务刚刚起步时,能够运用放置在地下室里的塔式服务器。跟着事务一步一步做大,就有必要进入商业空间即数据中心了,因而这时您不只仅需求一些服务器,还有负载平衡器、交换机、机柜等等。

让咱们看一组在美国早期的数字。在上世纪90年代后期,为了建立35个数据中心,有人花了一年多的时刻花费了近3亿美元在服务器、路由器和电源根底设施上才让全部运转起来,还不包含建筑物本钱。10年后的2006年前后,一个50U机柜起价约为每月2000美元,可放置六台根据英特尔的服务器,支撑 RAID 存储、交换机、负载平衡器等——全部这些或许至少要花费8万美元,还需求商业互联网服务,这将每月花费500到2000美元。并且,这种装备还不能承载太多负载,最多能接受几千个用户一同运用。所以,你的事务越受欢迎,你就需求越多的东西,更多的机柜、更多的服务器,更多的网络设备、更高带宽的互联网服务,以及更多的保护人员。这些会让你的月账单变得越来越长。

而今日,假如需求 35 个数据中心的空间,您能够在亚马逊云科技上编写一些CloudFormation 脚本,在您泡一杯茶这么一点点时刻,全部都会被自动创立并运转起来,并且每小时只花费大约350 美元。还能够从每月200美元左右开端,然后自动缩放到所需求的任何规划。您一点也不担心“不行”,由于亚马逊云科技的规划近乎无限;您彻底不必担心买得太多,由于能够随时释放不需求的东西。您的出资者也会喜爱这种形式,由于这彻底消除了整个技能层面的风险,并将本钱开销降至简直为零,并大大削减了职工开销。

这种改动绝对是革新性的!这种革新性改动,亚马逊云科技功不可没。尽管亚马逊云科技并不是第一个公有云根底设施服务,但他们比之前的任何人都做得更大更好,并且价格也更实惠。

从2006年开端供给存储、核算和队列服务起,现在的亚马逊云科技具有超越200项全功用的服务。并且,全部这些都正在变得越来越廉价。现在,咱们以为天经地义的大部分国际 – Netflix、Twitch、LinkedIn、Facebook、Turner Broadcasting、BBC、ESPN、Adobe、AirbnB、Slack……都在亚马逊云科技中。

所以,是的,亚马逊云科技永久地改动了 IT 形式,使咱们能够自在、按需、实时地创立现代网络国际。因而,云核算不只仅是技能。作为一个事务形式,它是颠覆性的,这是其最重要的方面之一。这种改动,使得海量的小企业和草创企业能够运用企业级服务和根底设施,以及大型科技公司正在运用的技能,让这些不再成为它们进入商场的巨大妨碍。这乃至改动了竞赛环境,让各行各业在同一同跑线上自在竞赛,让单一技能独占成为曩昔。

2. Amazon Spot Instance实例,发明了公有云虚机实例全新定价方法。

拍卖工作是一种十分陈旧的工作。古巴比伦、古希腊、古埃及的拍卖是国际拍卖史上的第一个里程碑。人类前史上最早的拍卖行为,见诸于文字记载的是古希腊前史学家希罗多德在其所著的《前史》一书中对古巴比伦(公元前1894—前709年)拍卖人口的一段描绘。

1989年第二版《辞海》这样写道:“拍卖也称竞买,商业中的一种买卖方法,卖方把产品卖给出价最高的人”。经济学界以为:“拍卖是一个集体(拍卖集体)决定价格及其分配的进程”。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图15 苏富比拍卖行的拍卖现场

关于公有云厂商来说,为最大保障其云上弹性负载和未来展开需求,必定需求出资许多的IT根底设施,就不可避免存在适当数量的搁置资源。可是,IT 根底设施质保期十分短且更新淘汰速度十分快,所以必需求及时处理掉这些或许的搁置资源,但一同又不能影响其它事务展开。

一种最简单想到的办法是直接降价促销,但亚马逊云科技挑选了另一种立异性的方法,即竞价实例。在公有云业界,亚马逊云科技初次把拍卖这一陈旧的商业形式和新兴的云核算完美结合起来,于2009年12月推出了 Amazon EC2 Spot 实例。这是一种购买和运用 Amazon EC2 实例的立异方法,由商场来决定真实的价格,然后达到尽或许以最合理的价格卖出最多搁置资源的目标。

在竞价实例(Spot Instance)呈现之前,Amazon EC2实例按购买形式分为两种:

  • 保留实例(Reserved Instance):这是优先级第一的实例,由于用户现已提早付过钱了,或许是按月,也或许是按年,云厂商不管怎么都是不能动这些实例的。
  • 按需实例(On-demand Instance):这是第二优先级实例,用户能够随时购买随时释放。因而,这种需求动摇性十分大,或许某个时刻段咱们用得许多,也或许正好没什么人在用。

比较较于这两种实例,竞价实例十分不相同,其事务形式极具立异性。由于其价格不像另外两种实例那样在购买时就确认了,相反,是跟着供需联系的调整在不断更新的。简单整理如下:

  1. 用户出价:用户为获取实例出一个自己能接受的最高价格。这相似于拍卖出价。
  2. 云厂商定价:云厂商会动态检测当时的商场价格和库存,一旦库存缺乏,或许你的出价小于商场价格,你运用的资源就会被系统回收;假如当时商场的价格低于用户的出价,则用户取得新的或保留已有的EC2实例资源用于核算。这相似于拍卖定价。
  3. 资源运用:你的出价仅仅给自己设置了一个能接受的最高限价。可是,一旦你请求到了资源,亚马逊云科技会按一个不高于你出价的商场价计费。同一时刻,全部买家都按同一个价格在运用资源。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图16 拍卖漫画(来自于网络)

经过上面描绘,可看出EC2竞价实例有两个特征:一是这种实例的价格随供需随时改动;二是假如你的出价不行高,这种实例会被亚马逊云科技随时回收。

这个价格形式十分神奇,所以笔者用它来说明亚马逊云科技强壮的事务形式立异才能。本质上讲,按需实例是搁置资源被云厂商拿出来贱价售卖,究竟服务器哪怕放着不开机也是在烧钱,什么时分有用户按前面两种方法买了,这些被贱价卖出去的资源就会被云厂商回收去卖给这些用户。这种立异的定价方法至少为亚马逊云科技带来三个方面的好处:

一是,充分运用价格杠杆,有用调理用户对实例资源的需求,让用户把一些时刻不灵敏的作业负载调整到闲暇时刻去运转,让亚马逊云科技的容量得到充分运用。

二是,为客户省钱。公有云用户的事务形态十分多样化。既有那些关于连续运转和实时呼应要求十分高的在线事务,又有许多离线事务和实时性要求不灵敏的事务,还有常见的高功用核算(HPC)场景。乃至,用户端还存在部分关于本钱十分灵敏的事务,这种事务当处理本钱高于某个阀值后该事务的商业价值就不存在,如某些日志处理事务。在曩昔,不管用户的事务类型是哪种,他能取得的资源都是为在线事务所准备的。与按需实例的价格比较,运用Spot Instance最高能够享受90%的折扣,这为用户的非在线事务或许本钱灵敏事务供给了一种超贱价格的的核算资源。

三是,保障亚马逊云科技虚机类型快速迭代的一同避免老类型虚机过度搁置,以协助其顺利完结虚拟实例迭代晋级。由于CPU、内存、磁盘等的迭代速度十分快,为确保商场竞赛力,亚马逊云科技虚机类型迭代周期十分短,曩昔一段时刻基本是一年更新一代,最新亚马逊云科技虚机类型现已是第六代了(如2022年2月18日发的第六代根据x86的产品 – 内存优化型 Amazon EC2 R6i 实例)。新老实例价格距离不大,但功用距离显着。因而,客户在购买按需实例和预留实例时倾向于最新代的虚机类型,由于它们的性价比最高。可是,由于机器质保期会比实例更新周期长几倍,所以较老类型的虚机搁置份额就会偏高。竞价实例为这些老类型搁置虚机供给了一个“去库存”的最佳途径,由于老一代的实例类型其竞价实例价格最廉价,并且动摇还很小。

竞价实例是公有云售卖搁置资源的最佳方法。自从亚马逊云科技提出后,各大公有云厂商敏捷跟进,已成为业界现实上的规范。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

生态立异事例两则

1. Amazon Marketplace,深刻地改动了2B数字供应链

智能手机被以为是曩昔20年最具影响力的技能立异之一,而苹果公司的iPhone是其间最出色的代表。许多业界人士以为,真实具有革新含义的产品是苹果的另一项立异:iPhone运用商铺(app store)。对手机工作来说,2008年推出的App Store远比iPhone含义更大,由于它从头界说了在智能手机上下载运用程序的方法。只有在运用商铺吸引了很多第三方软件供货商后,智能手机才从一个略微有用的设备变成了一个革新性的渠道。苹果总裁蒂姆•库克从前说道:“App Store是前所未有的,它的功用也改动了国际。”

Amazon Marketplace 便是 Amazon App Store。在 2012年 Amazon Marketplace 刚推出的时分,这是一个适当新颖的立异,亚马逊云科技也随之成为第一个推出云商场的云根底设施供给商。它是一个企业级的在线运用商铺,协助客户寻觅、购买、迁移并当即开端运用构建产品和展开事务所需的软件和服务。用户可运用一键布置功用快速启动预先装备的软件,只需按实践运用量付费。亚马逊云科技担任处理账单和付款,并且软件费用就显现在客户的亚马逊云科技账单上。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图17 Amazon Marketplace logo

到2014年,亚马逊云科技商场中现已有超越500个抢先同类的出售商,如思科、帕洛阿尔托网络、趋势科技和 F5等等。他们推动 Amazon Marketplace 成为第一个推出年度订阅的云根底设施商场。

2016年,转向云核算的客户告知亚马逊云科技,他们开端青睐 SaaS。现在,Amazon Marketplace 中有超越1000种 SaaS 产品,其间许多产品来自人们耳熟能详的供货商,如趋势科技、 F5、 Datadog、MongoDB、Databricks 和 Snowflake。客户越来越喜爱 SaaS,由于不再需求办理他们自己的布置。

去年,亚马逊云科技出售了数十亿美元的产品和服务,这一数字继续快速增加。现在,亚马逊云科技在全球有超越12万家协作伙伴,散布在150多个国家。Amazon Marketplace在全球供给了12000多个软件产品,掩盖安全、联网、存储、机器学习、IoT、商业智能、数据库和开发运营等60多大类。越来越多的人以为,经过供给如此多的方法来购买和布置如此多的数字产品,Amazon Marketplace正在“改动数字供应链”。

2. 亚马逊云科技 + Snowflake,云生态协作的典范

任何数据仓库(Data Warehouse)的核心思想是将来自多个独立数据源(如CRM、 OLAP/OLTP 数据库、企业运用程序等)的数据集成到一个单一的集中位置,用于剖析和报告。

Snowflake在2014年正式推出,是根据云的企业级数据仓库的一个优异代表,它供给SaaS解决方案和一个SQL 查询引擎。与传统同类产品不同的是,Snowflake只为公有云规划,天然云原生,不能在本地运转。该渠道为数据存储、处理和剖析供给了快速、灵敏和易于运用的方案。它最初构建在亚马逊云科技之上,后来也可在谷歌云和微软 Azure 上运用。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图18 Snowflake架构原理暗示

早在2013年,亚马逊云科技就发布了一个和Snowflake相似的产品 – 云数据仓库服务Redshift。这让两家的联系变得十分微妙而又引人深思。几年下来,亚马逊云科技与 Snowflake 之间的联系经历了一个动态的弧线,两家公司在协作精神的指引下,从竞赛对手演变为友敌,再演变为为一同客户服务的更具战略含义的盟友。

2015年,亚马逊云科技和 Snowflake 之间是压倒性的竞赛者联系。

2017年,亚马逊云科技发布了 PrivateLink,这是其时最新一代的 VPC 终端节点,它答应在 Amazon VPC 之间进行直接和安全的衔接,而无需经过公共互联网。Snowflake 团队与亚马逊云科技产品团队密切协作,将 PrivateLink 与 Snowflake 集成,成为第一批协作伙伴之一。这种协作,使得让具有严厉安全策略的客户能衔接到 Snowflake。这种三赢成果,让后面两家的联系改动埋下了伏笔。

2019年前后,亚马逊云科技和 Snowflake 有大约30个联合客户买卖,这让他们的联系开端转变。他们开端建立一个一同的战略:集中在一同的客户用例上,环绕迁移大型客户和他们的数据导向的作业负载到亚马逊云科技上的 Snowflake 上。经过严密协作,两边开端意识到,两家不一定需求竞赛,还能够联合起来为他们一同客户供给差异化的、最好的解决方案。

2020年中期 IPO 之前,Snowflake 公司透露,它已许诺在2025年7月之前投入12亿美元用于亚马逊云根底设施服务。明显,跟着时刻的推移,两家的联系现已彻底发生了改动。笔者信任,是两家“以客户为先”的经营理念和相似的 DNA,协助发明了这种改动的空间。

现在,Snowflake 有20多个横向产品与亚马逊云科技集成,这是其云供给商协作伙伴中最多的。在亚马逊云科技 re: Invent 2021上,Snowflake 成为 Amazon AI 数据剖析(AIDA)解决方案的第一批重要协作伙伴。它还深化了与 Amazon SageMaker (亚马逊云科技的旗舰机器学习服务)的整合,并且是 SageMaker Canvas 的第一批唯一协作伙伴。

现在,Snowflake 现已成为亚马逊云科技最大的协作伙伴之一,并具有很多联合客户,从医疗保健公司 Anthem 到全球航运和邮递公司 Pitney Bowes,再到金融服务供给商西联汇款(Western Union)。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图19 亚马逊云科技和 Snowflake 严密协作

亚马逊云科技终究意识到,像 Snowflake 这种协作伙伴在其渠道上取得成功时,它自己也受益匪浅。由于,当客户挑选协作伙伴供给的服务,作为底层云服务供给商的亚马逊云科技就会取得协作伙伴供给的服务的消费分成和底层云资源的运用。揭露数据显现,尽管 Snowflake 现在也运转在微软 Azure 和谷歌云渠道上,但其适当大部分事务运转在亚马逊云科技公有云根底设施上。

咱们经常听到“生态系统”这个词,而生态系统成功的关键是两边怎么最大极限地为客户供给最好的成果。在亚马逊云科技和 Snowflake 项目中,咱们看到的是一个真实的云生态系统。这是云生态成功的一个典范,值得全云核算工作深化研究。

用户立异事例两则

1. Untold Studios 100%根据云端的作业室,重塑广告制造形式。

一年一度美国春晚“超级碗(Super Bowl)” – 第56届美国工作橄榄球大联盟年度冠军赛,在北京时刻2022年2月14日晚上落下帷幕。“超级碗”向来都被奉为美国年度收视率最高的赛事,均匀收视率在40%-60%之间,本年光是NBC直播的观看人次就高达9918万,也便是说,每3个美国人里,就有一个人在观看超级碗竞赛。

为了推广 Flamin’Hot 爆辣系列零食,百事旗下休闲零食公司 Frito-Lay(菲多利)脑洞大开,联合广告制造公司 Untold Studios 公司制造了超级碗广告短片《Push It》。它讲述了一个风趣的故事,动物研究员在森林考察的时分,不小心掉出了两袋未吃完的爆辣薯片,树懒、梅花鹿、水牛、棕熊等动物们都闻味而来,对薯片伸出了欲望之爪,终究都被奇特美妙的味道征服,犹如打开了新国际大门。广告中,树懒和其他动物一边唱着音乐组合Salt-N-Pepa的《Push It》,一边吃着火辣辣的零食。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图20 菲多利超级碗广告短片《Push It》片段

光鲜亮丽的视觉背面鲜为人知的是,整个《Push It》广告是都在云上制造的。Untold Studios公司仅花了短短6周时刻,就在亚马逊云科技上建立了云上作业室,让来自全球的45个艺术家在创纪录的短时刻里面创立7个CGI生物,让这一群动物栩栩如生地呈现出来。这开了业界先河,为广告制造带来了全新形式。

在传统的广告制造作业形式下,这种大项目在如此短的时刻内是不或许按时完结的。由于传统的广告作业室中,要有许多的专用软件和高功用机器,使艺术家能够完结烘托。艺术家也倾向于把大部分时刻粘在机器上,等待烘托成果出来。这种形式的约束很显着,即艺术家有必要在现场作业。

Untold Studios另辟蹊径。这家成立于2018年的作业室,是国际上第一家100%根据云核算的作业室,供给了超强的烘托和处理才能,包含视觉效果、动画以及2D和3D规划的云作业流。正是其创始人贯穿于整个事务的心态: 发明力和发明一种协作文明,在短短三年内由只有六个人变成了170个人,成为了一些音乐界最令人垂涎的名字的协作伙伴,还取得了艾美奖和英国电影学院奖的提名。

Untold Studios的云上作业室带来了新的、令人兴奋的作业方法的或许性。

一是艺术家们可随时随地拜访云上作业室。艺术家不会被约束在作业室的大院里ーー他们能够在国际任何地方作业,并且还能进步作业功率。作业室能够节约资金和技能资源,一同确保数据安全可靠。艺术家们的作业有了更多的灵敏性,能够更快地迭代和创立,能更多地重视发明性方面。当新冠疫情迸发时,Untold的团队简直没有什么改动,由于职工能够在家作业,经过VPN长途接入云上作业室。

二是取得了满足弹性、协作和功率。当一个新事务使得作业室有必要敏捷扩大规划,以便按时完结一个项目时,云作业室能够从国际各地请来艺术家,虚拟作业站答应这些艺术家长途作业,云供给满足的资源。

三是运用最新的技能。Amazon EC2 G4实例为Untold Studios供给了最新的视觉核算渠道,以加速构思作业流程,削减上市时刻,并进步规划质量。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图21 Amazon G4dn实例

2. 美巡赛“每一次击球直播”App 让球迷做“制片人”,革新性地改动了高尔夫竞赛的报导方法。

美国 PGA 巡回赛(PGA Tour,简称“美巡赛”)是一项美国工作高尔夫球系列赛事的总称,开端于1929年,走过了近一百年的征程,是国际尖端的高尔夫工作巡回赛,每年举办超越130场工作赛事。在国际范围内,美巡赛的赛事在二百多个国家和地区近10亿户家庭中播映。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图22 PGA Tour竞赛瞬间

与其它运动不同的是,高尔夫球场上不止一个球,这使得球迷很难了解每个球员的表现。以“球员锦标赛”(The Players Championship,也是PGA巡回赛事之一,具有全国际最顶尖的参赛阵型,被称为“第五大满贯”)为例,144名高尔夫球手在72个洞中投出超越32,000个球。遗憾的是,传统电视节目均匀只能播出11%的竞赛。清楚明了的是,这没法满意专业球迷越来越高的个性化观赛需求。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图23 球员击球进洞

2021年,PGA Tour 决定立异球迷观赛方法,在这年的球员锦标赛上经过开创性的粉丝运用程序“每一次拍照现场(Every Shot Live)”来让球迷取得更好的体会。该运用程序让球迷经过直播重视他们喜爱的任何球员,让他们坐在制片人的位置上,对他们自己看到的内容有更多的操控权,观看简直全部球员的每一次击球,比方球飞翔的轨迹、球员的动作和球员前史的统计数据,这样就供给给球迷相似于一种游戏的沉浸式体会。

在这立异观赛方法的背面,是2021年3月 PGA 挑选亚马逊云科技作为巡回赛的官方云服务供给商,包含官方云供货商、人工智能云供货商、深度学习云供货商和机器学习云供货商。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图24 亚马逊云科技和PGA Tour协作

PGA Tours 运用亚马逊云科技机器学习、存储、核算、剖析、数据库和媒体服务来快速处理和分发每场高尔夫锦标赛的视频片段,一同也为球迷供给了参加 Tours 内容的新方法。巡回赛在每次竞赛中捕捉数百小时的原始画面,并将运用亚马逊云科技敏捷将这些内容转换成令人兴奋的新数字体会,为球迷供给更完好和个性化的体会。

例如,Every Shot Live App 为观众供给竞赛中每位选手的每个镜头的现场直播。球迷能够挑选实时重视任何一个球员,并在他们挑选的任何设备上播映每一个镜头,答应他们经过不同的摄像角度改动他们的观看视角,在球场周围导航,查看速度轮,并依据需求显现各种数据,这给球迷供给视频游戏般的高尔夫观看体会操控。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图25 PGA Tour Every Shot Live App运用暗示

PGA Tour的立异,供给了全新的球迷驱动型体会。这对球迷来说是一个游戏规则的改动,这比照赛报导来说也是一个游戏规则的改动。美巡赛数字运营高级副总裁斯科特古特曼将“Every Shot Live”描绘为“高尔夫报导的未来”和“美巡赛有史以来最激动人心的技能工作之一”。来看看他们的广告语:“每个球员。每个球洞。每次挥杆。实时。”

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

结尾:云核算的立异永无止境

笔者前文所论述的亚马逊云科技四层立异系统如图27表明。在笔者看来,亚马逊云科技的立异不是单一的,而是立体的;不是封闭的,而是开放的;不是以自我收益为中心的,而是以客户成功为中心的。应该说,没有立异,就没有亚马逊云科技的诞生,就没有云核算的今日。但是,笔者清楚理解的是,亚马逊云科技的立异理念、立异产品、立异前史、立异故事远远不是这戋戋一万文字所能表达和论述清楚的。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

图27 亚马逊云科技四层立异系统

十六年来,云核算早已从抽象的概念走向日子的方方面面。也许,你仍是说不清什么是云核算,但咱们早已离不开这个幕后英雄。

Amazon CTO Werner Vogels博士从前说:“现现在,人们能够创立出具有高度可扩展性和可靠性的运用,比方Airbnb、Uber 或 Dropbox等等,而这在之前是不或许的。假如没有云渠道呈现,这些服务都将不复存在。”

其实,不止亚马逊云科技,还有更多的云核算参加者,像微软云Azure、谷歌云GCP、阿里云、腾讯云、华为云、RackSpace、OpenStack等等,都是云核算的前史发明者和立异实践者。不止云核算厂商,还有千千万万的云核算用户们和从业者们。正是他们,正是你们,正是咱们,一同在发明着云核算的前史,一同在推动着云核算生长,也一同在发明着云核算的未来。云核算的征途是汪洋大海,立异无止境,云核算的展开永不停歇。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

本篇作者

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

刘世民

云核算技能专家,曾就职于华为、IBM、海航等公司,专注于云核算。曾在海航集团易航科技担任云服务工作群总经理一职,担任 IDC、云渠道、系统运维、信息安全以及用户服务等事务。保护有“世民谈云核算”技能博客和微信大众号。《OpenShift云原生架构原理与实践》作者之一、《Ceph Cookbook中文版》《通晓OpenStack》、《机器学习即服务:将Python机器学习构思快速转变为云端Web运用程序》译者之一。

亚马逊云科技启示录:创新作帆,云计算的征途是汪洋大海

阅览原文:dev.amazoncloud.cn/column/arti…