【簡(jiǎn)介:】聽說亞馬遜云科技應(yīng)該還可以
作為數(shù)字經(jīng)濟(jì)的“技術(shù)底座”的云計(jì)算行業(yè)已是當(dāng)下全球備受關(guān)注和最熱門的產(chǎn)業(yè)之一。15年前,自亞馬遜開創(chuàng)云計(jì)算這一產(chǎn)業(yè)以來,公司一直引領(lǐng)該產(chǎn)業(yè)
聽說亞馬遜云科技應(yīng)該還可以
作為數(shù)字經(jīng)濟(jì)的“技術(shù)底座”的云計(jì)算行業(yè)已是當(dāng)下全球備受關(guān)注和最熱門的產(chǎn)業(yè)之一。15年前,自亞馬遜開創(chuàng)云計(jì)算這一產(chǎn)業(yè)以來,公司一直引領(lǐng)該產(chǎn)業(yè)的發(fā)展。從2012年開始舉辦的亞馬遜云科技re:Invent全球大會(huì),已日趨成為全球云計(jì)算行業(yè)創(chuàng)新的風(fēng)向標(biāo)。因?yàn)槊磕陙嗰R遜云科技都會(huì)在大會(huì)上宣布推出大量突破性的新技術(shù)新服務(wù),有些甚至開創(chuàng)了全新的技術(shù)領(lǐng)域。回顧過去十年在亞馬遜云科技re:Invent全球大會(huì)上的重磅發(fā)布,幾乎是一部云計(jì)算技術(shù)發(fā)展的剪影和簡(jiǎn)史,也讓人對(duì)即將于11月29日(美國(guó)當(dāng)?shù)貢r(shí)間)開啟的今年的盛會(huì)更加期待。2012年:發(fā)布業(yè)界首個(gè)云上數(shù)據(jù)倉(cāng)庫(kù)Amazon Redshift,實(shí)現(xiàn)并發(fā)擴(kuò)展的過程中持續(xù)穩(wěn)定的查詢性能,且按用量付費(fèi),數(shù)據(jù)倉(cāng)庫(kù)不再只是超大型企業(yè)的專利。在此之前,數(shù)據(jù)倉(cāng)庫(kù)是一項(xiàng)重資產(chǎn)的技術(shù),只有大企業(yè)才負(fù)擔(dān)得起,而且效果很不理想。Amazon Redshift直接在云上部署,規(guī)避了軟件在本地安裝時(shí)要考慮的兼容存儲(chǔ)、計(jì)算能力以及最小安裝等問題。云計(jì)算與生俱來的彈性優(yōu)勢(shì),讓Amazon Redshift帶給客戶低成本起步、簡(jiǎn)化運(yùn)維和接近無限的擴(kuò)展能力,實(shí)現(xiàn)并發(fā)擴(kuò)展的過程中持續(xù)穩(wěn)定的查詢性能,且按用量付費(fèi)。Amazon Redshift一經(jīng)推出迅速成為亞馬遜云科技有史以來發(fā)展最快的服務(wù),這個(gè)記錄一直保持到后來亞馬遜云科技推出云原生關(guān)系數(shù)據(jù)庫(kù)Amazon Aurora。在亞馬遜云科技,產(chǎn)品發(fā)布不是終點(diǎn)而是起點(diǎn),在發(fā)布之后會(huì)一直不斷創(chuàng)新迭代。Amazon Redshift也不例外,尤其值得大書特書的是2017年發(fā)布的Amazon Redshift Spectrum,它讓Amazon Redshift具備了打通數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)湖的能力,支持企業(yè)進(jìn)行跨數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖和運(yùn)營(yíng)數(shù)據(jù)庫(kù)的數(shù)據(jù)查詢,形成此后亞馬遜云科技推出的智能湖倉(cāng)架構(gòu)的雛形。2013年:發(fā)布實(shí)時(shí)流式數(shù)據(jù)服務(wù)Amazon Kinesis,為移動(dòng)互聯(lián)網(wǎng)時(shí)代的流式數(shù)據(jù)實(shí)時(shí)分析處理奠定基礎(chǔ)。當(dāng)年正值移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)興起,產(chǎn)生了海量的互聯(lián)網(wǎng)日志數(shù)據(jù)、設(shè)備數(shù)據(jù)、視頻數(shù)據(jù)。數(shù)據(jù)源頭多,實(shí)時(shí)產(chǎn)生,源源不斷奔涌而來,傳統(tǒng)的數(shù)據(jù)管理技術(shù)難以招架。Amazon Kinesis以云上托管的形式,開啟了云上實(shí)時(shí)接收及處理流式數(shù)據(jù)的先河,為移動(dòng)互聯(lián)網(wǎng)時(shí)代的流式數(shù)據(jù)實(shí)時(shí)分析處理奠定了基礎(chǔ),如今它已廣泛用于監(jiān)控、作弊檢測(cè)和實(shí)時(shí)排行榜等實(shí)時(shí)應(yīng)用程序,消費(fèi)電器、嵌入式傳感器、電視機(jī)頂盒等 IoT 設(shè)備的流數(shù)據(jù)處理,家庭、辦公室、工廠和公共場(chǎng)所的安全監(jiān)控?cái)?shù)據(jù)流處理,以及應(yīng)用程序之間的數(shù)據(jù)共享、流式抽取-轉(zhuǎn)換-加載和實(shí)時(shí)分析。2014年:發(fā)布云原生關(guān)系數(shù)據(jù)庫(kù)Amazon Aurora,兼具性能和成本效益,它在日后成為亞馬遜云科技?xì)v史上用戶數(shù)量增速最快的云服務(wù);發(fā)布業(yè)界首個(gè)Serverless函數(shù)計(jì)算服務(wù)Amazon Lambda,顛覆應(yīng)用運(yùn)營(yíng)模式,免除運(yùn)維煩惱,讓開發(fā)者更專注于業(yè)務(wù)。Amazon Aurora云原生關(guān)系數(shù)據(jù)庫(kù)截至目前仍是亞馬遜云科技?xì)v史上用戶數(shù)量增速最快的云服務(wù)。 Amazon Aurora全面兼容開源數(shù)據(jù)庫(kù)MySQL及PostgreSQL,它的速度最高可以達(dá)到標(biāo)準(zhǔn)MySQL的5倍、標(biāo)準(zhǔn)PostgreSQL的3倍,成本卻只有傳統(tǒng)商業(yè)級(jí)數(shù)據(jù)的十分之一。Amazon Aurora還提供高可用性和持久性,可跨 3 個(gè)可用區(qū)(AZ)復(fù)制 6 個(gè)數(shù)據(jù)副本,從而可以容忍AZ+1 的故障,即,在1個(gè)AZ癱瘓的情況下仍然可以寫入數(shù)據(jù);在1個(gè)AZ癱瘓并且再發(fā)生1個(gè)存儲(chǔ)節(jié)點(diǎn)故障的情況下,不會(huì)丟失數(shù)據(jù)。Amazon Lambda是業(yè)界首個(gè)Serverless函數(shù)計(jì)算服務(wù),它讓開發(fā)者可以運(yùn)行幾乎任何類型的應(yīng)用程序或后端服務(wù)代碼,無需預(yù)置或管理服務(wù)器,從而更專注自己的業(yè)務(wù)。Amazon Lambda的推出開闊了整個(gè)云計(jì)算業(yè)界的視野,今天,Serverless這種全新的應(yīng)用程序架構(gòu),正成為整個(gè)軟件架構(gòu)世界的一大核心議題。2015年:發(fā)布首個(gè)按會(huì)話付費(fèi)的商業(yè)智能(BI)服務(wù)Amazon QuickSight,強(qiáng)勢(shì)解決大數(shù)據(jù)應(yīng)用“最后一公里”問題;發(fā)布亞馬遜云科技首個(gè)硬件服務(wù)Amazon Snowball,海量數(shù)據(jù)可以快速安全的遷移上云。跟數(shù)據(jù)倉(cāng)庫(kù)的情況類似,在Amazon QuickSight之前,商業(yè)智能(BI)也是一項(xiàng)重資產(chǎn)的IT投入。Amazon QuickSight讓用戶按會(huì)話付費(fèi),基礎(chǔ)設(shè)施由亞馬遜云科技全托管,極大地降低了 BI 的門檻。Amazon QuickSight是整個(gè)亞馬遜云科技整個(gè)云服務(wù)體系中離商業(yè)決策最近的服務(wù)之一,幫助客戶解決大數(shù)據(jù)應(yīng)用的“最后一公里”問題。Amazon Snowball是亞馬遜云科技首個(gè)硬件服務(wù),以租用的方式提供給客戶,開創(chuàng)了海量數(shù)據(jù)快速安全遷移上云新模式。今天,亞馬遜云科技已經(jīng)發(fā)展出完整的Amazon Snow 系列服務(wù),規(guī)模從小到大,包括 Amazon Snowcone、Amazon Snowball 和Amazon Snowmobile,具備邊緣計(jì)算、PB級(jí)數(shù)據(jù)傳輸、邊緣存儲(chǔ)等多方面的功能,不斷將云計(jì)算的能力推送到世界每一個(gè)角落。2016年:發(fā)布Serverless的交互式查詢服務(wù)Amazon Athena和數(shù)據(jù)集成服務(wù)Amazon Glue,為云上數(shù)據(jù)湖解決方案邁出重要一步。Amazon Athena和Amazon Glue的發(fā)布是亞馬遜云科技邁向數(shù)據(jù)湖的重要一步,因?yàn)閿?shù)據(jù)不需要預(yù)處理,可以源源不斷地直接存入Amazon Simple Storage Service(Amazon S3,一種簡(jiǎn)單、持久、可大規(guī)模擴(kuò)展的對(duì)象存儲(chǔ)服務(wù)),成為數(shù)據(jù)湖的核心。2017年:發(fā)布Amazon Nitro系統(tǒng),重構(gòu)云計(jì)算的基礎(chǔ)。Nitro架構(gòu)充分釋放服務(wù)器性能,擺脫虛擬化損耗。用戶可獲取更多算力,上百種EC2實(shí)例創(chuàng)新都以此為基石。發(fā)布首個(gè)機(jī)器學(xué)習(xí)集成開發(fā)環(huán)境Amazon SageMaker,破除軟硬件環(huán)境限制及資金門檻,釋放數(shù)據(jù)科學(xué)家的生產(chǎn)力。Amazon Nitro架構(gòu)是Amazon EC2計(jì)算實(shí)例實(shí)現(xiàn)高性能、高安全性和快速創(chuàng)新的秘密武器。傳統(tǒng)云計(jì)算都是基于軟件虛擬化的計(jì)算,服務(wù)器既要運(yùn)行提供給客戶的虛擬機(jī),也要運(yùn)行網(wǎng)絡(luò)、存儲(chǔ)、安全、監(jiān)控等各項(xiàng)功能,服務(wù)器管理虛擬機(jī)大約要占去30%的服務(wù)器性能開銷,導(dǎo)致服務(wù)器只有約七成的資源能夠提供給用戶。Amazon Nitro架構(gòu)在業(yè)界首次使用專用芯片,采用板卡+專用軟件的方式,把服務(wù)器性能完全通過全新虛擬化技術(shù)解放出來,消除服務(wù)器虛擬化性能損耗,用戶可獲取全部物理服務(wù)器資源。如今,Amazon Nitro架構(gòu)已經(jīng)成為亞馬遜彈性計(jì)算服務(wù)Amazon Elastic Cloud Compute(Amazon EC2)一代一代新實(shí)例的公共基礎(chǔ)平臺(tái),它讓亞馬遜云科技可以利用處理器技術(shù)的不斷創(chuàng)新,快速推出新一代Amazon EC2實(shí)例,超過400種EC2實(shí)例創(chuàng)新都以此為基石。以往,開展機(jī)器學(xué)習(xí)需要搭建硬件環(huán)境并適配其兼容性、配置機(jī)器學(xué)習(xí)框架、分別部署多種工具,用于準(zhǔn)備數(shù)據(jù)、訓(xùn)練模型、測(cè)試模型、部署模型等等,繁瑣的流程給數(shù)據(jù)科學(xué)家?guī)砗芨叩纳鲜珠T檻。Amazon SageMaker以全托管的方式,消除了基礎(chǔ)設(shè)施管理的繁瑣工作,并且將各種工具部署在一個(gè)平臺(tái)上,讓數(shù)據(jù)科學(xué)家不需要花時(shí)間構(gòu)建機(jī)器學(xué)習(xí)的基礎(chǔ)架構(gòu),直接利用開箱即用的集成環(huán)境,專注于機(jī)器學(xué)習(xí)本身。在2019年的re:Invent上,亞馬遜云科技進(jìn)一步推出了Amazon SageMaker Studio,這是首個(gè)全集成的機(jī)器學(xué)習(xí)開發(fā)環(huán)境,對(duì)用戶更友好,進(jìn)一步提高數(shù)據(jù)科學(xué)家的工作效率。2018年:首次發(fā)布Amazon Outposts,真正將云能力延伸到本地,成為亞馬遜云科技重塑混合云的關(guān)鍵一環(huán);首次發(fā)布Amazon DeepRacer,一個(gè)人人都能玩轉(zhuǎn)且趣味無窮的自動(dòng)駕駛賽車,極大地降低機(jī)器學(xué)習(xí)門檻。Amazon Outposts采用租用的模式,利用亞馬遜云科技相同的基礎(chǔ)設(shè)施,首次把Amazon EC2、Amazon Elastic Block Store(Amazon EBS,一種易于使用、適用于任意規(guī)模的高性能數(shù)據(jù)塊存儲(chǔ))、Amazon S3等服務(wù)引入客戶本地的數(shù)據(jù)中心,把云延展到了客戶現(xiàn)場(chǎng),為客戶提供云端和本地一致的體驗(yàn)。AmazonOutposts的推出重塑了混合云的概念。機(jī)器學(xué)習(xí)的一個(gè)重要分支是強(qiáng)化學(xué)習(xí)。Amazon DeepRacer是一款由強(qiáng)化學(xué)習(xí)、3D 賽車模擬器驅(qū)動(dòng),真車 1/18 大小的全自動(dòng)駕駛賽車。DeepRacer內(nèi)置了強(qiáng)化學(xué)習(xí)框架,使用者通過簡(jiǎn)單設(shè)置模型訓(xùn)練參數(shù)就可以在線上 DeepRacer 模擬器中直接訓(xùn)練、評(píng)估和調(diào)整驅(qū)動(dòng)賽車的強(qiáng)化學(xué)習(xí)模型,然后將自己的模型部署到 Amazon DeepRacer 上,從而獲得堪比現(xiàn)實(shí)世界的自動(dòng)駕駛經(jīng)驗(yàn),中學(xué)生也能上手,寓教于樂體驗(yàn)機(jī)器學(xué)習(xí)。亞馬遜云科技還推出了Amazon DeepRacer 聯(lián)賽(包括線上模擬賽和線下實(shí)體賽),無論經(jīng)驗(yàn)豐富的專業(yè)人士,還是第一次開發(fā)模型的新手,都可以通過 Amazon DeepRacer 設(shè)備和 3D 虛擬賽車模擬器參加Amazon DeepRacer月度聯(lián)賽,在比賽中表現(xiàn)優(yōu)異的選手還有機(jī)會(huì)參與re:Invent全球大會(huì)上舉行的Amazon DeepRacer冠軍杯賽。2019年:發(fā)布基于Arm架構(gòu)的自研云原生處理器Amazon Graviton2,開創(chuàng)了企業(yè)級(jí)應(yīng)用大規(guī)模使用云端Arm架構(gòu)服務(wù)的局面,同規(guī)格實(shí)例相較x86架構(gòu)性價(jià)比提升可達(dá)40%;發(fā)布首個(gè)全托管量子計(jì)算服務(wù)Amazon Braket,讓企業(yè)通過熟悉的云計(jì)算模式輕松地開始體驗(yàn)量子計(jì)算。Amazon Graviton2的推出,標(biāo)志著亞馬遜的Arm架構(gòu)自研處理器進(jìn)入規(guī)?;瘧?yīng)用階段。相比X86處理器,Arm處理器架構(gòu)更精簡(jiǎn)、更節(jié)能,但此前一直沒能在企業(yè)級(jí)應(yīng)用領(lǐng)域取得突破。Amazon Graviton2的規(guī)模應(yīng)用樹立了Arm處理器在企業(yè)級(jí)應(yīng)用的標(biāo)桿。對(duì)比x86處理器,基于Amazon Graviton2的同規(guī)格實(shí)例性價(jià)比提升可達(dá)40%?;贏mazon Gravition2處理器,亞馬遜云科技推出了Amazon EC2 M6g、C6g 、R6g等實(shí)例。Amazon Braket讓量子計(jì)算首次走出尖端實(shí)驗(yàn)室,讓廣大的科研機(jī)構(gòu)和企業(yè)也可以加入量子計(jì)算的應(yīng)用探索。Amazon Braket托管了3個(gè)供應(yīng)商的量子計(jì)算機(jī),通過集成,亞馬遜云科技把這些量子計(jì)算機(jī)的計(jì)算資源以云服務(wù)的方式提供給客戶,讓任何有需求的客戶都可以探索量子計(jì)算的潛力。2020年:發(fā)布云上首個(gè)Mac實(shí)例Amazon EC2 Mac,首次實(shí)現(xiàn)在云上按需運(yùn)行macOS工作負(fù)載;發(fā)布Serverless數(shù)據(jù)庫(kù)Amazon Aurora Serverless v2,實(shí)時(shí)自動(dòng)容量伸縮,擺脫繁瑣復(fù)雜的數(shù)據(jù)庫(kù)容量預(yù)置管理,恰到好處的精細(xì)化資源配置,僅為實(shí)際用量付費(fèi)。Amazon EC2 Mac實(shí)例基于Mac mini構(gòu)建,使客戶首次能夠在亞馬遜云科技云端按需運(yùn)行macOS工作負(fù)載,為iPhone、iPad、Mac、Apple Watch、Apple TV和Safari開發(fā)應(yīng)用的開發(fā)人員,可以通過使用EC2 Mac實(shí)例,在幾秒鐘內(nèi)配置和訪問macOS環(huán)境,根據(jù)需求動(dòng)態(tài)擴(kuò)展容量。作為Serverless關(guān)系數(shù)據(jù)庫(kù),Amazon Aurora從Serverless v1進(jìn)化到v2,是一個(gè)質(zhì)的飛躍。v2可以做到實(shí)時(shí)自動(dòng)容量伸縮,只需不到一秒的時(shí)間,即可瞬間將處理能力從數(shù)百個(gè)事務(wù)擴(kuò)展到數(shù)十萬個(gè)事務(wù)。開發(fā)者不需要按峰值負(fù)載來預(yù)置容量,從而節(jié)省高達(dá)90%的成本。Amazon Aurora Serverless v2在整個(gè)行業(yè)推動(dòng)了數(shù)據(jù)庫(kù)服務(wù)的演進(jìn)。2021年:如今,第十屆re:Invent即將盛大啟幕。亞馬遜云科技將繼續(xù)發(fā)布一系列重塑未來的創(chuàng)新技術(shù)和服務(wù),并邀請(qǐng)全球各行各業(yè)的客戶及亞馬遜云科技合作伙伴分享前沿商業(yè)創(chuàng)新實(shí)踐,繼續(xù)引領(lǐng)云技術(shù)和產(chǎn)業(yè)未來發(fā)展的風(fēng)向。本次大會(huì)將進(jìn)行同步線上直播。