亞馬遜云科技推出“智能湖倉”架構(gòu)

北京2021年7月9日 /美通社/ -- 近日，亞馬遜云科技針對(duì)數(shù)據(jù)及數(shù)據(jù)分析等服務(wù)持續(xù)發(fā)力，推出引領(lǐng)大數(shù)據(jù)未來的“智能湖倉”架構(gòu)，并從2021年初至今在由光環(huán)新網(wǎng)和西云數(shù)據(jù)運(yùn)營的中國區(qū)域總共上線了近40項(xiàng)相關(guān)服務(wù)和特性。亞馬遜云科技“智能湖倉”架構(gòu)將亞馬遜云科技全面而深入的數(shù)據(jù)服務(wù)無縫集成，打通了數(shù)據(jù)湖和數(shù)據(jù)倉庫之間的數(shù)據(jù)移動(dòng)和訪問，并且進(jìn)一步實(shí)現(xiàn)了數(shù)據(jù)在數(shù)據(jù)湖、數(shù)據(jù)倉庫，以及在數(shù)據(jù)查詢、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)等各類專門構(gòu)建的服務(wù)之間按需移動(dòng)，從而形成統(tǒng)一且連續(xù)的整體，滿足客戶各種實(shí)際業(yè)務(wù)場(chǎng)景下的不同需求。亞馬遜云科技“智能湖倉”架構(gòu)具有靈活擴(kuò)展、專門構(gòu)建、數(shù)據(jù)融合、深度智能和開源開放五大特點(diǎn)，涵蓋數(shù)據(jù)源、數(shù)據(jù)攝取層、存儲(chǔ)層、目錄層、數(shù)據(jù)處理層和消費(fèi)層六層架構(gòu)，可幫助客戶輕松應(yīng)對(duì)海量業(yè)務(wù)數(shù)據(jù)，充分挖掘數(shù)據(jù)價(jià)值。

亞馬遜云科技大中華區(qū)云服務(wù)產(chǎn)品部總經(jīng)理顧凡表示，“大數(shù)據(jù)對(duì)于現(xiàn)代商業(yè)的影響不言而喻。用戶期盼從數(shù)據(jù)中獲得洞察，但同時(shí)也面臨數(shù)據(jù)存儲(chǔ)、處理和分析等方面的諸多挑戰(zhàn)，例如數(shù)據(jù)指數(shù)級(jí)增長、數(shù)據(jù)來源不一、數(shù)據(jù)類型多元化等等。面對(duì)細(xì)分的應(yīng)用場(chǎng)景，目前市面上單一、通用的數(shù)據(jù)解決方案在性能上會(huì)有所妥協(xié)，很難滿足客戶的真實(shí)需求，用戶亟需融合了易用、易擴(kuò)展、高性能、專門構(gòu)建、安全及智能等特性于一體的新一代數(shù)據(jù)管理架構(gòu)。亞馬遜云科技‘智能湖倉’架構(gòu)在打通數(shù)據(jù)湖和數(shù)據(jù)倉庫的基礎(chǔ)上，進(jìn)一步將各種數(shù)據(jù)服務(wù)無縫集成，確保數(shù)據(jù)在不同服務(wù)之間順暢流動(dòng)，致力于幫助客戶盡可能最大程度地提高其數(shù)據(jù)價(jià)值，加速創(chuàng)新，并成為數(shù)據(jù)驅(qū)動(dòng)型組織?！?

亞馬遜云科技榮膺中國數(shù)據(jù)管理解決方案領(lǐng)導(dǎo)者

亞馬遜云科技的數(shù)據(jù)及數(shù)據(jù)分析服務(wù)不斷獲得行業(yè)和第三方機(jī)構(gòu)認(rèn)可。此前，全球知名的企業(yè)增長咨詢公司沙利文中國聯(lián)合頭豹研究院發(fā)布了《2020年中國數(shù)據(jù)管理解決方案市場(chǎng)報(bào)告》，其中亞馬遜云科技憑借創(chuàng)新的技術(shù)、靈活的數(shù)據(jù)管理、云上安全、全球商業(yè)實(shí)踐，被評(píng)為中國數(shù)據(jù)管理解決方案領(lǐng)導(dǎo)者。該報(bào)告針對(duì)成長指數(shù)（功能成長）、創(chuàng)新指數(shù)（能力創(chuàng)新）、基本指數(shù)（基本數(shù)據(jù)分析能力）三大維度，對(duì)競(jìng)爭主體旗下數(shù)據(jù)管理解決方案競(jìng)爭力進(jìn)行了評(píng)估。亞馬遜云科技不僅綜合實(shí)力排名第一，且三項(xiàng)指數(shù)均名列第一。

亞馬遜云科技“智能湖倉”架構(gòu)實(shí)現(xiàn)“數(shù)據(jù)入云，融合智能”

亞馬遜云科技“智能湖倉”架構(gòu)以Amazon Simple Storage Service（Amazon S3）為基礎(chǔ)構(gòu)建數(shù)據(jù)湖，作為中央存儲(chǔ)庫，圍繞數(shù)據(jù)湖集成專門的“數(shù)據(jù)服務(wù)環(huán)”，包括數(shù)據(jù)倉庫、機(jī)器學(xué)習(xí)、大數(shù)據(jù)處理、日志分析等數(shù)據(jù)服務(wù)，然后再利用Amazon Lake Formation、Amazon Glue、Amazon Athena、Amazon Redshift Spectrum等工具，實(shí)現(xiàn)數(shù)據(jù)湖的構(gòu)建、數(shù)據(jù)的移動(dòng)和管理等。亞馬遜云科技“智能湖倉”架構(gòu)具有以下五個(gè)特點(diǎn)：

• 靈活擴(kuò)展，安全可靠。亞馬遜云科技“智能湖倉”架構(gòu)用Amazon S3作為數(shù)據(jù)湖的存儲(chǔ)基礎(chǔ)，客戶可根據(jù)不斷變化的需求，靈活擴(kuò)展或縮減存儲(chǔ)資源。Amazon S3可達(dá)到 99.999999999%（11 個(gè) 9）的數(shù)據(jù)持久性，且具有強(qiáng)大的安全性、合規(guī)性和審計(jì)功能。
• 專門構(gòu)建，極致性能。為了滿足客戶不同的數(shù)據(jù)分析需求，亞馬遜云科技提供全面而深入的、專門構(gòu)建的數(shù)據(jù)分析服務(wù)，包括交互式查詢服務(wù)Amazon Athena、云上大數(shù)據(jù)平臺(tái)Amazon EMR、日志分析服務(wù)Amazon Elasticsearch Service、Amazon Kinesis、云數(shù)據(jù)倉庫Amazon Redshift等。這些專門構(gòu)建的數(shù)據(jù)分析服務(wù)為客戶提供了極致性能，客戶在使用過程中不必在性能、規(guī)?；虺杀局g做出任何妥協(xié)。其中Amazon Redshift的性價(jià)比是其他企業(yè)云數(shù)據(jù)倉庫的三倍，AQUA(分布式硬件加速緩存)使 Redshift 查詢的運(yùn)行速度比其他其他云數(shù)據(jù)倉庫最高快 10 倍；Amazon EMR運(yùn)行大數(shù)據(jù)處理及分析服務(wù)的成本不到傳統(tǒng)本地解決方案的一半，但其速度比標(biāo)準(zhǔn) Apache Spark 快 3 倍以上。
• 數(shù)據(jù)融合，統(tǒng)一治理。亞馬遜云科技“智能湖倉”架構(gòu)不止是打通了數(shù)據(jù)湖、數(shù)據(jù)倉庫，還進(jìn)一步將數(shù)據(jù)湖、數(shù)據(jù)倉庫以及所有其它數(shù)據(jù)服務(wù)組成統(tǒng)一且連續(xù)的整體。在實(shí)際應(yīng)用場(chǎng)景中，數(shù)據(jù)需要在這些服務(wù)與數(shù)據(jù)存儲(chǔ)方案之間，以及服務(wù)與服務(wù)之間按需來回移動(dòng)，跨服務(wù)訪問。亞馬遜云科技“智能湖倉”架構(gòu)降低了數(shù)據(jù)融合與數(shù)據(jù)共享時(shí)統(tǒng)一安全管控和數(shù)據(jù)治理的難度。其中，Amazon Glue提供數(shù)據(jù)無縫流動(dòng)能力，Amazon Lake Formation提供了快速構(gòu)建湖倉、簡化安全與管控的全面數(shù)據(jù)管理能力。
• 敏捷分析，深度智能。亞馬遜云科技將數(shù)據(jù)、數(shù)據(jù)分析服務(wù)與機(jī)器學(xué)習(xí)服務(wù)無縫集成，為客戶提供更智能的服務(wù)。例如Amazon Aurora ML、Amazon Redshift ML、Neptune ML等，數(shù)據(jù)庫開發(fā)者只需使用熟悉的 SQL 語句，就能進(jìn)行機(jī)器學(xué)習(xí)操作；Amazon Glue、Amazon Athena ML、Amazon QuickSight Q等，可以幫助用戶使用熟悉的技術(shù)，甚至自然語言來使用機(jī)器學(xué)習(xí)，幫助企業(yè)利用數(shù)據(jù)做出更好的決策。用戶還可以通過機(jī)器學(xué)習(xí)服務(wù)Amazon SageMaker、個(gè)性化推薦服務(wù)Amazon Personalize等挖掘數(shù)據(jù)智能。
• 擁抱開源，開放共贏。亞馬遜云科技“智能湖倉”架構(gòu)中的關(guān)鍵組件如Amazon EMR、Amazon Elasticserach Service、Amazon MSK的核心都基于開源代碼，接口與開源完全兼容，無需改變?nèi)魏未a就可以實(shí)現(xiàn)遷移，也兼容主流的管理工具。OpenSearch 基于開放的Apache2.0 授權(quán)，其代碼完全開放，用戶可以免費(fèi)下載使用并獲得企業(yè)級(jí)的功能。這些服務(wù)允許用戶在轉(zhuǎn)型過程中，以非常低的改造成本向云端遷移。

亞馬遜云科技賦能全球數(shù)以十萬計(jì)的客戶重塑大數(shù)據(jù)

目前，全球數(shù)以十萬計(jì)的客戶選擇亞馬遜云科技進(jìn)行數(shù)據(jù)管理及分析。在中國，TCL、豐田互聯(lián)、欣和、德比軟件、安克創(chuàng)新、啟元世界等各行業(yè)客戶，正在采用亞馬遜云科技數(shù)據(jù)相關(guān)服務(wù)，開展數(shù)據(jù)治理及數(shù)據(jù)價(jià)值挖掘。其中， TCL基于亞馬遜云科技“智能湖倉”架構(gòu)搭建的解決方案，將傳統(tǒng)的數(shù)據(jù)庫、數(shù)據(jù)倉庫與數(shù)據(jù)湖打通，消除了數(shù)據(jù)孤島，讓全品類IoT設(shè)備的數(shù)據(jù)和業(yè)務(wù)系統(tǒng)實(shí)現(xiàn)了互聯(lián)互通，海外業(yè)務(wù)與國內(nèi)業(yè)務(wù)實(shí)現(xiàn)了數(shù)據(jù)統(tǒng)一。TCL使用了亞馬遜云科技廣泛的云服務(wù)，包括：使用Amazon S3構(gòu)建數(shù)據(jù)湖，通過大數(shù)據(jù)分析服務(wù)Amazon EMR、Amazon Redshift和機(jī)器學(xué)習(xí)服務(wù)獲得數(shù)據(jù)洞察等。通過使用亞馬遜云科技專門構(gòu)建的數(shù)據(jù)分析服務(wù)，之前需要一周才能完成的復(fù)雜數(shù)據(jù)報(bào)表，現(xiàn)在僅需要1-2小時(shí)；每天運(yùn)行300個(gè)以上的作業(yè)產(chǎn)生 200多個(gè)BI報(bào)表，為運(yùn)營和數(shù)字化營銷提供有力支撐。

啟元世界（北京）信息技術(shù)服務(wù)有限公司是一家領(lǐng)先的人工智能平臺(tái)公司，公司擁有深度學(xué)習(xí)、強(qiáng)化學(xué)習(xí)等自主研發(fā)的核心技術(shù)和產(chǎn)品，以SaaS的形式，為國內(nèi)多家知名的游戲公司提供虛擬玩家陪玩、游戲商品推薦、關(guān)卡數(shù)值設(shè)計(jì)、游戲內(nèi)容生成等服務(wù)。啟元世界使用了亞馬遜云科技全棧的數(shù)據(jù)分析服務(wù)進(jìn)行高效開發(fā)部署，保障業(yè)務(wù)快速穩(wěn)定發(fā)展。啟元世界CTO龍海濤表示，“作為一家領(lǐng)先的AI公司，我們希望把更多精力聚焦在算法迭代與產(chǎn)品打磨，我們需要成熟、穩(wěn)定、免運(yùn)維的大數(shù)據(jù)托管服務(wù)。亞馬遜云科技智能湖倉通過數(shù)據(jù)的融合，專門構(gòu)建的分析工具，可靠高效地支撐了我們敏捷的業(yè)務(wù)迭代，其中Amazon Kinesis實(shí)現(xiàn)了分鐘級(jí)部署，并承載百萬QPS（每秒查詢率）流數(shù)據(jù)；Amazon EMR、Amazon Managed Workflows for Apache Airflow使批處理運(yùn)行的時(shí)間減少了80%，運(yùn)營總成本下降了50%；Amazon Glue 、Amazon Athena、Amazon QuickSight等服務(wù)實(shí)現(xiàn)了即席查詢秒級(jí)響應(yīng)。”

亞馬遜云科技構(gòu)建了強(qiáng)大的合作伙伴網(wǎng)絡(luò)，通過合作伙伴網(wǎng)絡(luò)成員構(gòu)建行業(yè)數(shù)據(jù)管理解決方案。上海馳騖 (ChiefClouds) 信息科技有限公司，是國內(nèi)領(lǐng)先的消費(fèi)者數(shù)據(jù)營銷平臺(tái)供應(yīng)商，為企業(yè)搭建消費(fèi)者數(shù)據(jù)平臺(tái)（CDP），以此為基礎(chǔ)構(gòu)建覆蓋數(shù)字媒體和陣地運(yùn)營、CRM、智慧導(dǎo)購等場(chǎng)景的全渠道和全鏈路消費(fèi)者運(yùn)營體系。馳騖科技創(chuàng)始人兼CEO 程華奕表示，“作為企業(yè)級(jí)數(shù)據(jù)管理平臺(tái)的實(shí)踐者，我們非常認(rèn)可亞馬遜云科技的智能湖倉架構(gòu)。以Amazon S3為核心的數(shù)據(jù)基礎(chǔ)平臺(tái)，讓我們?cè)诜?wù)客戶時(shí)，在數(shù)據(jù)安全性、可靠性、性能和擴(kuò)展性等方面都沒有后顧之憂。亞馬遜強(qiáng)大的數(shù)據(jù)分析管理工具組合，讓我們能夠?qū)Ω鞣N數(shù)據(jù)處理和分析游刃有余，快捷、高效地利用機(jī)器學(xué)習(xí)挖掘數(shù)據(jù)智能，服務(wù)于客戶的業(yè)務(wù)創(chuàng)新。”

亞馬遜云科技半年內(nèi)在中國區(qū)域新增的近40項(xiàng)數(shù)據(jù)及數(shù)據(jù)分析相關(guān)的服務(wù)及特性，進(jìn)一步強(qiáng)化了亞馬遜云科技數(shù)據(jù)以及數(shù)據(jù)分析相關(guān)服務(wù)組合。其中，Amazon Glue 2.0 版本將作業(yè)啟動(dòng)時(shí)間縮短了10 倍，并且可提供1分鐘最短計(jì)費(fèi)持續(xù)時(shí)間，Amazon Athena 2.0 包括多項(xiàng)性能改進(jìn)和新功能，Amazon Lake Formation在寧夏區(qū)域推出（去年底在北京區(qū)域推出），Amazon Redshift、Amazon EMR、Amazon Elasticsearch Service、Amazon SageMaker等均發(fā)布了諸多新特性。

欲了解更多亞馬遜云科技最新技術(shù)發(fā)布和實(shí)踐創(chuàng)新，敬請(qǐng)關(guān)注即將在上海、北京、深圳三地舉辦的2021亞馬遜云科技中國峰會(huì)，屆時(shí)將攜手眾多業(yè)內(nèi)領(lǐng)先的技術(shù)踐行者們一起分享“云時(shí)代的構(gòu)建故事與重塑經(jīng)驗(yàn)”。