助力客戶(hù)實(shí)現(xiàn)Zero-ETL
北京2023年7月11日 /美通社/ -- 亞馬遜云科技宣布,完全托管的PB級(jí)云數(shù)據(jù)倉(cāng)庫(kù)服務(wù)Amazon Redshift的數(shù)據(jù)共享功能現(xiàn)已在由光環(huán)新網(wǎng)運(yùn)營(yíng)的亞馬遜云科技中國(guó)(北京)區(qū)域和由西云數(shù)據(jù)運(yùn)營(yíng)的亞馬遜云科技中國(guó)(寧夏)區(qū)域推出。該功能可以讓客戶(hù)安全、方便地在Amazon Redshift集群之間實(shí)時(shí)共享數(shù)據(jù),助力客戶(hù)邁向一個(gè)"Zero-ETL"的未來(lái)。
亞馬遜云科技一直致力于為客戶(hù)消除數(shù)據(jù)ETL(提取、轉(zhuǎn)換和加載)和其它數(shù)據(jù)遷移任務(wù)所帶來(lái)的繁重壓力,幫助客戶(hù)專(zhuān)注于分析數(shù)據(jù),幫助業(yè)務(wù)獲取新的洞察。此次推出的Amazon Redshift數(shù)據(jù)共享功能是在Amazon Redshift數(shù)據(jù)倉(cāng)庫(kù)之間共享數(shù)據(jù)的簡(jiǎn)單直接的方式。
此前,當(dāng)需要在兩個(gè)集群環(huán)境運(yùn)行不同業(yè)務(wù)負(fù)載時(shí),客戶(hù)不得不復(fù)制和移動(dòng)同一套數(shù)據(jù)才能實(shí)現(xiàn)數(shù)據(jù)共享,這一過(guò)程不僅提高了使用成本,也大大增加了數(shù)據(jù)維護(hù)和保證數(shù)據(jù)一致性的難度。如今借助數(shù)據(jù)共享功能,客戶(hù)可以實(shí)現(xiàn)即時(shí)、精細(xì)和高性能的數(shù)據(jù)訪問(wèn),為所有數(shù)據(jù)使用者提供實(shí)時(shí)、一致的數(shù)據(jù)視圖,從而在組織內(nèi)和組織之間、以及與外部相關(guān)方進(jìn)行安全受控的協(xié)作。利用該項(xiàng)功能,客戶(hù)還可以將數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)與多個(gè)BI和分析集群共享;多個(gè)業(yè)務(wù)組之間可以方便地協(xié)作開(kāi)展更廣泛的分析和數(shù)據(jù)科學(xué)研究;組織內(nèi)以及跨組織的協(xié)作也可以共享數(shù)據(jù)服務(wù),以各種精度共享數(shù)據(jù)。
數(shù)據(jù)共享可以在同一賬戶(hù)內(nèi)進(jìn)行,也可以跨不同賬戶(hù),只要賬戶(hù)在同一區(qū)域即可。在Amazon Redshift集群上使用數(shù)據(jù)共享不會(huì)產(chǎn)生額外成本,RA3節(jié)點(diǎn)類(lèi)型的Amazon Redshift集群可以直接使用該功能。
在"Zero-ETL"技術(shù)領(lǐng)域,亞馬遜云科技很早就在Amazon Redshift上推出聯(lián)邦查詢(xún)(Federated Query)功能,讓用戶(hù)可以對(duì)跨數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)湖的數(shù)據(jù)進(jìn)行查詢(xún)和分析,而無(wú)需移動(dòng)數(shù)據(jù)。聯(lián)邦查詢(xún)功能可實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)集成并簡(jiǎn)化ETL處理流程。2022年底,亞馬遜云科技進(jìn)一步發(fā)布兩項(xiàng)功能,分別助力客戶(hù)使用Amazon Redshift近乎實(shí)時(shí)地分析Amazon Aurora中的數(shù)據(jù),無(wú)需在不同服務(wù)之間進(jìn)行數(shù)據(jù)ETL;以及幫助客戶(hù)可以在Amazon Redshift的數(shù)據(jù)上輕松運(yùn)行Apache Spark應(yīng)用程序。通過(guò)這些新功能的陸續(xù)發(fā)布,亞馬遜云科技幫助客戶(hù)逐漸邁入一個(gè)"Zero-ETL"的未來(lái)。
知名生物制藥公司Moderna將大部分臨床試驗(yàn)數(shù)據(jù)都存儲(chǔ)在亞馬遜云科技之上。Moderna使用Amazon Redshift進(jìn)行數(shù)據(jù)分析,其中包括支持新冠疫苗開(kāi)發(fā)的分析。通過(guò)包括Amazon Redshift數(shù)據(jù)共享在內(nèi)的多項(xiàng)功能,Moderna能夠輕松擴(kuò)大系統(tǒng)規(guī)模,加快業(yè)務(wù)流程,只用42天就交付出新冠疫苗,迅速將其供應(yīng)到幾十個(gè)國(guó)家。Moderna首席執(zhí)行官Stéphane Bancel表示:"mRNA藥物背后的科學(xué)發(fā)展速度迅猛。Moderna在亞馬遜云科技上構(gòu)建技術(shù)平臺(tái),為我們的科學(xué)家提供了所需的洞察力、靈活性和安全性,才使得我們能夠不斷在行業(yè)中保持領(lǐng)先地位。"
GE Digital的Proficy制造數(shù)據(jù)云(Proficy MDC)是其制造執(zhí)行系統(tǒng)(MES)整套解決方案的一部分。通過(guò)將Proficy MDC平移到Amazon Redshift,GE Digital提高了可擴(kuò)展性,降低了運(yùn)營(yíng)成本,并且優(yōu)化了新功能路線圖。從數(shù)據(jù)源到數(shù)據(jù)模型的延遲降低了87%,ETL(數(shù)據(jù)抽取、轉(zhuǎn)換與加載)效率提高了75%,降低了基礎(chǔ)設(shè)施、維護(hù)和管理成本,提高了客戶(hù)獲取信息的能力,簡(jiǎn)化了開(kāi)發(fā)流程。GE Digital高級(jí)軟件工程師Madhu Muppagownigi還表示:"通過(guò)Amazon Redshift,我們能夠?yàn)榭蛻?hù)提供更多功能。"