上海2016年11月14日電 /美通社/ -- 2016年11月11日凌晨零點(diǎn),“雙十一”網(wǎng)絡(luò)促銷狂歡正式啟動。開場1小時57秒,總成交額突破362億元,已超過2013年“雙十一”全天交易額。剁手黨順利下單付款,火爆成績的背后,少不了對銀行系統(tǒng)高并發(fā)訪問的考驗(yàn)。
從10日晚上開始,天旦的幾十位工程師精神滿滿,與銀行的工作人員運(yùn)籌帷幄、群策群力,為今年的“雙十一”狂歡交易通宵保障。而這一長串幾十家的保障名單,幾乎重疊了支付寶的交易榜單。
備戰(zhàn)“雙十一”的不止是商家,還有金融系統(tǒng)
凌晨,零點(diǎn)剛過11分,招商銀行數(shù)據(jù)中心監(jiān)控大屏上顯示,信用卡交易額已突破10億元。而在另一家股份制銀行,19分鐘內(nèi)交易筆數(shù)突破100萬,交易峰值比去年整整提高了70%。
這邊“剁手黨們”搶購正歡的同時,另一邊,銀行的工作人員和天旦的工程師們?nèi)找箠^戰(zhàn),全力保障銀行交付系統(tǒng)穩(wěn)定運(yùn)行。對銀行來說,“雙十一”重要、核心的考驗(yàn)就是交易量的猛增,平時夜間每秒處理100筆的系統(tǒng),在“雙十一”期間可能要面臨30多倍甚至更多倍的增長,但凡其中任何一個細(xì)小的環(huán)節(jié)無法承受高交易量的負(fù)荷,都將造成業(yè)務(wù)中斷,導(dǎo)致用戶交易失敗,無法順利“秒殺”。
從年初開始,招商銀行數(shù)據(jù)中心專門立項(xiàng),完成關(guān)鍵系統(tǒng)服務(wù)器擴(kuò)容、存儲設(shè)備升級,進(jìn)行應(yīng)用優(yōu)化,集中精力解決支付瓶頸,分拆熱點(diǎn)日志,優(yōu)化負(fù)載均衡,提高數(shù)據(jù)庫訪問效率。同時,對各種風(fēng)險異常場景進(jìn)行梳理,制定應(yīng)急策略,建立了一整套快速應(yīng)急響應(yīng)指揮機(jī)制,并全面落實(shí)7x24小時現(xiàn)場值班保障。
不止是招商銀行,各銀行紛紛提前2至3個月就著手進(jìn)行壓力測試,模擬巨量交易并發(fā),測試系統(tǒng)的承受能力,針對問題系統(tǒng)或環(huán)節(jié)及時優(yōu)化。尤其是在天旦業(yè)務(wù)性能管理工具BPC和NPM的整合使用,能夠幫助銀行數(shù)據(jù)中心進(jìn)行有交易量、性能指標(biāo)、網(wǎng)絡(luò)層指標(biāo)的精確容量規(guī)劃。也能夠給開發(fā)中心持續(xù)優(yōu)化核心系統(tǒng)性能,提供可靠依據(jù)。
同時,隨著“雙十一”的臨近,部署在各行的天旦BPC和NPM也會進(jìn)行更加細(xì)致的調(diào)整,依靠大數(shù)據(jù)分析技術(shù)對海量歷史性能數(shù)據(jù)進(jìn)行告警模擬和精確設(shè)置。
銀行圓滿完成“雙十一”交易量考驗(yàn)
11月11日凌晨,“戰(zhàn)火”一觸即發(fā)。
在各家銀行的監(jiān)控中心,天旦BPC/NPM,以及Smart View 立體監(jiān)控視圖,發(fā)揮著關(guān)鍵的實(shí)時性能監(jiān)控作用。銀行領(lǐng)導(dǎo)在ECC關(guān)注著Team Vision業(yè)務(wù)大屏上緊張?zhí)鴦拥慕灰琢亢徒灰捉痤~,現(xiàn)場主機(jī)、應(yīng)用、網(wǎng)絡(luò)、開發(fā)部門使用BPC和NPM進(jìn)行實(shí)時監(jiān)測和及時的異常分析,成功地保障著銀行電子支付業(yè)務(wù)的卓越運(yùn)行。
零點(diǎn)02分,某行發(fā)現(xiàn)交易時間達(dá)到6秒,已遠(yuǎn)遠(yuǎn)超過50毫秒的正常值,天旦BPC快速定位問題,立刻發(fā)現(xiàn)是由于在處理前端交易時,系統(tǒng)對用戶信息的核對耗時過長,迅速快速調(diào)整,恢復(fù)業(yè)務(wù)的快速運(yùn)轉(zhuǎn)。
一家股份制銀行數(shù)據(jù)中心總經(jīng)理對天旦提供的立體監(jiān)控方案給予了高度評價:“不但為業(yè)務(wù)保障提供了實(shí)時、精準(zhǔn)的監(jiān)控分析能力,而且在核心系統(tǒng)開發(fā)、測試和上線和優(yōu)化過程也發(fā)揮了極大的促進(jìn)作用?!?/p>
天旦保障小分隊(duì)和某商業(yè)銀行用戶
作為技術(shù)支持,在緊迫的時間內(nèi)解決各大銀行網(wǎng)絡(luò)部門在雙十一所面臨的問題,天旦BPC給出了一份優(yōu)秀的答卷:
即便是事先模擬一百次,也無法準(zhǔn)確預(yù)料現(xiàn)場將會發(fā)生什么。在“雙十一”當(dāng)天,在各銀行監(jiān)控中心,BPC、NPM實(shí)時反應(yīng)業(yè)務(wù)運(yùn)行狀況,發(fā)現(xiàn)問題準(zhǔn)確定位,提前告警幫助銀行用戶切換預(yù)案,確保業(yè)務(wù)的運(yùn)轉(zhuǎn)。同時,BPC為銀行負(fù)責(zé)人提供全面、實(shí)時、準(zhǔn)確的視角,以便隨時掌握業(yè)務(wù)發(fā)展的情況。
對于“雙十一”激增交易量的極端情況,如果少了BPC會怎么樣?
“銀行如果依靠各部門的監(jiān)控工具自行監(jiān)測,運(yùn)用各自的統(tǒng)計口徑,無法直接對應(yīng)業(yè)務(wù),就需要靠專家經(jīng)驗(yàn)來進(jìn)行分析?!碧斓┑馁Y深技術(shù)工程師表示,“在系統(tǒng)非常龐大,時間極度緊迫的情況下,往往排障的時間會很長。還有一種做法就是,為了應(yīng)對到來的峰值,準(zhǔn)備遠(yuǎn)遠(yuǎn)超過實(shí)際需求的資源投入,比如提前準(zhǔn)備數(shù)倍的硬件資源和網(wǎng)絡(luò)帶寬,但最終實(shí)際業(yè)務(wù)量可能只增加不到一倍。
在今年“雙十一”的銀行極端交易量前,天旦的核心技術(shù)“互聯(lián)數(shù)據(jù)(Wire data)”顯示出了實(shí)時、全量、客觀的優(yōu)勢,天旦的技術(shù)支持團(tuán)隊(duì)與各銀行的工作人員徹夜奮戰(zhàn),為今年的“雙十一”提供堅實(shí)的保障,交上了一份滿意的答卷。