當蘇商銀行的客戶輕點手機、簡單操作,便能完成百萬級小微貸款申請、審批等全流程業務時,他們或許并不了解,這一“秒批、秒用”極致體驗背后,正是該行實施的一項數據底座PB級數據查詢性能優化項目在發揮關鍵作用。
蘇商銀行是江蘇省首家數字銀行、全球十大數字銀行,自成立以來,堅持“科技驅動的O2O銀行”定位,狠抓數據能力和科技能力建設,加快發展數字金融服務,形成了“專業化、精細化、特色化、新穎化”發展特色,累計服務用戶超過7600萬。
走進這家數字銀行的“數據中樞”,展現在眼前的是一幅令人震撼的科技圖景:超過6PB的數據洪流在服務器陣列中來回奔涌,數據量相當于國家圖書館數字資源總量的2.23倍;每天,該行的大數據系統要接收5000次以上數據查詢需求、產生20萬張表單、執行5萬多個批量計算任務,這給數據查詢工作提出了極高的要求。
為此,蘇商銀行數據資源部的工程師們進行了一場“數據查詢攻堅戰”——為PB級數據查詢工具安上“渦輪增壓器”。
“過去,數據查詢就像在早高峰的鬧市區開車,常常會堵上十幾分鐘甚至更長時間。現在,則是行駛在了一條智慧高速公路上。”該行數據資源部相關負責人道出了這場技術攻堅帶來的顯著變化。
項目團隊拆解系統時發現,傳統數據架構如同需要層層審批的行政流程,每個查詢都要經過資源調度、任務編排等多個環節,整體處理鏈路冗長復雜,就像快遞包裹要輾轉多個分揀中心。
“必須給數據查詢修條直達的專線!”按照“科技使金融更簡單”的思路,數據資源部工程師們重新設計了整體架構方案。他們引入并行處理的MPP分布式高性能查詢引擎,這種技術能同時啟動上千個計算單元,相當于給數據高速公路增設了智能可變車道。
在基于開源MPP查詢引擎基礎上,該項目在自動觸發統計信息采集、查詢反饋機制這兩個核心模塊進行了性能優化增強,就好比給系統配備了一個“聰明的小管家”,能自動分析應用更快方法,自動執行統計信息的收集和優化,全過程完全不需要人工干預。
“數據查詢速度每提升一秒,金融服務就能多觸達一片田地。”在介紹項目成果時,該行項目負責人展示了這樣一組數據:經過項目實施,該行PB級數據查詢速度大幅提升了24倍,實時反欺詐系統的響應速度進入毫秒級,信貸審批系統的風險模型訓練時間縮短60%......該項目的實施,有力地支撐了蘇商銀行持續提升自主可控的大數據智能風控和數字金融服務能力。
數字技術的有效應用,正在重塑金融服務的方方面面。蘇商銀行相關負責人表示,“我們將持續推動數據、技術與業務深度融合,更好賦能實體經濟,書寫數字金融高質量發展新篇章!
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.