數據是銀行業的重要信息資產。銀行業是我國最早建立層次化數據平臺的行業。由于對數據的強依賴,銀行業一直非常重視數據平臺的建設,經過長期以來的建設和發展,在管理上成立了專門的數據管理部門,有相應的規章制度,以及貫徹業務和IT的工作流程等,技術上具備了相對成熟的數據架構、數據標準、數據質量管理和數據管理工具,在此基礎上形成了管理駕駛艙、自動化統一報表等一系列數據應用。
隨著技術的進步和大數據分析平臺的發展,銀行數據架構的發展有四大方向:
方向一:數據質量持續提升:持續深入進行以元數據為基礎的數據管理建設。
方向二:構建大數據分析平臺:拓展傳統數據架構領域,構建大數據分析平臺。
方向三:大數據分析應用:探索大數據分析在業務領域的應用,包括用戶數字畫像、精準營銷、風險管理等。
方向四:流式計算的應用:探索流式計算的應用,進行業務活動和業務敏感指標的實時監控,降低業務運營風險。
1 方向一
持續深化以元數據為基礎的數據管理建設
銀行業數據架構建設相對完善,但仍然普遍存在一些問題,如:數據標準落地難,數據質量仍需要持續提升、指標口徑不統一的問題。
元數據明確了數據的業務含義,使得不同業務部門之間,以及業務與技術之間采用相同的語言溝通,避免歧義,元數據是數據標準和數據質量的基礎。
銀行業基本已經建立了一套數據標準,但數據標準落地難。究其原因,是數據標準建設完成,只停留在冊子和書本上,缺乏落地的工具,不能有效共享和執行;另外,針對數據標準本身缺乏管理,不能有效適應新業務發展。解決的辦法是數據標準電子化,便于需求分析團隊和開發團隊查詢和使用。在數據產生的源頭就開始貫徹數據標準的落地,包括需求編寫、需求分析和系統開發等階段。嚴格按照數據標準進行需求編寫、需求分析和系統開發,結合數據質量管理、元數據管理串聯整個軟件生命周期。同時在這個過程中,不斷的驗證和修訂數據標準,進行數據標準的管理,包括根據需求,及時修訂、變更、新增、撤銷,使得數據標準一直能夠適應新業務的發展需要。
數據質量檢核目前偏重于事后,往往是數據生成以后進行數據檢核。數據的檢核也應該拓展到數據全生命周期,在系統數據建模和系統上線前,即開始進行數據質量檢核,及時糾偏。
為了達到指標口徑的統一,需要持續進行元數據建設,以元數據為基礎的數據標準是在數據層面對重要業務主題的統一規范,所以數據標準的建設需要業務部門之間,以及業務部門和IT部門之間達成共識。
2 方向二
拓展傳統數據架構領域,構建大數據分析平臺
近年來,隨著云計算的發展,基礎計算能力的提升,以及大數據分析模型能力的提高,使得大數據分析模型應用到生產領域成為可能。
大數據分析模型從表達力受限的低維數據,拓展到大信息量的高維數據;從小范圍有效的弱泛化能力,發展的到廣泛有效的強泛化能力;從弱表達力的簡單模型,發展到強表達力的復雜模型。銀行業逐漸探索使用大數據分析技術,應用到生產領域。
建設大數據分析平臺,由現在的數據被動支撐業務,提升到數據主動服務業務,部分業務領域達到數據引領創新。整合銀行業內外信息,充分發揮大數據新技術優勢,構建具有特色、業界領先的智能“數據”分析能力。
3 方向三
探索大數據分析在業務領域的應用
未來,大數據分析將是業務的重要支持,對業務和IT的運營模式帶來巨大的變革。盡管大數據分析在業務領域的應用仍在探索期,但他們是真正的核武器,是銀行保持領先的關鍵所在。
未來銀行建立以客戶為中心的數字化戰略,對客戶進行數字畫像,實現數字化洞察,包括客戶微觀畫像、高凈值潛在客戶挖掘、多維度客戶細分、休眠客戶喚醒等。產品設計與優化,包括跨界產品研發、產品優化創新、產品創新。數字化營銷,包括營銷活動策劃與支持,差異化廣告投放與推廣,精準營銷。數字化風險防范,包括客戶風險信用評價、客戶個性化定價、押品價值自動評估、實時反欺詐等。
4 方向四
探索流式計算,進行業務實時監控,降低業務風險
傳統的IT系統基本只能提供T+1的、由簡單歸納總結的數據構成的統計分析報表。在當今不斷變化的市場環境中,為了快速響應客戶的要求,在激烈的競爭中獲得優勢,銀行業需要越來越迅速的反應能力。其中非常重要的環節是及時掌握各種業務的實時運行狀況,對業務活動進行綜合分析并有針對性地做出決策。完成上述工作常常需要跨越單個業務部門和IT應用系統,具有實時數據處理能力。
流式計算平臺提供高可靠、高容錯、高性能的實時海量事件捕獲處理與計算能力,并做為一種公共能力提供給各個系統內實時計算業務場景的需要,為各應用系統的實時計算提供集中統一的公共支持能力。跟傳統應用系統相比,實時事件處理平臺是海量、流式、實時的計算模式,不受部門系統限制,能實時、流式地計算,主動推送展示,符合未來實時處理的大趨勢。
銀行業采用流式計算技術實現了業務活動監控,包括財務指標監控、業務運行監控、網銀業務實時監控、內部人員業務稽核和IT系統風險管理等多個業務監控,及時、全面和直觀地了解各種業務的當前執行情況,從而為銀行的業務管理和優化提供決策支持。