
“作為國內成立最早、規模最大的證券交易所,上海證券交易所(以下簡稱“上證所”)早在2000年世紀之交便提出了“打造世界一流交易所”的愿景。通過數據倉庫為決策提供數據支持是上證所信息化建設的核心內容。
據上證所總經理助理、總工程師白碩介紹: “常態情況下,全所目前有700多個分析應用在穩定運行。同時,我們還會根據大家的需求,有針對性地開發一些新的分析應用。因此,每年新增的分析應用也在100個以上。”數據倉庫平臺在上證所的經營、監管、創新和服務等各方面均提供了重要的支持。
三期三個臺階
白碩向記者簡要介紹了上證所數據倉庫的三期項目情況。2002年10月,數據倉庫一期項目正式進入實施階段。作為上證所數據倉庫系統的基石,一期項目建立了集中、統一的數據中心,完成了源數據的統一處理,保證了數據的準確性和一致性; 提供諸多信息服務功能,包括方便的查詢分析功能,滿足了業務統計、分析的需求; 預留了開放接口,保證了系統的可擴展性。同時,對所有的歷史存儲介質進行了翻新、對歷史數據完成了清洗、對每日新增數據建立了安全可靠的自動加載機制。
在一期工程的基礎上,以應用分析系統建設和完善數據倉庫管理為目標的二期多維數據存儲系統(DDS)建設又在2004年正式啟動,并于2005年12月順利完成。在該階段工作中,Teradata數據倉庫實現了應用系統的建設、元數據管理、數據倉庫管理、結構化數據和非結構化數據的集成、信息增值服務的提供,以及數據倉庫門戶和數據權限管理等新功能,幫助上證所實現了完善的企業單一視圖、先進的元數據管理應用、完整的數據倉庫管理體系以及有特色的結構化數據和非結構化數據綜合應用。
考慮到一旦發生災害將會造成數據倉庫系統停止運行,這將對證券市場產生重大的影響,上證所于2007年7月啟動了三期項目——國內首例企業數據倉庫主從雙系統(生產系統和災備系統)的建設,以保障持續的數據分析和信息服務,從而確保證券市場的穩定發展。
“通過三期項目的實施,上證所實現了整合、擴容、差異化存儲、同城災備系統建設四個目標同時達成,我們采用雙加載技術手段和數據檢查機制,解決了主從數據倉庫系統的數據一致性難題。”白碩表示。
充分利用數據
為了準確判斷系統設置最高峰值會不會被突破,大家立即調出歷史數據分析,將每天上下午申報成交的比例進行了測算,結果發現: 下午交易筆數超出上午的比例不足5%。因此,根據以往經驗再加上科學的數據分析,上證所認為交易系統能夠滿足當天的交易需求,并做出了“不做臨時調整”的果斷決定。“進行這樣的決策,光靠經驗是不夠的,還需要靠數據說話。”白碩說。
據了解,上證所的日常監管分為兩部分: 一方面是通過專門的監察系統實時傳遞的數據結合數據倉庫儲存的歷史數據進行對比分析,當場查處違規的異常交易; 另一方面,則是通過數據倉庫為司法檢查機關的立案和稽查工作真實再現當時交易狀況的第一手歷史數據。2007年的杭蕭鋼構內幕交易案就是一個借助數據倉庫分析成功破案的典型例子。
而在產品創新方面,據白碩介紹,“比如融資融券,究竟什么條件的證券可以成為擔保品?這就需要使用數據倉庫進行數據篩選,幫助業務人員把滿足一定條件、可以用做擔保品的優質證券算出來。”基于系統存儲的歷史數據,數據倉庫可以幫助業務人員去測算某個新產品一旦推出,其風險和收益如何。實際上,上證所在推出EPS和權證等產品時,都曾通過數據倉庫平臺進行過測算和驗證。2006年,上證所成立了金融創新實驗室,實驗室的數據正是來源于數據倉庫系統。
據白碩透露,為了向“世界一流交易所”的目標不斷前進,上證所的數據倉庫將向實時型數據倉庫推進。基于上證所EAI消息總線的建成,結合實時數據倉庫技術,實現行情、交易、成交等實據的實時加載,以期更加緊密地跟蹤市場的變化、提高服務效率和效能、加強市場監管力度,更好地服務市場和監管市場。
CIO頻道人物視窗
CIO頻道方案案例庫
大數據建設方案案例庫
電子政務建設方案案例庫
互聯集成系統構建方案案例庫
商務智能建設方案案例庫
系統集成類軟件信息研發企業名錄