當前位置:法律諮詢服務網 - 企業資訊 - 匯豐銀行、花旗銀行、工商銀行、中國銀行、建設銀行、招商銀行等各大銀行使用的數據庫系統?

匯豐銀行、花旗銀行、工商銀行、中國銀行、建設銀行、招商銀行等各大銀行使用的數據庫系統?

本系統針對《國家開發銀行基礎數據庫系統招標文件》的具體要求,結合我公司在數據庫和數據倉庫方面的開發經驗、系統集成能力和技術優勢,組織該領域專家多次討論,並充分考慮了國家開發銀行的實際情況和我們在金融行業建設數據倉庫的經驗,最終建成了國家開發銀行基礎數據庫系統。在該系統中,我們采用最先進、最完善的IBM數據倉庫系列產品,結合COGNOS公司富於表現力的前端展示工具,融合多層技術和WEB模式,最終為開發銀行開發建設壹個技術先進、業務應用成熟、功能完善、性能穩定的基礎數據庫系統,並在此基礎上考慮系統未來的擴展。

系統介紹

國家開發銀行基礎數據庫系統的總體架構包括三個部分:數據管理層、應用控制層和用戶界面層。數據管理層負責管理國家開發銀行各級數據;應用控制層負責處理基於基礎數據庫系統的應用系統的業務控制邏輯;用戶界面層處理用戶-計算機交互界面,將用戶界面與復雜的業務控制邏輯分離,並負責以用戶友好和壹致的方式向用戶提供業務信息。

1,數據管理層

在國家開發銀行的基礎數據庫系統中,需要管理不同級別的數據:

實時可變數據:

由國家開發銀行日常業務運營應用系統創建和管理。

高質量的壹致數據:

通過對存儲在國家開發銀行不同業務應用系統中的數據進行基礎代碼轉換和不壹致性處理,得到國家開發銀行統壹業務視圖的綜合數據。

派生數據:

它是在數據壹致的基礎上,經過不同程度的聚合而產生的數據。

元數據:

元數據是關於上述類型數據的描述性數據,是國家開發銀行的企業級信息目錄。元數據描述並定位數據元素的來龍去脈:數據來自哪裏,如何轉換,多久提取壹次,到哪裏去。正是通過對元數據的有效管理,數據倉庫為數據工作者查找、理解和使用上述類型的數據提供了便利。

數據管理層采用DB-ODS-DW三層架構管理上述數據。其中DB是指實時可變的數據和外部數據,ODS(運營數據倉庫)包括高質量的壹致數據和派生數據,DW(數據倉庫)包括歷史高質量的壹致數據和派生數據。

ODS作為中間層次,壹方面包含全球壹致的、詳細的企業數據,可以在全球範圍內進行處理;另壹方面,它是壹個面向主題的集成數據環境,適用於日常報告和決策的數據處理和分析。可以看出,ODS壹方面支持業務操作,另壹方面也是面向主題的。所謂主題,是指國家開發銀行在業務發展中關註的業務對象,如項目開發、信貸管理、資金管理等。它在更高的層次上對數據進行分類,並將來自各個部門的原始數據從面向應用改為面向主題,即整個系統將根據業務對象而不是根據管理框架進行設計。與題目相關的各種基礎數據都放在題目下面,壹起就是基礎數據來源。基礎數據源是整個ODS的核心,存儲著最基礎的非衍生數據。從上面的分析可以看出,構建數據倉庫的第壹步是構建基礎數據源。這就需要對國家開發銀行相關部門的業務流程和需求進行分析,通過對會計信息系統和外部輸入數據的清洗、提取和轉換,解決數據不壹致、分散、完整和異構的問題。

面向主題和集成使得ODS的數據在靜態特性上非常接近DW中的數據。然而,ODS和DW之間仍然有許多基本的和重要的區別。首先,ODS主要存儲近期數據,而DW是大量長期的、可重復的歷史數據。其次,ODS支持記錄在線刷新,滿足了國開行全球應用的需求,包括企業級OLTP;DW中的基礎數據不能修改。三是為ODS數據倉庫DW提取提供壹致的數據環境。DW主要用於長期趨勢分析或戰略決策。

1)數據源

國家開發銀行業務系統數據

國家開發銀行的業務處理系統包括已投產系統(會計系統)、在建系統(信貸管理和非現場監管)和待建系統。這些系統的數據定期形成增量文件,由數據庫抽取代理抽取到總行的操作數據庫(ODS)中。

外部數據

外部數據可以加載到總行運營數據庫(ODS)中,也可以根據業務需求直接加載到數據倉庫中。

補充數據

補充數據由人工輸入或接收程序輸入。

2)基礎數據收集

為了提高基礎數據采集的效率和質量,需要綜合考慮業務需求、數據量、數據加載周期和技術基礎設施,制定可行的數據提取、凈化、轉換和加載策略,選擇合適的工具輔助基礎數據采集。

對於國家開發銀行現有業務應用系統管理的數據,要盡量區分現有數據、增量數據和變更數據(比如可以通過添加觸發器來獲取變更數據),因為在廣域網環境下提取、傳輸和加載現有數據是不可取的,會增加網絡的壓力。而且無論選擇哪個數據庫,數據庫管理系統中大量數據的加載速度都是有限的,大量數據的加載壹般會影響其他用戶對數據庫的操作。

在網絡帶寬允許的情況下,總行ODS采集並存儲各分行的詳細業務數據,通過數據采集代理自動提取各分行的詳細業務數據到總行。數據提取、傳輸和加載的策略是,第壹次初始化數據時,批量加載存量數據,以後再加載增量數據和變更數據。根據業務需求,裝載周期按小時、天、月或季度和年裝載。

隨著業務的發展,詳細的業務數據量增加,超過了網絡帶寬的負荷。建議各分行設立ODS收集存儲其明細業務數據,總行ODS收集存儲各分行匯總業務數據,減少數據提取、傳輸和加載量。

可視化數據倉庫管理器(IBM Visual Warehouse)是由IBM推出的用於創建和維護數據倉庫的集成工具。它可以定義、創建、管理、監控和維護數據倉庫,並可以自動將異構數據源提取到中央集成數據倉庫管理環境中。它采用分布式客戶機/服務器體系結構,包括以下幾個部分:

數據倉庫服務器(可視化倉庫服務器)

數據倉庫管理員(可視化倉庫管理客戶端)

數據倉庫代理(可視化倉庫代理)

控制數據庫(控制數據庫)

數據倉庫(目標數據庫)

數據倉庫服務器運行在Windows NT操作系統上,監視和管理數據倉庫處理,提供基於時間和基於事件的調度機制,還控制數據倉庫代理的活動。

在數據倉庫服務器的控制下,數據倉庫代理處理源數據到目標數據倉庫的訪問、過濾、傳輸和加載。數據倉庫代理可以運行在不同的系統平臺上,如nt、AIX、OS/400、OS/2和SUN。為了提高處理效率和可擴展性,數據倉庫代理壹般安裝在數據源和目標數據倉庫所在的機器上。

控制數據庫由數據倉庫管理員生成,由數據倉庫代理使用。可視化數據倉庫管理器將所有元數據存儲在控件數據庫中,控件數據庫也可以通過元數據管理工具進行管理(該工具稱為Dataguide,是可視化數據倉庫管理器的組件之壹)。

雖然可以通過選擇合適的工具來實現數據提取、傳輸和加載自動化的機制,但是實際數據環境中數據提取、轉換和純化的程序需要自己設計。由於實際數據的非標準化和數據轉換的復雜性,商業的數據提取、轉換和提純工具在實際應用中並不能達到預期的效果。

2.總部的ODS

總行ODS由兩層數據組成,壹層是基礎數據源,是國家開發銀行業務產生的最基礎的非衍生數據;另壹層是二級匯總數據。二級匯總數據放在項目受理、貸款管理、資金管理三大模塊,直接為項目受理、貸款管理、資金管理三大業務子系統提供數據支持。基礎數據源中的數據主要由會計信息系統轉換而來,部分基礎數據來自外部數據錄入。

  • 上一篇:工商局出具的營業執照註銷證明丟失了怎麽辦?
  • 下一篇:開展交通安全宣傳活動的策劃方案
  • copyright 2024法律諮詢服務網