銀行如何建設(shè)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)邏輯數(shù)據(jù)模型

申請(qǐng)免費(fèi)試用、咨詢(xún)電話(huà)：400-8352-114

來(lái)源：泛普軟件 前言：邏輯數(shù)據(jù)模型LDM是一種圖形化的展現(xiàn)方式，一般采用面向?qū)ο蟮脑O(shè)計(jì)方法，有效組織來(lái)源多樣的各種業(yè)務(wù)數(shù)據(jù)，使用統(tǒng)一的邏輯語(yǔ)言描述業(yè)務(wù)。借助相對(duì)抽象、邏輯統(tǒng)一且結(jié)構(gòu)穩(wěn)健的結(jié)構(gòu)，實(shí)現(xiàn)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)所要求的數(shù)據(jù)存儲(chǔ)目標(biāo)，支持大量的分析應(yīng)用，是實(shí)現(xiàn)業(yè)務(wù)智能的重要基礎(chǔ)，同時(shí)也是數(shù)據(jù)管理分析的工具和交流的有效手段。 需要強(qiáng)調(diào)的是，數(shù)據(jù)倉(cāng)庫(kù)邏輯數(shù)據(jù)模型特指數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的核心基礎(chǔ)模型，在搭建企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)時(shí)，需要充分了解和分析種前臺(tái)業(yè)務(wù)處理系統(tǒng)和應(yīng)用，在此基礎(chǔ)上進(jìn)行有效的重組和整合，為各種分析應(yīng)用（如客戶(hù)關(guān)系管理、風(fēng)險(xiǎn)管理等）提供單一的、整合的數(shù)據(jù)基礎(chǔ)，保證全行不同業(yè)務(wù)部門(mén)從不同的視角都可以使用統(tǒng)一的數(shù)據(jù)實(shí)現(xiàn)各自的分析需求?！?B>擔(dān)負(fù)這種數(shù)據(jù)重組和整合任務(wù)的數(shù)據(jù)模型稱(chēng)為數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的“基礎(chǔ)邏輯數(shù)據(jù)模型”。 基礎(chǔ)邏輯數(shù)據(jù)模型建設(shè)好之后，銀行可根據(jù)不同的分析應(yīng)用需要（如客戶(hù)關(guān)系管理、績(jī)效考核、風(fēng)險(xiǎn)管理等），根據(jù)應(yīng)用產(chǎn)品和功能設(shè)計(jì)不同的分析應(yīng)用模型，包含具體的、特定的分析邏輯，往往這種模型中都含有較多加工處理的成分。——這種為實(shí)現(xiàn)特定用途而設(shè)計(jì)的數(shù)據(jù)模型稱(chēng)為數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的“應(yīng)用數(shù)據(jù)模型”。 因此，不夸張地說(shuō)核心基礎(chǔ)數(shù)據(jù)模型建設(shè)的成敗性會(huì)影響到整個(gè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的建設(shè)乃至后續(xù)各種分析應(yīng)用，應(yīng)引起銀行科技建設(shè)和業(yè)務(wù)分析人員的高度重視。 本文嘗試從銀行建設(shè)基礎(chǔ)邏輯數(shù)據(jù)模型的角度出發(fā)，分析、探討建設(shè)過(guò)程中應(yīng)該考慮的主要因素、建設(shè)的方法以及注意的問(wèn)題。   一、整體規(guī)劃、明確目標(biāo)、合理定位 銀行建設(shè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)時(shí)應(yīng)充分明確建設(shè)目標(biāo)，核心的邏輯數(shù)據(jù)模型是對(duì)銀行業(yè)務(wù)的高度抽象、能夠提供對(duì)關(guān)鍵業(yè)務(wù)數(shù)據(jù)的組織和整理，建立一套完整、統(tǒng)一、規(guī)范的標(biāo)準(zhǔn)，以便進(jìn)行各類(lèi)分析。一個(gè)好的核心基礎(chǔ)數(shù)據(jù)數(shù)據(jù)模型應(yīng)該滿(mǎn)足以下條件： Ø         概念上：具有高度抽象的、中性的、可共享的的概念，可有效、全面、完整地適應(yīng)與涵蓋銀行現(xiàn)有的業(yè)務(wù)范疇以及數(shù)據(jù)范圍；不針對(duì)某個(gè)特別的應(yīng)用而設(shè)計(jì)； Ø         結(jié)構(gòu)上：應(yīng)是穩(wěn)定的、靈活的、可擴(kuò)展的；能以滿(mǎn)足第三范式的方法構(gòu)建模型，存放最詳盡的數(shù)據(jù)，保證足夠的靈活性，適應(yīng)復(fù)雜的實(shí)際業(yè)務(wù)情況，在業(yè)務(wù)發(fā)生變化或者新增數(shù)據(jù)源時(shí)易于擴(kuò)展；核心結(jié)構(gòu)在很長(zhǎng)時(shí)間內(nèi)應(yīng)保持穩(wěn)定性，便于回答不斷產(chǎn)生、不斷變化且無(wú)法預(yù)先定義的業(yè)務(wù)問(wèn)題； Ø         表現(xiàn)形式：應(yīng)是規(guī)范的，易懂的；包括各類(lèi)命名規(guī)范，業(yè)務(wù)規(guī)則定義，度量方式等。使用統(tǒng)一的業(yè)務(wù)語(yǔ)言進(jìn)行模型設(shè)計(jì)，易于業(yè)務(wù)人員的理解和使用；也有利于IT部門(mén)和業(yè)務(wù)部門(mén)人員的溝通；   數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的建設(shè)目的和方法不同于傳統(tǒng)業(yè)務(wù)系統(tǒng)，其開(kāi)發(fā)建設(shè)方式也有所不同，它的建設(shè)絕不是一蹴而就的事情，不能期望一朝一夕就可以全部完成，比較成熟的建設(shè)步驟應(yīng)該是分階段實(shí)施，逐步進(jìn)行完善和增強(qiáng)因此作為項(xiàng)目起步的LDM建設(shè)對(duì)于規(guī)范和推動(dòng)整個(gè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的建設(shè)都將起到一個(gè)很好的促進(jìn)。整個(gè)建設(shè)過(guò)程最關(guān)鍵的階段就是項(xiàng)目的最初階段，應(yīng)將工作重心放在搭建模型框架、建立模型設(shè)計(jì)思想和培養(yǎng)模型設(shè)計(jì)人員三個(gè)方面。 明確了建設(shè)目標(biāo)，具體實(shí)施應(yīng)該如何開(kāi)展呢？   二、審慎選擇、量體裁衣、度身定做 銀行在明確建設(shè)目標(biāo)之后，如何選擇具體的實(shí)施策略、制定設(shè)計(jì)的階段和步驟呢？常見(jiàn)的主要有以下兩種： 第一種：自主研發(fā)：銀行根據(jù)以往的業(yè)務(wù)經(jīng)驗(yàn)提煉本行業(yè)務(wù)的關(guān)鍵主題；再設(shè)計(jì)出本行的概念模型；然后通過(guò)具體的業(yè)務(wù)反復(fù)論證，同時(shí)考慮將來(lái)的分析需求進(jìn)行基礎(chǔ)邏輯數(shù)據(jù)模型的詳細(xì)設(shè)計(jì)。 這種方法可以快速啟動(dòng)，完全依托本行的業(yè)務(wù)元素和規(guī)則，使用行內(nèi)技術(shù)人員和業(yè)務(wù)人員比較熟悉的語(yǔ)言進(jìn)行模型的設(shè)計(jì)，具有很好的適用性。但是整個(gè)建設(shè)周期比較長(zhǎng)，同時(shí)往往由于經(jīng)驗(yàn)不足等原因給項(xiàng)目帶來(lái)一些不可控的風(fēng)險(xiǎn)，由于參與人員經(jīng)驗(yàn)的不足，不能夠站在全行的高度，從管理分析的角度去理解所有的業(yè)務(wù)以及相應(yīng)的數(shù)據(jù)，造成一些局限性。 第二種：依托業(yè)成熟產(chǎn)品進(jìn)行客戶(hù)化：銀行研究不同的業(yè)界模型產(chǎn)品，從中選擇一個(gè)作為藍(lán)本，結(jié)合本行的業(yè)務(wù)數(shù)據(jù)和應(yīng)用系統(tǒng)進(jìn)行具體的定制化。 這種方法的建設(shè)周期短、風(fēng)險(xiǎn)小，同時(shí)也能夠很好地借鑒成熟的邏輯數(shù)據(jù)模型中蘊(yùn)涵的經(jīng)營(yíng)管理理念。但是銀行需要研究和比較多個(gè)業(yè)界流行的邏輯數(shù)據(jù)模型，熟悉各自的設(shè)計(jì)思想和理念，并從中挑選一個(gè)適合本行的模型產(chǎn)品進(jìn)行客戶(hù)化。 從國(guó)際、國(guó)內(nèi)商業(yè)銀行建設(shè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的經(jīng)驗(yàn)和案例來(lái)看，為了保證項(xiàng)目的成功實(shí)施，避免和控制項(xiàng)目風(fēng)險(xiǎn)，他們幾乎都選擇了第二種方法：客戶(hù)化。那銀行在面對(duì)眾多邏輯數(shù)據(jù)模型產(chǎn)品進(jìn)行選擇的過(guò)程中主要應(yīng)該都關(guān)注一些什么樣的內(nèi)容呢？ 產(chǎn)品層面： Ø         覆蓋范圍：模型產(chǎn)品應(yīng)能夠適合、涵蓋銀行的所有業(yè)務(wù)范圍，可以在單一模型中能支撐金零售銀行、公司業(yè)務(wù)、保險(xiǎn)、信用卡、經(jīng)紀(jì)、證券和電子商務(wù)等，滿(mǎn)足未來(lái)混業(yè)經(jīng)營(yíng)的需要； Ø         對(duì)業(yè)務(wù)發(fā)展的適應(yīng)性：模型產(chǎn)品應(yīng)有高度的概括和歸納，既滿(mǎn)足范式化要求，又具有足夠的靈活性，在擴(kuò)展業(yè)務(wù)、新增品種或改變規(guī)則時(shí)，模型通過(guò)簡(jiǎn)單的調(diào)整和擴(kuò)展即可適應(yīng)； Ø         對(duì)應(yīng)用的支撐和擴(kuò)充：模型產(chǎn)品不應(yīng)偏向某個(gè)部門(mén)或某些專(zhuān)業(yè)的特定應(yīng)用，要能夠支持績(jī)效管理、客戶(hù)關(guān)系管理、資產(chǎn)負(fù)債管理、資金財(cái)務(wù)管理、風(fēng)險(xiǎn)管理等應(yīng)用，并與國(guó)際金融業(yè)完全接軌，從數(shù)據(jù)接口層面支撐業(yè)界監(jiān)管需要； Ø         模型的開(kāi)放性：模型產(chǎn)品應(yīng)有清晰、嚴(yán)謹(jǐn)?shù)哪Ｐ图軜?gòu)，滿(mǎn)足模塊化和結(jié)構(gòu)化的設(shè)計(jì)要求，真正實(shí)現(xiàn)數(shù)據(jù)一次導(dǎo)入，多次使用； Ø         轉(zhuǎn)化成物理數(shù)據(jù)模型的方便性：LDM設(shè)計(jì)完成，進(jìn)行一些物理化的定義之后就可以直接利用建模工具平滑地完成物理模型設(shè)計(jì)。 服務(wù)層面： Ø         客戶(hù)化方法與能力：邏輯數(shù)據(jù)模型必須有經(jīng)過(guò)實(shí)際項(xiàng)目驗(yàn)證過(guò)的客戶(hù)化方法論做指導(dǎo)，明確嚴(yán)格的工作步驟、流程、任務(wù)分配，并提供必要模板； Ø         業(yè)績(jī)經(jīng)驗(yàn)與表現(xiàn)：應(yīng)具有國(guó)際化大型（特別是國(guó)內(nèi)）商業(yè)銀行相關(guān)項(xiàng)目和領(lǐng)域的成功實(shí)施案例；在行業(yè)內(nèi)具有良好的信譽(yù)和業(yè)績(jī)； Ø         全球支持能力：全球?qū)Ｂ氀邪l(fā)團(tuán)隊(duì)——各國(guó)家地區(qū)的具體實(shí)施團(tuán)隊(duì)；高級(jí)建模顧問(wèn)——高級(jí)金融行業(yè)顧問(wèn)；   不難看出，上述這些考核的方面都是和將來(lái)的實(shí)施密切相關(guān)的。的確，一個(gè)成熟的優(yōu)秀的模型產(chǎn)品，如果沒(méi)有得到成功的實(shí)施，最終也不能為銀行創(chuàng)造效益。下一部分主要討論在實(shí)施過(guò)程中的關(guān)鍵因素。   三、關(guān)鍵成功因素 （1）參與人員的業(yè)務(wù)經(jīng)驗(yàn) LDM的設(shè)計(jì)和實(shí)施不是一個(gè)純粹的技術(shù)問(wèn)題，需要參與人員具有較高的銀行業(yè)務(wù)修養(yǎng)和素質(zhì)，設(shè)計(jì)人員應(yīng)能夠憑借豐富的業(yè)務(wù)經(jīng)驗(yàn)和知識(shí)，將散落在各種不同業(yè)務(wù)系統(tǒng)以及日常經(jīng)營(yíng)管理中的各種數(shù)據(jù)元素進(jìn)行高度的抽象和概況，形成本行的幾個(gè)主題域（如當(dāng)事人、協(xié)議、產(chǎn)品、事件等），用以清晰地表達(dá)業(yè)務(wù)邏輯和關(guān)系。同時(shí)，他們也必須時(shí)刻以目標(biāo)（建設(shè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)）為導(dǎo)向，有選擇地從前臺(tái)業(yè)務(wù)系統(tǒng)中抽取相關(guān)的數(shù)據(jù)信息進(jìn)行映射。 （2）設(shè)計(jì)團(tuán)隊(duì)的溝通機(jī)制 邏輯數(shù)據(jù)模型的設(shè)計(jì)過(guò)程本身就是一個(gè)不斷發(fā)現(xiàn)問(wèn)題、解決問(wèn)題的過(guò)程，不可能某一個(gè)人就能夠掌握龐雜銀行業(yè)務(wù)中的點(diǎn)點(diǎn)滴滴，因此需要整個(gè)項(xiàng)目團(tuán)隊(duì)的密切配合。每個(gè)設(shè)計(jì)人員都必應(yīng)具有良好的學(xué)習(xí)溝通能力，能夠?qū)９ぷ鬟_(dá)成共識(shí)，根據(jù)所定義的結(jié)構(gòu)，將具體的業(yè)務(wù)數(shù)據(jù)映射到模型中，同時(shí)進(jìn)行一些修改和校正。 （3）銀行內(nèi)部IT管理的水平 LDM設(shè)計(jì)過(guò)程中很大量的工作都是對(duì)現(xiàn)有業(yè)務(wù)系統(tǒng)的分析，包括對(duì)系統(tǒng)架構(gòu)和功能的梳理、業(yè)務(wù)規(guī)則和關(guān)鍵業(yè)務(wù)元素的提煉、系統(tǒng)之間的邏輯關(guān)系等，并結(jié)合樣本數(shù)據(jù)初步了解數(shù)據(jù)質(zhì)量。如果沒(méi)有一套有效的管理模式和有力的技術(shù)支持，如果沒(méi)有現(xiàn)有業(yè)務(wù)系統(tǒng)的完備資料；如果沒(méi)有快速問(wèn)題反饋和解決機(jī)制，LDM的建設(shè)只能是空談，因此這給銀行內(nèi)部IT管理水平提出了很高的要求。 （4）模型的管理和維護(hù) 在LDM整個(gè)建設(shè)周期內(nèi)還應(yīng)高度重視維護(hù)和管理工作，必需有嚴(yán)格的建模技術(shù)規(guī)范做指導(dǎo)和約束，包括命名、描述、版本控制等。隨著時(shí)間的推移和項(xiàng)目建設(shè)階段和目標(biāo)的變化，為了使建成的基礎(chǔ)數(shù)據(jù)模型具有持續(xù)的生命力，應(yīng)在建設(shè)的所有階段把涉及的建模規(guī)范內(nèi)容文檔化并強(qiáng)制執(zhí)行；在人員發(fā)生變動(dòng)時(shí)規(guī)定新參與人員應(yīng)嚴(yán)格遵守這些規(guī)范，不能另行編制，保證前后的一致性。     總結(jié)： 盡管LDM僅僅是一個(gè)邏輯的概念，數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)需要在邏輯數(shù)據(jù)模型的指導(dǎo)下，進(jìn)行真正的物理實(shí)施，將把分散在不同平臺(tái)、以不同方式組織的各種業(yè)務(wù)數(shù)據(jù)以及部分外部信息經(jīng)過(guò)清洗和轉(zhuǎn)化，在保證數(shù)據(jù)一致性、準(zhǔn)確性和實(shí)效性的前提下，開(kāi)發(fā)各種應(yīng)用，奠定實(shí)現(xiàn)銀行商業(yè)智能的重要基礎(chǔ)。 但是可以看到，通過(guò)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)邏輯數(shù)據(jù)模型的設(shè)計(jì)，將有利于對(duì)銀行現(xiàn)有業(yè)務(wù)過(guò)程的全局認(rèn)識(shí)和系統(tǒng)把握，同時(shí)還能夠從整體上對(duì)全行使用的操作型業(yè)務(wù)系統(tǒng)進(jìn)行回顧，從而提供改造和完善的建議，最終探索出一條符合銀行自身業(yè)務(wù)實(shí)際發(fā)展要求的分析型應(yīng)用系統(tǒng)的道路，為數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的建設(shè)奠定堅(jiān)實(shí)的基礎(chǔ)。