隨著中國金融市場的快速發(fā)展，互聯(lián)網(wǎng)金融對傳統(tǒng)金融行業(yè)的競爭，以及監(jiān)管力度的不斷加強，IT咨詢服務公司對金融企業(yè)的商業(yè)智能方案也面臨不斷創(chuàng)新。如何提升金融機構在管理、盈利、風險控等多方位的能力？如何將國際經(jīng)驗更好的為中國市場服務？如何通過解決方案將海量數(shù)據(jù)轉(zhuǎn)化為對經(jīng)營決策有價值的信息之路？如何將客戶智能分析成果行之有效地運用于服務渠道，并最終轉(zhuǎn)換為銷售業(yè)績？為解決中國金融機構在發(fā)展中所面臨的新問題，文思海輝在西安、蘇州、北京、成都、深圳五地舉辦了6場“乘數(shù)據(jù)之舟，達價值彼岸”系列活動。

　　在主題為“乘數(shù)據(jù)之舟，達價值彼岸”的文思海輝商業(yè)智能解決方案系列研討會西安站現(xiàn)場，文思海輝高級技術咨詢顧問邱文紅做了“數(shù)據(jù)應用之道--統(tǒng)一監(jiān)管報送體系”主題演講。

文思海輝高級技術咨詢顧問 邱文紅

　　以下為演講實錄：

　　大家好我是文思海輝技術事業(yè)部的丘文宏。接下來由我跟大家一起關于統(tǒng)一監(jiān)管報送平臺做一個分享。我相信從九十年代開始，金融監(jiān)管機構要求銀行開始報送監(jiān)管數(shù)據(jù)開始，經(jīng)過這十幾年的發(fā)展，大家在報送領域來說其實經(jīng)驗都很豐富了。

　　首先我們來看，這個可能跟賈總講的PPT很像，其實第一部分從監(jiān)管部門的要求來說，它的要求會越來越嚴格，而且你可以看到從央行銀監(jiān)會來說，不像以前一樣只要求你報數(shù)據(jù)或者匯總數(shù)據(jù)，它已經(jīng)開始要求你在不同的報送體系之間進行數(shù)據(jù)一致性的校驗，第二部分從銀行本業(yè)務部門管理的需求來說，銀行經(jīng)過十幾二十年的發(fā)展，它的基礎數(shù)據(jù)已經(jīng)積累了相對來說很大的基數(shù)，銀行怎么用這些數(shù)據(jù)，對你的經(jīng)營管理客戶管理進行分析，為你后續(xù)決策做支持，這也成為目前來說銀行業(yè)務管理部門一個比較迫切的需求，還有一個隨著監(jiān)管要求報送的數(shù)據(jù)越來越多，我們不可能像以前一樣，我一個部門把所有需要報送的報表完成，所以我們在后面怎么明確每一個報送體系當中，每一張報表如何報送的問題。

　　還有從科技部門系統(tǒng)建設來說，也存在著很大的問題，因為我們銀行自己本身的信息系統(tǒng)建設其實是早于監(jiān)管要求的，這個時候就會出現(xiàn)一個問題，監(jiān)管很多要求的數(shù)據(jù)，在我們現(xiàn)有的系統(tǒng)當中其實都沒有，這一部分我們怎么解決的問題，還有一個由于我們監(jiān)管系統(tǒng)和應用系統(tǒng)的建設是時間錯配，還有我們監(jiān)管系統(tǒng)是隨著監(jiān)管當局的要求不停的進行建設，這個時候會出現(xiàn)一個問題，因為你不是統(tǒng)一規(guī)劃你報送的系統(tǒng)，就會出現(xiàn)很多數(shù)據(jù)重復計算和加工，根據(jù)這個情況我們來分析一下，目前我們實現(xiàn)方式能不能隨著監(jiān)管當局和銀行本身的需求得到滿足。這是目前很多應用系統(tǒng)，包括常見的監(jiān)管報送系統(tǒng)實現(xiàn)的基本架構，所有的監(jiān)管系統(tǒng)監(jiān)管當局要求一個我們就建設一個，每一個其實都是獨立的從各個原系推，數(shù)據(jù)平臺倉庫或者ODS去抽取數(shù)據(jù)的，這樣的話其實在你抽取的過程當中，對你原系統(tǒng)的壓力很大，如果你有十個監(jiān)管報送系統(tǒng)，你得從原系統(tǒng)抽取十遍。你每一個系統(tǒng)隨著技術的發(fā)展，每一個報送系統(tǒng)實現(xiàn)方式跟技術架構都是不一樣的，所以經(jīng)常會導致每一個系統(tǒng)從原系統(tǒng)拿數(shù)據(jù)的規(guī)范是不一樣的，不統(tǒng)一的。

　　其實在每一個報送體系當中，對于基礎類的數(shù)據(jù)，在每一個系統(tǒng)當中其實都會存在一遍，在本系統(tǒng)當中進行加工然后報送，這種情況實現(xiàn)的時候，其實你所有數(shù)據(jù)的重復性，這是第一，第二你的數(shù)據(jù)重復加工，就相當于你數(shù)據(jù)的復用性很差，我們可以按照這種架構來看一下目前我們監(jiān)管當局的一些要求是不是能夠得到滿足。

　　首先看一下銀監(jiān)會的，基本在2011年之前，銀監(jiān)會要求報1104，基本上報送分行和總行，2012年的時候隨著新巴塞爾協(xié)議的提出，又新增了一個新資本充足力的報送，這些前面的報送基本上都是匯總的，匯總類的數(shù)據(jù)，后面又新增了兩個，一個是新版客戶風險統(tǒng)計，這兩個報送就不再是匯總類的數(shù)據(jù)，它要求是你的明細數(shù)據(jù)，在以前的報送系統(tǒng)當中，一般只要求你進行表內(nèi)或者表間，每一個報送體系內(nèi)部表間的校驗，在這個地方又新增了兩種，一個是數(shù)據(jù)總量的校驗，還有一個余額類的校驗，通過這個其實你可以看出它這種監(jiān)管的發(fā)展趨勢，第一個是體系切的，交叉的校驗會越來越多，而越來越復雜，第二個報送口徑的不同，其實這兩個在數(shù)據(jù)加工，如果說以前你做過這種統(tǒng)計報送的話，會發(fā)現(xiàn)它的基礎類的基礎數(shù)據(jù)其實都是一樣的，也就是說這個基礎的重復性如果按照以前的架構，會在不停的提升。

　　第二從銀行監(jiān)管的報送來說，在2012年以前基本上兩年就會出現(xiàn)一個新的報送體系，最長六年，在2012年到2013年之間，每年都新增了一個報送體系，而且在這個里面，你可以看到跟銀監(jiān)會的報送要求一樣，新增了不同的報送體系之間的校驗，不再是簡簡單單的這一個報送體系了，所以從這里可以看出，在人行的報送當中，他的明細數(shù)據(jù)的報送需求在逐步增加，逐步的在不同的報送體系之間要求你報送數(shù)據(jù)口徑要一致。第三個我們從外管局的報送來說，其實外管局在早期的時候，只要求我們流水數(shù)據(jù)，你可以理解為明細數(shù)據(jù)，也就是國際收支外匯帳戶還有銀行資本項目，通過這些基本的明細數(shù)據(jù)以后，基本可以監(jiān)控整個外匯流入到流出一整套的交易過程，在2013年8月份的時候，基本上又提出對外金融資產(chǎn)負債及交易統(tǒng)計的數(shù)據(jù)報送，這個報送其實就不是明細數(shù)據(jù)了，是一種匯總，可以參考前面的人行跟銀監(jiān)會報送的數(shù)據(jù)質(zhì)量的要求，下一步會不會提出另外一個要求，這個明細跟這個匯總數(shù)據(jù)，在某些信息項里面進行勾兌。

　　所以從這個我們是不是可以看出，以后一旦監(jiān)管報送提出新的需求時，你怎么快速的滿足監(jiān)管要求，所以通過目前我們采用的架構，以及監(jiān)管當局他的需求，我們可以看出按照目前的架構，很難滿足我們這些監(jiān)管當局的需求，如果說繼續(xù)用這種原來的架構開發(fā)的話，會面臨很多的挑戰(zhàn)，第一個數(shù)據(jù)共享問題，因為每一個監(jiān)管報送都自己獨立成一份數(shù)據(jù)，在不同的報送體系之間，很難使數(shù)據(jù)進行共享，而且這個數(shù)據(jù)既是加工出來了，它的復用性也不是很高，第二個數(shù)據(jù)的一致性，因為你的數(shù)據(jù)它要求在不同的報送體系之間需要相互進行校驗，如果還是按照以前的思路建設你的報送系統(tǒng)，大家做技術都很明白，要實現(xiàn)不同庫之間的數(shù)據(jù)校驗其實難度還是蠻大，因為大家采用的技術不同，而且每一個報送開發(fā)公司都不一樣，所以這個相對來說難度比較大。

　　第三個就是你的接口，因為我們的報送包括采集數(shù)據(jù)內(nèi)部處理，其實在很多時候，隨著技術的發(fā)展大家希望采用一些新技術，所以這個時候你可以發(fā)現(xiàn)連你每一個應用系統(tǒng)都沒有統(tǒng)一的規(guī)范，用到某一種模式，數(shù)據(jù)之間是怎么交換的，可能都不會統(tǒng)一，另外一個從管理角度來說，大家知道在銀行做運維的話其實是很累的工作，如果你每一個報送都單獨開發(fā)一個系統(tǒng)，那么對于運維來說其實是蠻大的壓力，要熟悉不同報送系統(tǒng)的架構，不同數(shù)據(jù)的處理規(guī)則，所以如果按照原來的那個，其實對整個報送體系運維人員，大家增加了人力成本跟物力成本，還有一個是業(yè)務價值，業(yè)務價值前面講的大家可能很難理解，其實應該是這樣，因為從剛才我們第一個PPT里面講的，在銀行來說大量的基礎數(shù)據(jù)，如果說應用的好，可以發(fā)現(xiàn)很多的開拓你新的產(chǎn)品，新客戶的領域，在這個時候如果按照以前的架構去做，因為你的數(shù)據(jù)是分散的，你沒有做過統(tǒng)一的整合，這個時候其實很難通過數(shù)據(jù)分析，也很難通過監(jiān)管當局對你的要求角度看你的數(shù)據(jù)是不是符合他的要求，我們帶著這些問題可以換一種思路。

　　早期的時候包括技術可能達不到我們現(xiàn)在的這種程度，隨著科技的發(fā)展，技術水平的提高，我們可以換一種思路來建設我們的監(jiān)管報送，也就是說我們把所有的報送建設到一個平臺當中，現(xiàn)在其實每家行都在提數(shù)據(jù)平臺和指標系統(tǒng)建設，如果說我們把這兩種系統(tǒng)，這兩個內(nèi)容融合到我們的報送體系來，會是什么樣的結果，我們來看一下，首先第一個我們將整個監(jiān)管報送平臺分成兩部分，一部分是后臺的平臺數(shù)據(jù)區(qū)，還有一個應用服務區(qū)，他們兩個側重點不一樣，這邊注重的是整個應用，平臺數(shù)據(jù)區(qū)主要注重數(shù)據(jù)處理，基本這兩個之間我們使它的吻合度盡量的低，不要大家都連到一塊兒去。

　　首先我們來看一下平臺數(shù)據(jù)區(qū)，我們基本上分成兩塊，一個是數(shù)據(jù)源區(qū)還有一塊是報送數(shù)據(jù)區(qū)，數(shù)據(jù)源區(qū)是作為整個報送系統(tǒng)的唯一數(shù)據(jù)來源，也就是說后面所有都依賴于它，在報送數(shù)據(jù)區(qū)里面又分成兩塊，一塊基礎數(shù)據(jù)區(qū)，一塊加工數(shù)據(jù)區(qū)，這兩個有什么區(qū)別，基礎數(shù)據(jù)區(qū)基本上是明細，加工數(shù)據(jù)區(qū)我們會按照采用指標的管理模式去管理你所有的數(shù)據(jù)，應用服務區(qū)我們也可以認為是兩塊，一塊是基本功能的，比如你的補錄，你的報表定義，你的權限管理這一塊，另外一塊就是對外報送，按照不同的監(jiān)管報送體系，產(chǎn)生不同的報表的那一塊，針對這些分區(qū)我們獨立看一下每一個分區(qū)的定位跟作用，平臺數(shù)據(jù)區(qū)它涵蓋的是從原數(shù)據(jù)的采集到數(shù)據(jù)報送出去整個的數(shù)據(jù)。

　　剛才已經(jīng)說了平臺數(shù)據(jù)有數(shù)據(jù)源層和報送數(shù)據(jù)層，數(shù)據(jù)源層其實說白了如果做過ODS的應該比較清楚，我們采用ODS的方式，通過拉鏈保留全量的數(shù)據(jù)，很多人可能會問，為什么要保留全量數(shù)據(jù)，因為任何一個張報表的跑，可能都會出問題，或者出現(xiàn)其它情況，這個時候我們可以通過保留的全量數(shù)據(jù)便于后臺處理的存跑，如果你錯了，其實你可以回溯查詢這個數(shù)據(jù)錯在哪里。

　　第二個報送數(shù)據(jù)層，報送數(shù)據(jù)層我們基本采用倉庫的共性加工理論，共性加工層的那部分建設思路，來建設這個基礎數(shù)據(jù)層，我們會按照你的業(yè)務或者分層次的建立每一層的明細數(shù)據(jù)，這些明細數(shù)據(jù)它有什么作用，它第一個是用于你報送時明細數(shù)據(jù)的報送，另外一個對你后面的指標層的共性加工的那一層提供數(shù)據(jù)。后面的加工數(shù)據(jù)層，加工數(shù)據(jù)層在這一塊建設時，其實采用的是指標建設的那一套思路，我們把所有的報表非明細類的數(shù)據(jù)，抽取成指標類的數(shù)據(jù)，來進行管理，在里面我們總共分成三塊，一塊是公共指標集，一塊是公共數(shù)據(jù)集，還有一個個性加工集，這三塊究竟有什么區(qū)別，首先第一個公共指標集，說白了主要是從總站，或者按科目那一條線走的，比如按機構這兩個緯度去抽取或者簡單加工的數(shù)據(jù)，其它類的公共數(shù)據(jù)集就是多維度的一些數(shù)據(jù)，像我們在人行，或者銀監(jiān)會的報表里面會出現(xiàn)一個報表，比如貸款有行業(yè)跟五級分類，包括你填報，其實這兩個數(shù)據(jù)兩個緯度在銀監(jiān)會人行都會存在，這個時候我們按照緯度相同，可以通過公共數(shù)據(jù)集的模式進行加工，后續(xù)取數(shù)的時候，不需要再去做，只需要再Excel表里面，把指標編號填進去，就可以實現(xiàn)整個數(shù)據(jù)的抽取過程。

　　個性加工層，這個基本上就是我對一些沒有在不同的報送體系當中，沒有重復的，我自己很獨立，跟別人不一樣的這部分數(shù)據(jù)放到共性加工層，大家可以看出整個報送體系當中，每一層數(shù)據(jù)的定位跟作用，對于前排應用服務層，我們分成兩部分，一部分是應用系統(tǒng)，另外一部分是應用門戶，應用系統(tǒng)是實現(xiàn)對外監(jiān)管報送的功能，主要用于按照不同的報送體系，去生成你的報送文件，在這個時候也可以進行數(shù)據(jù)的檢查或查詢，門戶數(shù)據(jù)其實就是一個應用，門戶在這個里面我們會涉及很多的基礎管理的功能，首先第一個體系管理，它這個里面基本上是定義你的報表體系，比如你的A104報表體系，你的征信報表體系，每一個體系下面有哪些報表都可以在這個里面進行定義，還有它的校驗規(guī)則。統(tǒng)一認證基本實現(xiàn)角色權限的復制，實現(xiàn)單點登錄的功能，數(shù)據(jù)補錄主要針對數(shù)據(jù)缺失這方面，還有試算，可能會對統(tǒng)計出來的報表需要進行一些調(diào)整，調(diào)整完之后，肯定想知道這個數(shù)據(jù)對于你下游其它報表會不會有影響，你可以通過這個試算調(diào)整來分析一下，垮體系校驗是我兩個報表體系根據(jù)監(jiān)管當局的要求，進行比對的那些數(shù)據(jù)你可以查看一下，這兩個數(shù)據(jù)是不是一樣，多維分析其實是針對你的業(yè)務管理，因為我們不是把明細數(shù)據(jù)也拿了，把你同所有需要報送的數(shù)據(jù)都做成了指標，你可以通過多維分析根據(jù)你自己的需要設定，來進行數(shù)據(jù)的查詢。

　　前面講的架構的每一層作用，接下來我跟大家把一些主要的層次的功能跟實現(xiàn)方式跟大家做一個交流，首先我們看一下基礎數(shù)據(jù)層，也就是剛才我們說的明細層，在這一層里面，我們會按照總站類，分布站類，協(xié)議類，交易類，不同層級的數(shù)據(jù)做一個明細的數(shù)據(jù)，把這些數(shù)據(jù)所有詳細信息放進去，這樣這一部分數(shù)據(jù)不光提供給你監(jiān)管報送的需要，其實還提供給你后面你業(yè)務分析的需要，在這個里面，每一張明細數(shù)據(jù)它可以適用于不同的報表系統(tǒng)，并不是我會針對哪一個報送體系做明細，我這個明細是共用的，你任何的報送體系我用的都是同一個報送明細。

　　指標的體系，指標里面我在做的時候，其實不光是站在監(jiān)管報送的角度，是站在銀行全行的業(yè)務需求的角度，對全行的指標做分類，比如我們可以把他分成規(guī)模類，效益類，結構類，還有效率類，客戶類，渠道類，產(chǎn)品類、市場類，風險類，通過這九大分類，我相信能夠涵蓋行類大部分的指標，應該都能，包括你的監(jiān)管指標也可以涵蓋到里面來，針對每一個九大類，可以根據(jù)實際的需要你再去分你的指類，這個加工設定以后，我們會針對他每一個指標里面再進行詳細的關于這個指標的管理，比如指標名稱，指標的代碼，指標的含義，還有指標的計算公式，你的指標計量緯度跟頻率，這些都可以通過指標設計里面進行設置，這個就是指標體系的實現(xiàn)方式。

　　還有根據(jù)監(jiān)管當局的發(fā)展趨勢跟要求，其實我們可以看到它很重要的一步就是校驗，在整個統(tǒng)一監(jiān)管報送平臺當中，因為我們的數(shù)據(jù)在一個平臺，所以對交叉校驗來說就很容易實現(xiàn)，而且我們的校驗可以進行很多類，不光是監(jiān)管當局要求的那些校驗，而且這些校驗基本上都是可配置的，并不是我給你固定的，你就可以自己配置。這個是我們的應用架構，在這個里面，其實大家有所了解比如門戶管理這一塊，我們是管理他的用戶，而且角色，我們這個用戶其實復全的時候是通過角色，在數(shù)據(jù)管理這一塊，對指標報表可以進行配置，比如銀監(jiān)局或監(jiān)管當局要求一個新的報表，可以到這個里面進行配置以后，把這個報表復制給你這個角色，具有那個角色的人可以操作，他進來的時候可以使用這張報表，這個里面還有一些補錄數(shù)據(jù)。

　　第三個平臺展現(xiàn)這一塊，這一塊會隨著你的報送體系，因為報送體系是設置的，隨著你的設置這一塊會逐漸增加，自動會產(chǎn)生一個菜單給你，在這個里面其實有兩塊可能比較特殊的，第一個是指標庫的應用，他的目的是對你設計的指標，可以不用通過報表，直接提取出來查看一下，還有一個是報送應用，他的目的如果監(jiān)管當局提出一個新的報表的需求，你開發(fā)或者調(diào)試花很多時間，可以暫時先通過這一個，把報表查詢出來，快速的相應監(jiān)管當局的要求，這基本是監(jiān)管報送平臺的應用架構。

　　前面講了這么多，在我們統(tǒng)一監(jiān)管報送平臺里究竟應該建設什么樣的平臺，建設的時候其實會有哪些要求，首先我們從數(shù)據(jù)層來看，你必須要搭建一個基礎的比較堅實的基礎數(shù)據(jù)，具有統(tǒng)一的數(shù)據(jù)來源，第二必須對這些數(shù)據(jù)進行充分的整合，因為你的數(shù)據(jù)可能都分布在不同的系統(tǒng)當中，比如你的貸款可能在核心游，在信貸游，而且這些數(shù)據(jù)質(zhì)量都不一樣，所以做的時候必須對這些數(shù)據(jù)進行充分整合，還有完善的數(shù)據(jù)質(zhì)量的管理，還有高效的數(shù)據(jù)積累的校驗，這是從數(shù)據(jù)層面來說。

　　第二個從你管理角度來說，你必須制定完備的報送制度，因為這個里面很多指標管理，還有開發(fā)規(guī)范是需要你制度去約束的，并不是一個程序就能解決問題的，所以從制度管理角度來說，要完備，第三個從展現(xiàn)的門戶來說，你必須建立一個統(tǒng)一的報送平臺，集中報送管理，還有快速的報送相應，另外一個能夠?qū)崿F(xiàn)靈活的統(tǒng)計分析，從數(shù)據(jù)、管理制度、應用實現(xiàn)來說，三個層面從內(nèi)到外進行一體化的管理，通過這樣來應對監(jiān)管當局對銀行的需求變更。我的分享基本上到這里，謝謝大家。