欧美,精品,综合,亚洲,好吊妞视频免新费观看,免费观看三级吃奶,一级a片女人自慰免费看

首頁 > 專題 > 文思海輝-乘數(shù)據(jù)之舟-達價值彼岸 > 數(shù)據(jù)平臺之道—大數(shù)據(jù)時代的數(shù)據(jù)倉庫的規(guī)劃、建設(shè)(北京站)

數(shù)據(jù)平臺之道—大數(shù)據(jù)時代的數(shù)據(jù)倉庫的規(guī)劃、建設(shè)(北京站)
2014-12-08 15:25:15   評論:0 點擊:

  在文思海輝金融商業(yè)智能解決方案研討會上文思海輝副總裁賈丕星表示,文思海輝的商業(yè)智能團隊已經(jīng)發(fā)展到452人的規(guī)模,并且隨著國內(nèi)銀行商業(yè)智能領(lǐng)域發(fā)展,還在逐步完善解決方案和擴大團隊。

  賈丕星指出,現(xiàn)階段銀行商業(yè)體系是基石,把數(shù)據(jù)做有效的存儲,以及好的管理,未來商業(yè)智能領(lǐng)域會發(fā)展的很好,未來三五年之內(nèi)這仍然是文思海輝解決方案的核心。

  文思海輝副總裁 賈丕星

  “小數(shù)據(jù)和大數(shù)據(jù)在銀行業(yè)里更多是互為補充而不是替代。小數(shù)據(jù)比較簡單,有比較成熟的技術(shù)應(yīng)對。大數(shù)據(jù)更多的是理念優(yōu)先,其一個典型特征是價值密度較低,這也是大數(shù)據(jù)帶來的思考。”

  賈丕星認為,銀行思考大數(shù)據(jù)更多的需要考慮你具備什么條件讓客戶產(chǎn)生的大數(shù)據(jù)自動的流向銀行。文思海輝在大數(shù)據(jù)領(lǐng)域仍然保持和合作伙伴廠商緊密接觸。像IBM、BMC、Oracle每一家對大數(shù)據(jù)的理解其實是有差異的,而且差異非常大。

  賈丕星指出了大數(shù)據(jù)時代針對傳統(tǒng)數(shù)據(jù)倉庫的思考,其中包括不要因為大數(shù)據(jù)擾亂我們的原則、規(guī)劃、節(jié)奏;技術(shù)和平臺已經(jīng)不是我們關(guān)注的重點;原則和架構(gòu)在“以不變應(yīng)萬變”中顯得尤為重要;正確的方法論、管控的水平?jīng)Q定了質(zhì)量;引導(dǎo)客戶主動的“分析探索”是永恒的話題。

  以下為演講實錄:

  大家知道文思和海輝是去年年底合并的,從集團研發(fā)對我們支持角度來說:第一點祥麟給了我們一個很好的技術(shù)規(guī)劃體系。第二個是智慧金融這個概念,把所有金融事業(yè)群解決方案有效整合在一起。形成應(yīng)對未來銀行業(yè)務(wù)發(fā)展很好的體系。從這兩個角度來說,給了整個商業(yè)智能部這邊很大的支持。

  今天我講的是數(shù)據(jù)倉庫的概念。我們這個團隊跟大家認識都是從數(shù)據(jù)倉庫這個角度跟大家相識的。我們這個團隊一直被認為是業(yè)內(nèi)做商業(yè)智能做的比較久,相對來說比較專業(yè)的團隊。每年我基本都講第一場,對我來說也是一個很大的挑戰(zhàn)。每年都想講一點我這一年多的新的體會和感受跟大家分享。今天講什么呢?前段時間我在外面講的更多的是從小數(shù)據(jù)角度看大數(shù)據(jù),大數(shù)據(jù)現(xiàn)在提的越來越多,小數(shù)據(jù)從另外一個角度理解它,它種類比較單一但是業(yè)務(wù)種類并不單一;第二它量比較小,大數(shù)據(jù)量可以很大。

  大數(shù)據(jù)的年代里,真正的數(shù)據(jù)倉庫應(yīng)該如何規(guī)劃建設(shè)?我們今年也有自己更多的思考和體會。講這個之前,我還是把團隊的情況給大家做一個簡單回顧。在各位新老客戶支持下,我們商業(yè)智能團隊從去年300多人,現(xiàn)在已經(jīng)發(fā)展到452人的規(guī)模。我們跟隨著國內(nèi)銀行商業(yè)智能領(lǐng)域發(fā)展,在逐步完善我們的解決方案和擴大我們的團隊。我們團隊主要分布在華東、華北、華南三個區(qū)域。跟隨著客戶在成長,我們有越來越多的新的解決方案和原有解決方案的優(yōu)化在不斷的推出。

  我們傳統(tǒng)的優(yōu)勢就是數(shù)據(jù)倉庫和數(shù)據(jù)管控,這兩個方面會放在今天上午跟大家分享,F(xiàn)階段銀行商業(yè)智能體系的基石,還是把數(shù)據(jù)做有效的存儲和更好的管理,這個領(lǐng)域未來三五年之內(nèi)這仍然是我們解決方案的核心。

  團隊為什么會有所成長?跟我們自己承接了更多的項目有關(guān)。在過去兩年,所有業(yè)內(nèi)資產(chǎn)排名前20位銀行里,新啟動五個數(shù)據(jù)倉庫都是由我們團隊承接的。正是有這樣好的項目機會讓你的團隊有成長,解決方案不斷的優(yōu)化。

  我今天既看到了特別支持我們的長期的老客戶,也看到我們未來有合作機會的新客戶。這是我們近期拿下來的國內(nèi)一個大型股份制銀行的數(shù)據(jù)架構(gòu)規(guī)劃和數(shù)據(jù)倉庫規(guī)劃咨詢項目。這個項目有很大的挑戰(zhàn),客戶需要對他們管理信息類的系統(tǒng)進行全面的梳理,我們也對過去5年我們的積累進行總結(jié),這是很好的結(jié)合。數(shù)據(jù)倉庫只靠一個EDW發(fā)揮不了太多的作用,更多的是規(guī)劃的角度,圍繞從數(shù)據(jù)的產(chǎn)生、交換、存儲、使用,由數(shù)據(jù)轉(zhuǎn)成業(yè)務(wù)價值的全過程。這個是我們更愿意看到的東西。我們不希望大家理解的BI僅僅是一個平臺,存儲了企業(yè)里面有效、無效所有的信息,這個沒意思。有意思是的通過價值體系的打造讓它更好的發(fā)揮價值。

  說到這點,結(jié)合今天題目去談,就是小數(shù)據(jù)和大數(shù)據(jù)的概念。我從不覺得大數(shù)據(jù)是新的有震撼力的東西,但是它確實給我們帶來了轉(zhuǎn)變。我個人理解它們兩個沒有什么所謂替代形成,特別是銀行業(yè)里面,更多的是互為補充。

  從另外一個角度來講,小數(shù)據(jù)比較簡單,有比較成熟的技術(shù)應(yīng)對它。大數(shù)據(jù)是多種類型數(shù)據(jù)的組成,需要使用多種技術(shù)對待它。比如說圖像、視頻、文檔。每一個識別和監(jiān)測它的手段和方法是不一樣的。另外大數(shù)據(jù)更多的是理念優(yōu)先,它在銀行里到底能發(fā)揮什么價值?另外大數(shù)據(jù)我們會說它一個比較典型的特征,它的價值密度很低。那么反回來思考,把大量數(shù)據(jù)存下來再去做統(tǒng)計分析有意義和價值嗎?還是通過實時處理的技術(shù)把沒價值的東西篩掉,再利用有價值的做結(jié)構(gòu)化的關(guān)聯(lián)分析?這就是大數(shù)據(jù)給我們帶來的思考。

  銀行思考大數(shù)據(jù),更多的需要考慮你具備什么條件讓客戶產(chǎn)生的大數(shù)據(jù)自動的流向銀行?銀行獲取大數(shù)據(jù)方式可能跟傳統(tǒng)的物聯(lián)網(wǎng)行業(yè)不太一樣。銀行對待大數(shù)據(jù)的時候更多的考慮是銀行有什么類型的大數(shù)據(jù)?從銀行統(tǒng)計應(yīng)用角度來說有什么價值?我們是實施商,我們在大數(shù)據(jù)領(lǐng)域仍然保持跟我們的合作伙伴廠商的緊密接觸。我們從去年和前年就開始跟我們合作緊密的像IBM、BMC、Oracle的大數(shù)據(jù)廠商進行緊密的溝通和跟進。我們看怎么更他們更好的結(jié)合去為銀行提供更好的服務(wù)。但是我們發(fā)現(xiàn)每家廠商對大數(shù)據(jù)的解讀其實是有差異的。 比如說EMC的HAWQ技術(shù)路線適合銀行嗎?因為我們知道HDFS底層數(shù)據(jù)存儲和關(guān)系數(shù)據(jù)的底層數(shù)據(jù)有本質(zhì)的區(qū)別。但是它有它的應(yīng)用場景,比如互聯(lián)網(wǎng)和電商類。Teradata的大數(shù)據(jù)技術(shù)路線中重點突出基于MR的Aster,它可能也只是適合一定的場景。所以讓我們看到一個特點是百花齊放,大家各有各的發(fā)展思路。在原有的基礎(chǔ)上在怎么更好的綁定客戶,每家策略不一樣。 但是銀行一定要選擇適合自己的。

  銀行大數(shù)據(jù)在典型應(yīng)用場景分析有哪些呢,無非就是三種類型:外部互聯(lián)網(wǎng)信息、輿情分析;是銀行確實能夠通過各種手段找到外部的一些信息,互聯(lián)網(wǎng)的評價、社交媒體和論壇里面的發(fā)言,它關(guān)注到銀行或者關(guān)注到了銀行客戶。這種信息是一種非嚴謹?shù)墨@取方式,也是一種特別嚴謹?shù)臎Q策分析的補充。

  銀行自身非結(jié)構(gòu)化數(shù)據(jù)信息:就是銀行自身有大量非結(jié)構(gòu)化信息體現(xiàn)在網(wǎng)銀和呼叫中心的語音,這些信息是不是大規(guī)模的做分析?我建議的方式是嘗試。因為傳統(tǒng)結(jié)構(gòu)化數(shù)據(jù)或者分析技術(shù)并沒有讓你在業(yè)務(wù)決策分析里面發(fā)揮到極至。我們一定要做更多的嘗試,引導(dǎo)我們?nèi)ンw驗大數(shù)據(jù)的場景。銀行自身結(jié)構(gòu)化數(shù)據(jù)歷史歸檔和查詢訪問。這三個方面是我們跟銀行探討更多的,大數(shù)據(jù)在銀行的應(yīng)用場景。

  大數(shù)據(jù)時代針對傳統(tǒng)數(shù)據(jù)倉庫的思考:首先不要因為大數(shù)據(jù)這個詞擾亂了我們的的原則、規(guī)劃和節(jié)奏。我們要一步步腳踏實地的跟進大數(shù)據(jù)的技術(shù)。

  其次傳統(tǒng)的數(shù)據(jù)倉庫我昨天思考完寫了四句話:

  第一,技術(shù)和平臺已經(jīng)不是我們關(guān)注的重點。很多新客戶型的時候他會猶豫,其實你有你的判斷,你作為商務(wù)上你有你的所謂投資回報成本的考慮。但是技術(shù)上在傳統(tǒng)結(jié)構(gòu)化分析里面,它的差異性不是很大。那么做選型的時候是否能夠處理傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)?我相信還是一個重點,但是更大的重點應(yīng)該放在如何更好的支撐應(yīng)用和如何跟未來技術(shù)走向很好的結(jié)合。

  第二:變化莫測的世界里做好架構(gòu)管理才能以不變應(yīng)萬變的決策。所以我們更強調(diào)合理的原則和架構(gòu)。這些年廠商提出來做數(shù)據(jù)倉庫用10大原則、20大原則,原則越多越?jīng)]用,原則少有效才能解決真正的問題。

  第三,過去十年前做數(shù)倉,用一期項目整合300張表,現(xiàn)在可以整合1000張表,就是因為正確的方法論。一個好的方法論出來,關(guān)于開發(fā)管控和數(shù)據(jù)管控水平不斷的提升,才能保證一家銀行商業(yè)智能體系的發(fā)展。

  第四個是引導(dǎo)客戶主動分析和探索,只有通過這個才能改變傳統(tǒng)業(yè)務(wù)人員分析思路和方法。

  這四點是我們在新的數(shù)據(jù)平臺里面,大數(shù)據(jù)時代新的數(shù)據(jù)倉庫架構(gòu)里面需要考慮的四個重點。

  架構(gòu)設(shè)計原則:做數(shù)據(jù)倉庫架構(gòu)設(shè)計過程中,我們更審慎的對待自身的原則,這六句話有它背后的道理,第一個是操作型和分析型處理分離原則。第二個就是做到數(shù)據(jù)集體程度、整合和共享原則。第三句話,盡量減少大量明晰數(shù)據(jù)搬遷和處理。第四個后臺批量處理和前端聯(lián)機訪問分離原則。第五個是明晰數(shù)據(jù)使用審慎使用。這個原則很重要。我們在銀行經(jīng)常遇到很多問題,當業(yè)務(wù)部門提到一個需求說我要查明細,我們要審慎的對待,合理評估投入產(chǎn)出。最后一個就是做好統(tǒng)一技術(shù)平臺。

  關(guān)于數(shù)據(jù)倉庫里面的四層架構(gòu):貼源的、主題整合、通用匯總、數(shù)據(jù)集市。哪個區(qū)域用什么策略我自己做十年了也沒有任何調(diào)整。這就是好的架構(gòu)。

  自主開發(fā)體系:把數(shù)據(jù)倉庫實施方法論能夠很好的跟開發(fā)工具做結(jié)合。這種開發(fā)工具的結(jié)合,過去兩年,我們實施十幾個數(shù)據(jù)倉庫平臺里面發(fā)揮了很大的價值?蛻魧ξ覀兊脑u價:第一開發(fā)的東西可維護,第二質(zhì)量相對較高,開發(fā)效率高。

  另外永遠不要把數(shù)據(jù)倉庫建設(shè)和數(shù)據(jù)管控分開來談。數(shù)據(jù)倉庫依賴于數(shù)據(jù)管控,提升數(shù)據(jù)質(zhì)量才能更好的服務(wù)于應(yīng)用。這兩個是不分割的,甚至它的業(yè)務(wù)牽頭部門、主管部門都是一個。

  引導(dǎo)業(yè)務(wù)人員上來主動訪問,這種探索式的推動永遠是你不要放棄的一個話題。它同前期推動來說很難,但是它后期給你銀行整個分析水平的提升帶來的價值非常大。

  我們做數(shù)據(jù)倉庫的,做數(shù)據(jù)管控的,我們不斷給銀行推要做隨機查詢。我們不斷的強化這三個東西的重要性,但是這三個東西都是前期投入大,后期才能逐步慢慢見效發(fā)揮很大價值的地方。國內(nèi)的工行,之所以它的數(shù)倉成為業(yè)界領(lǐng)先典范,就是因為它堅持走這三條路。

  在座的新老客戶,最后再跟大家說一下“我們做的工作都是前期投入產(chǎn)出比較不合適的,但是希望大家重視,希望大家從規(guī)劃的角度解決好這三個概念的融合”。

錯誤報告  分享到: