山西移動(dòng)IT規(guī)劃建設(shè)中心 陳鋼 2009/02/11
近10年來(lái),中國(guó)移動(dòng)的用戶數(shù)呈爆炸式增長(zhǎng),其BOSS和經(jīng)分系統(tǒng)的數(shù)據(jù)積累已達(dá)天文數(shù)字,其后臺(tái)系統(tǒng)之復(fù)雜和巨大也毫無(wú)懸念地堪稱(chēng)世界之最。那么,除了計(jì)費(fèi)以外,這些豐富的數(shù)據(jù)資源給我們帶來(lái)了哪些財(cái)富?管理這些數(shù)據(jù)的成本又占據(jù)了多少運(yùn)營(yíng)成本?更重要的是,在競(jìng)爭(zhēng)環(huán)境發(fā)生變化、電信市場(chǎng)的競(jìng)爭(zhēng)進(jìn)入以數(shù)字業(yè)務(wù)或全業(yè)務(wù)為主要產(chǎn)品的長(zhǎng)尾市場(chǎng)競(jìng)爭(zhēng)時(shí),中國(guó)移動(dòng)這幾年建立起來(lái)的超級(jí)龐大而復(fù)雜的支撐系統(tǒng)會(huì)成為競(jìng)爭(zhēng)的核心能力還是包袱?這些問(wèn)題都應(yīng)該是一個(gè)進(jìn)入成年期的企業(yè)所要考慮的重要內(nèi)容。因?yàn)樵谛畔⒈〞r(shí)代,能給企業(yè)帶來(lái)價(jià)值的數(shù)據(jù)是寶藏,反之就是垃圾。計(jì)費(fèi)系統(tǒng)的數(shù)據(jù)
計(jì)費(fèi)系統(tǒng)從早期的小型計(jì)費(fèi)軟件逐漸發(fā)展到目前成為電信行業(yè)最重要的IT系統(tǒng),每天承擔(dān)著巨大的交易量。其發(fā)展動(dòng)力來(lái)自兩個(gè)方面:一是高速用戶數(shù)增長(zhǎng)帶來(lái)系統(tǒng)處理能力和速度的快速擴(kuò)容,從普通速度硬盤(pán),到高速內(nèi)存數(shù)據(jù)庫(kù),可謂對(duì)所有市場(chǎng)上的技術(shù)無(wú)所不用,被稱(chēng)之為“用空間換時(shí)間”;二是省級(jí)公司與各地市本地需求間的矛盾,集團(tuán)公司統(tǒng)一營(yíng)銷(xiāo)策劃案與各分公司市場(chǎng)部具體地方銷(xiāo)售策略之間的矛盾導(dǎo)致計(jì)費(fèi)系統(tǒng)高密度的系統(tǒng)變更,很多省公司計(jì)費(fèi)中心對(duì)一星期經(jīng)歷10次以上的上線習(xí)以為常,并稱(chēng)之為“用時(shí)間換空間(市場(chǎng)空間)”。
系統(tǒng)如此高速擴(kuò)充,使我們無(wú)法顧及整體數(shù)據(jù)架構(gòu)和整體應(yīng)用架構(gòu)的規(guī)劃和設(shè)計(jì),也沒(méi)有時(shí)間從業(yè)務(wù)的視角分析計(jì)費(fèi)支撐系統(tǒng)生命之源的業(yè)務(wù)流程。我們?cè)?jīng)分析,如果一個(gè)用戶訂購(gòu)了所有的套餐(這是不可能的),那么他一年的計(jì)費(fèi)記錄信息也不應(yīng)超過(guò)150kB數(shù)據(jù),對(duì)于一個(gè)擁有1000萬(wàn)用戶的運(yùn)營(yíng)商來(lái)說(shuō),10TB的計(jì)費(fèi)數(shù)據(jù)已經(jīng)是不小的規(guī)模,可實(shí)際上目前一般我們都會(huì)有50TB以上的數(shù)據(jù),甚至100TB?梢韵胂,數(shù)據(jù)的冗余、存儲(chǔ)的冗余使垃圾數(shù)據(jù)已經(jīng)達(dá)到了難以控制的局面,凡是有數(shù)據(jù)處理經(jīng)驗(yàn)的人都知道,管理這個(gè)規(guī)模的數(shù)據(jù)有多么艱難。
經(jīng)分系統(tǒng)的數(shù)據(jù)
經(jīng)分系統(tǒng)一般有4個(gè)主要功能:建模分析,尋找聚合數(shù)據(jù)群并判斷市場(chǎng)切分;統(tǒng)計(jì)分析,預(yù)測(cè)結(jié)果并回歸建模;出統(tǒng)計(jì)報(bào)表;出KPI指標(biāo)情況。由于各種原因,中國(guó)電信市場(chǎng)的不充分競(jìng)爭(zhēng)導(dǎo)致經(jīng)分系統(tǒng)的前兩個(gè)功能基本沒(méi)有派上用場(chǎng),大部分經(jīng)分系統(tǒng)還是用后兩個(gè)功能。但經(jīng)分系統(tǒng)的建設(shè)參考了國(guó)外的數(shù)據(jù)結(jié)構(gòu)建設(shè),導(dǎo)致其數(shù)據(jù)架構(gòu)不夠高效,加上作為數(shù)據(jù)源的計(jì)費(fèi)系統(tǒng)混亂的數(shù)據(jù)架構(gòu)狀況,使這方面的問(wèn)題更加突出。一般意義的數(shù)據(jù)倉(cāng)庫(kù)工具都是為建模分析設(shè)計(jì)的。每年企業(yè)都要拿出大量的資金來(lái)擴(kuò)容經(jīng)分系統(tǒng),因?yàn)椴粩U(kuò)容就無(wú)法滿足客戶增長(zhǎng)的需要,而反思其對(duì)收入的貢獻(xiàn)則實(shí)在是無(wú)法平衡,導(dǎo)致各省公司在做此類(lèi)IT投資時(shí)苦不堪言。更關(guān)鍵的問(wèn)題是,如果競(jìng)爭(zhēng)真的進(jìn)入白熱化,中國(guó)移動(dòng)的競(jìng)爭(zhēng)利器可能就是經(jīng)分系統(tǒng),但長(zhǎng)期以來(lái)的經(jīng)分報(bào)表化操作可能會(huì)使經(jīng)分系統(tǒng)的數(shù)據(jù)體系難以支持高頻度建模。
分析以上兩個(gè)方面的原因,我們可以看到這樣幾個(gè)方面的問(wèn)題。
首先是每到月初和月末的兩周,計(jì)費(fèi)和經(jīng)分系統(tǒng)都會(huì)承受出報(bào)表的巨大壓力,這往往成為每年擴(kuò)容的惟一依據(jù);第二就是數(shù)據(jù)似乎永遠(yuǎn)也無(wú)法保證全部正確,即數(shù)據(jù)的惟一性問(wèn)題,于是系統(tǒng)就不斷重建新數(shù)據(jù)集,包括內(nèi)存駐留、臨時(shí)駐留、短暫駐留等等花樣繁出,導(dǎo)致運(yùn)營(yíng)商很難看清整體數(shù)據(jù)體系;第三是計(jì)費(fèi)出報(bào)表時(shí)與計(jì)費(fèi)功能及詳單查詢搶資源,經(jīng)分系統(tǒng)出報(bào)表和地市數(shù)據(jù)查詢或其他應(yīng)用搶資源,經(jīng)分系統(tǒng)上除了報(bào)表KPI以外,功能已經(jīng)很少,即便如此,經(jīng)分系統(tǒng)仍舊面臨永遠(yuǎn)的資源短缺。
數(shù)據(jù)體系改進(jìn)建議
根據(jù)上述計(jì)費(fèi)系統(tǒng)和經(jīng)分系統(tǒng)的數(shù)據(jù)情況,筆者對(duì)運(yùn)營(yíng)商數(shù)據(jù)體系的改進(jìn)提出以下4點(diǎn)建議。
1.以業(yè)務(wù)流程為驅(qū)動(dòng)力,首先分析語(yǔ)音業(yè)務(wù)、數(shù)據(jù)業(yè)務(wù)、固數(shù)業(yè)務(wù)的特點(diǎn),把實(shí)現(xiàn)靈活快速的業(yè)務(wù)組合作為數(shù)據(jù)架構(gòu)調(diào)整或優(yōu)化的最高目標(biāo),同時(shí)最大限度地保留原有數(shù)據(jù)體系而進(jìn)行新的數(shù)據(jù)架構(gòu)設(shè)計(jì)。
2.分別建立交易型(transactionaldatasystem)、分析型(analyticaldata system)和操作型(Operational data system)數(shù)據(jù)集。但這個(gè)過(guò)程不可一蹴而就,要持之以恒,并由縱觀企業(yè)IT全局戰(zhàn)略的部門(mén)來(lái)負(fù)責(zé)。3個(gè)數(shù)據(jù)系統(tǒng)成型后才可逐漸根據(jù)業(yè)務(wù)的需要和不同數(shù)據(jù)的歷史價(jià)值進(jìn)行數(shù)據(jù)生命周期的定義。
3.參照SID形成對(duì)企業(yè)數(shù)據(jù)體系的全面掌控,包括建立數(shù)據(jù)字典、數(shù)據(jù)域間流程的描述、數(shù)據(jù)變更展示等。根據(jù)以往經(jīng)驗(yàn),這部分工作有相當(dāng)大的難度,最主要的難度來(lái)自現(xiàn)有的計(jì)費(fèi)系統(tǒng)。以上敘述的原因,導(dǎo)致幾乎1/2的數(shù)據(jù)由中間數(shù)據(jù)表構(gòu)成,這部分?jǐn)?shù)據(jù)很難根據(jù)SID的模型做映射,也沒(méi)有固定的數(shù)據(jù)架構(gòu)和數(shù)據(jù)屬性,從而成了數(shù)據(jù)黑洞。對(duì)這類(lèi)問(wèn)題,運(yùn)營(yíng)商需要伴隨ODS(操作型數(shù)據(jù)系統(tǒng))的建立而逐步進(jìn)行改進(jìn)。
4.與企業(yè)業(yè)務(wù)流程、系統(tǒng)流程、變更流程同步建立數(shù)據(jù)變更流程管控平臺(tái),形成對(duì)數(shù)據(jù)全生命周期的監(jiān)控,完全改變現(xiàn)有管控。當(dāng)我們無(wú)法改變現(xiàn)有在線系統(tǒng)時(shí),就需要對(duì)它進(jìn)行監(jiān)控,并建立完善的變更流程,抑制錯(cuò)誤的做法。因此要建立一整套相對(duì)完善的數(shù)據(jù)監(jiān)控系統(tǒng),為決策層提供數(shù)據(jù)生命周期管理、數(shù)據(jù)變更管理、數(shù)據(jù)介質(zhì)使用、數(shù)據(jù)使用權(quán)限管理等方面最直接的依據(jù)。
總之,數(shù)據(jù)、應(yīng)用和業(yè)務(wù)流程是電信企業(yè)IT建設(shè)的3個(gè)重大領(lǐng)域,在沒(méi)有統(tǒng)一IT組織架構(gòu)的現(xiàn)實(shí)情況下,我們從事支撐系統(tǒng)開(kāi)發(fā)和運(yùn)維的同時(shí),必須實(shí)事求是,不能完全推翻過(guò)去的IT系統(tǒng),只能將其改進(jìn)。從業(yè)務(wù)流程分析出發(fā),自上而下地提出對(duì)數(shù)據(jù)系統(tǒng)的改進(jìn)措施是比較現(xiàn)實(shí)的做法,特別是參考TMF的SID模型進(jìn)一步形成企業(yè)數(shù)據(jù)架構(gòu)。我們要依據(jù)全業(yè)務(wù)經(jīng)驗(yàn)的業(yè)務(wù)模型著手設(shè)計(jì)企業(yè)交易型數(shù)據(jù)系統(tǒng)、分析型數(shù)據(jù)系統(tǒng)和操作型數(shù)據(jù)系統(tǒng),循序漸進(jìn)地實(shí)施,并在企業(yè)數(shù)據(jù)模型設(shè)計(jì)的過(guò)程中考慮數(shù)據(jù)的生命周期定義。
通信世界周刊