信息化產業(yè)高速發(fā)展前景
申請免費試用、咨詢電話:400-8352-114
隨著電信市場的開放,競爭將越來越激烈。利潤的降低使得必須從粗放的經營轉變到集約的經營,同時經營決策需要盡可能多的定量的依據和盡可能快的速度。所有這些需要技術上的支持----數據倉庫和數據挖掘廣東省電信科學技術研究院是華南地區(qū)通信技術支持及科研開發(fā)的最高技術部門,圍繞保障通信大網運行安全、高效和通信市場的需求而進行系統(tǒng)維護支持、網管系統(tǒng)開發(fā)、多媒體研究、網絡技術與市場研究、計費系統(tǒng)研究與開發(fā)、人員培訓和計量檢測等七個方面的工作。研究院目前擁有一支900多人的年富力強、實力雄厚的研發(fā)隊伍?! ⊙芯吭洪_發(fā)的Thinker-BC2000多媒體網綜合
業(yè)務管理系統(tǒng)是一套統(tǒng)一的綜合業(yè)務管理系統(tǒng)。它為電信運營商以及各級ISP提供一個穩(wěn)定而靈活的業(yè)務支撐平臺。該平臺能夠提供所有的多媒體數據通信基本業(yè)務及各種增值服務,該平臺具備極強的可擴展性,具備快速的新業(yè)務生成、推廣能力。系統(tǒng)能夠靈活地定義各項服務的資費政策,及各項業(yè)務的捆綁銷售優(yōu)惠策略,并對各項服務提供準確、實時的計費功能。其中的數據倉庫決策支持系統(tǒng)是基于Sybase的數據倉庫解決方案開發(fā)的。業(yè)務經營決策者可以利用這個系統(tǒng)快速準確地了解到各項業(yè)務的發(fā)展情況、為進一步的決策支持工作提供堅實的基礎。 2需求主要特點 數據量龐大目前,廣東公眾多媒體通信網撥號用戶總數已達到70萬。根據業(yè)務需求分析,廣東省163/169網到2002年底的用戶總數將達到800萬以上,其中撥號注冊用戶達400萬,主叫用戶300萬,卡用戶100萬,專線用戶也將達到1
萬戶以上。在這些大量的數據背后隱藏著許多重要的信息?! I(yè)務結構復雜系統(tǒng)的最終用戶是電信內部的各個部門,因此最終用戶的需求不盡相同。經常變化業(yè)務策略不斷變化。表現為資費政策的不斷變化。 3方案介紹 Thinker-BC2000多媒體網綜合業(yè)務管理系統(tǒng)的數據倉庫系統(tǒng)模型如下圖所示: 3.1系統(tǒng)軟件平臺 數據倉庫的實施是一個相當復雜的過程,主要包括五個部分的內容:數據倉庫的設計建模、數據轉換與集成、數據存儲與管理、數據的分析和展現和數據倉庫的維護和管理?! ybase提供了覆蓋整個數據倉庫建立周期的一套完整的產品包:Warehouse Studio,它包括數據倉庫的建模、數據集成和轉換、數據存儲和管理、元數據管理和數據可視化分析等產品。以下說明了我們是如何結合Sybase的產品來做數據倉庫的設計與開發(fā)。 數據倉庫的設計、建模 數據倉庫的設計工作對于決策支持系統(tǒng)起著至關重要的作用,它需要根據決策需求確定主題,從數據源到數據提交,對數據倉庫的數據組織進行邏輯結構的設計,還要按照業(yè)務用戶最能理解的方式組織和提供信息?! ≡谶@個階段,我們使用了PowerDesigner WarehouseArchitect。WarehouseArchitect是個高度優(yōu)化的數據庫工具,廣泛用于數據源的逆向工程、建模、數據倉庫方案設計,以適應每個業(yè)務需求。通過對邏輯設計、物理設計和應用建模進行集成,WarehouseArchitect方便了數據倉庫的開發(fā)和實現?! 祿D換與集成 在進行數據倉庫的建立時,最大的挑戰(zhàn)之一是如何將原始業(yè)務數據轉化為一致的格式,使之更好地為決策支持服務。這包括對已有數據的準確性和一致性進行檢驗、凈化,將數據進行轉化、提取、轉換、裝載到數據集市或數據倉庫以及對其進行定期更新和管理。PowerMart作為數據抽取工具,從各種異夠的數據源中抽取數據,在數據抽取過程,用戶可以根據不同的抽取階段,靈活定制各種數據抽取流程,并定時地將數據加載到數據倉庫中?! owerMart是一個集成的軟件產品套件,用于建造和管理數據集市和分析應用。PowerMart交付了一個開放的可伸縮的解決方案,主要定位于數據集市完整的生命周期和分析應用開發(fā)及產品化的管理,能夠支持多種平臺上快速變化的大量數據作為數據來源,進行復雜的轉換處理以及支持高速的數據加載。其metadata repository能夠協(xié)調并驅動一系列的核心功能,包括抽取、轉換、加載和管理等?! owerMart的圖形化用戶接口幫助數據倉庫管理人員很容易的設計復雜的source-to-target的映射,然后可以由PowerMart強大的服務器來自動地執(zhí)行?! 祿鎯εc管理 數據倉庫的存儲可以選用多維數據庫,也可以選用關系型數據庫或其它特殊的存儲方式。數據的存儲要保證數據的安全性、完整性、一致性,同時還要具有復雜的分析查詢的高效性?! ∥覀冞x用了Sybase的數據倉庫產品Adaptive Server IQ。Adaptive Server IQ是一個關系型數據庫,為高性能決策支持和數據倉庫的建立而進行了優(yōu)化。IQ中的關鍵技術是縱向數據存儲(通過列而不是通過行來進行)、Bit-Wise查詢索引和數據壓縮。 數據分析和展現 聯機分析處理(OLAP)是一個分析處理技術,它從企業(yè)的數據集合中收集信息,并運用數學運算和數據處理技術,靈活、交互式地提供統(tǒng)計、趨勢分析和預測報告。通過多種OLAP工具對數據倉庫中的數據進行多維分析、匯總,形成圖表或報表的形式,使決策者可以清晰、直觀地看到分析結果,這正是數據倉庫系統(tǒng)所要達到的目的?! 祿}庫的開發(fā)應用主要有結構設計、數據集中組織和管理、數據的快速高效訪問等。其中數據的訪問一般都是由較為成熟的業(yè)務智能工具完成,因此不同于OLTP系統(tǒng),數據倉庫系統(tǒng)的前端開發(fā)編程量是比較小的,但是其維護工作的時間跨度要大,因為決策支持應用的隨意性較強,不可能再象業(yè)務系統(tǒng)那樣固定一個統(tǒng)一的操作模式。 BusinessObjects作為較早進入中國市場的業(yè)務智能提供商,其產品操作精簡、功能豐富,并且有直觀易懂的前端展現元數據管理部分,在這個解決方案中與IQ的高速查詢效率相得益彰?! 祿}庫的維護和管理 元數據是關于數據的數據,能夠表示、定義數據的意義及系統(tǒng)各組成部件之間的關系的數據,它包括關鍵字、屬性、數據描述、物理數據結構、源數據結構、映射及轉換規(guī)則、綜合算法、代碼、缺省值、安全要求及數據時限等。管理好元數據是管理數據倉庫的關鍵?! ybase的Warehouse Control Center通過對元數據倉庫的集中管理,提供了數據倉庫解決方案的保證技術。從設計和開發(fā)到實現到最終用戶訪問,由工具和數據庫產生的對元數據的密集型集成和管理保證了真正企業(yè)級數據倉庫的建立。Warehouse Control Center是基于Intellidex技術的為數據倉庫開發(fā)人員提供的數據倉庫元數據管理工具,能夠在數據倉庫環(huán)境下進行數據采集、捕捉、存儲、管理和發(fā)布邏輯的、物理的以及上下文相關的信息,而不用去管它的物理存儲位置是在聯合數據倉庫上、分布式數據倉庫上還是二者兼有。業(yè)務用戶可以瀏覽根據其需求而生成的元數據對象,甚至可以使用發(fā)布和登記性能請求或選擇附加性能?! ?.2系統(tǒng)硬件平臺 數據倉庫服務器: sunE5500 / 8 cpu/4G RAM/18G硬盤運行Sybase IQ。 數據遷移服務器: IBM Netfinity7600 intel PIII550