ODS/EDW系統改造支撐項目
項目背景
上海電信ODS/EDW應用系統范疇存在以下幾類問題：
數據庫存儲緊缺；
ETL性能瓶頸，后續增加應用會出現爭搶資源的現象，導致程序整體性能下降；
針對這些問題，構建分布式數據處理平臺作為ODS/EDW數據倉庫的有益補充。GBase 8a MPP Cluster數據庫采用大規模并行處理架構高效的處理能力和強大的關聯查詢性能，突破目前大數據量業務數據加載的性能瓶頸，克服傳統的關系型數據庫高成本、運算時間長、分析結果及業務報表滯后等劣勢，并且采用PC Server模式，大大節約新購存儲成本。
解決方案
本項目采用GBase 8a MPP Cluster 數據庫，所有業務的高度匯總和分析，集團寬表處理及上傳，本地寬表層處理，本地匯總層處理全部遷移至 MPP 平臺，銷售管控體系、全景銷售視圖相關程序也同時遷移上去。
應用效果
運營提速：滿足集團要求的全網數據運營進入提速階段，每天10點之前確保產品實例，銷售品等全量數據的上傳；
即席查詢：自助報表查詢實現秒級響應，解決部分大數據量應用查詢效率低下問題 ，有效提升用戶感知和滿意度；
性能提升：利用大規模并行處理架構高效的處理能力和強大的關聯查詢性能，突破目前大數據量業務數據加載的性能瓶頸，克服傳統的關系型數據庫高成本、運算時間長、分析結果及業務報表滯后等劣勢；
高擴展：原有服務器的垂直縱向擴展模式改為依據數據量的水平橫向擴展模式，支持在線線性擴展，且性能隨著節點的增加而線性提升；