營銷基礎數據平臺(EPM-FDP)是企業級一體化信息集成平臺數據中心的重要組成部分,是營銷數據共享和對外開放的資源中心;支撐營銷內外各信息系統之間的數據共享一致性及規范交互,是內外部數據交互與共享的通道;支撐開展營銷管理決策,提供統一模型、統一編碼的營銷全范圍業務數據;支撐營銷總部管理決策與省(市)業務管理的數據歸集與縱向貫通。
主要功能
營銷基礎數據平臺通過統一的管理平臺,解決了以往的數據資源整合工作各自為政的局面,由營銷基礎數據平臺按照統一的數據模型、統一的標準編碼進行數據資源整合工作,為總部及省(市)的營銷管理決策提供最真實、速的全范圍營銷基礎數據支撐。
其功能架構圖如下:
數據接入:配置營銷基礎數據平臺可以接入的系統,通過數據復制、ETL、Webservice、文件導入等方法將數據存儲在營銷基礎數據平臺中,再通過復制軟件提供的數據變更機制獲取變更日志進行更新。
數據訪問服務:通過對訪問服務的管理完成對主數據、共享數據的訪問服務,同時也可以使用數據交換服務、數據集成服務來完成特殊的數據訪問操作。
數據存儲與轉換:設計統一數據模型,維護統一數據模型與營銷基礎數據平臺主數據、共享數據的映射,完成對已收集數據進行分類、轉換,實現營銷基礎業務數據集中、共享與交換,并實現數據感知、數據質量功能。
支撐與監控:實現組織與權限管理、系統日志管理、消息管理、海量日志管理、分布式緩存管理、任務及調度管理等功能。
技術特性
營銷基礎數據平臺主要包含四項關鍵技術:
- 海量異構數據的同步復制及實時轉換:海量異構數據的同步復制及實時轉換,保證及時性:采用數據庫實時復制工具Goldengate實現海量數據的實時同步復制,采用數據集成工具ODI實現異構數據的實時轉換,為了保證轉換效率,要基于OGG進行二次開發。
- 國際標準(CIM/CIS)的實用化,有效解決不同時期、不同廠商、不同系統的數據一致性問題。遵循國際標準,以國際電工委員會IEC 61970/61968標準作為基礎和標準, 基于公共信息模型CIM,構建營銷頂層概念(語義)模型,通過四個階段五個過程,實現數據訪問服務的標準化,統一營銷業務的檔案數據及標準編碼的訪問方式。采用基于IEC CIS(組件接口規范)的數據集成架構,利用CIS服務(GDA)提供數據的訪問接口,通過統一的模型和標準的接口規范實現對原有及新建各系統間進行數據共享與應用集成服務的統一管理,使當前及未來的數據和業務應用可以進行方便的整合與集成。成熟的CIM元數據管理實現,以及對CIS 的標準接口規范進行實現。
- 海量日志處理及實時分析:海量日志的存儲及分析:采用NoSql數據庫,利用分布式計算進行匯總和分析海量日志的存儲及分析。
- 服務的高頻度,高并發保證:服務配置的分布式緩存實現,負載均衡及流量控制技術,分布式緩存服務器及內存數據庫的使用及二次開發。