期货投资风险控制措施

數據采集與交換系統

 

概述

對于多組織的大型企業集團,不同時期建設了不同的應用系統,單位之間建設時間、技術平臺、數據結構、功能設計都存在很大差異,總部側需要的關鍵指標數據多通過手工填報、報表的形式獲取,其及時性、準確性和真實性都面臨極大的挑戰,已經不能滿足現代企業集團化運作、集約化經營和精細化管理的需要。數據采集和交換系統主要解決基層單位和本部業務數據的采集并自動地、及時地傳送到總部數據中心,是一體化信息集成平臺的重要組成部分。

解決方案

數據采集與交換系統可實現快速、穩定、大數據量交換,實時監測、捕獲變更數據,并同步到目標端,是實現“橫向集成、縱向貫通”的支撐性技術平臺。主要用于各級完備信息系統的數據直采和系統間交換,可以實現其他工具的集成,以及可以提供豐富的二次開發能力,滿足集成的多場景需求。在進行數據交換和共享時,數據提供者和數據消費者都需遵守的中間數據庫,包括數據結構、數據規范和格式規則。

其主要功能包括:

1、 實現數據從基層單位業務系統數據庫采集的可配置化和自動采集;

2、 實現把采集到的數據按照設定的策略(定時、及時)上傳到總部側數據中心緩沖區,為后續加工提供穩定和高質量的數據源;

3、 為總部應用系統間提供標準的、規范的橫向交換服務和格式規范。

總體建設框架

數據采集與交換系統可以通過三種采集方式獲取數據,即:在線采集、離線采集和填報,分別適用于有系統支撐、電子文件和無數據源的三種數據存在形式,并可實現多種采集方式之間的動態調整。在線采集有三種技術手段,即直采、推送和ETL。直采是通過數據采集與交換平臺實時捕獲變更數據,同時為系統之間的數據共享提供平臺支撐,適用于及時性要求高的業務場景;推送是由系統按照約定規范和業務邏輯推送數據到目標端,適用于系統安全等級高的系統;ETL是通過ETL工具定時或基于任務掃描系統并讀取數據,適用于周期性強、數據量大、加工邏輯復雜的場景,多用于數據中心內部的大數據量的加工處理,一般不用于縱向之間。離線采集適用于結構化文件類數據源,如Excel、文本文件。填報適用于沒有系統支撐或不具備集成條件的報送數據需求,通過系統直接寫入集團數據庫。

數據采集與交換平臺三級部署(或按組織機構分級部署),即集團、分子公司和基層單位,且每級部署前置數據庫為數據樞紐,暫存采集交換的過程數據、控制數據和業務數據。對于自動采集的原始數據,依據數據規劃、編碼規范等要求,平臺將原始數據加工形成規范數據。平臺提供自動同步、視圖、消息通知等多種方式將數據同步至預設目標端。平臺負責各級企業內部系統數據的采集、整合和共享,同實現與上下級企業之間的雙向數據交換。

為確保平臺穩定運行,提供了全方位、全過程的監控,包括過程監控、狀態監控、性能監控和數據質量監控。

總體架構如下圖所示:

功能架構

數據采集與交換系統通過靈活配置方式,支持將不同類型數據源,實時或定時采集,并按照IEC CIM模型進行規范轉換和共享;整合數據流程,實現分級審核,滿足各級數據分析需求;通過全過程數據監控,確保數據質量,其功能架構如下圖所示:

核心能力

數據采集與交換系統實現企業內部信息系統之間的橫向集成與組織之間的數據報送和縱向貫通構建從數據采集、數據傳輸、數據整合、數據共享、數據交換和監控的多層次、全過程、全方位、智能化的支撐平臺,建成覆蓋全集團的“橫向集成、縱向貫通”數據采集與共享平臺。其核心能力具體包括以下五個方面:

1、 打造統一、規范的數據報送和在線采集的平臺支撐能力

以指標數據規劃成果為依據,統一設計,建設數據采集與交換系統,提供填報、直采、推送、ETL抽取等多種采集方式,以及多種采集方式之間的自動切換,滿足多種場景、多種方式、多種技術的采集需求,打造數據直采和交換的能力,形成統一、規范的數據采集和交換支撐平臺。

2、 構建安全可靠的傳輸通道

平臺為企業提供一個雙向、可靠、安全的信息高速通道,不僅僅可以將本級系統數據上傳至上級單位,還可以接收上級分發的共性數據或本企業的專屬數據,并自動同步到本級對應業務系統,實現跨地域、跨組織的系統融合和數據貫通。

3、 形成統一、規范、標準的數據

依據企業有關規定和要求,并吸收IEC CIM相關標準,形成統一、規范的組織體系、電力系統資源體系、資源參數體系、資源量測體系和指標體系,構建數據的標準化存儲體系、編碼體系、共享體系和交換體系。

4、 提供完備的數據交換技術能力

基于標準化數據,按照共享需求和業務約定,平臺提供完整、準實時、自動的數據交換機制,將數據同步到目標端。提供同步推動、視圖、基于服務等多種技術手段,滿足復雜業務場景需要。

5、 提供全面、智能、可視化的監控

圍繞平臺穩定運行和確保數據質量,對相關的信息系統、網絡、通道、數據庫、預訂集等對象的狀態、運行參數等進行實時監測,以及全面審查數據的完整性、及時性和有效性,捕獲可能發生的異常,通過可視化的界面將異常展現出來,及時報警,同時借助郵件、短信等形式通知相關責任人,快速定位,協助解決。

客戶收益

數據采集與交換系統是建設企業級數據中心的基礎平臺系統能夠給客戶帶來:

第一, 統一的數據標準與規范:為集團企業實現橫向應用集成、縱向數據貫通;為業務應用提供統一的、一致、標準的數據規范,為建設企業級數據中心奠定基礎

第二, 統一的數據交換與共享:通過統一的平臺架構,整合信息孤島,在全集團范圍內實現統一的數據交換與共享。

第三, 統一數據來源:實現“數據同源、統一口徑、融合貫通”,減少或避免“多頭上報、數出多頭”等弊端,在企業范圍內達到業務流、數據流、信息流的有機統一。

第四, 減輕基層企業數據填報工作量:通過平臺直接從業務系統獲取數據,降低基層員工手工制表、數據填報的工作量。

成功案例

(2010-2012中國電集團公司數據采集與交換系統項目

2011-2012)國電山東電力有限公司一體化平臺項目

(2012-2013)國電青海電力有限公司數據采集與交換系統項目

(2012-2014)國電大渡河一體化平臺項目

(2013-2014)國電重慶公司數據采集與交換系統項目

(2013-2014)國電安徽公司數據采集與交換系統項目

(2014-2015國電海南公司數據采集與交換平臺項目

(2014-2015)國電四川公司數據采集與交換平臺項目

(2015-2016國電東北公司數據采集與交換系統項目

(2015-2016)國電內蒙公司數據采集與交換系統項目

(2015-2016)國電長源電力公司數據采集與交換系統項目

(2015-2016)國電河北新能源公司數據采集與交換系統項目

 

聯系我們

姓名

職位

公司

地區

電話

郵箱

描述

驗證碼

提交

郵編:100193

郵箱:[email protected]

電話:+86 105874 9000

傳真:+86 105874 9001

地址:北京市海淀區西北旺東路10號院東區16號樓

期货投资风险控制措施 重庆时时开奖彩经网 北京时时合法的吗 北京赛pk10稳赢龙虎 新彊时时彩近期走势图 云南11选5官方软件下载 腾讯分分彩投注软件 吉林时时查询 大乐透预测精软件 福彩快三开奖结果查询 赛车pk10买号技巧 网赌刷反水最有效方法 云南时时奖金表 三分彩是什么 江西时时彩开奖号码网 168秒速开奖网 国家投资15万亿计划