訂閱
糾錯(cuò)
加入自媒體

美創(chuàng)科技助力浙江 “數(shù)據(jù)高鐵”建設(shè),實(shí)現(xiàn)秒級(jí)共享

數(shù)據(jù)高鐵項(xiàng)目規(guī)劃

第一步:建設(shè)廳在政務(wù)云上開通數(shù)據(jù)倉庫資源,為該市的公積金分配數(shù)據(jù)倉庫數(shù)據(jù)庫用戶名、密碼以及相關(guān)訪問權(quán)限。

第二步:該公積金負(fù)管理中心負(fù)責(zé)將業(yè)務(wù)生產(chǎn)庫中的雙貫標(biāo)表實(shí)時(shí)同步推送至省建設(shè)廳數(shù)據(jù)倉相應(yīng)的數(shù)據(jù)庫中。

第三步:省建設(shè)廳對公積金雙貫標(biāo)數(shù)據(jù)進(jìn)行檢查、分析,并做好與大數(shù)據(jù)局?jǐn)?shù)據(jù)庫高鐵倉的對接。

image.png

解決方案規(guī)劃

為了確保數(shù)據(jù)的高速、完整歸集到“高鐵數(shù)據(jù)倉” ,美創(chuàng)科技通過自主研發(fā)的數(shù)據(jù)支撐平臺(tái)實(shí)現(xiàn)數(shù)據(jù)清洗、轉(zhuǎn)換、同步和加載工作。該平臺(tái)通過對業(yè)務(wù)系統(tǒng)數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化,向數(shù)據(jù)倉庫或大數(shù)據(jù)平臺(tái)提供高質(zhì)量數(shù)據(jù),支持異構(gòu)數(shù)據(jù)遷移、基于數(shù)據(jù)庫日志的數(shù)據(jù)實(shí)時(shí)復(fù)制、ETL開發(fā)、分布式處理等功能。

具體方案如下:

一、準(zhǔn)備一臺(tái)前置機(jī),部署Oracle數(shù)據(jù)庫存放同步數(shù)據(jù)以及清洗后的29張表,同時(shí)部署數(shù)據(jù)挖掘同步系統(tǒng),用來完成同步清洗工作。準(zhǔn)備一臺(tái)服務(wù)器,部署Windows系統(tǒng),主要用于對數(shù)據(jù)挖掘同步系統(tǒng)進(jìn)行數(shù)據(jù)同步、抽取、轉(zhuǎn)換、清洗等工作任務(wù)的管理以及遠(yuǎn)程運(yùn)維。

二、在生產(chǎn)庫或者容災(zāi)庫上部署數(shù)據(jù)挖掘同步系統(tǒng)客戶端;通過數(shù)據(jù)挖掘同步系統(tǒng)對公積金庫進(jìn)行按照數(shù)據(jù)庫日志級(jí)別進(jìn)行實(shí)時(shí)挖掘同步,同時(shí)在數(shù)據(jù)挖掘同步系統(tǒng)上進(jìn)行數(shù)據(jù)表篩選,篩選出建設(shè)廳所需的雙貫表。利用數(shù)據(jù)挖掘同步系統(tǒng)篩選的雙貫標(biāo)信息,通過數(shù)據(jù)倉提供的接口,將雙貫標(biāo)初始化寫入數(shù)據(jù)倉。

客戶收益

數(shù)據(jù)實(shí)時(shí)同步,促進(jìn)數(shù)據(jù)共享的實(shí)時(shí)、鮮活、快速

美創(chuàng)數(shù)據(jù)支撐平臺(tái)采用數(shù)據(jù)基于日志的數(shù)據(jù)實(shí)時(shí)同步技術(shù),實(shí)現(xiàn)數(shù)據(jù)秒級(jí)同步,結(jié)合獨(dú)有的數(shù)據(jù)比對技術(shù),讓數(shù)據(jù)歸集具有高鐵般的速度。

數(shù)據(jù)質(zhì)量控制,保障數(shù)據(jù)共享的準(zhǔn)確、優(yōu)質(zhì)、高效

美創(chuàng)數(shù)據(jù)支撐平臺(tái)可以實(shí)施數(shù)據(jù)質(zhì)量檢核規(guī)則,發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題,持續(xù)監(jiān)控各系統(tǒng)數(shù)據(jù)質(zhì)量波動(dòng)情況以及數(shù)據(jù)質(zhì)量規(guī)則占比,定期生成關(guān)鍵數(shù)據(jù)質(zhì)量報(bào)告,掌握系統(tǒng)數(shù)據(jù)質(zhì)量狀況。讓數(shù)據(jù)應(yīng)用更加有成效,讓群眾得到更多實(shí)惠,服務(wù)更高效。

<上一頁  1  2  
聲明: 本文由入駐維科號(hào)的作者撰寫,觀點(diǎn)僅代表作者本人,不代表OFweek立場。如有侵權(quán)或其他問題,請聯(lián)系舉報(bào)。

發(fā)表評(píng)論

0條評(píng)論,0人參與

請輸入評(píng)論內(nèi)容...

請輸入評(píng)論/評(píng)論長度6~500個(gè)字

您提交的評(píng)論過于頻繁,請輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無評(píng)論

暫無評(píng)論

文章糾錯(cuò)
x
*文字標(biāo)題:
*糾錯(cuò)內(nèi)容:
聯(lián)系郵箱:
*驗(yàn) 證 碼:

粵公網(wǎng)安備 44030502002758號(hào)