人大金倉(cāng)完成新疆農(nóng)村信用社數(shù)據(jù)倉(cāng)庫(kù)國(guó)產(chǎn)化

隨著國(guó)家“新基建”戰(zhàn)略的推進(jìn)，國(guó)產(chǎn)軟硬件迎來(lái)跨越式發(fā)展，在金融、政務(wù)、電信等核心領(lǐng)域均具備不斐實(shí)踐。作為我國(guó)信息化程度最高的行業(yè)之一,金融行業(yè)是我國(guó)信息化建設(shè)的重點(diǎn)領(lǐng)域。近年來(lái)，隨著全球化逆流加劇，金融行業(yè)IT建設(shè)國(guó)產(chǎn)化進(jìn)入加速期。

近日，在新疆農(nóng)村信用社（以下簡(jiǎn)稱“新疆農(nóng)信”）數(shù)據(jù)倉(cāng)庫(kù)國(guó)產(chǎn)化替代項(xiàng)目中，人大金倉(cāng)順利完成由IBM Netezza數(shù)據(jù)庫(kù)到金倉(cāng)分布式分析型數(shù)據(jù)庫(kù)系統(tǒng)KingbaseAnalyticsDB（以下簡(jiǎn)稱“KADB”）的遷移，遷移后，客戶的數(shù)據(jù)庫(kù)使用及服務(wù)成本節(jié)省10倍，數(shù)據(jù)庫(kù)加載速度與分析性能顯著提升。

項(xiàng)目背景

新疆農(nóng)信ODS業(yè)務(wù)核心數(shù)倉(cāng)接入其 “核心”、“網(wǎng)銀”、“財(cái)管”、“銀聯(lián)”、“信貸”、“前置”和農(nóng)信銀等重要業(yè)務(wù)系統(tǒng)；

每天高密度、結(jié)構(gòu)化數(shù)據(jù)的批量加載、處理、分析：數(shù)倉(cāng)存儲(chǔ)數(shù)據(jù)量壓縮后近20TB，每日運(yùn)行批量加工過(guò)程500+，每日入庫(kù)量30GB+，全天數(shù)據(jù)加工處理流程時(shí)間<3小時(shí)（清洗/裝載、匯總、報(bào)表）;

流水型業(yè)務(wù)場(chǎng)景：整個(gè)過(guò)程需要通過(guò)集中控制平臺(tái)以定時(shí)任務(wù)的形式將每日增量數(shù)據(jù)導(dǎo)入到數(shù)據(jù)庫(kù)中，并通過(guò)多層模型清洗轉(zhuǎn)換基礎(chǔ)數(shù)據(jù)，每一層需依賴上層轉(zhuǎn)化好的數(shù)據(jù)，最終完成所有業(yè)務(wù)操作后將最終結(jié)果上報(bào)到總行。

原數(shù)據(jù)庫(kù)性能及服務(wù)無(wú)法滿足需求：原有數(shù)據(jù)庫(kù)為基于一體機(jī)架構(gòu)體系下的數(shù)據(jù)分析和數(shù)據(jù)存儲(chǔ)平臺(tái)。采用Netezza構(gòu)建ODS，隨著數(shù)據(jù)量的增大，Netezza在性能及各方面表現(xiàn)日趨下降，已不能滿足新疆農(nóng)村信用社使用需求。2019年，IBM停止Netezza的服務(wù)支持，新疆農(nóng)信ODS業(yè)務(wù)陷入無(wú)數(shù)據(jù)庫(kù)原廠提供服務(wù)保障的困境。

客戶痛點(diǎn)

安全風(fēng)險(xiǎn)：原數(shù)據(jù)庫(kù)IBM Netezza采用的是基于一體機(jī)架構(gòu)體系下的數(shù)據(jù)分析和數(shù)據(jù)存儲(chǔ)平臺(tái)，整體從硬件到軟件都由IBM提供，對(duì)硬件要求非常高，整體架構(gòu)不適用于目前場(chǎng)景；且系統(tǒng)相對(duì)封閉，產(chǎn)品代碼層面不可控。

業(yè)務(wù)運(yùn)行風(fēng)險(xiǎn)：壓縮后約20TB的數(shù)據(jù)庫(kù)歷史存量，每日30GB+數(shù)據(jù)增量，導(dǎo)致數(shù)據(jù)庫(kù)負(fù)載壓力巨大，數(shù)據(jù)庫(kù)性能提升刻不容緩。

原廠服務(wù)保障風(fēng)險(xiǎn)：銀行系統(tǒng)對(duì)于響應(yīng)的要求近乎苛刻，需要時(shí)刻保證數(shù)據(jù)庫(kù)安全穩(wěn)定運(yùn)行，數(shù)據(jù)庫(kù)廠商最好能夠提供7*24小時(shí)本地化服務(wù)。

金倉(cāng)方案

人大金倉(cāng)采用分布式可擴(kuò)展架構(gòu)對(duì)客戶原來(lái)的一體機(jī)架構(gòu)進(jìn)行替換，經(jīng)過(guò)KADB國(guó)產(chǎn)化替代后，架構(gòu)如下：

原Netezza數(shù)據(jù)倉(cāng)庫(kù)體系架構(gòu)如下：

金倉(cāng)價(jià)值

開(kāi)放架構(gòu)：采用shared-nothing架構(gòu)的MPP技術(shù)路線，金倉(cāng)分析型數(shù)據(jù)庫(kù)系統(tǒng)KingbaseAnalyticsDB產(chǎn)品特性助力，在滿足高性能、高擴(kuò)展性、低成本的基礎(chǔ)上，同時(shí)滿足金融架構(gòu)的高可用、低風(fēng)險(xiǎn)、強(qiáng)管控要求；

數(shù)據(jù)庫(kù)遷移：通過(guò)金倉(cāng)數(shù)據(jù)庫(kù)遷移工具，完成600多個(gè)控制任務(wù)、200多張拉鏈及增量表、近20TB存量數(shù)據(jù)的自動(dòng)化遷移，節(jié)省了大量的時(shí)間及人力成本。

性能優(yōu)化提升：通過(guò)分布式架構(gòu)的并行計(jì)算能力，將數(shù)據(jù)分布在所有節(jié)點(diǎn)上，減輕了單臺(tái)服務(wù)器的存儲(chǔ)壓力，通過(guò)高度并行的計(jì)算框架，加速每個(gè)節(jié)點(diǎn)的計(jì)算效率，完成數(shù)據(jù)庫(kù)集群整體性能提升。最優(yōu)化的I/O處理能力：無(wú)共享MPP架構(gòu)，能夠滿足所有節(jié)點(diǎn)同時(shí)進(jìn)行并行處理，無(wú)I/O沖突；

極速數(shù)據(jù)加載能力，智能加載，無(wú)需通過(guò)冗余節(jié)點(diǎn)，性能極高；

高效數(shù)據(jù)存儲(chǔ)能力：支持主流高效率壓縮算法，壓縮比可達(dá)1：20，協(xié)助用戶獲得最佳存儲(chǔ)效率；

大規(guī)模并行能力：集群支持將計(jì)算任務(wù)分發(fā)給各個(gè)主機(jī)并行執(zhí)行，可最大程度利用集群中的計(jì)算資源完成任務(wù)；

數(shù)據(jù)庫(kù)加載速度與分析性能較Netezza顯著提升。

近日，該項(xiàng)目已正式上線且運(yùn)行穩(wěn)定，本次項(xiàng)目實(shí)現(xiàn)了新疆維吾爾族自治區(qū)銀行類業(yè)務(wù)國(guó)產(chǎn)化替代由0到1的飛躍，為新疆農(nóng)村信用社將來(lái)全面實(shí)現(xiàn)國(guó)產(chǎn)化替代注入了一劑強(qiáng)心針，為更多金融信息安全領(lǐng)域企業(yè)使用國(guó)產(chǎn)數(shù)據(jù)庫(kù)奠定了信心！

免責(zé)聲明：市場(chǎng)有風(fēng)險(xiǎn)，選擇需謹(jǐn)慎！此文僅供參考，不作買賣依據(jù)。

關(guān)鍵詞：