論分布式架構(gòu)設(shè)計(jì)

摘要：

2020年2月，我司中標(biāo)了某省電力公司的配網(wǎng)運(yùn)維管控項(xiàng)目，該項(xiàng)目接入電力公司營銷、設(shè)備和調(diào)度等多個(gè)部門的專業(yè)數(shù)據(jù),為配網(wǎng)運(yùn)行、配網(wǎng)檢修、配網(wǎng)搶修、配網(wǎng)工程、供電服務(wù)等核心業(yè)務(wù)提供數(shù)據(jù)支撐。由于本項(xiàng)目是省級(jí)項(xiàng)目，系統(tǒng)可靠性、可用性要求比較高，具備高并發(fā)處理能力、接入的數(shù)據(jù)種類繁多、業(yè)務(wù)模塊相對(duì)獨(dú)立、業(yè)務(wù)不能中斷等特點(diǎn)。針對(duì)以上這些特點(diǎn)，作為系統(tǒng)架構(gòu)師，我組織了項(xiàng)目組經(jīng)過充分溝通討論驗(yàn)證，最后選擇了分布式架構(gòu)。采用分布式消息隊(duì)列 fafka 與南向各業(yè)務(wù)模塊通信，確保各類數(shù)據(jù)的實(shí)時(shí)接入;采用分布式 nosql，保障了海量量測類數(shù)據(jù)的頻繁使用;采用了分布式計(jì)算框架 spark，提高了關(guān)鍵業(yè)務(wù)的計(jì)算分析性能，極大縮短了計(jì)算時(shí)間:采用了分布式基礎(chǔ)架構(gòu) CDH 統(tǒng)一管理各類大數(shù)據(jù)組件，降低了系統(tǒng)部署難度，簡化了系統(tǒng)運(yùn)維過程。得益于分布式架構(gòu)的設(shè)計(jì)，該項(xiàng)目己穩(wěn)定運(yùn)行兩年多，獲得了業(yè)主單位的一致好評(píng)。