12月1日0時(shí)，太平人壽銀保"開局之戰(zhàn)"準(zhǔn)時(shí)開啟；8時(shí)，太平人壽個(gè)險(xiǎn)、服拓“開局之戰(zhàn)”正式啟動(dòng)。在這場(chǎng)“海陸空”聯(lián)合的"開局之戰(zhàn)"中，太平金科聯(lián)合太平人壽、太平金運(yùn)相關(guān)部門開展現(xiàn)場(chǎng)保障，確保了系統(tǒng)安全、穩(wěn)定、順暢運(yùn)行，助力“開局之戰(zhàn)”取得了良好開局。

項(xiàng)目背景

隨著太平人壽“開局之戰(zhàn)”陸續(xù)啟動(dòng)，太平金科的業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)也肩負(fù)起各系統(tǒng)的維護(hù)保障工作。然而在此之前的日常運(yùn)維中，有時(shí)會(huì)遇到一些當(dāng)時(shí)無法突破的問題：

• 系統(tǒng)故障定位難；

• 慢請(qǐng)求定位難；

• 責(zé)任劃分難；

• 沒有可視化的系統(tǒng)全面監(jiān)控系統(tǒng)；

• 數(shù)據(jù)缺少?gòu)木W(wǎng)絡(luò)層到應(yīng)用層結(jié)合分析。

對(duì)此，太平金科的業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)與博睿數(shù)據(jù)（股票代碼：688229）展開合作，通過整合了APM、NPM與智慧運(yùn)維中臺(tái)產(chǎn)品的“A+N”一體化解決方案，不僅實(shí)現(xiàn)了對(duì)現(xiàn)有業(yè)務(wù)的全面監(jiān)控、問題的快速定位分析以及全面的保障數(shù)據(jù)展示，同時(shí)也為“開局之戰(zhàn)”的穩(wěn)定運(yùn)行及日常維護(hù)保駕護(hù)航。

“A+N”一體化解決方案

太平金科所采用的博睿數(shù)據(jù)“A+N”一體化解決方案，可以基于獲取每一筆交易在經(jīng)過各個(gè)應(yīng)用、主機(jī)、交換機(jī)時(shí)的異常次數(shù)和響應(yīng)耗時(shí)等重要指標(biāo)，實(shí)現(xiàn)關(guān)聯(lián)分析，結(jié)合應(yīng)用節(jié)點(diǎn)、網(wǎng)絡(luò)設(shè)備節(jié)點(diǎn)，形成全程全網(wǎng)交易路徑圖。

通過將應(yīng)用節(jié)點(diǎn)關(guān)聯(lián)對(duì)應(yīng)后端主機(jī)，網(wǎng)絡(luò)設(shè)備關(guān)聯(lián)交換機(jī)、防火墻、負(fù)載均衡等，解決方案實(shí)現(xiàn)了從網(wǎng)絡(luò)層到應(yīng)用層的整體數(shù)據(jù)分析。同時(shí)，通過解決方案太平金科也可以查看一筆交易的完整調(diào)用鏈路，最終實(shí)現(xiàn)請(qǐng)求覆蓋“用戶端-防火墻-網(wǎng)絡(luò)設(shè)備-應(yīng)用系統(tǒng)-數(shù)據(jù)庫”等節(jié)點(diǎn)在內(nèi)的完整鏈路拓?fù)洹?/p>

“A+N”一體化解決方案主要原理：

業(yè)務(wù)中一條請(qǐng)求會(huì)通過網(wǎng)絡(luò)設(shè)備和應(yīng)用節(jié)點(diǎn)，通過traceID將整條鏈路的各個(gè)節(jié)點(diǎn)進(jìn)行關(guān)聯(lián)。當(dāng)一條請(qǐng)求經(jīng)過入口應(yīng)用時(shí)，入口應(yīng)用會(huì)產(chǎn)生 traceID，并將traceID埋在Http的請(qǐng)求頭及響應(yīng)頭中，APM及NPM會(huì)分別解析請(qǐng)求和響應(yīng)頭中的traceID，然后將關(guān)聯(lián)traceID的請(qǐng)求數(shù)據(jù)結(jié)合起來，即可繪制A+N全鏈路拓?fù)洹?/p>

一、APM（應(yīng)用性能管理）

01、應(yīng)用性能管理

通過博睿數(shù)據(jù)解決方案的服務(wù)端應(yīng)用性能管理平臺(tái)，太平金科的業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)可以獲取業(yè)務(wù)拓?fù)?、?yīng)用拓?fù)淝逦宫F(xiàn)邏輯關(guān)系，并全面實(shí)時(shí)掌握業(yè)務(wù)質(zhì)量。同時(shí)，通過流程下鉆，業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)可以詳細(xì)監(jiān)控入口業(yè)務(wù)的請(qǐng)求量、業(yè)務(wù)的平均響應(yīng)時(shí)間及錯(cuò)誤，通過曲線圖可查看整體概覽把控業(yè)務(wù)健康狀況。

02、數(shù)據(jù)庫SQL優(yōu)化

“開局之戰(zhàn)”活動(dòng)前夕，通過方案中的壓測(cè)平臺(tái)，太平金科構(gòu)建了真實(shí)業(yè)務(wù)場(chǎng)景進(jìn)行測(cè)試，并發(fā)現(xiàn)部分業(yè)務(wù)超時(shí)。為此，在APM_Server平臺(tái)數(shù)據(jù)庫功能中，太平金科的業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)針對(duì)SQL做了具體分析，并最終下鉆定位到了具體業(yè)務(wù)系統(tǒng)，從而可以聯(lián)系對(duì)應(yīng)保障人員進(jìn)行快速處理，對(duì)SQL進(jìn)行進(jìn)一步優(yōu)化。

經(jīng)過太平金科業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)的努力，最終應(yīng)用系統(tǒng)不僅性能較之前有明顯提升，同時(shí)也保障了應(yīng)用前端的出單質(zhì)量和出單速率。

03、主機(jī)監(jiān)控

現(xiàn)在，在業(yè)務(wù)進(jìn)行期間，太平金科的業(yè)務(wù)保障運(yùn)維團(tuán)隊(duì)可以通過基礎(chǔ)監(jiān)控功能查看業(yè)務(wù)主機(jī)的具體使用狀況、及時(shí)發(fā)現(xiàn)、及時(shí)告警、及時(shí)處理。

04、負(fù)載策略監(jiān)測(cè)

利用博睿數(shù)據(jù)的解決方案，運(yùn)維團(tuán)隊(duì)可以通過應(yīng)用探針篩選對(duì)應(yīng)的服務(wù)/集群，查看當(dāng)前業(yè)務(wù)的吞吐率，進(jìn)而檢測(cè)負(fù)載策略。

二、NPM（網(wǎng)絡(luò)性能管理）

網(wǎng)絡(luò)性能管理系統(tǒng)主要用于對(duì)業(yè)務(wù)性能數(shù)據(jù)、用戶訪問數(shù)據(jù)及網(wǎng)絡(luò)性能數(shù)據(jù)進(jìn)行監(jiān)控。在太平金科所采用的的“A+N”一體化解決方案中，保障運(yùn)維團(tuán)隊(duì)實(shí)現(xiàn)了數(shù)據(jù)的關(guān)聯(lián)分析， 能夠透析業(yè)務(wù)應(yīng)用與性能之間的影響。
通過IP/域名+端口+VLAN標(biāo)識(shí)的不同“標(biāo)簽”，太平金科的保障運(yùn)維團(tuán)隊(duì)將流量進(jìn)行了拆分，劃分了對(duì)應(yīng)具體業(yè)務(wù)，同時(shí)，為保證高可用性，方案還采用了主備方案，不僅使得兩地系統(tǒng)雙活而且還可以在同一平臺(tái)同時(shí)處理。

三、大屏展示

通過對(duì)Bonree Dataview的定制化量身改造，太平金科的運(yùn)維大屏可以實(shí)時(shí)刷新、跟蹤底層運(yùn)維數(shù)據(jù)，這使得保障運(yùn)維團(tuán)隊(duì)可以直觀了解到當(dāng)前業(yè)務(wù)系統(tǒng)的健康和業(yè)務(wù)展現(xiàn)趨勢(shì)。

如今，太平金科的保障運(yùn)維團(tuán)隊(duì)通過博睿數(shù)據(jù)“A+N”一體化解決方案，不僅可以分析代碼運(yùn)行效率，將物理層性能數(shù)據(jù)、程序運(yùn)行環(huán)境性能數(shù)據(jù)、日志、數(shù)據(jù)庫、第三方調(diào)用、錯(cuò)誤、進(jìn)程等性能數(shù)據(jù)進(jìn)行篩選合并分析，而且實(shí)現(xiàn)了應(yīng)用性能數(shù)據(jù)的全面收集展現(xiàn)，能夠快速定位業(yè)務(wù)慢請(qǐng)求原因，從而通過快速定位問題，劃分責(zé)任域，解決問題，最終一體化完成了從網(wǎng)絡(luò)層到應(yīng)用層的整體數(shù)據(jù)分析。