?日志易智能日志分析助力農(nóng)信銀雙十一運(yùn)維降本增效

原創(chuàng) 贊收藏 評(píng)論

舉報(bào) 2022-08-23

掃描,分享朋友圈

背景介紹農(nóng)信銀資金清算中心(以下簡(jiǎn)稱(chēng)“農(nóng)信銀”)是經(jīng)中國(guó)人民銀行批準(zhǔn)，由全國(guó)30家省級(jí)農(nóng)村信用聯(lián)社、農(nóng)村商業(yè)銀行、農(nóng)村合作銀行及深圳農(nóng)村商業(yè)銀行共同發(fā)起成立的全國(guó)性股份制金融服務(wù)企業(yè)。部署日志易智能日志中心后，農(nóng)信銀在雙十一運(yùn)維保障工作中，通過(guò)實(shí)時(shí)分析日志，實(shí)時(shí)掌控業(yè)務(wù)性能瓶頸，大幅提高故障發(fā)現(xiàn)和定位的效率，通過(guò)大屏展示，快速清晰地監(jiān)控業(yè)務(wù)健康度。北京優(yōu)特捷信息技術(shù)有限公司（簡(jiǎn)稱(chēng)“日志易”）是國(guó)家級(jí)專(zhuān)精特新“小巨人”企業(yè)，專(zhuān)注于機(jī)器大數(shù)據(jù)平臺(tái)、服務(wù)和解決方案的開(kāi)發(fā)，致力于幫助各行業(yè)用戶(hù)挖掘和利用機(jī)器數(shù)據(jù)價(jià)值，提升數(shù)字化運(yùn)營(yíng)能力，輕松應(yīng)對(duì)IT及業(yè)務(wù)挑戰(zhàn)。日志易基于自研的低代碼編程語(yǔ)言SPL（Search Processing Language）與國(guó)內(nèi)首個(gè)高性能高可用性的日志搜索引擎Beaver，推出了智能日志中心，能夠一站式解決指標(biāo)及日志數(shù)據(jù)的采集、清洗、存儲(chǔ)、搜索、分析、告警、可視化等需求，并使用機(jī)器學(xué)習(xí)、AI智能算法，快速預(yù)測(cè)和定位故障，實(shí)時(shí)掌握業(yè)務(wù)運(yùn)行健康度，提升企業(yè)IT智能運(yùn)營(yíng)水平。業(yè)務(wù)挑戰(zhàn)海量日志數(shù)據(jù)散落在系統(tǒng)各處，難以做到日志的統(tǒng)一采集與集中管理無(wú)法在不干擾業(yè)務(wù)系統(tǒng)的情況下保證監(jiān)控的實(shí)時(shí)性成員行熔斷信息滯后且僅可手動(dòng)通知，無(wú)法保證及時(shí)性為什么用日志易日志易自研智能日志中心平臺(tái)具備高性能、分布式、可擴(kuò)展的日志處理架構(gòu)，每秒鐘可分析數(shù)百萬(wàn)條日志，每天處理PB級(jí)海量日志，相比國(guó)外通用開(kāi)源搜索引擎來(lái)說(shuō)，搜索性能提升了10倍且硬件成本降低了50%。同時(shí)，平臺(tái)預(yù)置了數(shù)百種日志分析模型，能夠自動(dòng)解析并處理常見(jiàn)的基礎(chǔ)架構(gòu)類(lèi)系統(tǒng)日志。為應(yīng)對(duì)雙十一的流量高峰，農(nóng)信銀依托日志易建設(shè)了日志數(shù)據(jù)實(shí)時(shí)分析平臺(tái)，根據(jù)日志易現(xiàn)有的完整日志管理規(guī)范，對(duì)相關(guān)的日志數(shù)據(jù)進(jìn)行接入、解析，自定義統(tǒng)計(jì)分析規(guī)則及可視化展示，自定義關(guān)鍵指標(biāo)監(jiān)控及告警規(guī)則，以實(shí)現(xiàn)對(duì)系統(tǒng)狀態(tài)的全面掌控，保證用戶(hù)體驗(yàn)。

功能亮點(diǎn) 日志易大屏示例圖

實(shí)現(xiàn)價(jià)值交易耗時(shí)分析：用時(shí)減少了97%在建設(shè)日志分析平臺(tái)前，農(nóng)信銀每次需要花費(fèi) 5 分鐘左右的時(shí)間去查詢(xún)所有機(jī)器，并手動(dòng)計(jì)算交易耗時(shí)。部署日志易之后，查詢(xún)某一筆交易耗時(shí)僅需 10 秒鐘，同時(shí)能夠一次性查詢(xún)出相同Msqld的報(bào)文，并對(duì)相關(guān)交易耗時(shí)進(jìn)行排名和差異化體現(xiàn)，方便識(shí)別交易耗時(shí)較長(zhǎng)的環(huán)節(jié)，及時(shí)實(shí)位問(wèn)題。業(yè)務(wù)監(jiān)控大屏展示：延遲縮短了98%使用日志易之前，監(jiān)控大屏需從數(shù)據(jù)庫(kù)中提取數(shù)據(jù)，展示延遲可達(dá)1分鐘之久；接入日志易后，僅需1秒鐘即可完成數(shù)據(jù)展現(xiàn)。異常感知及定位：耗時(shí)減少了90%異常發(fā)現(xiàn)的耗時(shí)從以往的 5 分鐘左右縮短至 30秒，即平臺(tái)可在 30秒內(nèi)完成日志獲取、發(fā)送、結(jié)構(gòu)化分析、存儲(chǔ)、檢索、告警、可視化等自動(dòng)操作。熔斷信息查詢(xún)定位：用時(shí)縮短了90%熔斷信息查詢(xún)定位方式由以往的人工確認(rèn)轉(zhuǎn)換為機(jī)器自動(dòng)感知，所需時(shí)間也由原來(lái)的10分鐘左右縮短至60秒，即平臺(tái)能在 60s 內(nèi)精準(zhǔn)定位成員行是否被熔斷、熔斷時(shí)間、熔斷時(shí)長(zhǎng)及熔斷恢復(fù)時(shí)間等信息。最新交易的異常查詢(xún)時(shí)間由原來(lái)的10分鐘以上縮短至1分鐘以?xún)?nèi)。客戶(hù)評(píng)價(jià)“部署日志易后，日志數(shù)據(jù)被標(biāo)準(zhǔn)化了，使用門(mén)檻也降低了很多，日志同步速度得到了提升。以前我們只能做到搜索日志和告警，現(xiàn)在還可以對(duì)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，整個(gè)團(tuán)隊(duì)的運(yùn)維效率有所提升。把日常基礎(chǔ)的監(jiān)控分析交給日志易平臺(tái)后，運(yùn)維人員就可以把更多的精力放在更復(fù)雜、更高級(jí)的運(yùn)維工作上。” 華為云828 B2B企業(yè)節(jié)日志易于2020年加入了信息技術(shù)應(yīng)用創(chuàng)新工作委員會(huì)，2021年成為了信息技術(shù)應(yīng)用創(chuàng)新工作委員會(huì)WG24大數(shù)據(jù)工作組副組長(zhǎng)單位，并已成為華為鯤鵬展翅伙伴計(jì)劃ISV級(jí)認(rèn)證伙伴，與華為云Stack8.0（鯤鵬）、TaiShan 100系列及TaiShan 200系列完成兼容性互認(rèn)證，成功入駐華為云云商店，攜國(guó)產(chǎn)自研系列產(chǎn)品線受邀參與此次華為云828 B2B企業(yè)節(jié)。基于華為云提供的穩(wěn)定可靠、安全可信、可持續(xù)發(fā)展的云服務(wù)，日志易強(qiáng)大靈活的智能數(shù)據(jù)分析能力得以充分發(fā)揮，強(qiáng)強(qiáng)聯(lián)合共建云上數(shù)據(jù)分析新底座，為客戶(hù)高效挖掘更多數(shù)據(jù)價(jià)值。

本文系作者授權(quán)數(shù)英發(fā)表，內(nèi)容為作者獨(dú)立觀點(diǎn)，不代表數(shù)英立場(chǎng)。
轉(zhuǎn)載請(qǐng)?jiān)谖恼麻_(kāi)頭和結(jié)尾顯眼處標(biāo)注：作者、出處和鏈接。不按規(guī)范轉(zhuǎn)載侵權(quán)必究。