Prometheus指標(biāo)采集和查詢存儲(chǔ)方案-2020年

我們分一級(jí)監(jiān)控平臺(tái)和二級(jí)集群Prometheus監(jiān)控采集組件。一級(jí)提供kafka集群和Prometheus聚合組件，二級(jí)各集群部署Prometheus和Prometheus-kafka-adapter組件，采集和遠(yuǎn)程送數(shù)據(jù)到一級(jí)的kafka集群。

該方案優(yōu)點(diǎn)：

1.業(yè)務(wù)系統(tǒng)可以跨集群聚合數(shù)據(jù)，如圖k8s集群-1和k8s集群-2數(shù)據(jù)聚合到Top-1的Prometheus上。

2.一級(jí)監(jiān)控平臺(tái)上只要有足夠的cpu、存儲(chǔ)資源，理論上可以水平擴(kuò)展接入更多集群。2020年底采集的指標(biāo)量每天3194億的量級(jí)，吞吐量達(dá)370萬/s。

3.采集端Prometheus可以保留極少數(shù)據(jù)，比如6小時(shí)的數(shù)據(jù)，減少資源消耗。而上層Prometheus由于落數(shù)據(jù)到時(shí)序數(shù)據(jù)庫(kù)influxdb中，可以保存一個(gè)月數(shù)據(jù)量甚至更多。

該方案沒做到什么：

1.采集端Prometheus擴(kuò)容問題，單集群中數(shù)據(jù)規(guī)模受Prometheus原生的限制。

2.一級(jí)監(jiān)控平臺(tái)上時(shí)序數(shù)據(jù)庫(kù)influxdb有單點(diǎn)問題，數(shù)據(jù)規(guī)模和數(shù)據(jù)安全性受其影響。 我們要運(yùn)維監(jiān)控這個(gè)東西的什么屬性？比如CPU的使用率、負(fù)載、用戶態(tài)、內(nèi)核態(tài)、上下文切換。浙江運(yùn)維監(jiān)控經(jīng)驗(yàn)豐富

Argus監(jiān)控運(yùn)維系統(tǒng)采用高性能深度列式存儲(chǔ)集群，能提供超高壓縮比、順序存儲(chǔ)和自定義數(shù)據(jù)等功能，滿足企業(yè)PB級(jí)數(shù)據(jù)存儲(chǔ)的需求，實(shí)現(xiàn)海量數(shù)據(jù)毫秒級(jí)的響應(yīng)。以觀縱服務(wù)的某企業(yè)為例，該企業(yè)承擔(dān)著產(chǎn)業(yè)鏈上下游數(shù)百家企業(yè)海量電子信息的實(shí)時(shí)匯聚和處理，每天新生成日志數(shù)據(jù)達(dá)到數(shù)十TB。云智慧助力該客戶打造的數(shù)字化運(yùn)維日志中心，數(shù)據(jù)存儲(chǔ)壓縮比達(dá)到了1:0.3，能支持10萬/秒并發(fā)數(shù)據(jù)實(shí)時(shí)分析處理，數(shù)據(jù)傳輸和平臺(tái)解析處理吞吐量達(dá)540MB/s，處理延時(shí)控制在300毫秒以內(nèi)。 浙江運(yùn)維監(jiān)控經(jīng)驗(yàn)豐富對(duì)于運(yùn)維監(jiān)控的告警信息，應(yīng)該如何分析，或者說應(yīng)該從哪些方向去分析呢？

相比傳統(tǒng)規(guī)則類監(jiān)控，日志異常檢測(cè)可以讓運(yùn)維人員做到“輕松運(yùn)維”——不用再設(shè)置大量繁瑣的監(jiān)控規(guī)則，也無需再設(shè)置多樣的告警觸發(fā)閾值，就可以快速檢測(cè)并發(fā)現(xiàn)日志的異常。這一功能還能降低對(duì)運(yùn)維工程師經(jīng)驗(yàn)的要求，幫助客戶減少因人員流動(dòng)帶來的系統(tǒng)監(jiān)控不穩(wěn)定的風(fēng)險(xiǎn)。當(dāng)前，Argus運(yùn)維監(jiān)控系統(tǒng)已經(jīng)在運(yùn)營(yíng)商以及金融客戶的多個(gè)項(xiàng)目中得到了良好的實(shí)踐，能快速適應(yīng)業(yè)務(wù)日志變化，高效實(shí)現(xiàn)對(duì)不同業(yè)務(wù)場(chǎng)景的監(jiān)控覆蓋，幫助客戶提高日志運(yùn)維故障診斷和維護(hù)的效率，提升企業(yè)的業(yè)務(wù)可用性及穩(wěn)定性。

Argus運(yùn)維監(jiān)控中硬件監(jiān)控包括：可以通過IPMI對(duì)硬件詳細(xì)情況進(jìn)行監(jiān)控，并對(duì)CPU、內(nèi)存、磁盤、溫度、風(fēng)扇、電壓等設(shè)置報(bào)警設(shè)置報(bào)警閾值(自行對(duì)監(jiān)控報(bào)警內(nèi)容編寫合理的報(bào)警范圍)IPMI工具無法獲取到硬件的狀態(tài)，可以借助MegaCli工具探測(cè)Raid磁盤隊(duì)列狀態(tài)zabbix提供IPMI監(jiān)控模板：ZabbixIPMIInterface。同時(shí)也能夠?qū)崟r(shí)采集到服務(wù)器的硬件報(bào)錯(cuò)日志，代替管理員的日常機(jī)房巡檢工作，使管理員實(shí)時(shí)了解到服務(wù)器底層硬件的運(yùn)行情況。帶外方式不通過操作系統(tǒng)，即使系統(tǒng)關(guān)機(jī)的狀態(tài)下仍可監(jiān)控服務(wù)器的基本硬件健康狀況 快速讀懂智能化運(yùn)維監(jiān)控如何賦能IT可觀察性！

運(yùn)維監(jiān)控從原有的被動(dòng)式處理故障變?yōu)榻邮疹A(yù)警信息，提前發(fā)現(xiàn)潛在風(fēng)險(xiǎn)、提前解決問題，在IT故障波及業(yè)務(wù)運(yùn)行之前的告警處置。及時(shí)發(fā)現(xiàn)業(yè)務(wù)系統(tǒng)各個(gè)單元故障，深度定位系統(tǒng)的故障根源，通過CMDB建立IT資源關(guān)聯(lián)關(guān)系并在故障發(fā)生時(shí)迅速發(fā)現(xiàn)潛在可能影響的業(yè)務(wù)。7*24小時(shí)不間斷、無遺漏監(jiān)控，相對(duì)于人工巡檢而言，發(fā)現(xiàn)問題更及時(shí)完備。支持對(duì)不同硬件廠商/系列/型號(hào)、不同軟件類型/版本的全類指標(biāo)監(jiān)控和故障分析，內(nèi)置告警處置知識(shí)庫(kù)，降低了運(yùn)維工作對(duì)人的依賴程度。方便IT組織部門對(duì)人與硬件資源、虛擬資源之間的維護(hù)關(guān)系管理，助力IT報(bào)障責(zé)任劃分體系建設(shè)，為IT運(yùn)維人員的工作績(jī)效提供依據(jù)。使業(yè)務(wù)部門感知到的運(yùn)行故障頻次大量降低，提升對(duì)信息保障部門的信任度。5個(gè)運(yùn)維必須知道的運(yùn)維監(jiān)控系統(tǒng)，功能真心強(qiáng)大！互聯(lián)網(wǎng)運(yùn)維監(jiān)控服務(wù)熱線

在運(yùn)維監(jiān)控中怎么樣才算是故障，要報(bào)警呢？比如CPU的負(fù)載到底多少算高，用戶態(tài)、內(nèi)核態(tài)分別跑多少算高？浙江運(yùn)維監(jiān)控經(jīng)驗(yàn)豐富

基于信創(chuàng)環(huán)境建立信創(chuàng)運(yùn)維服務(wù)體系，滿足跨平臺(tái)對(duì)信創(chuàng)軟硬件設(shè)備提供運(yùn)維監(jiān)控管理功能，包括不限于服務(wù)器（ARM架構(gòu)、MIPS架構(gòu)、X86架構(gòu)等）、網(wǎng)絡(luò)設(shè)備、數(shù)據(jù)庫(kù)（國(guó)產(chǎn)數(shù)據(jù)庫(kù)及非國(guó)產(chǎn)數(shù)據(jù)庫(kù)）、應(yīng)用服務(wù)器、存儲(chǔ)、業(yè)務(wù)系統(tǒng)等全域多視角地監(jiān)控和管理，幫助用戶在極短時(shí)間發(fā)現(xiàn)問題、分析出原因、得出解決方案，使故障問題能夠在極短時(shí)間內(nèi)解決，保證業(yè)務(wù)系統(tǒng)的連續(xù)性。Argus 運(yùn)維監(jiān)控平臺(tái)是跨區(qū)域、跨部門的運(yùn)維系統(tǒng)監(jiān)控平臺(tái)，實(shí)現(xiàn)包括不限于服務(wù)器（ARM架構(gòu)、MIPS架構(gòu)、X86架構(gòu)等）、網(wǎng)絡(luò)設(shè)備、數(shù)據(jù)庫(kù)（國(guó)產(chǎn)數(shù)據(jù)庫(kù)及非國(guó)產(chǎn)數(shù)據(jù)庫(kù)）、中間件、存儲(chǔ)、業(yè)務(wù)系統(tǒng)等運(yùn)維監(jiān)控。通過對(duì)基礎(chǔ)實(shí)施、信息系統(tǒng)、項(xiàng)目進(jìn)度的總體監(jiān)控實(shí)現(xiàn)運(yùn)維體系的有效運(yùn)行，保障信創(chuàng)項(xiàng)目順利開展。提供自動(dòng)化運(yùn)維、智能化運(yùn)維功能，打破了人工現(xiàn)場(chǎng)運(yùn)維效率低下的現(xiàn)狀；從信息采集、健康巡檢、補(bǔ)丁分發(fā)等場(chǎng)景實(shí)現(xiàn)功能自動(dòng)化；利用智能學(xué)習(xí)、大數(shù)據(jù)分析、機(jī)器學(xué)習(xí)等技術(shù)手段，實(shí)現(xiàn)故障從人工處理到無人值守的變革，降低故障處理時(shí)間的同時(shí)，實(shí)現(xiàn)被動(dòng)運(yùn)維到主動(dòng)干預(yù)的轉(zhuǎn)變。浙江運(yùn)維監(jiān)控經(jīng)驗(yàn)豐富

上海觀縱科技有限公司是一家集生產(chǎn)科研、加工、銷售為一體的****，公司成立于2022-11-14，位于上海市奉賢區(qū)望園南路1288弄80號(hào)1904、1909室。公司誠(chéng)實(shí)守信，真誠(chéng)為客戶提供服務(wù)。公司主要經(jīng)營(yíng)webfunny前端監(jiān)控，webfunny前端埋點(diǎn)，全鏈路應(yīng)用性能監(jiān)控，Argus-IT運(yùn)維監(jiān)控等產(chǎn)品，我們依托高素質(zhì)的技術(shù)人員和銷售隊(duì)伍，本著誠(chéng)信經(jīng)營(yíng)、理解客戶需求為經(jīng)營(yíng)原則，公司通過良好的信譽(yù)和周到的售前、售后服務(wù)，贏得用戶的信賴和支持。公司秉承以人為本，科技創(chuàng)新，市場(chǎng)先導(dǎo)，和諧共贏的理念，建立一支由webfunny前端監(jiān)控，webfunny前端埋點(diǎn)，全鏈路應(yīng)用性能監(jiān)控，Argus-IT運(yùn)維監(jiān)控**組成的顧問團(tuán)隊(duì)，由經(jīng)驗(yàn)豐富的技術(shù)人員組成的研發(fā)和應(yīng)用團(tuán)隊(duì)。在市場(chǎng)競(jìng)爭(zhēng)日趨激烈的現(xiàn)在，我們承諾保證webfunny前端監(jiān)控，webfunny前端埋點(diǎn)，全鏈路應(yīng)用性能監(jiān)控，Argus-IT運(yùn)維監(jiān)控質(zhì)量和服務(wù)，再創(chuàng)佳績(jī)是我們一直的追求，我們真誠(chéng)的為客戶提供真誠(chéng)的服務(wù)，歡迎各位新老客戶來我公司參觀指導(dǎo)。