Prometheus指標采集和查詢存儲方案-2020年

我們分一級監控平臺和二級集群Prometheus監控采集組件。一級提供kafka集群和Prometheus聚合組件，二級各集群部署Prometheus和Prometheus-kafka-adapter組件，采集和遠程送數據到一級的kafka集群。

該方案優點：

1.業務系統可以跨集群聚合數據，如圖k8s集群-1和k8s集群-2數據聚合到Top-1的Prometheus上。

2.一級監控平臺上只要有足夠的cpu、存儲資源，理論上可以水平擴展接入更多集群。2020年底采集的指標量每天3194億的量級，吞吐量達370萬/s。

3.采集端Prometheus可以保留極少數據，比如6小時的數據，減少資源消耗。而上層Prometheus由于落數據到時序數據庫influxdb中，可以保存一個月數據量甚至更多。

該方案沒做到什么：

1.采集端Prometheus擴容問題，單集群中數據規模受Prometheus原生的限制。

2.一級監控平臺上時序數據庫influxdb有單點問題，數據規模和數據安全性受其影響。 我們要運維監控這個東西的什么屬性？比如CPU的使用率、負載、用戶態、內核態、上下文切換。浙江運維監控經驗豐富

Argus監控運維系統采用高性能深度列式存儲集群，能提供超高壓縮比、順序存儲和自定義數據等功能，滿足企業PB級數據存儲的需求，實現海量數據毫秒級的響應。以觀縱服務的某企業為例，該企業承擔著產業鏈上下游數百家企業海量電子信息的實時匯聚和處理，每天新生成日志數據達到數十TB。云智慧助力該客戶打造的數字化運維日志中心，數據存儲壓縮比達到了1:0.3，能支持10萬/秒并發數據實時分析處理，數據傳輸和平臺解析處理吞吐量達540MB/s，處理延時控制在300毫秒以內。 浙江運維監控經驗豐富對于運維監控的告警信息，應該如何分析，或者說應該從哪些方向去分析呢？

相比傳統規則類監控，日志異常檢測可以讓運維人員做到“輕松運維”——不用再設置大量繁瑣的監控規則，也無需再設置多樣的告警觸發閾值，就可以快速檢測并發現日志的異常。這一功能還能降低對運維工程師經驗的要求，幫助客戶減少因人員流動帶來的系統監控不穩定的風險。當前，Argus運維監控系統已經在運營商以及金融客戶的多個項目中得到了良好的實踐，能快速適應業務日志變化，高效實現對不同業務場景的監控覆蓋，幫助客戶提高日志運維故障診斷和維護的效率，提升企業的業務可用性及穩定性。

Argus運維監控中硬件監控包括：可以通過IPMI對硬件詳細情況進行監控，并對CPU、內存、磁盤、溫度、風扇、電壓等設置報警設置報警閾值(自行對監控報警內容編寫合理的報警范圍)IPMI工具無法獲取到硬件的狀態，可以借助MegaCli工具探測Raid磁盤隊列狀態zabbix提供IPMI監控模板：ZabbixIPMIInterface。同時也能夠實時采集到服務器的硬件報錯日志，代替管理員的日常機房巡檢工作，使管理員實時了解到服務器底層硬件的運行情況。帶外方式不通過操作系統，即使系統關機的狀態下仍可監控服務器的基本硬件健康狀況 快速讀懂智能化運維監控如何賦能IT可觀察性！

運維監控從原有的被動式處理故障變為接收預警信息，提前發現潛在風險、提前解決問題，在IT故障波及業務運行之前的告警處置。及時發現業務系統各個單元故障，深度定位系統的故障根源，通過CMDB建立IT資源關聯關系并在故障發生時迅速發現潛在可能影響的業務。7*24小時不間斷、無遺漏監控，相對于人工巡檢而言，發現問題更及時完備。支持對不同硬件廠商/系列/型號、不同軟件類型/版本的全類指標監控和故障分析，內置告警處置知識庫，降低了運維工作對人的依賴程度。方便IT組織部門對人與硬件資源、虛擬資源之間的維護關系管理，助力IT報障責任劃分體系建設，為IT運維人員的工作績效提供依據。使業務部門感知到的運行故障頻次大量降低，提升對信息保障部門的信任度。5個運維必須知道的運維監控系統，功能真心強大！互聯網運維監控服務熱線

在運維監控中怎么樣才算是故障，要報警呢？比如CPU的負載到底多少算高，用戶態、內核態分別跑多少算高？浙江運維監控經驗豐富

基于信創環境建立信創運維服務體系，滿足跨平臺對信創軟硬件設備提供運維監控管理功能，包括不限于服務器（ARM架構、MIPS架構、X86架構等）、網絡設備、數據庫（國產數據庫及非國產數據庫）、應用服務器、存儲、業務系統等全域多視角地監控和管理，幫助用戶在極短時間發現問題、分析出原因、得出解決方案，使故障問題能夠在極短時間內解決，保證業務系統的連續性。Argus 運維監控平臺是跨區域、跨部門的運維系統監控平臺，實現包括不限于服務器（ARM架構、MIPS架構、X86架構等）、網絡設備、數據庫（國產數據庫及非國產數據庫）、中間件、存儲、業務系統等運維監控。通過對基礎實施、信息系統、項目進度的總體監控實現運維體系的有效運行，保障信創項目順利開展。提供自動化運維、智能化運維功能，打破了人工現場運維效率低下的現狀；從信息采集、健康巡檢、補丁分發等場景實現功能自動化；利用智能學習、大數據分析、機器學習等技術手段，實現故障從人工處理到無人值守的變革，降低故障處理時間的同時，實現被動運維到主動干預的轉變。浙江運維監控經驗豐富

上海觀縱科技有限公司是一家集生產科研、加工、銷售為一體的****，公司成立于2022-11-14，位于上海市奉賢區望園南路1288弄80號1904、1909室。公司誠實守信，真誠為客戶提供服務。公司主要經營webfunny前端監控，webfunny前端埋點，全鏈路應用性能監控，Argus-IT運維監控等產品，我們依托高素質的技術人員和銷售隊伍，本著誠信經營、理解客戶需求為經營原則，公司通過良好的信譽和周到的售前、售后服務，贏得用戶的信賴和支持。公司秉承以人為本，科技創新，市場先導，和諧共贏的理念，建立一支由webfunny前端監控，webfunny前端埋點，全鏈路應用性能監控，Argus-IT運維監控**組成的顧問團隊，由經驗豐富的技術人員組成的研發和應用團隊。在市場競爭日趨激烈的現在，我們承諾保證webfunny前端監控，webfunny前端埋點，全鏈路應用性能監控，Argus-IT運維監控質量和服務，再創佳績是我們一直的追求，我們真誠的為客戶提供真誠的服務，歡迎各位新老客戶來我公司參觀指導。