資料庫監控系統

1. 監控系統為什麼採用時間序列資料庫

思極有容時序資料庫正是普華公司面對這一高速增長的物聯網大數據市場和技術挑戰推出的創新性的大數據處理產品，它不依賴任何第三方軟體，也不是優化或包裝了一個開源的資料庫或流式計算產品，而是在吸取眾多傳統關系型資料庫、Nosql資料庫、流式計算引擎、消息隊列等軟體的優點之後自主開發的產品，在時序空間大數據處理上，有著自己獨到的優勢。

• · 10倍以上的性能提升：定義了創新的數據存儲結構，單核每秒就能處理至少2萬次請求，插入數百萬個數據點，讀出一千萬以上數據點，比現有通用資料庫快了十倍以上。

• · 硬體或雲服務成本降至1/5：由於超強性能，計算資源不到通用大數據方案的1/5；通過列式存儲和先進的壓縮演算法，存儲空間不到通用資料庫的1/10。

• · 全棧時序數據處理引擎：將資料庫、消息隊列、緩存、流式計算等功能融合一起，應用無需再集成Kafka/Redis/HBase/HDFS等軟體，大幅降低應用開發和維護的復雜度成本。

• · 強大的分析功能：無論是十年前還是一秒鍾前的數據，指定時間范圍即可查詢。數據可在時間軸上或多個設備上進行聚合。臨時查詢可通過Shell, Python, R, Matlab隨時進行。

• · 與第三方工具無縫連接：不用一行代碼，即可與Telegraf, Grafana, Matlab, R等工具集成。後續將支持MQTT, OPC等工具, 與BI工具也能夠無縫連接。

• · 零運維成本、零學習成本：安裝、集群一秒搞定，無需分庫分表，實時備份。支持標准SQL語句，支持JDBC, RESTful連接, 支持Python/Java/C/C++/Go等開發語言, 與MySQL相似，零學習成本。

採用思極有容時序資料庫，可將典型的物聯網、車聯網、工業互聯網大數據平台的整體成本降至現有的1/5。同樣的硬體資源，思極有容時序資料庫能將系統處理能力和容量增加五倍以上。

同時，相比HBase等資料庫，使用普華思極有容時序資料庫來存儲有以下優勢:

1. 存儲空間大幅節省，估計不到HBase的1/10

2. 伺服器資源大幅節省，估計不到1/5

3. 查詢速度提高至少10倍

4. 提供異地容災備份方案

5. 支持通過標准SQL進行即席查詢

6. 數據超過保留時長，自動刪除

7. 零管理，安裝、部署、維護極其簡單，一鍵搞定

2. 常用的資料庫訪問行為實時監控技術有哪些(資料庫監控一般監控什麼)

資料庫防火牆系統，串聯部署在資料庫伺服器之前，解決資料庫應用側和運維側兩方面的問題，是一款基於資料庫協議分棗孝析與控制技術的資料庫安全防護系統。DBFirewall基於主動防禦機制，實現資料庫的訪問行為控制、危險操作阻斷、可疑行為審計。

資料庫安全技術之一，資料庫安全技術主要包括：資料庫漏掃凳數稿、資料庫加密、資料庫防火牆、數據畢纖脫敏、資料庫安全審計系統。

資料庫安全風險包括：刷庫、拖庫、撞庫。

資料庫安全攻擊手段包括：SQL注入攻擊。

3. 如何高效的把監控數據寫入資料庫

旁路監控和串聯監控的比較

常見的網路監控模式可以分為兩種：一種是串聯監控模式，另一種是旁路監控模式。

旁路模式一般是指通過交換機等網路設備的「埠鏡像」功能來實現監控，在此模式下，監控設備只需要連接到交換機的指定鏡像埠，所以形象的稱之為「旁路監控」；而串聯模式一般是通過網關或者網橋的模式來進行監控，由於監控設備做為網關或者網橋串聯在網路中，所以稱之為「串聯監控模式」。

串聯模式功能雖然強大，但影響網路效率且極大的增加網關負載。

旁路模式優缺點，比較如下：

旁路模式的優點：

1. 旁路監控模式部署起來比較靈活方便，只需要在交換機上面配置鏡像埠即可。不會影響現有的網路結構。而串聯模式一般要作為網關或者網橋，所以需要對現有網路結構進行變動。

2. 旁路模式分析的是鏡像埠拷貝過來的數據，對原始傳遞的數據包不會造成延時，不會對網速造成任何影響。而串聯模式是串聯在網路中的，那麼所有的數據必須先經過監控系統，通過監控系統的分析檢查之後，才能夠發送到各個客戶端，所以會對網速有一定的延時。

3. 旁路監控設備一旦故障或者停止運行，不會影響現有網路的正常原因。而串聯監控設備如果出現故障，會導致網路中斷，導致網路單點故障。

旁路模式的缺點：

1. 需要交換機支持埠鏡像才可以實現監控。

回到話題，如何把監控數據寫到資料庫:

一、 通過安裝採集工具到連接交換機鏡像埠的PC上，記錄區域網上每台機器的上網信息。

實現工具：winpcpap、delphi、sqlite.dll。注意是直接調用wpcpap庫的函數，不通過第三方包裝組件。框架特點：多線程+雙緩沖技術，主線程負責界面，監聽線程接收網卡數據，歸檔線程保存到文件，全程無阻塞，按日期生成歸檔文件。雙緩沖使用鏈表對象實現，在傳遞1K大小的數據時，平均寫入性能約在100萬條/秒，釋放速度是寫入的1.2倍；在傳遞32K大小數據時，讀寫分別下降到原來的三分之一，實際產生的數據都在1K之內，所以性能方面完全沒有問題。

二、服務端

配置參數：url_length:採集數據包中url的長度，大於此值的包一律忽略，可以控制無效數據的生成量，默認512，一般256即可。

File_density:按日/周/月來生成歸檔文件名，默認是按日，不推薦更改。

Batch_commit:這是檢查緩沖區到的歸檔閥值，當檢查到緩沖區已經寫入超過此值時，數據轉交歸檔線程寫入磁碟，同時繼續監聽，互不幹涉。緩沖區切換僅受歸檔進程式控制制，所以不會出現丟失數據的情況。

這三個參數在ini配置文件中配置，分別體現在下圖紅線標識處。

4. 監控軟體和資料庫是屬於無形資產還是固定資產

如果萬方資料庫是存儲監控信息則可與監控器一起計入固定資產-監控系統。

如果做其他用途則計入無形資產（按稅法規定不少於十年攤銷）。

如果金額不大直接計入管理費用。

根據《企業會計准則第6號——無形資產（2006）》及應用指南規定，無形資產是指企業擁有或控制的沒有實物形態的可辨認非貨幣性資產。無形資產主要包括專利權、非專利技術、商標權、著作權、土地使用權、特許權等。

借：管理費用-無形資產攤銷

貸：累計攤銷

(4)資料庫監控系統擴展閱讀：

無形資產同時滿足下列條件的，才能予以確認：

1、與該無形資產有關的經濟利益很可能流入企業；

作為無形資產確認的項目，必須具備其生產的經濟利益很可能流入企業這一條件。因為資產最基本的特徵是產生的經濟利益預期很可能流入企業，如果某一項目產生的經濟利益預期不能流入企業，就不能確認為企業的資產。

在會計實務中，要確定無形資產所創造的經濟利益是否很可能流入企業，需要對無形資產在預計使用壽命內可能存在的各種經濟因素做出合理估計，並且應當有明確的證據支持。

2、該無形資產的成本能夠可靠地計量。

企業自創商譽以及內部產生的品牌、報刊名等，因其成本無法可靠計量，不應確認為無形資產。