数据库监控系统

1. 监控系统为什么采用时间序列数据库

思极有容时序数据库正是普华公司面对这一高速增长的物联网大数据市场和技术挑战推出的创新性的大数据处理产品，它不依赖任何第三方软件，也不是优化或包装了一个开源的数据库或流式计算产品，而是在吸取众多传统关系型数据库、Nosql数据库、流式计算引擎、消息队列等软件的优点之后自主开发的产品，在时序空间大数据处理上，有着自己独到的优势。

• · 10倍以上的性能提升：定义了创新的数据存储结构，单核每秒就能处理至少2万次请求，插入数百万个数据点，读出一千万以上数据点，比现有通用数据库快了十倍以上。

• · 硬件或云服务成本降至1/5：由于超强性能，计算资源不到通用大数据方案的1/5；通过列式存储和先进的压缩算法，存储空间不到通用数据库的1/10。

• · 全栈时序数据处理引擎：将数据库、消息队列、缓存、流式计算等功能融合一起，应用无需再集成Kafka/Redis/HBase/HDFS等软件，大幅降低应用开发和维护的复杂度成本。

• · 强大的分析功能：无论是十年前还是一秒钟前的数据，指定时间范围即可查询。数据可在时间轴上或多个设备上进行聚合。临时查询可通过Shell, Python, R, Matlab随时进行。

• · 与第三方工具无缝连接：不用一行代码，即可与Telegraf, Grafana, Matlab, R等工具集成。后续将支持MQTT, OPC等工具, 与BI工具也能够无缝连接。

• · 零运维成本、零学习成本：安装、集群一秒搞定，无需分库分表，实时备份。支持标准SQL语句，支持JDBC, RESTful连接, 支持Python/Java/C/C++/Go等开发语言, 与MySQL相似，零学习成本。

采用思极有容时序数据库，可将典型的物联网、车联网、工业互联网大数据平台的整体成本降至现有的1/5。同样的硬件资源，思极有容时序数据库能将系统处理能力和容量增加五倍以上。

同时，相比HBase等数据库，使用普华思极有容时序数据库来存储有以下优势:

1. 存储空间大幅节省，估计不到HBase的1/10

2. 服务器资源大幅节省，估计不到1/5

3. 查询速度提高至少10倍

4. 提供异地容灾备份方案

5. 支持通过标准SQL进行即席查询

6. 数据超过保留时长，自动删除

7. 零管理，安装、部署、维护极其简单，一键搞定

2. 常用的数据库访问行为实时监控技术有哪些(数据库监控一般监控什么)

数据库防火墙系统，串联部署在数据库服务器之前，解决数据库应用侧和运维侧两方面的问题，是一款基于数据库协议分枣孝析与控制技术的数据库安全防护系统。DBFirewall基于主动防御机制，实现数据库的访问行为控制、危险操作阻断、可疑行为审计。

数据库安全技术之一，数据库安全技术主要包括：数据库漏扫凳数稿、数据库加密、数据库防火墙、数据毕纤脱敏、数据库安全审计系统。

数据库安全风险包括：刷库、拖库、撞库。

数据库安全攻击手段包括：SQL注入攻击。

3. 如何高效的把监控数据写入数据库

旁路监控和串联监控的比较

常见的网络监控模式可以分为两种：一种是串联监控模式，另一种是旁路监控模式。

旁路模式一般是指通过交换机等网络设备的“端口镜像”功能来实现监控，在此模式下，监控设备只需要连接到交换机的指定镜像端口，所以形象的称之为“旁路监控”；而串联模式一般是通过网关或者网桥的模式来进行监控，由于监控设备做为网关或者网桥串联在网络中，所以称之为“串联监控模式”。

串联模式功能虽然强大，但影响网络效率且极大的增加网关负载。

旁路模式优缺点，比较如下：

旁路模式的优点：

1. 旁路监控模式部署起来比较灵活方便，只需要在交换机上面配置镜像端口即可。不会影响现有的网络结构。而串联模式一般要作为网关或者网桥，所以需要对现有网络结构进行变动。

2. 旁路模式分析的是镜像端口拷贝过来的数据，对原始传递的数据包不会造成延时，不会对网速造成任何影响。而串联模式是串联在网络中的，那么所有的数据必须先经过监控系统，通过监控系统的分析检查之后，才能够发送到各个客户端，所以会对网速有一定的延时。

3. 旁路监控设备一旦故障或者停止运行，不会影响现有网络的正常原因。而串联监控设备如果出现故障，会导致网络中断，导致网络单点故障。

旁路模式的缺点：

1. 需要交换机支持端口镜像才可以实现监控。

回到话题，如何把监控数据写到数据库:

一、 通过安装采集工具到连接交换机镜像端口的PC上，记录局域网上每台机器的上网信息。

实现工具：winpcpap、delphi、sqlite.dll。注意是直接调用wpcpap库的函数，不通过第三方包装组件。框架特点：多线程+双缓冲技术，主线程负责界面，监听线程接收网卡数据，归档线程保存到文件，全程无阻塞，按日期生成归档文件。双缓冲使用链表对象实现，在传递1K大小的数据时，平均写入性能约在100万条/秒，释放速度是写入的1.2倍；在传递32K大小数据时，读写分别下降到原来的三分之一，实际产生的数据都在1K之内，所以性能方面完全没有问题。

二、服务端

配置参数：url_length:采集数据包中url的长度，大于此值的包一律忽略，可以控制无效数据的生成量，默认512，一般256即可。

File_density:按日/周/月来生成归档文件名，默认是按日，不推荐更改。

Batch_commit:这是检查缓冲区到的归档阀值，当检查到缓冲区已经写入超过此值时，数据转交归档线程写入磁盘，同时继续监听，互不干涉。缓冲区切换仅受归档进程控制，所以不会出现丢失数据的情况。

这三个参数在ini配置文件中配置，分别体现在下图红线标识处。

4. 监控软件和数据库是属于无形资产还是固定资产

如果万方数据库是存储监控信息则可与监控器一起计入固定资产-监控系统。

如果做其他用途则计入无形资产（按税法规定不少于十年摊销）。

如果金额不大直接计入管理费用。

根据《企业会计准则第6号——无形资产（2006）》及应用指南规定，无形资产是指企业拥有或控制的没有实物形态的可辨认非货币性资产。无形资产主要包括专利权、非专利技术、商标权、着作权、土地使用权、特许权等。

借：管理费用-无形资产摊销

贷：累计摊销

(4)数据库监控系统扩展阅读：

无形资产同时满足下列条件的，才能予以确认：

1、与该无形资产有关的经济利益很可能流入企业；

作为无形资产确认的项目，必须具备其生产的经济利益很可能流入企业这一条件。因为资产最基本的特征是产生的经济利益预期很可能流入企业，如果某一项目产生的经济利益预期不能流入企业，就不能确认为企业的资产。

在会计实务中，要确定无形资产所创造的经济利益是否很可能流入企业，需要对无形资产在预计使用寿命内可能存在的各种经济因素做出合理估计，并且应当有明确的证据支持。

2、该无形资产的成本能够可靠地计量。

企业自创商誉以及内部产生的品牌、报刊名等，因其成本无法可靠计量，不应确认为无形资产。