sql并发处理
‘壹’ 面试java开发时问到高并发怎么处理的,还有sql优化有哪些办法,有哪位大神知道啊,新手!!
Java开发高并发的处理方法:
最基础的地方做起,优化我们写的代码,减少必要的资源浪费
避免频繁的使用new对象,对于整个应用只需要存在一个实例的类,我们可以使用单例模式。对于String连接操作,使用StringBuffer或StringBuilder,对于工具类可以通过静态方法来访问。
避免使用错误的方式,尽量不用instanceof做条件判断。使用java中效率高的类,比如ArrayList比Vector性能好。
图片服务器分离
对于web服务器来说,图片是最消耗资源的,于是我们有必要把图片与页面进行分离,我们把图片放到独立的图片服务器。这样的架构可以降低提供页面访问请求的服务器系统压力,并且可以保证系统不会因为图片的问题而崩溃。在图片服务器上,我们可以对不同的配置进行优化。
具体接触过的缓存机制是hibernate的缓存机制。为了避免每次都向数据库中取得数据,我们把用户常常访问到的数据放到内存中,甚至缓存十分大的时候我们可以把内存中的缓存放到硬盘中。还有高级的分布式缓存数据库使用,都可以增加系统的抗压力。
分批传送
在做某项目的时候,一次传递的参数太多,而且数据库规定一次最多传递的参数最多是三万条,当时有五万条记录,那怎么传送呢?最终是分批传送,电梯里一次乘不下那么多的人,会报超重的bug,那就分批把人送上去。
还有一次在考试系统中,如果那么多的考试人员同时提交到数据库中,数据库的压力增大,有时会被down掉,当时采用的方法是使用ajax异步传输,没有等待考生点击提交按钮的时候,就把考生的答案自动提交,这样也避免了突然断电考生前面做过的题出现丢失的现象。
DB优化
在数据库设计的时候就要考虑到后期的维护,数据库三范式是我们设计数据库索要遵循的原则。
索引的建立:建立索引要适当,如果一个表经常用来被查询,对于增加和修改很少被用到,我们就可以为这个表建立索引,因为对于增加和修改和删除操作时,我们对索引的维护要大大超过索引给我们带来的效率。
表字段的类型选择要恰当。包括字段的长度、类型等,要根据实际存储的数据进行选择,长度不要过长,否则会影响效率。
外键要慎用,因为主键代表这一张表,而外键代表一群表,对表之间进行了关联,在删除修改等需要我们关联。
在数据库操作上。 尽量使用prepareStatement,少用Statement,因为PrepareStatement是进行预编译的。
connection设置为readOnly,Connection是对书库连接,属于重量级,我们使用即可。
连接池的使用,我们可以修改数据库默认的连接数。
‘贰’ 在用MQ处理高并发sql时,有什么方法能得到返回结果么
对于大量并发请求,我们暂且认为这个量已经超过了数据库正常的处理能力。那么仅仅通过数据库层面已经无法解决了。这需要在JAVA程序端通过缓存的方式进行优化。Hibernate本身对OR对象进行了一定程度的缓存处理,但如果这仍不能解决问题,那么就要考虑从业务层面来定义缓存的粒度。例如:在一个WEB应用中首页上会有很多需要从数据库中读取的内容,但其更新频率往往很慢,那么首页的可以作为缓存的颗粒。 这里介绍一个轻量级的缓存工具OSCache,它既可以在JSP页面中加入特殊的Tag来进行页面内容的缓存,也可以在后台逻辑中处理对象级缓存。 还有,对于高并发应用的优化是一个系统工程。上述的缓存技术只是一个方面,还有包括数据库优化,SQL优化,日志优化,负载均衡等等方法。这就不是一句两句能讲清楚的了。
‘叁’ 代码中并发执行同一个sql会影响sql的速度吗
对单次sql执行来讲,影响不会太大,除非并发数超过了数据库瓶颈,导致sql执行需要等待;
对整个并发执行来讲,肯定会比执行单个sql要慢的,因为虽然多次执行的sql是一样的,但是对数据库来讲还是需要进行多次处理的,只是在数据库中sql只需要解析
一次就好
‘肆’ 关于SQL Server2000数据并发导致存储慢的问题
主要有两种方法
1、优化sql的逻辑,使得逻辑越简单越好。
2、使用到的表结构要建索引