Topic: JDBC性能优化技巧

  Print this page

1.JDBC性能优化技巧 Copy to clipboard
Posted by: julysea
Posted on: 2003-12-30 16:54

l 如果可能,避免访问数据库

l 为应用选择最好最快的 JDBC 驱动 ,参考本站文章 。 JDBC3.0提供了新的特性来提高性能,诸如连接池, statemente池的改进

l 对数据库使用连接池并且重用连接,而不要重复打开和关闭连接。最佳的连接池大小是当连接池大到足够使服务请求不等待

l 尽量使用支持 JDBC3.0 的驱动,因为 JDBC3.0 支持包括 DataSource 对象,连接池,分布式事务支持, RowSets 和 prepared statement 池等性能增强特性

l Prepared statement 池(自从 JDBC3.0 开始有)高速缓存已经预先优化并运行了的 SQL 查询,这样,他们被再次请求的时候,不必经历再次的优化预处理(避免最优化步骤,诸如检查语法,验证地址,优化访问路径和执行计划)。 Statement 池是一个很好的,重要的性能优化方法

l JDBC3.0 中的 Statement 池和连接池能合作共享 statement 池,这样,能使用一个已高速缓存的 statement (该 statement 来自另外一个连接)的连接,在由任一连接执行的 一些SQL 首次被执行时,产生的 statement 准备开销仅一次

l RowSet对象与 ResultSet 对象相似,但是能提供当断开连接的时候对数据库数据的访问。这允许数据以它最简单的形式被高效的高速缓存

l 用同一个连接执行多个 statements

l 关闭 autocommit ,但不要让事务打开太久

l 避免将事务分布开(事务跨越多个连接)

l 最小化数据库的行和列数据获取。使用 setMaxRows, setMaxFieldSize,和 SetFetchSize

l 使用最高效的数据类型:字符串比整数型快,整数型比浮点类型和时间戳类型都要高效(是否不太理解^&^,这是针对DB2数据库处理来说的,处理character类型最快,而处理integer类型通常需要一些转换或者字节排序)

l 使用 updateXXX()方法更新: updateXXX() 在可更新的结果集上调用。结果集已经定位到了一行 , 因此当使用一个 UPDATE statement 时,可以消除通常的查找要更新的数据行的开销

l Cache任何请求的元数据( metadata )并尽可能少的使用元数据 方法,其慢的程度一用便知

l 避免在元数据 查询中使用 null 参数

l 使用虚拟查询获得一行的元数据,不要使用getcolumns()(假如应用允许用户使用列数据,应用是使用getColumns来返回列的信息给用户还是准备一个虚拟查询而后调用getMetadata呢?

l 使用存储过程,避免多余的网络传输

l 在存储过程中使用参量,不要将数据挨个地放在statement中,最小化解析开销。此条针对DB2来说,其它数据库未必适用。SQL总是以字符串形式发送给DB2数据库,例如:
CallableStatement cstmt = conn.prepareCall ("call getCustName (12345)");
ResultSet rs = cstmt.executeQuery ();
DB2服务器必须解析该SQL,验证参量类型,并将参量转化为正确的数据类型。

l 对需要重复执行的statement使用预处理statement(PreparedStatement)

l 选择使用最佳游标:对连续读取使用游标;对双向滚动使用游标。对仅返回一行的查询避免使用游标。

l 在JVM中Cache频繁请求的数据,避免不必要的数据库请求

l 采用预读取机制, 批量取行,而不要一次一行 。调整批大小和预取行的数量。避免使用预取 BLOB 数据。

l 除非绝对需要,否则避免移动数据

l 在数据穿过网络之前要使流化数据( Streamline data )

l 避免每次处理一行,尽可能一起处理多行。

l 在表中统计个数(例如:使用 select count(*) from myTable,yourTable where …)属于资源密集型的。试试首先选入临时表,仅返回该计数(count),然后发送精确的二次查询获得临时表中的行的子集。

l 恰当的使用 SQL 能减少资源请求。使用返回所需数据的最小值的查询:避免 select * 查询。一个返回小的数据子集的复杂查询,比一个简单的,返回超过所需的大量数据的简单查询更高效。

l 使你的查询尽可能精巧,例如:尽可能精确地最小化要传输的数据,使其是所需的子集

l 努力批量更新:将 statement 收集到一起,然后在一个事务里面一起执行。如果可能,使用有条件的逻辑和临时变量来达到 statement 批处理

l 永远不要让 DBMS 事务跨越用户输入

l 考虑使用乐观锁。乐观锁使用时间戳验证数据是否还没有被其他用户改变,否则事务失败

l 使用 恰当的更新,例如:更新行/表中已经存在的数据,而不要添加或者删除行/表。在适当的位置更新数据要比移动数据快得多,如果更新需要的空间比表设计能提供的更多,这可能是需要的。如果你设计的行需要空间初始化,更新将会更快。交易是你的表可能需要更多的磁盘空间,但可能速度更快。由于磁盘空间是便宜的,使用一点点能提高性能,这应该说是非常有价值的投资

l 分开存储正在操作的数据和历史数据(更一般的情况是将频繁使用的数据和不常使用的数据分开存储)

l 尽可能小的保留你的操作数据集,避免必须读那些不相关的数据

l DBMS可以很好的并行运转,尽量将应用设计成当和 DBMS交互时应用能做其他事情。

l 使用流水线操作和并行操作。 将应用设计成支持大量并行进程, 使应用运行更快。如果要处理多步,努力设计好应用,以使后来的步骤能够在任何优先的进程已经完成的数据部分上开始工作,而不是必须等到优先进程完成

l 事物的保护级别越高,性能损失就越大。事物级别按增长的顺序为: TRANSACTION_NONE, TRANSACTION_READ_UNCOMMITTED, TRANSACTION_READ_COMMITTED, TRANSACTION_REPEATABLE_READ, TRANSACTION_SERIALIZABLE。使用Connection.setTransactionIsolation() 设置你想要的事物级别

l 默认的自动提交模式由于使每一个数据库命令都成为一个单独的事务,这会严重影响性能,关闭自动提交(Connection.setAutoCommit(false) ),明确声明事务

l 通过整合多个事务为一个的批量操作,并在一个statement中使用Statement.addBatch() 和Statement.executeBatch()

l Savepoints (from JDBC3.0)需要昂贵的资源。一旦不再需要,就立刻使用Connection.releaseSavepoint()释放掉Savepoints

l ConnectionPoolDataSource (from JDBC3.0)和PooledConnection接口为连接池提供了built-in支持

l 使用setLogWriter() (from Driver, DataSource, or ConnectionPooledDataSource; from JDBC3.0) 帮助跟踪JDBC流

l 使用Connection.setReadOnly(true)优化只读数据库(操作)交互

l 使用Connection.nativeSQL()察看SQL查询如何在数据库种执行,帮助确保SQL已被优化

l 切记:一旦可能,立刻关闭Statement和ResultSet

l 使用DatabaseMetaData获得数据库功能性信息

l 一直捕捉和处理数据库警告和异常

l 使用最恰当的数据类型明确数据的类型,例如:以date类型存储日期,儿不要用varchar

l 使用可滚动ResultSet (JDBC 2.0)

2.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: dapan
Posted on: 2003-12-30 17:20

不错的!

Thx!

^_^

3.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: yamakasy
Posted on: 2003-12-30 20:53

好东东,谢谢!

4.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: faint
Posted on: 2003-12-30 20:55

如果从规范的角度将这些都对,但是driver的实现是不一样的.so....

5.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: why
Posted on: 2005-12-29 20:31

hohaischooldays posted on 2005-12-29:
julysea您好,上面的文章中:
使用最高效的数据类型:字符串比整数型快,整数型比浮点类型和时间戳类型都要高效(是否不太理解^&^,这是针对DB2数据库处理来说的,处理character类型最快,而处理integer类型通常需要一些转换或者字节排序)

请问:您的依据是什么?您如何得知的?谢谢!

6.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: hohaischooldays
Posted on: 2005-12-31 14:27

谢谢why!静候julysea的回答,谢谢!

7.Re:JDBC性能优化技巧 [Re: julysea] Copy to clipboard
Posted by: javadd
Posted on: 2005-12-31 17:14

收藏


   Powered by Jute Powerful Forum® Version Jute 1.5.6 Ent
Copyright © 2002-2021 Cjsdn Team. All Righits Reserved. 闽ICP备05005120号-1
客服电话 18559299278    客服信箱 714923@qq.com    客服QQ 714923