mysqlhandlersocketjava_HandlerSocketjava客户端

MySQL中有个handlersocket&＃xff0c;直接跳过数据库处理中的sql分析过程&＃xff0c;直接调用存储引擎的接口&＃xff0c;可以大幅度提升数据库的性能。我的测试中&＃xff0c;使用handlersocket与sql&＃xff0c;可以提升约3-5倍&＃xff0c;在我的环境中单条“增删改查”可以达到2.5TPS左右&＃xff0c;没有作者说得可以达到10万T

MySQL中有个handlersocket&＃xff0c;直接跳过数据库处理中的sql分析过程&＃xff0c;直接调用存储引擎的接口&＃xff0c;可以大幅度提升数据库的性能。我的测试中&＃xff0c;使用handlersocket与sql&＃xff0c;可以提升约3-5倍&＃xff0c;在我的环境中单条“增删改查”可以达到2.5TPS左右&＃xff0c;没有作者说得可以达到10万TPS。

有一个hs4j的java客户端&＃xff0c;但是有些功能没有完善&＃xff0c;还有一个不太正常的现象&＃xff0c;就是连接时间长了&＃xff0c;就会断开&＃xff0c;没有定位具体的原因。所以自己写了客户端&＃xff0c;基于netty 4&＃xff0c;算是对netty 4的一次尝试&＃xff0c;netty 4与netty 3区别很大。

代码已在github开源&＃xff1a;

https://github.com/flyinmind/HandlerSocket4Java

代码结构比较清晰&＃xff0c;HSBenchMark.java是性能测试程序&＃xff0c;也是调用样例&＃xff0c;com.huodian.hs4j.command中是处理协议命令的类&＃xff0c;com.huodian.hs4j.netty中处理netty相关的内容。

可以支持批量处理&＃xff0c;在我的环境中&＃xff0c;批量处理并没有大幅度提升性能&＃xff0c;我分析&＃xff0c;瓶颈应该在数据库&＃xff0c;所以批量没有提升性能&＃xff0c;但是在批量时&＃xff0c;客户端CPU占用会下降。使用InnoDB于MyISAM存储引擎都试过&＃xff0c;虽然官网说支持InnoDB&＃xff0c;但是MyISAM引擎也是可以的&＃xff0c;比InnoDB更快。

数据库服务器中innodb_buffer_pool_size设置为8G&＃xff0c;数据量最大3200万行&＃xff0c;每行7列。32万->320万->3200万的数据量都尝试过&＃xff0c;数据量上升时&＃xff0c;性能没有明显下降&＃xff0c;可能是内存没有利用起来。随着数据量上升&＃xff0c;内存消耗逐步上升&＃xff0c;3200万行时只占用了2G内存&＃xff0c;内存没有用起来&＃xff0c;不知道有什么设置可以将内存充分用起来。

handlersocket优点&＃xff0c;相当于sql性能更高&＃xff0c;相对于memcached&＃xff0c;可以持久化&＃xff0c;支持多列等&＃xff0c;因为基于存储引擎&＃xff0c;所以数据库的集群也是可以支持的(我没测试)&＃xff0c;使用handlersocket时&＃xff0c;服务端CPU消耗更少。

但是&＃xff0c;有个比较大的缺点&＃xff0c;有handlersocket客户端连接时&＃xff0c;我测试的是&＃xff0c;这时不能调整表结构。同时查询只能基于索引&＃xff0c;不能关联多个表等(这些都是可以接受的)。

本文原创发布php中文网&＃xff0c;转载请注明出处&＃xff0c;感谢您的尊重&＃xff01;