Java日志记录的5条规则

最后更新于:2022-04-01 15:56:00

日志记录是在软件开发过程中常常需要考虑的关键因素。 当产品运行出错时,日志文件通常是我们进行错误分析的首要选择。 而且,在很多情况下,它们是我们手上唯一可以用来查明发生状况和问题根本原因的信息。 可见,正确记录需要的信息是极其重要的。 以下5条日志规则,让我们可以检查和改进在代码中操作日志记录的方式。 同时也请注意,我们既不会讨论怎么配置一个日志引擎,也不会相互比较。 ### 规则1、日志是面向读者的 日志消息不仅要对书写(日志)代码的人有意义,也应该对日志文件的读者有意义。 这似乎是一条很明显但却经常违背的规则。 ~~~ ERROR: Save failure - SQLException ..... ~~~ 举个例子吧,我们来看看下面这条日志信息: ~~~ ERROR: Save failure - SQLException ..... ~~~ 保存什么呢?这条消息在开发者看来是能说明一些问题的,但是对于正在苦苦查看产品问题的可怜家伙来说,却毫无用处。 ~~~ RROR: Save failure- Entity=Person, Data=[id=123 surname="Mario"] - SQLException.... ~~~ 更合适的信息是这样的: ~~~ RROR: Save failure- Entity=Person, Data=[id=123 surname="Mario"] - SQLException.... ~~~ 这就解释了你想要存储的东西(这里是一个 Person,是一个 JPA 实体)以及这个 Person 实例相关的内容。 请注意相关这个单词,并不是指泛泛的全体:我们不应该让无价值的信息使日志文件变得乱糟糟,比如说完整打印所有的实体字段。 通常,实体名字和其逻辑关键字足以识别在表格中的一条记录了。 ### 规则2、匹配日志等级和执行环境 在 Java 系统中提供的所有日志管理工具和引擎都有日志等级(ERROR、INFO……)的概念,这将有可能过滤掉等级过低的消息。 例如,[Java util logging](https://docs.oracle.com/javase/8/docs/api/java/util/logging/Level.html) 使用如下的等级:SEVERE、WARN、INFO、FINE、FINER、FINEST(+ CONFIG 和 OFF)。相反,两个最受欢迎的日志管理工具, [Apache Commons Logging](https://commons.apache.org/proper/commons-logging/javadocs/api-release/index.html) 和 [SLFJ](http://www.slf4j.org/api/org/apache/log4j/Level.html)更倾向于如下的等级:FATAL、ERROR、WARN、INFO、DEBUG、TRACE。 日志过滤等级则需要取决于代码的开发阶段:成品与仍处在测试、集成环境下的代码日志等级就不能相同。 更具体的来说,日志等级也应该参考代码的归属情况。 一般而言,我们自己的应用程序代码应该比使用的任何第三方开发库拥有更详细的日志记录。 比如说,Apache 的通用调试消息出现在我们的日志文件中,就没有多大意义。 我通常像这样配置日志记录: - 成品阶段: 我的代码是 INFO 等级,第三方库是 WARN。 - 测试、集成阶段:我的代码是 DEBUG 等级,第三方库是 WARN(或者如果需要的话是 INFO)。 - 开发阶段:任何有意义的信息。 注意:个人而言,我不建议使用 TRACE/FINEST 等级(我并不是唯一持这种观点的人,可以参考 [这里](http://slf4j.org/faq.html#trace) 的例子)。 我并没有发现 DEBUG 和 TRACE 有多大的区别,而年轻团队的成员常常苦恼于到底是使用 DEBUG 还是 TRACE 。 根据 KISS 原则,我建议只使用 RROR、WARN、INFO 和 DEBUG 等级。 ### 规则3、提交前去除编码帮助日志 编码时,我们常常会使用 logger 或是 System.out 在代码中添加日志消息,来更好地掌握应用程序在执行、调试期间发生的状况。 ~~~ void aMethod(String aParam) { LOGGER.debug(“Enter in aMethod”); if (“no”.equals(aParam)) { LOGGER.debug(“User says no”); …. ~~~ 比如这样的代码: ~~~ void aMethod(String aParam) { LOGGER.debug(“Enter in aMethod”); if (“no”.equals(aParam)) { LOGGER.debug(“User says no”); …. ~~~ 这些消息显示被调用的方法并且备份内部变量及方法参数值,主要是为了追踪应用程序的行为。这在非[测试驱动开发](http://www.amazon.cn/dp/B0011AP332/?tag=importnew-23 "测试驱动开发")中相当受欢迎。 但糟糕的是,一旦代码发布(测试之后成为成品)这些消息通常就无用武之地了。 所以,这条规则简单来说就是:一旦你已经完成开发工作,在将代码提交到使用中的 SCM 系统(git、svn……)之前,要去除所有临时的和不必要的日志消息。 这条规则并不是要求去除所有的 DEBUG 消息,只是针对那些在应用程序完成和发布后就没有意义的消息,或者是说当我们有理由相信应用程序能正确运行时就失去意义的那些消息。 ### 规则4、log DEBUG消息之前检查日志等级 根据第2条规则,在产品日志中,我们只会显示 ERROR、WARN、INFO 等级的消息,但是在代码中我们也可以使用一些不会影响产品运行的 DEBUG 消息。 ~~~ if ( LOGGER.isDebugEnabled((){ LOGGER.debug (…….) } ~~~ 每次你想要 log 一个 DEBUG 消息时(在使用了规则3后的留下的所有消息),需要在前面添加一个检查来明确是否启用了 DEBUG 日志: ~~~ if ( LOGGER.isDebugEnabled((){ LOGGER.debug (…….) } ~~~ 这种做法可以阻止代码去创建日志消息和调用 logger,提高产品运行程序的效率。 ### 规则5、了解你的 logger 我们使用 logger 方法的方式可能会带来巨大的开销: - 创建消息字符串 - 组织包含在消息字符串中的数据 我们应该查阅所选择的日志管理工具、引擎的 javadoc 文档,了解使用它们 logger 的最有效的方法。 ~~~ LOGGER.info(“Person name is “ + person.getName()); ~~~ 例如,我们可以创建一条这样的消息: ~~~ LOGGER.info(“Person name is “ + person.getName()); ~~~ 这就创建了不必要的字符串实例。 ~~~ LOGGER.info(“Person name is {}“, person.getName()); ~~~ 使用SLF4J,正确的用法应该是: ~~~ LOGGER.info(“Person name is {}“, person.getName()); ~~~ 这里的格式化字符串是常量,不可变消息只有在允许 logging 的情况下才会被创建。 看 [这里](http://slf4j.org/faq.html#logging_performance) 可以获得更多细节内容。 原文链接: [javacodegeeks](http://www.javacodegeeks.com/2015/12/5-java-logging-rules.html) 翻译: [ImportNew.com ](http://www.importnew.com/)- [Jyy](http://www.importnew.com/author/jyoung)
';

实现使用3des在页面js加密,后台java解密

最后更新于:2022-04-01 15:55:57

前段时间根据功能的需要,需在页面对用户提交的表单数据采用3des加密,然后提交到后台。之前在网上通过百度、谷歌搜索了很久,虽然找到了很多的资料,但是总有各种问题。要嘛是js加密后,后台不能解密,要嘛是部分数据后台java代码解密失败。 我对网上找的代码进行了修改,解决了这个问题。在js中对需加密数据不满足8位的采用空字符进行填充。在后台解密时,采用无填充模式(desede/CBC/NoPadding)。下面是具体的加密代码。 在页面上导入des.js的js文件。 ~~~ <span style="font-family: Arial, Helvetica, sans-serif;">/**</span> ~~~ ~~~ *secretKey密钥需与java的3des的secretKey相同 *在我的代码实现中secretKey是在后台生产,放入到redis的,每一次进入页面都会新生产一个。大家也可以把这个值写死在这里 */ secretKey = "0123456789abcd0123456789"; //varStr需要加密的字符串 //enStr是已加密的字符串 var enStr=DES3.encrypt(secretKey,varStr); ~~~ 后台java解密实现: ~~~ //secretKey值需要与js加密的secretKey密钥相同 secretKey = "0123456789abcd0123456789"; //value解密后的值 //enStr需要解密的只字符串 String value=DES3.decode(enStr, secretKey) ~~~ 3des的js、java文件在下面zip中: [http://download.csdn.net/detail/mr_smile2014/9325545](http://download.csdn.net/detail/mr_smile2014/9325545)
';

不得不看的Java代码性能优化总结

最后更新于:2022-04-01 15:55:55

前言 代码优化,一个很重要的课题。可能有些人觉得没用,一些细小的地方有什么好修改的,改与不改对于代码的运行效率有什么影响呢?这个问题我是这么考虑的,就像大海里面的鲸鱼一样,它吃一条小虾米有用吗?没用,但是,吃的小虾米一多之后,鲸鱼就被喂饱了。代码优化也是一样,如果项目着眼于尽快无BUG上线,那么此时可以抓大放小,代码的细节可以不精打细磨;但是如果有足够的时间开发、维护代码,这时候就必须考虑每个可以优化的细节了,一个一个细小的优化点累积起来,对于代码的运行效率绝对是有提升的。 代码优化的目标是: 1、减小代码的体积 2、提高代码运行的效率 代码优化细节 1、尽量指定类、方法的final修饰符 带有final修饰符的类是不可派生的。在Java核心API中,有许多应用final的例子,例如java.lang.String,整个类都是final的。为类指定final修饰符可以让类不可以被继承,为方法指定final修饰符可以让方法不可以被重写。如果指定了一个类为final,则该类所有的方法都是final的。Java编译器会寻找机会内联所有的final方法,内联对于提升Java运行效率作用重大,具体参见Java运行期优化。此举能够使性能平均提高50%。 2、尽量重用对象 特别是String对象的使用,出现字符串连接时应该使用StringBuilder/StringBuffer代替。由于Java虚拟机不仅要花时间生成对象,以后可能还需要花时间对这些对象进行垃圾回收和处理,因此,生成过多的对象将会给程序的性能带来很大的影响。 3、尽可能使用局部变量 调用方法时传递的参数以及在调用中创建的临时变量都保存在栈中速度较快,其他变量,如静态变量、实例变量等,都在堆中创建,速度较慢。另外,栈中创建的变量,随着方法的运行结束,这些内容就没了,不需要额外的垃圾回收。 4、及时关闭流 Java编程过程中,进行数据库连接、I/O流操作时务必小心,在使用完毕后,及时关闭以释放资源。因为对这些大对象的操作会造成系统大的开销,稍有不慎,将会导致严重的后果。 5、尽量减少对变量的重复计算 明确一个概念,对方法的调用,即使方法中只有一句语句,也是有消耗的,包括创建栈帧、调用方法时保护现场、调用方法完毕时恢复现场等。所以例如下面的操作: ~~~ for (int i = 0; i < list.size(); i++) {…} 建议替换为: for (int i = 0, int length = list.size(); i < length; i++) {…} ~~~ 这样,在list.size()很大的时候,就减少了很多的消耗 6、尽量采用懒加载的策略,即在需要的时候才创建 例如: ~~~ String str = “aaa”;if (i == 1) { list.add(str); } 建议替换为: if (i == 1) { String str = “aaa”; list.add(str); } ~~~ 7、慎用异常 异常对性能不利。抛出异常首先要创建一个新的对象,Throwable接口的构造函数调用名为fillInStackTrace()的本地同步方法,fillInStackTrace()方法检查堆栈,收集调用跟踪信息。只要有异常被抛出,Java虚拟机就必须调整调用堆栈,因为在处理过程中创建了一个新的对象。异常只能用于错误处理,不应该用来控制程序流程。 8、不要在循环中使用try…catch…,应该把其放在最外层 除非不得已。如果毫无理由地这么写了,只要你的领导资深一点、有强迫症一点,八成就要骂你为什么写出这种垃圾代码来了 9、如果能估计到待添加的内容长度,为底层以数组方式实现的集合、工具类指定初始长度 比如ArrayList、LinkedLlist、StringBuilder、StringBuffer、HashMap、HashSet等等,以StringBuilder为例: ~~~ (1)StringBuilder()      // 默认分配16个字符的空间 (2)StringBuilder(int size)  // 默认分配size个字符的空间 (3)StringBuilder(String str) // 默认分配16个字符+str.length()个字符空间 ~~~ 可以通过类(这里指的不仅仅是上面的StringBuilder)的来设定它的初始化容量,这样可以明显地提升性能。比如StringBuilder吧,length表示当前的StringBuilder能保持的字符数量。因为当StringBuilder达到最大容量的时候,它会将自身容量增加到当前的2倍再加2,无论何时只要StringBuilder达到它的最大容量,它就不得不创建一个新的字符数组然后将旧的字符数组内容拷贝到新字符数组中—-这是十分耗费性能的一个操作。试想,如果能预估到字符数组中大概要存放5000个字符而不指定长度,最接近5000的2次幂是4096,每次扩容加的2不管,那么: (1)在4096 的基础上,再申请8194个大小的字符数组,加起来相当于一次申请了12290个大小的字符数组,如果一开始能指定5000个大小的字符数组,就节省了一倍以上的空间 (2)把原来的4096个字符拷贝到新的的字符数组中去 这样,既浪费内存空间又降低代码运行效率。所以,给底层以数组实现的集合、工具类设置一个合理的初始化容量是错不了的,这会带来立竿见影的效果。但是,注意,像HashMap这种是以数组+链表实现的集合,别把初始大小和你估计的大小设置得一样,因为一个table上只连接一个对象的可能性几乎为0。初始大小建议设置为2的N次幂,如果能估计到有2000个元素,设置成new HashMap(128)、new HashMap(256)都可以。 10、当复制大量数据时,使用System.arraycopy()命令 11、乘法和除法使用移位操作 ~~~ 例如: for (val = 0; val < 100000; val += 5) { a = val * 8; b = val / 2; } 用移位操作可以极大地提高性能,因为在计算机底层,对位的操作是最方便、最快的,因此建议修改为: for (val = 0; val < 100000; val += 5) { a = val << 3; b = val >> 1; } ~~~ 移位操作虽然快,但是可能会使代码不太好理解,因此最好加上相应的注释。 12、循环内不要不断创建对象引用 例如: ~~~ for (int i = 1; i <= count; i++) { Object obj = new Object(); } 这种做法会导致内存中有count份Object对象引用存在,count很大的话,就耗费内存了,建议为改为: Object obj = null;for (int i = 0; i <= count; i++) { obj = new Object(); } 这样的话,内存中只有一份Object对象引用,每次new Object()的时候,Object对象引用指向不同的Object罢了,但是内存中只有一份,这样就大大节省了内存空间了。 ~~~ 13、基于效率和类型检查的考虑,应该尽可能使用array,无法确定数组大小时才使用ArrayList 14、尽量使用HashMap、ArrayList、StringBuilder,除非线程安全需要,否则不推荐使用Hashtable、Vector、StringBuffer,后三者由于使用同步机制而导致了性能开销 15、不要将数组声明为public static final 因为这毫无意义,这样只是定义了引用为static final,数组的内容还是可以随意改变的,将数组声明为public更是一个安全漏洞,这意味着这个数组可以被外部类所改变 16、尽量在合适的场合使用单例 使用单例可以减轻加载的负担、缩短加载的时间、提高加载的效率,但并不是所有地方都适用于单例,简单来说,单例主要适用于以下三个方面: (1)控制资源的使用,通过线程同步来控制资源的并发访问 (2)控制实例的产生,以达到节约资源的目的 (3)控制数据的共享,在不建立直接关联的条件下,让多个不相关的进程或线程之间实现通信 17、尽量避免随意使用静态变量 要知道,当某个对象被定义为static的变量所引用,那么gc通常是不会回收这个对象所占有的堆内存的,如: ~~~ public class A { private static B b = new B(); } ~~~ 此时静态变量b的生命周期与A类相同,如果A类不被卸载,那么引用B指向的B对象会常驻内存,直到程序终止 18、及时清除不再需要的会话 为了清除不再活动的会话,许多应用服务器都有默认的会话超时时间,一般为30分钟。当应用服务器需要保存更多的会话时,如果内存不足,那么操作系统会把部分数据转移到磁盘,应用服务器也可能根据MRU(最近最频繁使用)算法把部分不活跃的会话转储到磁盘,甚至可能抛出内存不足的异常。如果会话要被转储到磁盘,那么必须要先被序列化,在大规模集群中,对对象进行序列化的代价是很昂贵的。因此,当会话不再需要时,应当及时调用HttpSession的invalidate()方法清除会话。 19、实现RandomAccess接口的集合比如ArrayList,应当使用最普通的for循环而不是foreach循环来遍历 这是JDK推荐给用户的。JDK API对于RandomAccess接口的解释是:实现RandomAccess接口用来表明其支持快速随机访问,此接口的主要目的是允许一般的算法更改其行为,从而将其应用到随机或连续访问列表时能提供良好的性能。实际经验表明,实现RandomAccess接口的类实例,假如是随机访问的,使用普通for循环效率将高于使用foreach循环;反过来,如果是顺序访问的,则使用Iterator会效率更高。可以使用类似如下的代码作判断: ~~~ if (list instanceof RandomAccess) { for (int i = 0; i < list.size(); i++){} }else{ Iterator<?> iterator = list.iterable(); while (iterator.hasNext()){iterator.next()} } ~~~ foreach循环的底层实现原理就是迭代器Iterator,参见Java语法糖1:可变长度参数以及foreach循环原理。所以后半句”反过来,如果是顺序访问的,则使用Iterator会效率更高”的意思就是顺序访问的那些类实例,使用foreach循环去遍历。 20、使用同步代码块替代同步方法 这点在多线程模块中的synchronized锁方法块一文中已经讲得很清楚了,除非能确定一整个方法都是需要进行同步的,否则尽量使用同步代码块,避免对那些不需要进行同步的代码也进行了同步,影响了代码执行效率。 21、将常量声明为static final,并以大写命名 这样在编译期间就可以把这些内容放入常量池中,避免运行期间计算生成常量的值。另外,将常量的名字以大写命名也可以方便区分出常量与变量 22、不要创建一些不使用的对象,不要导入一些不使用的类 这毫无意义,如果代码中出现”The value of the local variable i is not used”、”The import java.util is never used”,那么请删除这些无用的内容 23、程序运行过程中避免使用反射 关于,请参见反射。反射是Java提供给用户一个很强大的功能,功能强大往往意味着效率不高。不建议在程序运行过程中使用尤其是频繁使用反射机制,特别是Method的invoke方法,如果确实有必要,一种建议性的做法是将那些需要通过反射加载的类在项目启动的时候通过反射实例化出一个对象并放入内存—-用户只关心和对端交互的时候获取最快的响应速度,并不关心对端的项目启动花多久时间。 24、使用数据库连接池和线程池 这两个池都是用于重用对象的,前者可以避免频繁地打开和关闭连接,后者可以避免频繁地创建和销毁线程 25、使用带缓冲的输入输出流进行IO操作 带缓冲的输入输出流,即BufferedReader、BufferedWriter、BufferedInputStream、BufferedOutputStream,这可以极大地提升IO效率 26、顺序插入和随机访问比较多的场景使用ArrayList,元素删除和中间插入比较多的场景使用LinkedList 这个,理解ArrayList和LinkedList的原理就知道了 27、不要让public方法中有太多的形参 public方法即对外提供的方法,如果给这些方法太多形参的话主要有两点坏处: 1、违反了面向对象的编程思想,Java讲求一切都是对象,太多的形参,和面向对象的编程思想并不契合 2、参数太多势必导致方法调用的出错概率增加 至于这个”太多”指的是多少个,3、4个吧。比如我们用JDBC写一个insertStudentInfo方法,有10个学生信息字段要插如Student表中,可以把这10个参数封装在一个实体类中,作为insert方法的形参 28、字符串变量和字符串常量equals的时候将字符串常量写在前面 这是一个比较常见的小技巧了,如果有以下代码: ~~~ String str = “123”;if (str.equals(“123”)) { … } 建议修改为: String str = “123”;if (“123”.equals(str)) { … } ~~~ 这么做主要是可以避免空指针异常 29、请知道,在java中if (i == 1)和if (1 == i)是没有区别的,但从阅读习惯上讲,建议使用前者 平时有人问,”if (i == 1)”和”if (1== i)”有没有区别,这就要从C/C++讲起。 在C/C++中,”if (i == 1)”判断条件成立,是以0与非0为基准的,0表示false,非0表示true,如果有这么一段代码: ~~~ int i = 2;if (i == 1) { … }else{ … } C/C++判断”i==1″不成立,所以以0表示,即false。但是如果: int i = 2;if (i = 1) { … }else{ … } ~~~ 万一程序员一个不小心,把”if (i == 1)”写成”if (i = 1)”,这样就有问题了。在if之内将i赋值为1,if判断里面的内容非0,返回的就是true了,但是明明i为2,比较的值是1,应该返回的false。这种情况在C/C++的开发中是很可能发生的并且会导致一些难以理解的错误产生,所以,为了避免开发者在if语句中不正确的赋值操作,建议将if语句写为: int i = 2;if (1 == i) { … }else{ … } 这样,即使开发者不小心写成了”1 = i”,C/C++编译器也可以第一时间检查出来,因为我们可以对一个变量赋值i为1,但是不能对一个常量赋值1为i。 但是,在Java中,C/C++这种”if (i = 1)”的语法是不可能出现的,因为一旦写了这种语法,Java就会编译报错”Type mismatch: cannot convert from int to boolean”。但是,尽管Java的”if (i == 1)”和”if (1 == i)”在语义上没有任何区别,但是从阅读习惯上讲,建议使用前者会更好些。 30、不要对数组使用toString()方法 看一下对数组使用toString()打印出来的是什么: ~~~ public static void main(String[] args) { int[] is = new int[]{1, 2, 3}; System.out.println(is.toString()); } 结果是: [I@18a992f ~~~ 本意是想打印出数组内容,却有可能因为数组引用is为空而导致空指针异常。不过虽然对数组toString()没有意义,但是对集合toString()是可以打印出集合里面的内容的,因为集合的父类AbstractCollections<E>重写了Object的toString()方法。 31、不要对超出范围的基本数据类型做向下强制转型 这绝不会得到想要的结果: ~~~ public static void main(String[] args) { long l = 12345678901234L; int i = (int)l; System.out.println(i); } 我们可能期望得到其中的某几位,但是结果却是: 1942892530 解释一下。Java中long是8个字节64位的,所以12345678901234在计算机中的表示应该是: 0000 0000 0000 0000 0000 1011 0011 1010 0111 0011 1100 1110 0010 1111 1111 0010 一个int型数据是4个字节32位的,从低位取出上面这串二进制数据的前32位是: 0111 0011 1100 1110 0010 1111 1111 0010 ~~~ 这串二进制表示为十进制1942892530,所以就是我们上面的控制台上输出的内容。从这个例子上还能顺便得到两个结论: 1、整型默认的数据类型是int,long l = 12345678901234L,这个数字已经超出了int的范围了,所以最后有一个L,表示这是一个long型数。顺便,浮点型的默认类型是double,所以定义float的时候要写成””float f = 3.5f” 2、接下来再写一句”int ii = l + i;”会报错,因为long + int是一个long,不能赋值给int 32、公用的集合类中不使用的数据一定要及时remove掉 如果一个集合类是公用的(也就是说不是方法里面的属性),那么这个集合里面的元素是不会自动释放的,因为始终有引用指向它们。所以,如果公用集合里面的某些数据不使用而不去remove掉它们,那么将会造成这个公用集合不断增大,使得系统有内存泄露的隐患。 33、把一个基本数据类型转为字符串,基本数据类型.toString()是最快的方式、String.valueOf(数据)次之、数据+””最慢 把一个基本数据类型转为一般有三种方式,我有一个Integer型数据i,可以使用i.toString()、String.valueOf(i)、i+””三种方式,三种方式的效率如何,看一个测试: ~~~ public static void main(String[] args) { int loopTime = 50000; Integer i = 0; long startTime = System.currentTimeMillis(); for (int j = 0; j < loopTime; j++) { String str = String.valueOf(i); } System.out.println(“String.valueOf():” + (System.currentTimeMillis() – startTime) + “ms”); startTime = System.currentTimeMillis(); for (int j = 0; j < loopTime; j++) { String str = i.toString(); } System.out.println(“Integer.toString():” + (System.currentTimeMillis() – startTime) + “ms”); startTime = System.currentTimeMillis(); for (int j = 0; j < loopTime; j++) { String str = i + “”; } System.out.println(“i + \”\”:” + (System.currentTimeMillis() – startTime) + “ms”); } 运行结果为: String.valueOf():11ms Integer.toString():5ms i + “”:25ms ~~~ 所以以后遇到把一个基本数据类型转为String的时候,优先考虑使用toString()方法。至于为什么,很简单: 1、String.valueOf()方法底层调用了Integer.toString()方法,但是会在调用前做空判断 2、Integer.toString()方法就不说了,直接调用了 3、i + “”底层使用了StringBuilder实现,先用append方法拼接,再用toString()方法获取字符串 三者对比下来,明显是2最快、1次之、3最慢 34、使用最有效率的方式去遍历Map 遍历Map的方式有很多,通常场景下我们需要的是遍历Map中的Key和Value,那么推荐使用的、效率最高的方式是: ~~~ public static void main(String[] args) { HashMap<String, String> hm = new HashMap<String, String>(); hm.put(“111”, “222”); Set<Map.Entry<String, String>> entrySet = hm.entrySet(); Iterator<Map.Entry<String, String>> iter = entrySet.iterator(); while (iter.hasNext()) { Map.Entry<String, String> entry = iter.next(); System.out.println(entry.getKey() + “\t” + entry.getValue()); } } ~~~ 如果你只是想遍历一下这个Map的key值,那用”Set<String> keySet = hm.keySet();”会比较合适一些 35、对资源的close()建议分开操作 意思是,比如我有这么一段代码: ~~~ try{ XXX.close(); YYY.close(); }catch (Exception e) { … } 建议修改为: try{ XXX.close(); }catch (Exception e) { … }try{ YYY.close(); }catch (Exception e) { … } ~~~ 虽然有些麻烦,却能避免资源泄露。我们想,如果没有修改过的代码,万一XXX.close()抛异常了,那么就进入了cath块中了,YYY.close()不会执行,YYY这块资源就不会回收了,一直占用着,这样的代码一多,是可能引起资源句柄泄露的。而改为下面的写法之后,就保证了无论如何XXX和YYY都会被close掉。 这篇文章我是网上看到的,作者整理的非常好,按照这些技巧优化代码性能确实提高不少,所以在此分享。 本文转载于代码说
';

解决java读取大文件内存溢出问题、如何在不重复读取与不耗尽内存的情况下处理大文件

最后更新于:2022-04-01 15:55:53

### 1、传统的在内存中读取 读取文件行的标准方式是在内存中读取,Guava 和Apache Commons IO都提供了如下所示快速读取文件行的方法: ~~~ Files.readLines(new File(path), Charsets.UTF_8); FileUtils.readLines(new File(path)); ~~~ 这种方法带来的问题是文件的所有行都被存放在内存中,当文件足够大时很快就会导致程序抛出OutOfMemoryError 异常。 例如:读取一个大约1G的文件: ~~~ @Test public void givenUsingGuava_whenIteratingAFile_thenWorks() throws IOException { String path = ... Files.readLines(new File(path), Charsets.UTF_8); } ~~~ 这种方式开始时只占用很少的内存:(大约消耗了0Mb内存) ~~~ [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Total Memory: 128 Mb [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Free Memory: 116 Mb ~~~ 然而,当文件全部读到内存中后,我们最后可以看到(大约消耗了2GB内存): ~~~ [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Total Memory: 2666 Mb [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Free Memory: 490 Mb ~~~ 这意味这一过程大约耗费了2.1GB的内存——原因很简单:现在文件的所有行都被存储在内存中。 把文件所有的内容都放在内存中很快会耗尽可用内存——不论实际可用内存有多大,这点是显而易见的。 此外,我们通常不需要把文件的所有行一次性地放入内存中——相反,我们只需要遍历文件的每一行,然后做相应的处理,处理完之后把它扔掉。所以,这正是我们将要做的——通过行迭代,而不是把所有行都放在内存中。 ### 2、文件流 现在让我们看下这种解决方案——我们将使用java.util.Scanner类扫描文件的内容,一行一行连续地读取: ~~~ FileInputStream inputStream = null; Scanner sc = null; try { inputStream = new FileInputStream(path); sc = new Scanner(inputStream, "UTF-8"); while (sc.hasNextLine()) { String line = sc.nextLine(); // System.out.println(line); } // note that Scanner suppresses exceptions if (sc.ioException() != null) { throw sc.ioException(); } } finally { if (inputStream != null) { inputStream.close(); } if (sc != null) { sc.close(); } } ~~~ 这种方案将会遍历文件中的所有行——允许对每一行进行处理,而不保持对它的引用。总之没有把它们存放在内存中:(大约消耗了150MB内存) ~~~ [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Total Memory: 763 Mb [main] INFO org.baeldung.java.CoreJavaIoUnitTest - Free Memory: 605 Mb ~~~ ### 3、Apache Commons IO流 同样也可以使用Commons IO库实现,利用该库提供的自定义LineIterator: ~~~ LineIterator it = FileUtils.lineIterator(theFile, "UTF-8"); try { while (it.hasNext()) { String line = it.nextLine(); // do something with line } } finally { LineIterator.closeQuietly(it); } ~~~ 由于整个文件不是全部存放在内存中,这也就导致相当保守的内存消耗:(大约消耗了150MB内存) ~~~ [main] INFO o.b.java.CoreJavaIoIntegrationTest - Total Memory: 752 Mb [main] INFO o.b.java.CoreJavaIoIntegrationTest - Free Memory: 564 Mb ~~~ ### 4、结论 这篇短文介绍了如何在不重复读取与不耗尽内存的情况下处理大文件——这为大文件的处理提供了一个有用的解决办法。 原文链接: [Eugen Paraschiv](http://www.baeldung.com/java-read-lines-large-file) 翻译: [ImportNew.com ](http://www.importnew.com/)- [进林](http://www.importnew.com/author/8zjl8)
';

java中不同的ORM框架实现对数据库批量插入数据库的方式与技巧

最后更新于:2022-04-01 15:55:50

1.jdbc方式中使用executeBatch实现 JDBC中在做数据插入、更新、删除操作,可以使用executeBatch()方法减少数据库调用次数,如: ~~~ Statement pstmt = conn.createStatement(); pstmt.addBatch("insert into settings values(3,'小米','女')"); pstmt.addBatch("insert into settings values(4,'小李','女')"); pstmt.addBatch("insert into settings values(5,'小王','男')"); pstmt.addBatch("insert into settings values(6,'小明','男')"); pstmt.executeBatch(); ~~~ 2.采用hibernate框架session.save()保存数据 在hibernate中实现批量插入,必须通过经常的调用 flush() 以及稍后调用 clear() 来控制第一级缓存的大小。 ~~~ Session session = sessionFactory.openSession(); Transaction tx = session.beginTransaction(); for ( int i=0; i<100000; i++ ) { Student entity = new Student(.....); session.save(entity); if ( i % 50 == 0 ) { //每次批量把50条数据写入数据库并释放内存 session.flush(); session.clear(); } } tx.commit(); session.close(); ~~~ 3.采用MyBatis框架批量新增数据 在MyBatis的mapping文件中的相应xml的insert标签中,对插入的值采用循环的方式。如下面代码: ~~~ <insert id ="insertBatch" parameterType="List" > insert into STUDENT( ID,NAME,SEX) values <foreach collection ="list" item ="item" index ="index" separator =","> ( #{item.id},#{item.name},#{item.sex}) </foreach> </insert > ~~~
';

剖析java.lang.OutOfMemoryError: Java heap space产生原因及解决方法

最后更新于:2022-04-01 15:55:48

解释: JVM堆的设置是指java程序运行过程中JVM可以调配使用的内存空间的设置。JVM在启动的时候会自动设置Heapsize的值,其初始空间(即-Xms)是物理内存的1/64,最大空间(-Xmx)是物理内存的1/4。 可以利用JVM提供的-Xmn-Xms-Xmx等选项可进行设置。Heapsize的大小是YoungGeneration和TenuredGeneraion之和。在JVM中如果98%的时间是用于GC且可用的Heapsize不足2%的时候将抛出此异常信息。 提示: HeapSize最大不要超过可用物理内存的80%,一般的要将-Xms和-Xmx选项设置为相同,而-Xmn为1/4的-Xmx值。JVM中最大堆大小有三方面限制:相关操作系统的数据模型(32-bt还是64-bit)限制;系统的可用虚拟内存限制;系统的可用物理内存限制。32位系统下,一般限制在1.5G~2G;64为操作系统对内存无限制。我在WindowsServer2003系统,3.5G物理内存,JDK5.0下测试,最大可设置为1478m。   参数汇总 -Xms:表示java虚拟机堆区内存初始内存分配的大小,通常为操作系统可用内存的1/64大小即可,但仍需按照实际情况进行分配。有可能真的按照这样的一个规则分配时,设计出的软件还没有能够运行得起来就挂了。-Xmx:表示java虚拟机堆区内存可被分配的最大上限,通常为操作系统可用内存的1/4大小。但是开发过程中,通常会将-Xms与-Xmx两个参数的配置相同的值,其目的是为了能够在java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小而浪费资源。 一般来讲对于堆区的内存分配只需要对上述-Xms和-Xmx两个参数进行合理配置即可,但是如果想要进行更加精细的分配还可以对堆区内存进一步的细化,那就要用到下面的三个参数了-XX:newSize、-XX:MaxnewSize、-Xmn。当然这源于对堆区的进一步细化分:新生代、中生代、老生代。java中每新new一个对象所占用的内存空间就是新生代的空间,当java垃圾回收机制对堆区进行资源回收后,那些新生代中没有被回收的资源将被转移到中生代,中生代的被转移到老生代。而接下来要讲述的三个参数是用来控制新生代内存大小的. -XX:newSize:表示新生代初始内存的大小,应该小于-Xms的值; -XX:MaxnewSize:表示新生代可被分配的内存的最大上限;当然这个值应该小于-Xmx的值; -Xmn:至于这个参数则是对-XX:newSize、-XX:MaxnewSize两个参数的同时配置,也就是说如果通过-Xmn来配置新生代的内存大小,那么-XX:newSize=-XX:MaxnewSize=-Xmn,虽然会很方便,但需要注意的是这个参数是在JDK1.4版本以后才使用的 上面所述即为java虚拟机对外提供的可配置堆区的参数,接下来讲述java虚拟机对非堆区内存配置的两个参数: -XX:PermSize:表示非堆区初始内存分配大小,其缩写为permanentsize(持久化内存)-XX:MaxPermSize:表示对非堆区分配的内存的最大上限。 各种运行环境解决方案 手动设置Heapsize Linux平台 修改TOMCAT_HOME/bin/catalina.sh,在“cygwin=false”上一行加入如下参数:JAVA_OPTS="-Xms512m-Xmx512m-XX:PermSize=128m-XX:MaxPermSize=256m" Windows平台Tomcat安装版第一种方式: 打开注册表(命令:regedit),修改注册表HKEY_LOCAL_MACHINE\SOFTWARE\ApacheSoftwareFoundation\TomcatServiceManager\Tomcat6\Parameters\Java\Options 在后面加上:-Xms512m-Xmx512m     XX:PermSize=128m-XX:MaxPermSize=256m   -Dcom.sun.management.jmxremote=true 第二种方式: 点击应用“Tomcat6w.exe”,找到“Java”标签,在“JavaOptions”添加以上参数 Windows平台Tomcat解压版 在文件catalina.bat文件中的第一行添加如下: setJAVA_OPTS=-Xms512m-Xmx512m-XX:MaxNewSize=256m-XX:MaxPermSize=256m
';

剖析OutOfMemoryError: PermGen space产生原因及解决方法

最后更新于:2022-04-01 15:55:46

PermGen space的全称是Permanent Generation space,是指内存的永久保存区域。OutOfMemoryError: PermGen ; 这一区域用于存放Class和Meta的信息。 产生原因: Class在被加载的时候被放入PermGen space区域,它和和存放Instance的Heap区域不同,GC(Garbage Collection)不会在主程序运行期对PermGen space进行清理,所以如果应用会加载很多class的话,就很可能出现PermGen space错误。 这种错误常见在web服务器对JSP进行pre compile的时候。 解决方法:就是加大将PermGen space区域的内存,也就是把MaxPermSize的大小调大如下: -Xms256m -Xmx256m -XX:MaxNewSize=256m -XX:MaxPermSize=256m; 如果是tomcat报这个错: ~~~ 在# OS specific support. $var _must_ be set to either true or false.上面加入以下行: JAVA_OPTS="-server -XX:PermSize=64M -XX:MaxPermSize=128M"; ~~~
';

spring事务常见问题、异常分析和解决方法

最后更新于:2022-04-01 15:55:44

1.spring事务超时transaction unexpectedly rolled back (maybe due to a timeout); nested exception is javax.transaction.RollbackException;  可能原因1:spring事务设置的时间比较短。  解决方法:把spring事务设置长一点,如果事务中有很多复杂的查询及更新操作,取消方法上的事务注解,然后把查询操作整理后放在方法最前面,把更新操作放在一块,用自定义事务把更新操作放进去。  可能原因2:可能是mysql数据库InnoDB使用缓冲池设置小了,事务隔离级别不对。  解决方法:把缓存mysql数据库InnoDB使用缓冲池设置大些,同时把事务隔离级别由默认的REPEATABLE_READ级别改为READ_COMMITTED(关于事务级别在这里不再描述);  可能原因3:查询、更新sql效率不高;  解决方法:加索引,注意根据不同的数据库编写不同的表及where条件顺序。 2.spring事务(Transaction )报 marked as rollback-only异常的原因及解决方法  在spring中,在事务方法中调用多个事务方法时,spring将会把这些事务合二为一。  当整个方法中每个子方法没报错时,整个方法执行完才提交事务(大家可以使用debug测试),  如果某个子方法有异常,spring将该事务标志为rollback only。如果这个子方法没有将异常往上整个方法抛出或整个方法未往上抛出,  那么改异常就不会触发事务进行回滚,事务就会在整个方法执行完后就会提交,  这时就会造成Transaction rolled back because it has been marked as rollback-only的异常; 如果没看懂可以看[《 spring事务(Transaction )报 marked as rollback-only异常的原因及解决方法》](http://blog.csdn.net/mr_smile2014/article/details/49455483)这篇文章 3.已经定义事务了,为什么事务不回滚。   检查自己的代码中是不是用try...catch把异常获取了,而没有往上抛。如果没有往上抛,事务就会以为一切都很顺利没有出错,最后就会提交事务。如下面的代码,出现异常就不会回滚: ~~~ @Transactional(rollbackFor = { Exception.class })   public void test() {     try {        doDbStuff1();         doDbStuff2();//假如这个操作数据库的方法会抛出异常,现在方法doDbStuff1()对数据库的操作  不会回滚。     } catch (Exception e) {            e.printStackTrace();        }   } ~~~ 我们把上面的代码改成下面的代码,出现异常就会回滚: ~~~ @Transactional(rollbackFor = { Exception.class })   public void test() {     try {        doDbStuff1();         doDbStuff2();//假如这个操作数据库的方法会抛出异常,现在方法doDbStuff1()对数据库的操作  不会回滚。     } catch (Exception e) {            e.printStackTrace();    throw e;     }   } ~~~ 4.Exception in thread "main" org.springframework.beans.factory.NoUniqueBeanDefinitionException: No qualifying bean of type [org.springframework.transaction.PlatformTransactionManager] is defined; 原因是没有找到对应的bean,检查spring的版本是否正确;
';

自己整理的编码规范总结。(个人觉得很受用)

最后更新于:2022-04-01 15:55:41

在很多人眼里面,我们写代码的就是码农,是屌丝。其实我们是艺术家,我们的艺术品就是代码。不知道有朋友和我有相同的看法。 废话不多说,开始总结自己整理的一些编码规范:        1.在我们编写的每个类应该描写本类的作用,对于关系比较复杂的,我们应该描写清楚数据的存储过程。 2.不管在接口类中方法描述的再详细,在我们的实现类的方法上都应该进行描述。这样其它人接手我们的项目时能够很清楚的知道方法作用。 3.业务类的代码中对数据每一块的数据构造和数据的验证封装到其它方法中。不要直接在业务方法中写。这样会造成一个方法很多代码。不容易阅读。 如下代码: ~~~ @Transactional public void saveMember(Member member)throws Exception { if(member==null) { log.info("参数不能为空"); throw new AppException("10001","参数不能为空","参数不能为空"); } if(StringUtils.isBlank(member.getLoginName())) { log.info("登录名不能为空"); throw new AppException("10001","登录名不能为空","登录名不能为空"); } if(StringUtils.isBlank(member.getLoginPwd())) { log.info("登录密码不能为空"); throw new AppException("10001","登录密码不能为空","登录密码不能为空"); } if(member.getRoleRank()!=null) { log.info("角色不能为空"); throw new AppException("10001","角色不能为空","角色不能为空"); } //下面一系列逻辑处理代码 } ~~~ 我们可以改成这样: ~~~ @Transactional public void saveMember(Member member)throws AppException { /**验证会员参数是否为空*/ validateIsNull(member); //下面一系列逻辑处理代码 } /** * 验证会员参数是否为空 * @param member * @throws AppException */ public void validateIsNull(Member member)throws AppException { if(member==null) { log.info("参数不能为空"); throw new AppException("10001","参数不能为空","参数不能为空"); } if(StringUtils.isBlank(member.getLoginName())) { log.info("登录名不能为空"); throw new AppException("10001","登录名不能为空","登录名不能为空"); } if(StringUtils.isBlank(member.getLoginPwd())) { log.info("登录密码不能为空"); throw new AppException("10001","登录密码不能为空","登录密码不能为空"); } if(member.getRoleRank()!=null) { log.info("角色不能为空"); throw new AppException("10001","角色不能为空","角色不能为空"); } } ~~~ 上面的代码是不是比以前好看多了。 4.在业务类方法中对其它模块的调用要在本方法中体现出来,而不应该封装在其它方法中。这样做的话是主要是便于阅读,同时也能够很清楚业务逻辑和模块的调用。 5.对于其它分布式服务接口调用时,我们应该对每一个服务调用都使用try...catch的方式代替整个方法中只有一个try...catch的方式。然后在catch中打印日志。这样在以后生产日志系统中能够快速定位出错的地方。 6.某一业务方法逻辑比较复杂涉及到在数据量比较大的多个表的数据进行查询、然后在修改、最后保存的情况下。我们不应该把整个方法加上事务,这样容易造成事务的超 时。我们应该对修改、保存方法进行封装成单独封装成方法,然后使用事务把修改、保存的方法进行包含。意思就说我们只对修改和保存这一代码块加事务。 7.在系统中尽量完善自己的日志吧。对那些后期在排查问题有帮助的信息,最好打印出来。 8.把代码整理出有层次感,不要把代码写密密麻麻一堆,这样过不了多长时间自己看起都头晕。 以上是我自己对编码的一些总结,如果大家看了本篇文章后觉得不好的地方还请多多指教。
';

spring事务(Transaction )报 marked as rollback-only异常的原因及解决方法

最后更新于:2022-04-01 15:55:39

很多朋友在使用spring+hibernate或mybatis等框架时经常遇到报Transaction rolled back because it has been marked as rollback-only的异常,这个异常是怎么造成的 呢,下面将给大家进行详细的分析。 这是专门写的一个造成该异常的代码: ~~~ @Transactional public void add(OperateLog entity)throws Exception { // TODO Auto-generated method stub operateLogDao.add(entity); } ~~~ ~~~ @Transactional public void save(Member member) throws Exception { memberDao.add(member); } @Transactional public void add(Member member) throws Exception { try { this.save(member); /* * 日志的title长度为10 我把值设置为add111111111111111111是为了造成异常 */ OperateLog entity = new OperateLog("add111111111111111111", "1111"); operateLogService.add(entity); } catch (Exception e) { e.printStackTrace(); // throw e; } } ~~~ 执行以上代码就会报改异常,当我把 //throw e;的注释//去掉,当我执行后就不会有改异常,只会报标题title太长的异常。如下面提示: ~~~ Caused by: com.mysql.jdbc.MysqlDataTruncation: Data truncation: Data too long for column '_title' at row 1 at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:4072) at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:4006) at com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:2468) at com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2629) at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2719) at com.mysql.jdbc.PreparedStatement.executeInternal(PreparedStatement.java:2155) at com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2450) at com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2371) at com.mysql.jdbc.PreparedStatement.executeUpdate(PreparedStatement.java:2355) at org.apache.commons.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) at org.apache.commons.dbcp.DelegatingPreparedStatement.executeUpdate(DelegatingPreparedStatement.java:105) at org.hibernate.id.IdentityGenerator$GetGeneratedKeysDelegate.executeAndExtract(IdentityGenerator.java:94) at org.hibernate.id.insert.AbstractReturningDelegate.performInsert(AbstractReturningDelegate.java:57) ~~~ 通过以上的问题我们可以发现。在spring中,在事务方法中调用多个事务方法时,spring将会把这些事务合二为一。当整个方法中每个子方法没报错时,整个方法执行完才提交事务(大家可以使用debug测试),如果某个子方法有异常,spring将该事务标志为rollback only。如果这个子方法没有将异常往上整个方法抛出或整个方法未往上抛出,那么改异常就不会触发事务进行回滚,事务就会在整个方法执行完后就会提交,这时就会造成[Transaction rolled back because it has been marked as rollback-only](http://blog.csdn.net/mr_smile2014)的异常,就如上面代码中未抛throw e 一样。如果我们往上抛了改异常,spring就会获取异常,并执行回滚。
';

前言

最后更新于:2022-04-01 15:55:37

> 原文出处:[java常见问题](http://blog.csdn.net/column/details/javabug.html) 作者:[mr_smile2014](http://blog.csdn.net/mr_smile2014) **本系列文章经作者授权在看云整理发布,未经作者允许,请勿转载!** # java常见问题 > 主要发布个人整理的和网上优秀的在java编程过程中遇到的问题及其产生原因和解决方法的文章;
';