阿里巴巴开发手册
Contents
💠
💠 2024-06-18 15:17:36
阿里巴巴Java开发手册
Github: p3c
含该手册PDF GitBook等版本
| 《阿里巴巴Java开发手册》详尽
编程规约
命名规约
强制
-
所有命名不能以
美元符和下划线
开始和结束 -
禁止拼音混合英文, 更不允许直接使用中文的方式。
- 正确的英文拼写和语法可以让阅读者易于理解,避免歧义。注意,即使纯拼音命名方式也要避免采用。
-
类名用
UpperCamelCase风格
但以下情形例外: DO / BO / DTO / VO / AO / PO / UID 例如:UserDO
-
方法名、参数名、成员变量、局部变量 都统一使用
lowerCamelCase风格
-
常量名全部大写, 下划线隔开, 力求语义表达完整清楚, 不要嫌名字长(枚举类中的也是)。
-
抽象类使用
Abstract或者Base
开头, 异常类使用Exception结尾 测试类命名以它要测试的类的名称开始,以Test结尾 -
数组定义
String[] name
而不是String name[]
-
POJO 类中布尔类型的变量不能is开头, 否则部分框架解析会引起序列化错误。
-
包名统一使用小写, 点分隔符之间有且仅有一个自然语义的英语单词。包名统一使用单数形式, 但是类名如果有复数含义, 类名可以使用复数形式。
- 正例: 应用工具类包名为 com.alibaba.open.util、类名为 MessageUtils( 此规则参考spring 的框架结构)
-
杜绝完全不规范的缩写, 避免望文不知义。
- 反例: AbstractClass“ 缩写” 命名成 AbsClass; condition“ 缩写” 命名成 condi, 此类随意缩写严重降低了代码的可阅读性。
推荐
-
为了达到代码自解释的目标, 任何自定义编程元素在命名时, 使用尽量完整的单词组合来表达其意。
- 正例: 从远程仓库拉取代码的类命名为 PullCodeFromRemoteRepository。
-
如果使用到了设计模式, 建议在类名中体现出具体模式。将设计模式体现在名字中, 有利于阅读者快速理解架构设计理念
LoginProxy
-
接口类中的方法和属性不要加任何修饰符号( public 也不要加) , 保持代码的简洁性, 并加上有效的 Javadoc 注释。
- 接口内的常量是与接口方法相关, 并且是整个应用的基础常量。
接口和实现类的命名有两套规则
-
强制
对于 Service 和 DAO 类, 基于 SOA 的理念, 暴露出来的服务一定是接口, 内部的实现类用 Impl 的后缀与接口区别。- 正例: CacheServiceImpl 实现 CacheService 接口。
-
推荐
如果是形容能力的接口名称, 取对应的形容词做接口名 ( 通常是–able 的形式)。- 正例: AbstractTranslator 实现 Translatable。
参考
-
枚举类名建议带上 Enum 后缀, 枚举成员名称需要全大写, 单词间用下划线隔开。
- 说明: 枚举其实就是特殊的常量类, 域成员均为常量, 且构造方法被默认强制是私有。
- 正例: 枚举名字为
ProcessStatusEnum
的成员名称:SUCCESS
或者UNKOWN_REASON
-
MVC各层命名规约
- Service/Dao层
- 获取单个对象 get 做前缀
- 获取多个对象 list, 复数形式结尾
- 获取统计值的方法 count
- 插入 save
- 删除 remove
- 修改 update
- 领域模型
- 数据对象 xxxDO xxx是数据表名
- 数据传输对象 xxxDTO xxx是业务领域相关的名称
- 展示对象 xxxVO xxx是网页名称 使用了模板框架
- POJO是 DO DTO BO VO 统称, 禁止命名为 xxxPOJO
- 有关这些缩写的详细说明 详细定义和解释
- Service/Dao层
-
Tomcat组织推荐的代码风格
- 使用空格进行缩进, 而不是制表符
- 用于 Java 源的100个字符行宽度, 用于文档源(.txt, .xml)的80个字符行宽度
- Java 源代码: {在行末, 4个空格缩进
- XML 源文件: 2个空格缩进
引申思考
- 由于组织变更,开发者变动等因素引起包的package和类名变动通常难以避免,例如MySQL,Netty,Dubbo,Nacos。但是越底层的包,影响范围会很大,很曲折(难以直接意识到是该变化引起的问题,例如MySQL驱动类名变更导致druid大量线程频繁Block问题)
- 所以良好的命名能大大降低改名引起的兼容风险
因为不可能知道上层应用是怎么使用你的库的,是否遵守良好的开发规范和良好的设计
常量定义
强制
-
不允许出现魔法值(未经定义的常量)直接出现
-
long 或者 Long 初始赋值时, 使用大写的 L , 不能是小写的 l, 小写容易跟数字 1 混淆, 造成误解
-
不要使用一个常量类维护所有的常量, 应该按常量的功能, 进行归类, 分开维护.
- 大而全的常量类, 只能用搜索 才能快速定位, 不利于理解和维护
- 例如 缓存相关常量放在类
CacheConsts
下; 系统配置相关常量放在类ConfigConsts
下
-
常量的复用层次的安排
- 跨应用共享常量 : 二方库中 通常是client.jar中的
constant
目录下 - 应用内共享常量 : 一方库的modules中的
constant
目录下- 易懂变量也要统一定义成 应用内共享变量, 比如两个开发者在两个模块定义了相同含义的常量, 但是值却不一样, 这样就很容易埋下隐患
- 子工程内共享常量 : 当前子工程的
constant
目录下 - 包内共享常量: 当前包下单独的
constant
目录下 - 类内共享常量: 直接在类内部
private static final
定义
- 跨应用共享常量 : 二方库中 通常是client.jar中的
推荐
-
如果变量值仅在一个范围内变化, 且带有名称之外的延伸属性, 定义为枚举类。下面正例中的数字就是延伸信息, 表示星期几。
public Enum { MONDAY(1), TUESDAY(2), WEDNESDAY(3), THURSDAY(4), FRIDAY(5), SATURDAY(6),SUNDAY(7);}
-
枚举类的定义 不能直接使用枚举的 ordinal() 作为枚举常量的值在程序中使用, 而应该自己定义一个变量, ordinal 方法的Javadoc上也有说明
- Most programmers will have no use for this method. It is designed for use by sophisticated enum-based data structures, such as EnumSet and EnumMap
代码格式
强制
-
大括号约定:
- 如果是大括号内为空, 则简洁地写成{}即可, 不需要换行;
- 如果是非空代码块则:
- 左大括号前不换行, 左大括号后换行。
- 右大括号前换行, 右大括号后还有 else 等代码则不换行; 表示终止的右大括号后必须换行。
-
小括号和字符之间不出现空格;
- 反例:
if (空格 a == b 空格)
- 反例:
-
if/for/while/switch/do
等保留字与括号之间必须加空格. -
任何二目、 三目运算符的左右两边都需要加一个空格。
-
缩进采用4个空格(Google的风格是两个空格), 而不是tab字符, 对应的IDE要调整一下
-
注释的双斜线与注释内容之间有且仅有一个空格。
// 注释
-
单行字符不超过120个, 超出需换行:
- 第二行比第一行缩进4个空格, 第三行以后就和第二行平齐就可以了
- 运算符与下文一起换行
- 方法调用的点符号与下文一起换行
- 调用方法 多个参数, 需在逗号后进行换行
- 括号之前不要换行
-
方法参数在定义和传入时, 多个参数逗号后边必须加空格 :
method("a", "b", "c");
-
文件编码统一采用
UTF-8
IDE中换行符采用Unix格式(LF)使用别的编码的话会开心死的
推荐
-
方法体内执行语句组, 变量的定义语句组, 不同的业务逻辑之间或者不同的语义之间插入一个空行, 相同业务逻辑和语义之间不需要插入空行
- 也没必要插入多个空行进行分隔
-
没有必要增加若干空格来使某一行的字符与上一行对应位置的字符对齐。(很傻的做法)
|
|
OOP规约
强制
-
避免使用一个类的对象来引用该类的静态变量或静态方法。无谓增加编译器解析成本, 直接用
类名
来访问即可。 -
所有的覆写方法, 必须加 @Override 注解
- 例如 getObject() 与 get0bject() 的问题, 前者是字母o,后者是数字0 通过使用覆盖的注解, 可以准确判断是否覆盖成功
- 另外, 如果在抽象类中对方法签名进行修改, 其实现类 会立即编译报错
-
相同参数类型, 相同业务含义, 才可以使用Java的可变参数, 避免使用Object.
- 说明: 可变参数必须放置在参数列表的最后。
提倡尽量不用可变参数编程
- 正例:
public User getUsers(String type, Integer... ids) {...}
- 说明: 可变参数必须放置在参数列表的最后。
-
外部正在调用或者二方库依赖的接口, 不允许修改方法签名, 避免对接口调用方产生影响。
- 接口过时必须加
@Deprecated
注解, 并清晰地说明采用的新接口或者新服务是什么。
- 接口过时必须加
-
不能使用过时的类或方法
- 说明:
java.net.URLDecoder
中的方法decode(String encodeStr)
这个方法已经过时, - 应该使用双参数
decode(String source, String encode)
。接口提供方既然明确是过时接口, - 那么有义务同时提供新的接口; 作为调用方来说, 有义务去考证过时方法的新实现是什么。
- 说明:
-
Object 的 equals 方法容易抛空指针异常, 应使用常量或确定有值的对象来调用equals。
- 使用
"t".equals(test)
方式 - 推荐使用
java.util.Object.equals
(jdk7引入的工具类)
- 使用
-
所有的相同类型的包装类对象之间的 值的比较 , 全部使用equals方法比较,
- 注意: 对于
Integer var = ?
在 -128 至 127 范围内的赋值, Integer 对象是在IntegerCache.cache 产生
, 会复用已有对象, - 这个区间内的 Integer 值可以直接使用 == 进行判断, 但是这个区间之外的所有数据, 都会在堆上产生, 并不会复用已有对象, 所以
==
就会失效 - 这是一个大坑!, 推荐统一使用 equals 方法进行判断
- 注意: 对于
-
关于基本数据类型与包装数据类型的使用标准如下:
- 所有的 POJO 类属性必须使用包装数据类型。
- RPC 方法的 返回值 和 参数 必须使用包装数据类型
- 所有的局部变量 推荐使用基本数据类型
说明
: POJO 类属性没有初值是提醒使用者在需要使用时, 必须自己显式地进行赋值, 任何NPE 问题, 或者入库检查, 都由使用者来保证。- 数据库的查询结果可能是 null, 因为自动拆箱, 用基本数据类型接收有 NPE 风险。
反例
: 比如显示成交总额涨跌情况, 即正负 x%, x 为基本数据类型, 调用的 RPC 服务, 调用不成功时, 返回的是默认值,- 页面显示为 0%, 这是不合理的, 应该显示成中划线。所以包装数据类型的 null 值, 能够表示额外的信息
- 如: 远程调用失败, 异常退出。
-
定义
DO/DTO/VO
等POJO类时, 不要给任何成员属性设定 默认值反例
: POJO 类的 createTime属性 默认值为 new Date();- 但是这个属性在数据提取时并没有置入具体值, 在更新其它字段时又附带更新了此字段, 导致创建时间被修改成当前时间。
-
序列化类新增属性时, 不要修改
serialVersionUID
字段, 避免反序列化失败- 如果完全不兼容升级, 为了避免反序列化混乱, 就需要修改
serialVersionUID
的值(idea可以配置使用快捷键自动生成)
说明
: 当 serialVersionUID 不一致会抛出序列化运行时异常。
- 如果完全不兼容升级, 为了避免反序列化混乱, 就需要修改
-
构造方法里面禁止加入任何业务逻辑, 如果有初始化逻辑, 请放在 init 方法中。
-
POJO 类必须写 toString 方法。 如果继承了另一个 POJO 类, 注意在前面加一下 super.toString()
lombok解救众生
- 说明: 在方法执行抛出异常时, 可以直接调用 POJO 的 toString()方法打印其属性值, 便于排查问题
推荐
-
使用索引访问用 String 的 split 方法得到的数组时, 需做最后一个分隔符后有无内容的检查, 否则会有
IndexOutOfBoundsException
的风险。System.out.println("a,b,c,,".split(",").length);
预期是大于3,结果却是3
-
当一个类有多个构造方法, 或者多个同名方法, 这些方法应该按顺序放置在一起, 优于下条规则
-
类内方法的定义顺序依次是 共有方法或保护方法 -> 私有方法 -> setter/getter方法(lombok可省)
- 公有方法是类的调用者和维护者最关心的方法, 首屏展示最好;
- 保护方法虽然只是子类关心, 也可能是 模板设计模式 下的核心方法;
- 而私有方法外部一般不需要特别关心, 是一个黑盒实现;
- 因为承载的信息价值较低, 所有 Service 和 DAO 的
getter/setter
方法放在类的最后, 用了lombok就省去了。
-
setter 方法中, 参数名称与类成员变量名称一致, this.成员名 = 参数名。
- 在
getter/setter
方法中, 不要增加业务逻辑, 增加排查问题的难度。
- 在
-
循环体中的字符串的连接方式, 使用
StringBuffer
的append
方法进行扩展- 说明: 反编译出的字节码文件显示每次循环都会 new 出一个 StringBuilder 对象, 然后进行 append 操作,
- 最后通过 toString 方法返回 String 对象, 造成内存资源浪费。
验证循环中String的拼接
1 2 3 4 5 6 7 8 9 10
public class test{ public void test(){ String target = "1"; for(int a=0; a<10; a++){ target += a; } } } // 1. javac test.java 编译 // 2. javap -c -l test 反编译, 就能大致看到new StringBuilder了
-
final 可以声明类、成员变量、方法、以及本地变量, 下列情况使用 final 关键字:
- 不允许被继承的类, 如: String 类。
- 不允许修改引用的域对象, 如: POJO 类的域变量。
- 不允许被重写的方法, 如: POJO 类的 setter 方法。
- 不允许运行过程中重新赋值的局部变量。
- 避免上下文重复使用一个变量, 使用 final 描述可以强制重新定义一个变量, 方便更好地进行重构。
- 这里就隐含了一个习惯, 不应该把一个变量到处传, 到处用,赋值, 很难追踪调试
-
慎用Object的clone方法来拷贝对象
详见API
- 说明: 对象的 clone 方法默认是浅拷贝, 最好重写该方法, 实现属性对象的拷贝。
- 例如使用JDK序列化实现深拷贝,或者用JSON序列化的方式
-
类成员与方法访问控制从严:
- 如果不允许外部直接通过 new 来创建对象, 那么构造方法显式声明并 private
- 工具类 不允许有 public 或 default 的构造方法
- 类非static成员变量 或者 成员方法 若 只与 子类共享, 必须是 protected
- 成员属性或方法 若 仅 本类中使用, 必须是 private
- 若是static成员变量, 必须考虑是否final
- 类static 成员变量如果仅在本类使用, 必须是 private。
- 注意 说明: 任何类、方法、参数、变量, 都需要严控访问范围。过于宽泛的访问范围, 不利于模块解耦。
- 思考: 如果是一个 private 的方法, 想删除就删除, 可是一个 public 的 service 方法, 或者一个 public 的成员变量, 删除一下, 不得手心冒点汗吗?
- 变量像自己的小孩, 尽量在自己的视线内, 变量作用域太大, 无限制的到处跑, 那么你会担心的。
集合处理
强制
-
关于 hashCode 和 equals 的处理, 遵循如下规则:
- 只要重写 equals, 就必须重写 hashCode
- 因为 Set 存储的是不重复的对象, 依据 hashCode 和 equals 进行判断, 所以 Set 存储的方法必须重写这两个方法
- 如果自定义对象作为 Map 的键, 那么必须重写 hashCode 和 equals
说明
: String 重写了 hashCode 和 equals 方法, 所以我们可以非常愉快地使用 String 对象作为 key 来使用。
-
ArrayList 的 subList 结果不可强转成 ArrayList 否则会抛出 ClassCastException异常,
- 即
java.util.RandomAccessSubList cannot be cast to java.util.ArrayList.
说明
: subList返回的是 ArrayList 的内部类 SubList, 并不是ArrayList, 而是ArrayList的一个视图, 对于SubList的所有操作最终都会反映到原列表上
- 即
-
在
subList
场景中, 高度注意对原集合元素 个数的修改, 会导致子列表的 遍历、增加、删除 均会产生ConcurrentModificationException
-
使用集合转数组的方法, 必须使用集合的
toArray(T[] array)
, 传入的是类型完全一样的数组, 数组大小就是list.size()
- 使用 toArray 带参方法, 入参分配的数组空间不够大时, toArray 方法内部将重新分配内存空间, 并返回新数组地址, 原数组不做更改;
- 如果数组元素大于实际所需, 下标超出的数组元素将被置为 null, 其它数组元素保持原值, 因此最好将方法入参数组大小定义与集合元素个数一致。
- 注意 直接使用 toArray 无参方法存在问题, 此方法返回值只能是 Object[]类, 若强转其它类型数组将出现 ClassCastException 错误。
-
把数组转换成集合: 使用工具类
Arrays.asList()
时, 不能使用其修改集合相关的方法, 其add/remove/clear
方法会抛出UnsupportedOperationException
异常。- 因为 asList 的返回对象是一个继承于 AbstractList 的内部类 Arrays, 实现集合的那些修改方法时 都是直接抛出异常
Arrays.asList
体现的是适配器模式, 只是转换接口, 后台的数据仍是固定长度的数组。- 案例:
String[] str = new String[] { "a", "b" }; List list = Arrays.asList(str);
- 第一种情况:
list.add("c");
运行时异常。 - 第二种情况:
str[0]= "gujin";
那么list.get(0)
也会随之修改。
- 第一种情况:
-
泛型通配符
<? extends T>
来接收返回的数据, 此写法的泛型集合不能使用 add 方法。- 而
<? super T>
不能使用 get 方法, 做为接口调用赋值时易出错。 - 说明: 扩展说一下
PECS(Producer Extends Consumer Super)
原则:- 第一、 频繁往外读取内容的, 适合用
<? extends T>
。 - 第二、 经常往里插入的, 适合用
<? super T>
。
- 第一、 频繁往外读取内容的, 适合用
- 说明: 苹果装箱后返回一个
<? extends Fruits>
对象, 此对象就不能往里加任何水果, 包括苹果。
- 而
-
不要在 foreach 循环里进行元素的
remove/add
操作。 remove 元素请使用 Iterator方式, 如果并发操作, 需要对 Iterator 对象加锁。*正例: *
1 2 3 4 5 6 7
Iterator<String> iterator = list.iterator(); while (iterator.hasNext()) { String item = iterator.next(); if (删除元素的条件) { iterator.remove(); } }
*反例: *
1 2 3 4 5 6 7 8
List<String> a = new ArrayList<String>(); list.add("1"); list.add("2"); for (String item : list) { if ("1".equals(item)) { list.remove(item); } }
说明: 以上代码的执行结果肯定会出乎大家的意料, 那么试一下把“1”换成“2”, 会是同样的结果吗?
-
在 JDK7 版本以上, Comparator 要满足自反性, 传递性, 对称性, 不然
Arrays.sort
,Collections.sort
会报IllegalArgumentException
- 1 ) 自反性: x , y 的比较结果和 y , x 的比较结果相反。
- 2 ) 传递性: x > y , y > z ,则 x > z 。
- 3 ) 对称性: x = y ,则 x , z 比较结果和 y , z 比较结果相同。
*反例: 下例中没有处理相等的情况, 实际使用中可能会出现异常: *
1 2 3 4 5 6
new Comparator<Student>() { @Override public int compare(Student o1, Student o2) { return o1.getId() > o2.getId() ? 1 : -1; } };
推荐
-
集合初始化时, 尽量指定集合初始容量值。
- HashMap 使用 HashMap(int initialCapacity) 初始化
- 正例:
initialCapacity=(需要存储的元素个数/负载因子)+1
。注意负载因子(即 loaderfactor)默认为0.75
- 如果暂时无法确定初始值大小, 请设置为 16(即默认值) 。
- 反例: HashMap 需要放置 1024 个元素, 由于没有设置容量初始大小, 随着元素不断增加, 容量
7
次被迫扩大, resize 需要重建 hash 表, 严重影响性能。
-
使用
entrySet
遍历 Map 类集合 KV , 而不是keySet
方式进行遍历keySet
其实是遍历了 2 次, 一次是转为Iterator
对象, 另一次是从 hashMap 中取出key 所对应的 value 。- 而
entrySet
只是遍历了一次就把 key 和 value 都放到了 entry 中, 效率更高。 如果是 JDK8, 使用 lambda 的 foreach 方法。 - 说明: values() 返回的是V值集合, 是一个 list 集合对象; keySet()返回的是K值集合, 是一个 Set集合对象;entrySet()返回的是 K - V 值组合集合。
-
高度注意 Map 类集合
K/V
能不能存储 null 值的情况, 如下表格:- 反例: 由于 HashMap 的干扰, 很多人认为 ConcurrentHashMap 是可以置入 null 值, 而事实上, 存储 null 值时会抛出 NPE 异常。
集合类 Key Value Super 说明 Hashtable ! NULL ! NULL Dictionary 线程安全 ConcurrentHashMap ! NULL ! NULL AbstractMap 锁分段技术( JDK8:CAS) TreeMap ! NULL NULL AbstractMap 线程不安全 HashMap NULL NULL AbstractMap 线程不安全 -
合理利用好集合的有序性 (sort) 和稳定性 (order) , 避免集合的无序性 (unsort) 和不稳定性 (unorder) 带来的负面影响。
- 稳定性指集合每次遍历的元素次序是一定的。
- 有序性是指遍历的结果是按某种比较规则依次排列的。
- 如: ArrayList 是 order / unsort;
- HashMap 是 unorder/unsort;
- TreeSet 是 order / sort 。
-
利用 Set元素唯一的特性, 可以快速对一个集合进行去重操作, 避免使用 List的contains 方法进行遍历、对比、去重操作。
- OrderSet也是一个很重要的类
并发处理
强制
-
获取单例对象需要保证线程安全, 其中的方法也要保证线程安全。
- 资源驱动类、工具类、单例工厂类都需要注意。
-
创建线程或线程池时请指定有意义的线程名称, 方便出错时回溯。
-
线程资源必须通过线程池提供, 不允许在应用中自行显式创建线程。
- 使用线程池的好处是减少在创建和销毁线程上所花的时间, 以及系统资源的开销,解决资源不足的问题, 如果不使用线程池, 有可能造成系统创建大量同类线程而导致消耗完内存或者 过度切换 的问题
-
线程池不允许使用 Executors 去创建, 而是通过 ThreadPoolExecutor 的方式, 这样的处理方式让写的同学更加明确线程池的运行规则, 规避资源耗尽的风险。
- Executors 返回的线程池对象的弊端如下:
- FixedThreadPool 和 SingleThreadPool :
- 允许的请求队列长度为 Integer.MAX_VALUE , 可能会堆积大量的请求, 从而导致 OOM 。
- CachedThreadPool 和 ScheduledThreadPool :
- 允许的创建线程数量为 Integer.MAX_VALUE , 可能会创建大量的线程, 从而导致 OOM 。
- FixedThreadPool 和 SingleThreadPool :
- Executors 返回的线程池对象的弊端如下:
-
SimpleDateFormat 是线程不安全的类, 一般不要定义为 static 变量, 如果定义为static , 必须加锁, 或者使用 DateUtils 工具类。
- 如果是 JDK 8 的应用, 可以使用 Instant 代替 Date , LocalDateTime 代替 Calendar , DateTimeFormatter 代替 Simpledateformatter ,
- 官方给出的解释: simple beautiful strongimmutable thread - safe 。
或者如下处理实例化
1 2 3 4 5 6
private static final ThreadLocal<DateFormat> df = new ThreadLocal<DateFormat>() { @Override protected DateFormat initialValue() { return new SimpleDateFormat("yyyy-MM-dd"); } };
-
高并发时, 同步调用应该去考量锁的性能损耗。
- 能用无锁数据结构, 就不要用锁 ;
- 能锁区块, 就不要锁整个方法体 ;
- 能用对象锁, 就不要用类锁。
- 尽可能使得加锁的代码块工作量尽可能的小, 避免在锁代码块中调用 RPC 方法;
-
对多个资源、数据库表、对象同时加锁时, 需要保持一致的加锁顺序, 否则可能会造成死锁。
- 线程一需要对表 A 、 B 、 C 依次全部加锁后才可以进行更新操作, 那么线程二的加锁顺序也必须是 A 、 B 、 C , 否则可能出现死锁。
-
并发修改同一记录时, 避免更新丢失, 要么在应用层加锁, 要么在缓存加锁, 要么在数据库层使用乐观锁, 使用 version 作为更新依据。
- 如果每次访问冲突概率小于 20%, 推荐使用乐观锁, 否则使用悲观锁。乐观锁的重试次数不得小于 3 次。
-
多线程并行处理定时任务时, Timer 运行多个 TimeTask 时, 只要其中之一没有捕获抛出的异常, 其它任务便会自动终止运行
- 使用 ScheduledExecutorService 则没有这个问题。
推荐
-
使用 CountDownLatch 进行异步转同步操作, 每个线程退出前必须调用 countDown方法, 线程执行代码注意 catch 异常, 确保 countDown 方法被执行到, 避免主线程无法执行至 await 方法, 直到超时才返回结果。
- 注意, 子线程抛出异常堆栈, 不能在主线程 try - catch 到。
-
避免 Random 实例被多线程使用, 虽然共享该实例是线程安全的, 但会因竞争同一 seed 导致的性能下降。
- Random 实例包括 java.util.Random 的实例或者 Math.random() 实例。
- 在JDK7之后, 可以直接使用 TreadLocalRandom, 而在JDK7以前, 需要编码保证每个线程持有一个实例
-
在并发场景下, 通过双重检查锁 (double - checked locking) 实现延迟初始化的优化问题隐患
- 可参考 The “Double - Checked Locking is Broken” Declaration ,
- 推荐问题解决方案中较为简单一种 ( 适用于 JDK 5 及以上版本 ) , 将目标属性声明为 volatile 型 。
-
volatile 解决多线程内存不可见问题。对于一写多读, 是可以解决变量同步问题
- 但是如果多写, 同样无法解决线程安全问题。如果是 count++ 操作, 使用如下类实现:
- AtomicInteger count = new AtomicInteger(); count . addAndGet( 1 );
- 如果是 JDK 8, 推荐使用 LongAdder 对象, 比 AtomicLong 性能更好 ( 减少乐观锁的重试次数 ) 。
- 但是如果多写, 同样无法解决线程安全问题。如果是 count++ 操作, 使用如下类实现:
-
HashMap 在容量不够进行 resize 时由于高并发可能出现死链, 导致 CPU 飙升, 在开发过程中可以使用其他数据结构或加锁来规避此风险。
-
ThreadLocal 无法解决共享对象的更新问题, ThreadLocal 对象建议使用 static 修饰。
- 这个变量是针对一个线程内所有操作共有的, 所以设置为静态变量, 所有此类实例共享此静态变量,
- 也就是说在类第一次被使用时装载, 只分配一块存储空间, 所有此类的对象 ( 只要是这个线程内定义的 ) 都可以操控这个变量。
控制语句
强制
-
在一个 switch 块内, 每个 case 要么通过 break/return 等来终止, 要么注释说明程序将继续执行到哪一个 case 为止 ;
- 在一个 switch 块内, 都必须包含一个 default 语句并且放在最后, 即使它什么代码也没有。
-
在 if/else/for/while/do 语句结构中必须使用大括号, 即使只有一行代码
推荐
-
表达异常的分支时, 少用 if-else 的方式, 这种方式可以改写:
- 逻辑上超过 3 层的 if-else 代码可以使用卫语句, 状态模式, 策略模式来实现
1 2 3 4 5 6 7 8 9 10 11 12
// 卫语句就是将错误情况提前返回 public void today(){ if(isBusy()){ System.out.println("change time."); return; } if(isFree()){ ... return; } .... }
-
除常用方法(如 getXxx/isXxx)等外, 不要在条件判断中执行其它复杂的语句
- 并且将复杂逻辑判断的结果赋值给一个有意义的布尔变量名, 以提高可读性。
- 很多 if 语句内的逻辑判断都是相当复杂, 不能一眼看出在判断什么, 需要停顿,分析一下表达式才能理解 if 语句存在的意义
- 如果有个boolean变量接收, 变量名就起到了注释的作用
1 2 3 4 5 6
// 正例 final boolean existed = (file.open(fileName, "w") != null) && (...) || (...); if(existed){...} // 反例 if ((file.open(fileName, "w") != null) && (...) || (...);){...}
-
循环体中的语句要考量性能, 以下操作尽量移至循环体外处理, 如定义对象、变量、获取数据库连接
- 进行不必要的 try-catch 操作 (需要考虑这个 try-catch 是否可以移至循环体外而不影响逻辑)。
-
接口入参保护, 这种场景常见的是用于做批量操作的接口。
-
方法中 必须 进行参数校验的场景:
- 调用频次低的方法。
- 执行时间开销很大的方法. 此情形中,参数校验时间几乎可以忽略不计,
- 但如果因为参数错误导致中间执行回退, 或者错误, 那得不偿失。
- 需要极高稳定性和可用性的方法。
- 对外提供的开放接口, 不管是 RPC/API/HTTP 接口。
- 敏感权限入口。
-
方法中 不需要 参数校验的场景:
- 极有可能被循环调用的方法, 不建议对参数进行校验。但在方法说明里必须注明外部参数检查要求。
- 底层的方法调用频度都比较高。毕竟是像纯净水过滤的最后一道, 参数错误不太可能到底层才会暴露问题。
- 一般 DAO 层与 Service层都在同一个应用中, 部署在同一台服务器中, 所以 DAO 的参数校验, 可以省略。
- 被声明成 private 只会被自己代码所调用的方法, 如果能够确定调用方法的代码传入参数已经做过检查或者肯定不会有问题, 此时可以不校验参数。
注释规约
强制
-
类、类属性、类方法的注释必须使用 Javadoc 规范, 使用 /** 内容 */ 格式, 不得使用 // xxx 方式。
- 为了能在IDE中快速查看注释
-
所有的抽象方法 (包括接口中的方法) 必须要用 Javadoc 注释、除了返回值、参数、异常说明外, 还必须指出该方法做什么事情, 实现什么功能。
- 并且声明 对子类的实现要求, 或者调用注意事项
-
所有的类都必须添加创建者和创建日期。
-
方法内部单行注释, 在被注释语句上方另起一行, 使用//注释(而不是行尾注释)。方法内部多行注释使用 /* */ 注释, 注意与代码对齐。
-
所有的枚举类型字段必须要有注释, 说明每个数据项的用途。
推荐
-
与其“半吊子”英文来注释, 不如用中文注释把问题说清楚。专有名词与关键字保持英文原文即可。
- 反例: TCP连接超时 解释成 传输控制协议连接超时, 反而更难以理解
-
代码修改的同时, 注释也要进行相应的修改, 尤其是参数、返回值、异常、核心逻辑等的修改。
- 代码与注释更新不同步, 就像路网与导航软件更新不同步一样, 如果导航软件严重滞后, 就失去了导航的意义。
-
谨慎注释掉代码, 尽量要配合说明, 而不是简单的注释掉, 如果无用, 则删除即可
- 代码被注释掉有两种可能性:
- 后续会恢复此段代码逻辑, 若无注释,难以知晓注释动机
- 永久不用: 建议直接删除, 仓库有历史记录的
- 代码被注释掉有两种可能性:
-
对于注释的要求:
- 第一、能够准确反应设计思想和代码逻辑
- 第二、能够描述业务含义, 使别的程序员能够迅速了解到代码背后的信息。
- 完全没有注释的大段代码对于阅读者形同天书, 注释是给自己看的, 即使隔很长时间, 也能清晰理解当时的思路 ;
- 注释也是给继任者看的, 使其能够快速接替自己的工作。
-
好的命名、代码结构是自解释的, 注释力求精简准确、表达到位。避免出现注释的一个极端:过多过滥的注释, 代码的逻辑一旦修改, 修改注释是相当大的负担。
-
特殊注释标记, 请注明标记人与标记时间。注意及时处理这些标记, 通过标记扫描, 经常清理此类标记。 线上故障有时候就是来源于这些标记处的代码。
- 待办事项 (TODO) : 标记人, 标记时间, [ 预计处理时间 ]
- 表示需要实现, 但目前还未实现的功能。这实际上是一个 Javadoc 的标签, 目前的 Javadoc还没有实现, 但已经被广泛使用。只能应用于类, 接口和方法 ( 因为它是一个 Javadoc 标签 ) 。
- 错误, 不能工作 (FIXME) : 标记人, 标记时间, [ 预计处理时间 ]
- 在注释中用 FIXME 标记错误的代码, 不能工作, 需要及时纠正的情况。
- 待办事项 (TODO) : 标记人, 标记时间, [ 预计处理时间 ]
其他
强制
-
在使用正则表达式时, 利用好其预编译功能, 可以有效加快正则匹配速度。
- 不要在方法体内定义: Pattern pattern = Pattern.compile( 规则 );
-
velocity 调用 POJO 类的属性时, 建议直接使用属性名取值即可, 模板引擎会自动按规范调用 POJO 的 getXxx() ,
- 如果是 boolean 基本数据类型变量 (boolean 命名不需要加 is前缀 ) , 会自动调用 isXxx() 方法。
- 注意 如果是 Boolean 包装类对象, 优先调用 getXxx() 的方法。
-
后台输送给页面的变量必须加 $!{var} ——中间的感叹号。
- 如果 var 为 null 或者不存在, 那么 ${var} 会直接显示在页面上。
-
注意 Math.random() 这个方法返回是 double 类型, 注意取值的范围 0 <= x <1 ( 能够取到零值, 注意除零异常 ) ,
- 如果想获取整数类型的随机数, 不要将 x 放大 10 的若干倍然后取整, 直接使用 Random 对象的 nextInt 或者 nextLong 方法。
-
获取当前毫秒数 System.currentTimeMillis(); 而不是 new Date().getTime();
- 如果想获取更加精确的纳秒级时间值, 用 System.nanoTime(), 在 JDK8 中, 针对统计时间等场景, 推荐使用 Instant 类。
推荐
-
尽量不要在视图模板中加入变量声明、逻辑运算符, 更不要加入任何复杂的逻辑。
- 根据MVC理论, 视图的原则是展示, 不要抢模板和控制器的活
-
任何数据结构的构造或初始化, 都应指定大小, 避免数据结构无限增长吃光内存。
-
及时清理不再使用的代码段或配置信息, 避免程序过度臃肿, 代码冗余
- 对于暂时被注释掉, 后续可能恢复使用的代码片段, 在注释代码上方, 统一规定使用三个斜杠来说明注释掉代码的理由
异常日志
异常处理
强制
-
Java类库中定义的一类 RuntimeException 可以通过预先检查进行规避, 而不应该通过 catch 来处理
- 比如 IndexOutOfBoundsException NullPointerException 等等.
- 无法通过预检查的异常除外, 如在解析一个外部传来的字符串形式的数字时, 通过 catch NumberFormatException 来实现
- 正例: if (obj != null){…}
- 反例: try{obj.method()} catch(NullPointerException e){…}
-
异常不要用来做流程控制, 条件控制, 因为异常的处理效率比条件分支低.
-
对大段代码进行 try-catch, 这是不负责任的表现。
- catch 时请分清稳定代码和非稳定代码, 稳定代码指的是无论如何不会出错的代码。
- 对于非稳定代码的 catch 尽可能进行区分异常类型, 再做对应的异常处理。
- 但是! 新手来说,分不清稳不稳定, 最好用大 try 块, 避免有异常遗漏没有处理
-
捕获异常是为了处理它, 不要捕获了却什么都不处理而抛弃之, 如果不想处理它, 请将该异常抛给它的调用者。
- 最外层的业务使用者, 必须处理异常, 将其转化为用户可以理解的内容。
-
有 try 块放到了事务代码中, catch 异常后, 如果需要回滚事务, 一定要注意手动回滚事务。
-
finally 块必须对资源对象、流对象进行关闭, 有异常也要做 try-catch 。
- 对于 JDK7及以上, 可以使用 try-with-resources 方式。
-
不能在 finally 块中使用 return, finally 块中的 return 返回后方法结束执行, 不会再执行 try 块中的 return 语句。
- 这种返回语句可能会掩盖抛出的异常,并极大地使调试复杂化
-
捕获与抛出的异常, 必须是完全匹配, 或者捕获的异常是抛出的异常的父类。
- 说明: 如果预期对方抛的是绣球, 实际接到的是铅球, 就会产生意外情况。
推荐
-
方法的返回值可以为 null, 不强制返回空集合, 或者空对象等, 必须添加注释充分说明什么情况下会返回 null 值。调用方需要进行 null 判断防止 NPE 问题。
- 本规约明确 防止 NPE 是调用者的责任。即使被调用方法返回空集合或者空对象, 对调用者来说, 也并非高枕无忧, 必须考虑到远程调用失败, 运行时异常等场景返回 null 的情况。
-
防止 NPE, 是程序员的基本修养, 注意 NPE 产生的场景:
- 返回类型为基本数据类型, return包装类型的对象时, 自动拆箱有可能产生 NPE.
- 反例:
public int f() { return Integer对象};
如果为 null , 自动拆箱将抛出 NPE
- 反例:
- 数据库的查询结果可能为 null
- 集合里的元素即使 isNotEmpty , 取出的数据元素也可能为 null
- 远程调用返回对象时, 一律要求进行 NPE 检查
- 对于 Session 中获取的数据, 建议 NPE 检查
- 级联调用
obj.getA().getB().getC();
一连串调用, 易产生 NPE
- 返回类型为基本数据类型, return包装类型的对象时, 自动拆箱有可能产生 NPE.
-
在代码中使用“抛异常”还是“返回错误码”
- 对于公司外的 http/api 开放接口必须使用“错误码”;
- 而应用内部推荐异常抛出;
- 跨应用间 RPC 调用优先考虑 使用 Result 方式, 封装 isSuccess()方法, “错误码", “错误简短信息”。
- 关于 RPC 方法返回方式使用 Result 方式的理由:
- 使用抛异常返回方式, 调用方如果没有捕获到就会产生运行时错误。
- 如果不加栈信息, 只是 new 自定义异常, 加入自己的理解的 error message, 对于调用端解决问题的帮助不会太多
- 如果加了栈信息, 在频繁调用出错的情况下, 数据序列化和传输的性能损耗也是问题。
-
定义时区分 unchecked/checked 异常, 避免直接抛出 RuntimeException, 更不允许抛出 Exception 或者 Throwable, 应使用有业务含义的自定义异常
- 推荐业界已定义过的自定义异常, 如: DAOException / ServiceException 等。
-
避免出现重复的代码 (Don ’ t Repeat Yourself) , 即 DRY 原则。
- 随意复制和粘贴代码, 必然会导致代码的重复, 在以后需要修改时, 需要修改所有的副本, 容易遗漏。必要时抽取共性方法, 或者抽象公共类, 甚至是组件化.
- 正例: 一个类中有多个public方法, 都需要进行数行相同的参数校验操作, 这个时候请抽取:
private boolean checkParam(DTO dto){...}
日志规约
强制
-
应用中不可直接使用日志系统 (Log4j, Logback) 中的 API , 而应依赖使用日志框架 SLF4J 中的API, 使用门面模式的日志框架, 有利于维护和各个类的日志处理方式统一。
1 2 3
import org.slf4j.Logger; import org.slf4j.LoggerFactory; private static final Logger logger = LoggerFactory.getLogger(A.class);
-
日志文件推荐至少保存 15 天, 因为有些异常具备以“周”为频次发生的特点。
-
应用中的扩展日志 ( 如打点、临时监控、访问日志等 ) 命名方式: appName_logType_logName.log 。
- logType: 日志类型
- 推荐分类有stats / desc / monitor / visit 等
- logName: 日志描述
- 这种命名的好处: 通过文件名就可知道日志文件属于什么应用, 什么类型, 什么目的, 也有利于归类查找。
- 推荐对日志进行分类, 错误日志和业务日志尽量分开存放, 便于开发人员查看, 也便于通过日志对系统进行及时监控。
- logType: 日志类型
-
对 trace / debug / info 级别的日志输出, 必须使用条件输出形式或者使用占位符的方式。
logger.debug("Processing trade with id : " + id + " symbol : " + symbol);
- 如果日志级别是 warn , 上述日志不会打印, 但是会执行字符串拼接操作
- 并且若 symbol 是对象, 会执行 toString() 方法, 浪费了系统资源, 执行了上述操作, 最终日志却没有打印。
-
避免重复打印日志, 浪费磁盘空间, 务必在 log4j.xml 中设置
additivity = false
<logger name="com.taobao.dubbo.config" additivity="false">
-
异常信息应该包括两类信息: 案发现场信息和异常堆栈信息。如果不处理,就要通过关键字 throws 上抛
logger.error(各类参数或者对象toString + "_" + e.getMessage(), e)
推荐
-
可以使用 warn 日志级别来记录
用户输入参数错误
的情况, 避免用户投诉时, 无所适从。- 注意日志输出的级别, error 级别只记录系统逻辑出错、异常等重要的错误信息。
- 如非必要, 请不要在此场景打出 error 级别。
-
谨慎地记录日志。生产环境禁止输出 debug 日志 ; 有选择地输出 info 日志 ; 如果使用 warn 来记录刚上线时的业务行为信息, 一定要注意日志输出量的问题, 避免把服务器磁盘撑爆, 并记得及时删除这些观察日志。
- 大量地输出无效日志, 不利于系统性能提升, 也不利于快速定位错误点。
- 记录日志时请思考:
- 这些日志真的有人看吗?
- 看到这条日志你能做什么?
- 能不能给问题排查带来好处?
单元测试
强制
-
好的单元测试必须遵守 AIR 原则
- 单元测试在线上运行时, 就像空气 AIR 一样不存在, 但是测试质量的保障上, 却是非常关键的
- 好的单元测试宏观上来说, 具有自动化, 独立性, 可重复执行的特点
- A: Automatic
- I: Independent
- R: Repeatable
-
单元测试应该是全自动执行的, 而且是非交互式的. 测试框架通常是定期执行的, 执行过程中必须完全自动化才有意义.
- 输出结果需要人工检查的测试不是一个好的单元测试, 单元测试中不准使用 System.out 来进行人工验证, 必须使用 assert.
-
保持单元测试的独立性. 为了保证单元测试稳定可靠且便于维护, 单元测试用例之间决不能互相调用, 也不能依赖执行的先后次序.
- method2 需要依赖 method1 的执行, 将执行结果作为method2 的输入.
-
单元测试是可以重复执行的, 不能受到外界环境的影响.
- 说明:
- 单元测试通常会放到持续集成中, 每次有代码 check in 时单元测试都会被执行.
- 如果测试对外部环境(网络, 服务, 中间件等)有依赖, 容易导致持续集成机制的不可用.
- 正例:
- 为了不受外界环境影响, 要求设计代码时就把SUT的依赖改成注入, 在测试时用Spring这样的DI框架注入一个本地(内存)实现或者Mock实现.
- 说明:
-
对于单元测试, 要保证测试粒度足够小, 有助于精确定位问题. 单测粒度至多是类级别, 一般是方法级别.
- 只有测试粒度小才能在出错时尽快定位到出错位置. 单测不负责检查跨类或者夸系统的交互逻辑, 那是集成测试的领域.
-
核心业务, 核心应用, 核心模块的增量代码确保单元测试通过.
- 新增代码及时补充单元测试, 如果新增代码影响了原有单元测试, 请及时修正.
-
单元测试代码必须写在如下工程目录: src/test/java 不允许写在业务代码目录下.
- 源码构建时会跳过此目录, 而单元测试框架默认是扫描此目录.
推荐
-
单元测试的基本目标: 语句覆盖率达到70%; 核心模块的语句覆盖率和分支覆盖率都要达到100%.
- 在工程规约的应用分层中提高的DAO层, Manager层, 可重用度高的Service, 都应该进行单元测试.
-
编写单元测试代码遵守BCDE原则, 以保证被测试模块的交付质量.
- B: Border, 边界值测试, 包括循环边界 特殊取值 特殊时间点 数据顺序等.
- C: Correct, 正确的输入, 并得到预期的结果.
- D: Design, 与设计文档相结合, 来编写单元测试.
- E: Error, 强制错误信息输入 (如: 非法数据 异常流程 非业务允许输入等), 并得到预期的结果.
-
对于数据库相关的查询, 更新, 删除等操作, 不能假设数据库里的数据是存在的, 或者直接操作数据库把数据插入进行, 请使用程序插入或者导入数据的方式来准备数据.(使用内存数据库就容易些)
-
和数据库相关的单元测试, 可以设定自动回滚机制, 不给数据库造成脏数据. 或者对单元测试产生的数据有明确的前后缀标识.
- 在RDC内部单元测试中, 使用 RDC_UNIT_TEST_ 的前缀标识数据
-
对于不可测的代码建议做必要的重构, 使代码变得可测, 避免为了达到测试要求而书写不规范测试代码.
-
在设计评审阶段, 开发人员需要和测试人员一起确定单元测试范围, 单元测试最好覆盖所有测试用例(UC).
-
单元测试作为一种质量保障手段, 不建议在项目发布后补充单元测试用例, 建议在项目提测前完成单元测试.
-
为了更方便地进行单元测试, 业务代码应避免以下情况:
- 构造方法中做的事情过多.
- 存在过多的全局变量和静态方法.
- 存在过多的外部依赖.
- 存在过多的条件语句 (多层条件语句建议使用卫语句,策略模式,状态模式等方式重构)
-
不要对单元测试存在如下误解:
- 那是测试要干的事情. 本文是开发手册, 凡是本文内容都是与开发强相关的.
- 单元测试代码是多余的
- 单元测试不需要维护
- 单元测试和线上故障没有辩证关系
安全规约
强制
-
隶属于用户个人的页面或者功能必须进行权限控制校验。
- 防止没有做水平权限校验就可随意访问、修改 删除 别人的数据, 比如查看他人的私信内容, 修改他人的订单
-
用户敏感数据禁止直接展示, 必须对展示数据脱敏。
- 查看个人手机号码会显示成:158****9119, 隐藏中间 4 位, 防止隐私泄露。
-
用户输入的 SQL 参数严格使用参数绑定或者 METADATA 字段值限定, 防止 SQL 注入, 禁止字符串拼接 SQL 访问数据库。
-
用户请求传入的任何参数必须做有效性验证。
- 忽略参数校验可能导致:
- page size 过大导致内存溢出
- 恶意 order by 导致数据库慢查询
- 任意重定向
- SQL 注入
- 反序列化注入
- 正则输入源串拒绝服务 ReDoS
- Java 代码用正则来验证客户端的输入, 有些正则写法验证普通用户输入没有问题, 但是如果攻击人员使用的是特殊构造的字符串来验证, 有可能导致死循环的效果。
- 忽略参数校验可能导致:
-
禁止向 HTML 页面输出未经安全过滤或未正确转义的用户数据。
-
表单, AJAX 提交必须执行 CSRF 安全过滤
- CSRF(Cross-site request forgery) 跨站请求伪造是一类常见编程漏洞。
- 对于存在CSRF 漏洞的应用/网站, 攻击者可以事先构造好 URL, 只要受害者用户一访问, 后台便在用户不知情情况下对数据库中用户参数进行相应修改。
个人理解 万一ajax接口的API暴露了, 被别有用心的人利用就能构造好页面, 用于钓鱼什么的
-
在使用平台资源, 譬如短信、邮件、电话、下单、支付, 必须实现正确的防重放限制, 如数量限制、疲劳度控制、验证码校验, 避免被滥刷、资损。
- 如注册时发送验证码到手机, 如果没有限制次数和频率, 那么可以利用此功能骚扰到其它用户, 并造成短信平台资源浪费。
-
发贴、评论、发送即时消息等用户生成内容的场景必须实现防刷、文本内容违禁词过滤等风控策略。
MySQL规约
建表规约
强制
-
表达是与否概念的字段, 必须使用 is_xxx 的方式命名, 数据类型是 unsigned tinyint (1 表示是, 0 表示否)
- 任何字段如果为非负数, 必须是 unsigned 。
- 正例: 表达逻辑删除的字段名 is_deleted, 1表示删除, 0表示未删除.
个人理解: 是不是简单的整型枚举也可以这么用呢
-
表名、字段名必须使用小写字母或数字; 禁止出现数字开头, 禁止两个下划线中间只出现数字。数据库字段名的修改代价很大, 因为无法进行预发布, 所以字段名称需要慎重考虑。
- MySQL 在 Windows 下不区分大小写, 但在 Linux 下默认是区分大小写, 因此 数据库名, 表名 字段名 都不允许出现任何大写字母.
-
表名不使用复数名词。
- 表名应该仅仅表示表里面的实体内容, 不应该表示实体数量, 对应于 DO 类名也是单数形式, 符合表达习惯。
-
禁用保留字, 如 desc 、 range 、 match 、 delayed 等, 请参考 MySQL 官方保留字。
-
主键索引名为 pk_字段名, 唯一索引名为 uk_字段名, 普通索引名则为 idx_字段名。
- pk_ 即 primary key, uk_ 即 unique key, idx_ 即 index 的简称。
-
小数类型为 decimal , 禁止使用 float 和 double 。
- float 和 double 在存储的时候, 存在精度损失的问题, 很可能在值的比较时, 得到不正确的结果。
- 如果存储的数据范围超过 decimal 的范围, 建议将数据拆成整数和小数分开存储。
-
如果某字段存储的字符串长度几乎是固定的, 使用 char 定长字符串类型。
-
varchar 是可变长字符串, 不预先分配存储空间, 长度不要超过 500,
- 如果存储长度大于此值, 定义字段类型为 text , 独立出来一张表, 用主键来对应, 避免影响其它字段索引效率。
-
表必备三字段: id, gmt_create, gmt_modified 。
- 其中 id 必为主键, 类型为 unsigned bigint 、单表时自增、步长为 1。
- gmt_create ,gmt_modified 的类型均为 date_time 类型, 前者现在时表示主动创建, 后者过去分词表示被动更新.
- GMT 是指格林尼治时间, 这样的话, 就是会让表的数据和时间关联上, 具有一定数据分析价值
推荐
-
表的命名最好是加上“业务名称_表的作用”。
- 正例: alipay_task force_project trade_config
-
库名与应用名称尽量一致。
-
如果修改字段含义或对字段表示的状态追加时, 需要及时更新字段注释。
-
字段允许适当冗余, 以提高查询性能, 但必须考虑数据一致, 冗余字段应遵循:
- 不是频繁修改的字段。
- 不是 varchar 超长字段, 更不能是 text 字段。
- 正例: 商品类目名称使用频率高, 字段长度短, 名称基本一成不变, 可在相关联的表中冗余存储类目名称, 避免关联查询。
-
单表行数超过 500 万行或者单表容量超过 2 GB, 才推荐进行分库分表。
- 如果预计三年后的数据量根本达不到这个级别, 请不要在创建表时就分库分表。
-
合适的字符存储长度, 不但节约数据库表空间、节约索引存储, 更重要的是提升检索速度。
- 如下表, 其中无符号值可以避免误存负数, 且扩大了表示范围.
对象 年龄区间 类型 字节 表示范围 人 150岁之内 unsigned tinyint 1 0 - 255 龟 数百年 unsigned smallint 2 0 - 65535 恐龙化石 数千万年 unsigned int 4 0 - 约42.9亿 太阳 约50亿年 unsigned bigint 8 0 - 约10的19次幂
索引规约
强制
-
业务上具有唯一特性的字段, 即使是多个字段的组合, 也必须建成唯一索引。
- 不要以为唯一索引影响了 insert 速度, 这个速度损耗可以忽略, 但提高查找速度是明显的 ;
- 另外, 即使在应用层做了非常完善的校验控制, 只要没有唯一索引, 根据墨菲定律, 必然有脏数据产生。
-
超过三个表禁止 join。需要 join 的字段, 数据类型必须保持绝对一致; 多表关联查询时, 保证被关联的字段需要有索引。
- 即使双表 join 也要注意表索引、SQL 性能。
-
在 varchar 字段上建立索引时, 必须指定索引长度, 没必要对全字段建立索引, 根据实际文本区分度决定索引长度即可。
- 索引的长度与区分度是一对矛盾体, 一般对字符串类型数据, 长度为 20 的索引, 区分度会高达 90% 以上,
- 可以使用 count(distinct left(列名, 索引长度))/count(*) 的区分度来确定。
-
页面搜索严禁左模糊或者全模糊, 如果需要请使用搜索引擎来解决。
- 索引文件具有 B-Tree 的最左前缀匹配特性, 如果左边的值未确定, 那么无法使用此索引。
推荐
-
如果有 order by 的场景, 请注意利用索引的有序性。 order by 最后的字段是组合索引的一部分,
- 并且放在索引组合顺序的最后, 避免出现 file_sort 的情况, 影响查询性能。
- 正例:
where a = ? and b = ? order by c;
索引: a_b_c - 反例: 索引中有范围查找, 那么索引有序无法利用, 如: WHERE a > 10 order by b; 索引 a_b 无法排序.
-
利用覆盖索引来进行查询操作, 来避免回表操作。
- 如果一本书需要知道第 11 章是什么标题, 会翻开第 11 章对应的那一页吗? 目录浏览一下就好, 这个目录就是起到覆盖索引的作用.
- 能够建立索引的种类: 主键索引、唯一索引、普通索引, 而覆盖索引是一种查询的一种效果, 用 explain 的结果, extra 列会出现: using index 。
- 覆盖索引是select的数据列只用从索引中就能够取得, 不必读取数据行, 换句话说查询列要被所建的索引覆盖。
- 理解方式一: 索引是高效找到行的一个方法, 但是一般数据库也能使用索引找到一个列的数据, 因此它不必读取整个行。毕竟索引叶子节点存储了它们索引的数据; 当能通过读取索引就可以得到想要的数据, 那就不需要读取行了。一个索引包含了(或覆盖了)满足查询结果的数据就叫做覆盖索引
- 理解方式二: 是非聚集复合索引的一种形式, 它包括在查询里的Select、Join和Where子句用到的所有列(即建索引的字段正好是覆盖查询条件中所涉及的字段, 也即, 索引包含了查询正在查找的数据)。
-
利用延迟关联或者子查询优化超多分页场景。
- MySQL 并不是跳过 offset 行, 而是取 offset + N 行, 然后返回放弃前 offset 行, 返回 N 行, 那当 offset 特别大的时候, 效率就非常的低下, 要么控制返回的总页数, 要么对超过特定阈值的页数进行 SQL 改写.
- 正例: 先快速定位需要获取的id段, 然后再关联:
- select a.* from table_a a, (select id from table_a where 条件 limit 100000, 20) b where a.id = b.id
-
SQL 性能优化的目标: 至少要达到 range 级别, 要求是 ref 级别, 如果可以是 consts最好。
- consts 单表中最多只有一个匹配行 ( 主键或者唯一索引 ) , 在优化阶段即可读取到数据。
- ref 指的是使用普通的索引 (normal index) 。
- range 对索引进行范围检索。
- 反例: explain 表的结果, type = index , 索引物理文件全扫描, 速度非常慢, 这个 index 级别比较 range 还低, 与全表扫描是小巫见大巫。
-
建组合索引的时候, 区分度最高的在最左边。
- 正例: 如果
where a = ? and b = ?
, a 列的几乎接近于唯一值, 那么只需要单建 idx_a 索引即可。 - 存在非等号和等号混合判断条件时, 在建索引时, 请把等号条件的列前置。
- 如:
where a > ? and b = ?
那么即使 a 的区分度更高, 也必须把 b 放在索引的最前列。
- 正例: 如果
-
防止因字段类型不同造成的隐式转换, 导致索引失效.
-
创建索引时避免有如下极端误解:
- 宁缺毋滥. 认为一个查询就需要建一个索引。
- 宁缺毋滥. 认为索引会消耗空间、严重拖慢更新和新增速度。
- 抵制惟一索引. 认为业务的惟一性一律需要在应用层通过 “先查后插” 方式解决。
SQL规约
强制
-
不要使用 count(列名) 或 count(常量) 来替代 count(*), count( * ) 就是 SQL 92 定义的标准统计行数的语法, 跟数据库无关, 跟 NULL 和非 NULL 无关。
- count( * ) 会统计值为 NULL 的行, 而 count(列名) 不会统计此列为 NULL 值的行。
-
count(distinct col) 计算该列除 NULL 之外的不重复行数。注意 count(distinct col1, col2) 如果其中一列全为 NULL, 那么即使另一列有不同的值, 也返回为 0。
-
当某一列的值全是 NULL 时, count(col) 的返回结果为 0, 但 sum(col) 的返回结果为NULL , 因此使用 sum() 时需注意 NPE 问题。
- 正例: 可以使用如下方式来避免 sum 的 NPE 问题:
SELECT IF(ISNULL(SUM(g)) ,0, SUM(g))FROM table;
- 正例: 可以使用如下方式来避免 sum 的 NPE 问题:
-
使用 ISNULL() 来判断是否为 NULL 值。注意: NULL 与任何值的直接比较都为 NULL。
表达式 返回值 NULL<>NULL NULL 而不是 false NULL=NULL NULL 而不是 true NULL<>1 NULL 而不是 true -
在代码中写分页查询逻辑时, 若 count 为 0 应直接返回, 避免执行后面的分页语句。
-
不得使用外键与级联, 一切外键概念必须在应用层解决。
- 说明: 以学生和成绩的关系为例, 学生表中的 student_id 是主键, 那么成绩表中的 student_id 则为外键。
- 如果更新学生表中的 student_id , 同时触发成绩表中的 student_id 更新, 则为级联更新。
- 外键与级联更新适用于单机低并发, 不适合分布式、高并发集群; 级联更新是强阻塞, 存在数据库更新风暴的风险;
- 并且外键影响数据库的插入速度。
- 说明: 以学生和成绩的关系为例, 学生表中的 student_id 是主键, 那么成绩表中的 student_id 则为外键。
-
禁止使用存储过程, 存储过程难以调试和扩展, 更没有移植性。
-
数据订正时, 删除和修改记录时, 要先 select, 避免出现误删除, 确认无误才能执行更新语句。
推荐
-
in 操作能避免则避免, 若实在避免不了, 需要仔细评估 in 后边的集合元素数量, 控制在 1000 个之内。
-
如果有全球化需要, 所有的字符存储与表示, 均以 utf-8 编码, 注意字符统计函数的区别
- 注意:
- SELECT LENGTH( “轻松工作” ); 返回为 12
- SELECT CHARACTER _ LENGTH( “轻松工作” ); 返回为 4
- 如果需要存储表情, 那么使用 utfmb4(这才是真正的UTF-8) 来进行存储, MySQL 的 utf-8 编码只能存放3字节的字符
- 注意:
-
TRUNCATE TABLE 比 DELETE 速度快, 且使用的系统和事务日志资源少, 但 TRUNCATE 无事务且不触发 trigger, 有可能造成事故, 故不建议在开发代码中使用此语句。
- TRUNCATE TABLE 在功能上与不带 WHERE 子句的 DELETE 语句相同。
ORM映射
强制
-
在表查询中, 一律不要使用 * 作为查询的字段列表, 需要哪些字段必须明确写明。
- 增加查询分析器解析成本。
- 增减字段容易与 resultMap 配置不一致。
-
POJO 类的 boolean 属性不能 is 开头, 而数据库字段必须加 is_, 要求在 resultMap 中进行字段与属性之间的映射。
- 参见定义POJO类以及数据库字段定义的规定, 在
<resultMap>
中增加映射是必须的, 在 Mybatis Generator 生成的代码中, 需要进行对应的修改.
- 参见定义POJO类以及数据库字段定义的规定, 在
-
不要用 resultClass 当返回参数, 即使所有类属性名与数据库字段一一对应, 也需要定义; 反过来, 每一个表也必然有一个与之对应。
- 说明: 配置映射关系, 使字段与DO类解耦, 方便维护.
-
sql.xml
配置中参数注意使用: #{}, #param# 不要使用 ${} 此种方式容易出现 SQL 注入。 -
iBATIS 自带的 queryForList(String statementName , int start , int size) 不推荐使用。
- 其实现方式是在数据库取到 statementName 对应的SQL语句的所有记录, 再通过 subList 取 start, size 的子集合 线上因为这个原因曾经出现过 OOM
- 正例:
- Map<String, Object> map = new HashMap<String, Object>();
- map.put(“start”, start);
- map.put(“size”, size);
-
不允许直接拿 HashMap 与 Hashtable 作为查询结果集的输出。
- resultClass=“Hashtable”, 会置入字段名和属性值, 但是值的类型不可控
-
更新数据表记录时, 必须同时更新记录对应的 gmt_modified 字段值为当前时间。
推荐
-
不要写一个大而全的数据更新接口, 传入为 POJO 类, 不管是不是自己的目标更新字段,
- 都进行
update table set c1=value1,c2=value2,c3=value3;
- 这是不对的。执行 SQL时, 尽量不要更新无改动的字段, 一是易出错; 二是效率低 ; 三是 binlog 增加存储。
- 都进行
-
@Transactional 事务不要滥用。事务会影响数据库的 QPS, 另外使用事务的地方需要考虑各方面的回滚方案,
- 包括缓存回滚、搜索引擎回滚、消息补偿、统计修正等。
-
<isEqual>
中的 compareValue 是与属性值对比的常量, 一般是数字, 表示相等时带上此条件;<isNotEmpty>
表示不为空且不为 null 时执行 ;<isNotNull>
表示不为 null 值时执行。
工程规约
应用分层
推荐
- 图中默认上层依赖于下层, 箭头关系表示可直接依赖, 如: 开放接口层可以依赖于Web 层, 也可以直接依赖于 Service 层, 依此类推:
- 开放接口层: 可直接封装 Service 接口暴露成 RPC(Remote Procedure Calls) 接口; 通过 Web 封装成 http 接口; 进行网关安全控制, 流量控制等.
- 终端显示层: 各个端的模板渲染并执行显示的层。当前主要是 Velocity 渲染, JS 渲染, JSP 渲染, 移动端展示层等。
- Web 层: 主要是对访问控制进行转发, 各类基本参数校验, 或者不复用的业务简单处理等。
- Service 层: 相对具体的业务逻辑服务层。
- Manager 层: 通用业务处理层, 它有如下特征:
- 对第三方平台封装的层, 预处理返回结果及转化异常信息 ;
- 对 Service 层通用能力的下沉, 如缓存方案、中间件通用处理 ;
- 与 DAO 层交互, 对 DAO 的业务通用能力的封装, 对多个 DAO 的组合复用
- DAO 层: 数据访问层, 与底层 MySQL、Oracle、 Hbase 等进行数据交互。
- 外部接口或第三方平台: 包括其它部门 RPC 开放接口, 基础平台, 其它公司的 HTTP 接口。
参考
-
分层异常处理规约 在 DAO 层, 产生的异常类型有很多, 无法用细粒度异常进行catch, 使用 catch(Exception e) 方式, 并 throw new DAOException(e), 不需要打印日志,
- 因为日志在 Manager/Service 层一定需要捕获并打到日志文件中去, 如果同台服务器再打日志, 浪费性能和存储。
- 在 Service 层出现异常时, 必须记录出错日志信息到磁盘, 尽可能带上必要的参数信息(能够描述出场景的大致状态), 相当于保护案发现场。
- 如果 Manager 层与 Service 同机部署, 日志方式与 DAO 层处理一致; 如果是单独部署, 则采用与 Service 一致的处理方式。
- Web 层绝不应该继续往上抛异常, 因为已经处于顶层, 无继续处理异常的方式, 如果意识到这个异常将导致页面无法正常渲染, 那么就应该直接跳转到友好错误页面, 尽量加上友好的错误提示信息。
- 开放接口层要将异常处理成错误码和错误信息方式返回。
-
分层领域模型规约:
缩写 名称 作用 DO Data Object 与数据库表结构一一对应, 通过DAO层向上传输数据源对象 DTO Data Transfer Object 数据传输对象, Service或Manager向外传输的对象 BO Business Object 由Service层输出的封装业务逻辑的对象 AO Application Object 应用对象, 在Web层与Service层之间抽象的复用对象模型, 极为贴近展示层, 复用度不高 VO View Object 显示层对象, 通常是Web向模板引擎传输的对象 Qurey 数据查询对象, 各层接收上层的查询请求, 注意超过2个参数的查询封装, 禁止使用Map类来传输
二方库依赖
强制
-
定义 GAV 遵从以下规则:
- GroupID 格式:
com.{公司/BU}.业务线.[子业务线]
, 最多 4 级。- {公司/BU} 例如: alibaba/taobao/tmall/aliexpress 等 BU; 子业务线可选。
- 正例: com.taobao.jstorm 或 com.alibaba.dubbo.register
- ArtifactID 格式: 产品线名-模块名。语义不重复不遗漏, 先到仓库中心去查证一下。
- 正例: dubbo-client / fastjson-api / jstorm-tool
- Version : 详细规定参考下方。
- GroupID 格式:
-
二方库版本号命名方式: 主版本号.次版本号.修订号
- 主版本号: 产品方向改变, 或者大规模API不兼容, 或者架构不兼容升级.
- 次版本号: 保持相对兼容性, 增加主要功能特性, 影响范围极小的API不兼容修改.
- 修订号: 保持完全兼容性, 修复 bug, 新增次要功能特性等
- 说明: 注意起始版本号必须为: 1.0.0 , 而不是 0.0.1, 正式发布的类库必须先去中央仓库进行查证, 使版本号有延续性, 正式版本号不允许覆盖升级
- 如当前版本 1.3.3 那么下一个合理的版本号 1.3.4 或者 1.4.0 或 2.0.0
-
线上应用不要依赖 SNAPSHOT 版本(安全包除外);
- 不依赖 SNAPSHOT 版本是保证应用发布的幂等性. 另外, 也可以加快编译时的打包构建.
-
二方库的新增或升级, 保持除功能点之外的其它 jar 包仲裁结果不变。
- 如果有改变, 必须明确评估和验证, 建议进行 dependency:resolve 前后信息比对,
- 如果仲裁结果完全不一致, 那么通过 dependency:tree 命令, 找出差异点, 进行
<excludes>
排除 jar 包。
-
二方库里可以定义枚举类型, 参数可以使用枚举类型, 但是接口返回值不允许使用枚举类型或者包含枚举类型的 POJO 对象。
-
依赖于一个二方库群时, 必须定义一个统一版本变量, 避免版本号不一致。
- 说明: 依赖 springframework-core, -context, -beans, 它们都是同一个版本
- 可以定义一个变量来保存版本: ${spring.version}, 定义依赖的时候, 引用该版本。
-
禁止在子项目的 pom 依赖中出现相同的 GroupId , 相同的 ArtifactId , 但是不同的Version 。
- 在本地调试时会使用各子项目指定的版本号, 但是合并成一个war, 只能有一个版本号出现在最后的lib目录中, 可能出现线下调试是正确的, 发布到线上却出故障的问题.
推荐
-
所有 pom 文件中的依赖声明放在
<dependencies>
语句块中, 所有版本仲裁放在<dependencyManagement>
语句块中。<dependencyManagement>
里只是声明版本, 并不实现引入, 因此子项目需要显式的声明依赖, version 和 scope 都读取自父 pom 。- 而
<dependencies>
所有声明在主 pom 的<dependencies>
里的依赖都会自动引入, 并默认被所有的子项目继承。
-
二方库不要有配置项, 最低限度不要再增加配置项。
参考
- 为避免应用二方库的依赖冲突问题, 二方库发布者应当遵循以下原则:
- 精简可控原则 移除一切不必要的 API 和依赖, 只包含 Service API、必要的领域模型对象、 Utils类、常量、枚举等。
- 如果依赖其它二方库, 尽量是 provided 引入, 让二方库使用者去依赖具体版本号; 无 log 具体实现的依赖, 只依赖日志框架(例如不依赖Logback而是依赖SLF4J)。
- 稳定可追溯原则 每个版本的变化应该被记录, 二方库由谁维护, 源码在哪里, 都需要能方便查到。除非用户主动升级版本, 否则公共二方库的行为不应该发生变化。
- 精简可控原则 移除一切不必要的 API 和依赖, 只包含 Service API、必要的领域模型对象、 Utils类、常量、枚举等。
服务器规约
推荐
-
高并发服务器建议调小 TCP 协议的 time_wait 超时时间。
- 说明: 操作系统默认 240 秒后, 才会关闭处于 time_wait 状态的连接, 在高并发访问下, 服务器端会因为处于 time_wait 的连接数太多,可能无法建立新的连接, 所以需要在服务器上调小此等待值。
- 正例: 在 linux 服务器上请通过变更
/etc/sysctl.conf
文件去修改该缺省值 ( 秒 )net.ipv4.tcp_fin_timeout = 30
-
调大服务器所支持的最大文件句柄数 (File Descriptor, 简写为 fd) 。
- 说明: 主流操作系统的设计是将 TCP/UDP 连接采用与文件一样的方式去管理, 即一个连接对应于一个 fd 。
- 主流的 linux 服务器默认所支持最大 fd 数量为 1024, 当并发连接数很大时很容易因为 fd 不足而出现“ open too many files ”错误, 导致新的连接无法建立。
- 建议将 linux服务器所支持的最大句柄数调高数倍 (与服务器的内存数值相关)
- 说明: 主流操作系统的设计是将 TCP/UDP 连接采用与文件一样的方式去管理, 即一个连接对应于一个 fd 。
-
给 JVM 设置
-XX:+HeapDumpOnOutOfMemoryError
参数, 让 JVM 碰到 OOM 场景时输出dump 信息。- OOM 的发生是有概率的, 甚至有规律地相隔数月才出现一例, 出现时的现场信息对查错非常有价值。
-
在线上生产环境, JVM 的 Xms 和 Xmx 设置一样的内存容量, 避免在GC后调整堆大小带来的压力
-
服务器内部重定向使用 forward; 外部重定向地址使用 URL 拼装工具类来生成, 否则会带来 URL 维护不一致的问题和潜在的安全风险。
专有名词
-
POJO (Plain Ordinary Java Object): 在手册中, POJO专指只有 setter/getter/toString 的简单类, 包括 DO/DTO/BO/VO等.
-
GAV (GroupId, AritifactId, Version): Maven 坐标, 是用来唯一标识 jar 包.
-
OOP(Object Oriented Programming): 泛指类,对象的编程处理方式
-
ORM(Object Relation Mapping): 对象关系映射, 对象领域模型与底层数据之间的转换, 本文泛指 iBATIS Mybatis 等框架
-
NPE(java.lang.NullPointerException): 空指针异常
-
SOA(Service-Oriented Architecture): 面向服务架构, 它可以根据需求通过网络对松散耦合的粗粒度应用组件进行分布式部署, 组合和使用, 有利于提升组件可重用性, 可维护性.
-
一方库: 本工程内部子项目模块依赖的库 jar包
-
二方库: 公司内部发布到中央仓库, 可供公司内部其他应用依赖的库 jar包
-
三方库: 公司之外的开源库 jar包
Author Kuangcp
LastMod 2018-12-20