追踪解析Gson源码(1)

时间 2021-02-14

标签 html java sql json api ide 工具源码分析 this 栏目 HTML 繁體版

原文原文链接

零前期准备

0 FBI WARNING

文章异常啰嗦且绕弯。html

1 版本

Gson 版本 : gson 2.8.5java

IDE : idea 2018.3sql

2 Gson 简介

Gson 是谷歌开源的 java json 解析工具。市场上同类的开源产品还有 Fastjson、Jackson、json-lib等。json

其实几款产品的差异都很细微，Gson 有谷歌的信仰加成，因此在这里进行一次源码分析。api

3 Bean Demo

package ioc;

/**
 * java bean
 */
public class Person {

    private String name;
    private Integer age;

    public String getName() {
        return name;
    }

    public void setName(String name) {
        this.name = name;
    }

    public Integer getAge() {
        return age;
    }

    public void setAge(Integer age) {
        this.age = age;
    }
}

4 main方法

import com.google.gson.Gson;

public class JsonTest {

    public static void main(String[] args){
        //示例 json 字符串
        String json =
                "{" +
                "   \"name\": \"zhangsan\"," +
                "   \"age\": 11" +
                "}";

        //初始化解析器
        Gson gson = new Gson();

        //json to bean
        Person person = gson.fromJson(json,Person.class);
        System.out.println(person.getName());
        System.out.println(person.getAge());

        //bean to json
        String json2 = gson.toJson(person);
        System.out.println(json2);
    }
}

一初始化 Gson 解析器

1 Gson 构造方法

该 part 的起点：ide

Gson gson = new Gson();

追踪 Gson 的无参构造器：工具

//Gson.class
public Gson() {
    this(Excluder.DEFAULT, FieldNamingPolicy.IDENTITY,
        Collections.<Type, InstanceCreator<?>>emptyMap(), DEFAULT_SERIALIZE_NULLS,
        DEFAULT_COMPLEX_MAP_KEYS, DEFAULT_JSON_NON_EXECUTABLE, DEFAULT_ESCAPE_HTML,
        DEFAULT_PRETTY_PRINT, DEFAULT_LENIENT, DEFAULT_SPECIALIZE_FLOAT_VALUES,
        LongSerializationPolicy.DEFAULT, null, DateFormat.DEFAULT, DateFormat.DEFAULT,
        Collections.<TypeAdapterFactory>emptyList(), Collections.<TypeAdapterFactory>emptyList(),
        Collections.<TypeAdapterFactory>emptyList());
}

继续追踪：源码分析

//Gson.class
Gson(final Excluder excluder, final FieldNamingStrategy fieldNamingStrategy,
    final Map<Type, InstanceCreator<?>> instanceCreators, boolean serializeNulls,
    boolean complexMapKeySerialization, boolean generateNonExecutableGson, boolean htmlSafe,
    boolean prettyPrinting, boolean lenient, boolean serializeSpecialFloatingPointValues,
    LongSerializationPolicy longSerializationPolicy, String datePattern, int dateStyle,
    int timeStyle, List<TypeAdapterFactory> builderFactories,
    List<TypeAdapterFactory> builderHierarchyFactories,
    List<TypeAdapterFactory> factoriesToBeAdded) {
    
    //排除器，在序列化对象的时候会根据使用者设置的规则排除一些数据
    //排除策略须要使用者自行实现 ExclusionStrategy 接口来制定
    this.excluder = excluder;

    //fieldNamingStrategy 负责命名规则的肯定(好比 大驼峰命名、小驼峰命名、下划线命名 等)
    //选择不一样的 fieldNamingStrategy 会在输出 json 字符串的时候把字段名称转成不一样的命名形式
    //此处的值能够直接选择 FieldNamingPolicy 枚举类中的已经存储的策略，也能够自行实现 FieldNamingStrategy 接口
    //此处默认为 FieldNamingPolicy.IDENTITY，即不改变
    this.fieldNamingStrategy = fieldNamingStrategy;

    //instanceCreators 是一个用来存储实现了 InstanceCreator 接口的对象的 map
    //每个 InstanceCreator 的实现类用来反射获取一种特定类型的 bean 对象
    //InstanceCreator 在 Gson 中没有实现类，使用者能够自行定制
    //此处为空 map
    this.instanceCreators = instanceCreators;

    //ConstructorConstructor 用来统一调度 instanceCreators
    this.constructorConstructor = new ConstructorConstructor(instanceCreators);

    //serializeNulls 是一个 boolean 类型的对象，用以表示是否支持空对象的序列化
    //此处传入的是 DEFAULT_SERIALIZE_NULLS，值为 false，是一个定义在 Gson 中的常量
    this.serializeNulls = serializeNulls;

    //将 Map 序列化的过程当中，会存在一个问题，即 Map 的 key 值是一个复杂对象(java bean 等)
    //若是 complexMapKeySerialization 设置为 false，则直接调用对象的 toString() 方法获取字符串
    //设置为 true 的状况下会去尝试解析此对象，通常状况下要配合特定的 TypeAdapter 使用
    //默认为 false
    this.complexMapKeySerialization = complexMapKeySerialization;

    //是否要生成不可执行的 json
    //默认为 false
    this.generateNonExecutableJson = generateNonExecutableGson;

    //是否对 html 进行编码，即对部分符号进行转义(=、<、> 等)
    //默认为 true
    this.htmlSafe = htmlSafe;

    //在输出的时候格式化 json
    //默认为 false
    this.prettyPrinting = prettyPrinting;

    //设置 json 的自定义标准
    //默认 false ，即为 json 标准的数据格式
    this.lenient = lenient;

    //用于支持 float 类型的特殊值，好比 Infinity(无穷大) 或 -Infinity(负无穷大) 等
    //默认为 false
    this.serializeSpecialFloatingPointValues = serializeSpecialFloatingPointValues;

    //设置对 long 类型的变量，是解析成字符串仍是解析为 long 类型
    //默认为解析成 long 类型
    this.longSerializationPolicy = longSerializationPolicy;

    //如下三行用于设置日期格式和时间格式
    //datePattern 是日期和时间的字符串格式表达，在此处为 null
    //dateStyle 与 timeStyle 为日期和时间格式的编码
    //以 int 常量形式存放在 java.text.DateFormat 中
    //此处均为默认值
    //须要注意的是默认状况下 Gson 的日期解析不太符合国人的习惯
    this.datePattern = datePattern;
    this.dateStyle = dateStyle;
    this.timeStyle = timeStyle;

    //此处为空
    this.builderFactories = builderFactories;

    //此处为空
    this.builderHierarchyFactories = builderHierarchyFactories;

    //TypeAdapter 是一个接口，用于序列化和反序列化某种特定的类型
    //TypeAdapterFactory 是 TypeAdapter 的包装类
    List<TypeAdapterFactory> factories = new ArrayList<TypeAdapterFactory>();

    //TypeAdapters 是 TypeAdapter 和 TypeAdapterFactory 的通用工具类
    //处理 JsonElement 类型对象的 TypeAdapterFactory
    //JsonElement 是 Gson 工具包中的一个类
    factories.add(TypeAdapters.JSON_ELEMENT_FACTORY);

    //处理 Object 类型对象的 TypeAdapterFactory
    factories.add(ObjectTypeAdapter.FACTORY);

    //excluder 是一个省略了类型的 TypeAdapterFactory
    //根据官方注释，excluder 须要先于全部使用者自定义的 TypeAdapterFactory 去执行
    factories.add(excluder);

    //使用者自定义的 TypeAdapterFactory
    factories.addAll(factoriesToBeAdded);

    //处理 String 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.STRING_FACTORY);

    //处理 Integer / int 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.INTEGER_FACTORY);

    //处理 Boolean / boolean 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.BOOLEAN_FACTORY);

    //处理 Byte / byte 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.BYTE_FACTORY);

    //处理 Short / short 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.SHORT_FACTORY);

    //处理 Long / long 类型对象的 TypeAdapterFactory
    TypeAdapter<Number> longAdapter = longAdapter(longSerializationPolicy);
    factories.add(TypeAdapters.newFactory(long.class, Long.class, longAdapter));

    //处理 Double / double 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(double.class, Double.class,
            doubleAdapter(serializeSpecialFloatingPointValues)));

    //处理 Float / float 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(float.class, Float.class,
            floatAdapter(serializeSpecialFloatingPointValues)));

    //处理 Number 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.NUMBER_FACTORY);

    //处理 AtomicInteger 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.ATOMIC_INTEGER_FACTORY);

    //处理 AtomicBoolean 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.ATOMIC_BOOLEAN_FACTORY);

    //处理 AtomicBoolean 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(AtomicLong.class, atomicLongAdapter(longAdapter)));

    //处理 AtomicLongArray 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(AtomicLongArray.class, atomicLongArrayAdapter(longAdapter)));

    //处理 AtomicIntegerArray 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.ATOMIC_INTEGER_ARRAY_FACTORY);

    //处理 Character / char 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.CHARACTER_FACTORY);

    //处理 StringBuilder 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.STRING_BUILDER_FACTORY);

    //处理 StringBuffer 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.STRING_BUFFER_FACTORY);

    //处理 BigDecimal 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(BigDecimal.class, TypeAdapters.BIG_DECIMAL));

    //处理 BigInteger 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.newFactory(BigInteger.class, TypeAdapters.BIG_INTEGER));

    //处理 URL 类型对象的 TypeAdapterFactory
    //java.net.URL
    factories.add(TypeAdapters.URL_FACTORY);

    //处理 URI 类型对象的 TypeAdapterFactory
    //java.net.URI
    factories.add(TypeAdapters.URI_FACTORY);

    //处理 UUID 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.UUID_FACTORY);

    //处理 Currency 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.CURRENCY_FACTORY);

    //处理 Locale 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.LOCALE_FACTORY);

    //处理 InetAddress 类型对象的 TypeAdapterFactory
    //java.net.InetAddress
    factories.add(TypeAdapters.INET_ADDRESS_FACTORY);

    //处理 BitSet 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.BIT_SET_FACTORY);

    //处理 Date 类型对象的 TypeAdapterFactory
    //java.util.Date
    factories.add(DateTypeAdapter.FACTORY);

    //处理 Calendar 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.CALENDAR_FACTORY);

    //处理 Time 类型对象的 TypeAdapterFactory
    factories.add(TimeTypeAdapter.FACTORY);

    //处理 Date 类型对象的 TypeAdapterFactory
    //java.sql.Date
    factories.add(SqlDateTypeAdapter.FACTORY);

    //处理 Timestamp 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.TIMESTAMP_FACTORY);

    //处理 Array 类型对象的 TypeAdapterFactory
    factories.add(ArrayTypeAdapter.FACTORY);

    //处理 Class 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.CLASS_FACTORY);

    //处理 Collection 类型对象的 TypeAdapterFactory
    factories.add(new CollectionTypeAdapterFactory(constructorConstructor));

    //处理 Map 类型对象的 TypeAdapterFactory
    //会受到 complexMapKeySerialization 的影响
    factories.add(new MapTypeAdapterFactory(constructorConstructor, complexMapKeySerialization));

    //处理 JsonAdapter 类型对象的 TypeAdapterFactory
    //JsonAdapter 是一个 Gson 中的注解
    this.jsonAdapterFactory = new JsonAdapterAnnotationTypeAdapterFactory(constructorConstructor);
    factories.add(jsonAdapterFactory);

    //处理 Enum 类型对象的 TypeAdapterFactory
    factories.add(TypeAdapters.ENUM_FACTORY);

    //反射分解对象的 TypeAdapterFactory
    factories.add(new ReflectiveTypeAdapterFactory(
        constructorConstructor, fieldNamingStrategy, excluder, jsonAdapterFactory));

    this.factories = Collections.unmodifiableList(factories);
}

从这里能够看出，Gson 的初始化时期提供了很是丰富的设置选项。ui

2 GsonBuilder

设置 Gson 的这些选项须要经过 GsonBuilder ：this

Gson gson = new GsonBuilder()

    //如下方法均为设置 excluder
    //设置版本号
    .setVersion(1)
    //设置忽略某种修饰词修饰的变量
    //此处忽略 protected 修饰的变量
    .excludeFieldsWithModifiers(Modifier.PROTECTED)
    //设置使用 Expose 注解，用于忽略某个字段
    //默认状况下是不使用 Expose 注解的
    .excludeFieldsWithoutExposeAnnotation()
    //设置不序列化内部类
    .disableInnerClassSerialization()
    //批量添加序列化时使用的排除策略
    //此方法为不定参方法
    .setExclusionStrategies(exclusionStrategy)
    //添加一个序列化时使用的排除策略
    .addSerializationExclusionStrategy(exclusionStrategy)
    //添加一个反序列化时使用的排除策略
    .addDeserializationExclusionStrategy(exclusionStrategy)

    //本质上如下三个方法均为设置 TypeAdapter
    .registerTypeAdapter(String.class, TypeAdapters.STRING)
    .registerTypeAdapterFactory(TypeAdapters.STRING_FACTORY)
    .registerTypeHierarchyAdapter(String.class, TypeAdapters.STRING)

    //设置 dateStyle、datePattern、timeStyle
    .setDateFormat("yyyy-MM-dd HH:mm:ss")
    .setDateFormat(DateFormat.DATE_FIELD)
    .setDateFormat(DateFormat.DATE_FIELD,DateFormat.AM_PM_FIELD)

    //如下两个方法本质上是同样的，均为设置 fieldNamingPolicy 属性
    .setFieldNamingPolicy(FieldNamingPolicy.IDENTITY)
    .setFieldNamingStrategy(FieldNamingPolicy.IDENTITY)

    //设置 complexMapKeySerialization = true
    .enableComplexMapKeySerialization()

    //设置 longSerializationPolicy = LongSerializationPolicy.STRING
    //即 long 类型的数据在序列化的时候会转成 String
    .setLongSerializationPolicy(LongSerializationPolicy.STRING)

    //设置 serializeNulls = true
    .serializeNulls()

    //设置 prettyPrinting = true
    .setPrettyPrinting()

    //设置 generateNonExecutableJson = true
    .generateNonExecutableJson()

    //设置 lenient = true
    .setLenient()

    //设置 escapeHtmlChars = false
    .disableHtmlEscaping()

    //设置 serializeSpecialFloatingPointValues = true
    .serializeSpecialFloatingPointValues()

    //建立解析器对象
    .create();

3 Excluder

在上述设置中，有一大块是关于排除器 excluder 的设置。excluder 的实现逻辑依赖 ExclusionStrategy 的自定义实现类，追踪一下 ExclusionStrategy 接口：

//实现 
public interface ExclusionStrategy {

    //设置忽略的变量，须要传入 FieldAttributes
    //FieldAttributes 是在 Gson 中定义的 Field 的包装类
    public boolean shouldSkipField(FieldAttributes f);

    //设置要忽略的 class
    public boolean shouldSkipClass(Class<?> clazz);
}

fieldNamingPolicy 则须要 FieldNamingStrategy 的自定义实现类，追踪一下 FieldNamingStrategy 接口：

public interface FieldNamingStrategy {

  //在这个方法中实现自定义的命名规则
  public String translateName(Field f);
}

FieldNamingPolicy 是一个实现了 FieldNamingStrategy 接口的枚举类，其中实现了多套 translateName(...) 方法可供选择。

二 TypeAdapter 和 TypeAdapterFactory

在 Gson 中封装了不一样类型的读写的业务组装类是各个 TypeAdapter(适配器)，这里先来关注一下其具体实现。

1 父类与接口

先来看一下 TypeAdapterFactory 接口：

public interface TypeAdapterFactory {

  //只有一个方法，用于根据解析器和变量类型来建立 TypeAdapter
  <T> TypeAdapter<T> create(Gson gson, TypeToken<T> type);
}

再来看一下 TypeAdapter 抽象类：

public abstract class TypeAdapter<T> {

    //写入方法，主要的指挥 JsonWriter 进行业务处理
    public abstract void write(JsonWriter out, T value) throws IOException;

    //读取方法，主要是指挥 JsonReader 进行业务操做
    public abstract T read(JsonReader in) throws IOException;

    //该抽象类中还提供了其它的方法，在此例中没有用到，暂时忽略
}

2 StringTypeAdapter

关注一下下列这行代码：

factories.add(TypeAdapters.STRING_FACTORY);

factories 是一个列表，来追踪一下 TypeAdapters.STRING_FACTORY ：

//TypeAdapters.class
public static final TypeAdapterFactory STRING_FACTORY = newFactory(String.class, STRING);

先来看一下定义在 TypeAdapters 中的 STRING 变量：

//TypeAdapters.class
public static final TypeAdapter<String> STRING = new TypeAdapter<String>() {

    //此方法用于反序列化时读取值
    @Override
    public String read(JsonReader in) throws IOException {

        //in.peek() 方法会获取到最新的 JsonReader 操做指令，并转换成下一个要操做的字符类型
        //在后面的 part 里还会提到
        JsonToken peek = in.peek();

        //读取到 null
        if (peek == JsonToken.NULL) { 
            in.nextNull();
            return null;
        }

        //读取到 boolean 类型的值
        if (peek == JsonToken.BOOLEAN) { 
            return Boolean.toString(in.nextBoolean());
        }

        //除了 null 和 boolean 以外，都视做 String 进行返回
        return in.nextString(); 
    }

    //此方法用于序列化时写入值
    @Override
    public void write(JsonWriter out, String value) throws IOException {
        out.value(value);
    }
};

继续追踪 newFactory(...) 方法：

//TypeAdapters.class
public static <TT> TypeAdapterFactory newFactory(final Class<TT> type, final TypeAdapter<TT> typeAdapter) {

    return new TypeAdapterFactory() {

      @SuppressWarnings("unchecked") 
      @Override
      public <T> TypeAdapter<T> create(Gson gson, TypeToken<T> typeToken) {
          //typeToken.getRawType() 会获取到这个 TypeToken 所须要的
        return typeToken.getRawType() == type ? (TypeAdapter<T>) typeAdapter : null;
      }

      //常规的从新 toString() 方法
      @Override
      public String toString() {
        return "Factory[type=" + type.getName() + ",adapter=" + typeAdapter + "]";
      }
    };
}

从这里能够看出，TypeAdapterFactory 本质上只是 TypeAdapter 的包装类，只是作一个类型的断定工做，若是断定为相同，就会返回传入的 TypeAdapter。

通常的类型的 TypeAdpter 的操做逻辑都比较相似，不赘述了。

2 ReflectiveTypeAdapter

对于通常的自定义类，好比使用者自定义的 java bean 等，并不是 jdk 自带的基本数据类型，就都须要 ReflectiveTypeAdapter 来进行解析。

先来看一下 ReflectiveTypeAdapterFactory 的 create() 方法：

//ReflectiveTypeAdapterFactory.class
public <T> TypeAdapter<T> create(Gson gson, final TypeToken<T> type) {
    Class<? super T> raw = type.getRawType();

    //要确保 type 中获取出来的 class 的类型是 Object 的子类
    //若是不是的话就表明这是基本类型，基本类型的解析不该该使用该适配器
    //因此返回 null
    if (!Object.class.isAssignableFrom(raw)) {
      return null;
    }
    
    //constructor 用于反射建立对象
    ObjectConstructor<T> constructor = constructorConstructor.get(type);

    //Adapter 是 ReflectiveTypeAdapterFactory 的静态内部类，继承了 TypeAdapter
    return new Adapter<T>(constructor, getBoundFields(gson, type, raw));
}

来继续追踪一下 Adapter 的主要方法：

public static final class Adapter<T> extends TypeAdapter<T> {

    //此处 read(...) 和 write(...) 的代码比较相似
    //主要步骤是经过反射建立出对象，并抓取其全部的变量，逐个存入

    public T read(JsonReader in) throws IOException {

        if (in.peek() == JsonToken.NULL) {
            in.nextNull();
            return null;
        }
        //调用构造器反射建立出对象
        T instance = constructor.construct();
        //如下代码是 Gson 读出字符串中的部分，并用反射填入到对象中的过程
        try {
            in.beginObject();
            while (in.hasNext()) {
                String name = in.nextName();
                //BoundField 是 Gson 对 jdk 中的 Field 类的加强
                BoundField field = boundFields.get(name);
                if (field == null || !field.deserialized) {
                    in.skipValue();
                } else {
                    field.read(in, instance);
                }
            }
        } catch (IllegalStateException e) {
            throw new JsonSyntaxException(e);
        } catch (IllegalAccessException e) {
            throw new AssertionError(e);
        }
        in.endObject();
        return instance;
    }

    public void write(JsonWriter out, T value) throws IOException {

        if (value == null) {
            out.nullValue();
            return;
        }

        out.beginObject();
        //如下是 Gson 从对象中获取到数据并写成字符串的过程
        try {
            for (BoundField boundField : boundFields.values()) {
                if (boundField.writeField(value)) {
                    out.name(boundField.name);
                    boundField.write(out, value);
                }
            }
        } catch (IllegalAccessException e) {
            throw new AssertionError(e);
        }
        out.endObject();
    }
}

具体的步骤实际上是对 java 反射的深度定制化应用，不展开了。

以上过程在 JsonReader 和 JsonWriter 的应用中会有相似展开。至于 JsonReader 和 JsonWriter 会在后续进行追踪。