假装是小白之重学MyBatis(二)

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 假装是小白之重学MyBatis(二)

前言

本篇我们来介绍MyBatis插件的开发,这个也是来源于我之前的一个面试经历,面试官为我如何统计Dao层的慢SQL,我当时的回答是借助于Spring的AOP机制,拦截Dao层所有的方法,但面试官又问,这事实上不完全是SQL的执行时间,这其中还有其他代码的时间,问我还有其他思路吗?我想了想说没有,面试官接着问,有接触过MyBatis插件的开发吗?我说没接触过。但后面也给我过了,我认为这个问题是有价值的问题,所以也放在了我的学习计划中。

看本篇之前建议先看:

  • 《代理模式-AOP绪论》
  • 《假装是小白之重学MyBatis(一)》

如果有人问上面两篇文章在哪里可以找的到,可以去掘金或者思否翻翻,目前公众号还没有,预计年中会将三个平台的文章统一一下。

概述

翻阅官方文档的话,MyBatis并没有给处插件的具体定义,但基本上还是拦截器,MyBatis的插件就是一些能够拦截某些MyBats核心组件方法,增强功能的拦截器。官方文档中列出了四种可供增强的切入点:

  • Executor

执行SQL的核心组件。拦截Executor 意味着要干扰或增强底层执行的CRUD操作

  • ParameterHandler

拦截该ParameterHandler,意味着要干扰SQL参数注入、读取的动作。

  • ResultSetHandler

拦截该ParameterHandler, 要干扰/增强封装结果集的动作

  • StatementHandler

拦截StatementHandler ,则意味着要干扰/增强Statement的创建和执行的动作

当然还是从HelloWorld开始

要做MyBatis的插件,首先要实现MyBatis的Interceptor 接口 , 注意类不要导错了,Interceptor很抢手,该类位于org.apache.ibatis.plugin.Interceptor下。实现该接口,MyBatis会将该实现类当作MyBatis的拦截器,那拦截哪些方法,该怎么指定呢? 通过**@Intercepts**注解来实现,下面是使用示例:

@Intercepts(@Signature(type = Executor.class, method = "query",
        args = {MappedStatement.class, Object.class, RowBounds.class, ResultHandler.class}))
public class MyBatisPluginDemo implements Interceptor {
    @Override
    public Object intercept(Invocation invocation) throws Throwable {
        System.out.println("into invocation ..........");
        System.out.println(invocation.getTarget());
        System.out.println(invocation.getMethod().getName());
        System.out.println(Arrays.toString(invocation.getArgs()));
        return invocation.proceed();
    }
}
@Intercepts可以填多个@Signature,@Signature是方法签名,type用于定位类,method定位方法名,args用于指定方法的参数类型。三者加在一起就可以定位到具体的方法。注意写完还需要将此插件注册到MyBatis的配置文件中,让MyBatis加载该插件。

注意这个标签一定要放在environments上面,MyBatis严格限制住了标签的顺序。

<plugins>
    <plugin interceptor="org.example.mybatis.MyBatisPluginDemo"></plugin>
</plugins>

我们来看下执行结果:

image.png

性能分析插件走起

那拦截谁呢?目前也只有Executor 和StatementHandler 供我们选择,我们本身是要看SQL耗时,Executor 离SQL执行还有些远,一层套一层才走到SQL执行,MyBatis中标签的执行过程在《MyBatis源码学习笔记(一) 初遇篇》已经讲述过了,这里不再赘述,目前来看StatementHandler 是离SQL最近的, 它的实现类就直接走到JDBC了,所以我们拦截StatementHandler ,那有的插入插了很多值,我们要不要拦截,当然也要拦截, 我们的插件方法如下:

@Intercepts({@Signature(type = StatementHandler.class, method = "query",
        args = {Statement.class, ResultHandler.class}), @Signature(type = StatementHandler.class,method =  "update" ,args = Statement.class )})
public class MyBatisSlowSqlPlugin implements Interceptor {
    @Override
    public Object intercept(Invocation invocation) throws Throwable {
        System.out.println("-----开始进入性能分析插件中----");
        long startTime = System.currentTimeMillis();
        Object result = invocation.proceed();
        long endTime = System.currentTimeMillis();
       // query方法入参是statement,所以我们可以将其转为Statement
        if (endTime - startTime > 1000){
        }
        return result;
    }
}

那对应的SQL该怎么拿?我们还是到StatementHandler去看下:

image.png

我们还是得通过Statement这个入参来拿, 我们试试看, 你会发现在日志级别为DEBUG之上,会输出SQL,像下面这样:

image.png

如果日志级别为DEBUG输出会是下面这样:

image.png

这是为什么呢?如果看过《MyBatis源码学习笔记(一) 初遇篇》这篇的可能会想到,MyBatis架构中的日志模块,为了接入日志框架,就会用到代理,那么这个肯定就是代理类,我们打断点来验证一下我们的想法:

image.png

代理分析

我原本的想法是PreparedStatementLogger的代理类,仔细一想,感觉不对,感觉自己还是对代理模式了解不大透,于是我就又把之前的文章《代理模式-AOP绪论》看了一下,动态代理模式的目标:

  • 我们有一批类,然后我们想在不改变它们的基础之上,增强它们, 我们还希望只着眼于编写增强目标对象代码的编写。
  • 我们还希望由程序来编写这些类,而不是由程序员来编写,因为太多了。

在《代理模式-AOP绪论》中我们做的是很简单的代理:

public interface IRentHouse {
    void rentHouse();
    void study();
}
public class RentHouse implements IRentHouse{
    @Override
    public void rentHouse() {
        System.out.println("sayHello.....");
    }
    @Override
    public void study() {
        System.out.println("say Study");
    }
}

我们现在的需求是增强IRentHouse中的方法,用静态代理就是为IRentHouse再做一个实现类,相当于在RentHouse上再包装一层。但如果我有很多想增强的类呢,这样去包装,事实上对代码的侵入性是很大的。对于这种状况,我们最终的选择是动态代理,在运行时产生接口实现类的代理类,我们最终产生代理对象的方法是:

/**
   * @param target 为需要增强的类
   * @return 返回的对象在调用接口中的任意方法都会走到Lambda回调中。
*/
private static  Object getProxy(Object  target){
        Object proxy = Proxy.newProxyInstance(target.getClass().getClassLoader(), target.getClass().getInterfaces(), (proxy1, method, args) -> {
            System.out.println("方法开始执行..........");
            Object obj = method.invoke(target, args);
            System.out.println("方法执行结束..........");
            return obj;
        });
        return proxy;
  }

接下来我们来看下MyBatis是怎么包装的,我们还是从PreparedStatementLogger开始看:

image.png

InvocationHandler是动态代理的接口,BaseJdbcLogger这个先不关注。值得关注的是:

public static PreparedStatement newInstance(PreparedStatement stmt, Log statementLog, int queryStack) {
  InvocationHandler handler = new PreparedStatementLogger(stmt, statementLog, queryStack);
  ClassLoader cl = PreparedStatement.class.getClassLoader();
  return (PreparedStatement) Proxy.newProxyInstance(cl, new Class[]{PreparedStatement.class, CallableStatement.class}, handler);
}

可能有同学会问newProxyInstance为什么给了两个参数, 因为CallableStatement继承了PreparedStatement。这里是一层,事实上还能点出来另外一层,在ConnectionLogger的回调中(ConnectionLogger也实现了InvocationHandler,所以这个也是个代理回调类),ConnectionLogger的实例化在BaseExecutor这个类里面完成,如果你还能回忆JDBC产生SQL的话,当时的流程事实上是这样的:

public static boolean execute(String sql, Object... param) throws Exception {
        boolean result = true;
        Connection connection = null;
        PreparedStatement preparedStatement = null;
        try {
            //获取数据库连接
            connection = getConnection();
            connection.setAutoCommit(false);
            preparedStatement = connection.prepareStatement(sql);
      // 设置参数 
            for (int i = 0; i < param.length; i++) {
                preparedStatement.setObject(i, param[i]);
                preparedStatement.addBatch();
            }
            preparedStatement.executeBatch();
            //提交事务
            connection.commit();
        } catch (SQLException e) {
            e.printStackTrace();
            if (connection != null) {
                try {
                    connection.rollback();
                } catch (SQLException ex) {
                    ex.printStackTrace();
                    // 日志记录事务回滚失败
                    result = false;
                    return result;
                }
            }
            result = false;
        } finally {
            close(preparedStatement, connection);
        }
        return result;
    }

我们来捋一下,ConnectionLogger是读Connection的代理,但是Connection接口中有许多方法, 所以ConnectionLogger在回调的时候做了判断:

@Override
public Object invoke(Object proxy, Method method, Object[] params)
    throws Throwable {
  try {
    if (Object.class.equals(method.getDeclaringClass())) {
      return method.invoke(this, params);
    }
    if ("prepareStatement".equals(method.getName()) || "prepareCall".equals(method.getName())) {
      if (isDebugEnabled()) {
        debug(" Preparing: " + removeExtraWhitespace((String) params[0]), true);
      }
      // Connection 的prepareStatement方法、prepareCall会产生PreparedStatement
      PreparedStatement stmt = (PreparedStatement) method.invoke(connection, params);
      // 然后PreparedStatementLogger产生的还是stmt的代理类
      // 我们在plugin中拿到的就是  
      stmt = PreparedStatementLogger.newInstance(stmt, statementLog, queryStack);
      return stmt;
    } else if ("createStatement".equals(method.getName())) {
      Statement stmt = (Statement) method.invoke(connection, params);
      stmt = StatementLogger.newInstance(stmt, statementLog, queryStack);
      return stmt;
    } else {
      return method.invoke(connection, params);
    }
  } catch (Throwable t) {
    throw ExceptionUtil.unwrapThrowable(t);
  }
}

image.png

PreparedStatementLogger是回调类,这个PreparedStatementLogger有对应的Statement,我们通过Statement就可以拿到对应的SQL。那回调类和代理类是什么关系呢, 我们来看下Proxy类的大致构造:

image.png

所以我最初的想法是JDK为我们产生的类里面有回调类实例这个对象会有InvocationHandler成员变量,但是如果你用getClass().getDeclaredField("h")去获取发现获取不到,那么代理类就没有这个回调类实例,那我们研究一下getProxyClass0这个方法:

private static Class<?> getProxyClass0(ClassLoader loader,
                                       Class<?>... interfaces) {
    if (interfaces.length > 65535) {
        throw new IllegalArgumentException("interface limit exceeded");
    }
    // If the proxy class defined by the given loader implementing
    // the given interfaces exists, this will simply return the cached copy;
    // otherwise, it will create the proxy class via the ProxyClassFactory
    // proxyClassCache 是 new WeakCache<>(new KeyFactory(), new ProxyClassFactory()) 的实例
    // 最终会调用ProxyClassFactory的apply方法。
    // 在ProxyClassFactory的apply方法中有 ProxyGenerator.generateProxyClass() 
    // 答案就在其中,最后调用的是ProxyGenerator的generateClassFile方法
    // 中产生代理类时,让代理类继承Proxy类。
    return proxyClassCache.get(loader, interfaces);
}

image.png

所以破案了,在Proxy里的InvocationHandler是protected,所以我们取变量应当这么取:

@Intercepts({@Signature(type = StatementHandler.class, method = "query",
        args = {Statement.class, ResultHandler.class}), @Signature(type = StatementHandler.class,method =  "update" ,args = Statement.class )})
public class MyBatisSlowSqlPlugin implements Interceptor {
    @Override
    public Object intercept(Invocation invocation) throws Throwable {
        System.out.println("-----开始进入性能分析插件中----");
        long startTime = System.currentTimeMillis();
        Object result = invocation.proceed();
        long endTime = System.currentTimeMillis();
       // query方法入参是statement,所以我们可以将其转为Statement
        Statement statement = (Statement)invocation.getArgs()[0];
        if (Proxy.isProxyClass(statement.getClass())){
            Class<?> statementClass = statement.getClass().getSuperclass();
            Field targetField = statementClass.getDeclaredField("h");
            targetField.setAccessible(true);
            PreparedStatementLogger  loggerStatement  = (PreparedStatementLogger) targetField.get(statement);
            PreparedStatement preparedStatement = loggerStatement.getPreparedStatement();
            if (endTime - startTime > 1){
                System.out.println(preparedStatement.toString());
            }
        }else {
            if (endTime - startTime > 1){
                System.out.println(statement.toString());
            }
        }
        return result;
    }
}

最后输出如下:

image.png

但是这个插件还不是那么完美,就是这个慢SQL查询时间了,我们现在是写死的

这两个问题在MyBatis 里面都可以得到解决,我们可以看Interceptor这个接口:

public interface Interceptor {
  Object intercept(Invocation invocation) throws Throwable;
  default Object plugin(Object target) {
    return Plugin.wrap(target, this);
  }
  default void setProperties(Properties properties) {
    // NOP
  }
}

setProperties用于从配置文件中取值, plugin将当前插件加入,intercept是真正增强方法。那上面的两个问题已经被解决了:

  • 硬编码

首先在配置文件里面配置

<plugins>
        <plugin interceptor="org.example.mybatis.MyBatisSlowSqlPlugin">
            <property name = "maxTolerate" value = "10"/>
        </plugin>
 </plugins>

然后重写:

@Override
public void setProperties(Properties properties) {
 //maxTolerate 是MyBatisSlowSqlPlugin的成员变量
    this.maxTolerate = Long.parseLong(properties.getProperty("maxTolerate"));
}

回忆一下JDBC我们执行SQl事实上有两种方式:

  • Connection中的prepareStatement方法
  • Connection中的createStatement

在MyBatis中这两种方法对应不同的StatementType, 上面的PreparedStatementLogger对应 Connection中的prepareStatement方法, 如果说你在MyBatis中将语句声明为Statement,则我们的SQL监控语句就会出错,所以这里我们还需要在单独适配一下Statement语句类型。

@Intercepts({@Signature(type = StatementHandler.class, method = "query",
        args = {Statement.class, ResultHandler.class}), @Signature(type = StatementHandler.class,method =  "update" ,args = Statement.class )})
public class MyBatisSlowSqlPlugin implements Interceptor {
    private  long  maxTolerate;
    @Override
    public Object intercept(Invocation invocation) throws Throwable {
        System.out.println("-----开始进入性能分析插件中----");
        long startTime = System.currentTimeMillis();
        Object result = invocation.proceed();
        SystemMetaObject
        long endTime = System.currentTimeMillis();
       // query方法入参是statement,所以我们可以将其转为Statement
        Statement statement = (Statement)invocation.getArgs()[0];
        if (Proxy.isProxyClass(statement.getClass())){
            Class<?> statementClass = statement.getClass().getSuperclass();
            Field targetField = statementClass.getDeclaredField("h");
            targetField.setAccessible(true);
            Object object = targetField.get(statement);
            if (object instanceof PreparedStatementLogger) {
                PreparedStatementLogger  loggerStatement  = (PreparedStatementLogger) targetField.get(statement);
                PreparedStatement preparedStatement = loggerStatement.getPreparedStatement();
                if (endTime - startTime > maxTolerate){
                    System.out.println(preparedStatement.toString());
                }
            }else {
                // target 是对应的语句处理器
                // 为什么不反射拿? Statement 对应的实现类未重写toString方法
                // 但是在RoutingStatementHandler 中提供了getBoundSql方法
                RoutingStatementHandler handler = (RoutingStatementHandler) invocation.getTarget();
                BoundSql boundSql = handler.getBoundSql();
                if (endTime - startTime > maxTolerate){
                    System.out.println(boundSql);
                }
            }
        }else {
            if (endTime - startTime > maxTolerate){
                System.out.println(statement.toString());
            }
        }
        return result;
    }
    @Override
    public void setProperties(Properties properties) {
        this.maxTolerate = Long.parseLong(properties.getProperty("maxTolerate"));
    }
}

事实上MyBatis里面写好了反射工具类,这个就是SystemMetaObject,用法示例如下:

@Intercepts({@Signature(type = StatementHandler.class, method = "query",
        args = {Statement.class, ResultHandler.class}), @Signature(type = StatementHandler.class,method =  "update" ,args = Statement.class )})
public class MyBatisSlowSqlPlugin implements Interceptor {
    private  long  maxTolerate;
    @Override
    public Object intercept(Invocation invocation) throws Throwable {
        System.out.println("-----开始进入性能分析插件中----");
        long startTime = System.currentTimeMillis();
        Object result = invocation.proceed();
        long endTime = System.currentTimeMillis();
       // query方法入参是statement,所以我们可以将其转为Statement
        Statement statement = (Statement)invocation.getArgs()[0];
        MetaObject metaObject = SystemMetaObject.forObject(statement);
        if (Proxy.isProxyClass(statement.getClass())){
            Object object = metaObject.getValue("h");
            if (object instanceof PreparedStatementLogger) {
                PreparedStatementLogger  loggerStatement  = (PreparedStatementLogger) object;
                PreparedStatement preparedStatement = loggerStatement.getPreparedStatement();
                if (endTime - startTime > maxTolerate){
                    System.out.println(preparedStatement.toString());
                }
            }else {
                // target 是对应的语句处理器
                // 为什么不反射拿? Statement 对应的实现类未重写toString方法
                // 但是在RoutingStatementHandler 中提供了getBoundSql方法
                RoutingStatementHandler handler = (RoutingStatementHandler) invocation.getTarget();
                BoundSql boundSql = handler.getBoundSql();
                if (endTime - startTime > maxTolerate){
                    System.out.println(boundSql);
                }
            }
        }else {
            if (endTime - startTime > maxTolerate){
                System.out.println(statement.toString());
            }
        }
        return result;
    }
    @Override
    public void setProperties(Properties properties) {
        this.maxTolerate = Long.parseLong(properties.getProperty("maxTolerate"));
    }
}

那我有多个插件,如何指定顺序呢? 在配置文件中指定,从上往下依次执行

<plugins>
        <plugin interceptor="org.example.mybatis.MyBatisSlowSqlPlugin01">
            <property name = "maxTolerate" value = "10"/>
        </plugin> 
     <plugin interceptor="org.example.mybatis.MyBatisSlowSqlPlugin02">
            <property name = "maxTolerate" value = "10"/>
        </plugin> 
</plugins>

如上面所配置执行顺序就是MyBatisSlowSqlPlugin01、MyBatisSlowSqlPlugin02。 插件的几个方法执行顺序呢

image.png

写在最后

感慨颇深,原本预计两个小时就能写完的,然后写了一下午,颇有种学海无涯的感觉。

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
2月前
|
缓存 Java 数据库连接
我要手撕mybatis源码
该文章深入分析了MyBatis框架的初始化和数据读写阶段的源码,详细阐述了MyBatis如何通过配置文件解析、建立数据库连接、映射接口绑定、动态代理、查询缓存和结果集处理等步骤实现ORM功能,以及与传统JDBC编程相比的优势。
我要手撕mybatis源码
|
4月前
|
XML Java 数据库连接
一篇文章讲明白MyBatis魔法堂:即学即用篇
一篇文章讲明白MyBatis魔法堂:即学即用篇
22 0
|
SQL Java 数据库连接
熬夜整理的Mybatis经典面试题
熬夜整理的Mybatis经典面试题
80 0
|
前端开发 Oracle 算法
卷王必备学习的MyBatis-Plus用法,不来瞧瞧吗~~
卷王必备学习的MyBatis-Plus用法,不来瞧瞧吗~~
115115 1
卷王必备学习的MyBatis-Plus用法,不来瞧瞧吗~~
|
SQL XML Java
|
Java 数据库连接 数据库
适配器模式在 MyBatis 中的妙用,面试可以拿来吹了!
适配器模式在 MyBatis 中的妙用,面试可以拿来吹了!
177 0
适配器模式在 MyBatis 中的妙用,面试可以拿来吹了!
|
SQL XML 存储
假装是小白之重学MyBatis(一)
假装是小白之重学MyBatis(一)
假装是小白之重学MyBatis(一)
|
SQL XML druid
看完这篇,不信你还能不会用 MyBatis-Plus(二)
MyBatis-Plus(简称 MP)是一个 MyBatis的增强工具,在 MyBatis 的基础上只做增强不做改变,为简化开发、提高效率而生。
看完这篇,不信你还能不会用 MyBatis-Plus(二)
|
SQL 算法 Oracle
看完这篇,不信你还能不会用 MyBatis-Plus(一)
MyBatis-Plus(简称 MP)是一个 MyBatis的增强工具,在 MyBatis 的基础上只做增强不做改变,为简化开发、提高效率而生。
看完这篇,不信你还能不会用 MyBatis-Plus(一)
|
XML SQL Java
Mybatis第二篇| CRUD,这才是程序员入门第一课
Mybatis第二篇| CRUD,这才是程序员入门第一课
811 1
Mybatis第二篇| CRUD,这才是程序员入门第一课