PageHelper

PageHelper是一款好用的开源免费的Mybatis第三方物理分页插件,虽然是个分页插件,但是PageHelper比我想象的要复杂许多,它做的很强大,也很彻底,强大到使用者可能并不需要这么多功能,彻底到一参可以两用。

安装

  1. PageHelpermaven依赖及插件配置

    1. <dependency>
    2. <groupId>com.github.pagehelper</groupId>
    3. <artifactId>pagehelper</artifactId>
    4. <version>4.1.6</version>
    5. </dependency>

    PageHelper除了本身的jar包外,它还依赖了一个叫jsqlparserjar包,使用时,我们不需要单独指定jsqlparsermaven依赖,maven的间接依赖会帮我们引入。

  2. mybatis配置文件中配置pageHelper分页插件

    1. <plugins>
    2. <plugin interceptor="com.github.pagehelper.PageHelper">
    3. <property name="dialect" value="oracle"/>
    4. <property name="offsetAsPageNum" value="false"/>
    5. <property name="rowBoundsWithCount" value="false"/>
    6. <property name="pageSizeZero" value="true"/>
    7. <property name="reasonable" value="false"/>
    8. <property name="supportMethodsArguments" value="false"/>
    9. <property name="returnPageInfo" value="none"/>
    10. </plugin>
    11. </plugins>

注意事项:

  • plugins插件的配置在 settings(标签)之后 在environments之前
  • settings中设置Mybatis的一些额外的运行参数 如是否开启延迟加载,动态代理使用CG-LIB,或JAVALIB等;

    使用

    1)、统计总数,(将SQL语句变为 select count(0) from xxx,只对简单SQL语句其效果,复杂SQL语句需要自己写)

  1. Page<?> page = PageHelper.startPage(1,-1);
  2. long count = page.getTotal();

2)、分页,pageNum - 第N页, pageSize - 每页M条数

  1. A、只分页不统计(每次只执行分页语句)
  2. PageHelper.startPage([pageNum],[pageSize]);
  3. List<?> pagelist = queryForList( xxx.class, "queryAll" , param);
  4. //pagelist就是分页之后的结果
  5. B、分页并统计(每次执行2条语句,一条select count语句,一条分页语句)适用于查询分页时数据发生变动,需要将实时的变动信息反映到分页结果上
  6. Page<?> page = PageHelper.startPage([pageNum],[pageSize],[iscount]);
  7. List<?> pagelist = queryForList( xxx.class , "queryAll" , param);
  8. long count = page.getTotal();
  9. //也可以 List<?> pagelist = page.getList(); 获取分页后的结果集

3)、使用PageHelper查全部(不分页)

  1. PageHelper.startPage(1,0);
  2. List<?> alllist = queryForList( xxx.class , "queryAll" , param);

4)、PageHelper的其他API

  1. String orderBy = PageHelper.getOrderBy(); //获取orderBy语句
  2. Page<?> page = PageHelper.startPage(Object params);
  3. Page<?> page = PageHelper.startPage(int pageNum, int pageSize);
  4. Page<?> page = PageHelper.startPage(int pageNum, int pageSize, boolean isCount);
  5. Page<?> page = PageHelper.startPage(pageNum, pageSize, orderBy);
  6. Page<?> page = PageHelper.startPage(pageNum, pageSize, isCount, isReasonable); //isReasonable分页合理化,null时用默认配置
  7. Page<?> page = PageHelper.startPage(pageNum, pageSize, isCount, isReasonable, isPageSizeZero); //isPageSizeZero是否支持PageSize为0,true且pageSize=0时返回全部结果,false时分页,null时用默认配置

相关默认值

  1. //RowBounds参数offset作为PageNum使用 - 默认不使用
  2. private boolean offsetAsPageNum = false;
  3. //RowBounds是否进行count查询 - 默认不查询
  4. private boolean rowBoundsWithCount = false;
  5. //当设置为true的时候,如果pagesize设置为0(或RowBounds的limit=0),就不执行分页,返回全部结果
  6. private boolean pageSizeZero = false;
  7. //分页合理化
  8. private boolean reasonable = false;
  9. //是否支持接口参数来传递分页参数,默认false
  10. private boolean supportMethodsArguments = false;

相关源码的分析

首先我们看下一官方给出的一些配置,以及对配置的解释:

  1. <!-- com.github.pagehelperPageHelper类所在包名 -->
  2. <plugin interceptor="com.github.pagehelper.PageHelper">
  3. <property name="dialect" value="mysql" />
  4. <!-- 该参数默认为false -->
  5. <!-- 设置为true时,会将RowBounds第一个参数offset当成pageNum页码使用 -->
  6. <!-- startPage中的pageNum效果一样 -->
  7. <property name="offsetAsPageNum" value="false" />
  8. <!-- 该参数默认为false -->
  9. <!-- 设置为true时,使用RowBounds分页会进行count查询 -->
  10. <property name="rowBoundsWithCount" value="true" />
  11. <!-- 设置为true时,如果pageSize=0或者RowBounds.limit = 0就会查询出全部的结果 -->
  12. <!-- (相当于没有执行分页查询,但是返回结果仍然是Page类型) <property name="pageSizeZero" value="true"/> -->
  13. <!-- 3.3.0版本可用 - 分页参数合理化,默认false禁用 -->
  14. <!-- 启用合理化时,如果pageNum<1会查询第一页,如果pageNum>pages会查询最后一页 -->
  15. <!-- 禁用合理化时,如果pageNum<1pageNum>pages会返回空数据 -->
  16. <property name="reasonable" value="true" />
  17. <!-- 3.5.0版本可用 - 为了支持startPage(Object params)方法 -->
  18. <!-- 增加了一个`params`参数来配置参数映射,用于从MapServletRequest中取值 -->
  19. <!-- 可以配置pageNum,pageSize,count,pageSizeZero,reasonable,不配置映射的用默认值 -->
  20. <!-- 不理解该含义的前提下,不要随便复制该配置 <property name="params" value="pageNum=start;pageSize=limit;"/> -->
  21. </plugin>

我们有必要配置的参数:
* dialect:标识是哪一种数据库,设计上必须。

  1. * autoDialecttrue or false,是否自动检测dialect
  2. * autoRuntimeDialecttrue or false,多数据源时,是否自动检测dialect
  3. * closeConntrue or false,检测完dialect后,是否关闭Connection连接

上面这3个智能参数,不到万不得已,我们不应该在系统中使用,我们只需要一个dialect = mysql 或者 dialect = oracle就够了,如果系统中需要使用,还是得问问自己,是否真的非用不可。
上源码:

  1. @Intercepts(@Signature(type = Executor.class, method = "query", args = {MappedStatement.class, Object.class, RowBounds.class, ResultHandler.class}))
  2. public class PageHelper implements Interceptor {
  3. //sql工具类
  4. private SqlUtil sqlUtil;
  5. //属性参数信息
  6. private Properties properties;
  7. //配置对象方式
  8. private SqlUtilConfig sqlUtilConfig;
  9. //自动获取dialect,如果没有setProperties或setSqlUtilConfig,也可以正常进行
  10. private boolean autoDialect = true;
  11. //运行时自动获取dialect
  12. private boolean autoRuntimeDialect;
  13. //多数据源时,获取jdbcurl后是否关闭数据源
  14. private boolean closeConn = true;
  15. //缓存
  16. private Map<String, SqlUtil> urlSqlUtilMap = new ConcurrentHashMap<String, SqlUtil>();
  17. private ReentrantLock lock = new ReentrantLock();
  18. // ...
  19. }

上面是官方源码以及源码所带的注释,我们再补充一下。
SqlUtil:数据库类型专用sql工具类,一个数据库url对应一个SqlUtil实例,SqlUtil内有一个Parser对象,如果是mysql,它是MysqlParser,如果是oracle,它是OracleParser,这个Parser对象是SqlUtil不同实例的主要存在价值。执行count查询、设置Parser对象、执行分页查询、保存Page分页对象等功能,均由SqlUtil来完成。
SqlUtilConfig:Spring Boot中使用,忽略。
autoRuntimeDialect:多个数据源切换时,比如mysql和oracle数据源同时存在,就不能简单指定dialect,这个时候就需要运行时自动检测当前的dialect。
Map urlSqlUtilMap:它就用来缓存autoRuntimeDialect自动检测结果的,key是数据库的url,value是SqlUtil。由于这种自动检测只需要执行1次,所以做了缓存。
ReentrantLock lock:这个lock对象是比较有意思的现象,urlSqlUtilMap明明是一个同步ConcurrentHashMap,又搞了一个lock出来同步ConcurrentHashMap做什么呢?是否是画蛇添足?在《Java并发编程实战》一书中有详细论述,简单的说,ConcurrentHashMap可以保证put或者remove方法一定是线程安全的,但它不能保证put、get、remove的组合操作是线程安全的,为了保证组合操作也是线程安全的,所以使用了lock。

com.github.pagehelper.PageHelper.java源码

  1. // Mybatis拦截器方法
  2. public Object intercept(Invocation invocation) throws Throwable {
  3. if (autoRuntimeDialect) {
  4. // 多数据源
  5. SqlUtil sqlUtil = getSqlUtil(invocation);
  6. return sqlUtil.processPage(invocation);
  7. } else {
  8. // 单数据源
  9. if (autoDialect) {
  10. initSqlUtil(invocation);
  11. }
  12. // 指定了dialect
  13. return sqlUtil.processPage(invocation);
  14. }
  15. }
  16. public synchronized void initSqlUtil(Invocation invocation) {
  17. if (this.sqlUtil == null) {
  18. this.sqlUtil = getSqlUtil(invocation);
  19. if (!autoRuntimeDialect) {
  20. properties = null;
  21. sqlUtilConfig = null;
  22. }
  23. autoDialect = false;
  24. }
  25. }
  26. public void setProperties(Properties p) {
  27. checkVersion();
  28. //多数据源时,获取jdbcurl后是否关闭数据源
  29. String closeConn = p.getProperty("closeConn");
  30. //解决#97
  31. if(StringUtil.isNotEmpty(closeConn)){
  32. this.closeConn = Boolean.parseBoolean(closeConn);
  33. }
  34. //初始化SqlUtil的PARAMS
  35. SqlUtil.setParams(p.getProperty("params"));
  36. //数据库方言
  37. String dialect = p.getProperty("dialect");
  38. String runtimeDialect = p.getProperty("autoRuntimeDialect");
  39. if (StringUtil.isNotEmpty(runtimeDialect) && runtimeDialect.equalsIgnoreCase("TRUE")) {
  40. this.autoRuntimeDialect = true;
  41. this.autoDialect = false;
  42. this.properties = p;
  43. } else if (StringUtil.isEmpty(dialect)) {
  44. autoDialect = true;
  45. this.properties = p;
  46. } else {
  47. autoDialect = false;
  48. sqlUtil = new SqlUtil(dialect);
  49. sqlUtil.setProperties(p);
  50. }
  51. }
  52. public SqlUtil getSqlUtil(Invocation invocation) {
  53. MappedStatement ms = (MappedStatement) invocation.getArgs()[0];
  54. //改为对dataSource做缓存
  55. DataSource dataSource = ms.getConfiguration().getEnvironment().getDataSource();
  56. String url = getUrl(dataSource);
  57. if (urlSqlUtilMap.containsKey(url)) {
  58. return urlSqlUtilMap.get(url);
  59. }
  60. try {
  61. lock.lock();
  62. if (urlSqlUtilMap.containsKey(url)) {
  63. return urlSqlUtilMap.get(url);
  64. }
  65. if (StringUtil.isEmpty(url)) {
  66. throw new RuntimeException("无法自动获取jdbcUrl,请在分页插件中配置dialect参数!");
  67. }
  68. String dialect = Dialect.fromJdbcUrl(url);
  69. if (dialect == null) {
  70. throw new RuntimeException("无法自动获取数据库类型,请通过dialect参数指定!");
  71. }
  72. SqlUtil sqlUtil = new SqlUtil(dialect);
  73. if (this.properties != null) {
  74. sqlUtil.setProperties(properties);
  75. } else if (this.sqlUtilConfig != null) {
  76. sqlUtil.setSqlUtilConfig(this.sqlUtilConfig);
  77. }
  78. urlSqlUtilMap.put(url, sqlUtil);
  79. return sqlUtil;
  80. } finally {
  81. lock.unlock();
  82. }
  83. }

autoRuntimeDialect:多数据源,会创建多个SqlUtil。
autoDialect:单数据源,只会创建1个SqlUtil。单数据源时,也可以当做多数据源来使用。
指定了dialect:只会创建1个SqlUtil。
PageSqlSource类

  1. public abstract class PageSqlSource implements SqlSource {
  2. /**
  3. * 获取正常的BoundSql
  4. *
  5. * @param parameterObject
  6. * @return
  7. */
  8. protected abstract BoundSql getDefaultBoundSql(Object parameterObject);
  9. /**
  10. * 获取Count查询的BoundSql
  11. *
  12. * @param parameterObject
  13. * @return
  14. */
  15. protected abstract BoundSql getCountBoundSql(Object parameterObject);
  16. /**
  17. * 获取分页查询的BoundSql
  18. *
  19. * @param parameterObject
  20. * @return
  21. */
  22. protected abstract BoundSql getPageBoundSql(Object parameterObject);
  23. /**
  24. * 获取BoundSql
  25. *
  26. * @param parameterObject
  27. * @return
  28. */
  29. @Override
  30. public BoundSql getBoundSql(Object parameterObject) {
  31. Boolean count = getCount();
  32. if (count == null) {
  33. return getDefaultBoundSql(parameterObject);
  34. } else if (count) {
  35. return getCountBoundSql(parameterObject);
  36. } else {
  37. return getPageBoundSql(parameterObject);
  38. }
  39. }
  40. }

getDefaultBoundSql:获取原始的未经改造的BoundSql。
getCountBoundSql:不需要写count查询,插件根据分页查询sql,智能的为你生成的count查询BoundSql。
getPageBoundSql:获取分页查询的BoundSql。

举例:
DefaultBoundSql:select stud_id as studId , name, email, dob, phone from students
CountBoundSql:select count(0) from students —由PageHelper智能完成
PageBoundSql:select stud_id as studId , name, email, dob, phone from students limit ?, ?
PageHelper分页工具 - 图1

  1. public class PageStaticSqlSource extends PageSqlSource {
  2. private String sql;
  3. private List<ParameterMapping> parameterMappings;
  4. private Configuration configuration;
  5. private SqlSource original;
  6. @Override
  7. protected BoundSql getDefaultBoundSql(Object parameterObject) {
  8. String tempSql = sql;
  9. String orderBy = PageHelper.getOrderBy();
  10. if (orderBy != null) {
  11. tempSql = OrderByParser.converToOrderBySql(sql, orderBy);
  12. }
  13. return new BoundSql(configuration, tempSql, parameterMappings, parameterObject);
  14. }
  15. @Override
  16. protected BoundSql getCountBoundSql(Object parameterObject) {
  17. // localParser指的就是MysqlParser或者OracleParser
  18. // localParser.get().getCountSql(sql),可以根据原始的sql,生成一个count查询的sql
  19. return new BoundSql(configuration, localParser.get().getCountSql(sql), parameterMappings, parameterObject);
  20. }
  21. @Override
  22. protected BoundSql getPageBoundSql(Object parameterObject) {
  23. String tempSql = sql;
  24. String orderBy = PageHelper.getOrderBy();
  25. if (orderBy != null) {
  26. tempSql = OrderByParser.converToOrderBySql(sql, orderBy);
  27. }
  28. // getPageSql可以根据原始的sql,生成一个带有分页参数信息的sql,比如 limit ?, ?
  29. tempSql = localParser.get().getPageSql(tempSql);
  30. // 由于sql增加了分页参数的?号占位符,getPageParameterMapping()就是在原有List<ParameterMapping>基础上,增加两个分页参数对应的ParameterMapping对象,为分页参数赋值使用
  31. return new BoundSql(configuration, tempSql, localParser.get().getPageParameterMapping(configuration, original.getBoundSql(parameterObject)), parameterObject);
  32. }
  33. }

假设List原来的size=2,添加分页参数后,其size=4,具体增加多少个,看分页参数的?号数量。
其他PageSqlSource,原理和PageStaticSqlSource一模一样。
解析sql,并增加分页参数占位符,或者生成count查询的sql,都依靠Parser来完成。

com.github.pagehelper.parser.Parser

  1. public class MysqlParser extends AbstractParser {
  2. @Override
  3. public String getPageSql(String sql) {
  4. StringBuilder sqlBuilder = new StringBuilder(sql.length() + 14);
  5. sqlBuilder.append(sql);
  6. sqlBuilder.append(" limit ?,?");
  7. return sqlBuilder.toString();
  8. }
  9. @Override
  10. public Map<String, Object> setPageParameter(MappedStatement ms, Object parameterObject, BoundSql boundSql, Page<?> page) {
  11. Map<String, Object> paramMap = super.setPageParameter(ms, parameterObject, boundSql, page);
  12. paramMap.put(PAGEPARAMETER_FIRST, page.getStartRow());
  13. paramMap.put(PAGEPARAMETER_SECOND, page.getPageSize());
  14. return paramMap;
  15. }
  16. }

我们可以清楚的看到,MysqlParser是如何添加分页占位符和分页参数的。

  1. public abstract class AbstractParser implements Parser, Constant {
  2. public String getCountSql(final String sql) {
  3. return sqlParser.getSmartCountSql(sql);
  4. }
  5. }

生成count sql,则是前文提到的jsqlparser工具包来完成的,是另外一个开源的sql解析工具包。

SqlUtil.doProcessPage()分页查询

  1. // PageSqlSource装饰原SqlSource
  2. public void processMappedStatement(MappedStatement ms) throws Throwable {
  3. SqlSource sqlSource = ms.getSqlSource();
  4. MetaObject msObject = SystemMetaObject.forObject(ms);
  5. SqlSource pageSqlSource;
  6. if (sqlSource instanceof StaticSqlSource) {
  7. pageSqlSource = new PageStaticSqlSource((StaticSqlSource) sqlSource);
  8. } else if (sqlSource instanceof RawSqlSource) {
  9. pageSqlSource = new PageRawSqlSource((RawSqlSource) sqlSource);
  10. } else if (sqlSource instanceof ProviderSqlSource) {
  11. pageSqlSource = new PageProviderSqlSource((ProviderSqlSource) sqlSource);
  12. } else if (sqlSource instanceof DynamicSqlSource) {
  13. pageSqlSource = new PageDynamicSqlSource((DynamicSqlSource) sqlSource);
  14. } else {
  15. throw new RuntimeException("无法处理该类型[" + sqlSource.getClass() + "]的SqlSource");
  16. }
  17. msObject.setValue("sqlSource", pageSqlSource);
  18. //由于count查询需要修改返回值,因此这里要创建一个Count查询的MS
  19. msCountMap.put(ms.getId(), MSUtils.newCountMappedStatement(ms));
  20. }
  21. // 执行分页查询
  22. private Page doProcessPage(Invocation invocation, Page page, Object[] args) throws Throwable {
  23. //保存RowBounds状态
  24. RowBounds rowBounds = (RowBounds) args[2];
  25. //获取原始的ms
  26. MappedStatement ms = (MappedStatement) args[0];
  27. //判断并处理为PageSqlSource
  28. if (!isPageSqlSource(ms)) {
  29. processMappedStatement(ms);
  30. }
  31. //设置当前的parser,后面每次使用前都会set,ThreadLocal的值不会产生不良影响
  32. ((PageSqlSource)ms.getSqlSource()).setParser(parser);
  33. try {
  34. //忽略RowBounds-否则会进行Mybatis自带的内存分页
  35. args[2] = RowBounds.DEFAULT;
  36. //如果只进行排序 或 pageSizeZero的判断
  37. if (isQueryOnly(page)) {
  38. return doQueryOnly(page, invocation);
  39. }
  40. //简单的通过total的值来判断是否进行count查询
  41. if (page.isCount()) {
  42. page.setCountSignal(Boolean.TRUE);
  43. //替换MS
  44. args[0] = msCountMap.get(ms.getId());
  45. //查询总数
  46. Object result = invocation.proceed();
  47. //还原ms
  48. args[0] = ms;
  49. //设置总数
  50. page.setTotal((Integer) ((List) result).get(0));
  51. if (page.getTotal() == 0) {
  52. return page;
  53. }
  54. } else {
  55. page.setTotal(-1l);
  56. }
  57. //pageSize>0的时候执行分页查询,pageSize<=0的时候不执行相当于可能只返回了一个count
  58. if (page.getPageSize() > 0 &&
  59. ((rowBounds == RowBounds.DEFAULT && page.getPageNum() > 0)
  60. || rowBounds != RowBounds.DEFAULT)) {
  61. //将参数中的MappedStatement替换为新的qs
  62. page.setCountSignal(null);
  63. BoundSql boundSql = ms.getBoundSql(args[1]);
  64. args[1] = parser.setPageParameter(ms, args[1], boundSql, page);
  65. page.setCountSignal(Boolean.FALSE);
  66. //执行分页查询
  67. Object result = invocation.proceed();
  68. //得到处理结果
  69. page.addAll((List) result);
  70. }
  71. } finally {
  72. ((PageSqlSource)ms.getSqlSource()).removeParser();
  73. }
  74. //返回结果
  75. return page;
  76. }

源码中注意关键的四点即可:
1、msCountMap.put(ms.getId(), MSUtils.newCountMappedStatement(ms)),创建count查询的MappedStatement对象,并缓存于msCountMap。
2、如果count=true,则执行count查询,结果total值保存于page对象中,继续执行分页查询。
3、执行分页查询,将查询结果保存于page对象中,page是一个ArrayList对象。
4、args[2] = RowBounds.DEFAULT,改变Mybatis原有分页行为;
args[1] = parser.setPageParameter(ms, args[1], boundSql, page),改变原有参数列表(增加分页参数)。

PageHelper的两种使用方式

第一种、直接通过RowBounds参数完成分页查询 。

  1. List<Student> list = studentMapper.find(new RowBounds(0, 10));
  2. Page page = ((Page) list;

第二种、PageHelper.startPage()静态方法

  1. //获取第1页,10条内容,默认查询总数count
  2. PageHelper.startPage(1, 10);
  3. //紧跟着的第一个select方法会被分页
  4. List<Country> list = studentMapper.find();
  5. Page page = ((Page) list;

注:返回结果list,已经是Page对象,Page对象是一个ArrayList。

原理:使用ThreadLocal来传递和保存Page对象,每次查询,都需要单独设置PageHelper.startPage()方法。

  1. public class SqlUtil implements Constant {
  2. private static final ThreadLocal<Page> LOCAL_PAGE = new ThreadLocal<Page>();
  3. }

本文中经常提到的count查询,其实是PageHelper帮助我们生成的一个MappedStatement内存对象,它可以免去我们在XXXMapper.xml内单独声明一个sql count查询,我们只需要写一个sql分页业务查询即可。

PageHelper使用建议(性能最好):
1、明确指定dialect。2、明确编写sql分页业务和与它对应的count查询,别图省事。