玩转单表查询--MyBatis版
wptr33 2025-01-10 17:39 23 浏览
1.概览
单表查询在业务开发中占比最大,是所有 CRUD Boy 的入门必备,所有人在 JavaBean 和 SQL 之间乐此不疲。而在我看来,该部分是最枯燥、最没有技术含量的“技能”。
1.1. 背景
公司规定,线上服务不允许使用 Join 语句,只能使用最简单的单表查询,开发人员成天在 输入参数、SQL执行、返回结果之间不停地折腾。
1.2. 目标
需要一个框架,可以灵活的定制简单的数据查询,但又不能过于灵活,需要对使用方式进行严格限制。
灵活定制,是为了快速开发,提升效率,降低bug;对使用进行限制,是为了将掌控权控制在开发,不会因为使用不当造成线上问题。因此,对框架有如下要求:
- 支持灵活的查询定义,无需手写 SQL;
- 支持常见的查询,包括过滤、排序、分页等;
- 支持扩展,应对个性化需求;
2. 快速入门
该框架依赖 MyBatis 的 selectByExample 特性。
2.1. 使用 MyBatis Generator,自动生成相关代码
首先,引入 MyBatis 相关依赖:
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
<version>2.2.2</version>
</dependency>
其次,在 maven 中增加 mybatis-generator-maven-plugin 插件:
<plugin>
<groupId>org.mybatis.generator</groupId>
<artifactId>mybatis-generator-maven-plugin</artifactId>
<version>1.3.7</version>
<configuration>
<verbose>true</verbose>
<overwrite>true</overwrite>
</configuration>
<dependencies>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>8.0.29</version>
</dependency>
<dependency>
<groupId>com.itfsw</groupId>
<artifactId>mybatis-generator-plugin</artifactId>
<version>1.3.10</version>
</dependency>
</dependencies>
</plugin>
其中,mybatis-generator-plugin 提供 limit 分页支持。
新建 generatorConfig.xml,并指定LimitPlugin。
<!-- MySQL分页插件 -->
<plugin type="com.itfsw.mybatis.generator.plugins.LimitPlugin">
<!-- 通过配置startPage影响Example中的page方法开始分页的页码,默认分页从0开始 -->
<property name="startPage" value="0"/>
</plugin>
运行 generator 自动生成相关文件,包括 Mapper.xml、Mapper 接口、Entity 类 和 Example 查询类。其中,Example 类是该框架的关键。
具体操作,可参照mybatis-generator 官方文档,或 google 检索。
2.2. 添加 singlequery 支持
在 pom 中增加 singlequery 相关依赖:
<dependency>
<groupId>com.geekhalo.lego</groupId>
<artifactId>lego-starter-singlequery</artifactId>
<version>0.1.2-single_query-SNAPSHOT</version>
</dependency>
Starter 中的 MyBatisBasedSingleQueryConfiguration 将为我们完成全部配置。
2.3. 创建自己的 Repository 实现
创建 MyBatisUserSingleQueryService,继承自 AbstractReflectBasedExampleQueryRepository,具体如下:
@Repository
public class MyBatisUserSingleQueryService
extends AbstractReflectBasedExampleQueryRepository
implements UserSingleQueryService {
public MyBatisUserSingleQueryService(MyBatisUserMapper mapper){
super(mapper, MyBatisUserExample.class);
}
}
其中,MyBatisUserMapper 为 MyBatis Generator 生成的 Mapper 接口;MyBatisUserExample 为 Example 查询类;
其中,QueryRepository 提供如下查询能力:
/**
*
* @param query 查询参数
* @param converter 结果转化器
* @param <Q>
* @param <R>
* @return
*/
<Q, R> List<R> listOf(Q query, Function<E, R> converter);
/**
*
* @param query 查询参数
* @param <Q>
* @return
*/
default <Q> List<E> listOf(Q query){
return listOf(query, e->e);
}
/**
* 获取数量
* @param query 查询参数
* @param <Q>
* @return
*/
<Q> Long countOf(Q query);
/**
* 获取单条记录
* @param query 查询参数
* @param converter 结果转化器
* @param <Q>
* @param <R>
* @return
*/
<Q, R> R get(Q query, Function<E, R> converter);
/**
* 获取单条记录
* @param query 查询参数
* @param <Q>
* @return
*/
default <Q> E get(Q query) {
return get(query, e -> e);
}
/**
* 分页查询
* @param query 查询参数
* @param converter 结果转换器
* @param <Q>
* @param <R>
* @return
*/
<Q, R> Page<R> pageOf(Q query, Function<E, R> converter);
/**
* 分页查询
* @param query
* @param <Q>
* @return
*/
default <Q> Page<E> pageOf(Q query){
return pageOf(query, e -> e);
}
2.4. 创建查询对象,添加查询注解
定义查询对象,具体如下:
@Data
public class QueryByIdIn {
@FieldIn(value = "id", fieldType = Long.class)
private List<Long> ids;
}
其中,@FieldIn 表明过滤字段和过滤方式;
编写测试用例如下:
@Test
void getByIds() {
List<Long> ids = Arrays.asList(1L, 2L, 3L, 4L, 5L, 6L, 7L, 8L, 9L, 10L);
QueryByIdIn queryByIdIn = new QueryByIdIn();
queryByIdIn.setIds(ids);
{
List<User> users = this.getSingleQueryService().listOf(queryByIdIn);
Assertions.assertNotNull(users);
Assertions.assertTrue(CollectionUtils.isNotEmpty(users));
Assertions.assertEquals(10, users.size());
}
{
Long count = this.getSingleQueryService().countOf(queryByIdIn);
Assertions.assertEquals(10L, count);
}
}
运行用例,控制台打印 SQL 如下:
==> Preparing: select id, name, status, birth_at, mobile from t_user WHERE ( id in ( ? , ? , ? , ? , ? , ? , ? , ? , ? , ? ) )
==> Parameters: 1(Long), 2(Long), 3(Long), 4(Long), 5(Long), 6(Long), 7(Long), 8(Long), 9(Long), 10(Long)
<== Total: 10
==> Preparing: select count(*) from t_user WHERE ( id in ( ? , ? , ? , ? , ? , ? , ? , ? , ? , ? ) )
==> Parameters: 1(Long), 2(Long), 3(Long), 4(Long), 5(Long), 6(Long), 7(Long), 8(Long), 9(Long), 10(Long)
<== Total: 1
当前支持的过滤注解包括:
注解 | 含义 |
FieldEqualTo | 等于 |
FieldGreaterThan | 大于 |
FieldGreaterThanOrEqualTo | 大于等于 |
FieldIn | in 操作 |
FieldIsNull | 是否为 null |
FieldLessThan | 小于 |
FieldLessThanOrEqualTo | 小于等于 |
FieldNotEqualTo | 不等于 |
FieldNotIn | not in |
EmbeddedFilter | 嵌入查询对象 |
2.5. 嵌入对象查询
新建 嵌入对象 QueryByStatusAndBirth,在类上增加过滤注解,具体如下:
@Data
public class QueryByStatusAndBirth {
@FieldEqualTo("status")
private Integer status;
@FieldGreaterThan("birthAt")
private Date birthAfter;
}
新建查询对象 QueryByEmbeddedFilter,使用 @EmbeddedFilter 标注嵌入对象,具体如下:
@Data
public class QueryByEmbeddedFilter {
@FieldGreaterThan("id")
private Long id;
@EmbeddedFilter
private QueryByStatusAndBirth statusAndBirth;
}
编写测试用例:
@Test
void queryByEmbeddedFilter() throws Exception{
QueryByEmbeddedFilter query = new QueryByEmbeddedFilter();
query.setId(0L);
QueryByStatusAndBirth queryByStatusAndBirth = new QueryByStatusAndBirth();
query.setStatusAndBirth(queryByStatusAndBirth);
queryByStatusAndBirth.setStatus(1);
queryByStatusAndBirth.setBirthAfter(DateUtils.parseDate("2018-10-01", "yyyy-MM-dd"));
List<User> users = getSingleQueryService().listOf(query);
Assertions.assertTrue(CollectionUtils.isNotEmpty(users));
}
运行测试,获取如下结果:
==> Preparing: select id, name, status, birth_at, mobile from t_user WHERE ( id > ? and status = ? and birth_at > ? )
==> Parameters: 0(Long), 1(Integer), 2018-10-01 00:00:00.0(Timestamp)
<== Total: 13
2.6. 排序&分页
新建的查询对象 PageByIdGreater,具体如下:
@Data
public class PageByIdGreater {
@FieldGreaterThan("id")
private Long startId;
private Pageable pageable;
private Sort sort;
}
除过滤注解外,新增 Pageable 和 Sort 两个属性。
添加 单元测试 如下:
@Test
void pageOf(){
{
PageByIdGreater pageByIdGreater = new PageByIdGreater();
pageByIdGreater.setStartId(0L);
Pageable pageable = new Pageable();
pageByIdGreater.setPageable(pageable);
pageable.setPageNo(0);
pageable.setPageSize(5);
Sort sort = new Sort();
pageByIdGreater.setSort(sort);
Sort.Order order = Sort.Order.<Orders>builder()
.orderField(Orders.ID)
.direction(Sort.Direction.ASC)
.build();
sort.getOrders().add(order);
Page<User> userPage = this.getSingleQueryService().pageOf(pageByIdGreater);
Assertions.assertTrue(userPage.hasContent());
Assertions.assertEquals(5, userPage.getContent().size());
Assertions.assertEquals(0, userPage.getCurrentPage());
Assertions.assertEquals(5, userPage.getPageSize());
Assertions.assertEquals(3, userPage.getTotalPages());
Assertions.assertEquals(13, userPage.getTotalElements());
Assertions.assertTrue(userPage.isFirst());
Assertions.assertFalse( userPage.hasPrevious());
Assertions.assertTrue( userPage.hasNext());
Assertions.assertFalse(userPage.isLast());
}
}
运行单元测试,获取如下结果:
==> Preparing: select count(*) from t_user WHERE ( id > ? )
==> Parameters: 0(Long)
<== Total: 1
==> Preparing: select id, name, status, birth_at, mobile from t_user WHERE ( id > ? ) order by id ASC limit 0, 5
==> Parameters: 0(Long)
<== Total: 5
先通过 count 查询获取总量,然后通过 limit 进行分页查询获取数据,最终将两者封装成 Page 对象。
2.7. 最大返回值管理
单次返回太多值是数据库性能杀手,框架通过 @MaxResult 对其进行部分支持。
目前支持包括:
策略 | 含义 |
LOG | 返回结果超过配置值后,打印日志,进行跟踪 |
ERROR | 返回结果超过配置值后,直接抛出异常 |
SET_LIMIT | 将 limit 最大值设置为 配置值,对返回值进行限制 |
新建查询对象 QueryByIdGreaterWithMaxResult,在类上增加 @MaxResult 注解,具体如下:
@Data
@MaxResult(max = 10, strategy = MaxResultCheckStrategy.LOG)
public class QueryByIdGreaterWithMaxResult {
@FieldGreaterThan(value = "id")
private Long startUserId;
}
其中,max 指最大返回值,strategy 为 日志,运行结果如下:
==> Preparing: select id, name, status, birth_at, mobile from t_user WHERE ( id > ? )
==> Parameters: 0(Long)
<== Total: 13
【LOG】result size is 13 more than 10, mapper is org.apache.ibatis.binding.MapperProxy@2ab8589a param is QueryByIdGreaterWithMaxResult(startUserId=0)
将 strategy 修改为 ERROR,运行测试,抛出异常:
com.geekhalo.lego.core.singlequery.ManyResultException
at com.geekhalo.lego.core.singlequery.mybatis.support.AbstractReflectBasedExampleQueryRepository.processForMaxResult(AbstractReflectBasedExampleQueryRepository.java:102)
at com.geekhalo.lego.core.singlequery.mybatis.support.AbstractReflectBasedExampleQueryRepository.listOf(AbstractReflectBasedExampleQueryRepository.java:77)
at com.geekhalo.lego.core.singlequery.QueryRepository.listOf(QueryRepository.java:31)
将 strategy 修改为 SET_LIMIT,运行测试,观察 SQL,通过 limit 自动对返回值进行限制。
==> Preparing: select id, name, status, birth_at, mobile from t_user WHERE ( id > ? ) limit 10
==> Parameters: 0(Long)
<== Total: 10
【SET_LIMIT】result size is 10 more than 10, please find and fix, mapper is org.apache.ibatis.binding.MapperProxy@697a92af param is QueryByIdGreaterWithMaxResult(startUserId=0)
3. 设计&扩展
3.1. 核心设计
核心设计,主要是将输入的 Query 对象转换为 Example,整体流程如下:
SingelQuery-MyBatis
核心流程如下:
- ExampleConverter 将输入的 Query Object 转换为 XXXExample 实例;
- 使用 XXXExample 实例 调用 XXXMapper 的 selectByExample 方法获取返回值;
- 返回值通过 ResultConverter 将 Entity 转换为最终结果;
其中,从 QueryObject 到 Example 实例的转换为框架的核心,主要包括如下几部分:
- Pageable。从 QueryObject 中读取 Pageable 属性,并设置 Example 对象的 offset 和 rows 属性;
- Sort。从 QueryObject 中读取 Sort 属性,并设置 Example 对象的 orderByClause 属性;
- 过滤注解。遍历 QueryObject 中属性,根据注解查找到注解处理器,由注解处理器为 Example 添加 Criteria,以进行数据过滤;
3.2. 功能扩展
对于数据过滤,框架提供了一套灵活的扩展方案。
系统自带的组件,比如 @FieldEqualTo 都是通过扩展方式实现。核心步骤包括:
- 自定义注解;
- 编写注解处理器;
- 将注解处理器注册为 Spring Bean;
我们以 @FieldEqualTo 为例,如下:
3.2.1. 新增注解 @FieldEqualTo
@Target({ElementType.FIELD})
@Retention(RetentionPolicy.RUNTIME)
public @interface FieldEqualTo {
String value();
}
- @Target({ElementType.FIELD}) 说明注解应用于 字段;
- @Retention(RetentionPolicy.RUNTIME) 说明注解适用于运行时阶段,这样在运行时通过反射便可读取出来;
- String value() 用于配置应用字段;
3.2.2. 实现 FieldEqualToHandler
FieldEqualToHandler 类集成自 AbstractFilterAnnotationHandler,实现 FieldAnnotationHandler接口,具体如下:
public class FieldEqualToHandler
extends AbstractFilterAnnotationHandler<FieldEqualTo>
implements FieldAnnotationHandler<FieldEqualTo> {
public FieldEqualToHandler() {
super(FieldEqualTo.class);
}
@Override
public void addCriteria(Object criteria, FieldEqualTo fieldEqualTo, Object value) throws Exception{
addCriteria(criteria, fieldEqualTo.value(), "EqualTo", value);
}
@Override
public Method getCriteriaMethod(Class criteriaCls, FieldEqualTo fieldEqualTo, Class valueCls) throws Exception {
return getCriteriaMethod(criteriaCls, fieldEqualTo.value(), "EqualTo", valueCls);
}
}
其中,FieldAnnotationHandler 接口定义如下:
public interface FieldAnnotationHandler<A extends Annotation> {
/**
* 是否能支持 A 注解
* @param a
* @return
*/
boolean support(A a);
/**
* 读取数据,并添加 Criteria 条件
* @param criteria criteria 对象
* @param a 注解
* @param value 字段值
* @throws Exception
*/
void addCriteria(Object criteria, A a, Object value) throws Exception;
/**
* 获取 CriteriaMethod,用于判断配置是否生效
* @param criteriaCls criteria类型信息
* @param a 注解
* @param valueCls 字段值类型
* @return
* @throws Exception
*/
Method getCriteriaMethod(Class criteriaCls, A a, Class valueCls) throws Exception;
}
3.2.3. 将 FieldEqualToHandler 注册为 Spring Bean
@Bean
public FieldEqualToHandler fieldEqualToHandler(){
return new FieldEqualToHandler();
}
这样,就可以在项目中使用该注解进行数据过滤。
4. 项目信息
项目仓库地址:https://gitee.com/litao851025/lego
项目文档地址:https://gitee.com/litao851025/lego/wikis/support/SingleQuery
相关推荐
- redis的八种使用场景
-
前言:redis是我们工作开发中,经常要打交道的,下面对redis的使用场景做总结介绍也是对redis举报的功能做梳理。缓存Redis最常见的用途是作为缓存,用于加速应用程序的响应速度。...
- 基于Redis的3种分布式ID生成策略
-
在分布式系统设计中,全局唯一ID是一个基础而关键的组件。随着业务规模扩大和系统架构向微服务演进,传统的单机自增ID已无法满足需求。高并发、高可用的分布式ID生成方案成为构建可靠分布式系统的必要条件。R...
- 基于OpenWrt系统路由器的模式切换与网页设计
-
摘要:目前商用WiFi路由器已应用到多个领域,商家通过给用户提供一个稳定免费WiFi热点达到吸引客户、提升服务的目标。传统路由器自带的Luci界面提供了工厂模式的Web界面,用户可通过该界面配置路...
- 这篇文章教你看明白 nginx-ingress 控制器
-
主机nginx一般nginx做主机反向代理(网关)有以下配置...
- 如何用redis实现注册中心
-
一句话总结使用Redis实现注册中心:服务注册...
- 爱可可老师24小时热门分享(2020.5.10)
-
No1.看自己以前写的代码是种什么体验?No2.DooM-chip!国外网友SylvainLefebvre自制的无CPU、无操作码、无指令计数器...No3.我认为CS学位可以更好,如...
- Apportable:拯救程序员,IOS一秒变安卓
-
摘要:还在为了跨平台使用cocos2d-x吗,拯救objc程序员的奇葩来了,ApportableSDK:FreeAndroidsupportforcocos2d-iPhone。App...
- JAVA实现超买超卖方案汇总,那个最适合你,一篇文章彻底讲透
-
以下是几种Java实现超买超卖问题的核心解决方案及代码示例,针对高并发场景下的库存扣减问题:方案一:Redis原子操作+Lua脚本(推荐)//使用Redis+Lua保证原子性publicbo...
- 3月26日更新 快速施法自动施法可独立设置
-
2016年3月26日DOTA2有一个79.6MB的更新主要是针对自动施法和快速施法的调整本来内容不多不少朋友都有自动施法和快速施法的困扰英文更新日志一些视觉BUG修复就不翻译了主要翻译自动施...
- Redis 是如何提供服务的
-
在刚刚接触Redis的时候,最想要知道的是一个’setnameJhon’命令到达Redis服务器的时候,它是如何返回’OK’的?里面命令处理的流程如何,具体细节怎么样?你一定有问过自己...
- lua _G、_VERSION使用
-
到这里我们已经把lua基础库中的函数介绍完了,除了函数外基础库中还有两个常量,一个是_G,另一个是_VERSION。_G是基础库本身,指向自己,这个变量很有意思,可以无限引用自己,最后得到的还是自己,...
- China's top diplomat to chair third China-Pacific Island countries foreign ministers' meeting
-
BEIJING,May21(Xinhua)--ChineseForeignMinisterWangYi,alsoamemberofthePoliticalBureau...
- 移动工作交流工具Lua推出Insights数据分析产品
-
Lua是一个适用于各种职业人士的移动交流平台,它在今天推出了一项叫做Insights的全新功能。Insights是一个数据平台,客户可以在上面实时看到员工之间的交流情况,并分析这些情况对公司发展的影响...
- Redis 7新武器:用Redis Stack实现向量搜索的极限压测
-
当传统关系型数据库还在为向量相似度搜索的性能挣扎时,Redis7的RedisStack...
- Nginx/OpenResty详解,Nginx Lua编程,重定向与内部子请求
-
重定向与内部子请求Nginx的rewrite指令不仅可以在Nginx内部的server、location之间进行跳转,还可以进行外部链接的重定向。通过ngx_lua模块的Lua函数除了能实现Nginx...
- 一周热门
-
-
C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)
-
因果推断Matching方式实现代码 因果推断模型
-
git pull命令使用实例 git pull--rebase
-
git pull 和git fetch 命令分别有什么作用?二者有什么区别?
-
面试官:git pull是哪两个指令的组合?
-
git 执行pull错误如何撤销 git pull fail
-
git fetch 和git pull 的异同 git中fetch和pull的区别
-
git pull 之后本地代码被覆盖 解决方案
-
还可以这样玩?Git基本原理及各种骚操作,涨知识了
-
git命令之pull git.pull
-
- 最近发表
- 标签列表
-
- git pull (33)
- git fetch (35)
- mysql insert (35)
- mysql distinct (37)
- concat_ws (36)
- java continue (36)
- jenkins官网 (37)
- mysql 子查询 (37)
- python元组 (33)
- mybatis 分页 (35)
- vba split (37)
- redis watch (34)
- python list sort (37)
- nvarchar2 (34)
- mysql not null (36)
- hmset (35)
- python telnet (35)
- python readlines() 方法 (36)
- munmap (35)
- docker network create (35)
- redis 集合 (37)
- python sftp (37)
- setpriority (34)
- c语言 switch (34)
- git commit (34)