百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

MySQL 5.7 JSON 数据类型使用总结

wptr33 2025-02-18 13:39 15 浏览

从MySQL5.7.8开始,MySQL支持原生的JSON数据类型。MySQL 支持RFC 7159定义的全部json 数据类型,具体的包含四种基本类型(strings, numbers, booleans, null)和两种结构化类型(objects and arrays)。

将 JSON 格式的字符串存储在字符串列中相比,该数据类型具有以下优势:

  • 自动验证存储在 JSON列中的 JSON 文档。无效的文档会产生错误。
  • 优化的存储格式。存储在列中的 JSON 文档被转换为允许快速读取文档元素的内部格式。
  • 当读取 JSON 值时,不需要从文本表示中解析该值,使服务器能够直接通过键或数组索引查找子对象或嵌套值,而无需读取文档中它们之前或之后的所有值。

JSON类型的存储结构

MySQL为了提供对json对象的支持,提供了一套将json字符串转为结构化二进制对象的存储方式。json会被转为二进制的doc对象存储于磁盘中(在处理JSON时MySQL使用的utf8mb4字符集,utf8mb4utf8ascii的超集)。

doc对象包含两个部分,type和value部分。其中type占1字节,可以表示16种类型:大的和小的json object类型、大的和小的 json array类型、literal类型(true、false、null三个值)、number类型(int6、uint16、int32、uint32、int64、uint64、double类型、utf8mb4 string类型和custom data(mysql自定义类型)

JSON数据类型意义

其实,没有JSON数据类型的支持,我们一样可以通过varchar类型或者text等类型来保存这一格式的数据,但是,为什么还要专门增加这一数据格式的支持呢?其中肯定有较varchar或者text来存储此类型更优越的地方。

  • 保证了JSON数据类型的强校验,JSON数据列会自动校验存入此列的内容是否符合JSON格式,非正常格式则报错,而varchar类型和text等类型本身是不存在这种机制的。
  • MySQL同时提供了一组操作JSON类型数据的内置函数。
  • 更优化的存储格式,存储在JSON列中的JSON数据会被转成内部特定的存储格式,允许快速读取。
  • 可以基于JSON格式的特征支持修改特定的键值。(即不需要把整条内容拿出来放到程序中遍历然后寻找替换再塞回去,MySQL内置的函数允许你通过一条SQL语句就能搞定)

JSON 数据类型

JSON 对象

  • 使用对象操作的方法进行查询:字段->'$.json属性'
  • 使用函数进行查询:json_extract(字段, '$.json属性')
  • 获取JSON数组/对象长度:JSON_LENGTH()

JSON 数组

  • 使用对象操作的方法进行查询:字段->'$[0].属性'
  • 使用函数进行查询:JSON_CONTAINS(字段,JSON_OBJECT('json属性', '内容'))
  • 获取JSON数组/对象长度:JSON_LENGTH()

创建 JSON

类似varchar,设置主要将字段的type是json,不能设置长度,可以是NULL但不能有默认值。

CREATE TABLE `tinywan_json` (
 id INT ( 11 ) NOT NULL auto_increment,
 tag json NOT NULL COMMENT '标签列表',
 catagory json NOT NULL COMMENT '分类列表',
 create_time INT ( 11 ) DEFAULT NULL COMMENT '创建时间',
PRIMARY KEY ( id ) 
) ENGINE = INNODB DEFAULT charset = utf8mb4;

使用 describe tinywan_json 查看创建的表结构:

mysql> describe tinywan_json;
+-------------+---------+------+-----+---------+----------------+
| Field       | Type    | Null | Key | Default | Extra          |
+-------------+---------+------+-----+---------+----------------+
| id          | int(11) | NO   | PRI | NULL    | auto_increment |
| tag         | json    | NO   |     | NULL    |                |
| catagory    | json    | NO   |     | NULL    |                |
| create_time | int(11) | YES  |     | NULL    |                |
+-------------+---------+------+-----+---------+----------------+
4 rows in set (0.05 sec)

写入JSON数据

INSERT INTO tinywan_json ( catagory, tag )
VALUES
 ( '{"0":"厨卫","1":"童装","2":"休闲"}', '["Good","Fine","Bad"]' );

MYSQL也有专门的函数 JSON_OBJECT, JSON_ARRAY函数生成json格式的数据。

INSERT INTO tinywan_json ( catagory, tag )
VALUES
 ( JSON_OBJECT ( "name", "John", "age", 23 ), JSON_ARRAY ( 'Low', 'Middle', 'High' ) )

查看插入的两条数据

mysql> select * from tinywan_json;
+----+---------------------------+-----------------------------------------+-------------+
| id | tag                       | catagory                                | create_time |
+----+---------------------------+-----------------------------------------+-------------+
|  1 | ["Good", "Fine", "Bad"]   | {"0": "厨卫", "1": "童装", "2": "休闲"} | NULL        |
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"}             | NULL        |
+----+---------------------------+-----------------------------------------+-------------+
2 rows in set (0.10 sec)

查询 JSON

查询json中的数据使用 column->path 的形式,其中对象类型path这样表示 $.path,而数组类型则是 $[index]

查看每一行数据的JSON类型,筛选如下:

mysql> select tag,json_type(tag),catagory,json_type(catagory) from tinywan_json;
+---------------------------+----------------+-----------------------------------------+---------------------+
| tag                       | json_type(tag) | catagory                                | json_type(catagory) |
+---------------------------+----------------+-----------------------------------------+---------------------+
| ["Good", "Fine", "Bad"]   | ARRAY          | {"0": "厨卫", "1": "童装", "2": "休闲"} | OBJECT              |
| ["Low", "Middle", "High"] | ARRAY          | {"age": 23, "name": "John"}             | OBJECT              |
+---------------------------+----------------+-----------------------------------------+---------------------+
2 rows in set (0.07 sec)

筛选出catagoryname = John的那条记录的所有tag:

mysql> select tag from tinywan_json where catagory->'$.name' = 'John';
+---------------------------+
| tag                       |
+---------------------------+
| ["Low", "Middle", "High"] |
+---------------------------+
1 row in set (0.06 sec)

通过json_type确定了tag的数据类型是ARRAY,那么就可以使用数组索引的方式查询:

mysql> select tag->'$[0]',tag->'$[2024]',tag->'$.notexist' from tinywan_json where catagory->'$.name' = 'John';
+-------------+----------------+-------------------+
| tag->'$[0]' | tag->'$[2024]' | tag->'$.notexist' |
+-------------+----------------+-------------------+
| "Low"       | NULL           | NULL              |
+-------------+----------------+-------------------+
1 row in set (0.05 sec)

上面的例子中,可以看到,使用 tag->'$[0]' 的方式如期获取了tag数组内的第一个数据。另外两个,一个tag->'$[2024]'是不存在的数组元素,一个tag->'$.notexist'是不存在的对象键,都返回了 null,这与预期的一致。

还要一个小小的问题,返回的 tag->'$[0]' = "Low",并且左右有一对双引号,可否去掉呢?使用 JSON_UNQUOTE 函数

mysql> select JSON_UNQUOTE(tag->'$[0]'),tag->'$[2024]',tag->'$.notexist' from tinywan_json where catagory->'$.name' = 'John';
+---------------------------+----------------+-------------------+
| JSON_UNQUOTE(tag->'$[0]') | tag->'$[2024]' | tag->'$.notexist' |
+---------------------------+----------------+-------------------+
| Low                       | NULL           | NULL              |
+---------------------------+----------------+-------------------+
1 row in set (0.06 sec)

JSON 条件查询

因为JSON不同于字符串,所以如果用字符串和JSON字段进行比较,是不会相等的。这时可以使用CAST函数,将字符串转成JSON的形式。

mysql> select * from tinywan_json where catagory = '{"age": 23, "name": "John"}';
Empty set

mysql> select * from tinywan_json where catagory = CAST('{"age": 23, "name": "John"}' as JSON);
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.07 sec)

对应地,select字段和where筛选条件中,均可以使用 column->path 的方式操作。

mysql> select tag,catagory->'$.age' from tinywan_json where tag->'$[1]' = 'Middle';
+---------------------------+-------------------+
| tag                       | catagory->'$.age' |
+---------------------------+-------------------+
| ["Low", "Middle", "High"] | 23                |
+---------------------------+-------------------+
1 row in set (0.07 sec)

特别注意的是。JSON中的元素是严格区分变量类型的,比如说整型和字符串是严格区分的。

mysql> select * from tinywan_json where catagory->'$.age' = 23;
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.06 sec)

mysql> select * from tinywan_json where catagory->'$.age' = '23';
Empty set

除了用 column->path 的形式搜索,还可以用JSON_CONTAINS 函数,但和 column->path 的形式有点相反的是,JSON_CONTAINS 第二个参数是不接受整数的,无论 json 元素是整型还是字符串,否则会出现错误nvalid data type for JSON data in argument 2 to function json_contains; a JSON string or JSON type is required.

mysql> select * from tinywan_json where JSON_CONTAINS(catagory,'23','$.age');
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.08 sec)

mysql> select * from tinywan_json where JSON_CONTAINS(catagory,23,'$.age');
Invalid data type for JSON data in argument 2 to function json_contains; a JSON string or JSON type is required.

上面打印的第一行,才是正确的写法。整数应该写成 'int',字符串则要看值内的情况,很多情况下需要带上双引号,'"string"',这样写。如下:

mysql> select * from tinywan_json where JSON_CONTAINS(tag,'"Fine"');
+----+-------------------------+-----------------------------------------+-------------+
| id | tag                     | catagory                                | create_time |
+----+-------------------------+-----------------------------------------+-------------+
|  1 | ["Good", "Fine", "Bad"] | {"0": "厨卫", "1": "童装", "2": "休闲"} | NULL        |
+----+-------------------------+-----------------------------------------+-------------+
1 row in set (0.07 sec)

小结

  • JSON类型无须预定义字段,适合拓展信息的存储
  • 单个JSON文档的大小不能超过4G;单个KEY的大小不能超过两个字节,即64K
  • JSON类型适合应用于不常更新的静态数据
  • 对搜索较频繁的数据建议增加虚拟列并建立索引

相关推荐

redis的八种使用场景

前言:redis是我们工作开发中,经常要打交道的,下面对redis的使用场景做总结介绍也是对redis举报的功能做梳理。缓存Redis最常见的用途是作为缓存,用于加速应用程序的响应速度。...

基于Redis的3种分布式ID生成策略

在分布式系统设计中,全局唯一ID是一个基础而关键的组件。随着业务规模扩大和系统架构向微服务演进,传统的单机自增ID已无法满足需求。高并发、高可用的分布式ID生成方案成为构建可靠分布式系统的必要条件。R...

基于OpenWrt系统路由器的模式切换与网页设计

摘要:目前商用WiFi路由器已应用到多个领域,商家通过给用户提供一个稳定免费WiFi热点达到吸引客户、提升服务的目标。传统路由器自带的Luci界面提供了工厂模式的Web界面,用户可通过该界面配置路...

这篇文章教你看明白 nginx-ingress 控制器

主机nginx一般nginx做主机反向代理(网关)有以下配置...

如何用redis实现注册中心

一句话总结使用Redis实现注册中心:服务注册...

爱可可老师24小时热门分享(2020.5.10)

No1.看自己以前写的代码是种什么体验?No2.DooM-chip!国外网友SylvainLefebvre自制的无CPU、无操作码、无指令计数器...No3.我认为CS学位可以更好,如...

Apportable:拯救程序员,IOS一秒变安卓

摘要:还在为了跨平台使用cocos2d-x吗,拯救objc程序员的奇葩来了,ApportableSDK:FreeAndroidsupportforcocos2d-iPhone。App...

JAVA实现超买超卖方案汇总,那个最适合你,一篇文章彻底讲透

以下是几种Java实现超买超卖问题的核心解决方案及代码示例,针对高并发场景下的库存扣减问题:方案一:Redis原子操作+Lua脚本(推荐)//使用Redis+Lua保证原子性publicbo...

3月26日更新 快速施法自动施法可独立设置

2016年3月26日DOTA2有一个79.6MB的更新主要是针对自动施法和快速施法的调整本来内容不多不少朋友都有自动施法和快速施法的困扰英文更新日志一些视觉BUG修复就不翻译了主要翻译自动施...

Redis 是如何提供服务的

在刚刚接触Redis的时候,最想要知道的是一个’setnameJhon’命令到达Redis服务器的时候,它是如何返回’OK’的?里面命令处理的流程如何,具体细节怎么样?你一定有问过自己...

lua _G、_VERSION使用

到这里我们已经把lua基础库中的函数介绍完了,除了函数外基础库中还有两个常量,一个是_G,另一个是_VERSION。_G是基础库本身,指向自己,这个变量很有意思,可以无限引用自己,最后得到的还是自己,...

China's top diplomat to chair third China-Pacific Island countries foreign ministers' meeting

BEIJING,May21(Xinhua)--ChineseForeignMinisterWangYi,alsoamemberofthePoliticalBureau...

移动工作交流工具Lua推出Insights数据分析产品

Lua是一个适用于各种职业人士的移动交流平台,它在今天推出了一项叫做Insights的全新功能。Insights是一个数据平台,客户可以在上面实时看到员工之间的交流情况,并分析这些情况对公司发展的影响...

Redis 7新武器:用Redis Stack实现向量搜索的极限压测

当传统关系型数据库还在为向量相似度搜索的性能挣扎时,Redis7的RedisStack...

Nginx/OpenResty详解,Nginx Lua编程,重定向与内部子请求

重定向与内部子请求Nginx的rewrite指令不仅可以在Nginx内部的server、location之间进行跳转,还可以进行外部链接的重定向。通过ngx_lua模块的Lua函数除了能实现Nginx...