百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

MySQL 5.7 JSON 数据类型使用总结

wptr33 2025-02-18 13:39 19 浏览

从MySQL5.7.8开始,MySQL支持原生的JSON数据类型。MySQL 支持RFC 7159定义的全部json 数据类型,具体的包含四种基本类型(strings, numbers, booleans, null)和两种结构化类型(objects and arrays)。

将 JSON 格式的字符串存储在字符串列中相比,该数据类型具有以下优势:

  • 自动验证存储在 JSON列中的 JSON 文档。无效的文档会产生错误。
  • 优化的存储格式。存储在列中的 JSON 文档被转换为允许快速读取文档元素的内部格式。
  • 当读取 JSON 值时,不需要从文本表示中解析该值,使服务器能够直接通过键或数组索引查找子对象或嵌套值,而无需读取文档中它们之前或之后的所有值。

JSON类型的存储结构

MySQL为了提供对json对象的支持,提供了一套将json字符串转为结构化二进制对象的存储方式。json会被转为二进制的doc对象存储于磁盘中(在处理JSON时MySQL使用的utf8mb4字符集,utf8mb4utf8ascii的超集)。

doc对象包含两个部分,type和value部分。其中type占1字节,可以表示16种类型:大的和小的json object类型、大的和小的 json array类型、literal类型(true、false、null三个值)、number类型(int6、uint16、int32、uint32、int64、uint64、double类型、utf8mb4 string类型和custom data(mysql自定义类型)

JSON数据类型意义

其实,没有JSON数据类型的支持,我们一样可以通过varchar类型或者text等类型来保存这一格式的数据,但是,为什么还要专门增加这一数据格式的支持呢?其中肯定有较varchar或者text来存储此类型更优越的地方。

  • 保证了JSON数据类型的强校验,JSON数据列会自动校验存入此列的内容是否符合JSON格式,非正常格式则报错,而varchar类型和text等类型本身是不存在这种机制的。
  • MySQL同时提供了一组操作JSON类型数据的内置函数。
  • 更优化的存储格式,存储在JSON列中的JSON数据会被转成内部特定的存储格式,允许快速读取。
  • 可以基于JSON格式的特征支持修改特定的键值。(即不需要把整条内容拿出来放到程序中遍历然后寻找替换再塞回去,MySQL内置的函数允许你通过一条SQL语句就能搞定)

JSON 数据类型

JSON 对象

  • 使用对象操作的方法进行查询:字段->'$.json属性'
  • 使用函数进行查询:json_extract(字段, '$.json属性')
  • 获取JSON数组/对象长度:JSON_LENGTH()

JSON 数组

  • 使用对象操作的方法进行查询:字段->'$[0].属性'
  • 使用函数进行查询:JSON_CONTAINS(字段,JSON_OBJECT('json属性', '内容'))
  • 获取JSON数组/对象长度:JSON_LENGTH()

创建 JSON

类似varchar,设置主要将字段的type是json,不能设置长度,可以是NULL但不能有默认值。

CREATE TABLE `tinywan_json` (
 id INT ( 11 ) NOT NULL auto_increment,
 tag json NOT NULL COMMENT '标签列表',
 catagory json NOT NULL COMMENT '分类列表',
 create_time INT ( 11 ) DEFAULT NULL COMMENT '创建时间',
PRIMARY KEY ( id ) 
) ENGINE = INNODB DEFAULT charset = utf8mb4;

使用 describe tinywan_json 查看创建的表结构:

mysql> describe tinywan_json;
+-------------+---------+------+-----+---------+----------------+
| Field       | Type    | Null | Key | Default | Extra          |
+-------------+---------+------+-----+---------+----------------+
| id          | int(11) | NO   | PRI | NULL    | auto_increment |
| tag         | json    | NO   |     | NULL    |                |
| catagory    | json    | NO   |     | NULL    |                |
| create_time | int(11) | YES  |     | NULL    |                |
+-------------+---------+------+-----+---------+----------------+
4 rows in set (0.05 sec)

写入JSON数据

INSERT INTO tinywan_json ( catagory, tag )
VALUES
 ( '{"0":"厨卫","1":"童装","2":"休闲"}', '["Good","Fine","Bad"]' );

MYSQL也有专门的函数 JSON_OBJECT, JSON_ARRAY函数生成json格式的数据。

INSERT INTO tinywan_json ( catagory, tag )
VALUES
 ( JSON_OBJECT ( "name", "John", "age", 23 ), JSON_ARRAY ( 'Low', 'Middle', 'High' ) )

查看插入的两条数据

mysql> select * from tinywan_json;
+----+---------------------------+-----------------------------------------+-------------+
| id | tag                       | catagory                                | create_time |
+----+---------------------------+-----------------------------------------+-------------+
|  1 | ["Good", "Fine", "Bad"]   | {"0": "厨卫", "1": "童装", "2": "休闲"} | NULL        |
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"}             | NULL        |
+----+---------------------------+-----------------------------------------+-------------+
2 rows in set (0.10 sec)

查询 JSON

查询json中的数据使用 column->path 的形式,其中对象类型path这样表示 $.path,而数组类型则是 $[index]

查看每一行数据的JSON类型,筛选如下:

mysql> select tag,json_type(tag),catagory,json_type(catagory) from tinywan_json;
+---------------------------+----------------+-----------------------------------------+---------------------+
| tag                       | json_type(tag) | catagory                                | json_type(catagory) |
+---------------------------+----------------+-----------------------------------------+---------------------+
| ["Good", "Fine", "Bad"]   | ARRAY          | {"0": "厨卫", "1": "童装", "2": "休闲"} | OBJECT              |
| ["Low", "Middle", "High"] | ARRAY          | {"age": 23, "name": "John"}             | OBJECT              |
+---------------------------+----------------+-----------------------------------------+---------------------+
2 rows in set (0.07 sec)

筛选出catagoryname = John的那条记录的所有tag:

mysql> select tag from tinywan_json where catagory->'$.name' = 'John';
+---------------------------+
| tag                       |
+---------------------------+
| ["Low", "Middle", "High"] |
+---------------------------+
1 row in set (0.06 sec)

通过json_type确定了tag的数据类型是ARRAY,那么就可以使用数组索引的方式查询:

mysql> select tag->'$[0]',tag->'$[2024]',tag->'$.notexist' from tinywan_json where catagory->'$.name' = 'John';
+-------------+----------------+-------------------+
| tag->'$[0]' | tag->'$[2024]' | tag->'$.notexist' |
+-------------+----------------+-------------------+
| "Low"       | NULL           | NULL              |
+-------------+----------------+-------------------+
1 row in set (0.05 sec)

上面的例子中,可以看到,使用 tag->'$[0]' 的方式如期获取了tag数组内的第一个数据。另外两个,一个tag->'$[2024]'是不存在的数组元素,一个tag->'$.notexist'是不存在的对象键,都返回了 null,这与预期的一致。

还要一个小小的问题,返回的 tag->'$[0]' = "Low",并且左右有一对双引号,可否去掉呢?使用 JSON_UNQUOTE 函数

mysql> select JSON_UNQUOTE(tag->'$[0]'),tag->'$[2024]',tag->'$.notexist' from tinywan_json where catagory->'$.name' = 'John';
+---------------------------+----------------+-------------------+
| JSON_UNQUOTE(tag->'$[0]') | tag->'$[2024]' | tag->'$.notexist' |
+---------------------------+----------------+-------------------+
| Low                       | NULL           | NULL              |
+---------------------------+----------------+-------------------+
1 row in set (0.06 sec)

JSON 条件查询

因为JSON不同于字符串,所以如果用字符串和JSON字段进行比较,是不会相等的。这时可以使用CAST函数,将字符串转成JSON的形式。

mysql> select * from tinywan_json where catagory = '{"age": 23, "name": "John"}';
Empty set

mysql> select * from tinywan_json where catagory = CAST('{"age": 23, "name": "John"}' as JSON);
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.07 sec)

对应地,select字段和where筛选条件中,均可以使用 column->path 的方式操作。

mysql> select tag,catagory->'$.age' from tinywan_json where tag->'$[1]' = 'Middle';
+---------------------------+-------------------+
| tag                       | catagory->'$.age' |
+---------------------------+-------------------+
| ["Low", "Middle", "High"] | 23                |
+---------------------------+-------------------+
1 row in set (0.07 sec)

特别注意的是。JSON中的元素是严格区分变量类型的,比如说整型和字符串是严格区分的。

mysql> select * from tinywan_json where catagory->'$.age' = 23;
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.06 sec)

mysql> select * from tinywan_json where catagory->'$.age' = '23';
Empty set

除了用 column->path 的形式搜索,还可以用JSON_CONTAINS 函数,但和 column->path 的形式有点相反的是,JSON_CONTAINS 第二个参数是不接受整数的,无论 json 元素是整型还是字符串,否则会出现错误nvalid data type for JSON data in argument 2 to function json_contains; a JSON string or JSON type is required.

mysql> select * from tinywan_json where JSON_CONTAINS(catagory,'23','$.age');
+----+---------------------------+-----------------------------+-------------+
| id | tag                       | catagory                    | create_time |
+----+---------------------------+-----------------------------+-------------+
|  2 | ["Low", "Middle", "High"] | {"age": 23, "name": "John"} | NULL        |
+----+---------------------------+-----------------------------+-------------+
1 row in set (0.08 sec)

mysql> select * from tinywan_json where JSON_CONTAINS(catagory,23,'$.age');
Invalid data type for JSON data in argument 2 to function json_contains; a JSON string or JSON type is required.

上面打印的第一行,才是正确的写法。整数应该写成 'int',字符串则要看值内的情况,很多情况下需要带上双引号,'"string"',这样写。如下:

mysql> select * from tinywan_json where JSON_CONTAINS(tag,'"Fine"');
+----+-------------------------+-----------------------------------------+-------------+
| id | tag                     | catagory                                | create_time |
+----+-------------------------+-----------------------------------------+-------------+
|  1 | ["Good", "Fine", "Bad"] | {"0": "厨卫", "1": "童装", "2": "休闲"} | NULL        |
+----+-------------------------+-----------------------------------------+-------------+
1 row in set (0.07 sec)

小结

  • JSON类型无须预定义字段,适合拓展信息的存储
  • 单个JSON文档的大小不能超过4G;单个KEY的大小不能超过两个字节,即64K
  • JSON类型适合应用于不常更新的静态数据
  • 对搜索较频繁的数据建议增加虚拟列并建立索引

相关推荐

MySQL进阶五之自动读写分离mysql-proxy

自动读写分离目前,大量现网用户的业务场景中存在读多写少、业务负载无法预测等情况,在有大量读请求的应用场景下,单个实例可能无法承受读取压力,甚至会对业务产生影响。为了实现读取能力的弹性扩展,分担数据库压...

Postgres vs MySQL_vs2022连接mysql数据库

...

3分钟短文 | Laravel SQL筛选两个日期之间的记录,怎么写?

引言今天说一个细分的需求,在模型中,或者使用laravel提供的EloquentORM功能,构造查询语句时,返回位于两个指定的日期之间的条目。应该怎么写?本文通过几个例子,为大家梳理一下。学习时...

一文由浅入深带你完全掌握MySQL的锁机制原理与应用

本文将跟大家聊聊InnoDB的锁。本文比较长,包括一条SQL是如何加锁的,一些加锁规则、如何分析和解决死锁问题等内容,建议耐心读完,肯定对大家有帮助的。为什么需要加锁呢?...

验证Mysql中联合索引的最左匹配原则

后端面试中一定是必问mysql的,在以往的面试中好几个面试官都反馈我Mysql基础不行,今天来着重复习一下自己的弱点知识。在Mysql调优中索引优化又是非常重要的方法,不管公司的大小只要后端项目中用到...

MySQL索引解析(联合索引/最左前缀/覆盖索引/索引下推)

目录1.索引基础...

你会看 MySQL 的执行计划(EXPLAIN)吗?

SQL执行太慢怎么办?我们通常会使用EXPLAIN命令来查看SQL的执行计划,然后根据执行计划找出问题所在并进行优化。用法简介...

MySQL 从入门到精通(四)之索引结构

索引概述索引(index),是帮助MySQL高效获取数据的数据结构(有序),在数据之外,数据库系统还维护者满足特定查询算法的数据结构,这些数据结构以某种方式引用(指向)数据,这样就可以在这些数据结构...

mysql总结——面试中最常问到的知识点

mysql作为开源数据库中的榜一大哥,一直是面试官们考察的重中之重。今天,我们来总结一下mysql的知识点,供大家复习参照,看完这些知识点,再加上一些边角细节,基本上能够应付大多mysql相关面试了(...

mysql总结——面试中最常问到的知识点(2)

首先我们回顾一下上篇内容,主要复习了索引,事务,锁,以及SQL优化的工具。本篇文章接着写后面的内容。性能优化索引优化,SQL中索引的相关优化主要有以下几个方面:最好是全匹配。如果是联合索引的话,遵循最...

MySQL基础全知全解!超详细无废话!轻松上手~

本期内容提醒:全篇2300+字,篇幅较长,可搭配饭菜一同“食”用,全篇无废话(除了这句),干货满满,可收藏供后期反复观看。注:MySQL中语法不区分大小写,本篇中...

深入剖析 MySQL 中的锁机制原理_mysql 锁详解

在互联网软件开发领域,MySQL作为一款广泛应用的关系型数据库管理系统,其锁机制在保障数据一致性和实现并发控制方面扮演着举足轻重的角色。对于互联网软件开发人员而言,深入理解MySQL的锁机制原理...

Java 与 MySQL 性能优化:MySQL分区表设计与性能优化全解析

引言在数据库管理领域,随着数据量的不断增长,如何高效地管理和操作数据成为了一个关键问题。MySQL分区表作为一种有效的数据管理技术,能够将大型表划分为多个更小、更易管理的分区,从而提升数据库的性能和可...

MySQL基础篇:DQL数据查询操作_mysql 查

一、基础查询DQL基础查询语法SELECT字段列表FROM表名列表WHERE条件列表GROUPBY分组字段列表HAVING分组后条件列表ORDERBY排序字段列表LIMIT...

MySql:索引的基本使用_mysql索引的使用和原理

一、索引基础概念1.什么是索引?索引是数据库表的特殊数据结构(通常是B+树),用于...