使用 MySQL 8.0 操作 JSON 實踐
經過漫長的測試,即將整體遷移至Mysql8.0; Mysql8.0 對于Json操作新增/優化了很多相關Json的API操作。
閱讀了一下官方文檔,雖然絕大多數的JSON操作都是應用層完成,但是會一些Mysql的JSON語法,方便進行debug;選出基礎的, 有價值的部分,供未來參考。
https://dev.mysql.com/doc/refman/8.0/en/json.html https://dev.mysql.com/doc/refman/8.0/en/json-utility-functions.html
簡單概述
- 不允許為null; Json格式定義與LONGBLOB or LONGTEXT類似;它的最大長度是受到max_allowed_packet所控制的;
- 查看JSON字段所占用空間大小的函數時JSON_STORAGE_SIZE(xxx);
- 除普通的Json操作,額外支持GeoJSON (基于幾何圖形的針對地理空間數據交換格式)一些相關操作;
- 對Json欄位支持索引(結合Mysql8.0新特性,函數index);
- 一個可以支持部分的,原地更新Json Column 的可選優化項加入MySql8.0; 可以使用的函數有JSON_SET(), JSON_REPLACE() ,JSON_REMOVE(); 使用時,有一些約束,但是會有更加的性能。
JSON基礎工具
- //使用JSON_ARRAY方法定義JSON數組;
- SELECT JSON_ARRAY(1, "abc", NULL, TRUE, CURTIME())
- //結果:[1, "abc", null, true, "11:30:24.000000"]
- //JSON_OBJECT 方法定義JSON對象
- SELECT JSON_OBJECT('id', 87, 'name', 'carrot')
- //結果{"id": 87, "name": "carrot"}
- //數組 與 對象嵌套的場景;
- [99, {"id": "HK500", "cost": 75.99}, ["hot", "cold"]] {"k1": "value", "k2": [10, 20]}
- //日期/時間類型定義
- ["12:18:29.000000", "2015-07-29", "2015-07-29 12:18:29.000000"]
- //JSON_QUOTE 將JSON對象轉義成String, 就是將內部的符 號進行轉義,并整體包裹上雙引號;
- JSON_QUOTE(' "null" ')
- //結果 "\"null\""
- //將JSON內容美化并輸出;
- JSON_PRETTY()
- //可以將JSON/JSON內部的元素轉化為其他數據類型;
- //如下將JSON jdoc 中的id元素,轉化為 unsigned int;
- [https://dev.mysql.com/doc/refman/8.0/en/json.html#json-converting-between-types] (https://dev.mysql.com/doc/refman/8.0/en/json.html#json-converting-between-types)
- ORDER BY CAST(JSON_EXTRACT(jdoc, '$.id') AS UNSIGNED);
合并JSON的操作 JSON_MERGE_PRESERVE() and JSON_MERGE_PATCH() 實際業務用的可能性很少;-> -->操作符,按照key 找值;區別在于 -->會去除包裹的”以及轉義符號; 它的等價的Function形式是JSON_EXTRACT() 。
- // {"mascot": "Our mascot is a dolphin named \"Sakila\"."}
- mysql> SELECT col->"$.mascot" FROM qtest;
- //結果:| "Our mascot is a dolphin named \"Sakila\"." |
- SELECT sentence->>"$.mascot" FROM facts;
- // 結果: | Our mascot is a dolphin named "Sakila". |
JSON Path expression上面 --> 后雙引號中的內容就是所謂的JSON Path expression; 該語法是ECMAScript規范的一部分,所以前端程序員應該特別熟悉。
以下面這段JSON為例:
- [3, {"a": [5, 6], "b": 10}, [99, 100]]
- $[0] = 3 ;
- $[1] = {"a": [5, 6], "b": 10};
- $[2] = [99, 100];
與此同時,[2] 并非標量, 進一步。
- $[1].a = [5,6]
- $[1].a[1] = 6
- $[1].b = 10;
- $[2][0] = 99;
更進一步支持的語法特性$[n to m]
$[ 1 to 2] = [{"a": [5, 6], "b": 10}, [99, 100]] $[last-2 to last-1] = [3, {"a": [5, 6], "b": 10}]
總結一下;a .是代表所有的members in object; b []是代表所有的cells in array; c [prefix] ** suffix 是代表以prefix開始,以suffix為結束的所有路徑;另外,MySQL 系列面試題和答案全部整理好了,微信搜索互聯網架構師,在后臺發送:2T,可以在線閱讀。
查找并修改JSON
- //如上, 應該可以用-->語法取代;
- mysql> SELECT JSON_EXTRACT('{"a": 1, "b": 2, "c": [3, 4, 5]}', '$.*');
- //[1, 2, [3, 4, 5]]
- SELECT JSON_EXTRACT('{"a": 1, "b": 2, "c": [3, 4, 5]}', '$.c[*]')
- //[3, 4, 5]
- SELECT JSON_EXTRACT('{"a": {"b": 1}, "c": {"b": 2}}', '$**.b');
- //[1, 2]
- SELECT JSON_EXTRACT('[1, 2, 3, 4, 5]', '$[1 to 3]');
- //[2, 3, 4]
- //JSON_SET JSON_INSERT JSON_REPLACE JSON_REMOVE
- SET @j = '["a", {"b": [true, false]}, [10, 20]]';
- SELECT JSON_SET(@j, '$[1].b[0]', 1, '$[2][2]', 2);
- //| ["a", {"b": [1, false]}, [10, 20, 2]]
- SELECT JSON_INSERT(@j, '$[1].b[0]', 1, '$[2][2]', 2);
- //["a", {"b": [true, false]}, [10, 20, 2]]
- JSON_REPLACE(@j, '$[1].b[0]', 1, '$[2][2]', 2)
- //["a", {"b": [1, false]}, [10, 20]]
- SELECT JSON_REMOVE(@j, '$[2]', '$[1].b[1]', '$[1].b[1]');
- //["a", {"b": [true]}]
JSON Table Functions 一個比較常見的場景是JSON數據本身是一個表的結構;JSON_TABLE(*expr*, *path* COLUMNS (*column_list*) [AS\] *alias*)。
- SELECT * FROM JSON_TABLE( '[{"a":"3"},{"a":2},{"b":1},{"a":0},{"a":[1,2]}]',
- -> "$[*]"
- -> COLUMNS(
- -> rowid FOR ORDINALITY,
- -> ac VARCHAR(100) PATH "$.a" DEFAULT '111' ON EMPTY DEFAULT '999' ON ERROR,
- -> aj JSON PATH "$.a" DEFAULT '{"x": 333}' ON EMPTY,
- -> bx INT EXISTS PATH "$.b"
- -> )
- -> ) AS tt;
- Comparison and Ordering of JSON Values目前沒感覺倒價值;
- Aggregation of JSON Values目前沒感覺倒價值; 將返回值轉成其他類型就可以使用聚合函數。