mysqljson存儲類型
1. mysql使用什麼類型存 json數據
JSON (javaScriptObject Notation) 是一種輕量級的數據交換格式,主要用於傳送數據。JSON採用了獨立於語言的文本格式,類似XML,但是比XML簡單,易讀並且易編寫。對機器來說易於解析和生成,並且會減少網路帶寬的傳輸。由於JSON格式可以解耦javascript客戶端應用與Restful伺服器端的方法調用,因而在互聯網應用中被大量使用。
JSON的格式非常簡單:名稱/鍵值。之前MySQL版本裡面要實現這樣的存儲,要麼用VARCHAR要麼用TEXT大文本。 MySQL5.7發布後,專門設計了JSON數據類型以及關於這種類型的檢索以及其他函數解析。我們先看看MySQL老版本的JSON存取。
示例表結構:
CREATE TABLE json_test(
id INT,
person_desc TEXT
)ENGINE INNODB;
我們來插入一條記錄:
INSERT INTO json_test VALUES (1,'{
"programmers": [{
"firstName": "Brett",
"lastName": "McLaughlin",
"email": "aaaa"
}, {
"firstName": "Jason",
"lastName": "Hunter",
"email": "bbbb"
}, {
"firstName": "Elliotte",
"lastName": "Harold",
"email": "cccc"
}],
"authors": [{
"firstName": "Isaac",
"lastName": "Asimov",
"genre": "sciencefiction"
}, {
"firstName": "Tad",
"lastName": "Williams",
"genre":"fantasy"
}, {
"firstName": "Frank",
"lastName": "Peretti",
"genre": "christianfiction"
}],
"musicians": [{
"firstName": "Eric",
"lastName": "Clapton",
"instrument": "guitar"
}, {
"firstName": "Sergei",
"lastName": "Rachmaninoff",
"instrument": "piano"
}]
}');
那一般我們遇到這樣來存儲JSON格式的話,只能把這條記錄取出來交個應用程序,由應用程序來解析。如此一來,JSON又和特定的應用程序耦合在一起,其便利性的優勢大打折扣。
現在到了MySQL5.7,可以支持對JSON進行屬性的解析,我們重新修改下表結構:
ALTER TABLE json_test MODIFY person_desc json;
先看看插入的這行JSON數據有哪些KEY:
mysql> SELECT id,json_keys(person_desc) as "keys" FROM json_test\G
*************************** 1. row***************************
id: 1
keys: ["authors", "musicians","programmers"]
1 row in set (0.00 sec)
我們可以看到,裡面有三個KEY,分別為authors,musicians,programmers。那現在找一個KEY把對應的值拿出來:
mysql> SELECT json_extract(AUTHORS,'$.lastName[0]') AS 'name', AUTHORS FROM
-> (
-> SELECT id,json_extract(person_desc,'$.authors[0][0]') AS "authors" FROM json_test
->UNION ALL
-> SELECT id,json_extract(person_desc,'$.authors[1][0]') AS "authors" FROM json_test
-> UNION ALL
-> SELECT id,json_extract(person_desc,'$.authors[2][0]') AS "authors" FROM json_test
-> ) AS T1
-> ORDER BY NAME DESC\G
*************************** 1. row***************************
name:"Williams"
AUTHORS: {"genre": "fantasy","lastName": "Williams", "firstName":"Tad"}
*************************** 2. row***************************
name:"Peretti"
AUTHORS: {"genre":"christianfiction", "lastName": "Peretti","firstName": "Frank"}
*************************** 3. row***************************
name:"Asimov"
AUTHORS: {"genre": "sciencefiction","lastName": "Asimov", "firstName":"Isaac"}
3 rows in set (0.00 sec)
現在來把詳細的值羅列出來:
mysql> SELECT
->json_extract(AUTHORS,'$.firstName[0]') AS "firstname",
-> json_extract(AUTHORS,'$.lastName[0]')AS "lastname",
-> json_extract(AUTHORS,'$.genre[0]') AS"genre"
-> FROM
-> (
-> SELECT id,json_extract(person_desc,'$.authors[0]')AS "authors" FROM json
_test
-> ) AS T\G
*************************** 1. row***************************
firstname: "Isaac"
lastname:"Asimov"
genre:"sciencefiction"
1 row in set (0.00 sec)
我們進一步來演示把authors 這個KEY對應的所有對象刪掉。
mysql> UPDATE json_test
-> SET person_desc =json_remove(person_desc,'$.authors')\G
Query OK, 1 row affected (0.01 sec)
Rows matched: 1 Changed: 1 Warnings: 0
查找下對應的KEY,發現已經被刪除掉了。
mysql> SELECT json_contains_path(person_desc,'all','$.authors')as authors_exists FROM json_test\G
*************************** 1. row***************************
authors_exists: 0
1 row in set (0.00 sec)
總結下,雖然MySQL5.7開始支持JSON數據類型,但是我建議如果要使用的話,最好是把這樣的值取出來,然後在應用程序段來計算。畢竟資料庫是用來處理結構化數據的,大量的未預先定義schema的json解析,會拖累資料庫的性能。
2. 一文說透 MySQL JSON 數據類型(收藏)
MySQL 5.7.8 之後開始支持 JSON 數據類型,相比於字元類型,它提供了優化的存儲格式和更快的元素訪問效率。之前,獲取 JSON 文檔中的元素需要讀取整個文檔,消耗磁碟 I/O 和網路帶寬,可能在高並發場景下影響性能。
在 MySQL 8.0.3 及以後版本,JSON 類型引入了函數索引,可以簡化操作,如直接在 SQL 中獲取、插入、修改和刪除 JSON 文檔的指定元素,減少了 I/O和網路開銷。本文將詳細介紹以下操作:
- JSON 欄位的增刪改查操作
- 創建 JSON 欄位的索引
- 升級字元欄位為 JSON 欄位
- 使用 JSON 時的注意事項,如默認值、索引限制和文檔大小
- Partial Updates 的優勢和使用條件
- JSON 函數,如查詢、修改、輔助函數的用法
特別是 Partial Updates,MySQL 8.0 引入的新特性,可以實現原地更新 JSON 文檔,顯著提高性能。通過設置 binlog_row_value_options 為 PARTIAL_JSON,可以在主從復制中充分利用這一特性。
在性能測試中,MySQL 8.0 的查詢速度比 MySQL 5.7 快得多,尤其是在 binlog_row_image 設置為 MINIMAL 的情況下。對於 JSON 數據的處理,使用 MySQL 8.0 是一個更好的選擇。