Error: ER_TRUNCATED_WRONG_VALUE_FOR_FIELD: Incorrect string value: '\xF0\x9F\x91\xBD\xF0\x9F...' for column 'name' at row
都快崩潰了,但是還好終于解決了這種鬼問題。資料顯示原因是,MYSQL 5.5 之前, UTF8 編碼只支持1-3個(gè)字節(jié),只支持BMP這部分的unicode編碼區(qū),而emoji圖標(biāo)恰好是4個(gè)字節(jié)的編碼進(jìn)行存儲(chǔ)。從MYSQL5.5開始,可支持4個(gè)字節(jié)UTF編碼utf8mb4,一個(gè)字符最多能有4字節(jié),所以能支持更多的字符集。所以要解決問題,必需把數(shù)據(jù)庫(kù)表字符編碼全部改成utf8mb4。
推薦:mysql視頻教程
常用字符集
ASCII:美國(guó)信息互換標(biāo)準(zhǔn)編碼;英語(yǔ)和其他西歐語(yǔ)言;單字節(jié)編碼,7位表示一個(gè)字符,共128字符。
GBK:雙字節(jié),漢字內(nèi)碼擴(kuò)展規(guī)范;中日韓漢字、英文、數(shù)字;雙字節(jié)編碼;共收錄了21003個(gè)漢字,GB2312的擴(kuò)展。
UTF-8:Unicode標(biāo)準(zhǔn)的可變長(zhǎng)度字符編碼;Unicode標(biāo)準(zhǔn)(統(tǒng)一碼),業(yè)界統(tǒng)一標(biāo)準(zhǔn),包括世界上數(shù)十種文字的系統(tǒng);
UTF-8:使用一至三個(gè)字節(jié)為每個(gè)字符編碼。
utf8mb4:存儲(chǔ)四個(gè)字節(jié),應(yīng)用場(chǎng)景用于存儲(chǔ)emoji表情,因?yàn)榭梢詄moji表情四個(gè)字節(jié)。
utf8mb4:MySQL版本 > 5.5.3 。
其他常見字符集:UTF-32,UTF-16,Big5,latin1
數(shù)據(jù)庫(kù)中的字符集包含兩層含義
各種文字和符號(hào)的集合,包括各國(guó)家文字、標(biāo)點(diǎn)符號(hào)、圖形符號(hào)、數(shù)字等。
字符的編碼方式,即二進(jìn)制數(shù)據(jù)與字符的映射規(guī)則。
系統(tǒng)環(huán)境
MySQL 5.7.14
Mac OSX 10.11.6
首先備份
升級(jí)數(shù)據(jù)之前備份您服務(wù)器上的所有數(shù)據(jù),保持良好習(xí)慣,安全第一!
升級(jí)您的MySQL
新的數(shù)據(jù)庫(kù)可以在這里下載Upgrade the MySQL server to v5.5.3+。
修改您的數(shù)據(jù)庫(kù)、表、字段
# 對(duì)每一個(gè)數(shù)據(jù)庫(kù): ALTER DATABASE 這里數(shù)據(jù)庫(kù)名字 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci; # 對(duì)每一個(gè)表: ALTER TABLE 這里是表名字 CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci; # 對(duì)每一個(gè)字段: ALTER TABLE 這里是表名字 CHANGE 字段名字 重復(fù)字段名字 VARCHAR(191) CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci; # 上面一句或者使用modify來更改 ALTER TABLE 這里是表名字 modify 字段名字 VARCHAR(50) CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci DEFAULT '';
utf8mb4完全向后兼容utf8,無亂碼或其他數(shù)據(jù)丟失的形式出現(xiàn)。理論上是可以放心修改,如果您不放心修改,您可以拿備份恢復(fù)數(shù)據(jù),然后讓程序員處理這種兼容emoji存儲(chǔ)問題,存的時(shí)候過濾一遍轉(zhuǎn)成base64,然后取的時(shí)候轉(zhuǎn)回來?... 還是修改數(shù)據(jù)庫(kù)比較方便。
檢查你的字段和索引
不要將所有的都設(shè)置成utf8mb4,這個(gè)冒得必要。我只在我某些字段類型為VARCHAR的時(shí)候才設(shè)置成utf8mb4。
修改MySQL配置文件
這個(gè)地方最坑,我在我Mac osx 系統(tǒng)上找不到/etc/my.cnf 它根本不存在,所以我們需要?jiǎng)?chuàng)建這樣一個(gè)文件并修改它。
# 進(jìn)入這個(gè)目錄, # 在這個(gè)目錄下面有個(gè)后綴為`.cnf`的文件 cd /usr/local/mysql/support-files/ # 將這個(gè)文件復(fù)制到`etc`目錄中并將名字命名為`my.cnf` sudo cp my-default.cnf /etc/my.cnf # 然后編輯`my.cnf`文件,將下面內(nèi)容復(fù)制到里面。 sudo vim /etc/my.cnf
MySQL configuration file (/etc/my.cnf):
[client] default-character-set = utf8mb4 [mysql] default-character-set = utf8mb4 [mysqld] character-set-client-handshake = FALSE character-set-server = utf8mb4 collation-server = utf8mb4_unicode_ci
重啟MySQL
重啟步驟很重要,不然沒有任何效果。
啟動(dòng):/usr/local/mysql/support-files/mysql.server start
停止:/usr/local/mysql/support-files/mysql.server stop
重啟:/usr/local/mysql/support-files/mysql.server restart
系統(tǒng)中可以以這種形式重啟、停止或啟動(dòng)
service mysqld stop service mysqld start service mysqld restart
查看是否設(shè)置成功
通過下面命令查詢是否設(shè)置成功!
# 登陸MySQL進(jìn)行查詢 mysql> SHOW VARIABLES WHERE Variable_name LIKE 'character\_set\_%' OR Variable_name LIKE 'collation%'; # 運(yùn)行上面代碼顯示下面結(jié)果 # +--------------------------+--------------------+ # | Variable_name | Value | # +--------------------------+--------------------+ # | character_set_client | utf8mb4 | # | character_set_connection | utf8mb4 | # | character_set_database | utf8mb4 | # | character_set_filesystem | binary | # | character_set_results | utf8mb4 | # | character_set_server | utf8mb4 | # | character_set_system | utf8 | # | collation_connection | utf8mb4_unicode_ci | # | collation_database | utf8mb4_unicode_ci | # | collation_server | utf8mb4_unicode_ci | # +--------------------------+--------------------+ # 查看表的情況 mysql> SHOW FULL COLUMNS FROM users_profile;
到這一步表示你成功了!恭喜你!~
修復(fù)和優(yōu)化表
我跑到這一步其實(shí)沒有任何必要修復(fù)和優(yōu)化表,為了保險(xiǎn)起見,我還是運(yùn)行了這兩條命令,雖然不知道它有什么卵用,放在這里做個(gè)筆記吧。
REPAIR TABLE 表名字; OPTIMIZE TABLE 表名字;
聲明:本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí),若有侵權(quán)等問題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com