问题：在Django中保存Unicode字符串时，MySQL“字符串值不正确”错误
尝试将first_name，last_name保存到Django的auth_user模型时，出现奇怪的错误消息。
失败的例子
user = User.object.create_user(username, email, password)
user.first_name = u'Rytis'
user.last_name = u'Slatkevičius'
user.save()
>>> Incorrect string value: '\xC4\x8Dius' for column 'last_name' at row 104
user.first_name = u'Валерий'
user.last_name = u'Богданов'
user.save()
>>> Incorrect string value: '\xD0\x92\xD0\xB0\xD0\xBB...' for column 'first_name' at row 104
user.first_name = u'Krzysztof'
user.last_name = u'Szukiełojć'
user.save()
>>> Incorrect string value: '\xC5\x82oj\xC4\x87' for column 'last_name' at row 104
成功的例子
user.first_name = u'Marcin'
user.last_name = u'Król'
user.save()
>>> SUCCEED
MySQL设置
mysql> show variables like 'char%';
+--------------------------+----------------------------+
| Variable_name | Value |
+--------------------------+----------------------------+
| character_set_client | utf8 |
| character_set_connection | utf8 |
| character_set_database | utf8 |
| character_set_filesystem | binary |
| character_set_results | utf8 |
| character_set_server | utf8 |
| character_set_system | utf8 |
| character_sets_dir | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
8 rows in set (0.00 sec)
表字符集和排序规则
表auth_user具有utf-8字符集，并带有utf8_general_ci排序规则。
UPDATE命令的结果
使用UPDATE命令将上述值更新到auth_user表时，它没有引发任何错误。
mysql> update auth_user set last_name='Slatkevičiusa' where id=1;
Query OK, 1 row affected, 1 warning (0.00 sec)
Rows matched: 1 Changed: 1 Warnings: 0
mysql> select last_name from auth_user where id=100;
+---------------+
| last_name |
+---------------+
| Slatkevi?iusa |
+---------------+
1 row in set (0.00 sec)
PostgreSQL的
当我在Django中切换数据库后端时，上面列出的失败值可以更新到PostgreSQL表中。真奇怪。
mysql> SHOW CHARACTER SET;
+----------+-----------------------------+---------------------+--------+
| Charset | Description | Default collation | Maxlen |
+----------+-----------------------------+---------------------+--------+
...
| utf8 | UTF-8 Unicode | utf8_general_ci | 3 |
...
但是从http://www.postgresql.org/docs/8.1/interactive/multibyte.html，我发现了以下内容：
Name Bytes/Char
UTF8 1-4
这是否意味着unicode char在PostgreSQL中的maxlen为4个字节，而在MySQL中为3个字节，这导致了上述错误？
回答 0
这些答案都没有为我解决问题。根本原因是：
您不能在MySQL中使用utf-8字符集存储4字节字符。
MySQL的utf-8字符限制为3个字节（是的，这很奇怪，Django开发人员在这里总结得很好）
要解决此问题，您需要：
- 更改您的MySQL数据库，表和列以使用utf8mb4字符集（仅从MySQL 5.5起可用）
- 在Django设置文件中指定字符集，如下所示：
settings.py
DATABASES = {
'default': {
'ENGINE':'django.db.backends.mysql',
...
'OPTIONS': {'charset': 'utf8mb4'},
}
}注意：重新创建数据库时，您可能会遇到“ 指定密钥太长 ”的问题。
最可能的原因是a CharField，它的max_length为255，上面有某种索引（例如，唯一）。由于utf8mb4比utf-8使用的空间多33％，因此您需要将这些字段缩小33％。
在这种情况下，请将max_length从255更改为191。
或者，您可以编辑MySQL配置以消除此限制， 但是要注意一些django hackery
更新：我只是再次遇到这个问题，最终因为无法将我的字符数减少到191个而切换到PostgreSQLVARCHAR。
回答 1
我遇到了同样的问题，并通过更改列的字符集解决了它。即使您的数据库具有默认字符集，utf-8我也认为数据库列在MySQL中可能具有不同的字符集。这是我使用的SQL查询：
ALTER TABLE database.table MODIFY COLUMN col VARCHAR(255)
CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL;回答 2
如果您有此问题，请使用以下python脚本自动更改mysql数据库的所有列。
#! /usr/bin/env python
import MySQLdb
host = "localhost"
passwd = "passwd"
user = "youruser"
dbname = "yourdbname"
db = MySQLdb.connect(host=host, user=user, passwd=passwd, db=dbname)
cursor = db.cursor()
cursor.execute("ALTER DATABASE `%s` CHARACTER SET 'utf8' COLLATE 'utf8_unicode_ci'" % dbname)
sql = "SELECT DISTINCT(table_name) FROM information_schema.columns WHERE table_schema = '%s'" % dbname
cursor.execute(sql)
results = cursor.fetchall()
for row in results:
sql = "ALTER TABLE `%s` convert to character set DEFAULT COLLATE DEFAULT" % (row[0])
cursor.execute(sql)
db.close()回答 3
如果这是一个新项目，则只需删除数据库，然后使用适当的字符集创建一个新项目：
CREATE DATABASE <dbname> CHARACTER SET utf8;回答 4
我只是想出一种避免上述错误的方法。
保存到数据库
user.first_name = u'Rytis'.encode('unicode_escape')
user.last_name = u'Slatkevičius'.encode('unicode_escape')
user.save()
>>> SUCCEED
print user.last_name
>>> Slatkevi\u010dius
print user.last_name.decode('unicode_escape')
>>> Slatkevičius这是将这样的字符串保存到MySQL表中并在渲染为模板进行显示之前对其进行解码的唯一方法吗？
回答 5
您可以将文本字段的排序规则更改为UTF8_general_ci，此问题将得到解决。
注意，这不能在Django中完成。
回答 6
您不是要保存unicode字符串，而是要以UTF-8编码保存字节字符串。使它们成为实际的unicode字符串文字：
user.last_name = u'Slatkevičius'或（当您没有字符串文字时）使用utf-8编码对其进行解码：
user.last_name = lastname.decode('utf-8')回答 7
只需更改您的表，无需任何操作。只需在数据库上运行此查询。 更改表table_name转换为字符集utf8
它一定会工作。
回答 8
改进@madprops答案-解决方案作为Django管理命令：
import MySQLdb
from django.conf import settings
from django.core.management.base import BaseCommand
class Command(BaseCommand):
def handle(self, *args, **options):
host = settings.DATABASES['default']['HOST']
password = settings.DATABASES['default']['PASSWORD']
user = settings.DATABASES['default']['USER']
dbname = settings.DATABASES['default']['NAME']
db = MySQLdb.connect(host=host, user=user, passwd=password, db=dbname)
cursor = db.cursor()
cursor.execute("ALTER DATABASE `%s` CHARACTER SET 'utf8' COLLATE 'utf8_unicode_ci'" % dbname)
sql = "SELECT DISTINCT(table_name) FROM information_schema.columns WHERE table_schema = '%s'" % dbname
cursor.execute(sql)
results = cursor.fetchall()
for row in results:
print(f'Changing table "{row[0]}"...')
sql = "ALTER TABLE `%s` convert to character set DEFAULT COLLATE DEFAULT" % (row[0])
cursor.execute(sql)
db.close()
希望这可以帮助我以外的任何人:)
