UnicodeEncodeError：'latin-1'编解码器无法编码字符-IT科技

摘要：问题描述：当我尝试将外来字符插入数据库时，可能是什么原因导致此错误？>>UnicodeEncodeError: 'latin-1' codec can't encode character u'/u201c' in position 0: ordinal not in range(256) 我...

问题描述：

当我尝试将外来字符插入数据库时，可能是什么原因导致此错误？

>>UnicodeEncodeError: 'latin-1' codec can't encode character u'/u201c' in position 0: ordinal not in range(256)

我该如何解决呢？

谢谢！

解决方案 1：

使用 Python MySQLdb 模块时我遇到了同样的问题。由于 MySQL 允许您在文本字段中存储几乎任何所需的二进制数据，而不管字符集是什么，我在这里找到了解决方案：

在 Python MySQLdb 中使用 UTF8

编辑：引用上面的 URL 来满足第一个评论中的请求...

“UnicodeEncodeError：'latin-1'编解码器无法编码字符...”
这是因为 MySQLdb 通常会尝试将所有内容编码为 latin-1。建立连接后立即执行以下命令即可解决此问题：

db.set_character_set('utf8')
dbc.execute('SET NAMES utf8;')
dbc.execute('SET CHARACTER SET utf8;')
dbc.execute('SET character_set_connection=utf8;')

“db”是的结果MySQLdb.connect()，“dbc”是的结果
db.cursor()。

解决方案 2：

字符 U+201C 左双引号不存在于 Latin-1（ISO-8859-1）编码中。

它出现在代码页 1252（西欧）中。这是一种基于 ISO-8859-1 的 Windows 特定编码，但将额外的字符放入 0x80-0x9F 范围内。代码页 1252 经常与 ISO-8859-1 混淆，这是一种令人讨厌但现在已成为标准的 Web 浏览器行为：如果您以 ISO-8859-1 提供页面，浏览器会将其视为 cp1252。然而，它们实际上是两种不同的编码：

>>> u'He said /u201CHello/u201D'.encode('iso-8859-1')
UnicodeEncodeError
>>> u'He said /u201CHello/u201D'.encode('cp1252')
'He said x93Hellox94'

如果您仅将数据库用作字节存储，则可以使用 cp1252 来编码“Windows 西文代码页中存在的其他字符。但是 cp1252 中不存在的其他 Unicode 字符仍会导致错误。

您可以encode(..., 'ignore')通过删除字符来抑制错误，但实际上，在本世纪，您应该在数据库和页面中使用 UTF-8。此编码允许使用任何字符。理想情况下，您还应该告诉 MySQL 您正在使用 UTF-8 字符串（通过设置数据库连接和字符串列的排序规则），这样它就可以正确进行不区分大小写的比较和排序。

解决方案 3：

最好的解决办法是

将 mysql 的字符集设置为“utf-8”
喜欢这个评论（添加use_unicode=True和charset="utf8"）

db = MySQLdb.connect(host="localhost", user = "root", passwd = "", db = "testdb", use_unicode=True, charset="utf8") – KyungHoon Kim 2014 年 3 月 13 日 17:04

详情见：

class Connection(_mysql.connection):

    """MySQL Database Connection Object"""

    default_cursor = cursors.Cursor

    def __init__(self, *args, **kwargs):
        """

        Create a connection to the database. It is strongly recommended
        that you only use keyword parameters. Consult the MySQL C API
        documentation for more information.

        host
          string, host to connect

        user
          string, user to connect as

        passwd
          string, password to use

        db
          string, database to use

        port
          integer, TCP/IP port to connect to

        unix_socket
          string, location of unix_socket to use

        conv
          conversion dictionary, see MySQLdb.converters

        connect_timeout
          number of seconds to wait before the connection attempt
          fails.

        compress
          if set, compression is enabled

        named_pipe
          if set, a named pipe is used to connect (Windows only)

        init_command
          command which is run once the connection is created

        read_default_file
          file from which default client values are read

        read_default_group
          configuration group to use from the default file

        cursorclass
          class object, used to create cursors (keyword only)

        use_unicode
          If True, text-like columns are returned as unicode objects
          using the connection's character set.  Otherwise, text-like
          columns are returned as strings.  columns are returned as
          normal strings. Unicode objects will always be encoded to
          the connection's character set regardless of this setting.

        charset
          If supplied, the connection character set will be changed
          to this character set (MySQL-4.1 and newer). This implies
          use_unicode=True.

        sql_mode
          If supplied, the session SQL mode will be changed to this
          setting (MySQL-4.1 and newer). For more details and legal
          values, see the MySQL documentation.

        client_flag
          integer, flags to use or 0
          (see MySQL docs or constants/CLIENTS.py)

        ssl
          dictionary or mapping, contains SSL connection parameters;
          see the MySQL documentation for more details
          (mysql_ssl_set()).  If this is set, and the client does not
          support SSL, NotSupportedError will be raised.

        local_infile
          integer, non-zero enables LOAD LOCAL INFILE; zero disables

        autocommit
          If False (default), autocommit is disabled.
          If True, autocommit is enabled.
          If None, autocommit isn't set and server default is used.

        There are a number of undocumented, non-standard methods. See the
        documentation for the MySQL C API for some hints on what they do.

        """

解决方案 4：

我希望你的数据库至少是 UTF-8。然后你需要先运行，yourstring.encode('utf-8')然后再尝试将其放入数据库。

解决方案 5：

使用以下代码片段将文本从拉丁语转换为英语

import unicodedata
def strip_accents(text):
    return "".join(char for char in
                   unicodedata.normalize('NFKD', text)
                   if unicodedata.category(char) != 'Mn')

strip_accents('áéíñóúü')

输出：

‘艾诺’

解决方案 6：

您正尝试使用无法描述该代码点的/u201c编码来存储 Unicode 代码点。您可能需要更改数据库以使用 utf-8，并使用适当的编码存储字符串数据，或者您可能需要在存储内容之前清理输入；即使用类似 Sam Ruby 的优秀 i18n 指南。它讨论了可能导致的问题，并建议如何处理它，以及示例代码的链接！ISO-8859-1 / Latin-1`windows-1252`

解决方案 7：

SQLAlchemy 用户可以简单地将其字段指定为convert_unicode=True。

例子：
sqlalchemy.String(1000, convert_unicode=True)

SQLAlchemy 将简单地接受 unicode 对象并返回它们，处理编码本身。

文档

解决方案 8：

Latin-1 （又名ISO 8859-1）是单八位字节字符编码方案，并且不能将/u201c( “) 放入一个字节中。

您是想使用 UTF-8 编码吗？

解决方案 9：

UnicodeEncodeError：'latin-1' 编解码器无法对位置 106 处的字符'/u2013'进行编码：序数不在范围内（256）

解决方案 1：
/u2013 - 谷歌字符含义以确定实际导致此错误的字符，然后您可以用其他字符替换字符串中的特定字符，这是您正在使用的编码的一部分。

解决方案 2：
将字符串编码更改为包含字符串所有字符的编码。然后您可以打印该字符串，它将正常工作。

下面的代码用于改变字符串的编码，借用自@bobince

 u'He said /u201CHello/u201D'.encode('cp1252')

解决方案 10：

mysql.connector 的最新版本只有

db.set_charset_collation('utf8', 'utf8_general_ci')

而不是

db.set_character_set('utf8') //This feature is not available

解决方案 11：

我在使用 PyMySQL 时也遇到了同样的问题。我检查了这个软件包的版本，它是 0.7.9。然后我卸载它并重新安装 PyMySQL-1.0.2，问题解决了。

pip uninstall PyMySQL
pip install PyMySQL

解决方案 12：

Python：您需要

在 Python 文件的第一行添加# - - coding: UTF-8 - -（删除 * 周围的空格）。然后将以下内容添加到要编码的文本中： .encode('ascii', 'xmlcharrefreplace')。这将用其 ASCII 等效字符替换所有 unicode 字符。