python编码问题 utf-8 codec can not decode byte

a563562675

于 2020-05-28 16:02:28 发布

阅读量5.5k

点赞数 4

CC 4.0 BY-SA版权

分类专栏：配置文章标签：字符串 python

本文链接：https://blog.csdn.net/a563562675/article/details/106405411

配置专栏收录该内容

8 篇文章

订阅专栏

在Python中遇到'utf-8'编码无法解码字节0xb70的错误，该问题在Python2中不存在。通过查阅stackoverflow找到解决方案，可以使用`unicodedata`库的`normalize`方法忽略问题字符，或者使用`codecs`模块的`open`方法读取文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题描述

在用python读txt文件的时候遇到了编码问题：‘utf-8’ codec can’t decode byte 0xb70，同样的代码之前在python2的时候是不会出现问题的。用百度找了一下也没能找到有效的解决方法，后来在stackoverflow上找到了类似的问题。
stackoverflow问题

解决方案

str = unicode(str, errors='replace')

str = unicode(str, errors='ignore')

这个操作会删除（忽略）有问题的字符，并返回不包含这些字符的字符串。

可选方案

使用codecs模块中的open方法读取文件：

import codecs
with codecs.open(file_name, 'r', encoding='utf-8',
                 errors='ignore') as fdata:

与python2中相似的方法

有人提到，要使python3处理文件与和python2尽可能相似，可以使用：

with open(filename, encoding="latin-1") as datafile:
    # work on datafile here