如何在Python中读取带有重音字符的UTF8 CSV文件?

Patricia Arquette
发布: 2024-11-02 21:57:30
原创
251 人浏览过

How to Read UTF8 CSV Files with Accented Characters in Python?

使用 Python 读取 UTF8 CSV 文件

由于 Python 的 ASCII 支持有限,因此在 Python 中读取包含重音字符的 CSV 文件可能具有挑战性。本文探讨了此问题的解决方案,解决尝试读取此类文件时遇到的“UnicodeDecodeError”。

Unicode 友好的 CSV 阅读器

要处理重音字符,我们需要一个 CSV 阅读器支持Unicode编码。以下代码修改了标准 CSV 读取器:

<code class="python">def unicode_csv_reader(unicode_csv_data, dialect=csv.excel, **kwargs):
    # Decode UTF-8 data into Unicode strings
    csv_reader = csv.reader(unicode_csv_data, dialect=dialect, **kwargs)
    for row in csv_reader:
        yield [unicode(cell, 'utf-8') for cell in row]</code>
登录后复制

UTF-8 编码器

原始解决方案错误地将编码应用于字节字符串而不是 Unicode 字符串。下面的代码纠正了这个错误:

<code class="python">import csv

def unicode_csv_reader(utf8_data, dialect=csv.excel, **kwargs):
    csv_reader = csv.reader(utf8_data, dialect=dialect, **kwargs)
    for row in csv_reader:
        yield [unicode(cell, 'utf-8') for cell in row]</code>
登录后复制

示例用法

现在我们可以自信地读取 UTF8 编码的 CSV 文件,如下所示:

<code class="python">filename = 'output.csv'
reader = unicode_csv_reader(open(filename))

# Iterate through the rows, fields
for field1, field2, field3 in reader:
    print field1, field2, field3 </code>
登录后复制

输入数据注意事项编码

请记住,提供的解决方案假设输入数据已经采用 UTF8 编码。如果不是这种情况,您可以使用decode方法将其转换为UTF8,然后再将其传递给CSV阅读器。

以上是如何在Python中读取带有重音字符的UTF8 CSV文件?的详细内容。更多信息请关注PHP中文网其他相关文章!

来源:php.cn
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
作者最新文章
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板