Python3 写入中文(utf-8)到文本，还是会出现乱码？

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

This topic created in 3349 days ago, the information mentioned may be changed or developed.

MySQL 数据库里存的数据是 utf-8，python3 写入文本，还是会出乱码：

news = News.query.filter_by(news_id=news_id).first()
f = open('news.txt', 'w')
f.write(news.content)
f.close()

news.content 文章内容是全英文的 OK，文章里面有中文就是乱码。

16 replies • 2017-09-04 22:12:46 +08:00

yunkchen

Sep 4, 2017

https://www.v2ex.com/t/385184

rogwan

Sep 4, 2017

@yunkchen 试过加 encoding='utf-8':

f = open('news.txt', 'w', encoding='utf-8')

中文还是乱码。

fanhaipeng0403

Sep 4, 2017

数据库编码设置，驱动编码设置

ltux

Sep 4, 2017

先搞清楚 news.content 是 bytes 还是 str

rogwan

Sep 4, 2017

@ltux print(type(news.content)) 是 str 啊

news.content <class 'str'>

geofvt

Sep 4, 2017

news.content 需要编码转换
或者用 beautifulsoup 的 prettify()
https://gist.github.com/ercJuL/97e27d199451d43f93f14d41625955c9

petelin

Sep 4, 2017

乱码贴出来看看

rogwan

Sep 4, 2017

@petelin

<p>中文字符</p>

ä¸æ–‡å—ç¬¦

ltux

Sep 4, 2017

我猜 new.content 里面是原内容以 utf-8 编码之后又原封不动转换成了对应的 str。所以解决方法是先原封不动转换成 bytes, 再按 utf-8 解码，即：news.content.encode('latin-1').decode('utf-8')

说到底还是数据库驱动设置的问题。

ltux

Sep 4, 2017

如上，写入的时候把 f.write( news.content ) 换成 f.write( news.content.encode('latin-1').decode('utf-8') ) 八成就行了。

xhp281

Sep 4, 2017

f = open('news.txt', 'w', encoding='utf-8') 这样子不行?你打印的时候是不是乱码

rogwan

Sep 4, 2017

@ltux
@xhp281

呃，貌似不是数据库里编码的问题，有点奇怪，IDE 环境里 f.write('中文字符') 写中文都是乱码。直接 IDLE 写 f.write('中文字符') 没问题。把 IDE 里的 *.py 文件全部重新 encode 一下，现在好了

mcfog

Sep 4, 2017 via Android

赌五毛楼主是 windows 环境，赌一块楼主不知道什么是 BOM

rogwan

Sep 4, 2017 via Android

@mcfog 你先把 5 毛掏出来先，哈哈😄 全部是 ubuntu 环境 server 和 desktop （只是用了一次 idle ） bom 在这个 debug 里为什么要出现？

flynaj

Sep 4, 2017 via Android

.py 文件也要保存成 UTF-8，新手问题

likuku

Sep 4, 2017

先确认你数据库内数据表的编码是 utf8，数据库连接是 utf8，数据存取时是 utf8，原始数据是 utf8 编码