我们都会遇到这样的人，他们说话时是中文英文穿插使用的。也就是一句话中有中文也有英文，很多时候没有办法避免，尤其是说一些专业术语时，当然也有纯个人说话习惯和故意的。
最近业务中需要用 Python 写一些脚本。尽管脚本的交互只是命令行 + 日志输出，但是为了让界面友好些，我还是决定用中文输出日志信息。
然后，大多数人的做法是，调用encode/decode进行调试，并没有明确思考为何出现乱码
最近业务中需要用 Python 写一些脚本。尽管脚本的交互只是命令行 + 日志输出，但是为了让界面友好些，我还是决定用中文输出日志信息。 很快，我就遇到了异常： UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-3: ordinal not in range(128) 为了解决问题，我花时间去研究了一下 Python 的字符编码处理。网上也有不少文章讲 Python 的字符编码，但是我看过一遍，觉得自己可以讲得
我们来说说 Python 中是如何存储字符的，先来看一个乱码的例子。新建一个 demo.py 文件，文件存储格式为utf-8文件中内容如下。
utf-8： 可变长编码，常用的英文字母被编码成1个字节，汉字通常是3个字节，只有很生僻的字符才会被编码成4-6个字节。如果你要传输的文本包含大量英文字符，用UTF-8编码就能节省空间：
使用Python语言做网络爬虫或者写自动化脚本时，总会遇到“中文乱码”的问题，很是头疼。很多“中文乱码”的问题是跟Python的解码/编码有关，所以今天和大家说说Python的解码/编码（以Python2.7为例）。 1.什么是Python解码/编码？ Python里面的解码和编码也就是unicode和str这两种形式的相互转化。解码就是str -> unicode，相反的，编码是unicode -> str。 总的来说就是：unicode是Python解释器的内码，所有代码文件在导入并执行时，Python
###字符串的编码乱码问题由来已久，真的是令人头疼。这不是在做正则匹配中文时候，编码又一次成了拦路虎，在这儿记录两点。第一，字符串编码。第二，正则匹配中文。
在python2.x中，有两种数据类型，unicode和str，这两个都是basestring的子类
因为计算机只能处理数字，如果要处理文本，就必须先把文本转换为数字才能处理。最早的计算机在设计时采用8个比特（bit）作为一个字节（byte），所以，一个字节能表示的最大的整数就是255（二进制11111111=十进制255），0 - 255被用来表示大小写英文字母、数字和一些符号，这个编码表被称为ASCII编码，比如大写字母 A 的编码是65，小写字母 z 的编码是122。
我们已经讲过了，字符串也是一种数据类型，但是，字符串比较特殊的是还有一个编码问题。
Python不支持中文混合编码，也就是说一个Python程序中Unicode对象的encode函数只能使用一种编码，不能混合使用utf-8，gbk等编码
以前用php连mssqy时也经常出现中文乱码（中文变问号）的问题，那时就明白是编码没设置好导航，现在的Python连mssql数据库也同样出现这问题，问题一样，解决的办法当然也会相似，现在我们来看看解决方法。
这个环境问题比较简单了，直接切换设置的python的执行者就可。（注意python是设置了环境变量的，如果没有，下面的 cmd 需要带入全路径即可。）
可见非列表中的数据在输出时是会转换成中文显示出来的，但列表中的unicode数据不会。
http://blog.csdn.net/pipisorry/article/details/44136297
前言 有时候从接口的返回值里面获取到的是类似"%u4E0A%u6D77%u60A0%u60A0"这种格式的编码，不是python里面的unicode编码。 python里面的unicode编码应该是这种格式:\u4e0a\u6d77\u60a0\u60a0 一、unicode编码 1.先看下python的unicode编码：\u60a0，这个是\u开头的，里面的英文是小写 ``` # coding:utf-8 # 前面加u可以直接打印中文 a = u"\u4e0a\u6d77\u60a0\u60
参考链接： Python-json 7：Unicode和非ASCII字符编码为JSON
最近在用python接受网络数据的时候，输出时总是遇到编码的问题，虽然都解决了，但深刻意识到自己其实对python的编码并没有清晰的认识，所以才会遇到这样的问题。今天就此总结一下，以免日后夜长梦多。
关于python编码的基本常识 在python里面 “明文”是unicode类型 “密文”是其他的编码格式 如gbk utf-8 latin-1等等 编码: “明文”->”密文” .encode([目标编码格式]) 对象必须为unicode类型 解码: “密文”->”明文” .decode([源编码格式]) 对象为str类型 对于汉字 一共有三大类编码方式 以中文汉字”李”为例子 a. unicode类 机器码 \x67\x4e unicode(python表示) \u674e HTML E
这里记录 Python相关的值得分享的内容，每周五发布。由于微信不允许外部链接，点击阅读原文可访问文中的链接。
读写中文文件时，不需要考虑编码的情况。此时虽然可以正常从文件中读取中文，也可以正常地将中文写入文件中，但是无法正常打印中文字段到屏幕上：
python2.x版本的字符编码有时让人很头疼，遇到问题，网上方法可以解决错误，但对原理还是一知半解，本文主要介绍 python 中字符串处理的原理，附带解决 json 文件输出时，显示中文而非 unicode 问题。首先简要介绍字符串编码的历史，其次，讲解 python 对于字符串的处理，及编码的检测与转换，最后，介绍 python 爬虫采取的 json 数据存入文件时中文输出的问题。 参考书籍：Python网络爬虫从入门到实践 by唐松
前言 曾几何时 Python 中文乱码的问题困扰了我很多很多年，每次出现中文乱码都要去网上搜索答案，虽然解决了当时遇到的问题但下次出现乱码的时候又会懵逼，究其原因还是知其然不知其所以然。现在有的小伙伴为了躲避中文乱码的问题甚至代码中不使用中文，注释和提示都用英文，我曾经也这样干过，但这并不是解决问题，而是逃避问题，今天我们一起彻底解决 Python 中文乱码的问题。
如果这行代码是在源码文件中写入、保存然后执行，那么解释器载入代码时就将s初始化为文件指定编码(比如py文件开头那行的utf-8)；
ASCII编码可以说是最古老的编码了，是因为计算机最早是美国人发明的，美国人为了在计算机中使用自己的英语就制定了ASCII编码。
在最新的Python 3版本中，字符串是以Unicode编码的，即Python的字符串支持多语言
在学习Python之前，就听说过Python的版本圣战，最可怕的是有的写Py3的程序员觉得Py2是另一种语言....所以在刚开始学习的时候，我索性把Python3和Python2的文档都看了一遍。
仓库：https://github.com/apachecn/invent-with-python-zh
在看了很多的博客文章之后，总结整理得到了以下文章，非常感谢这些无私奉献的博主！ 文章末尾有本文引用的文章的链接，如果有漏掉的文章引用，可以发邮件联系我，随后再次附上链接！ 侵删！！！ 这一部分是下篇，主要讲的是编码部分，以及在python中会遇到的一些编码问题，偏向于实际应用一点。 上篇介绍了字符、字符集的一些概念，以及他们在python中的一些简单的代码示例，偏向于概念。 上篇地址：http://www.cnblogs.com/echo-coding/p/7435118.html 这绝对是个源
若在2.x中使用中文，需要在python文件的首行加上如下格式，则python解释器便会以utf-8来处理此python文件，
Python处理字符串，写文件时会碰到许多的编码问题，特别是涉及到中文的时候，非常烦人，但又不得不学。下面主要记录工作过程中碰到的Python编码问题。 1. 字符串编码 Python的字符串类型为s
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
最近在尝试 Python Web方面的开发尝试，框架使用的是Django，但是在读取数据库并页面展示的时候，出现了中文编码的问题。
python种关于json有很多，simplejson，cjson，还有ujson（详细内容可见：http://blog.csdn.net/gzlaiyonghao/article/details/6567408）. cjson模块只支持string/unicode的key JSON(JavaScript Object Notation)编码格式的数据。
相同点：python解释器是解释执行文件内容的，因而python解释器具备读py文件的功能，这一点与文本编辑器一样
如果无任何配置，或者说使用默认配置， 输出的会是中文的ASCII字符吗，而不是真正的中文。 这是因为json.dumps 序列化时对中文默认使用的ascii编码。
JSON是JavaScript Object Notation的缩写，它是一种数据交换格式。在web网络传输数据的时候，我们经常会遇到JSON数据。
引用codecs模块，对该模块目前不了解。在此记录下方法，有空掌握该模块功能及用法。
从python2转到python3的第一个问题就是字符串的问题，我花了些时间把我能想到的和字符串处理有关的东西都整理如下。 1、Python2的字符串编码 在python2.X中的字符串编码有点麻烦，它所有的“普通字符串”是ascii码存储的，unicode字符串是16位unicode码存储的，这个时候就经常出现转换、乱码的问题。 1.1 python2中的普通字符串 >>> a="abc" >>> print a abc >>> print repr(a) 'abc' >>> type(a) <type
Python3自诩解决了编码问题，但还是有一系列的坑。本文就记录下前几天遇到的python3编码问题。mysql编码问题附带介绍。 python3 json串的编码 针对于包含中文的字典，如果想要正常显示中文，在dumps时，需配置参数ensure_ascii=False。举例： a={"name":"中国"} json.dumps(a) '{"name": "\\u4e2d\\u56fd"}' json.dumps(a,ensure_ascii=False) '{"name": "中国"}' 针对于包含特
最近一直在学习Python爬虫，可能随着研究的深入，受到爬虫技术的感染，开始对获取别人的数据产生了兴趣，Python写网页爬虫是获取别人网站上的数据，那可不可以用Python写一个程序获取别人U盘上的数据呢！ 研究了网上的一些程序，结合手上的这块可以带来无限欢乐的Raspberry Pi，开始制作了我的第一个简单的黑客小工具U-disk-thief（U盘小偷）。 我们要实现的效果是，当有U盘插入到树莓派的USB插口上时，被插入的U盘中文件的名称及文件路径信息将生成一个TXT格式的文件，之后传入到你制定的
django查询到的结果，用JsonResponse返回在页面上显示类似于\u4e2d\u6587 ，注意这个不叫乱码，这个是unicode编码，python3默认返回的编码
Python第一个缺点就是运行速度慢，和C程序相比非常慢，因为Python是解释型语言，你的代码在执行时会一行一行地翻译成CPU能理解的机器码，这个翻译过程非常耗时，所以很慢。而C程序是运行前直接编译成CPU能执行的机器码，所以非常快
众所周知python有很多第三方库，这也是python简单实用的原因,有时用python处理word文档就需要安装python-docx库。
Json是一种轻量级的数据交换格式, 在跨语言交互时，是数据传递的一个比较好的选择（当然也可以选择xml).python在构造服务json返回值时，如果碰到有中文的时候，使用json.dumps后，中文会变成另外的非人类格式，形如u'\u59d3\u540d'这样的。在python中，可以通过转码之类得知是啥
python 2.x默认的字符编码是ASCII，默认的文件编码也是ASCII。
使用python工具读写MS Word文件（docx与doc文件），主要利用了python-docx包。本文给出一些常用的操作，并完成一个样例，帮助大家快速入手。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
