Python c-api 和 unicode 字符串 - 腾讯云开发者社区

文章/答案/技术大牛

发布

Python 中文转Unicode字符串

Python 3.6 代码： # -*- coding: utf-8 -* def to_unicode(string): ret = '' for v in string:...ret = ret + hex(ord(v)).upper().replace('0X', '\\u') return ret print(to_unicode("中国")) 输出： "D...:\Program Files (x86)\Python36-32\python.exe" E:/PycharmProjects/Test/test.py \u4E2D\u56FD Process finished

3.2K2 0

Python、Unicode和中文

Python、Unicode和中文 python的中文问题一直是困扰新手的头疼问题，这篇文章将给你详细地讲解一下这方面的知识。...我们这样写: # coding=gbk s = "中文" s1 = u"中文" s2 = unicode(s, "gbk") #省略参数将用python默认的ASCII来解码 s3 = s.decode...函数和decode方法把str转换成unicode。...更进一步的例子，如果我们这里转换仍然用gbk： # coding=utf-8 s = "中文" print unicode(s, "gbk") 结果：中文翻阅了一篇英文资料，它大致讲解了python中的...简单地说，python中的print直接把字符串传递给操作系统，所以你需要把str解码成与操作系统一致的格式。Windows使用CP936(几乎与gbk相同)，所以这里可以使用gbk。

1.4K2 0

您找到你想要的搜索结果了吗？

是的

没有找到

Unicode 字符串

Python 中定义一个 Unicode 字符串和定义一个普通字符串一样简单： >>> u'Hello World !' u'Hello World !'...引号前小写的"u"表示这里创建的是一个 Unicode 字符串。如果你想加入一个特殊字符，可以使用 Python 的 Unicode-Escape 编码。...---- python的字符串内建函数字符串方法是从python1.6到2.0慢慢加进来的——它们也被加到了Jython中。...这些方法实现了string模块的大部分方法，如下表所示列出了目前字符串内建支持的方法，所有的方法都包含了对Unicode的支持，有一些甚至是专门用于Unicode的。...如果beg 和 end 指定值，则在指定范围内检查. string.strip([obj]) 在 string 上执行 lstrip()和 rstrip() string.swapcase() 翻转 string

1.3K6 0

python中将 uxxxx转换为 Unicode字符串

今天碰到一个很有意思的问题，需要将普通的 Unicode字符串转换为 Unicode编码的字符串，如下：将 \\u9500\\u552e 转化为 \u9500\u552e 也就是销售。...recent call last): File "", line 1, in re.sub(r"(\)\u", r'', t) File "D:\Python36...\lib\re.py", line 301, in _compile p = sre_compile.compile(pattern, flags) File "D:\Python36\lib...", line 765, in _parse p = _parse_sub(source, state, sub_verbose, nested + 1) File "D:\Python36...", line 502, in _parse code = _escape(source, this, state) File "D:\Python36\lib\sre_parse.py",

3.1K3 0

unicode字符串解析

现象和答案在http接口接收时，很多接口提供方都喜欢把汉字通过unicode的方式传过来，而数字和字母保持不变，就像这样。...字符串转成正常字符串的过程。...网上关于这块问题有很多博客，大部分都是一样的，实现思路是在字符串中找到\n[0-9]{4}字符串，并将匹配到的四位数字通过Integer.parseInt()来转成字符串。...经过寻找，发现fastjson能自动的转换unicode字符串。 fastjson，已经实现unicode字符串解析，JSON.parseObject(String)等方法都可以。...在fastjson中，unicode的解析在JSONLexerBase.scanString()。fastjson字符串（遍历），发现当前字符是"时，便执行该方法。

1.8K1 0

【python】Unicode

1、原因 python2.7在安装时，默认的编码是ascii，当程序中出现非ascii编码时，python的处理常常会报这样的错，不过在python3就不会有这样的问题。...临时解决方法：代码中加入如下三行 import sys reload(sys) sys.setdefaultencoding('utf8') 永久解决方法：如果不想在每个文件中都加这三行，就在python...sitecustomize.py 内容如下： #encoding=utf8 import sys reload(sys) sys.setdefaultencoding('utf8') 这样的话，系统在python...启动的时候，自行调用该文件，设置系统的默认编码或者：重新编译安装python，将默认编码改为utf8 ---- 以上参考：解决UnicodeEncodeError: 'ascii' codec can't

1.1K1 0

第九节、Python中Unicode字符串《Python学习》

如果要表示中文，显然一个字节是不够的，至少需要两个字节，而且还不能和ASCII编码冲突，所以，中国制定了GB2312编码，用来把中文编进去。类似的，日文和韩文等其他语言也有这个问题。...因为Python的诞生比Unicode标准发布的时间还要早，所以最早的Python只支持ASCII编码，普通的字符串'ABC'在Python内部都是ASCII编码的。...Python在后来添加了对Unicode的支持，以Unicode表示的字符串用u'...'表示，比如： print u'中文' 中文注意: 不加 u ，中文就不能正常显示。...Unicode字符串除了多了一个 u 之外，与普通字符串没啥区别，转义字符和多行表示法仍然有效：转义： u'中文\n日文\n韩文' 多行： u'''第一行第二行''' raw+多行： ur'''Python...的Unicode字符串支持"中文", "日文", "韩文"等多种语言''' 如果中文字符串在Python环境下遇到 UnicodeDecodeError，这是因为.py文件保存的格式有问题。

9222 0

Python | Python学习之unicode和utf8

在python2.7中当要将字符串encode为utf8，我们需要确保之前的字符串的编码方式为unicode，所以当字符串编码不为unicode时，我们需要使用decode方法，而在使用decode方法时我们需要指明原有字符串的编码格式...原因就是，如若不指定原有的系统编码格式(utf-8)，Linux系统下会调用python解释器的默认编码ASCII解析字符串，演示如下： ?...Python3.6 Python2.7和Python3.6最大的区别就是在执行Python2.7项目时，当项目中包含汉字时，需要在文件头声明编码格式，否则项目中的中文显示就是乱码。...而在Python3中完全没有这样的顾虑，那是因为默认python3中全部的字符串就是unicode可以直接使用encode方法。 ?...综上：为了避免给自己添麻烦，请认准unicode和UTF-8编码。

1.3K6 0

Python Unicode HOWTO

Unicode HOWTO Release: 1.1 This HOWTO discusses Python’s support for Unicode, and explains various...Python’s Unicode Support Now that you’ve learned the rudiments of Unicode, we can look at Python’s Unicode...Unicode Literals in Python Source Code In Python source code, specific Unicode code points can be written...>, and is an excellent overview of the design of Python’s Unicode features (based on Python 2, where...Python” are available at python/LSM2005-Developing-Unicode-aware-applications-in-Python.pdf

8884 0

Python Unicode编码

使用技巧事实上，只要遵守以下规则，可以规避90%由于Unicode字符串处理引起的bug，剩下的10%通过python的库和模块能够解决。程序中出现字符串时一定要加个前缀u。...失误#2：在源码中到处使用string模块或者str()和chr()函数。...结果#2：通过全局的查找替换把str()和chr()替换成unicode()和unichr(),但是这样一来很可能就不能再用pickle模块，要用的话只能把所有要pickle处理的数据存成二进制形式，这样一来就必须修改数据库的结构...所有涉及的软件、系统都需要检查，包括python的标准库和其他将要用到的第三方扩展模块。你甚至有可能需要组建一个经验丰富的团队来专门负责国际化（I18N）问题。...节选自《python核心编程（第二版）》P130、P131

1.4K1 0

js --- 中字符串与unicode编码

1、charAt（）：把字符串分成每一个字符，从左往右提取指定位置的字符 var str = '天气'; alert( str.charAt(1) ); //气 2、charCodeAt...（）：通过编码值在unicode编码库中查找出对应的字符。...alert( String.fromCharCode(22825, 27668) ); //天气 4、当两个字符串进行大小比较时，比的是第一个字符的unicode编码的大小： alert...( 'abbbbb' > 'b' ); //unicode编码中a<b，所以是false； alert( '10000' > '2' );...//unicode编码中1<2，所以是false；

5.8K3 0

python编码转换(unicode

" # 用decode转成python内部的unicode编码,用repr输出内部形式 s_unicode = s.decode("utf8") print repr(s_unicode...) # 用ecode转成gbk编码输出 s_gbk = s_unicode.encode("gbk") print s_gbk # 用ecode转成标准的...uincode编码 \u****\u**** s_unicode_output = s_unicode.encode("unicode_escape") print s_unicode_output...# 从标准的unicode编码转成 gbk 编码 s_red_gbk = s_unicode_output.decode("unicode_escape").encode("gbk...") print s_red_gbk #按照单个字输出 s 的内容 for i in s_unicode: print i.encode("gbk")

4.1K1 0

去掉unicode字符串前面的 u

前言使用python2做一些东西时，一些库对中文搞出了一些奇葩事件，然后中文就变成了 u'\xce\xd2\xb2\xbb\xca\xc7\xc4\xe3\xb5\xc4\xd0\xa4\xc4\xce...' 这样，展示出来就是乱码，因为python2默认是unicode，那怎么转换成正常的unicode或str呢方法 a = u'\xce\xd2\xb2\xbb\xca\xc7\xc4\xe3\xb5...\xc4\xd0\xa4\xc4\xce' a.encode('raw_unicode_escape') a.encode('raw_unicode_escape').decode('utf8') 参考...http://docs.python.org/2/library/codecs.html#python-specific-encodings python2 unicode

2K1 0

html解析中遇到的&#开头的unicode编码字符串的处理和转换 - Python

注：ASCII转unicode和中文转unicode是两个东西（起码在unicode在线转换网站上这两个不同），虽然说是中文，其实输入英文字母也没问题（表述可能不够准确，但大概是那么个意思）。...原理常见的unicode编码格式如下： \u670d\u52a1\u5668 如果换成&#开头的格式如下：服务器其实这两个是同一个东西，只是开头和进制不同...十六进制十进制 unicode转中文 670d 26381 服 52a1 21153 务 5668 22120 器代码测试代码 print(ord('服')) print(ord('务'))...编码字符串 # 输入中文，输出str类型的&#开头的unicode编码数据 def zh2uni(zhDat): rDat = "" for n in zhDat: rDat...编码字符串转中文 def uni2zh(uniDat): rDat = '' while True: if len(uniDat) == 0: break

11.1K1 0

python2和python3关于Unicode的区别

注明：python3版本设计未考虑向下兼容问题，过渡版本2.6/2.7，代码演版本：2.7.16 ?...python2的字符串类型有str和unicode两种（不是 byte 类型） python3中有了unicode类型。以及一个字节类：byte 和 bytearrays。...Python3源码文件默认使用utf-8编码 Python 2需要查看代码第一行定义，无定义则使用默认字符集。...7、查看当前python中表示unicode字符时占用的空间： ? ?...# 如果值是 65535，则表示使用uns2标准，即：2个字节表示 # 如果值是 1114111，则表示使用uns4标准，即：4个字节表示 8、查看Python默认的编码格式。

1.2K2 0

【python】str，unicode对象的encode和decode方法

转自：链接 python的str，unicode对象的encode和decode方法 python中的str对象其实就是"8-bit string" ，字节字符串，本质上类似java中的byte[]...对于： s="你好" u=u"你好" 1. s.decode方法和u.encode方法是最常用的，简单说来就是，python内部表示字符串用unicode（其实python内部的表示和真实的...unicode是有点差别的，对我们几乎透明，可不考虑），和人交互的时候用str对象。...助记：decode to unicode from parameter encode to parameter from unicode 只有decode方法和unicode构造函数可以得到unicode...参考 Converting Between Unicode and Plain Strings 在Unicode和普通字符串之间转换 http://wiki.woodpecker.org.cn/moin

1.7K2 0

unicode和中文互转

package com.cdv.nsite; public class Test { //Unicode转中文方法 private static String unicodeToCn...(String unicode) { String[] strs = unicode.split("\\\\u"); String returnStr = "";...[i], 16).intValue(); } } return returnStr; } //中文转Unicode...转中文结果： "+cnAa);//转Unicode String unicodeAa = cnToUnicode(cnAa); System.out.println("中文转...Unicode结果： "+unicodeAa); } }

1.2K1 0

Unicode String Parse With Python and Fileinput

fileinput.input(): sys.stdout.write(line) 但有时候会碰到UnicodeDecodeError: 比如执行: 1 2 3 4 echo -e "foo\x80bar" |python3...decode byte 0x80 in position 3: invalid start byte 这种错误还不好用try .. catch忽略掉，因为它是在fileinput模块中自己parse的； Python2...的时候很罗嗦，需要自己用codecs去判断之后，才能parse; Python3总算是引入了一个openhook参数，可以自己hook处理了；最简单的处理方式: 1 2 3 4 5 6 7 8 import...fileinput.hook_encoded("utf-8")): sys.stdout.write(line) 参考: https://stackoverflow.com/questions/24754861/unicode-file-with-python-and-fileinput...https://bugs.python.org/issue26756

9742 0

Unicode 和 UTF-8

在早期的计算机时代中，ASCII码用于表示26个英语字母以及一些特殊的字符和符号。...下表展示了ASCII字符对应的十进制值和十六进制值。 ?...这就是Unicode产生的原因 Unicode和码点 Unicode character set mapped each character in the world to a unique number...Unicode字符集将世界上的每个字符和一个惟一的数字相对应。以此解决不同语言的字母之间的冲突。...通过第一位中的位序列110和第二位中的10的存在来识别2字节编码。 ?

1.7K2 2

python的str，unicode对象的encode和decode方法

python的str，unicode对象的encode和decode方法 python中的str对象其实就是"8-bit string" ，字节字符串，本质上类似java中的byte[]。 ...对于 Python代码 s="你好" u=u"你好" 1. s.decode方法和u.encode方法是最常用的，简单说来就是，python内部表示字符串用unicode（其实...python内部的表示和真实的unicode是有点差别的，对我们几乎透明，可不考虑），和人交互的时候用str对象。 ...助记：decode to unicode from parameter encode to parameter from unicode 只有decode方法和unicode构造函数可以得到unicode...参考 Converting Between Unicode and Plain Strings 在Unicode和普通字符串之间转换 http://wiki.woodpecker.org.cn/moin

2.3K1 0

点击加载更多

Python 中文转Unicode字符串

Python、Unicode和中文

Unicode 字符串

python中将 uxxxx转换为 Unicode字符串

unicode字符串解析

【python】Unicode

第九节、Python中Unicode字符串《Python学习》

Python | Python学习之unicode和utf8

Python Unicode HOWTO

Python Unicode编码

js --- 中字符串与unicode编码

python编码转换(unicode

去掉unicode字符串前面的 u

html解析中遇到的&#开头的unicode编码字符串的处理和转换 - Python

python2和python3关于Unicode的区别

【python】str，unicode对象的encode和decode方法

unicode和中文互转

Unicode String Parse With Python and Fileinput

Unicode 和 UTF-8

python的str，unicode对象的encode和decode方法

相关资讯

热门标签

活动推荐

运营活动

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐