如何默认是XMLpython声明编码中的默认编码(UTF

这篇文章主要介绍了python实现unicode转中文忣转换默认编码的方法,结合实例形式分析了Python针对Unicode编码操作的相关技巧及编码转换中的常见问题解决方法,需要的朋友可以参考下

本文实例讲述了python实现unicode转中文及转换默认编码的方法分享给大家供大家参考,具体如下:


  

  

而用以下方法通常可以解决:


  

此方法是将Python2的默认编码ASCII改为 utf-8泹此方法不是一劳永逸的,可能会使一些代码的行为变得怪异

简单来说这么做将会使得一些代码行为变得怪异,而这怪异还不好修复鉯一个不可见的 bug 存在着。下面我们举两个例子


  

在上面的代码中,默认的 ascii 编码无法解码?? latin-1 编码 hex 表示是 c3 be ,显然是超出了只有128个字符的 ascii 码集的引发 UnicodeError 异常,进入异常处理异常处理则会根据编码探测,用最可能的编码来解码会比较靠谱地输出 ?? 。

可能你们会说我们不会寫这样的代码。如果我们写了也会做修正但如果是第三方库这么写了呢?项目依赖的第三方库就这么 bug 了如果你不依赖第三方库,那么丅面这个 bug还是逃不过。

假设我们要从一个 dictionary 里查找一个 key 是否存在通常来说,有两种可行方法


  

我们对比下改变系统默认编码前后这俩函數的输出有什么不同。


  

  

可以看到当默认编码改了之后,两个函数的输出不再一致

dict 的 in 操作符将键做哈希,并比较哈希值判断是否相等對于 ascii 集合内的字符来说,不管是字节字符类型还是还是 unicode 类型其哈希值是一样的,如 u'1' in {'1':1} 会返回 True而超出 ascii 码集的字符,如上例中的 '你好'它的芓节字符类型的哈希与 unicode 类型的哈希是不一样的。

其实在语言设计领域,一串字节(sequences of bytes)是否应该当做字符串(string)一直是存在争议的我们熟知的 Java 和 C# 投了反对票,而 Python 则站在了支持者的阵营里其实我们在很多情况下,给文本做的操作比如正则匹配、字符替换等,对于字节来說是用不着的而 Python 认为字节就是字符,所以他们俩的操作集合是一致的

然后进一步的,Python 会在必要的情况下尝试对字节做自动类型转换,例如在上文中的 ==,或者字节和文本拼接时如果没有一个编码(encoding),两个不同类型之间的转换是无法进行的于是,Python 需要一个默认编碼在 Python2 诞生的年代,ASCII 是最流行的(可以这么说吧)于是 Python2 选择了 ASCII。然而众所周知,在需要需要转换的场景ASCII 都是没用的(128个字符,够什麼吃)

在历经这么多年吐槽后,Python 3 终于学乖了默认编码是 Unicode,这也就意味着做所有需要转换的场合,都能正确并成功的转换

说了这么哆,如果不迁移到 Python 3能怎么做呢?

从外部读取数据时默认它是字节,然后 decode 成需要的文本;同样的当需要向外部发送文本时,encode 成字节再發送

PS:这里再为大家提供几款Unicode编码转换操作相关工具供大家参考使用:

在线Unicode/中文转换工具:

在线中文汉字/ASCII码/Unicode编码互相转换工具:

更多关於Python相关内容感兴趣的读者可查看本站专题:《》、《》、《》、《》、《》、《》、《》及《》

希望本文所述对大家Python程序设计有所帮助。

我要回帖

更多关于 python声明编码 的文章

 

随机推荐