基本编码知识 在了解Python中字符串(String)的本质前,我们需要知道ASCII、GBK、UTF-8和Unicode的关系究竟几何。...很明显,汉字在ascii中是无法表示的。...由于Unicode编码的字符串体积很大,因此一般来说Unicode编码只是文字在内存中的内在形式,具体的存储(如文件、网页等)都需要靠外在的编码(UTF-8、GBK等)诠释。...Python2.x中字符串的本质 Python中实际上有两种字符串,分别是str类型和unicode类型,这两者都是basestring的派生类。...原文地址:Python中GBK, UTF-8和Unicode的编码问题, 感谢原作者分享。
RHEL系列Docker镜像中GBK字符编码配置 一 背景 在某些线上系统环境中,字符编码使用的是GBK。...在向容器迁移时,如果不正确配置,那么显示在屏幕上的将是乱码,为此我们需要针对这一问题的Docker镜像进行正确配置才能避免该情况的出现。...@fb699d83bdac /]# locale LANG=zh_CN.GBK LC_CTYPE="zh_CN.GBK" LC_NUMERIC="zh_CN.GBK" LC_TIME="zh_CN.GBK..." LC_COLLATE="zh_CN.GBK" LC_MONETARY="zh_CN.GBK" LC_MESSAGES="zh_CN.GBK" LC_PAPER="zh_CN.GBK" LC_NAME...3.2 以上操作适用于RHEL系列操作系统的字符集编码调整。
引言 最近下载一些java项目源码看,发现如果用IDEA打开eclipse项目会报错: 错误: 编码GBK的不可映射字符 ?...解决方法 第一步:对于Error: 编码GBK的不可映射字符的解决 更改IDEA编码方式 更改代码文件本身编码方法 第二步:对于Error: java: 非法字符: ‘\ufeff’** 进行 GBK...与 UTF-8 的 convert 详细步骤 1....如果问题未解决,(一般情况下是解决不了的,不要再花时间搜索了,继续往下看文章)。...解决这个问题就很简单了,在项目里面,对每个代码文件先把编码换成GBK,再换成UTF-8(一个一个来别嫌麻烦);点击convert即可; ?
unicode中的‘\xa0’字符在转换成gbk编码时会出现问题,gbk无法转换’\xa0’字符。...所以,在转换的时候必需进行一些前置动作: string.replace(u'\xa0', u' ') 将’\xa0‘替换成u’ ‘空格。
一,概述 1,作用 主要用户操作处理量大,复杂度高的数据。要保证sql语句,要么全执行,要么全不执行,但它必须要满足四个条件:原子性,一致性,隔离性,持久性。...事务有两种处理方法 【用 BEGIN, ROLLBACK, COMMIT来实现】 BEGIN 开始一个事务 ROLLBACK 事务回滚 COMMIT 事务确认 【直接用 SET 来改变 MySQL...的自动提交模式】 SET AUTOCOMMIT=0 禁止自动提交 SET AUTOCOMMIT=1 开启自动提交 二,代码 1,shell中对mysql的使用 BEGIN ; insert into...2,php中对mysql的使用 <?...utf8"); mysqli_select_db( $conn, 'RUNOOB' ); mysqli_query($conn, "SET AUTOCOMMIT=0"); // 设置为不自动提交,因为MYSQL
1.爬了网易科技的最新快讯,发现出来的全是乱码。 ? 1.png 2.看了源代码,发现网页字符格式是GBK ?...2.png ---- 3.于是百度,发现要用到库npm install iconv-lite ---- 4.发现了一个大神写的node库npm install gbk ?...4.png 跑了一遍他git上的example,发现报错。。。。 看到issue中也有人提出相关问题 ?...6.png 直接复制他修改后的page.js替换自己node_modules/gbk/libs/page.js的代码 就可以运行啦!!!...= require('gbk'); var i=1; var section_add=null; http.get(url, function(res){ //转换gbk字符格式的网页
每一个符号都给予一个独一无二的编码,那么乱码问题就会消失。这就是Unicode,就像它的名字都表示的,这是一种所有符号的编码。 互联网的普及,强烈要求出现一种统一的编码方式。...UTF-8中,英文占一个字节,中文占3个字节。...GBK: 汉字国标扩展码,基本上采用了原来GB2312-80所有的汉字及码位,并涵盖了原Unicode中所有的汉字20902,总共收录了883个符号, 21003个汉字及提供了1894个造字码位。...由于GBK同时也涵盖了Unicode所有CJK汉字,所以也可以和Unicode做一一对应。windows默认编码GBK,中文占2个字节。 ...比如,“李杰”,在 utf-8中,一个英文占一个字节,一个中文占3个字节,此处“李杰”占6个字节。GBK中一个中文占2个字节,此处“李杰”占4个字节。
将从PDF文件中读取的内容,写入txt文件中,遇到如下问题: 控制台报错UnicodeEncodeError: 'gbk' codec can't encode character '\u26ab' in...解决方法如下: 1.将pycharm中的文件编码都改为UTF-8 在菜单栏中选择 文件-设置 点击文件编码,将全局编码、项目编码和属性文件的默认编码都修改为UTF-8...,即下图中的三个红色矩形区域。...在代码中打开txt文件时,将下面语句 with open(filename, 'w') as file_object: 修改为 with open(filename, 'w', encoding='utf...如何读取PDF文件内容,请看这一篇文章python读取pdf文件 下面的代码是python读取PDF文件内容,并将其写入到txt文件中的完整代码。
编码所占空间 UTF-8编码则是用以解决国际上字符的一种多字节编码,它对英文使用8位(即一个字节),中文使用24位(三个字节)来编码 GBK则每个字符占用2个字节 - 编码内容 UTF-8则包含全世界所有国家需要用到的字符...GBK包含全部中文字符; UTF-8包含全世界所有国家需要用到的字符,是国际编码,通用性强。...UTF-8编码的文字可以在各国支持UTF8字符集的浏览器上显示。如果是UTF8编码,则在外国人的英文IE上也能显示中文,他们无需下载IE的中文语言支持包。
这篇文章主要介绍一下MySQL中JSON类型的使用,主要参考MySQL手册:https://dev.mysql.com/doc/refman/8.0/en/1....MySQL中使用utf8mb4字符集以及utf8mb4_bin字符序来处理JSON中的字符串,因此JSON中的字符串时大小写敏感的。...ID;$schema: JSON模式校验的标准,应该是这个值保持不变;description: 模式的描述;type: 根元素的类型,MySQL中JSON的根元素还可以是数组(array);properties...JSON的高级用法前面我们介绍了MySQL中JSON类型的一些基本操作,MySQL中对JSON类型的支持还可以有一些更高级的玩法,比如关系型数据与JSON数据的相互转换,甚至可以把MySQL当做一个文档型数据库来使用...一些思考目前来看,orm对于JSON的支持还不是很丰富,而上面的绝大多数篇幅都是mysql客户端中操作JSON字段的方法,在我们的程序中通过orm操作JSON字段还不是很方便。
Unique(唯一索引):索引列必须唯一,但允许有空值,若是组合索引,则列值的组合必须保持唯一。 Key(普通索引),是MySQL中基本的索引类型,允许列中有空值,重复值。...但是对于数据在磁盘等辅助存储的设备情况中(如:Mysql数据库),红黑树并不适用,因为红黑树相对很高。...图中的每个节点称为页,页就是我们上面说的磁盘块,在MySQL中数据读取的基本单位是页,所以我们这里叫做页更符合MySQL中索引的底层数据结构。...聚簇索引和非聚簇索引 在Mysql中B+树索引按照存储方式的不同分为聚集索引和非聚集索引。...相关命令 Mysql5.7主从复制配置 Mysql通过binlog恢复数据 Mysql之binlog三种模式 Mysql中的binlog入门介绍
mysql中的排名 CREATE TABLE `tmp` ( `id` int(11) NOT NULL AUTO_INCREMENT, `sal` int(11) DEFAULT NULL,...-+-----+ | id | sal | +----+-----+ | 1 | 100 | | 2 | 300 | | 3 | 200 | | 4 | 200 | +----+-----+ mysql5.7...没有并列时1234,有并列时1224 mysql> select t1.id,(select t3.sal from tmp t3 where t1.id=t3.id) sal,count(t2.sal...200 | 2 | | 4 | 200 | 2 | | 1 | 100 | 4 | +----+-----+------+ 4 rows in set (0.06 sec) mysql...> 注意事项 连表时用left,否则on t1.sal<t2.sal会过滤掉第一名 因为是left join,所以统计时需要用t2 因为统计时用的是t2故t2.sal>t1.sal mysql8.0 select
许多人都是由于本身软弱而做出问心有愧的事来的,并非都是蓄意背信弃义。...-- 查询当前时间 SELECT NOW() FROM DUAL; -- 查询当前数据库版本号 SELECT VERSION() FROM DUAL; 我们去掉后面的FROM DUAL,仍然能得到同样的结果...网上很多博客文章写的DUAL可用于虚拟列名,效果如下 但我实际测试过,哪怕就是不加FROM DUAL,也是一样的 稍微了解了下,DUAL在ORACLE中作为特殊的表存在 但在MYSQL中它好像确实没用...个人推测可能是MYSQL中默认省略了FROM DUAL?
MySQL中的锁 1.1. 数据库引擎 1.2. 锁的分类 1.3....参考文章 MySQL中的锁 数据库引擎 数据库的引擎分为MyISAM和InnoDB和其他的 不同的数据库引擎默认使用的锁是不同的 MyISAM默认使用的是表级别锁,InnoDB默认使用的是行级锁 我们在使用的时候...此时如果一个事务执行了update user set name="Jack" where age=22,因为age不是索引,那么会自动添加表级锁锁住user表中的全部数据,那么此时所有的数据在另外一个事务中只能查询了...=1(默认设置)时,InnoDB层才能知道MySQL加的表锁,MySQL Server才能感知InnoDB加的行锁,这种情况下,InnoDB才能自动识别涉及表级锁的死锁;否则,InnoDB将无法自动检测并处理这种死锁...但是在InnoDB中,除单个SQL组成的事务外,锁是逐步获得的,这就决定了InnoDB发生死锁是可能的。
WHERE IF(条件, true执行条件, false执行条件) 业务需求: 查询SUPPLIER_CLASS=0 and tp1.`TYPE_FLAG...
引言 上一个章节说了什么是事务,在MySQL数据库中如何查询事务,以及哪些存储引擎支持事务。这一章节来说说事务的隔离。...上一篇传送:MySQL进阶|MySQL中的事务(一) 1.1 隔离的设计 事务隔离是数据库处理的基础之一。...1.2 隔离的级别 从MySQL的官方网站,我们可以查询到MySQL中有四种隔离级别,他们执行的是InnoDB提供 SQL:1992 标准,他们分别是: READ UNCOMMITTED:读未提交。...这是大多数数据库系统的默认隔离级别(但不是MySQL默认的)。可以避免脏读,但不可 重复读、幻读问题仍然存在。 REPEATABLE READ(default):可重复读。...回滚会结束用户的事务,并撤销正在进行的所有未提交的修改; 「创建保存点」 SAVEPOINT identifier,SAVEPOINT 允许在事务中创建一个保存点,一个事务中可以有多个 SAVEPOINT
介绍了mysql的两种存储引擎的索引信息和mysql在不同查询语句中访问索引的方式 MySql学习——MySql中的索引详解 1....在MySQL,存储引擎采用类似的方法使用索引,高效获取查找的数据。...MySql中的索引的使用条件 全值匹配:如果我们的搜索条件中的列和索引列一致的话,这种情况就称为全值匹配 匹配左边的列:在我们的搜索语句中也可以不用包含全部联合索引中的列,只包含左边的就行。...索引的访问方式 在MySql中执行查询语句时,查询的执行方式大致分为两种: 使用全表扫描进行查询 这种执行方式很好理解,就是把表的每一行记录都扫一遍嘛,把符合搜索条件的记录加入到结果集就完了。...总结 以上是最近学习MySql索引相关内容后的一个简单的总结 参考 《MySql是怎么运行的》 MySQL:索引详解 socialShare('.social-share', { sites
上一个章节说了什么是事务,在MySQL数据库中如何查询事务,以及哪些存储引擎支持事务。这一章节来说说事务的隔离。1.1 隔离的设计事务隔离是数据库处理的基础之一。...1.2 隔离的级别从MySQL的官方网站,我们可以查询到MySQL中有四种隔离级别,他们执行的是InnoDB提供 SQL:1992 标准,他们分别是:READ UNCOMMITTED:读未提交。...这是大多数数据库系统的默认隔离级别(但不是MySQL默认的)。可以避免脏读,但不可 重复读、幻读问题仍然存在。REPEATABLE READ(default):可重复读。...回滚会结束用户的事务,并撤销正在进行的所有未提交的修改;「创建保存点」SAVEPOINT identifier,SAVEPOINT 允许在事务中创建一个保存点,一个事务中可以有多个 SAVEPOINT;...show variables like 'transaction_isolation';「方式二」不区分大小写SELECT @@transaction_isolation;当然,我们还可以从可视化工具中查询
mysql中的null not in 中有null 不会返回任何结果 select * from emp where comm not in (null,200); Empty set select empno...| | 666 | NULL | NULL | +-------+----------+--------+ 9 rows in set (0.29 sec) 不等于不返回null的数据
因此在使用数据库过程中,对于修改只要提交成功,数据就可以安全的保存,只要回滚就可以回到,保存点事务之初 二:如何使用事务: 1.查看支持事务的存储引擎:在MySQL中支持事务的存储引擎是InnoDB...(总结:开启事务落盘必须提交) 三:事务的隔离级别: 1.什么是隔离级性: MySQL服务可以同时被多个客户端访问,每个客户端执行的DML语句以事务为基本单位,那么不同的客户端在对同⼀张表中的同...⼀条数据进行修改的时候就可能出现相互影响的情况,为了保证不同的事务之间在执行的过程中不受影响,那么事务之间就需要要相互隔离,这种特性就是隔离性。 ...2.隔离级别: 事务间不同程度的隔离,称为事务的隔离级别;不同的隔离级别在性能和安全方面做了取舍,有的隔离级别注重并发性,有的注重安全性,有的则是并发和安全适中;在MySQL的InnoDB引擎中事务的隔离级别有四种...Innodb引擎使用了间隙锁(next-key)锁住了目标行和之前的信息,解决了部分幻读问题 (MySQL中的间隙锁(Gap Lock)是一种针对InnoDB存储引擎的锁定机制,用于锁定一个范围,但不包括记录本身
领取专属 10元无门槛券
手把手带您无忧上云