对于线上的SQL语句，看着执行计划cost还不错，但是实际执行的时候效果却有千壤之别，这是为什么呢？ 对于一个庞大的SQL语句，看着得到的执行计划却不知道瓶颈在哪里，SQL语句太复杂，但是执行计划更复杂，要读明白它掌握要领也不是一件容易的事情。 碰到很多朋友问我，怎么去读一个执行计划，这个无论说的怎么细，似乎都不是很容易去理解，语言描述，纯文字描述和图形的效果还是有很大的差别。 如果你在11g的版本中，SQL Monitor就是一个大大的福利，你值得掌握，如果你还没有好好掌握
操作系统:CentOS 7.4 Python版本 :3.6 Django版本: 1.10.5 操作系统用户:oms 数据处理:pandas
MySQL 一直是本人很薄弱的部分，后面会多输出 MySQL 的文章贡献给大家，毕竟 MySQL 涉及到数据存储、锁、磁盘寻道、分页等操作系统概念，而且互联网对 MySQL 的注重程度是不言而喻的，后面要加紧对 MySQL 的研究。写的如果不好，还请大家见谅。
本文实例讲述了PHP使用反向Ajax技术实现在线客服系统。分享给大家供大家参考，具体如下：
执行计划是一条 SQL 语句在 Oracle 数据库中的执行过程或访问路径的描述。如下图所示，是一个比较完整的执行计划示意图。
首先要理解逻辑读和物理读： 预读：用估计信息，去硬盘读取数据到缓存。预读100次，也就是估计将要从硬盘中读取了100页数据到缓存。 物理读：查询计划生成好以后，如果缓存缺少所需要的数据，让缓存再次去读硬盘。物理读10页，从硬盘中读取10页数据到缓存。 逻辑读：从缓存中取出所有数据。逻辑读100次，也就是从缓存里取到100页数据。 SQL Server存储的最小单位是页，每一页大小为8K，SQL Server对于页的读取是原子性的，要么读完一页，要么完全不读。即使是仅仅要获得一条数据，也要读完
SQL Server存储的最小单位是页，每一页大小为8K，SQL Server对于页的读取是原子性的，要么读完一页，要么完全不读。即使是仅仅要获得一条数据，也要读完一页。而页之间的数据组织结构为B树结构。所以SQL Server对于逻辑读、预读、物理读的单位是页。
今天我们来详细了解一下主从同步延迟时读写分离发生写后读不到的问题，依次讲解问题出现的原因，解决策略以及 Sharding-jdbc、MyCat 和 MaxScale 等开源数据库中间件具体的实现方案。
主题：关于Oracle开启自动收集统计信息的SPA测试 环境：Oracle RAC 11.2.0.4（Primary + Standby） 需求：生产Primary库由于历史原因关闭了自动统计信息的收集，目前客户需求是想要重新开启统计信息的自动收集，虽然一般来说，有了更准确的统计信息，SQL会有更好的执行计划，但由于生产环境数据复杂，实际上还是需要评估哪些SQL会因为重新开启自动统计信息收集性能反而会下降。 方案：本着尽可能减少对生产Primary环境影响的原则，在Standby DG环境临时开启snapshot standby来进行SPA（SQL Performance Analyze）测试，比对开启统计信息自动收集前后的性能差异，给客户提供有价值的参考。
梁敬彬老师的《收获，不止SQL优化》，关于如何缩短SQL调优时间，给出了三个步骤，
生产端：Windows 2008 + Oracle 10.2.0.5 测试端：RHEL 6.5 + Oracle 11.2.0.4 需求：因为Oracle跨越大版本，优化器、新特性变动较多，需要进行SPA测试比对前后期性能差异。 说明：本文是根据DBA Travel的SPA参考规范文档（在此致谢Travel同学），结合实际某客户需求整理的整个测试过程。为了更真实的反映整个过程，在生产端使用swingbench压力测试软件持续运行了一段时间，模拟真实的业务压力。
说到数据库事务，大家脑子里一定很容易蹦出一堆事务的相关知识，如事务的ACID特性，隔离级别，解决的问题（脏读，不可重复读，幻读）等等，但是可能很少有人真正的清楚事务的这些特性又是怎么实现的，为什么要有四个隔离级别。
ES官方提供了对spark的支持，可以直接通过spark读写es，具体可以参考ES Spark Support文档(https://www.elastic.co/guide/en/elasticsearch/hadoop/current/spark.html#spark)
事务是MySQL等关系型数据库区别于NoSQL的重要方面，是保证数据一致性的重要手段。本文将首先介绍MySQL事务相关的基础概念，然后介绍事务的ACID特性，并分析其实现原理。
来源:https://www.cnblogs.com/kismetv/p/10331633.html
在执行SQL语句的时候，某些业务要求，一系列操作必须全部执行，而不能仅执行一部分。 例如，一个转账操作：
数据库的一致性，也是衡量DBMS性能的重要指标之一。目前大多数商业数据库（DB2, SQL Server）的并发控制采用的是两阶段锁（Two-Phase Locking，2PL）协议，2PL保证了并发事务执行的可串行化。但2PL在对任何数据进行读、写操作之前，需要对该数据加锁。在封锁相容矩阵中，S锁（Share Locks，共享锁）和X锁（Exclusive Locks，排它锁）是不相容的，因此当事务1正对数据A进行读操作（加S锁）时，事务2想要对数据进行写操作（加X锁），那么事务2必须等待事务1释放数据A
事务是 MySQL 等关系型数据库区别于 NoSQL 的重要方面，是保证数据一致性的重要手段。
最近，遇到了一个关于mysql 加锁的问题，将当时的情形简化如下，有一个index_test表，表结构如下所示：
用户 = 客服 （先把信息入库，然后通过ob+长连接不断从数据库查询数据发送给客服）
编辑手记：在系统测试、上线和优化的过程中，抓住核心环节、不放过任何可疑，这是DBA的基本要求之一，在这个案例中，高频度调用的存储过程引起了注意。 客户新上线的一套重要生产系统，某个存储过程每小时调用约11万次，每次调用的逻辑读超过了10，000，消耗的 CPU 占数据库 CPU Time 的25-30%。很显然，这样一个存储过程是值得优化的。 不幸的是，这个存储过程的业务逻辑很复杂，光是参数就有9个。而存储过程所在的包其代码超过了1万行。通过复查代码的方式，耗时耗力，还不一定能够找出问题。 诊断性能
在网络上看了几篇关于幻读的文章，总有些不对劲的地方，要么是解释过于官方看不懂，要么压根儿就是错的，于是我找到了著名论文 A Critique of ANSI SQL Isolation Levels ，对幻读问题做了归纳和总结，希望能帮助大家真正理解幻读，大纲如下：
如果你已经是一名优秀的Web开发人员，那请路过即可。如果你还是一个准备入行或刚入行的菜鸟，那本文倒值得一读。要成为一名优秀的Web开发人员，没有捷径可走，本文就是为那些还在苦苦寻找学习目标的人编写的。 第一步：学好HTML HTML(超文本标记语言)是网页的核心，因此你首先应该学好它，不要害怕，HTML很容易学习的，但也很容易误用，学懂容易要学精还得费点功夫，但学好HTML是成为Web开发人员的基本条件。 学习资源： HTML Dog (http://htmldog.com/) HTML
对于数据库中表的数据的 Web 显示，如果没有展示顺序的需要，而且因为满足条件的记录如 此之多，就不得不对数据进行分页处理。常常用户并不是对所有数据都感兴趣的，或者大部分情 况下，他们只看前几页。
事务最经典也经常被拿出来说例子就是转账了。假如小明要给小红转账1000元，这个转账会涉及到两个关键操作就是：将小明的余额减少1000元，将小红的余额增加1000元。万一在这两个操作之间突然出现错误比如银行系统崩溃，导致小明余额减少而小红的余额没有增加，这样就不对了。事务就是保证这两个关键操作要么都成功，要么都要失败。
小熊学Java个人网站：https://javaxiaobear.gitee.io/，每周持续更新干货，建议收藏！
在某种高级语言中，如果嵌入了SQL语句，而这个SQL语句的主体结构已经明确，例如在Java的一段代码中有一个待执行的SQL“select * from t1 where c1>5”，在Java编译阶段，就可以将这段SQL交给数据库管理系统去分析，数据库软件可以对这段SQL进行语法解析，生成数据库方面的可执行代码，这样的SQL称为静态SQL，即在编译阶段就可以确定数据库要做什么事情。而如果嵌入的SQL没有明确给出，如在Java中定义了一个字符串类型的变量sql：String sql;，然后采用preparedStatement对象的execute方法去执行这个sql，该sql的值可能等于从文本框中读取的一个SQL或者从键盘输入的SQL，但具体是什么，在编译时无法确定，只有等到程序运行起来，在执行的过程中才能确定，这种SQL叫做动态SQL
该参数表示服务可以获取的最大 CPU 时间，value 为百分数形式，高于 100% 表示可使用 1 核以上的 CPU。与 cgroup cpu 控制器 cpu.cfs_quota_us 配置项对应。
1. 仅仅读表空间的主要用途就是为了消除对数据库大部分静态数据的备份和恢复的须要。Oracle不会更新仅仅读表空间爱你的文件。因此这部分文件能够存储于仅仅读介质中，比如CD-ROM或WORM drives。 2. 仅仅读表空间并非为了满足归档的要求。
作者：潇湘隐者 www.cnblogs.com/kerrycode/p/5836015.html 今天遇到一个很有意思的问题，一个开发人员反馈在测试服务器ORACLE数据库执行的一条简单SQL语句非常缓慢，他写的一个SQL没有返回任何数据，但是耗费了几分钟的时间。让我检查分析一下原因，分析解决过后，发现事情的真相有点让人哭笑不得，但是也是非常有意思的。我们先简单构造一下类似的案例，当然只是简单模拟。 假设一个同事A，创建了一个表并初始化了数据（实际环境数据量较大，有1G多的数据），但是他忘记提交了。我们简
一、SQL Server事务的本质 • 什么是SQL Server数据库事务？ 事务:是作为单个工作单元而执行的--系列操作，如查询和修改数据，甚至可能是修改数据定义。 事务:保持逻辑数据一致性与可恢复性，必不可少的利器。 • SQL Server数据库事务举例 在一个事务中，你写了2条sql语句，一条是修改订单表状态,一条是修改库存表库存-1 。 如果在修改订单表状态的时候出错，事务能够回滚，数据将恢复到没修改之前的数据状态，下面的修改库存也就不执行，这样确保你关系逻辑的一致，安全。 • 阿笨对
MySQL 事务隔离级别是为了解决并发事务互相干扰的问题的，MySQL 事务隔离级别总共有以下 4 种：
6.索引B+树的叶子节点都可以存哪些东西（或问聚簇索引与非聚簇索引的区别？）（必考）
InnoDB有两种不同的SELECT，即普通SELECT 和 锁定读SELECT. 锁定读SELECT 又有两种，即SELECT ... FOR SHARE 和 SELECT ... FOR UPDATE; 锁定读SELECT 之外的则是 普通SELECT
基本思路： ①读sql文件，整理出sql语句； ②执行sql语句。 简单代码如下：
通过如下 SQL 可以查看数据库实例默认的全局隔离级别和当前 session 的隔离级别：
授权转载自THU数据派（ID：datapi） 翻译 | 卢苗苗、梁傅淇 校对 | 吕艳芹 作者 | Matthew Mayo 最近有许多人联系我（大部分都是通过领英）寻求着手数据科学和/或大数据的建议。这些人普遍对切入这个“领域”感兴趣，并且需要些关于如何切入方面的指导。 然而，我怀着极大的尊重来说这个话，这些请求的中心含义体现出请求者对自己所要求的事情其实并不理解。是的，不论在学习什么，每个人都需要从某个地方开始。我不会再一个个去回答这些相似的问题，这篇文章会列出和数据科学和/或大数据职业道路相关的一些
事务(Transaction)是访问并可能更新数据库中各种数据项的一个程序执行单元(unit)。事务通常由高级数据库操纵语言或编程语言（如SQL，C++或Java）书写的用户程序的执行所引起，并用形如begin transaction和end transaction语句（或函数调用）来界定。事务由事务开始(begin transaction)和事务结束(end transaction)之间执行的全体操作组成。
转载自 https://www.cnblogs.com/bincoding/p/5895706.html
通常事务的隔离级别定义为以下4种（基于3种在并发事务中需要避免的现象来划分的）：
Alluxio（见文末链接1）是源自UC Berkeley AMPLab的研究项目Tachyon。作为一个开源的数据编排系统，Alluxio以内存速度统一数据访问。在大数据生态系统中，Alluxio 位于数据驱动框架或应用（如 Apache Spark、Presto等）和各种持久化存储系统（如 Amazon S3、HDFS等）之间。Alluxio 统一了存储在这些不同存储系统中的数据，为其上层数据驱动应用提供统一的客户端 API 和全局文件系统命名空间。
从库严重严重落后于主库,读写分离业务失真,基于从库做的报表数据出不来以及基于从库做的数据探查失效。
规则引擎是一种嵌入在应用程序中的组件，它可以将业务规则从业务代码中剥离出来，使用预先定义好的语义规范来实现这些剥离出来的业务规则；规则引擎通过接受输入的数据，进行业务规则的评估，并做出业务决策。
以上说明事务隔离级别主要针对读操作来说的。(DML语句我们可以不考虑事务隔离级别，因为任何事物隔离级别下DML的加锁都很严格，属于得不到就等待的类型)
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
