这里是为后续的mysql调优做准备，要像做到mysql调优，索引很关键，理解索引结构，页结构，对于调优来说是很重要的基础。
构建分布式系统时，如何对数据进行唯一标识也是一个至关重要的设计。不仅要符合B-tree数据结构以维持查询性能，还要考虑唯一标识的连续性会不会影响系统安全性。在分库分表的情况下，还要避免唯一标识重复且高效等等需要考虑的点。为此，市场就出现了很多分布式ID生成方案。本文将详细介绍九种主流的分布式ID生成策略供大家参考使用。
根据报错的信息，通过mysqlbinlog解析binlog日志，找到对应的数据，然后查看从库是否缺失数据或者已存在对应主键的数据，然后手动在从库处理对应记录的数据。处理完毕后再次开启同步。
间隙锁(Gap Lock)是Innodb在可重复读提交下为了解决幻读问题时引入的锁机制。当用范围条件而不是相等条件检索数据，并请求共享或排他锁时，InnoDB会给符合条件的已有数据记录的索引项加锁；对于键值在条件范围内但不存在的记录，叫做“间隙(GAP)”，InnoDB也会对这些“间隙”进行加锁，这种锁机制就是所谓的间隙锁(NEXT-KEY)锁。
一个唯一 ID 在一个分布式系统中是非常重要的一个业务属性，其中包括一些如订单 ID，消息 ID ，会话 ID，他们都有一些共有的特性：
一、什么是MongoDB ? MongoDB 是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。 在高负载的情况下，添加更多的节点，可以保证服务器性能。 MongoDB 旨在为WEB应用
说到ETL，很多开发伙伴可能会有些陌生，更多的时候 ETL 是用在大数据、数据分析的相关岗位；我也是在近几年的工作过程中才接触到ETL的，现在的项目比较依赖 ETL，可以说是项目中重要的一部分。
有很长一段时间没有做PHP开发了，最近有做PHP开发的小伙伴在个人微信公众号后台留言，能够分享一些PHP有关的面试题。于是给安排上。
多级继承是一种面向对象编程（OOP）特性，允许一个类从多个基类继承属性和方法。它使代码更易于组织和维护，并促进代码重用。
测试mysql5.7和mysql8.0分别在读写，选定，只写模式下不同并发时的性能（tps，qps）
可能谈到保持Redis与Mysql双库的数据一致性，可能很多人最先想到的方案就是读请求和写请求串行化，串到一个内存队列里去。但是这个方案有着一个致命的缺点：读请求和写请求串行化会导致系统的吞吐量大幅度降低，需要使用比正常情况下多几倍的机器去支撑线上的一个请求。Redis与Mysql双库的数据一致性问题为何会出现呢？其实我们可以考虑这么一个业务场景：我们需要更新部分数据，我们首先更新数据库数据，然后清除Redis缓存中的数据。但是数据库更新操作成功了，然而Redis清除缓存出现异常了，这样会导致出现这么一种情况：数据库中的数据已经更新为最新数据，但是Redis缓存中的数据依旧还是老数据，这时候就会出现Redis与Mysql双库的数据一致性问题。
业务量小于500W或数据容量小于2G的时候单独一个mysql即可提供服务，再大点的时候就进行读写分离也可以应付过来。但当主从同步也扛不住的时候就需要分表分库了，但分库分表后需要有一个唯一ID来标识一条数据，且这个唯一ID还必须有规则，能辅助我们解决分库分表的一些问题。
三分钟了解Mysql的表级锁 一分钟深入Mysql的意向锁 mysql锁相关讲解及其应用——《深究mysql锁》
归并排序 稳定 主要看 子数组 排序后 merge 合并的函数如何执行 可以按先后顺序 合并 merge 函数 保证算法的稳定性
接着检查了服务器 CPU 的使用情况，未发现有挖矿程序在运行，CPU 使用率只有 5% 左右。当时笔者存在侥幸的心理，觉得 2C4G 的服务器配置应该不太适合挖矿，库表也都是一些测试数据，以后应该不会留意我这个小庙吧？况且如果是勒索，怎么不留下打款的账号信息呢？
幂等概念来自数学，表示对数据源做N次变换和1次变换的结果是相同的。在工程中幂等性用来表示用户对于同一操作发起的一次请求或者多次请求的结果是一致的，不会因为多次点击而产生了副作用。
某客户的业务中有一张约4亿行的表，因为业务扩展，表中open_id varchar(50) 需要扩容到 varchar(500).
NS4系列包括4个开源模块，分别是：ns4_frame 分布式服务框架（详情点击查看：开源|ns4_frame分布式服务框架开发指南）、ns4_gear_idgen ID生成器组件（NS4框架Demo示例）、ns4_gear_watchdog 监控系统组件（服务守护、应用性能监控、数据采集、自动化报警系统）和ns4_chatbot通讯组件。
如果数据库是跨机房部署，分布式ID是必须的，不然后续做数据分析和统计、跨机房路由会踩大坑。
作者介绍 azurezhao（赵阳），腾讯云数据库高级工程师，具备多年存储经验，包括文件存储、kv存储、数据库存储等。目前在腾讯专注于CDW PG数据库内核相关的研发。 1. 整体架构和设计目标 向量化计算层缓存(VectorTableSlot Cache, 下面简称VTS-Cache)。和传统的OLTP数据按行聚簇方式不同，在OLAP场景下，查询大多数是对某些列进行的，数据存储按照列式存储，查询运算时的数据也是按照列式存储，如下图所示。当前每次执行都需要去存储层读取数据，会有开销，所以考虑引入一层缓存层
前几天同事问了我一个问题：业务A从MySQL迁移到MongoDB的原因是什么？
参考博客1给出了一种所谓的平滑帅气的秒级扩容的架构方案，但我个人却认为，这个看似没有什么问题的方案在实际中几乎没什么用处，业界也几乎不会用这种方案来进行扩容（分库分表）。为了便于说明这一点，本文先简单回顾下该方案，然后分析该方案为什么没有用，最后给出三种业界广泛使用的分库分表的平滑扩容方案。
hello,大家好，很抱歉昨天没有发推文，因为昨天在学习自媒体运营的知识，耽搁了，不过今天给大家补上了
程序只要在运行，就免不了会出现错误，错误很常见，比如Error，Notice，Warning等等。这篇文章具体说一下PHP的错误类型和屏蔽方法。在PHP中，主要有以下3种错误类型。 1. 注意（Notices） 这些都是比较小而且不严重的错误，比如去访问一个未被定义的变量。通常，这类的错误是不提示给用户的，但有时这些错误会影响到运行的结果。 2. 警告（Warnings） 这就是稍微严重一些的错误了，比如想要包含include()一个本身不存在的文件。这样的错误信息会提示给用户，但不会导致程序终止运行。 3
某个项目采用了数据库（MySQL）自增ID作为主要业务数据的主键。数据库自增ID使用简单，自动编号，速度快，而且是增量增长，按顺序存放，对于检索非常有利。
[导读] magic_quotes_gpc函数在php中的作用是判断解析用户提示的数据，如包括有:post、get、cookie过来的数据增加转义字符“ ”，以确保这些数据不会引起程序，特别是数据库语句因为特殊字符引起的污染而出现致命的错误 magic_quotes_gpc函数在php中的作用是判断解析用户提示的数据，如包括有:post、get、cookie过来的数据增加转义字符“\”，以确保这些数据不会引起程序，特别是数据库语句因为特殊字符引起的污染而出现致命的错误 在magic_quotes_
MySQL有很多种复制，至少从概念上来看，传统的主从复制，半同步复制，GTID复制，多线程复制，以及组复制（MGR）。 咋一看起来很多，各种各样的复制，其实从原理上看，各种复制的原理并无太大的异同。 每一种复制的出现都是有其原因的，是解决（或者说是弥补）前一种的复制方案的潜在的问题的。 新的复制方式的出现，是基于对原复制某一方面增强或者是优化的结果，而不是全新的一种方案或者技术，所以就不难理解为什么有这么多中复制。 其实搞出来这么多概念，个人觉得是源于开源的原因吧，不同复制版本的出现，因为是一个不断发现问题就解决问题的过程。 如果是闭源的数据库，你只管打补丁就行了，SP1,SP2,SP3……，应该不会出现这么多概念上的东西。
继上一篇相关于面试的文章出来后《简历怎么写，面试怎么过?》，收到的反响十分不错。对于面试的流程，简历的书写等有一定的勘误。虽然这是一些软技能，但有时候却是真的十分有效。 当我们在面试的时候，经常遇见这
Redis执行命令的速度非常快，根据官方给的性能可以达到10w+ qps。那么本文主要介绍到底Redis快在哪里。
失去Navicat的我实在用不来 workbench（没汉化对英语渣渣就是致命伤害），只能用命令行实现各种操作了！！感觉命令行比workbench好用
11、MySQL 里有 2000w 数据，redis 中只存 20w 的数据，如何保证 redis 中的数据都是热点数据？
Innodb为了解决磁盘上磁盘速度和CPU速度不一致的问题，在操作磁盘上的数据时，先将数据加载至内存中，在内存中对数据页进行操作。 Mysql在启动的时候，会向内存申请一块连续的空间，这块空间名为Bufffer Pool，也就是缓冲池，默认情况下Buffer Pool只有128M。 那缓冲池长什么样的呢，如下图所示 图片出自《Mysql运维内参》
安卓手机是我们平时使用最多的一款手机，因为安卓手机拥有非常高的性价比，同时在安卓程序中也有着比较明显的优势，在很多安卓程序中都有事件总线，那么android事件总线是什么，下面为大家简单介绍android事件总线是什么。
最近学习极客时间的MySQL45讲，补充下对于MySQL方面的知识，也在这里把自己之前的疑惑问题记录下来，从中寻找答案。由于InnoDB为常用引擎，以下分期默认都是InnoDB场景。
所有好用的洋SaaS都有一个致命的缺点：GFW。对于Slack这样的团队协作明星产品来说，一旦套牢退市对于企业的开发团队来说无疑是巨大的风险。况且，Slack并非开源产品，对知识产权和敏感数据泄露的顾
转载自：大数据文摘，未经允许不得二次转载 📷 先做一个简单的小测试。 这里有几组图片，不要怀疑，每组图片都有一张是合成的“假脸”。 📷 左边为假 📷 右边为假 📷
系统唯一id是我们在设计阶段常常遇到的问题。在复杂的分布式系统中，几乎都需要对大量的数据和消息进行唯一标识。在设计初期，我们需要考虑日后数据量的级别，如果可能会对数据进行分库分表，那么就需要有一个全局唯一id来标识一条数据或记录。生成唯一id的策略有多种，但是每种策略都有它的适用场景、优点以及局限性。
在index.php文件里包含1.txt，而1.txt的内容是phpinfo(),include函数包含1.txt，就会把1.txt的内容当成php文件执行，不管后缀是什么。1.txt也好，1.xml也好，只要里面是php代码，然后有被include函数包含，那么就被当成PHP文件执行。
对于千万级的表数据存储，删除大量记录后，表文件大小并没有随之变小。好奇怪，是什么原因导致的？不要着急，接下来，我们来深入剖析其中原因
开启方式：在my.ini的[mysqld]选项下：添加代码：log-error=E:\log-error.txt
在复杂分布式系统中，往往需要对大量的数据和消息进行唯一标识。如在美团点评的金融、支付、餐饮、酒店、猫眼电影等产品的系统中，数据日渐增长，对数据分库分表后需要有一个唯一ID来标识一条数据或消息，数据库的自增ID显然不能满足需求；特别一点的如订单、骑手、优惠券也都需要有唯一ID做标识。此时一个能够生成全局唯一ID的系统是非常必要的。概括下来，那业务系统对ID号的要求有哪些呢？
《移动端动画方案》一文主要介绍了花样直播项目客服端的动画方案，包括css3动画、canvas动画、播图片、gif图片等方案。css3动画具有性能优势，能够满足性能要求，但实现复杂动画效果较为困难；canvas动画可以实现较为复杂的动画效果，但性能不佳；播图片方案可以解决性能问题，但加载资源较多；gif图片方案容易实现，但有可能出现锯齿等问题。
1.1 Prometheus踩过的坑 在这里，我们先简单复习一下Prometheus中的数据结构。其为典型的k-v对，k（一般叫Series）由MetricName，Lables，TimeStamp组成，v则是值。 在早期的设计中，相同的Series会按照一定的规则组织起来，同时也会根据时间去组织文件。于是就变成了一个矩阵： 优点是写可以并行写，读也可以并行读（无论是根据条件还是时间段）。但缺点也很明显：首先是查询会变成一个矩阵，这样的设计容易触发随机读写，这无论在HDD还是SSD上都很难受（有兴趣的同学可以看后面的3.2小节）。 于是Prometheus又改进了一版存储。每一个Series一个文件，每个Series的数据在内存里存满1KB往下刷一次。 这样缓解了随机读写的问题，但也带来新的问题：
缓存是互联网开发中必不可少的一部分，它能降低我们数据库的并发数，提高我们系统的性能，比如我们经常使用的redis、emCached等等，其中redis应该是大部分的人选，为什么？因为速度快，易上手，是很多开发者的首选，但是缓存同样存在着问题，如果使用的不恰当，也可能会造成非常严重的后果，这时候你可能就会有疑问，缓存只是存储一些数据而已，怎么会造成严重的后果呢？下面我就带大家一起来分析分析。
本文作者：IMWeb 袁飞翔 原文出处：IMWeb社区 未经同意，禁止转载 前言 花样直播项目客服端的动画基本已都使用web来做，总结分享一下 方案列表 css3动画 canvas 动画 播图片 gif图片 各个方案的优缺点 css3动画 优点：启用css3的3d加速，能够满足性能要求；资源文件最小； 缺点：元素量多、复杂的动画难以实现 案例： 花样交友礼物动画 canvas 动画 优点：可以用swf文件直接导出生成，在线导出Google Swiffy (感谢Flash大神龙哥的指导） 缺点：性能
在之前的文章中说过，模拟浏览器在现在的python库中有两个选择Mechanize与Selenium：然而Mechanize不支持JavaScript，Selenium是一套完整的Web应用程序测试系统。所以对于爬虫开发来说selenium就成了爬虫开发的核武器，可以有效的帮助我们(1.无脑的执行JavaScript渲染页面;2.规避反爬)。 在此之前实现的十几万网站的频道识别是绝对不能算是定点爬虫的了，所以只好祭出核武器。 网上关于selenium的教程有很多，这里细数selenium的注（yi）意（xi
Hexo是静态博客网站，必须先在本地编辑好md文件再推送到网站上去—md文件也就是所谓的用markdown语法编写内容的文件。“工欲善其事，必先利其器”，因此我们需要一个合适的markdown编辑工具，它必须具备以下特点： 1.可导出md文件到本地，并随时进行修改 2.可提供分屏预览，支持同步滚动和定位 3.启动时响应速度快，编辑时渲染速度快
这篇文章我一直在纠结到底要不要写，不想写一来因为定时器用法比较简单，二来是面试中也不常问。后来还是决定写了主要是想把自己分析问题思路分享给大家，让大家在学习过程中能够参考，学习态度我相信大部分人没有问题，特别是正在看我博文的小伙伴那更不用说了！！给你们点个狂力赞。接下来就是学习方法了，我发现近期来咨询我问题的小伙伴学习姿势不对，所以我用Java中定时器Timer为案例整理下我的学习方法。万丈高楼平地起，所以我一贯的做法都是先用最简单，最简单，最简单案例先行！那就先来个Hello World吧！
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
