在以前，数据库的集群配置一直很难，难点在于MySQL主从结构的高可用和读写分离。万幸的是，Galera/GR的出现，让整个集群的配置都极大程度地简化了。
读写分离，作为一种常用的数据库访问优化手段，得到广泛的应用。本文尝试从读写分离的技术实现、适用场景及典型产品等角度，阐述这一技术的整体现状。
前文提到异地多活的几种型态和基于OceanBase实现方案。这里再总结一下基于其他分布式数据库（MySQL）实现异地多活时要考虑的点。本文不讨论为什么做异地多活，可以参考末尾的文章。
为了保证数据库的高可用，为了保证性能的扩展，绝大部分公司又会使用主从同步，读写分离的MySQL集群架构。
当应用程序访问数据时， MySQL 将数据从磁盘读取到内存，或将内存数据写入磁盘是数据库系统常见的IO操作。相比内存操作，磁盘IO操作运行速度相对较慢，需消耗较多的时间。当出现大规模数据读取 比如全表扫描，频繁数据读写请求时，高并发的写入更新数据，IO操作可能成为系统瓶颈。
简介 对于很多大型网站（pv值百万、千万）来说，在所处理的业务中，其中有70%的业务是查询（select）相关的业务操作（新闻网站，插入一条新闻。查询操作），剩下的则是写（insert、update、delete，只要能对MySQL的数据造成更改的操作都叫写操作）操作。在使用负载均衡集群之后，可以很大程度的提升网站的整体性能，但是最终的数据处理的压力还是会落到MySQL数据库上，所有很有必要使用一些技术来提升MySQL的负载能力。（读写分离） 写操作专门交给写服务器处理（一般网站来说写是比较少的 读写比 4
关于MYSQL的读写的需求,大部分都是在跟读作战,怎么读写分离,是在应用上实现, 或者通过的dns 转接,还是通过简单的中间件实现, 实际上这和需求以及当时可以满足需求的技术以及功耗比有关, 当然这也和数据库的量有关,所以没有那个更好,各花入个眼,没有那个更....
什么是事务？ 事务是一组原子性的sql语句，或者说是一个独立的工作单元。事务有四个特性，原子性(Atomicity),一致性(Consistency),隔离型(Isolation)以及持久性(Durability)。今天想跟大家一起研究下事务内部到底是怎么实现的。
1.分布式应用的概念和优势 分布式数据库是指利用高速网络将物理上分散的多个数据存储单元连接起来组成一个逻辑上统一的数据库。分布式数据库的基本思想是将原来集中式数据库中的数据分散存储到多个通过网络连接的数据存储节点上，以获得更大的存储容量和更高的并发访问量。近年来，随着数据量的增长，分布式数据库技术也得到了快速的发展，传统的关系型数据库开始从集中式模型向分布式存储，从集中式计算走向分布式计算。 分布式数据库系统的主要目的是容灾、异地数据备份，并且通过就近访问原则，用户可以就近访问数据库节点，这样就实现
近日，腾讯云原生数据库TDSQL-C 发布新版本，在云原生架构、基础硬件能力、自研内核等方面进行了全面升级。本次升级涵盖了基于英特尔® 傲腾™持久内存的二级缓存、全链路RDMA网络、7*24持续无锁备份等核心功能。性能测试结果显示，在全缓存场景、大数据集场景中，新版TDSQL-C 性能全面超越业内其他云原生数据库产品，对比传统云数据库达到200%性能提升。此外，TDSQL-C价格仅为商业数据库的1/10，是企业上云的最佳选择。 TDSQL-C 是腾讯云自研的新一代云原生关系型数据库，为企业提供极致弹性、高性
达达创立于2014年5月，业务覆盖全国37个城市，拥有130万注册众包配送员，日均配送百万单，是全国领先的最后三公里物流配送平台。 达达的业务模式与滴滴以及Uber很相似，以众包的方式利用社会闲散人力资源，解决O2O最后三公里即时性配送难题（2016年4月，达达已经与京东到家合并）。
相信大家都用过事务以及了解他的特点，如原子性(Atomicity),一致性(Consistency),隔离型(Isolation)以及持久性(Durability)等。今天想跟大家一起研究下事务内部到底是怎么实现的，在讲解前我想先抛出个问题： 事务想要做到什么效果？
最近学习了阿里资深技术专家李运华的架构设计关于读写分离的教程，颇有收获，总结一下。
MySQL 官方提供了多种高可用部署方案，从最基础的主从复制到组复制再到 InnoDB Cluster 等等。本篇文章以 MySQL 8.0 版本为准，介绍下不同高可用方案架构原理及使用场景。
目前，在很多OLTP场景中，MySQL数据库都有着广泛的应用，也有很多不同的使用方式。从数据库的业务需求、架构设计、运营维护、再到扩容迁移，不同的MySQL架构有不同的特点，适应一定的业务场景，或者解决一定的业务问题。
虽然近十年来各种存储技术飞速发展，但关系数据库由于其ACID的特性和功能强大的SQL查询，目前还是各种业务系统中关键和核心的存储系统，很多场景下高性能的设计最核心的部分就是关系数据库的设计。
最近公司业务系统中的死锁较多，比较担心，并且最近在群里面，经常听到有一些群友，提到为什么MYSQL的死锁监控上比较LOW，但还好的是MYSQL的死锁不是太多。这里触发了我关于死锁的一些看法，延伸到表设计，系统的设计。
工作久了，人总会有种忘记初心的感觉。 相信每个人小时候都想过成为一名科学家，只不过到后来，连自己都忘了。 当一名科学家确实不容易，学术研究难，薪酬待遇还不高，如果不是真的热爱，很难走下去。 但在腾讯，你可以把学术当成工作，工作就是做学术，而且两者都可以做得很好。是的，你没有听错。 今天，腾讯云两项数据库内核技术的研究成果再次入选SIGMOD和ICDE的收录论文。其中，SIGMOD、ICDE、VLDB并称为国际数据库三大顶级会议。 另外，据说在学术圈，一篇SIGMOD或者ICDE就能当副教授了？这么看的话，
我之前呆过一家创业工作，是做商城业务的，商城这种业务，表面上看起来涉及的业务简单，包括：用户、商品、库存、订单、购物车、支付、物流等业务。但是，细分下来，还是比较复杂的。这其中往往会牵扯到很多提升用户体验的潜在需求。例如：为用户推荐商品，这就涉及到用户的行为分析和大数据的精准推荐。如果说具体的技术的话，那肯定就包含了：用户行为日志埋点、采集、上报，大数据实时统计分析，用户画像，商品推荐等大数据技术。
很多小伙伴留言说让我写一些工作过程中的真实案例，写些啥呢？想来想去，写一篇我在以前公司从零开始到用户超千万的数据库架构升级演变的过程吧。
mysql作为互联网公司都会用到的数据库，如果在使用过程中出现性能问题，会采用mysql的横向扩展，使用主从复制来提高读性能，要是解决写入问题，需要进行分库分表。本文不会去介绍mysql的高可用，需要了解Mysql高可用架构相关的请戳
商品系统、搜索系统这类与用户关联不大的系统，效果特别的好。因为在这些系统中，每个人看到的内容都是一样的，也就是说，对后端服务来说，每个人的查询请求和返回的数据都是一样的。这种情况下，Redis缓存的命中率非常高，近乎于全部的请求都可以命中缓存，相对的，几乎没有多少请求能穿透到MySQL。
MGR是MySQL Group Replication的缩写，即MySQL组复制。
近日，腾讯云MySQL发布新架构，在基础硬件能力、自研内核及外部网络延迟等方面进行了全面升级。 在探究新版本实际性能的过程中，测试人员通过基准测试工具SysBench以及全仿真业务生产环境，分别针对只写、只读以及混合读写场景进行性能测试。其结果显示，新架构下的云数据库MySQL在性能上比原有架构提升20%。此外，通过TXSQL内核的更新，也为企业提供了更多实用的能力。 本次发布的云数据库MySQL新架构搭载最新的腾讯自研数据库内核TXSQL，不仅提供了如Parallel DDL、缓存快照主从同步等性能增强
NoSQL在2010年风生水起，大大小小的Web站点在追求高性能高可靠性方面，不由自主都选择了NoSQL技术作为优先考虑的方面。今年伊始，InfoQ中文站有幸邀请到凤凰网的孙立先生，为大家分享他之于NoSQL方面的经验和体会。
达达是全国领先的最后三公里物流配送平台。 达达的业务模式与滴滴以及Uber很相似，以众包的方式利用社会闲散人力资源，解决O2O最后三公里即时性配送难题（目前达达已经与京东到家合并）。 达达业务主要包含两部分：商家发单，配送员接单配送，如下图所示。
在专栏之前的几篇文章中，我们总结了缓冲池，缓存页，redo log，undo log，以及数据页和数据行在底层是如何进行存储的，后续介绍了表空间，段，区等概念。这一节比较特殊，讲述的是和Linux有关的交互原理，因为多数的mysql都是部署在linux的服务器上面，本节会简单介绍一下linux是如何处理mysql的请求的，以及linux系统会带来哪些问题
随着微服务这种架构的兴起，我们应用从一个完整的大的应用，切分为很多可以独立提供服务的小应用。每个应用都有独立的数据库。
OceanBase是由蚂蚁集团完全自主研发的国产原生分布式数据库。它的设计初衷是为了满足日益增长的数据处理需求，特别是在金融、电商等对数据库性能、稳定性和扩展性有极高要求的行业中。OceanBase采用了分布式架构和一体化设计，兼具分布式架构的扩展性与集中式架构的性能优势，通过一套引擎同时支持OLTP（在线事务处理）和OLAP（在线分析处理）的混合负载。
一般来说，同一个虚拟机 > 同一台服务器 > 同一个集群 > 同一个机房 > 同一个城市 > 同国其他城市 > 跨国。
MySQL在达到一定数据量（我的经验是3T、单表1亿）时，复杂查询会有明显的延迟。继续分库分表，会严重增加业务复杂性，尤其对很多非互联网产品来说，急需一个分布式存储。
在如今互联网业务中使用范围最广的数据库无疑还是关系型数据库MySQL，之所以用"还是"这个词，是因为最近几年国内数据库领域也取得了一些长足进步，例如以TIDB、OceanBase等为代表的分布式数据库，但它们暂时还没有形成绝对的覆盖面，所以现阶段还得继续学习MySQL数据库以应对工作中遇到的一些问题，以及面试过程中关于数据库部分的考察。
2.数据库的分表分库 分库分为两种，水平分割和垂直分割 分表是在同一个数据库当中，减少一个表的查询压力
集群（cluster）就是一组计算机，它们作为一个整体向用户提供一组网络资源，这些单个的计算机系统就是集群的节点（node）。集群提供了以下关键的特性。
ProxySQL 是 MySQL 的高性能、高可用性、协议感知代理。支持包括读写分离、故障转换、query 的过滤和路由等功能。本文将从 Proxysql 的基本功能测试、异常情况测试来聊聊 ProxySQL 功能。
最近一个群里面有人问问题，关于MYSQL中间件怎么选型的问题，以及怎么读写问题的问题。我当时嘴比较欠，就说了几句。后面想想当时说的有不少有漏洞，所以写一篇文章，为中间件，或者说数据库的中间件来 平反。
组建MySQL集群的几种方案 LVS+Keepalived+MySQL（有脑裂问题？但似乎很多人推荐这个） DRBD+Heartbeat+MySQL（有一台机器空余？Heartbeat切换时间较长？有脑裂问题？） MySQL Proxy（不够成熟与稳定？使用了Lua？是不是用了他做分表则可以不用更改客户端逻辑？） MySQL Cluster （社区版不支持INNODB引擎？商用案例不足？） MySQL + MHA （如果配上异步复制，似乎是不错的选择，又和问题？） MySQL + MMM （似乎反映有很多问
什么是NoSQL，什么是Redis，我们在了解这个系列之前，先来看一下Redis是从何而来？Why redis is needed? 1、单机MySQL年代 在最早的单机MySQL年代，存在着访问量小
首先数据库技术发展的基础还是在业务推动的背景下，能够实现相关的技术保障。业务需求的提升必然会在数据量，访问量等方面有更高的要求，而映射到数据库层面就不是简单的扩容和添加资源了，我们有时候更需要弹性，需要快速实现，需要更高的性能。这些都是摆在我们面前的问题，而不仅仅是DBA团队。 所以早期的很多数据库，从一主一从，一主多从的架构，逐步演变到了读写分离，分库分表，然后就是分布式。而同时从很多层面来说，行业内的方案真是百花齐放，记得前几天还和同事聊，说如果对比一下Oracle和MySQL,
在 MGR 中，单主模式是只有一个主节点可以写，其余均为只读节点，且只读节点的 super read only 为打开状态，即使 root 用户依然无法写。多主模式则为全节点均可写。
在做业务架构的过程中，你是否遇到过类似的痛点？ （1）数据量太大，容量复杂性上移到业务层； （2）并发量太大，性能复杂性上移到业务层； （3）前台与后台存储异构，满足不同查询需求； （4）线上与线下存储异构，满足大数据需求； （5）存储系统迁移成本高，不敢轻易做重构； （6）... 职业生涯十五年，基本都在使用MySQL做线上业务的存储。最近这几年，遇到的问题慢慢多起来，严重影响了研发效率。TiDB近年甚火，于是最近做了一些调研，与大家分享。 如一贯风格，更多的聊：TiDB究竟解决什么问题，以及为什么这
多版本并发控制是数据库管理系统中的一项重要技术，它可以提高数据库的并发性能和可靠性，支持高并发的读写操作，提高数据的安全性，具有重要的应用价值和意义。笔者写此文主要是为了帮助那些不了解MySQL多版本并发控制的朋友们简单了解一下MVCC，顺便整理一下思路，查漏补缺。
在数据库中数据极速增长的情况下，数据库的瓶颈不在于存储，而是计算，即查询。数据量越大，查询的效率越低，对于越复杂的查询语句，其消耗服务器的资源越强，有时甚至不输于死循环。
PS：Alatas: 1.程序不需要管主从配置的具体细节 2.实现原理是 proxy，所以性能上会下降 3.而且需要维护其高可用 4.减少了程序员技能要求 5.只支持 mysql Sharding-jdbc： 1.主从配置在程序中，所以增加了程序员的技术要求 2.实现原理是 jdbc 增强，所以支持任何数据库类型 性能比上面那个强 3.而且不需要维护。 4.Mysql、 Oracle、 sql server
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
