首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

干货 | Elasticsearch 多种跨机房方案对比与实战解读

通常当企业达到一定规模时,不管是在云上还是线下都会有多个机房做异地,确保在某个机房不可用时,还能持续对外提供业务。...1.对网络带宽和延迟要求较高,仅适用于同城。2.可能由于机房间网络中断造成脑裂问题。 1.一致性差。2.集群故障时数据会丢失。3.延迟高。 1.引入额外的消息队列组件,维护成本高,开发难度大。...使用快照的方式做跨机房的优点如下: 1.一致性高,快照是十分可靠的集群备份方式。 2.成本低,可以使用廉价的存储来保存快照,例如在公有云上的 S3,OSS,GCS 等等。...4 跨机房部署集群 跨机房部署 Elasticsearch 集群的方案在实现起来比较简单,就是将集群中的节点分布在不同的机房中,这对网络带宽和延迟要求较高,仅适用于同城,异地通常还是使用主集群的方式...,应用双写,借助消息队列实现双写,CCR 跨集群复制,极限网关 6 种 Elasticsearch 跨机房的方案。

5.7K42
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    知识总结:容与备份区别、技术、容体系规划

    如果是同步容,那容端同时就删除了;如果是异步容,那容端在数据异步复制的间隔内就会被删除。这时就需要从备份系统 中取出最新备份,来恢复被错误删除的信息。...规划企业安全保障体系考虑的因素 对于企业而言到底应该如何建设自己的系统,是只建设备份系统、还是只建设容系统、还是需要二者同时建设、或者是分步骤的建设,谁先谁后等问题,主要根据业务的需求而定: (1...常用的组合方式 基于以上原因,业界在系统的建设上一般按照以下几种方式: 建设机房内的本地备份系统 建设异地的备份系统 该方式可以备份系统的价格满足备份和异地容功能,能够避免主生产中心由于地震、...备份系统+异地容系统 这是一个较为理想化的容系统一体化解决方案,能够在很大程度上避免各种可能的错误。 容恢复等级 ? 灾难恢复层次 ? 技术层次 ? 1.1 磁盘阵列技术 ?...2.1 卷管理软件技术 ? 2.2 数据库日志复制技术 ? 2.3 数据库技术 ? 3.1 应用技术 ? 11.容体系结构规划 ? 系统正常运行 ? 生产中心单台主机宕机 ?

    10.2K21

    同城异地

    序言 同城异地,主要是用来进行备份容的,从而当一个数据中心挂了,另外一个数据中心经过切换之后,能让服务迅速的恢复。...随着业务的进一步发展,需要提供高可用水平,从而需要从单机房扩展为多机房,从而也就有了同城容。。。 对于运维来说,多一次升级,多一次变更,就会多一个故障,多一个锅。。。...2、 数据库同步 在数据库方面,主要是使用mysql,而mysql则主要是使用主模式,从而主的在一个机房,而库则在另外一个机房,在同步的时候,不可避免的情况就是如果一旦主机宕机,从而有可能是丢失数据的...主复制的延迟考虑,一般主机房机房之间使用万兆网络,从而对于一般的数据传输来说,延迟不是很高,基本上是可以忽略的。...在数据库跨机房同步的时候,mysql可能出现脑裂的情况,也就是双机房互联网络出现中断,从而机房检测到主机房不可用,但是在这个时候,是不能自动进行切换的,需要人工介入处理操作。

    4.1K31

    CP技术介绍

    工作机制 在vBRAS转发与控制分离组网中,CP的实现过程如下: 在不同DC的CP上分别创建CP组,并指定CP组的主角色。 向CP组中添加待管理的UP。...对CP组管理的UP而言,主CP组所在的CP是主CP,CP 组所在的CP是CP。 主CP上有用户上线时,主CP将用户数据通过RedisDBM备份到远端Redis服务器上。...实现过程为,在两个互为主的CP上分别创建一个CP组,这两个CP组管理的UP范围一致。当主CP组所在CP发生切换时,CP组所在CP可以接管这些UP上 的用户业务。 ?...例如,上述组网中,在CP 1上创建CP组group 1并配置为主CP组,在CP 2上创建CP组group 1 并配置为CP组,且CP 1和CP 2上的CP组group 1管理的UP...在CP 1上将group 1配置为主CP组,group 2配置为CP组;在CP 2上将group 1配置 为CP组,group 2配置为主CP组。

    2.3K21

    RBD快照方案

    一、说明 从主集群定期的导出最近两个快照之差,然后导入到集群。...3.1.2 首次备份 1.在主集群创建Image的快照 2.导出主集群Image的全量快照 3.将导出的全量快照文件传输到集群 4.集群创建对应的pool/image 5.导入全量快照文件到集群中...6.完成备份 3.1.3 非首次备份 1.在主集群查找最近的快照文件,并且确认集群是否存在同名的快照 2.在主集群创建Image的快照 3.导出最近快照文件和刚创建快照文件的差量文件。...(导出每次diff,实现增量备份) 4.将导出的差量快照文件传输到集群 5.导入全量快照文件到集群中 6.完成备份 3.2 总结 定期的每天导出增量的数据文件,在做恢复的时候,就从第一个快照导入

    1.9K10

    自动技术分析

    前言 ,又称灾难恢复(disaster recovery)。指的是, 发生灾难时恢复业务的能力。这就意味着已经发生了灾难,进行补救。它的流程是,前期准备,发现灾难,应对灾难。...大多数系统的自动依赖外部系统实现,一些关键模块则使用分布式共识算法实现内部。 自动的基础 副本(前期准备) 副本是的基础,没有副本拿什么容呢。...无状态应用的容 因为是无状态的应用,所以它可以可以快速扩容(Scale Out),在故障转移上也非常便捷。 它的关键在于: 1. 有足够的可用副本。 2. 故障转移简单,前置条减少。...有状态应用的容 首先,有状态系统需要具备无状态系统的能力。让可靠的副本承接流量是最优方案。 相比无状态应用,有状态应用的故障转移有前置条件,就是副本数据可靠。否则会影响数据质量。...总结 副本,故障转移,探活,是自动的基础。 有状态的应用,需要保证备用副本的可靠性(和主副本一致),可靠性和延时需要取舍。

    1.2K20

    系列(八)——同城数据冷建设

    为了让企业能更好用好云平台的数据安全能力,本文重点云平台数据备份冷能力,以腾讯云为例,主要从以下两个维度介绍:同城数据冷能解决企业什么问题,达到怎么样业务容效果?...云平台对数据冷能给予企业哪些帮助?1. 数据冷介绍1.1 数据冷概念数据冷,业务数据文件在同地域或者跨地域定时做备份。...如果企业有业务切回需求,主要依赖于dts数据同步工具,当追平数据后,在业务低峰期将业务切回之前可用区。3....本文小结同城冷方案,在云平台的协助下,企业几乎0成本并拥有同城数据冷能力来保障业务生命线。指标详细说明容能力具备同地域(不同可用区)数据备份能力,不具备不同地域的能力。...3.容演练能力建设,增加平时运维成本以及自动化工具开发功能。

    6.6K113

    系列(九)——异地数据冷建设

    即使云平台在建设数据中心之前,会遵循机房建设标准来选址,但是对于极端情况自然灾害,例如地震,台风等等,对同地域备份安全能力有非常大的风险,因此本文重点阐述腾讯云对异地数据冷解决方案。1....异地数据备份挑战相对同城数据备份,异地数据冷主要挑战是成本,主要是跨地域之数据传输带宽成本。...异地数据冷方案2.1 API实现方案数据备份:云平台的数据库数据备份均为同地域,因此需要将该备份数据上传到异地COS存储桶。...2.3 数据库备份服务数据库备份服务拥有一套完整的数据备份和数据恢复解决方案,具备实时增量备份以及快速的数据恢复能力,同时具备异地容能力。...如果企业有业务切回需求,数据库依赖于dts数据同步工具,cos通过日志进行人工补录,待两端数据一致后,在业务低峰期将业务切回之前地域。

    8.9K164

    本地IDC机房数据库容解决方案

    随着云计算如火如茶的进行,IT资源可进行快速部署,弹性扩容及超高的性价比,这对于我们创建本地IDC机房数据库容提供极大的便利性。如何利用云数据库做容成为DBA的基本功。...、同城不同区、跨地域。...云数据库 MySQL 同城实例架构(不同可用区) 说明:腾讯云数据库多可用区部署目前仅支持深圳金融专区,其他可用区的支持还在规划中。...跨地域部署 云数据库 MySQL 异地实例架构 云数据库 MySQL 异地实例架构 三、构建云上环境 通过上面的介绍,我们基本了解云数据库 MySQL的架构,接下来我们来说说本地...1、创建DTS(数据传输服务)同步任务,这里假设CDB实例已申请购买完毕。

    2.4K20

    简述异地多活方案以及腾讯云实践

    下面我们主要阐述的也是数据层的容。主流容架构同城同一个城市至少部署两个机房,仅主机房对外提供服务, 机房平时不提供服务能力,主要作为主机房的备份,主之间数据采用单向同步的形式。...如果请求落在数据中心,则涉及到跨机房写操作(机房应用写主数据中心)。如果跨机房的 RT 非常大,数据请求在主、数据中心的性能差异也会非常大,无法提供很好的用户体验。架构上数据采用单向同步方式。...缺点: 局限在同城区域内,距离受限, 城市级灾难容易不可用。...缺点: 部署复杂,涉及到数据的双向同步(需要在同步过程中解决数据冲突的问题, 云厂商一般使用DTS工具进行同步),还会涉及到比如 Redis 缓存、 Rocket MQ 、有状态中间件等;业务改造成本非常高...+异地)

    2.9K94

    本地IDC机房数据库容解决方案

    随着云计算如火如茶的进行,IT资源可进行快速部署,弹性扩容及超高的性价比,这对于我们创建本地IDC机房数据库容提供极大的便利性。如何利用云数据库做容成为DBA的基本功。...、同城不同区、跨地域。...云数据库 MySQL 同城实例架构(不同可用区) 说明:腾讯云数据库多可用区部署目前仅支持深圳金融专区,其他可用区的支持还在规划中。...跨地域部署 云数据库 MySQL 异地实例架构 云数据库 MySQL 异地实例架构 三、构建云上环境 通过上面的介绍,我们基本了解云数据库...1、创建DTS(数据传输服务)同步任务,这里假设CDB实例已申请购买完毕。

    4.3K820

    IDC云白皮书:云支持未来业务持续性新需求

    数据中心市场综述 数据中心市场的普及和发展 随着云计算等新兴技术的成熟,数据中心服务在行业的应用已经越来越广泛。...云对基于OpenStack开放架构的云数据中心提供能力,且可提供面向租户的服务,并作为云数据中心的建设必备要求。...随着云计算平台的逐步深入,这些企业用户也开始关注云解决方案。 基于OpenStack架构的解决方案 华为云解决方案面向云数据中心,为云数据中心提供解决方案,为租户提供自助的服务。...服务化,租户自助部署 对于租户或不同业务部门,可根据业务对连续性的要求,按照业务自助配置双活、主、备份等不同的SLA,将建设时间从月缩短到分钟;业务部门可自助完成灾演练、切换等,...云关键技术 云管理平台ManageOne 华为云管理平台ManageOne是服务的入口,提供管理员门户和租户门户。管理员门户,提供服务的编排和定义能力,发放给租户使用。

    4.7K21

    如何设计高可用的云业务架构?

    云架构中典型的高可用设计就是在支持主可用区(简称AZ一般代表一个机房或园区)的地域创建CLB实例,就是在购买CLB的时候尽量选择多可用区的类型。...的目的就是保存云上业务的核心部分。一个好的方案,就是从故障的基础设施中保存企业最宝贵的数据,然后在新的基础设施上恢复业务。注意,不是为了挽救基础设施,而是为了挽救业务。...云架构中典型的设计就是不同Region(北京是一个region,上海是另外一个region)机房创建一套备份业务系统实现异地,在不同地域、不同可用区中均对原有业务架构做一套完整的备份。...这种容架构方式既可以解决单机房故障也可以应对像地震,海啸等灾难性故障。...(DTS)提供不同区域间数据库同步功能; 衡量容系统有两个主要指标:RPO(Recovery Point Objective)和 RTO(Recovery Time Object),其中 RPO代表

    2.5K72

    解读等保2.0,缺不了

    要求的; 缺不了科力锐 科力锐云技术完美契合等保2.0的要求,真正做到随需所取,随取所用的真服务,让多云统一和负载迁移更可靠、更快速、更简单!...科力锐新一代一体机提供全生命周期的全流程管理能力为用户赋能,推动“让赋能成为行业的主流价值观”,让您拥有系统的运营、管理和应急恢复能力。 ? ?...2)科力锐云DRaaS服务 科力锐云是基于云计算技术、移动互联网技术、人工智能技术和大数据技术的开放式公共服务云平台,提供信息化基础服务“云Draas服务”,是开放的公有云平台生态系统,以服务的方式面向用户提供基于云架构的服务...极简验证,快速演练;web管理,自主可控 l 赋能 随处,数据不丢;随时恢复,业务少停 ?...电信、联通、移动、广电、教育五网接入的多线BGP机房,可为用户提供 99.995%可靠率的高品质服务; 3)法律保护:科力锐云在交付时会与用户签订具有法律效应的隐私保护协议及相关服务质量保证合同,来保障用户的安全权益

    3.4K20

    关于Oracle书籍的意见征集

    关于Data Guard在我原来印象中是有阴影的,起源是在OCM考试中,有很多同学在一个小时内搭建出Data Guard环境,但是做了主切换,反复切换的时候出了问题。...其实在2017年的时候,就已经在规划一本新书是关于,但是拖延症的我确实拖了太久,事情悬而未决,想起来就上火。...2.在11g开始,Data Guard已经不简单是一个库的角色了,它开始承载很多更有实际价值的任务,比如批量查询任务,比如通过快照数据库来评估DML,DDL等,所以基于这个重大的变化和方向,我觉得对Data...3.从实际的使用来看,Data Guard出现问题的情况很多和官方文档的系统性差别很多,或者说官方文档是实用不实用的内容都有,需要甄别,比如库有两种类型,几乎99%以上都是Physical Standby...所以这些算是我对于这个书籍的一个入手点和出发点。至于稿酬,如果你认真了,开始你就输了。还有个不是理由的理由,那就是这算是自己规划的一个方向,这个任务解决了,自己就不用那么纠结了。

    85840
    领券