因为工作行业的原因,会有很多的同行或朋友找我推荐一些有运维经验的人,或者直接希望要运维专家。 最近我回顾了下这个事情,发现很奇怪的是,好像我一次都没有推荐成功过。...我琢磨了下,可能有这样几个原因: 第一个,运维范畴,就运维这个工种来说,其实也是有很大范畴的,比如IDC运维、主机运维、系统运维、网络运维、应用运维、运维开发、智能运维等等。...但是这种能力的承载,或者说对开发的运维能力的赋能,将成为运维这个角色的职责,需要能够有统一的基础平台建设提供支撑,所以我们会发现,当前我们更加需要能够帮助团队建设出高效运维体系的角色,而不再是能够被动响应更多问题的角色...这个能力的提升,也不是外面招几个人进来就解决问题的,关键还是有意识有规划的去做一些架构能力提升。...再往后,就需要对基础设施和基础服务有规划的建设,这个要求应该是提给系统架构师和业务架构师的,而不是提给运维角色。前面基础打不好,后面想让运维做好,这个没可能。
所谓IT运维自动化是指通过将日常IT运维中大量的重复性工作,由以往的手工执行转为自动化操作,从而减少乃至消除运维中的延迟,实现“零延时”的IT运维。...运维自动化可以大大提高运维的主动性和准确性,减少技术人员的工作强度,将精力转到运维策略规划、问题分析等有价值的工作中。...使用自动化简化IT运维的好处如下: 降低成本 没有一家公司是不想降低成本的,而自动化运维可以通过提高效率、减少人为错误和人力需求,降低企业IT成本。...提高生产力 自动化运维几乎不需要手动工作,这也就意味着它不仅可以提高产出,还可以将运维人员从复杂的传统运维工作中释放出来,将其知识和技能应用于更有价值的工作和任务上。...自动化运维可以明显提高可靠性,减轻运维人员繁琐的手动任务。 性能优化 运维专家面临的另一个问题是,让执行任务和工作流程变得更快、更高效、具备更高工作负载。
二、数据库的标准化 在实现MySQL的自动化运维的过程中,最痛苦的无非是目录的不统一,配置文件的混乱以及DB主机的不标准,而这些不标准的环境会让自动化运维的路途荆棘重重。...下面创建对应的数据目录、日志目录、运行文件目录等 每个实例独享一个配置文件,除serverid , bufferpool_size等参数外其他参数保持一致 线上环境的MySQL软件目录和版本保持一致 三、自动化运维之路一期...它实现的主要功能是: 实时查看备份的情况,当前应备份实例个数,已完成实例数 显示每个备份的耗费时长 查看过去5天的备份统计信息,如总个数,大小等 四、自动化运维之路二期 在实现了ZanDB备份监控系统之后...在MySQL主从复制中,有可能因为主从复制错误、主从切换或者软件的BUG等导致主从数据不一致。为了提早发现数据的不一致,就需要每天都针对核心数据库,进行主从的一致性校验,避免产生线上影响。...后续会加入数据库性能诊断,自动分析数据库慢查,获取关键信息,自动化拆库等功能。相信随着自动化的深入,DBA的手动重复操作将越来越少,将有限的时间投入到更有价值的事情上去。
“普通运维”和自动化运维并不存在严格的边界划分,自动化运维是普通传统运维演进的一种更高阶状态。...如果我们企业在前期已经有了相对扎实的基础,比如有比较完善的配置管理系统、监控告警体系和运维流程管理平台再来考虑自动化运维的建设会更加合理,避免出现返工或重复建设的情况,落地的效果和产生的收益也会更显著。...这意味着自动化运维平台的能力层(PaaS)需要将原有的运维能力进行拆分,将公用的能力沉淀下来形成各个原子比如有管控平台、作业平台、标准运维等,有统一接入的接口API Gateway能对接外部的系统和第三方工具...3)梳理企业现有的运维流程绝大部分的运维流程都会同时涉及到各类操作执行流和审批流,因此有必要提前梳理清楚各类运维流程,比如在金融行业都会有非常严格的运维流程要求,一般都会参照像ITIL、ISO20000...产品能力:嘉为蓝鲸灾备切换自动化提供灵活的流程编排能力,帮助企业实现应用灾备切换及恢复的预案管理和操作自动化,支持一键灾备切换和大屏跟踪展示,能够保证企业定期灾备切换活动的成功进行,同时助力企业数字化转型
在之前的文章中,谈到过“运维的本质——可视化”,在可视化的篇幅中,着重介绍自动化的可视化和数据的可视化;在后续的篇章中又介绍了“互联网运维的价值体系”,里面分解了几个维度:质量、成本、效率、安全等。...这个地方有个建议,把线上服务的数据驱动作为重点(80%),把运维内部服务的数据驱动为辅(20%)。因为线上服务的状态会反作用于运维内部事务的优化。...比如说自动化调度,可以根据业务涉及的基础节点资源使用情况,制定对应的自动化调度策略;可以在数据中直接进行故障定位;可以在数据中做安全分析。之前的文章“数据驱动运维”中介绍过我做的一个数据分层体系。...作者简介 王津银 07年进入腾讯公司接触运维,先后在YY和UC参与不同业务形态的运维,对运维有一些理解。...极力倡导互联网价值运维理念,即面向用户的价值是由自动化平台交付传递,同时由数据化来提炼和衡量。微信公众号:互联网运维杂谈。
自动化运维监控工具诞生 初期阶段IT基础设施通常处在小规模状态。几台至几十台机器的规模,足以满足业务需求。...虽然有了运维管理工具自动化收集监控数据之后,但还是有很多问题,让底层物理资源运维工作无法实现完全自动化。...这也就能解释,为什么很多客户在上线了运维监控软件之后,还是需要人工巡检。我们来看几个大家经常遇到的问题: 事例1:某客户数据库系统上线,3块900G 硬盘做raid5。...然后从模板库当中,选择对应的自动化安装模板进行全自动化的安装,包括自动化的阵列卡配置、OS配置,配置标准化的基础设施给上层资源运维使用。...除了资产管理之外,还需要进行知识库管理,形成运维人员之间,以及运维人员和维保商/厂商之间更快的自动化沟通渠道,让维保商可以更快的将设备固件更新等信息自动化推送给用户,减少原有的繁琐沟通渠道。
为了使DBA的工作轻松,有效率很多年前各大公司就开始自动化运维平台建设,在这方面我们属于比较晚的了。 今天介绍下最近开发的一个平台,自助DML。什么是DML,就是平常执行的增删改查数据库操作。...有人有疑问这不是程序访问的操作,为什么还要做一个平台操作这些呢,其实这种操作主要是开发需要线下修复数据的一种操作,不只是增删改,还有建表,建索引,添加字段等,这些操作开发一般会提给DBA协助操作数据库。...可能你会觉得这些活能有多少,其实这种活真不少,我上家公司是电商互联网公司,大概有七八百个实例,每天的这种操作有近百个。处理近百个这种需求,基本上一个人一天就不用干别的了。...这里提交有两个按钮,其中定时是用celery实现的。 行数超过设置 没有加where条件 3) 提交后就会生成一条任务,每个任务id是唯一的 可以点击进入查看详细信息。
请教潘老师:运维系统业务建模过程中,,运维人员的日常巡检过程、重大保障活动是业务用例吗?这2个活动是运维的重要客户服务内容,但问题是运维人员是组织内部业务工人,不是组织外的。...有什么机制吗? 锡山飞狐 14:20:59 比如巡检,必须到真实地去查看每台设备、每个IT系统运行健康指标,而不是不干活,随便填写一个巡检报告单报告没有问题。...广罗军(120***58) 14:56:18 @锡山飞狐 服务主管领导、客户运维负责人这两个业务执行者是技术服务中心外的吗?...,执行者应该付费客户 锡山飞狐 15:51:52 多谢@乐吧 的参与,不是太认同只有一个"运维服务"业务用例,比较认同保障重大活动是业务用例。...业务执行者的业务用例是不是有:了解公司,了解产品,签订服务协议,跟踪事件型运维,跟踪例行运维(这个看情况可拆开几个用例),调阅运维档案,咨询, 我不懂太多,不知道是不是有点启发作用 潘加宇(3504847
选择嘉维蓝鲸,让数据库自动化运维、安全运维、跨界运维触手可及! 产品架构设计 嘉维蓝鲸数据库自动化运维中心SaaS,是基于蓝鲸PAAS平台开发,囊括数据库管理自动化、监控自动化及操作审计的运维中心。...原子层: 是指为满足通用运维场景的基础能力平台的封装,有作业功能模块 、DB CMDB模块、运维数据平台模块组成。...运维场景层: 是指基于PaaS层之上的运维SaaS,涵盖数据库管理自动化、数据库监控自动化、操作审计等。...核心功能及优势 数据库自动化运维中心,是嘉为数据库技术专家基于多年的数据库运维经验的沉淀,是深刻理解MySQL、Oracle数据库日常运维中各种场景的结晶。...嘉为数据库自动化运维中心,提供MySQL、Oracle日常运维、备份恢复等基本的运维操作,批量完成、自动化交付。
本次沙龙主要围绕数据库相关的主题,内容包括美团数据库自动化运维系统构建、点评侧MySQL自动化服务平台RDS、美团数据库中间件、和小米高级DBA带来的Redis Cluster的大规模运维实践。...目录 今天我主要分这几个部分讲: 第一部分是美团在数据库自动化运维系统构建前的烦恼,DBA手动运维DB的时候遇到的各种问题; 第二个是我们在构数据库运维自动化系统过程中的一些坎坷和思考,这里我会说我们的...构建前的苦恼——一线运维DBA 首先说一下数据库运维自动化系统构建前,运维DBA都有哪些烦恼?...构建中的坎坷和思考——1.0版系统设计之初的考虑 以上讲完了数据库运维自动化系统构建前DBA的苦恼,接下来说一说我们如果想去构建一套数据库自动化运维系统应该从哪里开始着手,我这里列的都是非常重要的。...做自动化其实就是做标准化,这样的话,你在做自动化运维的时候,CMDB可以很方便的让你查询到信息,对业务进行合理的描述,这样的话有一个基本的地方,其实就是数据标准,我后面会说。
1.获取数据库表空间变化情况: 已oracle为例(sql语句见文末:根据自己的修改,比如PDB名字,保存的位置等): 2020-04-21_145907.png 查看的内容大概是这样的 2020-
讲师介绍:20年运营开发、海量运维和应用规划管理经验,任招商银行数据中心应用管理负责人,主要负责招行应用架构规划、发布、监控、运维等应用全生命周期管理工作,精通应用架构设计和自动化运维建设,目前专注于应用全生命周期的自动化运维实践...讲师介绍:15年数据库领域工作经验,历任多家公司数据库技术负责人,对于主流数据库的高可用架构、性能优化、监控报警、自动化运维等方面均有丰富经验。...DB类型的一站式数据库自动化运维平台。...讲师介绍:负责京东科技数据库平台管理维护工作,带领团队平稳护航多次6.18、11.11大促,对数据库多业务场景架构设计、高并发解决方案、数据生态管控有丰富实践经验。...维稳618和双11:京东科技数据库 海量运维的生态体系建设与实践 议题要点及收获: 如何建设海量数据和高并发场景下的数据库生态治理体系; 以6.18、11.11等大促为例的数据库海量运维经验; 数据库全生命周期管理
2.Elasticsearch Service:基于开源引擎打造的云端全托管 ELK 服务,助您轻松管理和运维集群,高效构建日志分析、运维监控、信息检索、数据分析等业务。...3.ES Serverless:自动弹性、完全免运维、极致成本、Elastic Stack生态兼容、灵活易用、稳定可靠,多种优势助力开启日志分析新体验。...5.腾讯云数据仓库 TCHouse-D:基于业内领先的 OLAP 数据库 Apache Doris 内核构建,为您提供方便易用、灵活稳定的实时数据仓库服务。...Elasticsearch Service 5.5折起 腾讯云数据仓库TCHouse-D 5折起 流计算Oceanus 5折 数据湖DLC 5折起 03 领取无门槛代金券 每人限领1张 赶快领取 自动弹性、完全免运维的...↓ 轻松处理海量数据 11.11云上盛惠 高效挖掘数据潜力 降低企业成本,提升数据生产力 关注腾讯云大数据公众号 邀您探索数据的无限可能 点击阅读原文,即可抵达活动现场 ↓↓↓
讲师介绍:15年数据库领域工作经验,历任多家公司数据库技术负责人,对于主流数据库的高可用架构、性能优化、监控报警、自动化运维等方面均有丰富经验。...DB类型的一站式数据库自动化运维平台。...“中台能力+场景生态”的 智慧运维管理平台架构实践(拟) 议题要点及收获: 了解数字化运维转型趋势; 如何以中台化思路纳管或新建运维平台,构建自动化、智能化的工具平台体系; 如何层层搭建中台化运维平台架构...讲师介绍:负责京东科技数据库平台管理维护工作,带领团队平稳护航多次6.18、11.11大促,对数据库多业务场景架构设计、高并发解决方案、数据生态管控有丰富实践经验。...维稳618和双11:京东科技数据库 海量运维的生态体系建设与实践 议题要点及收获: 如何建设海量数据和高并发场景下的数据库生态治理体系; 以6.18、11.11等大促为例的数据库海量运维经验; 数据库全生命周期管理
4.Elasticsearch Service:基于开源引擎打造的云端全托管 ELK 服务,助您轻松管理和运维集群,高效构建日志分析、运维监控、信息检索、数据分析等业务。...5.云数据仓库for Apache Doris:基于业内领先的 OLAP 数据库 Apache Doris 内核构建,为您提供方便易用、灵活稳定的实时数据仓库服务。...已参与首单活动的新客户想重复购买?全都满足你!此模块新老客户均可购买!...活动会场订单额累计满200元、1000元、5000元,均可获得1次抽奖机会,总计3次机会,中奖率100% 速抢 扫码立即参与活动↓ 轻松处理海量数据 11.11云上盛惠 高效挖掘数据潜力 降低企业成本...,提升数据生产力 点击“阅读原文”也可进入活动会场
虽然备案本身不需要收费,但在过去,备案前大多数都需要先购买一台服务器,而现在,你有了更低成本的选择:通过云开发的云托管服务,可以办理域名备案了!...作为新一代云原生应用引擎(App Engine 2.0),云托管拥有无痛迁移、自动化弹性扩缩容、免运维、支持跨平台部署和联动云开发能力等优势,让开发者可以不限语言框架,低成本迁移上云开发,有效提升开发效率...问:使用云托管的访问域名必须要备案吗? 答:需根据实际情况进行判断。若采用云托管提供默认域名访问自身则无需进行备案,只有需要自定义域名时才需要备案。...即日起至11月30日,腾讯云 11.11 云上盛惠,震撼来袭!今明两天,每晚19:00 秒杀场次,购买云开发基础版2套餐包,低至1元/月。 秒杀场专享 ? 企业用户专享 ?...托管等serverless化能力,可用于云端一体化开发多种端应用(小程序,公众号,Web 应用,Flutter 客户端等),帮助开发者统一构建和管理后端服务和云资源,避免了应用开发过程中繁琐的服务器搭建及运维
1.服务器管理: Spug 提供了集中管理服务器资源的功能,用户可以添加和管理服务器,包括服务器基本信息、操作系统、网络、磁盘等。它还支持对服务器进行批量操作,...
在我看来,分布式数据库和数据库没有什么太大的区别。它解决的是在互联网行业中,在线、海量数据存取的服务需求。举个例子,淘宝 11.11 活动。...② 你需要运维吗? 可能直播间 DBA 同学比较多,那问题是开发写完代码了,你需要运维么?...即使你的开发承担了 DevOps,那么有一些运维工具和运维监控的观察窗口,其实也是会很有助益的。中间件这一层有个功能就是抽出来,为运维同学提供一个观察的机制和窗口,而不需要具体了解应用的代码。...从技术层面看,DBLE 在 Mycat 基础上修复了一些没人维护的 Bug,并且扩展了对复杂查询的支持,增强了分布式事务的支持,增加了很多方面运维的监控和运维命令。...如果说要选开源的,有人持续运维的,有业界成熟核心案例的,实话是只有 DBLE。中间件产品大家的选择面并不是特别宽。 有同学问虎青对 shardingsphere 这个产品有什么看法?
来源:开源中国(ID:oschina2013) 【活动预告】 大数据实时处理之美:参与问答活动获得实时计算书籍(活动时间:10月18日-24日)(点击“阅读原文”即可参与) 导读 这些年来,很多人都在谈自动化运维...下面,@抚琴煮酒(余洪春)将为大家解答关于Linux集群和自动化运维方面的问题。 内容多多,干活多多,分享给有需要的网友们交流、学习。...,大部分还是要靠手动,现在公司的项目越来越多,产品线越来越多,运维只是加人力,招的人经验也比较丰富(有好几个人有网易等公司的运维经验),并没有做到真正的自动化,您这本书中有好的建设方案么?...个人感觉运维可能会靠向devops这块发展…… A:恩,确实是这样,建议学习Python,未来的云计算运维是会向DevOps方向转的。 Q:那些情况需要做自动化运维?有什么条件吗?超过20台服务器?...自动化运维相比,这种新的运维方式有哪些优势呢?
领取专属 10元无门槛券
手把手带您无忧上云