首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

数据库智能探索与实践

在业务的驱动下,美团点评DBA团队经历了从“人肉”到工具化、产品化、自助化、自动化的转型之旅,也开始了智能数据库领域的思考和实践。...本文将介绍美团点评整个数据库平台的演进历史,以及我们当前的情况和面临的一些挑战,最后分享一下我们从自动化到智能过渡时,所进行的思考、探索与实践。...换句话来说,智能不用报警,通过看报表就能知道可能要出事了,能够把故障消灭在“萌芽”阶段;第二,传统是被动接受,而智能是主动出击。...但主动出击不一定是通过DBA去做,可能是系统或者机器人操作;第三,传统是由DBA发起和解决的,而智能是系统发起、RD自助;第四,传统属于“人肉救火”,而智能属于“智能决策执行”;最后一点...w=1340&h=672&f=png&s=274797] 上图是传统维和智能的特点分析,左边属于传统,右边属于智能

4.1K10

为什么要搞数据库平台

实际上很多企业都有想做一套数据库平台的想法,主要基于以下的一些原因 1 ORACLE 的淘汰,导致更换其他数据库后,数据库的台数和数量等都有上升,管理手段和方式在使用纯手工的方式进行大批量的数据库的管理...2 固定种类数据库监控种类的平台建立,这样的平台也是见得不少,都有自己的特性和卖点,并且有些产品是固化与某一种数据库产品或自研数据库产品所推出的,这些平台包含,自动搭建数据库,自动巡检数据库,自动故障处理...3 基于业务的数据库平台,这点可能是商业数据库平台的一个无法触及的地方,目前经济环节的问题会导致针对成本核算的重视,而数据库成本的计算,尤其与业务方面有关的方面这是一个空白,比如数据库为什么要扩充容量...自研平台可以针对各种数据库的原理结合自身的业务特性,做出适合企业特有的数据库与工作性能监控,任务自动一体化的平台,通过平台的搭建,搭建者会成为数据库技术及公司业务的精通者,并且对于DEVOPS 软件平台的规划和功能模块的划分也会有深入的了解...从某种角度,如果深入到业务甚至可以通过平台的方式节省在数据库上的投入,转变被动管理方式,为主动管理,让数据库从花钱的角色,变为省钱的角色,乃至一个“赚钱”的部门。

2.8K60
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    设备远程平台—助力工业设备智能

    远程是工业互联网重要组成部分,没有工业互联网核心技术,远程不可能实现目标,设备远程平台运用了各种新技术,物联网实现数据接入,云计算实现存储、大数据实现分析, 人工智能实现状态检修与预警预报。...01设备远程平台设备远程平台通过智能终端对设备进行在线监测,将各种数据上传到云平台,存储、整理、分析,通过智能应用系统实现在线监控、记录、查询、统计、分析、修改、报警等操作,实现远程智能化管理。...设备远程行业现状分析:01设备运行状况:设备分布广,无法远程监控设备运行情况、故障情况;02成本:出差维护成本高,好多无效出差,设备故障无法及时掌握;03设备运营服务:设备工作、故障、服务、客户使用...3、连接用户更紧密,提高企业和客户的黏性通过智能化服务,随时为客户提供各种信息,保障客户设备良性运作和使用寿命。变被动服务为主动服务,增加客户配件在原厂家的购买率及新设备的复购率。...05设备远程应用价值

    1.2K50

    腾讯织云Metis智能学件平台正式开源

    10月20日,腾讯织云 Metis 智能学件平台正式对外开源。...1、项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5、Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis Metis国内镜像地址: https://

    5.1K21

    数据库自动化平台–自助DML

    为了使DBA的工作轻松,有效率很多年前各大公司就开始自动化平台建设,在这方面我们属于比较晚的了。 今天介绍下最近开发的一个平台,自助DML。什么是DML,就是平常执行的增删改查数据库操作。...有人有疑问这不是程序访问的操作,为什么还要做一个平台操作这些呢,其实这种操作主要是开发需要线下修复数据的一种操作,不只是增删改,还有建表,建索引,添加字段等,这些操作开发一般会提给DBA协助操作数据库。...虽说现在的公司实例少点,但每天的工作量还是很大,关键这种工比较重复,枯燥,没有技术含量,所以迫切需要一个自助的服务平台开放出去来提高工作效率,解放DBA。...: 1) 提交任务需要满足两个条件:(1) 元数据平台(请参考之前的元数据平台博客)集群归属部门信息不能为空 (2)提交任务的人所在部门要跟集群归属部门一致 2) 根据流程检查权限后,就会对提交的...10) 这个页面是DBA后台操作页面, 目前只有DML,其他平台正在开发中。 总结: 此系统目前已经开放给RD使用,目前日处理需求量50+,对工作效率,安全性,RD体验等方面有了显著的提升。

    3.3K20

    数据库管理平台面面观

    数据库运管平台发展趋势 为满足前文所谈的多样性、跨平台、异构化等趋势,数据库管理平台发展趋势包括以下几个方面: 云化趋势:随着云计算技术的迅速发展,云化趋势将成为数据库管理平台的主流发展趋势。...数据库管理平台将逐渐向基于云的SaaS平台发展,实现跨地域、跨云平台的资源监控和管理。 智能化趋势:数据库管理平台将更加注重应用人工智能、机器学习等技术,实现数据库管理自动化和智能化。...安全智防趋势:随着数据库安全事件频繁发生,数据库管理平台将更加注重数据库安全的智能防护。例如对不合法的SQL操作,恶意登录,数据泄漏等安全事件进行实时监控,及时发现并处理异常情况。...自动化趋势:数据库管理平台将更加注重自动化的发展,推进各项操作的自动化实现,减少人工操作的参与,提高效率和管理质量。...综上所述,数据库管理平台将逐渐实现云化、智能化、多模式化、安全化和自动化的发展趋势。作为一个专门用于进行数据库管理和平台,将实现更高效的数据库管理,更保障企业数据的可靠性和安全性。

    46120

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis (点击文末阅读原文直接访问) 请给 Metis

    3.7K30

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis 请给 Metis 一个 Star !

    1.4K30

    【开源公告】腾讯织云Metis智能学件平台正式开源

    1 项目描述 “Metis”取名自希腊神话中的智慧女神墨提斯,全称为:腾讯织云 Metis 智能学件平台。“织云”指的是腾讯智能一体化平台,“学件”的概念由南京大学周志华教授提出。...在此基础上,腾讯云副总裁赵建春先生进一步提出“学件”的概念,亦称 AI 组建,强调其具备对场景智能化解决方案的记忆能力。...如 Metis 的智能咨询机器人、舆情监控、集群智能负载均衡、数据库参数调优、容量预测。...5 Metis 智能学件未来开源计划 Metis 将打造一个开放的学件平台,陆续开源时间序列指标预测、主机异常智能分析、MySQL 异常智能分析、硬盘生命周期预测等其它智能学件,集合广大用户在智能领域的建设经验和实践...腾讯织云 Metis 智能学件平台之无阈值智能监控学件正式开源 Github 开源地址: https://github.com/Tencent/Metis 请给 Metis 一个 Star !

    3.2K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。 ?...扁鹊的需求背景 TDSQL作为腾讯针对金融场景推出的高一致,分布式数据库集群的解决方案目前已覆盖了腾讯90%的支付业务场景,内部有大量团队使用;同时作为腾讯金融云的数据库产品,支持公有云和专有云两种云解决方案...之所以将这个模块命名为扁鹊,就是希望它能像古代的扁鹊神医为人诊断病因一样也可以为数据库“对症下药“,治疗/修复/预判数据库已知或潜在的风险。 2....三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。 1....从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因 由慢查询并发引起的主备切换

    1.9K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。...image.png 关注“腾讯云数据库”官方微信,回复“智能”,即可下载本文PPT。...image.png 三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。...image.png 从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因...关注“腾讯云数据库”官方微信,回复“智能”,即可下载本文PPT。 image.png

    11.8K20

    腾讯数据库专家雷海林分享智能架构

    2019年5月8日-10日的DTCC2019年中国数据库大会上,腾讯云数据库专家工程师雷海林首受邀做了主题为《TDSQL智能平台-扁鹊架构与实践》的技术分享,以下为大会现场演讲实录。...之所以将这个模块命名为扁鹊,就是希望它能像古代的扁鹊神医为人诊断病因一样也可以为数据库“对症下药“,治疗/修复/预判数据库已知或潜在的风险。 2....三、智能诊断原理与实践 我们将客户经常咨询的DB问题大体分为三类,可用性问题、性能问题、可靠性问题。 下面我们具体看一下扁鹊是怎样针对这三类问题进行分析并解决的。 1....从我们自身的经验来看,由DB故障导致的切换并不常见,更多的情况是由于用户的SQL占用过多的系统资源引发的一些异常状况,主要可以分为慢查询并发和大事务两类,下面我们逐个分析两种行为触发切换的原因 由慢查询并发引起的主备切换...受苹果公司新规定影响,微信 iOS 版的赞赏功能被关闭,可通过二码转账支持公众号。

    1.4K60

    腾讯智平台在渝上线,开启IDC智能维新时代

    作为腾讯20年数据中心经验的结晶,腾讯智平台将以水土机房为起点,逐步在重庆电信机房部署落地。此次合作,正是腾讯数据中心为行业升级提供解决方案的一次尝试,也代表着腾讯拥抱产业互联网的决心。...图4    腾讯重庆云计算数据中心 腾讯智由服务内部的星云平台升级而来,是腾讯自研的数据中心技术设施管理软件平台。...通过智平台,可以实现数据中心的智能告警、智能巡检、智能容量分析和透明化的客户体验,为全局把控、精细化管理、优化运营成本提供基础,同时也为技术专家实时、异地处理告警,数据中心无人值守创造可能。...图5    腾讯智平台优势介绍 接入腾讯智平台后,重庆电信数据中心将在运营方面更加智能化和可视化,如同多了一可以掌控数据中心运营全局的“眼睛”。...“扎根消费者互联网、积极拥抱产业互联网”,借由智平台,腾讯可将在服务C端海量用户时积累的经验,转化为服务B端合作伙伴的坚实基础。

    2.3K10

    重新定义智能,博睿数据ONE平台带来哪些启示

    为此,博睿数据近日正式推出了一体化智能可观测平台ONE,该平台旨在建立一体化、智能化、面向业务与用户体验的统一平台,助力企业提高数字化体验,降低成本,提升工作效率,为数字化转型赋能升级。...同时,这也是业界第一个将所有监控需求“All in ONE”的统一平台。 博睿数据COO吴静涛直言:“一体化智能可观测ONE平台在IT市场具有里程碑意义。...过去,企业在运上更多聚焦在系统层面的机房建设;例如,底层服务器的搭建、购买。现在,企业更注重于业务搭建、业务体验优化以及业务运营。 其二、用户职责也发生转变。...作为一个集告警收敛、异常检测、根因定位、智能见解,聚焦业务与用户体验的体系,打破孤岛,避免重复建设,赋能企业数字化的一体化、智能化、面向业务与用户的开箱即用的一体化可观测平台,ONE平台实现监控到可观测...从孤立的工具走向统一的能力平台,传统工具化的体系竖井林立,已不再适合企业对位监控的需求。 从人工的分析走向智能的见解。

    1.1K20

    智能综合管理平台能否解决企业目前面临的困难?

    图片    依托于大数据分析技术,为各行业管理提供信息化支撑。通过对管理平台进行智能化改造,构建基于云平台的用监控的统一管理平台。...实现“监、管、控”为一体的先进管理目标,为企业业务管理积累运行数据。     目前企业在运管理的过程中仍然经常碰到一些难点,本文华汇数据将为您整理一些管理的难点及解决办法。...智能管理系统1、设备没有联网,动态数据缺失巡检靠经验,无法实时查看动态数据。被动,故障预测无从谈起。...IT综合运营管理平台(ITOM)包含监控系统(IM)、用户体验 (UE)、IT管理平台(ITOA)、IT系统后评价平台(PPE)四大系统,帮助府、企业、行业用户解决IT问题,提高效率,提升服务质量...,降低成本。

    1.1K10

    腾讯智平台在渝上线,开启IDC智能维新时代

    作为腾讯20年数据中心经验的结晶,腾讯智平台将以水土机房为起点,逐步在重庆电信机房部署落地。此次合作,正是腾讯数据中心为行业升级提供解决方案的一次尝试,也代表着腾讯拥抱产业互联网的决心。...图4    腾讯重庆云计算数据中心 腾讯智由服务内部的星云平台升级而来,是腾讯自研的数据中心技术设施管理软件平台。...通过智平台,可以实现数据中心的智能告警、智能巡检、智能容量分析和透明化的客户体验,为全局把控、精细化管理、优化运营成本提供基础,同时也为技术专家实时、异地处理告警,数据中心无人值守创造可能。...图5    腾讯智平台优势介绍 接入腾讯智平台后,重庆电信数据中心将在运营方面更加智能化和可视化,如同多了一可以掌控数据中心运营全局的“眼睛”。...“扎根消费者互联网、积极拥抱产业互联网”,借由智平台,腾讯可将在服务C端海量用户时积累的经验,转化为服务B端合作伙伴的坚实基础。

    2.5K10

    哪些是数据库智能必踩的坑?

    将脚本打包成工具使用,比如说自动化平台、性能优化平台、监控平台,简单来说就是将所用的脚本归档集中起来。...所谓的不够标准化,指的是我们的机房环境错综复杂,自动化很难部署下去。 最后是智能,这是也本次要讲的一个比较重要的主题。...所谓的智能就是让机器去干人的事情,让机器学习人的思想,再通过人工智能的一些手段实现出来。...而智能甚至还在起步阶段,或者说在概念的阶段。 AI性能需求 作为一个非甲方公司,我们考虑的智能化性能,必须要兼容所有的数据,这是一个大的前提。不同的数据库的类型,智能需求是不一样的。...因此在智能性能这块,我们要把这些毫无头绪的环节梳理出来。 性能优化的目标 ?

    1.5K30

    打造企业级自动化平台系列(十二):服务发现与配置管理平台 Nacos 详解

    Nacos 概述 Nacos 是 Dynamic Naming and Configuration Service的首字母简称,一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。...Nacos 可以更敏捷和容易地构建、交付和管理微服务平台。Nacos 是构建以“服务”为中心的现代应用架构 (例如微服务范式、云原生范式) 的服务基础设施。...Nacos默认有自带嵌入式数据库derby,但是如果做集群模式的话,就不能使用自己的数据库不然每个节点一个数据库,那么数据就不统一了,需要使用外部的mysql。...创建nacos数据库并导入sql。...测试 重启nacos测试nacos所有写到嵌入式数据库的数据是否都写到了mysql: Nacos集群 部署架构图 1、如何把请求平均分配?使用nginx 2、为甚么是3台?

    94211
    领券