近年来随着我国计算机水平的发展，如今的天气网站信息多，想要获取有效的信息需要的时间太长。为了解决社会人员和专业气象人员获取符合自己的并符合自己意向的天气信息，利用Hive对这些天气信息进行收集和分析势在必行。所以需要一种能够具有分析天气系统，可供用户利用自身优势，分析天气信息，从而尽快找到心仪的天气。
提示：公众号展示代码会自动折行，建议横屏阅读 一、问题描述 某业务CDB实例，每天在特地时间段内（ 00:07:00 - 00:08:00左右）机器对应IO监控出现写入尖刺，且主从实例都有类似现象，从机器监控可以看到，问题确实存在。 不仅master，进行同步的slave上有相同的现象，业务方希望找到导致该IO尖刺问题稳定出现的原因。 二、问题分析 首先确定问题来源，上图所示监控为机器级别，机器IO写入负载是否来源于mysqld进程？如果来源于mysqld进程，是来自于mysqld进程的哪一部分
公司业务使用到Greenplun数据库，根据查询的时间戳来不断的将每个时间段之间的数据，进行数据交换，但是今天发现，mysql的时间戳没有小数点后6位，即精确度到毫秒级的，所以对于这个问题，将和Greenplum数据库的时间戳后6位保持一样。当然了最大位数是6位，也可以是1-6之间的整数。可以根据自己的业务进行设计。这样进行查询每个时间段之间的数据就不会出现丢失数据和重复数据的情况了。
MySQL Enterprise Monitor是MySQL官方提供的一款监控和管理MySQL数据库的工具。 其功能之一包括MySQL Query Analyzer工具，通过MySQL Query Analyzer可以帮助用户识别慢查询和瓶颈，监视在MySQL服务器上执行的SQL语句，并显示每个查询的详细信息、执行次数和执行时间等有关性能的详细信息。
在 MySQL 中的日期和时间系列的最后一部分中，我们将通过编写 SELECT 查询来将迄今为止学到的所有知识付诸实践，以获得对数据的与日期相关的细节。
ZbxTable 是使用 Go 语言开发的一个开源的 Zabbix 报表系统。基本功能如下： 导出监控指标特定时间段内的详情数据与趋势数据到 xlsx 导出特定时间段内 Zabbix 的告警消息到 xlsx 对特定时间段研内的告警消息进行分析，告警 Top10 等 按照主机组导出巡检报告 对 Zabbix 图形按照数类型进行显示和查看并支持导出到 pdf 主机未恢复告警显示和查询
zabbix运行一段时间之后，会留下大量的历史 数据，会发现zabbix的数据库一直在增大。运行3个月后笔者的数据库达到了5.7G，可能造成系统性能下降，查看历史数据时查询速度缓慢。 zabbix里面最大的表就是历史记录的表了，网上很多人都是写全部清空这些表的数据，其实我们可以按时间来删除里面的历史记录。
双写一致性：只要用缓存，就可能会涉及到缓存与数据库双存储双写，你只要是双写，就一定会有数据一致性的问题。我们需要保证redis跟数据库的中的数据保持一致，返回正确的数据。
井显生，2019年加入去哪儿，现负责国内机票出票、退款、改签核心业务。在领域驱动设计(DDD)、高并发有大量实践经验。
工作11年，从事数据库工作7年，主要在金融行业。主要是做oracle,mysql。现在在农行软开中心主要做数据库应用方面的研究。
QAN（Query Analytics）慢查询日志分析工具是 PMM 的一部分，PMM 是 percona 公司提供的一个对于 MySQL 和 MongoDB 的监控和管理平台。官方给出的描述是：The QAN is a special dashboard which enables database administrators and application developers to analyze database queries over periods of time and find performance problems. QAN helps you optimize database performance by making sure that queries are executed as expected and within the shortest time possible. In case of problems, you can see which queries may be the cause and get detailed metrics for them。这是一个慢查询日志的展示工具，能够帮助 DBA 或者开发人员分析数据库的性能问题，给出全面的数据摆脱直接查看 slow-log。那么接下来，给大家介绍下 QAN 和其页面的指标吧。
GIthub上有两个Druid。其中一个是阿里的数据库连接池，另一个是列式存储的分布式数据存储系统。我曾经一度认为是一个东西，本文介绍后一种Druid。
2020 年 2 月 25 日，微信的朋友圈大量转载微盟遭遇了系统重大故障（36 小时内尚未恢复核心生产数据）。从而想到本人在两周前处理的一个案例：开发人员误删除了生产数据，本人恢复的一个过程。同时给这个故障的处理过程做一个总结，也对学过的知识做一个梳理，希望对运维的同学们有一个警示作用。
企业使用数据库，可能面临如下安全风险，该类风险需要完整的事后审计和追溯机制，数据库审计能力就由此诞生。
目前是多点Dmall数据库架构师，更早是聚美数据库团队负责人，擅长高并发下数据库架构，运维保障，数据库平台建设。
在实际应用中，经常碰到导入数据的功能，当导入的数据不存在时则进行添加，有修改时则进行更新，
作者 | Micah Lerner 译者 | 明知山 策划 | 蔡芳芳 本文对论文“Druid：一个实时分析数据存储系统”进行了概括总结，对 Druid 的架构、存储格式、查询 API 等进行了简要介绍。如需深入了解更多的细节，请查看论文原文。 这篇论文研究的是什么 Druid 是一个开源数据库，可以实现低延迟的近实时和历史数据分析。Druid 最初是由广告技术公司 MetaMarkets 开发的，后来被 Snap 收购，现在已被 Netflix、Confluent 和 Lyft 等公司应
最近这一年多断断续续一直在往 TiDB 中提交一些修改，前两天看了一些 GitHub 提交记录，发现竟然已经累计了 70 来个 PR 了。考虑到最近这一年基本处于疯狂加班的节奏，另外忙里偷闲还基本上刷完了之前列的十几本书的读书清单，我觉得这也算一个不大不小的成就吧，值得 mark 一下。
为更好的帮助DBA运维数据库，腾讯云将于每月12日在社群直播开展DBbrain诊断日，腾讯云高级产品经理迪B哥直播解析经典数据库运维难题，结合腾讯云数据库智能管家DBbrain的能力，为大家提供问题优化思路和方法，玩转数据库！ 本期诊断日主要分享内容：如何使用智能管家DBbrain解决MySQL实例CPU使用率过高的问题？ 1 前言 在使用MySQL的过程中，经常会遇到由于数据库性能问题导致的业务故障。对于研发、运营、产品等非运维职能的同事来说，往往更愿意请DBA来协助定位问题和优化。如果公司确有DBA
以下对 DBLE 3.22.01.0 版本的 Release Notes 进行详细解读。
最近碰到了一个奇怪的权限问题，问题的背景是业务同学反馈在下班后，有一个数据表出现了阻塞，导致后续的业务流程都产生了拥堵，在对这个问题进行分析发现，业务同学所谓的拥堵，阻塞是数据库连接出了问题。当然我们进行了一些深入的沟通，对整个问题的情况有了一个更为清晰的了解。
今天发一篇与以往不同的内容，这是一篇来自生产实践的记录。我只是做了一下编辑和修订的工作。
虽然我们在使用 redis 缓存的时候非常的爽，它大大的提高了我们应用程序的性能和效率，尤其是数据查询方面，咱们不用直接去持久化的数据库中查询数据，而是到内存中查询数据即可
背景： 在实际操作中会经常将时间数据以 varchar 类型存入数据库，因为业务要求需要查询最近时间内的数据，所以需要根据时间排序
原子性（Atomic） 一致性（Consistency） 隔离性（Isolation） 持久性（Durability）
首先还是要说两句，1 这个帖子不会说是那个云，读者你也不要问是那个云， 2 丢数，我个人认为在云上这是必然的，不是偶然，只是触发概率的问题。（原因很清楚，我说的这个问题，到那个云都一样，越先进的越会有这个问题）
今天来给大家分享一下DBtime抖动的诊断案例。讲到的不足之处还希望大家多多指正，共同提高。案例会分下面几个方面来说。 首先来说问题的背景。因为使用的数据库环境多且复杂，数据库不只有Oracle,
在某个工作日，突然收到线上的服务告警，有大量的请求延时产生，查看线上服务发现基本上都是获取数据库连接超时，而且影响时间只有34秒钟，服务又恢复了正常。隔了几分钟之后，又出现了大量的告警，还是影响34秒后又恢复正常。 由于我们是底层服务，被重多的上层服务所依赖，这么频繁的异常波动已经严重影响到了业务使用。开始排查问题
本次分享，基于数据库事务处理的核心技术并发访问控制技术，TDSQL原创性提出了全态数据的概念和基于历史态数据的可见性判断算法，并基于此实现了全时态数据库。
之前我们知道，加锁可防止脏写：即若两个事务同时尝试写入同一对象，则锁可确保第二个写必须等第一个写完成事务（中止或提交）才能继续。
在MariaDB中，有如下针对MariaDB与MySQL两种数据库比较的官方说法：
由于没有安装pt-digest-query工具（不通外网有依赖装不了）就用mysql自带的mysqldumpslow分析
使用MYSQL 的DBER们都对大事务和关于BINLOG 的 expire_log_days 或者更新的Binlog_expire_logs_seconds(MYSQL8)
网上查了很多资源，说要进行磁盘碎片化整理。原因是datafree占据的空间太多啦。具体可以通过这个sql查看。
influxdb的单机版是开源的，而集群版是商业版，influxdb被设计运行在SSD上，如果使用机器或者网络磁盘作为存储介质，会导致性能下降至少一个数量级。influxdb支持restful api，同时也支持https，为了保证安全性，非局域网建议使用https与Influxdb进行通信。
手上有一个采集站点, 剩余3万的草稿, 原计划手动每日发布几十篇文章, 后来实在有些反人类, 干脆一次性全发布
MySQL中DDL语句，即数据定义语言，用于创建、删除、修改、库或表结构，对数据库或表的结构操作。常见的有create，alter，drop等。这类语句通常会耗费很大代价，特别是对于大表做表结构变更。本篇文章会揭露各类DDL语句执行的详细情况。
你们团队使用SpringMVC+Spring+JPA框架，快速开发了一个NB的系统，上线后客户订单跟雪花一样纷沓而来。
所以要是别人再问你乐观锁和悲观锁是什么，你千万别说它是一种具体的锁，它只是一种锁的设计思想，他可以有很多具体的实现类
找到extension_dir, 去掉前面的;号, 后面的路径写ext文件夹的路径
如果不小心对数据库进行误操作，而又没有及时备份怎么办？这恐怕是广大的coder经常遇到的一类问题。 我今天就因为不小心删除了某个数据库，但最后的备份是1个礼拜前的，唯一能解决的办法就是通过mysqlbinlog来恢复了。解决方案如下： 如果MySQL服务器启用了二进制日志，你可以使用mysqlbinlog工具来恢复从指定的时间点开始(例如，从你最后一次备份)直到现在或另一个指定的时间点的数据。 要想从二进制日志恢复数据，你需要知道当前二进制日志文件的路径和文件名。 一般可以从配置文件(一般情况，Linux下
现在数据库里面已经存储了设备的数据了,获取某个设备某个时间段的历史数据格式规定如下:
2018年5月9日，腾讯TEG计费平台部 TDSQL 团队邀请了 MySQL 数据库InnoDB 引擎研发负责人Sunny Bains 、Oracle Principle Software Engineer 苏斌、Oracle Principle Sales Consultant 杜修文一行访问腾讯，举行专题讲座《 What’s new in InnoDB 8.0》，详细介绍了InnoDB 8.0中新的、有趣的特性以及未来演进趋势。讲座结束后，还邀请Sunny Bains、腾讯MySQL数据库技术专家姜承尧
互联网系统，经常会有数据迁移的需求。系统从机房迁移到云平台，从一个云平台迁移到另一个云平台，系统重构后表结构发生了变化，分库分表，更换数据库选型等等，很多场景都需要迁移数据。
在星爷的《大话西游》中有一句非常出名的台词：“曾经有一份真挚的感情摆在我的面前我没有珍惜，等我失去的时候才追悔莫及，人间最痛苦的事莫过于此，如果上天能给我一次再来一次的机会，我会对哪个女孩说三个字：我爱你，如果非要在这份爱上加一个期限，我希望是一万年！”在我们开发人员的眼中，这个感情就和我们数据库中的数据一样，我们多希望他一万年都不改变，但是往往事与愿违，随着公司的不断发展，业务的不断变更，我们对数据的要求也在不断的变化，大概有下面的几种情况：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
