东山絮柳仔-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

东山絮柳仔

专栏成员

10

文章

22783

阅读量

14

订阅数

通过Python读取elasticsearch中的数据

数据库云数据库 SQL Server sql Elasticsearch Service python

在前面的分享《通过Python将监控数据由influxdb写入到MySQL》一文中，主要介绍了influxdb-->MySQL。InfluxDB主要存储的由telegraf收集的DB性能数据，此外还有资源、主从、集群等数据。而　Server　Log、DB　Log（Error　Log　和　Slow　Log）则是通过ｆｉｌｅｂｅａｔ　和　Ｌｏｇｓｔａｓｈ收集、过滤保存到elasticsearch中。所以，有必要实现通过Python读取elasticsearch中的数据（写入到MySQL）的功能。

东山絮柳仔

2021-05-26

1.7K0

通过Python将监控数据由influxdb写入到MySQL

云数据库 SQL Server python 网站 tcp/ip

我们知道InfluxDB是最受欢迎的时序数据库（TSDB）。InfluxDB具有持续高并发写入、无更新；数据压缩存储；低查询延时的特点。从下面这个权威的统计图中，就可以看出InfluxDB的热度。

东山絮柳仔

2021-05-26

2.6K0

数据库索引结构知多少

前几天在看 2018 云栖大会，来自中科院计算所的陈世敏研究员在“数据库内核专场”做了一场《NVM在数据库领域的研究和探索》的报告演讲。在30分钟的演讲中，其中有近10页PPT的内容和B+Tree这种索引有关。

东山絮柳仔

2021-03-23

5770

数据库如何应对保障大促活动

当前，随着电商节日的增多（6.18、双十一、双十二）、平台拉新趋于频繁，大促活动也越来越普遍。作为一个电商平台，每年都会有一次，甚至几次的流量“大考”。数据库作为系统的重要节点，其稳定性和性能格外重要，数据库的全力保障是一个大的挑战。电商大促，这场没有硝烟的战争很多人已有体会，在此不再赘述。现在，我们直接切入主题--数据库如何积极应对，全力保障大促活动。这个题目分解为三个部分进行讲解：第一部分，准备工作；第二部分，大促进行时；第三部分，大促后复盘。

东山絮柳仔

2021-03-23

6.8K0

基于ELK搭建MySQL日志平台的要点和常见错误

云数据库 SQL Server

数据，让一切有迹可循，让一切有源可溯。ELK是集分布式数据存储、可视化查询和日志解析于一体的日志分析平台。ELK=elasticsearch+Logstash+kibana，三者各司其职，相互配合，共同完成日志的数据处理工作。ELK各组件的主要功能如下：

东山絮柳仔

2021-03-23

2.4K0

SQL Server 镜像数据库切换及同步状态变化

正常情况下都是在主Server上执行的，此时主Server上DB仍然可以正常访问。

东山絮柳仔

2021-03-20

1.6K0

关于SQL Server 镜像数据库快照的创建及使用

从SQL Server 2005 SP1 起，SQL 开始支持数据库镜像。它的设计目的是试图为SQL Server 提供一个具有实时性数据同步的灾难恢复技术，即能够提供数据冗余备份，切换起来比较方便。每个主体数据库只能有一个镜像数据库。镜像数据库作为主体数据库的一个副本，在主体数据库发生故障、不可访问时能够迅速恢复数据库访问，提供故障恢复功能。镜像数据库一直处于“恢复”状态，因此不能被直接访问。

东山絮柳仔

2021-03-20

2.2K0

MySQL数据归档小工具推荐及优化--mysql_archiver

云数据库 SQL Server

MySQL数据库归档历史数据主要可以分为三种方式：一.创建编写SP、设置Event；二.通过dump导入导出；三.通过pt-archiver工具进行归档。第一种方式往往受限于同实例要求，往往被大家舍弃。第二种，性能相对较好，但是归档表较多时运维也是比较头疼的事。所以很多DBA往往采用第三种方式--pt-archiver。

东山絮柳仔

2021-03-19

2.6K0

MySQL日志收集之Filebeat和Logstsh的一键安装配置（ELK架构）

云数据库 SQL Server

关于ELK是什么、做什么用，我们不在此讨论。本文重点在如何实现快速方便地安装logstash和filebeat组件，特别是在近千台DB Server的环境下（为了安全保守，公司DB Server 目前尚未部署saltstack一类的管控软件）。在尽可能标准化的条件下，希望可以实现一键化安装。下面是我们功能实现的一些尝试，我们把手动一步步操作打包提炼到一个sh文档中，安装部署时只要执行sh文件即可。部署安装logstash和filebeat组件由原来的10分钟缩减到目前的1分钟左右，并且减少了因手动部署带来的误操作。

东山絮柳仔

2021-03-18

7140

MySQL在线DDL工具 gh-ost

云数据库 SQL Server

gh-ost基于 golang 语言，是 github 开源的一个 DDL 工具，是 GitHub's Online Schema Transmogrifier/Transfigurator/Transformer/Thingy 的缩写，意思是 GitHub 的在线表定义转换器。

东山絮柳仔

2021-03-18

1.7K0

没有更多了

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态