Hadoop数据仓库-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Hadoop数据仓库

专栏成员

518

文章

735276

阅读量

109

订阅数

MySQL 之 JSON 支持（三）—— JSON 函数

json mysql 对象函数数组

本章描述的函数对 JSON 值执行操作。有关 JSON 数据类型的讨论以及显示如何使用这些函数的其它示例，参阅“第13.5节 JSON 数据类型”。

2024-06-15

980

MySQL 之 JSON 支持（二）—— JSON 索引

存储 mysql 数组索引 json

从 MySQL 8.0.17 开始，InnoDB 支持多值索引。多值索引是在存储数组值的列上定义的辅助索引。“一般”索引对于每个数据记录有一个索引记录（1:1）。多值索引中单个数据记录可以具有多个索引记录（N:1）。多值索引用于对 JSON 数组进行索引。例如，在下面的 JSON 文档中，对邮政编码数组定义的多值索引为每个邮政编码创建一个索引记录，每个索引记录引用相同的数据记录。

2024-06-07

870

MySQL 之 JSON 支持（一）—— JSON 数据类型

数组 json mysql 函数数据类型

MySQL 支持由 RFC 7159 所定义的原生 JSON 数据类型，通过该类型能够有效访问 JSON（JavaScript 对象表示法）文档中的数据。与将 JSON 格式字符串存储在字符串列中相比，JSON 数据类型提供了以下优点：

2024-06-06

5030

MySQL 5.6到MySQL 8的主从复制（通过5.7版本做桥接实现）

table 数据索引 mysql schema

MySQL 8与MySQL 5.6跨了两个大版本，直接从5.6（主）复制到8（从）是不行的，因此需要用一个MySQL 5.7版本作为桥接。5.6、5.7实例都要开启log_bin和log_slave_updates。5.6、5.7、8的安装步骤从略。

2024-05-26

950

在 MySQL 中使用 init_connect 与 binlog 实现用户操作追踪记录

mysql 变量服务器 connect init

需求：查出有哪些 IP 修改了表 sod_song_artist_relation。

2024-05-02

1060

监控因为带宽打满造成的 MySQL 复制延迟

事务 mysql sed 监控脚本

接收binlog落后事务数很大，执行binlog落后事务数很小，说明引起复制延迟的瓶颈是带宽不足造成主库 binlog 无法及时传输到从库。复制延迟不是做的慢，而是收不到。

2024-04-29

1100

从 MySQL 到 ClickHouse 实时数据同步 —— Debezium + Kafka 表引擎

mysql 数据同步 kafka clickhouse debezium

本文介绍从 MySQL 作为源到 ClickHouse 作为目标的整个过程。MySQL 数据库更改通过 Debezium 捕获，并作为事件发布在到 Kafka 上。ClickHouse 通过 Kafka 表引擎按部分顺序应用这些更改，实时并保持最终一致性。相关软件版本如下：

2024-04-26

4670

从 MySQL 到 ClickHouse 实时数据同步 —— MaterializeMySQL + Materialized View

view 数据数据同步 clickhouse mysql

本篇演示使用 ClickHouse 的 MaterializeMySQL 数据库引擎和物化视图，实时将 MySQL 库表中的数据同步到 ClickHouse 的库表中。相关软件版本如下：

2024-04-20

8640

使用 mysql 命令行访问 ClickHouse 服务器

命令行 clickhouse mysql 服务器客户端

ClickHouse 这点不错，支持MySQL wire通讯协议，用 mysql 命令行直接连 ClickHouse 服务器，用起来跟 MySQL 几乎一样。

2024-04-18

1040

ClickHouse 集群部署（不需要 Zookeeper）

分布式 zookeeper clickhouse 部署集群

（1）安装 ClickHouse Server 和 ClickHouse Client

2024-04-18

1K0

MySQL 重做从库脚本

mysql 服务后台脚本 data

2024-04-10

1040

基于 HBase & Phoenix 构建实时数仓（5）—— 用 Kafka Connect 做实时数据同步

hbase kafka 实时数仓 connect 数据同步

本篇演示安装配置 Kafka connect 插件实现 MySQL 到 Hbase 的实时数据同步。依赖环境见本专栏前面文章。相关软件版本如下：

2024-03-21

1990

基于 HBase & Phoenix 构建实时数仓（4）—— Kafka 集群安装部署

hbase kafka 实时数仓部署集群

Kafka 是一个完整的消息系统，常用于实时系统中的消息中转和数据持久化。Kafka 集群安装部署依赖于 Zookeeper，本专栏前面文章介绍了 Zookeeper 安装部署及运行，参见 “安装部署 Zookeeper 集群”。本篇继续介绍在相同主机环境下安装部署 Kafka 集群。

2024-03-12

1370

基于 HBase & Phoenix 构建实时数仓（3）—— Phoenix 安装

system 连接数据 hbase 实时数仓

继续上一篇，本篇介绍在同一环境中安装 Phoenix，并连接上篇部署的 HBase 集群。

2024-03-09

2000

基于 HBase & Phoenix 构建实时数仓（2）—— HBase 完全分布式安装

配置分布式 hbase 实时数仓集群

完全分布式 HBase 集群的运行依赖于 Zookeeper 和 Hadoop，在前一篇中已经详细介绍了他们的安装部署及运行，参见“基于 HBase & Phoenix 构建实时数仓（1）—— Hadoop HA 安装部署”。本篇继续介绍在相同主机环境下安装配置完全分布式 HBase 集群。

2024-03-09

1380

基于 HBase & Phoenix 构建实时数仓（1）—— Hadoop HA 安装部署

hbase 实时数仓部署配置 hadoop

172.18.4.126 node1 172.18.4.188 node2 172.18.4.71 node3 172.18.4.86 node4

2024-03-08

1550

INSERT...ONDUPLICATEKEYUPDATE产生deathlock死锁原理讲解及解决办法

存储 insert 事务数据原理

地址：【转】INSERT...ONDUPLICATEKEYUPDATE产生deathlock死锁原理讲解及解决办法_on duplicate key update死锁解决-CSDN博客

2024-02-02

2260

安全快速地删除 MySQL 大表数据并释放空间

安全 mysql 后台脚本数据

表中现有约 50 亿条数据，只保留 2023-10-01 以后的数据（约占总量的 1/10），其它删除。

2023-12-08

3581

MySQL 中文转拼音函数

mysql set 测试函数字符串

需求是将字符串中的汉字转为拼音。创建一个汉字转拼音的函数，在其中判断每个字符是否为中文，如果是则查询拼音表取得对应的拼音，否则原样返回。网上的大部分 MySQL 转拼音函数都是通过创建一个拼音对照表，然后在自定义函数中查询该表实现的。以下对这种实现做了修改，具有以下特点：

2023-11-25

2930

查看进程 swap 占用情况

awk proc swap 进程内存

2023-11-21

2720

点击加载更多

社区活动

AI代码助手快速上手训练营

鹅厂大牛带你玩转AI智能结对编程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态