我的独立博客-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

我的独立博客

专栏成员

41

文章

4100

阅读量

13

订阅数

redis georadius源码分析与性能优化

性能优化优化源码分析 redis 编码

最近接到一个需求，开发中使用了redis georadius命令取附近给定距离内的点。完工后对服务进行压测后发现georadius的性能比预期要差，因此我分析了georadius的源码，并对原始的实现方案进行了优化，总结成了本文。

2024-09-02

880

与世界分享我刚编的mysql http隧道工具-hersql原理与使用

原理 http mysql 工具客户端

本文是与世界分享我刚编的转发ntunnel_mysql.php的工具的后续，之前的实现有些拉胯，这次重构了下。需求背景是为了在本地macbook上通过开源的mysql可视化客户端(dbeaver、Sequel Ace等)访问我司测试环境的mysql，整个测试环境的如图所示:

2024-09-02

1130

Go数据库连接池设置不合理导致大量TIME_WAIT连接占满端口问题排查与解决

go time wait 连接数据库连接池

最近公司内部准备尝试使用下腾讯的TDSQL，因此组内同学写了一段很简单的查询TDSQL的go web程序，使用ab对其进行一个简单压测以获取TDSQL的性能表现，go代码如下：

2024-09-02

1400

统计一个数字二进制位1的个数

二进制函数算法统计硬件

问题本质实际就是给定一个数字，比如一个二进制数10101101，计算出这个数字中二进制位1的个数，对于10101101这个数字来说它有5个位为1，即：10101101

2024-09-02

930

记一次SIMD指令优化计算的失败经历

函数优化 simd 编译测试

书接上回《统计一个数字二进制位1的个数》，现在我们已经知道如何快速计算出一个int64数字的二进制位1的个数，那么回到我们最初的需求，我们的目的是快速统计一个bitmap中二进制位1的个数，假设我们使用[]uint64来实现bitmap，那么如果要统计这个bitmap中二进制位1的个数，我们可以遍历每个元素，计算出每个uint64元素二进制位1的个数，最后加起来，代码大概如下：

2024-09-02

720

一种应用于特定场景的支持LRU的线程安全的无锁uint32->uint32 cache实现

缓存 key 遍历线程安全存储

几年前给公司前台业务一个QPS很高的接口做了一个优化，主要请求来源是当前在线用户，接口核心逻辑就是从codis中根据一个数字查询对应的用户id(小于1亿)，这两个数字的映射关系是不变的，可以理解为codis中有一个map[uint32]uint32的映射表，这个映射表只增不改。

2024-09-02

730

rust所有权和借用中的一些case

变量源码指针 rust case

学习rust有一段时间了，也用rust写了两个小项目，过程中发现一些rust教程在所有权和引用这一章节的讲解还是不够丰富，有很多case没有讲到，对所有权和引用的理解不够深入，这就导致实际应用时经常卡在所有权和引用，后面查阅一些资料在社区请教一些大佬后才理解，因此将最近练习过程中遇到的一些所有权和引用方面的问题总结成本文，分享给大家，帮大家踩踩坑。

2024-09-02

1140

一个用rust写的类似于Skywalking/CAT的迷你trace PHP扩展

rust cat time trace php

最近在学习rust，恰好看到了skywalking的php扩展采用了rust编写。有用过Skywalking/CAT之类监控系统的同学应该知道，这类系统对我们开发工作帮助非常大，能够非常快的帮我们定位到问题的关键，比如说现在有一个api的请求响应非常慢，那我们就可以从系统提供的web ui中查询这个api请求的链路各个节点的耗时，从而精准的定位慢的关键。

2024-09-02

580

磁盘哈希结构-Linear Hashing

内存存储数据结构遍历磁盘

最近在思考一个问题，如果一个存储引擎不需要支持范围查询，那么使用hashtable这样的数据结构是否更合适？恰好看到了lotusdb中使用了一个diskhash的库，从源码看是使用了一种Linear Hashing的哈希表数据结构，由于磁盘与内存的特性不同，因此磁盘哈希结构与常见的内存hashtable不太一样，特意研究了下。

2024-09-02

960

又一个Rust练手项目-wssh(SSH over Websocket Client)

连接 ssh rust client websocket

公司内部的发布系统提供一个连接到k8s pod的web终端，可以在网页中连接到k8s pod内。实现原理大概为通过websocket协议代理了k8s pod ssh，然后在前端通过xterm.js+websocket实现了web终端的效果。

2024-09-02

930

深入理解原子操作的本质

函数内存数据协议缓存

本文以go1.14 darwin/amd64中的原子操作为例，探究原子操作的汇编实现，引出LOCK指令前缀、可见性、MESI协议、Store Buffer、Invalid Queue、内存屏障，通过对CPU体系结构的探究，从而理解以上概念，并在最终给出一些事实。

2024-09-02

1740

Go源码解析之sync.Mutex锁

源码 go mutex 队列函数

在解释Lock()和Unlock()源码之前我们必须先整体了解下Mutex的设计，不然下面的源码很难看懂。

2024-09-02

880

Golang切片与实现原理

slice 函数内存数组原理

array是切片用来存储数据的底层数组的指针，len为切片中元素的数量，cap为切片的容量即数组的长度

2024-09-02

640

事务隔离级别实现原理

数据索引原理并发事务

数据库隔离级别以及Mysql实操一文中，我描述了为了解决并发事务间的冲突，实现事务的隔离性，SQL标椎定义了四种隔离级别，今天就通过这篇文章来看下SQL标准中每种隔离级别的实现原理以及InnoDB引擎又是如何实现的。

2024-09-02

1610

函数内存原型指针 mmap

glibc的malloc函数在申请大于128K的内存时使用mmap分配内存，mmap会从堆区和栈区中间的部分划分内存，而在申请小于128K的内存时使用brk从堆上划分内存。

2024-09-02

770

keynote中插入高亮代码的方法

乱码搜索语法 keynote 编码

直接复制vscode中的代码到keynote中效果惨不忍睹，经过一番搜索，发现了一种效果很好的方法，而且keynote中可编辑

2024-09-02

850

bitcask的设计与实现

存储工作设计数据索引

最近在研究LSM tree，听闻bitcask在LSM tree各种各样的应用中是一个比较简单的实现，所以就以它为突破口，了解下LSM tree真实世界的实现。

2024-09-02

1040

golang sync.Pool分析

队列对象函数缓存 pool

pin的作用是将当前G与P绑定，禁止被抢占。那么为什么要禁止被抢占呢？原因是G被抢占后再恢复执行之后再绑定的可能就不是被抢占之前的P了

2024-09-02

970

网络编程中的tips

系统服务端继承进程网络编程

网络编程中某一端可能会产生Connection reset by peer的报错，这是因为收到了对端发送的RST包。RST包是在tcp异常关闭时发出的，产生的情形很多。我在写cat-agent 也遇到了这个报错，经排查发现是客户端发送数据后没有读取服务端的响应而直接关闭了连接（之所以不读取就关闭是因为客户端为提高发送效率不care服务端返回，后来为避免大量的RST包选择服务端不回包来解决）

2024-09-02

700

LR分析中shift/reduce reduce/reduce冲突解决方案SLR(1)与LR(1)

shift 集合解决方案语法 reduce

LR分析法从左至右移进输入的终结符（词法分析器的输出实际是token，但在语法分析阶段会代表是一个终结符），并将终结符压入到堆栈，称为shift。如果当前栈上的符号恰好符合某个非终结符的生成式，则此时进行归约操作：将这些符号弹出栈，然后将规约后的非终结符压入堆栈，这一步就称为reduce。然后继续上面的步骤，直到没有输入。如果最终栈上只有一个非终结符，且该非终结符就是目标符号，那证明识别成功，否则识别失败。名称LR得名于：从左(Left)到右扫描（L）,反向（Reverse）最右推导（R）。

2024-09-02

1190

点击加载更多

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态