首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

生产环境Redis连接,长时间无响应被服务器断开问题

上个月线上生产环境有几个接口出现异常响应,查看生产日志后发现,如下错误 [飞书20220410-000031.png] 线上Redis客户端使用的是SpringBoot默认的Lettuce客户端,并且没有指定连接池...一般情况下服务端断开连接都会发送FIN包通知客户端,但是当我在用tcpdump监控服务端tcp传输后,发现Redis服务端tcp连接在无活动一段时间,比如10分钟后会收到来自客户端的RST包,然而我的客户端也在使用...wireshark抓包中,并没有发送给服务端RST包,这就很奇怪了,猜测这里是可能是服务器对tcp连接的限制导致,对长时间无活动的tcp连接强制断开处理。...既然这里知道是Redis连接长时间无活动后被断开导致的bug,那怎么解决? 博主一开始以为重试可以解决,但是发现事情没有想象的简单。...2秒,从而将接口请求耗时也控制在2秒左右 redis: xx: xx timeout: 2000 到此生产环境这里SpringBoot项目下Lettuce客户端无池化连接偶尔断开的bug

4K50

生产环境内存溢出了!!

大家好,我是冰河~~ 最近,一名小伙伴跟我说:他写的程序在测试环境一点问题没有,但是发到生产环境却会频繁出现内存溢出的情况,这个问题都困扰他一周多了。于是乎,周末我便开始帮他排查各种问题。...但是一旦启动生产环境的程序,没过多久,JVM就抛出了内存溢出的异常。 这就奇怪了,怎么回事呢? 启动程序时加上合理的JVM参数,问题依然存在。。。 没办法,继续看他的代码吧!...如果原来的字符串比较大,即使这个字符串不再被应用,这个字符串所分配的内存也不会被释放。 这也是我经过长时间的分析代码得出的结论,确实是太坑了!! 既然问题找到了,那我们就要解决这个问题。...经小伙伴授权, 我简单列下他们的业务规模和服务器配置:整套系统采用分布式架构,架构中的各业务服务采用集群部署,日均访问量上亿,日均交易订单50W~100W,订单系统的各服务器节点配置为4核8G。...好了,今天就到这儿吧,我是冰河,我们下期见~~ 冰河从一名普通程序员,短短几年时间,一路进阶成长为大厂高级技术专家,一直致力于分布式系统架构、微服务、分布式数据库、分布式事务与大数据技术的研究。

42420
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    生产环境JVM内存溢出案例分析

    如果我们所在公司的业务量比较大,在生产环境经常会出现JVM内存溢出的现象,那我们该如何快速响应,快速定位,快速恢复问题呢?...分析思路: JMX不可用,往往是由于垃圾回收时间停顿时间过长、内存溢出等问题引起的。 线上故障分析的原则是首先要采取措施快速恢复故障对业务的影响,然后才是采集信息、分析定位问题,并最终给出解决办法。...如何快速恢复业务 通常线上的故障会对业务造成重大影响,影响用户体验,故如果线上服务器出现故障,应规避对业务造成影响,但不能简单的重启服务器,因为需要尽可能保留现场,为后续的问题分析打下基础。...通常的做法是隔离故障服务器。 通常线上服务器是集群部署,一个好的分布式负载方案会自动剔除故障的机器,从而实现高可用架构,但如果未被剔除,则需要运维人员将故障服务器进行剔除,保留现场进行分析。...发生内存泄露,通常情况下是由于代码的原因造成的,一般无法立即对代码进行修复,很容易会发送连锁反应造成应用服务器一台一台接连宕机,故障面积会慢慢扩大,针对此种情况,应快速定位发生内存泄露的原因,将该服务进行降级

    2.7K20

    自动与时间服务器时间同步,Windows系统时间同步(附时间同步服务器地址)

    图2 其实,这种情况主要是由于负责对时的服务器流量过大,无法及时响应造成的,而我们也可以让XP与中科院国家授时中心的服务器进行对时,由于是国内的服务器,而且流量相对要少得多,所以对时的成功率还是相当高的...方法很简单,直接在图4中的“服务器”一栏输入国家授时中心服务器的IP地址(210.72.145.44),然后点击“确定”按钮保存下来就行了。如图3所示 图3 招式三....Win98也玩时间同步 大家都知道,在微软的操作系统当中,只有Windows 2000、XP和2003上才集成了时间同步功能,系统会每隔一段周期自动与Internet上的原子钟对时,来保证本机时间的准确...这时,软件会自动连接到中科院国家授时中心的一个校对页面上,同时会显示您电脑的时间与北京标准时间的差距,如图5所示。点击“校准”按钮即可完成对时。...Windows系统时间同步服务器地址收集 time.nist.gov ntp.fudan.edu.cn [复旦] timekeeper.isi.edu subitaneous.cpsc.ucalgary.ca

    12.2K30

    如何搭建ntp时间服务器(搭建时间同步服务器)

    NTP服务器就是利用NTP协议提供时间同步服务的。 2. NTP服务搭建 2.1....配置NTP服务 ntp 服务器默认是不运行客户端进行时间同步的,所有我们需要配置文件设置允许。...启动NTP服务 客户端先将系统优化是定时任务自动同步时间服务器的定时任务注释,如果不注释的话可能会 冲突 提示:本地的 ntp 时间服务器会跟互联网的时间服务器冲突,只能选择一个进行同步。...客户机时间同步 客户机要等几分钟再与新启动的 ntp 服务器进行时间同步,否则会提示 no server suitable for synchronization found 错误。...可能原因:客户端缺少什么配置文件 检查客户端是否可以与互联网的时间服务器同步,若不行,就是客户端的问题!

    15.3K20

    Linux 时间服务器

    概述 什么是时间服务器 NTP:Network Time Protocol 网络时间协议,用来同步网络中各主机的时间,在linux系统中早期使用ntp来实现,后来使用chrony来实现,Chrony 应用本身已经有几年了...核心组件: chronyd:是守护进程,主要用于调整内核中运行的系统时间时间服务器同步。它确定计算机增减时间的比率,并对此进行调整补偿。...#local stratum 10 #即时自己未能通过网络时间服务器同步时间,也允许将本地时间作为标准时间同步给其他客户端 # Specify file containing keys for NTP...和防火墙关闭 要求: 192.168.2.100为内网时间服务器,192.168.2.200为客户端,200的客户端的时间要与100的时间同步 在192.168.2.100主机上 step1 检查时间服务器上是否有相关软件包...set-local-rtc 1 设置硬件时间硬件时间默认为UTC timedatectl set-ntp yes 启用NTP时间同步: chronyc tracking 校准时间服务器

    4.6K40

    linux服务器内存

    早上到单位 发现服务器 mysql 服务器停了 然后起来了 查询日志 显示 内存满了 把mysql服务给杀了 linux 服务器如果 内存满了 会自动清理进程 防止服务器挂掉 选择的话 谁占的的内存大...就先杀谁 我的服务器里面 mysql服务占的内存是最大的 所以就把mysql就给杀了 image.png 然后 重启mysql 查询内存 image.png 在这说一下 怎么看linux的内存 举个例子...空闲的内存数: 232M shared 当前已经废弃不用,总是0 buffers Buffer 缓存内存数: 62M cached Page 缓存内存数:421M 关系:total(1002M) = used...这些Cache能有效缩短了 I/O系统调用(比如read,write,getdents)的时间。...,拿出一部分硬盘空间来充当内存.硬盘怎么会快过内存.所以我们看linux,只要不用swap的交换空间,就不用担心自己的内存太少.如果常常 swap用很多,可能你就要考虑加物理内存了.这也是linux看内存是否够用的标准哦

    31.9K10

    NTP时间服务器

    简而言之,NTP就是使一台或多台服务器(客户端)与时间服务器(服务端)之间进行时间同步(即客户端与服务端的时间同步),以保证时间的统一性 使用端口:123 2....NTP服务器架设 上面提到客户端与服务端的时间同步,现在就先来架设NTP服务端(即NTP时间服务器) 2.1 系统环境 OS: Debian 7.0 amd64 source:...2.3 客户端配置 NTP时间服务器有了,那么客户端如何与这台服务器进行时间同步呢?...每天凌晨1:00进行时间同步 至此,NTP时间服务器的架设和使用就算结束了。...poll:下次与NTP服务器同步的时间(单位:s) delay:从本地发出时间同步命令给远程时间服务器开始,到整个时间同步完成所需时间(单位:10^-6s) offset:本地主机与时间服务器时间

    5K20

    生产环境主机服务器部署小结

    这两天跟同事一起去部署一个新项目的所有主机服务器,记录下大体过程备忘。...环境: 主机型号:HP ProLiant DL380 Gen9 基本配置:512GB内存,CPU 2颗E5-2630 2.40GHz,12块4TB SATA 7200转硬盘 RAID卡:Smart...HBA H240ar(支持RAID1,RAID5,RAID50,RAID1+0等) 生产环境主机服务器部署,在机房一般需要做下面几个事情,其他的都可以等网络通之后远程来做。...自定义安装,为了方便,可以把“基本系统”、“服务器”、“系统管理”、“桌面”、“应用程序”、“开发”下面的子项都勾选。 建议把光盘留存一份ISO镜像文件到服务器目录下。...4.IP bonding配置 一般主机服务器都有多网卡,现在的服务器一般都有至少4个千兆网卡; 而一般环境(即使是RAC这种高端环境),每台机器都只需要2个网络即可。

    1.8K20

    服务器时间自动同步

    很多时候由于服务器的日期时间不准确,导致程序容易出问题;本来这个上去同步一下就可以,但有时候没发现或留意就会引申出很多问题。本来说在程序中加入一个时间校准功能,不是不可以,只是麻烦。...后来经过其他朋友提醒;在windows和linux都有一个时间同步的功能,于是独享不是群享,就发出来留个脚印吧。。先说linux: Liunx下有2种方法:rdate和ntpdate。...其中rdate本身是用来获取远程时间服务器时间用的,带上 -s 参数,就可以将获取到的时间应用到本地系统。...Set timeout in seconds for every attempt to retreive date.执行命令:rdate -s time.nist.gov而ntpdate 本身就是用来同步时间的工具...p samples ] [ -t timeout ] [ -U user_name ] server [ ... ]执行命令:ntpdate ntp.sjtu.edu.cn腾讯云NTP授时服务器地址

    4.7K40
    领券