使用Linux的rename机制保证文件写入要么成功，要么失败，绝对不能出现写了一半的情况。
我们采用Cronlog组件对此进行日志切分，官网http://cronolog.org/一直未能打开，只能从其它地方寻找资源了，这里也上传一份，供大家下载使用，【点击阅读原文查看】。
某天下午TIM官网突然无法访问（502错误），官网是纯静态页面，挂在nginx服务器下，我们下午也没有做发布。那么，问题出现在什么地方呢？下面就讲讲我定位、解决问题的思路及步骤，具体如下：
转载自 https://blog.csdn.net/qq_27384769/article/details/79479048
对于 persistence 模式，也就是持久化存储，redis 提供了两种持久化方法：
阅读目录 1、简介 2、环境说明 3、主从复制 3.1、MySQL 3.2、配置文件 3.3、开始构建主从复制 3.4、测试主从复制 4、MySql主主复制 4.1、实现原理 4.2、配置文件 4.3、开始构建主主复制 4.4、测试主主复制 5、注意事项 1、简介 MySQL作为世界上使用最为广泛的数据库之一，免费是其原因之一。但不可忽略的是它本身的功能的确很强大。随着技术的发展，在实际的生产环境中，由单台MySQL数
MySQL作为世界上使用最为广泛的数据库之一，免费是其原因之一。但不可忽略的是它本身的功能的确很强大。随着技术的发展，在实际的生产环境中，由单台MySQL数据库服务器不能满足实际的需求。此时数据库集群就很好的解决了这个问题了。采用MySQL分布式集群，能够搭建一个高并发、负载均衡的集群服务器（这篇博客暂时不涉及）。在此之前我们必须要保证每台MySQL服务器里的数据同步。数据同步我们可以通过MySQL内部配置就可以轻松完成，主要有主从复制和主主复制。
大部分程序员可能只停留在写代码阶段。很少有可能接触「Linux」，最多就是看个日志。然而我觉得「Linux」操作对程序员很重要。是提升程序员的一个重要门槛。
1、简介 MySQL作为世界上使用最为广泛的数据库之一，免费是其原因之一。但不可忽略的是它本身的功能的确很强大。随着技术的发展，在实际的生产环境中，由单台MySQL数据库服务器不能满足实际的需求。此时数据库集群就很好的解决了这个问题了。采用MySQL分布式集群，能够搭建一个高并发、负载均衡的集群服务器（这篇博客暂时不涉及）。在此之前我们必须要保证每台MySQL服务器里的数据同步。数据同步我们可以通过MySQL内部配置就可以轻松完成，主要有主从复制和主主复制。 2、环境说明 两台linu
OPTIMIZE TABLE 语句通过拷贝表数据并重建表索引，使得索引数据更加紧凑，减少空间碎片。语句的执行效果会因表的不同而不同。过大的表或者过大的索引及初次添加大量数据的情况下都会使得这一操作变慢。
适时的使用 OPTIMIZE TABLE 语句来重组表，压缩浪费的表空间。这是在其它优化技术不可用的情况下最直接的方法。OPTIMIZE TABLE 语句通过拷贝表数据并重建表索引，使得索引数据更加紧凑，减少空间碎片。语句的执行效果会因表的不同而不同。过大的表或者过大的索引及初次添加大量数据的情况下都会使得这一操作变慢。
Redis持久化,就是将内存数据保存到硬盘，Redis 持久化存储分为 AOF 与 RDB 两种模式，默认开启rdb。
在企业大数据体系建设过程中，数据采集是其中的首要环节。然而，当前行业内的相关开源数据采集组件，并无法满足企业大规模数据采集的需求与有效的数据采集治理，所以大部分企业都采用自研开发采集组件的方式。本文通过在vivo的日志采集服务的设计实践经验，为大家提供日志采集Agent在设计开发过程中的关键设计思路。
在任何一种数据库中，都会有各种各样的日志，记录着数据库工作的方方面面，以帮助数据库管理
适用于 Hot Reload （典型的如开发go项目，无需每次手动执行 go build；又比如前端 node 打包） 或者 系统监控的场景。
以一个例子开头，大部分刚接触 Docker 的同学应该都会这样编写项目的 Dockerfile，如下所示：
昨天接到了同事的一个电话，说有一个数据库无法访问了，希望能够让我来看看，赶紧连过去，发现错误还是一个看似很简单的ora错误。 $ sqlplus / as sysdba Copyright (c) 1982, 2011, Oracle. All rights reserved. ERROR: ORA-09817: Write to audit file failed. Linux-x86_64 Error: 28: No space left on device Additional informatio
文 | 云豆 图 | 来源网络 云豆贴心提醒，本文阅读时间5分钟，文末有秘密！ Linux chattr命令 Linux chattr命令用于改变文件属性。 这项指令可改变存放在ext2文件系统上的文件或目录属性，这些属性共有以下8种模式： a：让文件或目录仅供附加用途。 b：不更新文件或目录的最后存取时间。 c：将文件或目录压缩后存放。 d：将文件或目录排除在倾倒操作之外。 i：不得任意更动文件或目录。 s：保密性删除文件或目录。 S：即时更新文件或目录。 u：预防以外删除。 语法 chat
上周在升级时候，客户反馈某个job报了下面的错误，想让我们查看一下是不是数据库这边有什么问题。 报错的内容如下。 Caused by: java.sql.SQLRecoverableException: No more data to read from socket at oracle.jdbc.driver.T4CMAREngine.unmarshalUB1(T4CMAREngine.java:1142) at oracle.jdbc.driver.T4CMAREngi
基本定义：二进制日志，也成为二进制日志，记录对数据发生或潜在发生更改的SQL语句，并以二进制的形式保存在磁盘中；
基本定义：二进制日志，也成为二进制日志，记录对数据发生或潜在发生更改的SQL语句，并以二进制的形式保存在磁盘中； 作用：binlog的作用类似于Oracle的归档日志，可以用来查看数据库的变更历史（具体的时间点所有的SQL操作）、数据库增量备份和恢复（增量备份和基于时间点的恢复）、Mysql的复制（主主数据库的复制、主从数据库的复制） 二进制日志的信息： 文件位置：默认存放位置为数据库文件所在目录下 文件的命名方式： 名称为hostname-bin.xxxxx （重启mysql一次将会自动生成一个新的bin
本文为整个专题的第四篇，中间跳过了原计划的“内网横向移动攻击模拟（下）”。原因是下与上的类型一致，均为攻击模拟的记录，可分享和讨论的意义不大，只要按照这种模式可以设计出更多的场景。继而，继续编写本专题后续的内容。
https://github.com/JeffXue/web-log-parser
首先必须了解Ceph里面的MON、OSD、MDS、MGR、RGW各种服务的软硬件需求，知道你规划的Ceph规模是多大，当前分配给对应容器的资源是否合适，不然到了后期你需要做各种硬件资源调整而不得不重启容器的时候，你的服务可用性会可能会大打折扣。总之就是一句话，硬件资源一步到位，不要瞎折腾。别让OOM成为常态！
遇到的失败或错误分为两大类：物理和逻辑。物理错误一般是硬件错误或使用数据库的应用程序中的软件错误，而逻辑错误一般在终端用户级别（数据库用户和管理员）。
我们坑你遇到的失败或错误分为两大类：物理和逻辑。物理错误一般是硬件错误或使用数据库的应用程序中的软件错误，而逻辑错误一般在终端用户级别（数据库用户和管理员）。
Linux 内核是最大且变动最快的开源项目之一，它由大约 53,600 个文件和近 2,000 万行代码组成。在全世界范围内超过 15,600 位程序员为它贡献代码，Linux 内核项目的维护者使用了如下的协作模型。
目前在互联网公司最使用最广和流行的应该是git，如果你从事编程工作，这个工具绝对是你的必备技能，本文简单介绍一下git的简单使用和github的关联。
近期 Docker 发布了全新的 Docker Desktop 3.0.0 版本，这个版本采用补丁形式进行增量更新，减少了每次更新的容量。官方还删除稳定和边缘频道，以单一发布串流代替，减少版本之间的混淆。而 Docker Engine 则发布 20.10版本，并开始支持 Cgroups V2。
最近很多人在咨询日志监控的事情，对于日志这个问题，简单也简单，不简单也不简单，日志最先反映出应用当前的问题，在海量日志里面找到我们异常记录，然后记录下来，并且根据情况报警，大家可以监控系统日志、nginx、Apache、业务日志。想用好用对，不是辣么容易，一直想系统的写下，无奈人比较懒，就把自己的微薄经验跟大家一起互相学习下。zabbix最主要的是监控日志文件中有没有某个字符串的表达式，支持日志文件正则和关键字正则，其是把日志文件中符合关键字的日志过滤出来入库，不包含的日志不采集，且只支持主动模式。
开篇：在Linux环境开发过程中，遇到需要监控某个目录的文件是否发生变化执行相应脚本，网上了解一下，inotify完美符合需求。
应用程序升级或变更时，配置文件与数据库均可保留（使用sqlite方式时不保留任何信息）
Notepad++ 顾名思义就是 windows 内置 Notepad 的增强版，它采用 C++ 编写，性能优秀，不仅小巧（完整安装包仅 3.8MB），功能众多，插件丰富，而且最关键的是“完全免费”！这一点比起 Editplus、UltraEdit、Sublime Text 等其它文本处理软件来说，算是个大的卖点。 说了这么多咱们言归正传，在日常的研发、数据处理过程中，免不了和各种文本、数据、代码打交道，今天就来细数 Notepad++ 10个强大而又鲜为人知的特性，教你如何快速用它处理各种文本问题，做到事
作为《手撕MySQL》系列的第二篇文章，今天介绍一下MySQL的二进制日志（bin log），注意不要和MySQL的InnoDB存储引擎特有的重写日志（redo log）混淆，bin log是记录所有数据库表数据及表结构变更的二进制日志（不会记录查询操作），借助这个日志可以实现：数据恢复和 主从复制（不难理解，因为所有涉及变更的操作都记录了下来，可以追溯）。
作者简介： 韩方 欢聚时代（YY直播） 安全中心总监 公司T4技术专家，10年以上安全领域的攻防研究和设计开发工作，对于平台安全、应用安全、业务安全等安全领域有非常深入的研究，申请过多项安全领域相
Linux下的木马常常是恶意者通过Web的上传目录的方式上传木马到Linux服务器的，所以可从恶意者：访问网站-->Linux系统-->HTTP服务-->中间件-->程序代码-->数据库-->存储，层层设卡防护。
上期文章介绍了Webshell的基础知识和防护技巧，有兴趣的同学可以前往 你所不知道的Webshell--基础篇 观看。
昨天我们谈到了资源管理中资源隔离技术LXC，linux轻量级的隔离技术。今天介绍一个基于LXC技术发展的开源应用容器引擎：Docker。 什么是Docker： Docker container和普通的虚拟机Image相比, 最大的区别是它并不包含操作系统内核.普通虚拟机将整个操作系统运行在虚拟的硬件平台上, 进而提供完整的运行环境供应用程序运行, 而Docker则直接在宿主平台上加载运行应用程序.本质上他在底层使用LXC启动一个Linux Container,通过cgroup等机制对不同的container
Pulumi 是一个开源的基础设施即代码 (Infrastructure as Code) SDK，它可以使用你已经熟悉和喜爱的编程语言来构建和部署任何架构、在任何云上的基础设施。通过使用自己喜欢的语言和工具编写代码，并嵌入到 Automation API 中，在 AWS、Azure、Google Cloud Platform 等 120 多个提供商上快速创建并管理资源。与 YAML 不同，Pulumi 支持循环、函数、类以及包管理等标准语言特性。核心优势如下：
Linux 系统中的文件除了具备一般权限和特殊权限之外，还有一种隐藏权限，即被隐藏起来的权限，默认情况下不能直接被用户发觉。有用户曾经在生产环境中碰到过明明权限充足但却无法删除某个文件的情况，或者仅能在日志文件中追加内容而不能修改或删除内容的情况，这在一定程度上阻止了黑客篡改系统日志的图谋，因此这种“奇怪”的文件权限也保障了 Linux 系统的安全性。既然叫隐藏权限，那么使用常规的 ls 命令肯定不能看到它的真面目。隐藏权限的专用查看命令是 lsattr，专用设置命令是 chattr。
MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展高性能数据存储解决方案。
LSM-tree是由两个或两个以上存储数据的结构组成的。最简单的LSM-tree有两个部分，如下图所示。常驻内存部分，称为C_0树（或C_0），其可以设计为任何方便键值查找的数据结构，常驻硬盘部分，称为C_1树（或C_1）。C1进一步可延申为C_2，C_3等等。
针对一些重要的业务数据进行增删改查的时候，我们希望记录一下用户的操作行为，以便发生问题时能及时的找到依据，这种日志就是业务系统的操作日志，只关键解决的是用户操作行为的日志问题，不是泛指所有的日志业务，不是针对方便问题定位的日志和那些业务的数据传递的日志。
这些日志可以帮助我们定位 mysqld 内部发生的事件，数据库性能故障，记录数据的变更历史，用户恢复数据库等。本文主要讲解错误日志文件（Error Log）相关内容。
innodb 作为最主流使用的 mysql 存储引擎，尤其在新版本的 mysql 中 MyISAM 存储引擎被废除，更加提升了 innodb 如日中天的地位。 那么，作为 mysql 的使用者，如何优化 innodb 使之发挥更强大的性能，就成为了必修课。
canal [kə’næl]，译意为水道/管道/沟渠，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费
从这一讲开始，我们讨论 Linux 系统和应用安全。我们知道，在开发一个应用的过程中，需要涉及代码、操作系统、网络和数据库等多个方面。所以，只是了解代码安全肯定是不够的，我们还需要了解常见的基础环境和工具中的安全机制，学会通过正确地配置这些安全机制，来提升安全保障。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
