redo是引擎层的日志，而且是InnoDB特有的。InnoDB的redo log是有固定大小的，比如可以配置为 一组4个文件（logfile-1，logfile-2，logfile-3，logfile-4），每个文件的大小是1GB，那么它总共可以记录4GB的操作。一个环状循环结构，从头开始写，写到末尾又回到开始循环写。
这是今年3月份整理的一篇博客，在做业务过程中又有了一些新的理解，所以重新进行了梳理，增加了部分示例和绘图，尽管这里分析的是MySQL的binlog 和redo log，但是这里的两段式提交的思想在做支付场景的业务的时候经常用到。
转载自 http://blog.csdn.net/a454832841/article/details/52814812
这是个人和团队做的第一个基于以太坊的区块链项目。目前该项目在删档测试阶段 http://fox.doyo.com ,只要每日签到打卡官方还会送ETH和代币，喜欢薅羊毛的可以去看看。整个项目开发过程经历过相当多的坑。在文章内会一一提到。
大多数 SQL 实现支持以下类型的函数。 ❑ 用于处理文本字符串（如删除或填充值，转换值为大写或小写）的文本函数。❑ 用于在数值数据上进行算术操作（如返回绝对值，进行代数运算）的数值函数。 ❑ 用于处理日期和时间值并从这些值中提取特定成分（如返回两个日期之差，检查日期有效性）的日期和时间函数。 ❑ 用于生成美观好懂的输出内容的格式化函数（如用语言形式表达出日期，用货币符号和千分位表示金额）。 ❑ 返回 DBMS 正使用的特殊信息（如返回用户登录信息）的系统函数
若想更改，可将启动参数transaction-isolation的值set成READ-COMMITTED。
Holi需要。 之前爬的课表，现在需要将那些个一连串的字符串分割成想要的单独的数据，做个性化推送。 程序的前面和之前一样，模拟登录。 在处理选课/改课这个网页的时候，还是蛮复杂的。 遇神杀神，见鬼杀鬼。
生产环境需要做归档的任务有十几个，如果要知道每个归档任务成功与否、跑了多长时间、归档了多少数据，就得手工逐个查看日志，非常枯燥的重复劳动，那是否有办法可以统一管理呢？
一个事务执行过程中看到的数据，和该事务在启动时看到的数据一致。 所以未提交的变更对其它事务是不可见的。
在之前写VR360时有一个统计页面（https://vr.beifengtz.com/p/statistics.html），在此页面的数据统计时用到了很多mysql中日期函数和时间统计sql语句，当时也是参考了一些资料才写出来的。在平时开发中，涉及到统计数据、报表甚至大数据计算时一定会使用这些日期函数，其他关系数据库也是类似的，我是以mysql为例，比较简单还免费嘛。话不多说，下面直接列出常用的时间统计sql语句，记录下来方便以后学习巩固。
前段时间，在优雅的使用pt-archiver进行数据归档一文中介绍了pt-archiver的使用方法，也将pt-archiver部署到了生产环境，这时候问题来了~
一，引言 前段时间在优雅的使用pt-archiver进行数据归档一文中介绍了pt-archiver的使用方法，也将pt-archiver部署到了生产环境，这时候问题来了…… 生产环境需要做归档的任务有十余个，如果要知道每个归档任务成功还是失败、跑了多长时间、归档了多少数据，就得手工逐个日志查一查，非常枯燥的重复劳动，是否有办法可以统一管理呢？于是用python折腾了一个小工具…… 二，mysql_archiver 2.1 归档调度 db_archive_exec.py，从数据库获取归档任务的基本信息
在 上篇文章 中我们介绍了 PingCAP Talent Plan - TiKV 方向的课程内容，本文将从课程设计的角度和大家聊一聊 TiDB 方向的课程内容，包括课程设计的逻辑，和课程学习过程中常见的问题及解答等。
在数据库运维中， 有一种类型的表需要格外重视，在Oracle中可能是分区表，在MySQL中更多是日期表，其实无论哪种形式，他们的属性是相通的，属于周期表。这里就会涉及两类维护，一类是创建，一类是清理。对于变更来说，其实和其他的表类型是相通的，就此不再赘述。
PS：数据库的热备份，冷还原也讲完了，真心感觉也不是那么复杂。其实就是这样，但是在云平台越来越盛行的今天，基本上买个rdrs数据库这些功能都有了。了解下XtraBackup 这个工具确定很重要晚上很多的写成shell脚本的，更加方便了。
(下一篇) 16 条 yyds 的代码规范 40 个 SpringBoot 常用注解
前言： 接了一个小需求，获取用电统计的数据，要求获取最近月，周，天统计数据，MySQL 本来就包含处理这种需求的函数，这里记录下。 查询当天数据 SELECT * FROM 表名 WHERE TO_DAYS( 表中时间字段 ) = TO_DAYS(NOW()); 查询本周数据 SELECT * FROM 表名 WHERE YEARWEEK(DATE_FORMAT( 表中时间字段，'%Y-%m-%d')) = YEARWEEK(NOW()); 查询当月数据 SELECT * FROM 表名 WHERE Y
$sql="SELECT video_id,count(id)as n FROM rec_down WHERE UNIX_TIMESTAMP(NOW())-UNIX_TIMESTAMP(add_time)<=86400 group by video_id
在Kafka中，存在数据过期的机制，称为data expire。如何处理过期数据是根据指定的policy（策略）决定的，而处理过期数据的行为，即为log cleanup。
在上一篇中，我们知道了一条查询语句的执行过程一般是经过连接器、分析器、优化器、执行器等功能模块，最后到达存储引擎。
最近写个SQL逻辑，涉及到计算各种日期和时间，MySQL提供了很丰富的函数来支持，记录一下，用的时候，有地方可查。
大家可以很明显的看到2018年12月2日的记录也查出来了，12月2日是星期日。为了让大家更直观的看，我把12月的月份截出来
通过前端給过来的图，我们只需要统计一周内的订单总量和 订单总金额，一开始我的想法是写多个sql语句，然后再插入到一个数组中去，最后的结果你知道的，效率很低很低。
最近项目需要统计一段日期范围内，根据每分钟、几分钟、每天分别统计汇总某些事件/指标的发生总次数，平均发生次数，因此总结了Mysql中与时间处理、统计相关的资料。
MySQL 中有非常多的日期函数，但是使用到比较多的就是 DATE_FORMAT(), FROM_UNIXTIME() 和 UNIX_TIMESTAMP() 这三个，DATE_FORMAT() 把日期进行格式化，FROM_UNIXTIME() 把时间戳格式化成一个日期，UNIX_TIMESTAMP() 正好想法，把日期格式化成时间戳。下面就介绍下他们之间详细的使用过程：
在MySQL中存储数据的时候，很多情况下会存储与时间相关的数据。有时候我们在数据库中存储的是时间戳的形式，但是当我们进行数据统计和分析、聚合的时候，显然是不能以时间戳的形式来进行，必须先转成符合实际需求的格式。
近期公司网站全面版本升级，使用thinkphp5.1版本为基础，进行了二次开发，在全面更新后，网站链接暴涨增值98万，运行一周未出现什么问题，但是在下一周，忽然程序出现大面积404页面，查看日志及错误信息，发现是linux服务器tmp目录爆满，导致mysql无法写入，程序崩盘。
如果愿意的话，可以把合并表看成一种较老的、有更多限制的分区表，但是它们也有自己的用处，并且能提供一些分区表不能提供的功能。
先回顾一下 RP 策略（ retention policy ），它由三个部分构成：
查找文件后执行命令，其中command是执行的命令，比如ls -l，{}会被查找到的文件替换，一般使用转义符号保护，避免被shell扩展，最后以\;结尾（注意有一个空格）
在线日期/天数计算器： http://tools.zalou.cn/jisuanqi/date_jisuanqi
线上有一台服务器上，里面有一个mysql数据库服务，其实库也很小，就几个G，一直以来是保留了多天的备份集，但是因为业务的关系，这个库其实只有一些 基本的数据查询，但奇怪的是没有从库，一直以来是每天都会备份，保留了近一周的备份集，这种情况也倒相安无事。不过不巧的是这台服务器上还部署有 Oracle数据库，空间要大很多，随着业务的增长，这个数据量就上去了，结果空间的使用是越来越紧俏。保留一周的备份集，空间是越来越紧张。所以在一台 Oracle的备库机器上使用gtid创建了一个mysql从库。这种情况基本可以满足
MySQL中常用的几种时间类型有：date、datetime、time、year、timestamp
总结了几点常用的关于日期时间相关的一些函数的用法，有时候可以很方便的帮你解决些棘手问题
6月5日，奥迪把Q8的全球首发放在深圳，一面数据的小伙伴近水楼台，从深南大道的办公楼跑去欢乐海岸一睹新车。发布会现场当然气氛热烈，但是Q8这款车在广大网友心目中到底怎样？从5年前走漏风声到现在发布，到底有没有撩起网友们兴趣和热情呢？
MySQL自带的日期函数TIMESTAMPDIFF计算两个日期相差的秒数、分钟数、小时数、天数、周数、季度数、月数、年数，当前日期增加或者减少一天、一周等等。
如果是使用 delete 语句误删了数据行，可以用 Flashback 工具通过闪回把数据恢复回来。 Flashback 恢复数据的原理，是修改 binlog 的内容，拿回原库重放。而能够使用这个方案的前提是，需要确保 binlog_format=row 和 binlog_row_image=FULL。
不知您是否发现一种现象，那些初学渗透测试的人员往往过于关注应用的安全性，而对数据库的安全性不太重视。他们殊不知，没有数据库的配置与安全测试，应用的安全性也就无法得到充分的验证。在此，我将以最常见的数据库管理系统——MySQL为例，向您介绍如何通过七步骤来安全加固数据库服务器。
上一篇Django 2.1.7 Session基本操作，解决 'WSGIRequest' object has no attribute 'session' 问题讲述了Django 2如何开启session以及session的基本操作，但是session是存储在mysql中，这是性能较低的作法。最好的方式是采用内存数据库进行存储，本章节主要讲解如何使用redis存储session。
最近的错别字是越来越厉害，上一篇开头就是两个错别字，恨得我要死，不检查，并且一边写一边查让写的语句也变得像是 translation的。所以最近在反思，数量和质量之间的问题，每周5天，天天一篇，虽然说坚持就是胜利，胜利我没看见，错别字是越来越多了。所以后期可能会更加注重质量，至少错别字的问题的好好的关注一下，有可能一周就不是5篇，会开始降低数量，提高质量，希望从这篇开始。
lag() over() 与 lead() over() 函数是跟偏移量相关的两个分析函数，通过这两个函数可以在一次查询中取出同一字段的前 N 行的数据 (lag) 和后 N 行的数据 (lead) 作为独立的列, 从而更方便地进行进行数据过滤。这种操作可以代替表的自联接，并且 LAG 和 LEAD 有更高的效率。
如果忽略mode参数，默认情况下WEEK函数将使用default_week_format系统变量的值。 要获取default_week_format变量的当前值，请使用SHOW VARIABLES语句如下：
本文用 moment.js 实现了获取本周、前 n 周、后 n 周开始结束日期，即周一、周日日期的方法。
前一篇写了PHP的时间函数（还是草稿)，这一篇就写Mysql的时间函数吧。最近做的项目，关乎权限，于是自然而然的就与有效期联系在了一起。其 中有一个功能是生成特殊表格，可以根据用户的选择，按周、月、季
“删库跑路”作为调侃程序猿的梗一直以来广为流传，但是当真的发生的时候，犹如黑天鹅降临，瞬间业务全线停摆，造成难以估量的损失。在SaaS领域举足轻重的服务提供商微盟，就刚刚经历了这样一场没有硝烟又争分夺秒的战争。 一周前，微盟部署在自建MySQL数据库上的核心业务数据，被微盟某运维人员用一种让程序员闻风丧胆的Linux系统下文件删除命令，整体进行了不可逆的删除。更残酷的是，备份数据也一起删除了。 所有微盟平台上的用户和商家业务因此被迫停滞了一周，而服务没有恢复的每一分每一秒都是收入和用户的损失，这次删库
一般的做法是找到3天前的备份, 做全备恢复, 然后跑binlog跑到指定时间点即可.
作者：沉默王二 Java 程序员进阶之路：https://tobebetterjavaer.com
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
