IT米粉-腾讯云开发者社区

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

IT米粉

专栏成员

34

文章

47652

阅读量

28

订阅数

开源数据同步神器——canal

如今大型的IT系统中，都会使用分布式的方式，同时会有非常多的中间件，如redis、消息队列、大数据存储等，但是实际核心的数据存储依然是存储在数据库，作为使用最广泛的数据库，如何将mysql的数据与中间件的数据进行同步，既能确保数据的一致性、及时性，也能做到代码无侵入的方式呢？如果有这样的一个需求，数据修改后，需要及时的将mysql中的数据更新到elasticsearch,我们会怎么进行实现呢？

2019-03-06

2.3K0

谈谈系统密码存储策略

还是从脱库说起，数据库被人拉走了，最可怕的是什么？个人手机、身份证、地址？？这些是很重要，但是，其实个人隐私数据，获取的难度不是很大，而且不容易直接对一个人造成巨大的伤害，但是，密码被人知道了，就是很可怕的事情。因为，大部分人不同的系统都是共用密码。这个错误比较低级，但是很常见，所以，密码，是被脱库后最容易被人利用。所以，密码是必须加密的，不把用户密码加密的系统和公司，都该判刑。

2018-10-22

8750

hexo——轻量、简易、高逼格的博客

hexo wordpress http node.js 开源

写blog虽然经历了N多不同时代的产品，恒久不变的始终是自己无人问津的网站。虽然没几个人看，还是隔断时间就要折腾一下。从最开始的wordpress，到tale，到现在的hexo，网站变得越来越简单，越来越轻量级，这里主要说说hexo的使用。

2018-10-08

9870

activeMQ 填坑记

MQ是现在大型系统架构中必不可少的一个重要中间件，之前有偏文章《MQ(消息队列)常见的应用场景解析》介绍过MQ的应用场景，现在流行的几个MQ是rabbitmq,rocketma,kafka,这几个MQ比较最容易找到相关的文章，而也有些系统使用的是activemq，因activemq是相对比较传统的MQ，在使用过程中还是会遇到很多坑，这里简单列举几个大家可能会遇到的问题，把自己使用acitvemq的经验和大家分享一下。

2018-10-08

1.2K1

数据库的使用你可能忽略了这些 (续)

数据库 sql 缓存云数据库 SQL Server hbase

之前写过一篇文章《数据库的使用你可能忽略了这些》，主要是从一些大家使用使用时容易忽略的地方，如：字段长度、表设计等来说明，这篇文章同样也是这样的主题，只是从另外的几个方面来说说数据库使用中，容易忽略，导致入坑的地方。

2018-10-08

5140

MQ(消息队列)常见的应用场景解析

数据库缓存

提高系统性能首先考虑的是数据库的优化，之前一篇文章《数据库的使用你可能忽略了这些》中有提到过开发中，针对数据库需要注意的事项。但是数据库因为历史原因，横向扩展是一件非常复杂的工程，所有我们一般会尽量把流量都挡在数据库之前。不管是无限的横向扩展服务器，还是纵向阻隔到达数据库的流量，都是这个思路。阻隔直达数据库的流量，缓存组件和消息组件是两大杀器。之前文章《Redis常见的应用场景解析》已经描述了最常用的缓存组件redis的应用场景，那么今天，就重点说说MQ的应用场景。

2018-07-24

5.2K0

spring mybaits多数据源动态切换

spring 人工智能数据库 mybatis apache

日常开发中，连接多个数据库是一个很常见的需求，我们的系统是基于spring boot+mybatis进行数据库的操作，网上常见的思路是基于不同的数据库创建不同的bean,大概的实现方式如下：

2018-07-24

9000

5分钟入门自动化测试——你应该学会的Postman用法(2)

自动化测试微服务运维自动化

之前的一篇文章《你应该学会的Postman用》,主要介绍了postman的一些高级的用法，便于日常开发和调试使用，本文的基础是对postman的基本使用以及一些高级用法有一定的了解，如对此不太了解的同学，建议移步：《你应该学会的Postman用》了解。

2018-07-24

4940

学会数据库读写分离、分表分库——用Mycat，这一篇就够了！

系统开发中，数据库是非常重要的一个点。除了程序的本身的优化，如：SQL语句优化、代码优化，数据库的处理本身优化也是非常重要的。主从、热备、分表分库等都是系统发展迟早会遇到的技术问题问题。Mycat是一个广受好评的数据库中间件，已经在很多产品上进行使用了。希望通过这篇文章的介绍，能学会Mycat的使用。安装 Mycat官网：http://www.mycat.io/ 可以了解下Mycat的背景和应用情况，这样使用起来比较有信心。 Mycat下载地址：http://dl.mycat.io/ 官网有个文档，属于详

2018-04-16

1.5K0

我的Markdown的利器——Markdown Here、有道云笔记、iPic

Markdown逐渐成为大家文章编辑的首选，这里推荐两个比较冷门的Markdown工具。用什么当做Markdown的主力工具？网上有很多人推荐的Markdown的工具包括专业的Markdown工具

2018-04-16

1.1K0

Apple 系统正式版要发布了，有你期待的功能吗？

Apple操作系统每年例行升级时间到，每年都说的那么牛B，不管是IOS还是Mac os功能已经曝光的差不多了，你需要的功能有出现吗？每年对系统的升级，其实还是很期待的，但是发现，Apple的系统现在越来越关注一些高科技，很多接地气的使用功能一直没有，还是让人很失望的。说一说新版系统对我的吸引力吧。 IOS IOS11的新功能：https://www.apple.com/cn/ios/ios-11/ 相机扫码这个应该是最喜欢的功能了. 我再也不用通过微信扫码，然后safri打开跳转了。文件管理App

2018-04-16

8810

IntelliJ IDEA插件——冷门神器分享

IntelliJ IDEA就不必介绍了，至今还能保持IDE前三的神器，如今java程序员的首选，今天介绍几款冷门但绝对是神器的IDEA插件。前言 IDEA自不必说，IDEA插件是开发中必备的神器，相信大家对常见的插件都如数家珍，如：findbug、checkstyle、JRebel、key promoter以及刚出的新贵阿里代码规范，这些都给开发人员带来极大的效率提升，今天我给大家介绍的几个，可能在很多插件推荐的文章里都没有提到，但是绝对是值得尝试的几款插件。 grep console java 开发的过

2018-04-16

1.5K0

程序员也是弱势群体？——从WePhone开发者事件说起

作为一名不爱凑热闹的人，今天一直在持续关注一个热点事件——WePhone开发者自杀，即使前几天热议的孕妇跳楼新闻我都不太关注，但是这个事件却让我深深的震撼，花了几个小时在微博上搜索了相关的信息，去了解事情的始末，也去看了网络上对此事件的一些评判，太多的杂音让个人的产生一些想法和大家一起探讨。事件始末可能大家不是都了解事情的始末，我这里简单介绍下： WePhone的开发者苏享茂在北京跳楼自杀，原因是其无法忍受其前妻敲诈勒索以及骚扰。而其前妻与其结婚只有一个月，是通过世纪佳缘网认识，结婚前后苏享茂在其妻身上

2018-04-16

7970

加强管理能提高程序代码质量吗？

代码质量是咱们程序开发中永远的一个痛，提升代码质量有很多种方式，强化管理是一种很常见的方式，这里咱们就聊聊，所谓的管理，真的是提升代码质量最有效的方式吗？外包团队进行代码实现，可以吗？很多企业喜欢将系统的代码实现细节交由外包团队处理，声称只要产品设计的合理，只要架构合理，只要代码规范合理，代码的实现找谁实现都是一样的，所以干脆找外包团队来实现，这应该是很多非互联网公司，特别是传统企业的思路。但是，结果真的是这样吗？经历过的人应该都是有很深的感触的，外包团队开发的代码和公司内部人员开发的代码，质量上是有

2018-04-16

8900

系统日志管理那点事

说起日志，大家都是耳熟能详的，一大堆日志插件映入眼帘，日志收集的方式也历历在目，但是，今天我们的重点不仅仅是收集日志了，今天我们主要说说怎么管理日志收集日志日志管理的第一件事，就是日志的收集。日志收集是开发者必备的技巧，不管是哪个开发语言，哪个开发平台，日志收集的插件都是有很多选择的。例如： .net 平台大家钟爱的log4net,支持多种存储方式（文件、数据库），多种格式，多种日志拆分方式。 java 平台主流的log4j、slf4j、logback，多种选择。日志收集的组件这里就不一一说明了，使用

2018-04-16

8970

数据库的使用你可能忽略了这些

数据库的管理是一个非常专业的事情，对数据库的调优、监控一般是由数据库工程师完成，但是开发人员也经常与数据库打交道，即使是简单的增删改查也是有很多窍门，这里，一起来聊聊数据库中很容易忽略的问题。字段长度省着点用先说说我们常用的类型的存储长度：列类型存储长度tinyint1字节smallint2字节int4字节bigint8字节float4字节decimal(m,d)0-4字节datetime8字节timestamp4字节char(m)m个字节varchar(m)可变长度text可变长度很明显，不同的类

2018-04-16

1K0

你必须了解的反射——反射来实现实体验证

开发工作中，都会需要针对传入的参数进行验证，特别是针对实体进行验证，确保传入的参数格式正确。这里做了一个非常简单的组件进行验证。抛砖引玉，让大家深入思考下反射的应用。需求日常开发，都是通过API进行前后端的系统对接，对API参数的验证是一个使用率非常高的功能，如果能非常简便的的进行参数验证，能降低代码量，提升工作效率。使用项目地址：https://github.com/itmifen/mfutility 以前使用最原始的验证方式： if(testEntity.getImages().length()

2018-04-16

7290

Redis常见的应用场景解析

云数据库 Redis®存储缓存分布式

Redis是一个key-value存储系统，现在在各种系统中的使用越来越多，大部分情况下是因为其高性能的特性，被当做缓存使用，这里介绍下Redis经常遇到的使用场景。 Redis特性一个产品的使用场景肯定是需要根据产品的特性，先列举一下Redis的特点：读写性能优异持久化数据类型丰富单线程数据自动过期发布订阅分布式这里我们通过几个场景，不同维度说下Redis的应用。高性能适合当做缓存缓存是Redis最常见的应用场景，之所有这么使用，主要是因为Redis读写性能优异。而且逐渐有取代mem

2018-04-16

8180

打造属于自己的博客app——基于react native和博客园接口

react reactnative

关注react native这个技术很久了，去年就做了一个简单的Demo,最近有时间，重新了解了一下react native的现状，发现已经有很大的进步，现在完善了一下原有的项目，并重新开源共享一下。背景对react native这个技术关注很久了，去年也花了很长时间学习，但中途因为时间问题没有进行更深入的学习。当时，react native还存在很多坑，使用起来不太方便。一年过去，现在重新开始关注react native，发现react native已经将原有的很多问题解决，相比当年版本，有太多的进步

2018-04-16

1.3K0

技术知识和稳定的系统之间，可能还差这些？

自动化测试敏捷开发

前言：很多人都说——程序一门艺术，对于这个说法，以前我是很难理解的，程序就是一个工具，一门学问，怎么会是一门艺术呢，后来工作越深入，考虑的东西越多，发现程序的确是一门艺术。什么是艺术呢？通过捕捉与挖掘、感受与分析、整合与运用，通过感受得到的形式展示出来的阶段性结果。程序不只是你写出来，运行起来就成功了，而是需要感受和分析、需要整合运用，需要最终变成成果。显然，程序是符合艺术的标准。艺术的展现除了术，还需要道。程序的术是大家都能得到的共识，各种各样提升自己技术的文章到处都是，这里我们说说程序的道，也就是方

2018-04-16

5880

点击加载更多

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态