年底很多移动产品都会推出自己的年度账单，每年都会引起大众媒体的关注。今年有幸参与了宜信财富APP年度账单的开发，本文将带大家探索宜信财富年度账单背后的技术架构和研发逻辑，希望可以给大家带来一些思路上的启发。
点击上方“芋道源码”，选择“设为星标” 管她前浪，还是后浪？ 能浪的浪，才是好浪！ 每天 10:33 更新文章，每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路，很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
导读：大数据平台可以分为操作数据存储（ODS）、数据仓库（DW）和数据集市（DM）三层，分别对应着数据清洗、数据管理和数据应用这三个核心功能。
[喵咪BELK实战(1)]浅谈日志的重要性以及介绍BELK #w-blog博客 前言 哈喽大家好呀!这次主要为大家带来BELK日志系统相关的博文,日志大家都知道,比如nginx请求日志,系统的日志,自
短消息业务发展迅猛，形成了从手机用户到服务内容提供商的一整套产业链，并逐渐成为各移动通信运营商新的经济增长点。有数据表明，截至2003年12月31日，中国移动（香港）有限公司，包括广东、浙江、江苏、上海、北京等21家子公司，移动用户数达到14161.6万户，短信普及率达到71.1%，短信业务使用量达到935.1亿条；中国联通股份有限公司，在30个省市自治区的GSM和CDMA移动电话用户已达9151.5万户，其中CDMA用户短信使用量达到62.3亿条，GSM用户短信使用量是250.3亿条。随着短消息及其增值业务的迅速发展，对短消息计费和结算功能的需求更加迫切。
大型国有控股企业——中国十七冶集团有限公司携手泛微为集团数字化管理建设提速，通过搭建覆盖5000名+用户的统一办公的数字化平台，助力集团提升管理效能，推动集团数字化转型！
目前，各行业的数智化进程如火如荼，企业对数智化用户运营的需求日益旺盛；同时，在万物互联的5G时代，用户触达的渠道也变得更加丰富。企业需要更高效、智能的方式进行用户触达管理。基于此，个推将多年来积累的数字化运营经验和用户触达能力相结合，打造了“消息中心”系统产品，能够帮助企业客户将APP通知栏消息、短信、微信、钉钉的系统消息、智能人工外呼、5G消息等行业八大主流用户触达渠道进行有效整合和管理。
传统意义上我们通常将数据处理分为离线数据处理和实时数据处理。对于实时处理场景，我们一般又可以分为两类，一类诸如监控报警类、大屏展示类场景要求秒级甚至毫秒级；另一类诸如大部分实时报表的需求通常没有非常高的时效性要求，一般分钟级别，比如10分钟甚至30分钟以内都可以接受。
今天下午4点41分，笔者的手机忽然开始叮叮叮地响个不停，笔者赶紧停下手中的工作，把手机调成静音，顺便扫了一眼短信内容
一家公司的专业度、规范性体现在方方面面，尤其是外来客户来访时，不仅对外能够展现公司的企业文化和服务水平，对内来说，能够落地公司制度和提高内控水平。
分析型系统进行联机数据分析，一般的数据来源是数据仓库，而数据仓库的数据来源为可操作型系统，可操作型 系统的数据来源于业务数据库中，那么我们常用的数据仓库的组成和架构一般如下图所示
一般也不需要非常仔细地进行数据分层，数据直接通过Flink计算或者聚合之后将结果写MySQL/ES/HBASE/Druid/Kudu等，直接提供应用查询或者多维分析。
为了在互联网时代保持竞争力，不少担保企业选用各种业务管理软件、办公软件来实现数字化管理。
金融科技领域的数据，从数据结构角度观察，分为结构化数据、半结构化数据和非结构化数据；从数据所有权角度观察，分为自有数据和第三方数据；从数据作用角度观察，分为营销类数据、风控类数据、财务类数据等。不同角度观察，可以梳理不同数据划分类型。
一、代码实现 1.接入配置类—Env.java package com.ray.sms.aliyun.config; /**@desc : 阿里大于短信服务 接入配置 * * @author: shirayner * @date : 2017年11月6日 下午6:27:53 */ public class Env { //1. 此处需要替换成开发者自己的AK(在阿里云访问控制台寻找) public static final String ACCESSKEY_ID = "L
数仓系列传送门：https://blog.csdn.net/weixin_39032019/category_8871528.html
BIGO 是一家面向海外的以短视频直播业务为主的公司, 目前公司的主要业务包括 BigoLive (全球直播服务)，Likee (短视频创作分享平台)，IMO (免费通信工具) 三部分，在全球范围内拥有 4 亿用户。伴随着业务的发展，对数据平台处理能力的要求也是越来越高，平台所面临的问题也是日益凸显，接下来将介绍 BIGO 大数据平台及其所面临的问题。BIGO 大数据平台的数据流转图如下所示：
FTableID FTableName FDescription FTableNote 0 t_VoucherGroup 凭证字表 凭证的收付转等分类字 1 t_VoucherEntry 凭证分录表 凭证分录 2 t_Voucher 凭证表 凭证 3 t_User 系统用户信息表 系统用户信息表 4 t_UnitGroup 单位类别表 计量单位类别 5 t_SystemProfile 系统参数表 公司名称等系统控制参数 6 t_Supplier 供应商表 供应商资料 7 t_SubMesType 辅助资料类别表 系统公用的说明信息类别 8 t_SubMessage 辅助资料表 系统公用的说明信息 9 t_Stock 仓库表 仓库资料 10 t_Settle 结算方式表 结算方式如现金、电汇等 11 t_MeasureUnit 计量单位表 计量单位 12 t_LogFunction 上机日志标准信息表 上机日志标准信息表 13 t_Log 上机日志信息表 上机日志信息表 14 t_ItemRight 基础资料权限表 基础资料权限表 15 t_ItemPropDesc 核算项目附表信息描述表 描述核算项目附表的字段信息 16 t_ItemClass 基础资料类别表 基础资料类别 17 t_ICItem 物料表 所有材料、产品、半成品等 18 t_Exp 备注资料表 常用的摘要信息 19 t_Emp 职员表 职员 20 t_Department 部门表 部门 21 t_Currency 币别表 币别 22 t_Account 科目表 会计科目 23 t_AccessControl 权限控制表 权限控制 24 t_GroupAccess 用户组权限表 用户组权限 25 t_GroupAccessType 用户组权限类表 用户组权限类 26 t_ObjectAccess 对象权限表 对象权限 27 t_ObjectAccessType 对象权限类型表 对象权限类型 28 t_ObjectType 对象类型表 对象类型 29 t_Accessory 附件管理表 附件管理 30 t_AutoNumber 自动增加表 自动增加 31 t_CodeRule 编码规则主表 编码规则主表 32 t_CodeRuleDetail 编码规则明细表 编码规则明细表 33 t_CodeRuleValue 编码规则当前值表表 编码规则当前值表 34 t_CodeTypeFP 编码规则分配表表 编码规则分配表表 35 t_DataTypeInfo 数据类型定义表 采用ADO定义数据类型 36 t_dls_moduel 数据灌入模块表 包含数据灌入模块划分信息 37 t_dls_TableList 数据灌入中间表 包含数据灌入用到的中间表信息 38 t_dls_TableStruct 数据灌入字段描述表 数据灌入中间表的字段描述信息 39 t_Identity 自动步长编码表 为表实现自动编码 40 t_Mutex 功能互斥表 功能互斥 41 t_BaseProperty 基础资料相关属性 反映基础资料的改动以及权限信息 42 t_ObjectRefs 对象参考表 对象参考 43 t_TableDescription 万能报表表描述表 万能报表表描述 44 t_UserDefineRpt 万能报表用户定义表 万能报表用户定义 45 t_FieldDescription 万能报表字段描述表 万能报表字段描述 46 t_SonCompany 分支机构 分支机构 47 t_VoucherTplType 凭证事务表 凭证事务表 48 t_LedgerPageSetup Ldg页面设置表
摘要：本文整理自 Apache Flink PMC 李劲松（之信）在 9 月 24 日 Apache Flink Meetup 的分享。主要内容包括：
背景 当下，业界越来越多公司在项目架构设计时，会采用微服务架构。微服务架构，可以让我们的产品有更好的扩展性，更好的伸缩性；但同时也会带来微服务的一系列问题，比如微服务接口怎样规范管理？怎样在多团队协作
作者范钢，曾任航天信息首席架构师，《大话重构》一书的作者。本文根据具体实例详细描述了DDD 落实到数据库设计的整个过程
作者 | 赵伟 策划 | 凌敏 业务背景 思必驰是一家对话式人工智能平台公司，拥有全链路的智能语音语言技术，致力于成为全链路智能语音及语言交互的平台型企业，自主研发了新一代人机交互平台 DUI 和人工智能芯片 TH1520，为车联网、IoT 及政务、金融等众多行业场景合作伙伴提供自然语言交互解决方案。 思必驰于 2019 年首次引入 Apache Doris ，基于 Apache Doris 构建了实时与离线一体的数仓架构。相对于过去架构，Apache Doris 凭借其灵活的查询模型、极低的运维
提供统一格式的HTTP POST或GET调用接口,并返回格式支持JSON，xml，text，html数据。
携程火车票事业群运营着铁友、携程火车票和去哪儿火车票等重要的业务和品牌，目前正在积极地拓展海外市场。火车票的指标平台旨在为业务人员提供便捷的指标查询服务，让业务人员能够快速灵活地获得这些业务和品牌相关的指标数据。
本次企点营销3.2版本 共计更新/优化了五个重要功能点 快来看看新功能在哪里/怎么用！ 线索管理 ：1.线索库画像 | 2.人群包 | 3.线索评分应用 | 4.企业管理 | 5.价值评分规则 线索管理 1.线索库画像 新增线索库画像，结合腾讯的数据能力帮助企业了解线索整体画像分布，包含：性别、年龄、学历、地域、常用设备特征，从而更好地调优营销活动。 操作：前往账户中心-线索管理-线索分析-线索库画像页面设置 2.人群包 新增小程序行为，支持企业根据自有小程序内的行为来筛选人群包
导读：美团外卖数据仓库主要是收集各种用户终端业务、行为数据，通过统一口径加工处理，通过多种数据服务支撑主题报表、数据分析等多种方式的应用。数据组作为数据基础部门，支持用户端、商家端、销售、广告、算法等各个团队的数据需求。本文主要介绍美团外卖离线数仓的历史发展历程，在发展过程中碰到的痛点问题，以及针对痛点做的一系列优化解决方案。
最近工作中应用到了 Kylin，因此调研了 Kylin 的原理和行业应用。本文参考了官网和众多其他公司中 Kylin 的应用案例，希望对大家有帮助。
最近工作中应用到了 Kylin，因此调研了 Kylin的原理和行业应用。本文参考了官网和众多其他公司中 Kylin的应用案例，文末给出了出处，希望对大家有帮助。
编辑导语 红桃微信，专注于应用的微信公众号第三方管理平台; AnySDK 更新至2.2.0版，新增广告追踪功能；亲加SDK与APICloud达成战略合作，缩短视频直播研发周期；环信SDK更新至4.8，
滴滴集团作为生活服务领域的头部企业，正在全面测试和上线StarRocks，其中橙心优选经过一年多的数据体系建设，我们逐渐将一部分需要实时交互查询、即席查询的多维数据分析需求由ClickHouse迁移到了StarRocks中，StarRocks在稳定性、实时性方面也给了我们良好的体验，接下来以StarRocks实现的漏斗分析为例介绍StarRocks在橙心优选运营数据分析应用中的实践。
数据汇聚是数据中台必须提供的核心工具，把各种异构网络、异构数据源的数据方便地采集到数据中台中进行集中存储，为后续的加工建模做准备。数据汇聚方式一般有数据库同步、埋点、网络爬虫、消息队列等；从汇聚的时效性来分，有离线批量汇聚和实时采集。
本文将总结下数据中台的相关理论知识。Flink平台化需要改进的点等等，参考《数据中台》。
本文的目标读者是从事软件行业采用FPA功能点方法对软件研发工作量评估的人员。列举了一些FPA 方法实践过程中的常见问题，有FPA 方法评估标准定义，也有实践过程中得出的方法建议，仅供参考。
请购是指某人或者某部门根据生产需要确定一种或几种物料，并按照规定的格式填写一份要求，递交至公司的采购部以获得这些物料的单子的整个过程。所填的单据称为请购单。
在数字化转型驱动下，实时化需求日益成为金融业数据应用新常态。传统离线数仓“T+N”数据供给模式，难于满足“T+0”等高时效场景需求；依托Storm、Spark Streaming、Flink等实时计算框架提供“端到端”的实时加工模式，无法沉淀实时数据资产，存在实时数据复用性低、烟囱式垂直建设等不足。
之前工作中，遇到一个504超时问题。原因是因为接口耗时过长，超过nginx配置的10秒。然后 真枪实弹搞了一次接口性能优化，最后接口从11.3s降为170ms。本文将跟小伙伴们分享接口优化的一些通用方案。
随着连锁行业门店的迅速扩张，人工处理数据的速度跟不上巨大的工作量，包括合同、人员、营运、店铺、招商等，需要一整套系统进行统一管理：
合成橡胶产业作为国民经济的重要基础产业，其需求非常之广泛，为人们日常生活不可或缺的产品。近几年来，合成橡胶行业得到不少发展，细分行业稳中有升，但同时，合成橡胶行业也还存在产业结构不佳，企业小而分散，抗竞争及风险能力差，业务效率不高等问题。
大海：嗯，要深入学习M及函数部分，的确需要更加深入了解PQ里的数据是怎么构成的。我们还是先拿个简单的例子来看一下吧。
导读：本文由京东零售大数据架构师李海波老师贡献。李海波老师从2016年开始在小米和京东负责商业智能和多维分析，推动了多个OLAP组件在公司落地，积极参与内核研发是Apache Doris和ClickHouse的贡献者，曾在百度等公司长期负责广告和搜索相关架构，毕业于华中科技大学计算机专业。
访问者，就像我们去别人家访问，或者别人来我们家看望我们一样。我们每个人都像是一个实体，而来访的人都会一一的和我们打招呼。毕竟，我们中华民族是非常讲究礼数和好客的民族。访问者是GoF23个设计模式中最复杂的一个模式，也是各类设计模式教材都放在最后的一个模式。先不管难度如何，我们先看看它的定义和实现。
近期比较流行的低代码开发平台一词，其实也可以称作是快速开发平台。快速开发平台的目的是将可重复性的编程工作用平台实现，将开发人员从没有技术含量的增删改查开发中解放出来，做更有价值的开发工作，比如业务建模、数据库设计、流程设计、API核心开发、业务逻辑开发等工作。
上一部分已经讨论过，如何搭建开发和测试环境，以及如何初始化CEMAPI，再继续这一部分的讨论之前，我们先要澄清几个概念。第一个是会话（Seesion），相信开发网络应用的朋友都不陌生，为了提高通讯效率降低通讯开销，有时候我们需要再目标与本地之间创建一个通道，在通道创建之初，目标与本地先做一些列的响应和请求确认两边的身份，当通道建立以后，目标与本地之间的通讯过程中就不再涉及两边的身份确认，这通常目标与本地之间的建立的通道，通常被称作会话，也就是Session。在使用Cemapi读取短信之前，应用程序也需要与设备上的信息（邮件）系统之间建立一个Session，用以 确认双方的身份，这是采用Cemapi读取短信的第一步。第二个概念是短消息（邮件）仓库（MsgStore），在WM中，邮件和短消息是属于一个系统的，Session建立了与这个系统之间的连接，然后必须告诉系统，我们的程序是要对邮件功能进行操作，还是要对短信功能进行操作，通过调用相应的函数（后面会介绍），MsgStore会指向我们需要操作的短信或邮件的仓库上。第三个概念是信箱，或者叫文件夹（Folder），当获得了指向一个具体仓库的MsgStore以后，下一步就需要获取具体的信箱（文件夹）了，比如当程序确定了希望对收件箱还是发件箱进行操作以后，Folder将会指向我们想要操作的具体的信箱。
管理员无需编程基础便能快捷地定义出符合本单位需求的各项工作流程，协同办公平台流程定义项目丰富，能够规范企业业务流程，发挥企业各种资源及系统的最大效能。流程定义主要包括流程的基本属性、节点定义、相关表单、审核常用语、流程归档。
在本章节中，我们将罗列 Doris 一些常用的高级特性，帮助用户对 Doris 有一个更全面的了解。
智慧平台监测主机能够方便、实时查看到各智能设备或子系统的所有运行参数和运行状态。系统现场采集信号和数据，传给智慧平台主机。具体设计：
其中myAccount.go中调用utils包中的函数；utils.go实现记账软件的一些相应的功能；
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
