「13章」Flink 从0到1实战实时风控系统Flink 核心技能实操环境搭建在进行 Flink 开发之前,需要先搭建好开发环境。...) .startNewChain() .keyBy(value -> value.f0) .sum(1);使用异步 I/O:对于涉及到外部存储(如数据库、文件系统
摘要:本文作者彭明德,介绍了钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎,精确识别羊毛党以防营销预算流失。...除了数仓的分析场景以外,钱大妈面临着业务系统中的风控需求,例如每季度的营销费用中被不少的羊毛党薅走正常用户的利益,其中羊毛党一方面可能导致用户的口碑下降,另一方面也会影响原有的活动运营预算迅速攀升从而导致资损...钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎,精确识别羊毛党以防营销预算流失。...图一:钱大妈实时风控流程示意图 二、业务架构 钱大妈风控业务架构如图二所示总共分为四个部分:事件接入、风险感知、风险应对、风险回溯。...图六:社区Flink动态CEP规则表 五、回顾展望 基于 Flink 的实时风控解决方案已接应用于钱大妈集团内部生产环境,在此解决方案里未引入新的技术组件和编程语言,最大化复用 Flink 资源实现实时风控场景需求
2010加入携程,参与了携程结算平台、风控系统的开发,对系统架构、流式数据处理等有比较深入的研究。...目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步,经过五年的不断探索与创新,已经可以有效覆盖事前、事中、事后各个环节。...一、Aegis系统体系 ? 主要分三大模块:风控引擎、数据服务、数据运算、辅助系统。 风控引擎:主要处理风控请求,有预处理、规则引擎和模型执行服务,风控引擎所需要的数据是由数据服务模块提供的。...数据运算所需的数据来源主要是:风控Event数据(订单数据、支付数据),各个系统采集来的 UBT、设备指纹、日志数据等等。 除了这些,风控平台还有非常完善的监控预警系统,人工审核平台以及报表系统。...由于携程的业务种类非常多,而且每种业务都有其特性,在进入风控系统(Aegis)后,为了便于整个风控系统对数据进行处理,风控前端有一个适配器模块,把各个业务的数据都按照风控内部标准化配置进行转换,以适合风控系统使用
金鹏汽车金融大数据风控系统主要基于大数据科技、决策树规则引擎、深度学习等多项核心技术,有效针对新车贷款、二手车贷款等业务,提高风控效率。...的产品投递 1、产品名称 金鹏汽车金融大数据风控系统 2、所属分类 消费金融 金融科技·风控、征信、反欺诈、智能定价 3、产品介绍 金鹏汽车金融大数据风控系统一站式完成车贷审批流程。...4、应用场景/人群 车贷风控场景,审批员或客户经理在“金鹏”系统中提交贷款申请,完成车贷审批流程。...6、产品优势 金鹏汽车金融大数据风控系统风控能力行业领先。秒速审批,一站式低成本。精准风控,近100%覆盖权威有效。自动定价,自动决策引擎定价,差异化匹配资质,高体验。...金鹏汽车金融风控系统一站式解决预审批风控难题,基于大数据科技、决策树规则引擎、深度学习等多项核心技术,提高车贷行业风控能力,给予更准确、更效率、更便捷的风控体验。
综合来看,金融的底色,是金融科技区别于其他互联网模式的最为本质的区别。一旦金融科技失去金融的底色,那么,它就变成了一个纯粹的科技概念,同其他的互联网模式并无两样。...结语 或许,向实,才是金融科技的本来面目,只是玩家们在那样一个特殊的背景下没有选择它而已。 或许,向实,才是金融科技的原始奥义,只是玩家们在那样一个特殊的背景下没有选择它而已。...或许,向实,才是金融科技的内在要求,只是玩家们在那样一个特殊的背景下不愿意承认而已。 或许,向实,才是金融科技的终极归宿,只是玩家们在那样一个特殊的背景下没有找到方法而已。...无论如何,现在的金融科技,业已回归到了向实的道路上。这是最值得庆幸的。有了这样一个好的开端之后,我们完全有理由相信后平台经济时代金融,依然可以有新的作为,依然可以继续呈现出勃勃生机。...我们经历过金融科技的「向虚而亡」,我们同样正在见证着金融科技的「向实而生」。 这好像是一场金融科技的轮回,但这何尝不是一种金融科技的必然? —完—
作者简介 刘江,携程金融管理部风险管理总监,负责携程集团的全面风险管理工作。...性能和复杂度可以兼得 携程的风控系统,和大部分第三方支付平台一样,也是以实时风控系统为主: 支付环节一般留给风控校验的时间不会超过1s,业务风控点上更是希望风控能在100ms内就能通过;对性能的追求,也是对极致用户体验的追求...在实时风控场景里大量部署复杂模型,使模型也能和规则一样能直接拒绝交易;平均来看、执行一个模型以及相关的变量计算所需的资源可能与200条普通规则相当,对系统的架构和性能都是很高的挑战。...携程风控架构变迁简史 ? 携程自建风控系统开始于2011年左右,直到2015年正好赶上公司技术栈从.Net往Java平台转变,风控系统也迎来了一次完全的重写。...每天风控收集上来的数据超过50亿条,其中超过1亿左右的请求需要风控实时校验风险并返回给业务系统当前操作是否可以继续。
这要求风控系统一定要有实时性。本文就介绍一种实时风控解决方案。 1.总体架构 风控是业务场景的产物,风控系统直接服务于业务系统,与之相关的还有惩罚系统和分析系统,各系统关系与角色如下: ?...该系统有三条数据流向: 实时风控数据流,由红线标识,同步调用,为风控调用的核心链路; 准实时指标数据流,由蓝线标识,异步写入,为实时风控部分准备指标数据; 准实时/离线分析数据流,由绿线标识,异步写入,...2.1 实时风控 实时风控是整个系统的核心,被业务系统同步调用,完成对应的风控判断。 前面提到规则往往由人编写并且需要动态调整,所以我们会把风控判断部分与规则管理部分拆开。...前边提到,做规则判断需要事实的相关指标,比如最近一小时登陆次数,最近一小时注册账号数等等,这些指标通常有一段时间跨度,是某种状态或聚合,很难在实时风控过程中根据原始数据进行计算,因为风控的规则引擎往往是无状态的...Flink 把汇总的指标结果写入 Redis 或 Hbase,供实时风控系统查询。两者问题都不大,根据场景选择即可。
摘要:本文整理自阿里云开发工程师耿飙&阿里云开发工程师胡俊涛,在 FFA 实时风控专场的分享。...开发了相关代码并跑起作业后,遇到 d1、a1、b1、b2、d2、c1 的事件流,Flink CEP 就能找到其中的 a1、b1、b2、c1 这一次匹配,之后用户就可以在作业中针对这次匹配做出处理,比如发送报警到下游系统等...我们这里展示三个典型场景: 第一个场景,实时风控。
实时有效的数据对于风险评估结果影响也很大,数据是有时间价值的,滞后的数据会影响评估结果,不能反映实时风险变化情况。...相对于传统金融来讲,互联金融面对的客户风险较高,其风控面临的挑战更大,对数据风控对要求就会更高。 三、互联网金融行业的风控挑战 中国的互联网金融企业愿意从美国挖一些风控人才来提高自身风控水平。...在互联网金融领域,大多数互联网金融公司没有接入人行征信系统,无法拿到客户全维度信用信息,例如客户财产、学历、收入、贷款、金融机构交易信息等信息。...企业利用大数据的风控能力,实时输出风险因子信息,为金融企业提供实时风险管理视图,提高风险管理的及时性。...大数据风控的劣势: 还是要强调一下,信用风险评估最好的数据还是金融数据,就是人行征信系统里的数据,大数据风控只是一个补充,不能够完全替代传统的信贷风险管理。
图2 智能风控发展趋势 三 普惠金融智能风控关键技术 智能风控系统运用人工智能技术实现对申请人的反欺诈和全流程自动化审核与监控,其贯穿贷前贷中贷后整个流程,主要包括以下几个步骤: (一)产品确定 如大额抵押贷...四 普惠金融智能风控发展路径建议 目前,国内大部分商业银行对智能风控系统的建设尚处于初级阶段,即线下为主,线上为辅。...、腾讯云等已成型的智能风控系统公司的技术产品,对银行内部风控系统进行改良。...就国内商业银行普惠金融的智能风控系统的建设发展,我们提供如下几点思路。...从长远来看,智能风控已不再仅仅是数据、模型和系统三者的配合形成的智能,它需要更多地与普惠金融的业务创新和管理模式变革配合起来。
风控建模的技术方案 1 逻辑回归模型 在银行的传统评分卡建模中,应用的也是逻辑回归模型。逻辑回归本质上是一个线性分类模型。...对于金融科技公司在建模所遇到的大量的弱特征,如何挖掘多个特征之间的互补性,产生组合的分箱特征是一个技术挑战。...一方面,深度学习模型都有很高的模型复杂度,需要大规模的样本数据,而风控领域要获取大规模的样本数据的成本极高。...总之,金融风控模型是一个既传统又新鲜的技术问题。银行的风控模型已经随着银行业的发展应用了数十年。...而互联网金融面临的如何组合大量的弱特征数据对于用户的逾期行为给一个准确的预测,是一个新出现的技术课题,技术方案也在快速的迭代演进中。
导语 随着部门在业务安全领域的不断拓展,围绕着验证码、金融广告等服务场景,腾讯水滴作为支撑业务安全对抗的实时风控系统,上线的任务实时性要求越来越高,需要支撑的业务请求量也随之增加。...对于业务快速上线和资源快速扩缩容的需求,且公司自研上云项目往全面容器化上云方向推进,水滴风控平台开始进行自研上云的改造。...水滴后台架构 水滴平台主要是用于业务安全对抗的高可用、高性能、低延时的实时风控策略平台,提供一系列的基础组件给策略人员进行构建策略模型,能够帮忙策略人员快速地完成策略模型的构建和测试验证。...水滴系统架构如下图所示: 水滴实时风控平台系统主要由配置处理模块和数据处理模块两部分组成。 配置处理模块主要由前端 web 页面、cgi 、mc_srv 和 Zookeeper 等组成。...,我们将指标监控系统由 Monitor 监控系统改造为智研监控系统。
2010加入携程,参与了携程结算平台、风控系统的开发,对系统架构、流式数据处理等有比较深入的研究。...目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步,经过五年的不断探索与创新,已经可以有效覆盖事前、事中、事后各个环节。...一、Aegis系统体系 ? 图1 主要分三大模块:风控引擎、数据服务、数据运算、辅助系统。 风控引擎:主要处理风控请求,有预处理、规则引擎和模型执行服务,风控引擎所需要的数据是由数据服务模块提供的。...数据运算所需的数据来源主要是:风控Event数据(订单数据、支付数据),各个系统采集来的UBT、设备指纹、日志数据等等。 除了这些,风控平台还有非常完善的监控预警系统,人工审核平台以及 报表系统。...由于携程的业务种类非常多,而且每种业务都有其特性,在进入风控系统(Aegis)后,为了便于整个风控系统对数据进行处理,风控前端有一个适配器模块,把各个业务的数据都按照风控内部标准化配置进行转换,以适合风控系统使用
12月1日晚间,卓翼科技(002369.SZ)发布公告称,公司控股股东、实控人夏传武因涉嫌内幕交易、操纵证券市场罪,经深圳市中级人民法院批准,于12月1日被深圳市公安局执行逮捕。...资料显示,夏传武生于1973年,2004年起任职卓翼科技,2014年初成为卓翼科技实控人。而夏传武被抓主要以与2018年公司重组期间内幕交易有关。
作者:housecheng 腾讯WXG工程师 |导语 解决金融风控数据监控“开发门槛高”“重复工作多”的痛点,实现PSI计算性能十倍速提升。...背景 在金融业务上,质量和稳定是生命线,我们需要对所有已经上线的风控要素,如策略、模型、标签、特征等构建监控。...在过去,我们部署监控的方式为: 风控要素负责同学在要素上线前,通过spark\sql完成对监控指标的运算并例行化; 将监控指标运算结果出库mysql\tbase,用于指标的展示和告警; 告警系统轮询指标是否异常...整体设计 系统交互视图 ? 与统一监控计算与检查工具交互的主要有接入方和告警系统,所有的监控由接入方发起,接入方可以是特征、标签、模型、策略的兜底检查同学,也可以是具体业务同学。...小结 针对金融风控要素监控的“开发门槛高”“重复工作多”等问题,本文提出了“统一监控计算与检查工具”这一解决方案,本文详细论述了该方案TaskMaker、 Calculator、 Checker等各个模块的设计实现
金融科技,找到数实融合的新方式 如果说,金融科技让人们看到了数实融合的新曙光的话,那么,它最值得我们去关注的地方则是它找到了数实融合的新方式,并且真正将人们带入到了数实融合的新时代。...正是因为如此,金融科技,才能够担纲起实现数实融合的新通路的角色。 以往,谈及数实融合,玩家们更多地是基于表层的角度来思考和看待的。...金融科技,正是为数实融合找到了传统模式之外的新方式。...在我看来,金融科技通过这样一种方式所找到的虚实融合的新路子,才是真正意义上的数实融合的新通路。...透过蚂蚁、腾讯、京东的实践,我们越来越多地看到金融科技正在开启数实融合的大门,开始通过金融科技来寻找数实融合的新通路。事实上,金融科技是找到了数实融合的新通路的。
SpyNote.A 和 SpyNote.B 与最新变种 SpyNote.C 的主要区别就是活动目标,SpyNote.C 变种冒充汇丰银行、德意志银行、Kotak 银行、BurlaNu 银行等众多知名金融机构...这些应用程序会冒充系统通知、Google Play 商店。上面都是共享 C&C 服务器的应用程序。...攻击者利用 Sellix 支付系统出售 CypherRat,该系统使用加密货币进行交易来防止跟踪。...卓越的能力 SpyNote.C 恶意软件变种执行的独特功能,在 2022 年具有远控功能更的恶意软件中被识别出来。
在政府发布的相关政策中,不少都提及了供应链金融。2月19日,工信部发布了关于运用新一代信息技术来支撑服务和疫情防控的通知,其中第11条就写到了要运用基于生产数据的供应链金融来保障企业的复产复工。...国办鼓励有条件的银行业的相关机构开发供应链平台,通过核心企业或政府部门的信息系统进行对接联通,尤其鼓励线上的方式来为客户提供公众服务。可想而知,供应链金融在未来的供应链行业中有明显的支撑作用。...很明显核心企业的平台在此类场景的配合、资产的把控和风控的能力上具有一定的优势。 往深处讲,再一个就是金融机构。金融机构有更多的供给层面的资金,可以形成快速有效低成本的供给,甚至还具有一定的风控能力。...以审核整理发票为例,传统做法可能会线下交接或转让,但是现在我们可以直接将发票拍成照片,再通过小程序上传,系统后台会和国税局做直接的连接对发票进行真实性的校验。...---- 在后续课程中我们会继续为大家介绍 腾讯云对供应链金融科技解决方案、产业风控的相关内容 感兴趣的小伙伴可以点击“阅读原文”观看完整视频噢!
领取专属 10元无门槛券
手把手带您无忧上云