对其日志进行的分析其实是一种很常见的应用场景，对应用安全来说，WAF，IDS等产生告警日志是安全人员每天必看的日志。所有许多安全团队会将所有安全产品的日志汇聚到一个平台，从而诞生了安全日志平台。...2.业务接口日志→服务器本地某目录→通过syslog同步到安全日志平台 ? 3.日志格式示例见附录 日志审计平台功能 1.敏感数据定义 重要关注数据，如：身&&份证，手机号，银&&行卡等。...安全日志分析平台提供了数据操作和导出时的审计工作。...（ps：也可以对接DLP规则引擎，自动更新离职人员监控名单） 2.安全攻防能力扩展 安全日志平台可以接受不同类型的日志，也可以实现不能的安全策略从而发现更多的风险和异常，严格意义上这个可能脱离了数据安全的范畴...，使其逐步演进为一个安全基础监控平台和安全大数据平台。
国标视频云服务EasyGBS支持设备/平台通过国标GB28181协议注册接入，并能实现视频的实时监控直播、录像、检索与回看、语音对讲、云存储、告警、平台级联等功能。...平台部署简单、可拓展性强，支持将接入的视频流进行全终端、全平台分发，分发的视频流包括RTSP、RTMP、FLV、HLS、WebRTC等格式。...有用户提出需求，在Linux服务环境中，登录EasyGBS会报安全漏洞的错误，希望我们能对此细节进行优化。...在原先的EasyGBS项目中，登录使用了Get请求，虽然进行了加密处理但存在安全隐患，现在需要将原先的Get请求更换成Post请求，将密码加盐处理，并增加登录验证。...登录验证的功能有利于增强平台的安全性，可以有效防范不法分子对网络进行攻击等行为，保障平台的视频等数据资源隐私性与安全性。
前言 自从2018年大数据平台升级，Hadoop/Kafka从此被Kerberos立体环绕，虽然知道kinit/kdestory/klist命令，但是每次执行都感觉云里雾绕，尤其是对接租户的时候，多次陷入尴尬的境地...于是决定去靠自己理解一下Kerberos，脱离这种没有安全感的日子。 什么是kerberos？...在大数据平台的应用中，可以给不同的资源添加不同的权限，例如HDFS的访问、kakfa的topic读写，必须带有对应权限的principal和对应的"密码"去访问。
一、概述 在大数据平台建设初期，安全也许并不是被重点关注的一环。大数据平台的定位主要是服务数据开发人员，提高数据开发效率，提供便捷的开发流程，有效支持数仓建设。大数据平台的用户都是公司内部人员。...数据本身的安全性已经由公司层面的网络及物理机房的隔离来得到保证。那么数据平台建设过程中，需要考虑哪些安全性方面的问题？...最后，大数据平台的目标是赋能数据开发人员，提高数据开发效率，而安全管理必然会降低数据平台的便利性。如何平衡安全和便利性的关系，尤为重要。...有赞大数据平台安全建设是在大数据平台本身的发展以及数仓元数据建设的过程中不断演进的。概括起来可以分为三个阶段。...五、未来展望 大数据平台的安全建设并不是一项孤立的工作，而是随着大数据平台支持的业务量和业务种类越来越多，与大数据平台本身的进化而一起发展的。
安全平台
电商平台备战促销季的运维秘诀——高可用服务层 整体架构 业务发展初期主要以业务为导向，一般采用 「ALL IN ONE」的架构方式来开发产品，这个阶段用一句话概括就是 「糙猛快」。...电商平台备战促销季的运维秘诀——高可用服务层 具体拆的方式，主要根据业务领域划分单元，进行垂直拆分。...电商平台备战促销季的运维秘诀——高可用服务层 服务降级 服务降级主要解决资源不足和访问量过大的问题，比如电商平台在双十一、618 等高峰时候采用部分服务不提供访问，减少对系统的影响。...电商平台备战促销季的运维秘诀——高可用服务层 刚刚说了降级的方式，那我们操作降级的时候有哪些注意点呢？...但是如果公司没有配置中心的话，可以封装一个 API 接口来切分，不过该 API 接口要做成幂等的方式，同时需要做一些简单的签名，来保证其一定的安全性。
前言 OpenSOC是思科在BroCON大会上亮相了的一个安全大数据分析架构，它是一个针对网络包和流的大数据分析框架，是大数据分析与安全分析技术的结合, 能够实时的检测网络异常情况并且可以扩展很多节点，...宜信结合自己的实际情况，同样实现了一套集采集、分析和存储为一体的安全数据平台——流沙平台。...威胁情报对于企业安全的作用越来越大，能够帮助企业发现潜在的安全问题 对于流沙平台来说，一方面，将内部的告警转化为内部情报，另外一方面将内部情报和外部情报结合形成宜信独有的威胁情报，并将其反哺给日志和流量...，帮助企业安全分析人员更方便的进行数据分析和决策。...通过流沙平台，安全工作人员可以将大部分精力专注于数据分析上，弥补了商业安全产品的不足，更好的帮助安全防护同学全面的了解企业的安全状态。流沙平台不仅仅是一个数据平台，更是宜信现有安全措施的重要补充。
年底了，很多电商公司、零售企业都会开展如火如荼的大促销活动，那么如何评估产品促销带来的价值呢？...下面以一家电商平台的数据为例，目前能够使用的数据：有不同产品第一季度总销售额、销售利润和产品相关流水的销售利润的数据： ?...通过上图，我们可以综合观察第一极端所有产品的销售利润状况，获得如下信息： 1、净利润为负的产品很多，折价促销确实成为了持续性的习惯。...2、大折扣促销的产品数量很多。第二象限中横轴0点左边圆的面积相对较大，并且颜色为红，说明很大销售额的产品都在赔钱，这些产品的累计销售额很大，但都是大折扣促销的产品，以至于利润都为负。...Excel是使用最为广泛、最为便捷的办公软件，而且它的数据分析和挖掘功能功能十分强大，能够快速完成所有的数据清洗的过程，能够快速建立分析模型，并且快速运行得出结果，是做数据分析必备的工具。
- END -
1、大数据分析在企业安全管理平台上的应用 目前应用于大数据分析的主流技术架构是Hadoop，业界在进行大数据分析时越来越重视它的作用。...基于前面介绍过的传统企业安全管理平台面对的挑战和局限性问题，可以把Hadoop技术应用在企业安全管理平台中，发展成为新一代的企业安全管理平台，实现支持超大数据量的采集、融合、存储、检索、分析、态势感知和可视化功能...2、大数据在信息安全上的应用 大数据在信息安全上的应用主要表现为，数据的爆炸性增长给目前的信息安全技术带来了挑战，传统的信息安全技术在面对超大数据量时已经不再适宜，需要基于大数据环境的特点开发新一代安全技术...3、大数据安全分析 大数据安全分析，顾名思义，就是指利用大数据技术来进行安全分析。...在网络安全领域，大数据安全分析是企业安全管理平台安全事件分析的核心技术，而大数据安全分析对安全数据处理效果主要依赖于分析方法。
上篇文章《漫谈大数据平台架构》（阅读原文查看）大家应该对大数据平台有了一个整体架构上的理解和认识，作为姊妹篇，本篇着重讲解大数据平台安全风险与建设。 大数据平台安全伴随着大数据平台而生。...（2）大数据平台安全机制缺陷：Hadoop生态架构在设计初期对用户身份鉴别、访问控制、密钥管理、安全审计等方面考虑较少，并且大数据应用中多采用第三方开源组件，对这些组件缺乏严格的测试管理和安全认证。...（4）数据量大、潜在价值高，极易成为攻击目标：大数据平台处理环节多，需要针对数据采集、传输、存储、处理、交换和销毁等生命周期各阶段进行安全防护，在不同阶段采取适合的安全技术保护机制。...4）安全技术体系：公司开展大数据安全防护建设相关要求和实施方法，体系设计涵盖数据流转各环节数据安全防护通用技术要求、大数据平台各类基础设施及应用组件安全基线配置能力要求等。...5）加密：应对数据加密。 三、结束语： 综上所述，结合笔者自己的实践，大数据平台安全建设应根据平台规模、大数据安全建设人员投入数量、历史案件比例等因素做调整，最合适的是才是最好的。
文 | 群演 on 大数据 一、概述 在大数据平台建设初期，安全也许并不是被重点关注的一环。大数据平台的定位主要是服务数据开发人员，提高数据开发效率，提供便捷的开发流程，有效支持数仓建设。...大数据平台的用户都是公司内部人员。数据本身的安全性已经由公司层面的网络及物理机房的隔离来得到保证。那么数据平台建设过程中，需要考虑哪些安全性方面的问题？...最后，大数据平台的目标是赋能数据开发人员，提高数据开发效率，而安全管理必然会降低数据平台的便利性。如何平衡安全和便利性的关系，尤为重要。...有赞大数据平台安全建设是在大数据平台本身的发展以及数仓元数据建设的过程中不断演进的。概括起来可以分为三个阶段。...五、未来展望 大数据平台的安全建设并不是一项孤立的工作，而是随着大数据平台支持的业务量和业务种类越来越多，与大数据平台本身的进化而一起发展的。
什么是开放平台 开放平台就是将企业中的业务的核心部分经过抽象和提取，形成面向企业或者面向用户的增值系统，为企业带来新的业务增涨点。 因为是企业的核心业务能力，所以平台的安全性就成为重中之重。...安全方案 普通的接口使用Token令牌的方案就可以保证，但是对于一些敏感的接口就需要有针对性的处理，比如使用https。...签名的设计一般是通过用户和密码的校验，然后针对用户生成一个唯一的Token令牌， 用户再次获取信息时，带上此令牌，如果令牌正确，则返回数据。...根据用户的信息和服务器的规则生成JWT Token 服务器将该token以json形式返回（不一定要json形式，这里说的是一种常见的做法） 用户得到token，存在localStorage、cookie或其它数据存储形式中...总结 关于开放平台其实还有很多需要切入的点，此处给出的安全方案只是一个示例，可以在此基础上进行二次开发，实现企业级的安全方案。
本期作者 李昌海 哔哩哔哩资深开发工程师 韩志华 大数据平台工具负责人 1.序言 Berserker是B站一站式数据开发及治理平台，基于常用大数据生态组件构建，满足公司内数据查询、数据分析、日常报表...Berserker主页 其中，数据安全是Berserker平台中重要的一部分，它将为公司内部 Hive、Kafka、ClickHouse、ETL任务等各种资产进行统一的数据安全管理，并为数据平台部内部的数据开发...授权 一般用户在Berserker平台进行数据安全变更操作（如：权限申请），授权结果记录在数据安全。数据安全将授权结果同步到Ranger和ClickHouse等。...2.4 里程碑 2020年7月数据安全的第一个服务权限系统从Berserker平台独立出，2022年7月，数据安全升级到2.0，中间经历了几次重大变更。 图6....主要为兼容部分第三方任务（非BSK平台上提交的任务），该任务可能未及时改用工作空间账号、而依旧使用个人账号运行 3.3 工作空间推进 3.3.1 背景 数据平台的用户的增长及业务的丰富，基于用户的数据安全模型体系难以支撑各种灵活多变业务需求
IT系统风险构成 按照等保的划分维度 云上的安全服务方式 云上安全防护的关键点 注意事项 应用与数据分离 应用集群部署 动静资源分离 云计算面临的主要安全威胁 产生安全风险的主要原因 4.阿里云安全解决方案...阿里云的服务器安全防护 阿里云的网络安全防护 阿里云的数据安全防护 阿里云的应用安全防护 阿里云的监控管理 5.安全法概要 背景 对企业的影响 对个人的影响 趋势 1.典型IT系统架构介绍 IT基础架构演讲的趋势...恶意代码防范、身份鉴别、访问控制、集中管控和安全审计等 应用和数据安全：包括安全审计、数据完整性和保密性 云上的安全服务方式 ?...云上安全防护的关键点 注意事项 ? 应用与数据分离 ? 应用集群部署 ? 动静资源分离 ? 云计算面临的主要安全威胁 可用性、完整性、保密性 ? 产生安全风险的主要原因 ?...4.阿里云安全解决方案 阿里云的服务器安全防护 ? 阿里云的网络安全防护 ? 阿里云的数据安全防护 ? 阿里云的应用安全防护 ? 阿里云的监控管理 ? 5.安全法概要 背景 ? 对企业的影响 ?
0x01 介绍 最近在做安全基线检查相关的，网上有一些代码比较零散；也有一些比较完整的项目，比如owasp中的安全基线检查项目，但是收费；还有一些开源且完整的，比如lynis，但是不符合我的要求。...我的要求如下： 能够对操作系统、中间件和数据库进行基线检查 脚本在系统上进行基线检查后的结果或者收集到的数据能够传输到一个服务端 服务端要做可视化展示 最终的效果是什么呢？...最好能够达到阿里云里的安全基线检查的样子，差一点的话也没关系啦。本篇文章是代码中在centos7和win2012系统中将要检查的项目，参考CIS标准而来。
北京市金融工作局、中关村银行及腾讯公司领导共同发布金融安全大数据监管平台。...腾讯金融安全大数据监管平台作为国内有影响力的金融监管平台，由腾讯金融科技业务依托腾讯安全反诈骗实验室的“灵鲲金融安全系统”搭建，主要用于防范普惠金融走向普“恶”金融，专门打击以金融创新之名行诈骗之实的黑产行为...金融安全大数据监管平台结合腾讯的大数据、腾讯安全联合实验室反诈骗实验室AI技术优势，解决克服了监管科技历来存在的“数据（全网的底层数据）”、“算法（模型能力远超一般小公司）”、“计算力（服务器计算能力）...在打击金融黑产方面，腾讯金融安全大数据监管平台能有效阻止或拦截网络黑产向线上业务运营的转移。...金融安全大数据监管平台依托微信、QQ等强大的社交平台，及腾讯安全与网络黑产势力对抗十多年积累沉淀的大数据平台，采用基于金融犯罪样本挖掘金融风险并进行数据化、可视化的方式方法，以及建立从监测、分析、模型拟定
系统的解决大数据安全，必须建设一套符合大数据平台自身特点的事后安全审计体系，以统筹解决安全威胁，并进行系统性的安全威胁消除。...通过借鉴国内外大数据平台安全体系建设经验，参考业界前沿的安全技术手段和经验，我们提出了数据安全审计层进建设体系。该体系以组织架构为基础，通过组织架构的信息需求，建立大数据安全审计框架。...该安全审计框架自底向上依次建设“内容计算层、要点审计层、目标分析层”，并在建设过程中引入AI技术，构建基于AI技术的数据安全审计平台。...引入AI+聚类算法结果复合技术 引入聚类算法并进行结果复合，对数据源进行清洗修正，提升了数据源的精确度。...实现了探测引擎的安全稳定持续可靠运行。
理解中间件 一次web访问的顺序，web浏览器->web服务器（狭义）->web容器->应用服务器->数据库服务器 web服务器 广义：提供广义web服务的软件或主机 狭义：提供w3服务的软件或主机，即...以后默认会有一个管理页面，管理员只需要远程上传一个WAR格式的文件，便可以将内容发布到网站，这一功能方便了管理员的同时也给黑客打开了方便之门，除此之外，tomcat还有一些样本页面，如果处理不当也会导致安全问题...管理后台爆破 一般tomcat后台登录口不做任何安全处理，可以无限次尝试登入。...中的帐号密码（越复杂越好） 2 升级tomcat版本 3 删除远程部署页面 Jboss漏洞与防护 Jboss简介 JBoss这是一个基于JavaEE的应用服务器，与tomcat类似的是jboss也有远程部署平台...p=1548 安全防护 1 后台登录限制IP 2 加大密码复杂度 IIS漏洞与防护 IIS简介 IIS是微软的一款web服务器，其配置不当容易产生webdav漏洞。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
