首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

干货:Spark在360商业数据的应用实践

Spark作为新一代大数据处理的计算平台,使得我们可以用Spark这一种平台统一处理数据处理的各种复杂需求,非常好的支持了我们目前现有的业务。...2 以Spark为核心的数据平台结构 ? 商业数据的数据平台架构如上图所示,Spark在其中起到一个非常核心作用。...二 Spark的几种典型应用 1 基于SparkStreaming的实时处理需求 商业数据内部有大量的实时数据处理需求,如实时广告收入计算,实时线上ctr预估,实时广告重定向等,目前主要通过SparkStreaming...广告主先选中一分种子用户,根据种子用户的标签再定位扩展一分其他用户。比如如果种子用户选择的都是“化妆品-护肤”这个标签,那么根据这个标签可以找到其他的用户,作为扩展用户。...关于360商业数据: 360商业数据专注于360自有海量数据的深度挖掘及分析,在保护个人隐私及数据安全前提下,多维分析用户需求和偏好,运用数据挖掘和人工智能技术,以及场景化应用全面提升商业价值,已形成包括

76940

【大牛经验】搜狗商业平台Java技术实践

搜狗商业平台Java技术实践 Java自1995年问世以来,已历经20多年岁月。20年来,IT技术风起云涌,Java始终以其可移植性、跨平台性、生态系统完备性等特点成为最主流的开发语言之一。...Java生态圈非常庞大而丰富,我们在长期的实践过程中,自主或基于Java开源组件进行二次开发和优化,构建了搜狗商业平台完整的Java技术框架,如图1所示。 ?...图1搜狗商业平台Java技术栈 在基础组件层,我们直接使用了一些业界著名的框架和类库,比如IoC框架Spring、日志Log4J等;同时也基于一些框架进行了二次开发,比如基于Redis提供了分布式会话和分布式缓存...在基础服务层,提供了认证、授权、配置、分布式任务调度、消息、图片、短信和邮件等多种基础服务。 下面分别介绍我们在数据库分库分表框架、分布式任务调度平台和分布式RPC框架上的实践。...在此过程中,Java及其生态系统有效地进行了支撑,成为了搜狗商业平台Java生态系统的基石,显著降低了开发和维护成本,提高了可维护性和系统健壮性。

1.1K100
您找到你想要的搜索结果了吗?
是的
没有找到

数字化转型——如何发展平台商业

如何发展平台商业平台企业创造价值并不是简单地通过销售产品或服务,而是通过赋能交易和创造自身生态系统。...因此,基于平台商业创造建立一个可以配套服务的投资网络;通过各种方式API和对系统进行设计,从而促进交易;往往支持开放共享系统,而不是封闭的系统;以及,开发各种机制,来对可能利益冲突的合作伙伴开发管理。...我们将深入探讨在构建基于平台商业时间,公司所坚持的一些主要挑战。 现代时尚 1、自己要启动这个过程,这个公司首先需要创造良好的产品和服务的渴望——加入,就没有什么产品销售的话,就不会吸引潜在的买家。...平台业务具有开放的网络效应,可以形成良性循环。为了鼓励用户使用制造多种网络效应,公司开始采用免费增值模式(Freemium Model),在这个模式下,产品的基础版本对客户是免费的。...免费的基础产品有助于消费者使用,一次形成庞大的用户群,从而产生自己的网络效应。随着时间的推移,使用基础款产品会促进客户升级到付费的高级产品。

32520

探讨自然语言处理的商业落地:从基础平台到数据算法 | CCF-GAIR 2018

我们还看到另外一个方向,就是做基础技术平台,因为它足够基础,可以面向多个行业的客户提供产品,订单相对比较小,但客户数更广,这个方向也可以做出规模化盈利的效果。...结合我们团队的特点,包括我们对于产业的判断,还有一点就是 NLP 的技术难度非常大,前面几位老师从学术界作出的效果,因为任务非常多,很多指标在 70、80% 的阶段,整体基础技术平台的很多任务没有达到理想效果...,所以云孚科技先选择把基础技术平台做好,创业公司的核心不是提出新的模型和算法,我们是结合学术界最好的模型和算法,从工程、数据角度,把效果优化到理想程度。...从分词往上,很多基础的 NLP 任务都有很大的优化空间,所以这也是云孚科技目前发力的方向,先把 NLP 基础技术平台做好做扎实,再在上面搭建上层的应用。...熊琨:我们在商业化上还是比较初步的,更多的还是从研究的角度考虑这件事情,因为我们已经开始做商业化,比较困难,一方面是比较通用的问题,目前自然语言处理的问题是如果我把算法做得特别深,往往有普适性的问题,如果做平台

78740

5G消息的商业模式(MaaP平台

随着网络快速的更新迭代,移动通信经历了2G、3G、4G到5G的高速发展,人们不再满足通过传统的运营商基于码号技术提供的传统短信文本消息的交流形式,进而使得RCS消息应用而生(或称5G消息),RCS消息是由基于IMS架构对基础通信业务的整合和增强...根据工信统计,网络登录和用户身份认证等安全服务不断渗透,大幅提升短信业务量,2019年,全国短信业务量比上一年增长37.5%,增速较上年提升23.5百分点,移动短信收入完成392亿元。...商业模式。...: MaaP平台上可以构建企业服务号,为企业、商户、机构提供消息生态的私域运营阵地,以消息内容和用户互动为运营特色,将用户沉淀为企业的粉丝,并通过消息触达用户,帮助企业提升用户粘性,提升企业的品牌价值和获得的商业传播及价值...; MaaP平台的应用场景: 结合MaaP平台的富媒体消息的绝佳体验和智能交互等功能及产品优势,创新企业对用户的消息服务,提升企业的核心竞争力,MaaP平台的应用可以在很多行业场景中进行探索商业模式,

3K61

场景化金融时代的平台建设 | TW商业洞见

科技即商业 TECHNOLOGY IS BUSINESS 某个月初周末的清晨,老李很早就起床了,刚发了退休金,银行排队的人肯定不少。...在组织架构上,各大国有行、股份制银行都设立了自己的互联网金融;在客户渠道上,各种电子银行、移动银行、资产交易平台纷纷上线;在产品设计上,无论是对融资端还是投资端,都越来越倾向于互联网短平快的特点。...以互联网金融平台为例,据统计,仅2015年12月份,新增问题平台106家,而2015年全年问题平台累计逾1000家。...在场景化金融平台上,网站多用于运营方实力展示、给投融资客户增加信任感; 微信:天然的社交属性,最适合用户圈子的营造和病毒式营销,用于平台推广。...在此基础上,利用有效的信息平台,对整个企业乃至合作伙伴的资源进行线上线下的深度整合。 在小李所生活的时代,已经没有所谓金融和非金融的界限。

1.1K50

【BDTC 2017讲师专访】彭冬:微博商业基础大数据平台(D+)的架构演进

彭冬,微博广告技术专家,目前主要带领基础架构团队,负责商业基础大数据平台(D+)及数据可视化平台(Hubble)、智能运维体系等广告基础设施建设,关注于大数据、人工智能、智能运维等方向。...目前主要带领基础架构团队,负责商业基础大数据平台(D+)、数据可视化平台(Hubble)、智能运维体系等广告基础设施建设,关注于大数据、人工智能、智能运维等方向。...CSDN:目前微博的商业基础大数据平台(D+)的架构是怎样的? 彭冬:这里也简单讲一下微博商业基础大数据平台(D+)的定位和设计目标。...其设计目标是作为最基础最底层的基础平台,支撑任何业务方对商业数据的分析需求。D+的架构技术栈如下图所示。 ? 图1 D+整体架构技术栈 简单来说,D+分为数据层、计算层、中间层和应用层。...2.0版本(2017-) 在2.0版本中,我们对D+做了重新定位,D+作为底层基础数据平台,为各个业务方提供数据存取、数据分析、数据挖掘等基础数据支撑。

1K50

七个问题透视百度智慧商业平台

“智慧商业平台”与百度Inside硬件平台、百度开放平台平台本质一样,均是整合内部优质资源,面向行业提供一揽子方案,不过,“智慧商业平台”更加庞大宏伟。 1、企业可以用“智慧商业平台”做什么?...“百度智慧商业平台”是集合数据和技术的基础设施,百度预测、百度大数据引擎、百度司南、百度推荐、百度黄金眼等大数据产品被整合进去,鹰眼、慧眼等LBS产品被整合进去,一起提供给商家,结合企业自身情况落地还是要靠软件开发商...百度地图已是中国第一大LBS平台,PC端近乎垄断,移动端份额过半,这意味着百度拥有雄厚的LBS用户和数据基础,百度又通过入股室内定位厂商IndoorAtlas等方式加强室内定位技术的前沿布局,在未来百度在室内室外的定位能力是十分可观的...百度Dulife智能健康设备平台—智慧商业平台—医疗机构,百度交通大数据业务—智慧商业平台—快递公司,百度消费业务—智慧商业平台—金融机构,小度i耳目智能摄像头—智慧商业平台—地产和餐饮机构……不少百度业务均可以通过智慧商业平台与企业连接起来...本质上百度只是做了一个通用平台以提供基础能力和独家资源,还是处于一个十分轻量级的位置,而不是陷入到行业或者企业细节中的外包模式,这应该不是百度想要的和擅长的。

55160
领券