首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Spark机器学习实战 (十二) - 推荐系统实战

1 推荐系统简介 1.1 什么是推荐系统 1.2 推荐系统的作用 1.2.1 帮助顾客快速定位需求,节省时间 1.2.2 大幅度提高销售量 1.3 推荐系统的技术思想 1.3.1 推荐系统是一种机器学习的工程应用...用户ID 所推电影 Spark机器学习实践系列 基于Spark的机器学习实践 (一) - 初识机器学习 基于Spark的机器学习实践 (二) - 初识MLlib 基于Spark的机器学习实践...(三) - 实战环境搭建 基于Spark的机器学习实践 (四) - 数据可视化 基于Spark的机器学习实践 (六) - 基础统计模块 基于Spark的机器学习实践 (七) - 回归算法 基于Spark...的机器学习实践 (八) - 分类算法 基于Spark的机器学习实践 (九) - 聚类算法 基于Spark的机器学习实践 (十) - 降维算法 基于Spark的机器学习实践(十一) - 文本情感分类项目实战...基于Spark的机器学习实践 (十二) - 推荐系统实战 X 交流学习 Java交流群 博客 知乎 Github

1.1K30

Spark机器学习实战 (十二) - 推荐系统实战

1.3.1 推荐系统是一种机器学习的工程应用 1.3.2 推荐系统基于知识发现原理 1.4 推荐系统的工业化实现 Apache Spark [1240] Apache Mahout [1240] SVDFeature...用户ID [1240] 所推电影 [1240] Spark机器学习实践系列 基于Spark的机器学习实践 (一) - 初识机器学习 基于Spark的机器学习实践 (二) - 初识MLlib 基于Spark...的机器学习实践 (三) - 实战环境搭建 基于Spark的机器学习实践 (四) - 数据可视化 基于Spark的机器学习实践 (六) - 基础统计模块 基于Spark的机器学习实践 (七) - 回归算法...基于Spark的机器学习实践 (八) - 分类算法 基于Spark的机器学习实践 (九) - 聚类算法 基于Spark的机器学习实践 (十) - 降维算法 基于Spark的机器学习实践(十一)...- 文本情感分类项目实战 基于Spark的机器学习实践 (十二) - 推荐系统实战 X 交流学习 [1240] Java交流群 博客 知乎 Github

2.9K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    机器学习(二十二) ——推荐系统基础理论

    机器学习(二十二)——推荐系统基础理论 (原创内容,转载请注明来源,谢谢) 一、概述 推荐系统(recommendersystem),作为机器学习的应用之一,在各大app中都有应用。...这里以用户评价电影、电影推荐为例,讲述推荐系统。 最简单的理解方式,即假设有两类电影,一类是爱情片,一类是动作片,爱情片3部,动作片2部,共有四个用户参与打分,分值在0~5分。...下面首先就要解决用机器学习来预测打分的问题,进而讨论电影的相关性问题。...这样,对于每一个新用户,在还没进行评价之前,会预测其对每个电影的评价是均值,这也就表示给新用户推荐电影时,会按均值,把均值较高的电影推荐给用户,这个比较符合常理。...七、总结 这里的推荐系统,可以算是一个引子,只介绍了推荐系统的一些基础思想,对于真正完整的推荐系统,还有需要内容等待探索。后续我也会继续这方面的学习

    1.2K30

    自主研发、不断总结经验,美团搜索推荐机器学习平台

    内容来源:2018 年 5 月 26 日,美团点评技术专家杨一帆在“饿了么技术沙龙·第25弹【搜索推荐】”进行《Why WAI: 美团点评搜索推荐机器学习平台》演讲分享。...阅读字数:3308 | 9分钟阅读 摘要 本次分享主要介绍如何从机器学习实践过程中不断总结经验,搭建集数据处理、特征工程、模型训练、打分预测、实时监控、在线学习等步骤为一体的机器学习平台WAI,以及该平台如何赋能业务不断优化搜索推荐用户体验...美团点评的机器学习应用大部分还是围绕业务来开展,包括搜索推荐、金融、外卖、打车、广告等。 机器学习通用流程 机器学习整个流程包含几个部分。...Why 流派对比 机器学习系统可以分为平台派和工具派。...数据算法层则是向深度模型结构的可视化,还有自动机器学习的方向发展。服务层也正在考虑模型打分服务化。 以上为今天的分享内容,谢谢大家!

    2.7K51

    想快速部署机器学习项目?来看看几大主流机器学习服务平台对比吧

    日前,kdnuggets 上的一篇文章对比了三大公司(谷歌、微软和亚马逊)提供的机器学习服务平台,对于想要启动机器学习项目的公司或是数据科学新手来说,提供了非常多的指导和建议。...现在让我们来看看市场上最好的机器学习平台都有哪些服务。...什么是机器学习服务 机器学习服务(Machine learning as a service, MLaaS)包含机器学习大多数基础问题(比如数据预处理,模型训练,模型评估,以及预测)的全自动或者半自动云平台的总体定义...在本文中,我们将首先概述 Amazon,Google 和 Microsoft 的主要机器学习服务平台,并比较这些供应商所支持的机器学习 API。...这并不是如何使用这些平台的说明,而是在开始阅读平台的文档之前所需要做的功能调研。 针对定制化的预测分析任务的机器学习服务 ?

    4.3K170

    机器学习推荐系统,技术平台全面统一:火山引擎已经发动

    机器之心原创 作者:泽南 从自动驾驶到推荐系统,机器学习的开发现在都可以用统一的平台完成了。 不同机器学习任务,用统一的平台实现,速度成倍提升,GPU 调度 0 碎片,这是火山引擎最新开放的技术。...在 AI 方面,火山引擎推出了机器学习与智能推荐平台多云部署解决方案。...机器学习能力的统一和开放 火山引擎脱胎于字节跳动的技术中台,其算法工程和业务平台可分为推荐系统和机器学习平台,两者基于字节跳动统一的机器学习系统,后者又基于一套强大的计算基础设施。...让开发者获得更好体验 在原动力大会上,火山引擎全新发布的机器学习与智能推荐平台多云部署解决方案强调了开发者体验。...在部署方式上,机器学习平台和智能推荐平台支持四种不同的部署方式,包括公有云部署、VPC 部署、私有云和专属 AZ 部署。

    98610

    金融科技&大数据产品推荐:达观数据—金融平台产品及资讯个性化推荐引擎

    应用场景二:构建金融平台个性化资讯内容生态 金融平台目前都面临用户体验提升和服务生态构建的需求,达观数据提供个性化资讯推荐技术服务,围绕用户在平台的消费、投资、理财、生活等金融场景,整合采集第三方优质内容...6、产品优势 第一,达观独有专利-叠组合算法,多次获得国际算法竞赛冠军:达观业界顶尖专利算法,为客户深度调优,为企业带来最优推荐转化;达观的离线-近线-在线三层系统架构,兼顾强大算法和灵活服务;基于机器学习的重排序框架...(2)搭建金融平台知识图谱,打造网络结构化的文本数据挖掘技术服务; 基于达观数据在自然语言处理方面的研究成果,可以为金融平台打造基于AI机器学习技术平台知识图谱,让整个金融平台数据网络结构化和智能化,进而提升智能客服...(3)构建金融平台消费-投资理财-生活资讯生态化、个性化技术服务; 目前金融平台产品越来越多元化,围绕消费、生活、投资、理财、资讯、购物、活动的金融服务生态是提升平台一站式体验根本,达观数据个性化推荐引擎可快速建立多维度用户画像...,全平台精准推荐服务,也可根据平台需求采集第三方资讯内容数据,为平台构建产品、电商、资讯等生态化内容推荐服务

    3.3K50

    2021腾讯犀牛鸟精英工程人才培养计划课题介绍(上篇)

    本文推送计划中四个课题内容: 课题一场景化多模态聊天助手; 课题二面向抢占式资源的多云Kubernetes 任务调度器; 课题三基于推荐系统的高性能网络服务开发; 课题四大数据一站式研发平台。...曾参与百度多模态人工智能操作系统DuerOS研发,负责DuerOS自然语言理解系统和智能推荐引擎工程架构,参与对话式机器人开放平台(DuerOS Bots Platform)研发。...曾在才云科技负责机器学习系统底层研发,参与模型推理平台、GPU 共享技术、弹性分布式训练框架 FTLib 的开发,应用于 Clever 平台,提升整体集群的资源利用率。...本课题主要研究推荐场景下的在线服务开发,打造一个完整的推荐系统,并具有低延迟、大吞吐、高可用的特性。...课题目标 参与课题的同学可以深入了解和学习到业界前沿的大数据领域知识技能,包括研发平台理念、大数据生态组件、数据仓库等相关内容。

    1.8K20

    中关村发布促进智能机器人产业创新发展若干措施

    二、加大智能机器人前瞻布局 重点支持深度学习、智能操作系统、传感与识别、智能芯片、纳米材料等前沿技术的研发和转化,推动智能机器人与大数据、云计算、物联网等产业深度融合,大力发展人机协作、数字化车间和智能工厂等工业机器人...六、高水平建设智能机器人共性技术平台和产业促进平台 积极争取国家有关部委支持,围绕智能机器人技术研发、检验测试、成果转化、工业设计、知识产权服务、展示交流、市场应用等方面,支持建设一批共性技术平台和产业促进平台...推动智能机器人创业服务体系建设,对智能机器人专业孵化机构,优先推荐申请中关村国家自主创新示范区创业服务平台资金支持。...十二、建设国际化智能机器人展示交流平台 依托世界机器人大会永久会址,鼓励国内外机器人产业组织、企业和创业服务主体在大兴—亦庄园举办具有国际影响力的机器人创新创业大赛、技术和产业论坛、行业展会等交流活动,...;第三条、第十二条由北京经济技术开发区管委会安排资金支持。

    1.1K70

    令人心动的AI offer(八):商汤、美团、智源研究院、信通院等校招、社招与实习生

    深度学习框架研发工程师(C++) 并行计算架构师 高性能异构计算研究员(CPU/DSP方向) 机器学习平台和模型工具链研发工程师 高性能异构计算研究员(GPU方向) 高性能异构计算研究员(加速器方向)...,构建大通信、大数字化、大安全、经济政策“3+1”科研业务体系,打通决策支撑、技术研究、标准研制、检测认证、产业咨询、生态推进等全链条全环节,具备软科学研究和硬实力平台相结合的科研创新能力。...机器学习算法工程师(融合建模方向) 电力电子硬件科学家 电机控制研发 点击查看职位详情与投递简历 卡方科技 卡方科技是中国领先的数智化交易服务与金融科技专家。...享有国家高新技术企业认证、毕马威中国领先金融科技50强奖项认可,持有ISO20000、CMMI L3及100多项专利著作,卡方科技持续推进技术平台迭代、算法模型优化及机器学习在行业领域的前沿应用。...深度学习实习生 量化实习生 - 机器学习 量化研究员 量化分析师 交易系统c++开发 点击查看职位详情与投递简历 除以上职位外,上一期TalentAI推荐职位也还在招聘中,点击企业即可查看职位详情。

    96030

    腾讯云大学「学习路径—云计算、小程序、运维、人工智能」助力开发者轻松上云

    腾讯云大学面向云生态用户的一站式学习成长平台,提供丰富优质的云计算、大数据、人工智能等课程内容,以及权威的腾讯云技术认证体系。...云产品进阶 课程一、腾讯云服务器CVM的基础应用 课程二、腾讯云数据库CDB快速入门 课程三、腾讯云负载均衡CLB基础介绍 课程四、揭秘腾讯云网络底层技术 课程五、对象存储上云指引 课程六、智能云主机集群管理平台...概念基础 课程一、人工智能概述 课程二、机器学习基础 课程三、硅谷技术大牛Siraj带你入门深度学习 课程四、10 分钟机器学习数学课 课程五、数学基础与其在机器学习中的应用 理论进阶 课程一、机器学习平台...课程三、机器学习实战:排序和CTR预估问题 课程四、从零搭建音乐推荐系统 课程五、从0到1全盘剖析智能语音 课程六、视觉聊天机器开发 课程七、深度学习模型训练:分辨猫狗与人脸标签识别 [扫码学习《人工智能学习路径课...腾讯云大学是腾讯云旗下面向云生态用户的一站式学习成长平台。腾讯云大学大咖分享邀请行业技术大咖,为你提供免费、专业、行业最新技术动态分享。

    2.3K61

    这一年,腾讯产业互联网的十二个“关键时刻”

    科 技 实 验 室 人工智能实验室矩阵包括腾讯 AI Lab(深圳及西雅图)、腾讯优图、WeChat AI等几大 AI 实验室,以机器学习、计算机视觉、语音识别和自然语言处理等四大方向的基础研究夯实技术内涵...,前沿科技实验室矩阵包括腾讯 Robotics X 机器人实验室、量子实验室、多媒体实验室及未来网络实验室等,覆盖对机器人、音视频技术、量子计算、5G、IOT到边缘计算等前沿及关键核心技术的布局探索与研究应用...腾讯教育累计服务4亿用户,每周有超过百万的用户在线学习,在架课程超10万门,帮助众多学员实现了个人突破性成长。  ...腾讯云启产业生态平台通过投资、孵化、服务、培训等四大引擎,打通腾讯B端技术、产品、平台能力以及C端场景、流量能力,与合作伙伴共生共赢,助力产业智慧升级。      ...十二个关键时刻背后,腾讯始终坚持,做好各行各业最贴身的数字化助手。 今后,腾讯将继续利用对个人用户的深入理解,生态伙伴的能力,以及深厚的技术储备,助力各行各业通过数字技术实现产业升级。

    1.5K21

    Flink流批一体在阿里11首次落地的背后

    除了 GMV 媒体大屏之外,Flink 还支持了诸如搜索推荐实时机器学习,广告实时反作弊,菜鸟订单状态实时跟踪反馈,云服务器的实时攻击探测以及大量基础设施的监控报警等等重要业务。...Flink 在阿里的发展始于搜索推荐场景,因此搜索引擎的索引构建以及机器学习的特征工程都已经是基于 Flink的 批流一体架构。...经过团队一年的努力,基于 Flink 的搜索推荐实时计算平台成功的支持了2016 年的搜索 11,保证了搜索推荐全链路实时化。...2020 年的 11,Flink 流批一体技术在天猫营销决策核心系统中给出了精彩的表现,加上之前已经在搜索推荐中成功运行的流批一体索引构建以及机器学习流程,充分验证了5 年前我们大胆选择 Flink...;来自快手大数据负责人将为大家带来 Flink 在快手的前世今生发展历程;来自微博的机器学习技术专家将为大家带来如何利用 Flink 进行信息推荐

    2.3K20

    谈谈对云原生应用的理解

    顾名思义,云原生就是面向云设计的应用,自从2013年Matt Stine提出概念后,更多是一套技术体系和方法论,官方定义一直在演变,但核心还是通过基础云平台、云中间件、微服务、容器编排调度、Devops...抽空读完《未来架构-从服务化到云原生》,结合笔记也谈谈对云原生的一些简单理解 目录 云原生诞生背景是什么? 云原生能帮助研发解决什么问题? 云原生应用的定义是什么? 云原生当前生态圈是怎么样的?...云计算本质:按需分配资源和弹性计算 云原生应用特点:核心是利用按需分配和弹性伸缩来设计的应用,让应用更适合在云平台运行 云原生十二要素:Heroku团队提出的云应用设计理念 1、Codebase 基准代码...11、Log 日志:使用日志流处理,不用本地日志,推荐ELK 12、Admin Processes 管理进程:定时任务脚本也应准守这些规则 云原生十二要素进阶:新增3个要素 1、API first:设计出合理并且高兼容的应用接口是首要任务...2、Telemetry:可通过遥测感知应用运营状态,而不用登陆机器 3、Authentication and Authorization:建议用Oauth2.0和RBAC授权来保证应用安全 云原生当前生态圈是怎么样的

    3.8K270

    ApacheCN Python 译文集 20211108 更新

    案例学习:单词游戏 第十章 列表 第十一章 字典 第十二章 元组 第十三章 案例学习:数据结构的选择 第十四章 文件 第十五章 类和对象 第十六章 类和函数 第十七章 类和方法 第十八章 继承 第十九章...101 十八、使用 GPIOs 作为输入 十九、制造园丁机器人 二十、电机基础 二十一、蓝牙控制的机器人汽车 二十二、用于避障的传感器接口 二十三、制造自己的区域扫描器 二十四、基本开关 二十五、用...:机器学习算法 六、无监督机器学习算法 七、传统的监督学习算法 八、神经网络算法 九、自然语言处理算法 十、推荐引擎 第三部分:高级主题 十一、数据算法 十二、密码学 十三、大规模算法 十四、实际考虑...三、金融中的非线性 四、期权定价的数值方法 五、利率和衍生品建模 六、时间序列数据的统计分析 七、使用 VIX 的互动金融分析 八、构建算法交易平台 九、实现回溯测试系统 十、金融机器学习 十一、金融深度学习...九、构建家庭安全仪表板 十、发布到 Web 服务 十一、使用蓝牙创建门铃按钮 十二、增强我们的物联网门铃 十三、介绍树莓派机器人车 十四、用 Python 控制机器人车 十五、将机器人车的感官输入连接到网络

    18.8K30

    SDCC 2015算法专场札记:知名互联网公司的算法实践

    由以HDFS作为基础存储平台的离线挖掘系统、用户行为实时收集并处理的近线系统及在线推荐服务构成,推荐平台提供了K近邻、矩阵分解、图模型等常见的推荐模型。...图3 算法比较 阿里巴巴搜索事业部算法专家严强:个性化算法IN11 2015年11天猫成交量高达912亿,移动端占比68.67%,其中各个平台的个性化推荐功能对于促进成交量起了非常重要的作用。...Olive是一个融合了实时流计算和在线学习的近实时机器学习系统,采用了典型的参数服务器架构,与MPI方案比,Olive无论在计算资源的节省方面还是训练速度方面都有大幅提升。 ?...图4 阿里个性化算法系统 美团网数据组技术专家付晴川:机器学习在用户画像上的应用 利用用户的各种行为数据来对用户进行画像,通过用户画像深入了解用户的各方面特点,并使用用户画像来给用户推荐更加个性化和精准的产品和服务.../LibSVM等机器学习工具来进行算法开发等。

    1.5K60

    鹅厂开源先锋,日均计算量超30万亿,全力打破数据墙

    基于腾讯云的分布式机器学习平台,能支撑 1 万亿维度的数据训练。 为什么能够做到这一点?来自于强大的技术实力。...从引进到自研再开源:腾讯大数据迎来转折点 从2009年开始,腾讯大数据平台经历离线计算、实时计算与机器学习三个阶段。 第一阶段,基于开源的Hadoop体系,离线计算平台,主要发力规模化。...到了2015年,数据量进一步增长,人群特征维度更多,广告推荐体系出现了一定的瓶颈。大数据平台向第三阶段发展,建设机器学习平台,支持腾讯各业务数据挖掘的需求。...并于2016年推出了自研机器学习平台Angel,专攻复杂计算场景,可进行大规模的数据训练,支撑内容推荐、广告推荐等AI应用场景,建立起了“大数据 +AI”引擎技术架构。...通过有价值的开源项目,会吸引更多的用户加入腾讯生态,推动机器学习和人工智能的广泛应用。 腾讯开源也在与腾讯云紧密结合,为开发者提供更多便利的基础服务、工具和开源项目。

    55840
    领券