首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >AI领域无监督学习有哪些难点?

AI 领域面临者一个巨大的问题,如何做到无监督学习?因为有监督学习从数据清洗、特征工程、算法设计、模型训练与优化,到之后的实施、部署阶段,人力和时间成本很高,给 AI 的普及带来了不小麻烦。所以想问下目前AI领域无监督学习有哪些难点?

回答 9

流星留步

发布于 2018-05-31 13:21:28

AI领域目前主流的学习方式是无监督学习,无监督学习主要是通过大量已经人为标注好的数据进行训练。这需要耗费大量的人力物力。而且很难在实际运行中边工作边学习。比如说图像分类,我们利用大量标注好的数据对模型进行训练,训练好以后将模型应用到实际应用的场合。但是模型的参数在实际应用中将不再发生变化,除非再使用标注好的数据对模型二次训练。也就是说模型本身难以对自己识别的结果进行判断,只能在人为的帮助下才能得出什么是对的什么是错的。

而无监督学习则是对一大堆混乱的原始数据进行处理。并将其组织分类并找出例外。目前的无监督学习方法主要有主成分分析法,K均值聚类法、随机森林法等等。在说无监督学习之前先提一下当前最为成功的无监督学习成果:Google Brain。该模型由Google团队开发,模型本身可以自主学习自己的特征,该模型已经利用YouTube视频原始数据中自主学习识别出一只猫。

目前无监督学习还相当不成熟,很难在实际中有所应用。比如,计算机“思维”的方式与人类有很大的区别,它很难像人类一样“举一反三”。而目前的AI学习事物之间的关系主要依靠人为的编程和数据填喂来实现某一功能,这缺乏核心的“思考”过程。所以说在无监督的场合,计算机很难自己去发掘数据之间的联系。但是让计算机有自主的思维,这对于目前来说几乎是不可能的事情。此外,在机器学习领域,输入数据一般是现实生活中的数据。这些数据存在着动力学特征、逻辑联系等等,对于人类来说,这很容易找到其中的关系、但是对只有逻辑计算能力和数学计算能力的计算机来说,这很难去理解。如果脱离了现实基础,仅仅给你一堆数学数据,你肯定更加一脸懵逼。因为数学数据太过于抽象了。

彼岸轮回

发布于 2018-06-01 08:38:15

首先我觉得无监督学习迷雾重重,目前无监督学习领域并没有一个好的正确的方向。但是,本身无监督学习相比于有监督学习要难许多。而且我认为无监督学习应该归属到强人工智能领域。而有监督学习应该归属到弱人工智能领域。所以我认为无监督学习的设计模式、设计方法应该跟有监督学习完全不同。但是,目前的无监督学习好像完全是在有监督学习的基础之上发展的,甚至还有提出处于有监督学习与无监督学习之间折中的方案:半监督学习。我认为这是不对的,我们如果研究无监督学习,就应该完全抛弃有监督学习,不能被有监督学习中的理论、方法所影响到。尽管有监督学习目前已经取得了不错的成果。但是这很容易影响我们的思维,让我们的思维束缚在有监督学习的框架中。

无监督学习难题很多,目前仍然没有一个重大的突破性进展出现。需要我们的思维有重大的跳跃才能找到一个好的解决方案。

狼人老沙

发布于 2018-06-01 07:42:27

对于无监督学习领域。我只能回答这个领域才刚刚起步。而当下无监督领域流行的算法相比有监督学习来说差别很大。机器学习目前还在有监督学习阶段发展,不过目前有慢慢向无监督学习发展的趋势,从而出现了半监督学习。比如康奈尔大学研究出的半监督学习的方法:主要是结合贝叶斯和对抗生成网络提出来的。

我认为无监督学习缺乏一个明确的理论。目前提出的无监督学习的理论都与期望差别过大,效果也非常差。其次,与有监督学习相比,无监督学习难以对模型进行训练。大量的原始数据需要有监督学习模型自己去进行分类与学习,然后通过这些数据对模型进行训练。最后,无监督学习缺乏反馈。我的专业是自动化,所以对于自控控制中的反馈模型非常熟悉。反馈模型在有监督训练中也有着广泛的应用。这对于机器学习非常有用,机器学习可以通过反馈对模型进行调整。

和开发者交流更多问题细节吧,去 写回答
相关文章
有监督学习和无监督学习
一般情况下,机器学习分为有监督学习和无监督学习。 有监督学习 监督学习是指数据集的正确输出(right output)已知的情况下一类学习算法。因为输入和输出已知,意味着输入和输出之间有一个关系,监督
陆勤_数据人网
2018/02/28
1.4K0
有监督学习和无监督学习
有监督学习VS无监督学习「建议收藏」
标签就是指的分好的类别,指明标签就是告诉计算机,这个样本属于哪一类。对于聚类的话,是事先类别都没定义好,但是类别的个数一定要告诉计算机
全栈程序员站长
2022/09/01
5550
有监督学习VS无监督学习「建议收藏」
【机器学习笔记】有监督学习和无监督学习
概念: 从广义上来说,机器学习是一种能够赋予机器学习的能力以此让它完成直接编程无法完成的功能的方法。但从实践的意义上来说, 机器学习是一种通过利用数据,训练出模型,然后使用模型预测的一种方法。
全栈程序员站长
2022/09/01
3.2K0
有监督学习、无监督学习以及半监督学习详解
相信大家在开始学习机器学习的入门时,首先接触的概念就是监督学习、无监督学习以及半监督学习。在我们开始讲解之前,我们先回顾一下什么是机器学习(ML)?
全栈程序员站长
2022/09/01
2.5K0
机器学习中的有监督学习,无监督学习,半监督学习
监督学习:通过已有的一部分输入数据与输出数据之间的对应关系,生成一个函数,将输入映射到合适的输出,例如分类。 非监督学习:直接对输入数据集进行建模,例如聚类。
全栈程序员站长
2022/09/02
12.8K0
机器学习(二):有监督学习、无监督学习和半监督学习
3 学习(learning) 将很多数据丢给计算机分析,以此来训练该计算机,培养计算机给数据分类的能力。换句话说,学习指的就是找到特征与标签的映射(mapping)关系。这样当有特征而无标签的未知数据输入时,我们就可以通过已有的关系得到未知数据标签。
全栈程序员站长
2022/09/02
6700
深度学习#1.有监督学习和无监督学习
什么是人工智能? 人类用各种方式让机器拥有与人类相仿的“智能”,就是人工智能。 什么是机器学习? 机器学习就是实现人工智能的一种方式。
全栈程序员站长
2022/09/01
3700
机器学习(二):有监督学习、无监督学习和半监督学习
一、基本概念 1 特征(feature) 数据的特征。 *举例:书的内容* 2 标签(label) 数据的标签。 *举例:书属于的类别,例如“计算机”“图形学”“英文书”“教材”等。* 3 学习(learning) 将很多数据丢给计算机分析,以此来训练该计算机,培养计算机给数据分类的能力。换句话说,学习指的就是找到特征与标签的映射(mapping)关系。这样当有特征而无标签的未知数据输入时,我们就可以通过已有的关系得到未知数据标签。 *举例:把很多书交给一个学生,培养他给书本分类的能力。* 4 分类(c
海天一树
2018/04/17
1.8K0
机器学习(二):有监督学习、无监督学习和半监督学习
深度学习领域有哪些瓶颈
深度学习是近年来人工智能热潮的原因,它的出现在很多方面都作出了突破,包括在图像、NLP以及语音等领域都有很多问题取得很大的突破,但它目前也存在一些问题和瓶颈需要解决。
kbsc13
2019/09/17
9300
深度学习领域有哪些瓶颈
收藏!!无监督机器学习中,最常见的聚类算法有哪些?
但是,大多数情况下,在处理实际问题时,数据不会带有预定义标签,因此我们需要开发能够对这些数据进行正确分类的机器学习模型,通过发现这些特征中的一些共性,来预测新数据的类。
商业新知
2019/04/08
2.2K0
收藏!!无监督机器学习中,最常见的聚类算法有哪些?
有监督学习与无监督学习的几大区别
当下无监督作为一种热门的机器学习技术,网上有不少关于无监督与有监督差异讨论的文章。DataVisor作为率先将无监督技术运用在反欺诈行业的娇娇领先者,我们在本文中,将深入浅出的讲解无监督机器学习技术与有监督技术在不同方面的区别,通过对比这两种技术,让大家对无监督反欺诈技术有更好的了解。
全栈程序员站长
2022/08/24
1.2K0
有监督学习与无监督学习的几大区别
一款多模态无监督泛领域AI知识引擎
文昕(TestLink)项目的起源于我们几位对知识图谱的热衷与爱好者,自2012年人类首次迎来知识图谱至2019年这一技术时代的拐点,全社会已经收益了诸多知识图谱的应用,它们有:正在蓬勃发展的RPA自动审批机器人的核心大脑;有类似某一场人工智能大会上”小度小度,我的快递到哪里了”这样的多伦对话的机器人;有刑侦查案的强大人物画像图谱,使犯罪从之前的”天网恢恢”到如今的”一击即中”。在大数据井喷的背景下,诸多友商深耕于电商数据、金融数据等高度结构化数据挖掘需求广泛的场景。
TextLink
2022/09/13
5480
一款多模态无监督泛领域AI知识引擎
Science:有调查有真相!某些AI领域多年无实际进展
5月29日,Science刊登了一篇标题为“人工智能某些领域的核心进展一直停滞不前”的文章,在文章里,作者Matthew Hutson提到:一些多年之前的“老算法”如果经过微调,其性能足以匹敌当前的SOTA。
AI科技评论
2020/06/03
4200
监督学习与无监督学习
机器学习如果按照训练样本标签的有无可以分为以下两种常用方法。 有监督学习(supervised learning)和无监督学习(unsupervised learning)。
里克贝斯
2021/05/21
1K0
机器学习在金融领域有哪些应用?
【AI100导读】由于交易量比较大,交易历史数据精确完备,以及金融领域的量化分析特点,金融领域是比较适合人工智能技术应用的领域。现在机器学习已经成为金融生态中不可或缺的组成部分,从贷款审批到资产管理,
AI科技大本营
2018/04/26
1.9K0
遥感领域中无监督域适应综述
本篇综述详细介绍了195篇与遥感无监督域适应相关的论文,已经被Remote sensing 2022收录。
CV君
2023/03/06
1.1K0
遥感领域中无监督域适应综述
监督学习和无监督学习区别
机器学习分为:监督学习,无监督学习,半监督学习(也可以用hinton所说的强化学习)等。
全栈程序员站长
2022/08/24
1.7K0
监督学习和无监督学习区别
机器学习:无监督学习
Tips:如果出现某个聚类中心没有分配到点的情况,一般是直接将这个中心去掉,如果规定必须要刚好
Here_SDUT
2022/09/19
6930
机器学习:无监督学习
机器学习之有监督学习,无监督学习,半监督学习
机器学习是数据分析和数据挖掘的一种比较常用,比较好的手段从有无监督的角度,可以分为三类:
全栈程序员站长
2022/09/01
7270
点击加载更多

相似问题

腾讯有哪些AI的技术?

1541

腾讯云AI有哪些应用?

72.1K

机器学习有哪些算法?

1411

新手学习小程序。有哪些书籍推荐吗?

0164

大数据技术在医疗领域有哪些使用场景?

2488
相关问答用户
擅长3个领域
平安资管 | 架构师擅长4个领域
擅长4个领域
腾讯云TDP | 高级后端开发工程师擅长3个领域
添加站长 进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

扫码加入开发者社群
关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例

扫码关注腾讯云开发者公众号
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档