前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >随机森林算法

随机森林算法

作者头像
磐创AI
发布2019-11-08 12:01:20
8190
发布2019-11-08 12:01:20
举报
文章被收录于专栏:磐创AI技术团队的专栏

作者 | Sabina Pokhrel

编译 | VK

来源 | Towards Data Science

几个月前,我在悉尼参加了一个会议。会上,fast.ai向我介绍了一门在线机器学习课程,那时候我根本没注意。这周,在Kaggle竞赛寻找提高分数的方法时,我又遇到了这门课程。我决定试一试。

这是我从第一堂课中学到的东西,这是一个1小时17分钟的视频,介绍了随机森林。

课的主题是随机森林,杰里米(讲师)提供了一些基本信息以及使用Jupyter Notebook的提示和技巧。

Jeremy谈到的一些重要的事情是,数据科学并不等同于软件工程。在数据科学中,我们做的是设计模型。虽然软件工程有自己的一套实践,但数据科学也有自己的一套最佳实践。

模型构建和原型设计需要一个交互的环境,是一个迭代的过程。我们建立一个模型。然后,我们采取措施来改善它。重复直到我们对结果满意为止。

随机森林

我听说过“随机森林”这个词,我知道它是现有的机器学习技术之一,但是老实说,我从来没有想过要去了解它。我一直热衷于更多地了解深度学习技术。

从这次演讲中,我了解到随机森林确实很棒。

它就像一个通用的机器学习技术,既可以用于回归,也可以用于分类。这意味着你可以使用随机森林来预测股票价格以及对给定的医疗数据样本进行分类。

一般来说,随机森林模型不会过拟合,即使它会,它也很容易阻止过拟合。

对于随机森林模型,不需要单独的验证集。

随机森林只有一些统计假设。它也不假设你的数据是正态分布的,也不假设这些关系是线性的。

它只需要很少的特征工程。

因此,如果你是机器学习的新手,它可以是一个很好的起点。

其他概念

维数诅咒是一个概念,意思是你拥有的数据特征越多,数据点就会越分散。这意味着两点之间的距离没有意义。

Jeremy确信,在实践中,情况并非如此,事实上,你的数据拥有的特征越多,对模型的训练效果就越好。

没有免费午餐定理是这样一个概念:没有一个模型可以完美地适用于任何类型的数据。

技巧和窍门

1.你可以在Jupyter Notebook中使用!来执行bash命令,例如。

代码语言:javascript
复制
!ls 
!mkdir new_dr

2.在Python 3.6中追加字符串的新方法。

代码语言:javascript
复制
name = 'Sabina'
print(f'Hello {name}')no_of_new_msg = 11
print(f'Hello {name}, you have {no_of_new_msg} new messages')

3.不需要离开Jupyter notebook就可以查看python函数。在函数名前使用?获取它的文档。

代码语言:javascript
复制
from sklearn.ensemble import RandomForestClassifier?RandomForestClassifier.fit()

4.如果你想阅读源代码,可以使用??在函数名称前。

代码语言:javascript
复制
from sklearn.ensemble import RandomForestClassifier??RandomForestClassifier.fit()

5.通过使用to_feather方法保存处理过的数据集,将数据集以存储在RAM中的相同格式保存到磁盘。可以使用read_feather方法从保存的文件中读取数据。注意,为了使用这些方法,你需要安feather-format库。

代码语言:javascript
复制
import pandasdf = pd.DataFrame()
df.to_feather('filename')saved_df= pd.read_feather('filename')

如果你有兴趣深入探讨该主题,请点击此处链接到课程视频。 http://course18.fast.ai/lessonsml1/lesson1.html

往期精彩回顾

知识图谱:一种从文本中挖掘信息的强大数据科学技术

理解BERT:一个突破性NLP框架的综合指南

谷歌发布企业版TensorFlow,或提供收费服务?

你与世界只差一个

磐创AI

点击https://mp.weixin.qq.com/mp/homepage?__biz=MzAxMjMwODMyMQ==&hid=14&sn=e264f33521f91e6bf318710fc12bcc7a&scene=25#wechat_redirect,获得更多精彩内容

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-11-06,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 磐创AI 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 随机森林
  • 其他概念
  • 技巧和窍门
相关产品与服务
腾讯云 TI 平台
腾讯云 TI 平台(TencentCloud TI Platform)是基于腾讯先进 AI 能力和多年技术经验,面向开发者、政企提供的全栈式人工智能开发服务平台,致力于打通包含从数据获取、数据处理、算法构建、模型训练、模型评估、模型部署、到 AI 应用开发的产业 + AI 落地全流程链路,帮助用户快速创建和部署 AI 应用,管理全周期 AI 解决方案,从而助力政企单位加速数字化转型并促进 AI 行业生态共建。腾讯云 TI 平台系列产品支持公有云访问、私有化部署以及专属云部署。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档