首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >问答首页 >如何修正“未完成与此评估器相关的培训工作”错误?

如何修正“未完成与此评估器相关的培训工作”错误?
EN

Data Science用户
提问于 2021-08-15 11:35:35
回答 1查看 1.2K关注 0票数 1

我运行了一个完整的AWS SageMaker自动驾驶仪实验。现在我想使用这个模型生成批量预测,但是我得到了一个错误:“没有找到与此评估器相关的培训作业。请确保此估计器仅用于构建工作流配置”。

我正在使用这个教程作为参考。

这是我的SageMaker工作室笔记本Python代码。

代码语言:javascript
运行
AI代码解释
复制
import sagemaker 
from sagemaker import get_execution_role
import boto3 
import os
from time import gmtime, strftime, sleep

session = sagemaker.Session()
bucket = sagemaker.Session().default_bucket()
prefix = "trial-01"
region = sagemaker.Session().boto_region_name
role = sagemaker.get_execution_role()

# The location of the test dataset
batch_input = 's3://{}/{}/test'.format(bucket, prefix)

# The location to store the results of the batch transform job
batch_output = 's3://{}/{}/batch-prediction'.format(bucket, prefix)

container=sagemaker.image_uris.retrieve("xgboost", region, "1.2-1")

test_model=sagemaker.estimator.Estimator(
    image_uri=container,
    role=role,
    instance_count=1,
    instance_type='ml.m4.xlarge',
    volume_size=5,
    output_path=batch_output,
    sagemaker_session=sagemaker.Session()
)

transformer = test_model.transformer(
    instance_count=1, 
    instance_type='ml.m4.xlarge', 
    output_path=batch_output
)
EN

回答 1

Data Science用户

发布于 2021-10-07 04:08:33

我认为你必须先训练你的模特。若要在sagemaker中这样做,您可以执行以下操作。我假设您希望在不使用python脚本作为入口点的情况下训练机器学习模型。

首先,定义您的超参数:

代码语言:javascript
运行
AI代码解释
复制
test_model.set_hyperparameters(
    max_depth = 5,
    eta = 0.2,
    gamma = 4,
    min_child_weight = 6,
    subsample = 0.7,
    objective = "binary:logistic",
    num_round = 1000
)

然后,您必须定义您的培训和验证输入。例如:

代码语言:javascript
运行
AI代码解释
复制
train_input = TrainingInput(
    "s3://{}/{}/{}".format(bucket, prefix, "data/train.csv"), content_type="csv"
)
validation_input = TrainingInput(
    "s3://{}/{}/{}".format(bucket, prefix, "data/validation.csv"), content_type="csv"
)

最后,必须调用.fit()方法来训练模型:

代码语言:javascript
运行
AI代码解释
复制
test_model.fit({"train": train_input, "validation": validation_input}, wait=True)

如果您想通过python脚本(入口点)来训练模型,您可以参考下面的示例:https://github.com/aws-samples/amazon-sagemaker-script-mode/tree/master/tf-sentiment-script-mode

票数 0
EN
页面原文内容由Data Science提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://datascience.stackexchange.com/questions/100113

复制
相关文章
系统培训配置问题:系统培训配置错误,导致培训效果不佳
是山河呀
2025/02/11
940
LSTM时间序列预测中的一个常见错误以及如何修正
当使用LSTM进行时间序列预测时,人们容易陷入一个常见的陷阱。为了解释这个问题,我们需要先回顾一下回归器和预测器是如何工作的。预测算法是这样处理时间序列的:
deephub
2024/05/10
5961
LSTM时间序列预测中的一个常见错误以及如何修正
《大话数据结构》冒泡排序错误修正
书中本意是想省略后端顺序表中无用的查找,但是忽略了一个问题。 原书中代码大意为: void bubblesort(Graph *g,int len){ int i,j; int flag = 1; for(i=0; i < len && flag; i++){ flag = 0; //printf("len %d",len); for(j = len-1; j>i; j--){ i
用户1154259
2018/01/17
9860
如何修正Netty编解码的缺陷
即从io.netty.buffer. ByteBuf ( 原始数据流) =》 io.netty.buffer .ByteBuf ( 用户数据)
JavaEdge
2021/02/22
6790
hive相关错误
1.java.sql.SQLException: Could not open client transport with JDBC Uri: jdbc:hive2://ip地址:10000/default: Failed to open new session: java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.authorize.AuthorizationException): User: root is not allowed to impersonate anonymous
编程那点事
2023/02/25
2520
PySpark|ML(评估器)
在PySpark中包含了两种机器学习相关的包:MLlib和ML,二者的主要区别在于MLlib包的操作是基于RDD的,ML包的操作是基于DataFrame的。根据之前我们叙述过的DataFrame的性能要远远好于RDD,并且MLlib已经不再被维护了,所以在本专栏中我们将不会讲解MLlib。
数据山谷
2020/11/24
1.6K0
PySpark|ML(评估器)
SVN使用指南【工作培训版】
为什么要使用配置管理 及时了解团队中其他成员的进度。 轻松比较不同版本间的细微差别; 记录每个文件成长的每步细节,利于成果的复用(reuse); 资料共享,避免以往靠邮件发送文件造成的版本混乱; 人人为我,我为人人。所有成员维护的实际是同一个版本库,无需专人维护所有文件的最新版本; 协同工作,大大提高团队工作效率,无论团队成员分布在天涯还是海角; ---- 1、Subversion/TortoiseSVN的版本控制系统 Subversion:是一个开源的版本控制系统,拥有CVS的大部分特征,并在CVS的基础
Java帮帮
2018/03/15
2.5K0
SVN使用指南【工作培训版】
用相关性分析做培训的课后评估
我们在上一个章节讲到了相关性数据分析的一些概念和设计的流程,今天我们来讲下相关性分析在人力资源数据领域的里的应用,相关性的分析可以帮助我们去判断各个维度的数据和综合的数据之前,哪些因素会影响到我们综合的数据评估,比如我们在做培训的课后评估的时候都会对讲师或者培训组织进行评分,这个时候就可以用到相关性分析。
王佩军
2020/07/28
5700
用相关性分析做培训的课后评估
路径分析如何操作?模型如何修正?
路径分析,也称通径分析(有时也称结构方程模型,一般情况下如果包括测量模型和结构模型,则称为结构方程模型;如果只包括结构模型,则称为路径分析)。路径分析在于研究模型影响关系,用于对模型假设进行验证。比如下图的模型框架:希望研究工作条件,人际关系对于公司满意度的影响;同时还希望研究公司满意度和机会感知对于离职倾向的影响。路径有一共有4条(即4对影响关系),路径分析可以同时研究此4对影响关系。
全栈程序员站长
2022/09/23
1.1K0
路径分析如何操作?模型如何修正?
没有相关工作经验 如何轻松应对面试?
首先从公司培养成本上来说,没有经验的求职者,企业需要花钱和时间去培养他们,一旦他有了工作经验,有些人就会觉得当前公司的福利和待遇已经无法与他的付出相匹配的时候,那么他就会选择跳槽。
用户1730674
2019/03/19
2.7K0
没有相关工作经验 如何轻松应对面试?
VS2005 编译 Qt4.8.2库,并修正源码中的错误
从昨天开始利用VS2005对Qt4.8.2库进行编译,在编译到某个文件时,总是报错,提示VS的cl.exe和nmake.exe返回致命错误。错误罗列如下:
用户3519280
2023/07/06
2770
解的个数 未完成
#include<iostream> #include<cstdio> using namespace std; int x,y; int tot=1; int a,b,c,p,q,r,s; int exgcd(int a,int b,int & x,int & y) {     if(b==0)     {         x=1;         y=0;         return a;     }     int r=exgcd(b,a%b,x,y);     int tmp;     tmp=x
attack
2018/04/12
6690
java大数据培训,如何选择适合自己的培训机构开发_大数据培训课程哪个好
大家好,又见面了,我是你们的朋友全栈君。 如何挑选Java大数据培训机构?对于有java的基础的人来说,可以视情况直接跳过java阶段的学习,那么学习时间就可以少一个多月时间,当然前提是基础
全栈程序员站长
2022/11/01
2.1K0
java大数据培训,如何选择适合自己的培训机构开发_大数据培训课程哪个好
Linux下如何优雅地修正命令?
如何快速纠正你的linux命令?我们在输入命令的时候,难免会出现输入命令错误,或者输入过多,过少的情况,那么除了各种按方向键退回之外,还有什么快速纠正命令的方法? 本文用|表示光标位置。
编程珠玑
2020/03/25
6470
webpack、npm 相关错误汇总
使用webstorm搭建vue项目,报如上错误。 本地node版本为10。 原因: 版本10 fs.promises的API是实验性的,webstorm不允许使用。 解决:卸载掉原有node.js,重新安装node.js 8版本。
城市中的游牧民族
2019/02/21
2.6K0
webpack、npm 相关错误汇总
Tomcat是如何修正JDK原生线程池bug的?
为提高处理能力和并发度,Web容器一般会把处理请求的任务放到线程池,而JDK的原生线程池先天适合CPU密集型任务,于是Tomcat改造之。
JavaEdge
2021/10/18
6350
pmp培训机构哪个好?各pmp培训机构排名如何?
PMP 机构排名的话,没有官方数据,但是好一点的机构的通过率普遍在 95% 以上,还是很不错的。
全栈程序员站长
2022/11/17
2.1K0
pmp培训机构哪个好?各pmp培训机构排名如何?
您与此网站建立的连接并非完全安全
刚搭建的 HTTPS 协议,还没有过一天 在浏览器中访问就会出现 您与此网站建立的链接并非安全
hedeqiang
2019/12/17
2.1K0
Tomcat是如何修正JDK原生线程池bug的?
为提高处理能力和并发度,Web容器一般会把处理请求的任务放到线程池,而JDK的原生线程池先天适合CPU密集型任务,于是Tomcat改造之。
JavaEdge
2021/12/07
4420
Tomcat是如何修正JDK原生线程池bug的?
修正《用Docker快速搭建Go开发环境》文章中的一处错误
上周写的文章《五分钟用Docker快速搭建Go开发环境》,文章发出去后有不少阅读量,而且从后台看的数据 60%的人都读完了。今天我自己用下面命令往 容器里的 Go 项目里下载包时发现了一处错误
KevinYan
2020/02/17
5750
修正《用Docker快速搭建Go开发环境》文章中的一处错误

相似问题

分批培训还是多次培训?

10

如何恢复对模特的培训?

10

关于预培训文本生成任务的问题,似乎预培训不是小模型的工作吗?

10

如何生成培训数据

40

如何创建序列标签的培训集

20
添加站长 进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

扫码加入开发者社群
关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例

扫码关注腾讯云开发者公众号
领券
社区富文本编辑器全新改版!诚邀体验~
全新交互,全新视觉,新增快捷键、悬浮工具栏、高亮块等功能并同时优化现有功能,全面提升创作效率和体验
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文