首页
学习
活动
专区
圈层
工具
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    GCP 上的人工智能实用指南:第三、四部分

    八、使用 Cloud ML Engine 实现 TensorFlow 模型 Google Cloud Platform(GCP)上的 Cloud ML Engine 是一种无服务器方式,可用于构建机器学习管道...Cloud ML Engine 可用于以下目的: 训练机器学习模型 部署训练有素的模型 将部署的模型用于预测 通过各种参数和 KPI 监视模型使用情况 模型管理以及版本控制 Cloud ML Engine...在创建用于在线预测的模型时,用户需要决定使用哪个区域来运行预测,并且必须决定是否启用在线预测日志记录。 启用日志记录对于故障排除或测试很有用。 但是,启用日志记录时会产生额外的费用。...可以为预测服务启用三个级别的日志记录,如下所示: 访问日志记录:此日志记录有助于分析对预测服务的请求数,并跟踪请求开始和呈现时间的时间戳。 可以基于等待时间值以及预测服务的使用模式进行分析。...需要使用 REST API 启用它。 可以在创建模型和版本时设置日志记录级别。

    6.9K10

    教程 | 在Cloud ML Engine的TPU上从头训练ResNet

    不需要安装软件或基础环境(Cloud ML Engine 是无服务器的) 你可以在云端训练模型,然后在任何地方部署该模型(使用 Kubeflow) 作者写的代码:https://github.com/tensorflow.../tpu/tree/master/models/official/resnet Cloud ML Engine:https://cloud.google.com/ml-engine/docs/tensorflow...我推荐大家使用最新版本的 TensorFlow。 3. 启用 Cloud TPU 服务账号 你需要允许 TPU 服务账号与 ML Engine(机器学习引擎)进行对话。...自动放缩 TensorFlow 记录的创建 如果你希望在更新的数据上重新训练你的模型,只需要在新的数据上运行这整套流程,但是请确保将其写入到一个新的输出目录中,以免覆盖之前的输出结果。 6....训练模型 只需将训练任务提交到 Cloud ML Engine 上,让结果指向你的 Dataflow 作业的输出目录: #!

    1.8K20

    GCP 上的人工智能实用指南:第一、二部分

    这些使跟踪活动和加强应用的安全性变得容易。 BigQuery 可用于卸载现有数据仓库并创建一个新仓库,并且使用 BigQuery ML 选项,您可以构建 ML 管道。...Cloud ML Engine(或 AI 平台)提供可以单独使用或一起使用的训练和预测服务。 训练和预测服务现在称为 ML Engine 中的 AI 平台训练和 AI 平台预测。...我们在“第 8 章”,“使用 Cloud ML Engine 实现 TensorFlow 模型”和“第 9 章”,“构建预测应用”中介绍了 Google Cloud Machine Learning 模型的训练和预测服务...使用 Cloud Machine Learning Engine 的异步批量预测 为了使用上一节中训练和导出的模型来提供在线预测,我们必须在 AI 平台中创建模型资源,并在其中创建版本资源。...在下一节中,我们将研究使用 Cloud Machine Learning Engine 的实时预测,该引擎将范例转换为 Google Cloud Platform 上的完全无服务器的 ML。

    17.3K10

    如何用TensorFlow和Swift写个App识别霉霉?

    首先,我在 Google Cloud 终端上创建一个项目,启动 Cloud ML Engine: ? 然后我创建一个 Cloud Storage bucket,用来为模型打包所有资源。...在训练时,我同时也启动了验证模型的工作,也就是用模型未见过的数据验证它的准确率: 通过导航至 Cloud 终端的 ML Engine 的 Jobs 部分,就可以查看模型的验证是否正在正确进行,并检查具体工作的日志...Cloud Storage中的保存的模型ProtoBuf,创建你的模型的第一个版本。...等模型部署后,就可以用ML Engine的在线预测 API 来为一个新图像生成预测。...将模型部署到 ML Engine:用 gcloud CLI 将模型部署到 ML Engine。 发出预测请求:用 Firebase 函数向 ML Engine 模型在线发起预测请求。

    12.2K10

    TensorFlow:使用Cloud TPU在30分钟内训练出实时移动对象检测器

    我们已经听到了这种的反馈,在今天我们很高兴地宣布支持训练Cloud TPU上的对象检测模型,模型量化以及并添加了包括RetinaNet和MobileNet改编的RetinaNet在内的新模型。...云设置 首先,在谷歌云控制台中创建一个项目,并启用该项目的计费。...ML Engine是Google Cloud的TensorFlow托管平台,它简化了训练和提供机器学习模型的过程。要使用它,请为刚刚创建的项目启用必要的API。...使用Cloud ML Engine上使用Cloud TPU训练量化模型 机器学习模型有两个不同的计算组件:训练和推理。在此示例中,我们正在利用Cloud TPU来加速训练。...要告诉ML Engine在哪里找到我们的训练和测试文件以及模型检查点,你需要在我们为你创建的配置文件中更新几行,以指向你的存储桶。

    4K50

    如何确保机器学习最重要的起始步骤"特征工程"的步骤一致性?

    ML6 是 Google Cloud 钦定的全球服务伙伴,利用机器学习促进商业项目,例如金融、医疗、图像、NLU 等。 全文大约1500字。...在这篇文章中,我们将提供在 Google Cloud Dataflow 上使用 tf.Transform,以及在 Cloud ML Engine 上进行模型训练和服务的具体示例。...制作数字孪生 在这里,我们在云存储中根据两种不同类型文件的历史日志数据来训练系统的数字孪生。 该数字孪生能够基于输入数据预测输出数据。上图显示我们在此流程中使用的 Google 服务。...这是我们可以充分利用 tf.Transform 的地方,因为这使得在 Cloud ML Engine 上部署 “TrainedModel”(包括预处理)变得非常容易。...,我们现在已将我们的模型部署在 ML Engine 上作为一个 API,成为特定布朗尼面团机的数字孪生:它采用原始输入功能(成分描述和机器设置),并将反馈机器的预测输出。

    73120

    如何确保机器学习最重要的起始步骤特征工程的步骤一致性?

    ML6 是 Google Cloud 钦定的全球服务伙伴,利用机器学习促进商业项目,例如金融、医疗、图像、NLU 等。 全文大约1500字。...在这篇文章中,我们将提供在 Google Cloud Dataflow 上使用 tf.Transform,以及在 Cloud ML Engine 上进行模型训练和服务的具体示例。...在这里,我们在云存储中根据两种不同类型文件的历史日志数据来训练系统的数字孪生。 该数字孪生能够基于输入数据预测输出数据。上图显示我们在此流程中使用的 Google 服务。...这是我们可以充分利用 tf.Transform 的地方,因为这使得在 Cloud ML Engine 上部署 “TrainedModel”(包括预处理)变得非常容易。 ?...,我们现在已将我们的模型部署在 ML Engine 上作为一个 API,成为特定布朗尼面团机的数字孪生:它采用原始输入功能(成分描述和机器设置),并将反馈机器的预测输出。

    1.1K20

    【谷歌重拳开放Cloud TPU】GPU最强对手上线,Jeff Dean十条推文全解读

    一个可扩展的ML平台 Cloud TPU还简化了计算和管理ML计算资源: 为团队提供最先进的ML加速,并根据需求的变化动态调整容量(capacity)。...训练好的模型可以通过REST API接口进行部署。 谷歌没有公布哪些算法被用于绘制预测,也没有让工程师自定义模型。另一方面,Google的环境最适合在紧迫的期限内进行机器学习,并且早期推出ML计划。...但是这个产品似乎并没有Google所期望的那么受欢迎,使用Prediction API的用户将不得不使用其他平台来“重新创建现有模型”。...Google云端机器学习引擎 预测API的高度自动化是以灵活性为代价的。Google ML Engine正好相反。...它迎合了经验丰富的数据科学家,并建议使用TensorFlow的云基础设施作为机器学习驱动程序。因此,ML Engine原则上与SageMaker非常相似。

    96330

    【干货】手把手教你用苹果Core ML和Swift开发人脸目标识别APP

    在Cloud ML引擎上使用MobileNet训练模型; 4. 把训练好的模型导出,并将其部署到ML引擎中以提供服务; 5. 构建一个iOS前端,对训练过的模型做出预测请求。...首先,我在Google云端控制台中创建一个项目,并开启了云机器学习引擎: ? ? 然后,我将创建一个云存储桶(Cloud Storage bucket)来打包我模型的所有资源。 ?...现在您已经准备好将模型部署到机器学习引擎上进行服务。首先,使用gcloud命令创建你的模型: ? 然后通过将模型指向刚刚上传到云存储的已保存模型ProtoBuf来创建模型的第一个版本: ?...将带有新框的图像保存到云存储,然后将图像的文件路径写入Cloud Firestore,以便在iOS应用程序中读取路径并下载新图像(使用矩形): ? ?...将模型部署到机器学习引擎:我使用gcloud CLI将我的模型部署到机器学习引擎 我的模型:https://cloud.google.com/ml-engine/docs/deploying-models

    14.9K60

    《Scikit-Learn、Keras与TensorFlow机器学习实用指南(第二版)》第19章 规模化训练和部署TensorFlow模型

    图19-4 上传SavedModel到Google Cloud Storage 配置AI Platform(以前的名字是ML Engine),让AI Platform知道要使用哪个模型和版本。...填写模型细节说明(见图19-5),点击创建。 ? 图19-5 在Google Cloud AI Platform创建新模型 AI Platform有了模型,需要创建模型版本。...图19-6 在Google Cloud AI Platform上创建一个新模型版本 恭喜,这样就将第一个模型部署在云上了。...这样就能下载JSON格式的私钥了。 ? 图19-7 在Google IAM中创建一个新的服务账户 现在写一个小脚本来查询预测服务。...Engine的容器中,或Google Cloud App Engine的网页应用上,或者Google Cloud Functions的微服务,如果没有设置GOOGLE_APPLICATION_CREDENTIALS

    6.7K20

    谷歌Edge TPU专用芯片横空出世!抢攻IoT欲一统物联网江湖

    ---- 新智元报道 来源:Google,CNBC 编辑:闻菲,肖琴,Grace 【新智元导读】谷歌今天宣布推出用于边缘计算的Edge TPU,作为Cloud TPU的补充,目前Edge TPU...除了开放源码的TensorFlow Lite编程环境之外,Edge TPU最初将部署多个Google AI模型,并结合谷歌在AI和硬件方面的专业知识。...Android Things;Cloud TPU的可用软件包括Cloud ML Engine,Kubernetes Engine,Google Compute Engine,以及Cloud IoT Core...它允许你在Edge TPU或基于GPU和CPU的加速器上执行在Google Cloud中训练了的ML模型。...基于TensorFlow Lite的Edge ML runtime,使用预先训练过的模型执行本地ML推理,显著减少延迟并增加边缘设备的多功能性。

    1.2K20

    谷歌Edge TPU专用芯片横空出世!抢攻IoT欲一统物联网江湖

    今天谷歌宣布推出两款旨在帮助客户大规模开发和部署智能连接设备的新产品:Edge TPU,一款新的硬件芯片,以及Cloud IoT Edge,一款将Google Cloud强大的AI功能扩展到网关和连接设备的软件栈...除了开放源码的TensorFlow Lite编程环境之外,Edge TPU最初将部署多个Google AI模型,并结合谷歌在AI和硬件方面的专业知识。...的可用软件包括Cloud ML Engine,Kubernetes Engine,Google Compute Engine,以及Cloud IoT Core ML框架:Edge TPU可使用TensorFlow...它允许你在Edge TPU或基于GPU和CPU的加速器上执行在Google Cloud中训练了的ML模型。...基于TensorFlow Lite的Edge ML runtime,使用预先训练过的模型执行本地ML推理,显著减少延迟并增加边缘设备的多功能性。

    86610

    谷歌教你学 AI-第四讲部署预测模型

    谷歌的Cloud Machine Learning Engine能够让你为TensorFlow模型创建预测服务,且不需要任何操作。...部署新的预测模型 下面让我们看看如何针对上期分辨鸢尾花的例子,使用Cloud Machine Learning Engine的预测服务。...当创建新的模型版本时,Cloud machine learning engine将从云存储中读取。 在创建bucket时,一定要选择区域存储类,以确保计算和存储在同一区域。...创建新的模型 在云机器学习UI中,我们可以创建一个新的模型,这实际上是对所有发布版本的封装。版本保存了单个导出模型,而模型抽象帮助将进入的流量导入选择的适当版本。...创建新版本 接下来,我们将创建一个版本,通过为这个特定的模型版本命名,并将其指向存有导出文件的云存储目录。 就这样,我们创建了模型! 整个过程只需要将服务指向导出模型,并给它命名。

    1.2K60

    Google AutoML图像分类模型 | 使用指南

    我们将使用来自generate.photos的AI生成的面孔数据集。通过算法训练来判断一张脸是男性还是女性。之后,我们会将模型部署到云中,并创建该算法的Web浏览器版本。...建立项目 现在可以开始使用Google AutoML了。接下来,我们将在Google AutoML上创建一个数据集,并开始训练我们的模型。...如果你还没有账户,请先在Google Cloud Platform上创建一个帐户。然后,我们需要创建一个新项目。 ? 创建项目后,我们可以使用顶部的侧边栏或搜索栏导航到Google AutoML。...在该界面中,单击“创建新数据集(Create New Dataset)”,并填写数据集的一些详细信息以进行训练。 ? ?...云模型公开了一个易于使用的API,你可以在其中上传一个简单的JSON对象并接收到一组带有返回概率的预测。对我来说,这是简单且完美的集成API。 ? 我们还可以直接在浏览器中使用API并检查结果。

    2.8K20

    Google发布强化学习框架SEED RL

    actor通常在CPU上运行,并且在环境中采取的步骤与对模型进行推断之间进行迭代,以预测下一个动作。...通过这种方法,learner可以在专用硬件(GPU或TPU)上集中进行神经网络推理,从而通过确保模型参数和状态保持局部状态来加快推理速度并避免数据传输瓶颈。...使用AI平台进行分布式训练 第一步是配置GCP和一个将用于培训的Cloud项目: 按照https://cloud.google.com/sdk/install上的说明安装Cloud SDK,并设置您的GCP...确保为您的项目启用了计费。 启用AI平台(“云机器学习引擎”)和Compute Engine API。...如https://cloud.google.com/ml-engine/docs/ working-with-cloud-storage所述,授予对AI Platform服务帐户的访问权限。

    1.6K20

    如何构建产品化机器学习系统?

    跟踪不同超参数的多个实验。 以预测的方式重现结果和再培训模型。 跟踪不同的模型及其随时间的模型性能(即模型漂移)。 使用新数据和回滚模型对模型进行动态再培训。...机器学习(ML)系统的组成部分 对于ML的不同领域,如计算机视觉、NLP(自然语言处理)和推荐系统,有很多关于正在开发的新模型的文章,如BERT、YOLO、SSD等。...1raw_dataset = tf.data.TFRecordDataset(filenames) 模型训练 对于模型训练,可以使用完全托管的服务,如AWS Sagemaker或Cloud ML Engine...对于这些应用程序,最好使用TensorFlow service、Cloud ML引擎或Cloud AutoML创建可扩展的性能API。在某些应用程序中,预测延迟非常重要,比如信用卡欺诈预测等等。...其他各种问题包括日志记录和监视各种服务的状态。还有许多其他工具,比如Istio,可以用来保护和监视系统。云原生计算基金会构建并支持云本地可扩展系统的各种其他项目。

    2.2K30

    【GPU陷入价格战】谷歌云可抢占GPU降价40%,P100每小时不到3块钱

    来源:Google 作者:文强 【新智元导读】还愁用不起GPU?今天谷歌宣布云端可抢占GPU大幅降价,P100的价格每小时0.43美元,换算成人民币只需2.77元。...今年早些时候,谷歌云平台宣布,可以将你的GPU连接到谷歌云计引擎(Google Compute Engine)和Google Kubernetes Engine上的可抢占虚拟机(Preemptible...也有人推测,是谷歌有一个新的产品要出现,降低旧产品市场的利润率将使其他公司无法足够盈利去投资研发并赶上自己。 总之,无论如何,这对于广大群众来说,是件好事。...开始使用 要开始使用Google Compute Engine中的可抢占GPU,只需在gcloud中添加--preemptible到你的实例创建命令中,在REST API中指定scheduling.preemptible...了解更多信息: https://cloud.google.com/compute/docs/gpus/#preemptible_with_gpu Kubernetes引擎GPU文档: https://cloud.google.com

    2.2K30
    领券