首页
学习
活动
专区
圈层
工具
发布

GCP 上的人工智能实用指南:第一、二部分

在下一节中,我们将介绍 GCP 中可用于促进 AI 各个构建模块的工具。 GCP 上可用的 AI 工具 Google 简化了在 GCP 上使用现成的 AI 构建块构建 AI 系统的过程。...您可以使用 Cloud Functions 连接到大多数 Google Cloud 服务。 可以使用 JavaScript 或 Python 开发 Cloud Functions。...这使得群集的使用非常容易且安全。 在 Dataproc 集群下,Google 实际上运行计算实例。...从算法上讲,此代码执行以下步骤: 导入了必要的包。 在较高级别上,此代码使用OS,google.cloud,cudf(RAPID),sklearn,pandas和xgboost。...一旦以适当的评分精心准备了训练数据,该平台就会通过简单的 Web 界面和 API 来进行模型的训练,评估和部署。 在本节中,我们将了解使用 AutoML 在 GCP 上执行情感分析的过程。

20.5K10

GCP 上的人工智能实用指南:第三、四部分

使用服务端点执行预测 通常,您已经在机器学习模型及其版本上训练并部署了 Google Cloud API 平台之后,才执行此步骤。...)] 图 9.44:在线预测工作流程 您可以使用部署在 Google Cloud Storage 存储桶上的模型作为服务端点公开,并且这些服务端点可以由使用 REST API 或gcloud工具本身的某些应用使用...在实际的生产案例中,您可以使用用 Python 编写的脚本或 cURL 工具来使用 Rest API,从而在已部署的模型版本上公开预测功能。 以下代码显示了如何使用gcloud工具进行在线预测。...使用 Vision API 执行光学字符识别 收到 PDF 格式的发票后的第一步是解释其内容。 我们将通过以下步骤使用视觉 API 来执行光学字符识别(OCR): 在 GCP 上创建一个新项目。...我们学习了如何使用多种 Google 服务在 GCP 上开发端到端应用。 最后,我们简要讨论了 GCP 即将发布的功能。

9.3K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    云环境中的横向移动技术与场景剖析

    此时,威胁行为者就可以使用SSH密钥和云令牌进行横向移动,并渗透到其他开发环境,下图显示的是该示例的事件执行链流程图: GCP:基于元数据的SSH密钥 如果配置不当,GCP也将存在等效的横向移动技术。...具备足够云API权限的威胁行为者可以使用下图所示的命令,并使用Google cloud CLI建立到计算引擎实例的串行控制台连接: Azure:VMAccess扩展 此技术在Azure中有一些限制,具备足够云...此时,威胁行为者可以使用StartSession API建立到多个托管实例的连接,并使用如下图所示的命令在每个实例上启动交互式Shell会话: 需要注意的是,该方法不需要EC2实例中相关安全组的SSH入站规则...威胁行为者还可以SendCommand API同时在大量托管实例中执行脚本,从而实现针对凭据文件的大规模信息收集任务。...主机层包含在云实例中执行的所有操作,而云端层包括在云环境中进行的所有API调用。在我们观察到的每一种技术中,威胁行为者可以利用云API和主机中的操作在云环境和实例之间实现无缝移动。

    1.6K10

    GCP渗透测试实战指南:从控制项检测到Top 10漏洞

    对于许多组织而言,保护在第三方管理环境中驻留和运行的数据和应用程序是一个主要问题,这使得云安全成为一个重要议题。通过采用稳健的云安全策略并执行例行安全评估,组织可以保护其在云中的数据和应用。...GCP Brute BucketundefinedGCP Brute Bucket是一种可用于对Google Cloud Platform中的Cloud Storage存储桶执行暴力破解攻击的工具。...未打补丁的VM镜像或容器undefined利用方式:由于缺少安全更新或使用过时镜像,利用虚拟机实例或容器中的已知漏洞。...GCP应用中的服务端请求伪造(SSRF)undefined利用方式:利用Web应用或API中的漏洞执行未经授权的请求,可能访问敏感的內部资源或元数据。...暴露的APIundefined利用方式:无意中暴露API,使其可公开访问或缺乏适当的访问控制,从而允许对GCP资源执行未经授权的操作。GCP审计模板此模板将有助于审查和审计GCP安全。

    6610

    云端迁移 - Evernote 基于Google 云平台的架构设计和技术转型(上)

    这有效地将我们可以使用的带宽量增加了一倍,并为我们提供了独立于用户流量的专用链接,在Evernote和Google之间建立了一条私人公路。 2、其次,我们需要决定在我们的数据中心中数据的来源。...是否可以分站点进行 我们的应用之前只在单一的数据中心运行过,在这样的环境中,在节点之间传输的往返延时经常是亚毫秒级的,如果我们期望将应用分开在原有的物理数据中心和GCP上同时运行的话,我们将要考虑如果节点间的传输延时达到...2、利用Dyn流量管理器逐步增加用户流量以使用新的前门(流量主接收站点)。 使用这两种方法,我们能够在任何其他服务被确认为在GCP中成功运行之前测试我们的新负载均衡平台。...在复制过程中,必须解决的第一个障碍是,我们当前的数据中心网络不是为每天在数千个节点上复制数百TB而设计的, 因此,需要时间来建立到GCP网络的多条安全出口路径。...使用shell脚本,我们能够与我们现有的库存和车队管理工具集成,以跟踪,启动,停止和恢复整个WebDavs中的资源迁移器实例。

    3.1K110

    Google Workspace全域委派功能的关键安全问题剖析

    如果获得了跟计算引擎实例绑定的GCP服务帐户令牌,则情况将更加严重。此时,攻击者将可能利用全域委派功能来产生更大的影响。...需要委派的 GCP 服务帐户才能创建与 Google 服务交互、访问 Google API、处理用户数据或代表用户执行操作的应用程序。 什么是服务账户?...在使用全域委派功能时,应用程序可以代表Google Workspace域中的用户执行操作,且无需单个用户对应用程序进行身份验证和授权。...如果请求有效并且服务帐户已被授予必要的全域委派权限,则令牌节点将使用访问令牌进行响应,应用程序可以使用此访问令牌在请求的范围限制内跨域访问用户数据; 3、API访问:应用程序在 API 请求中包含访问令牌作为身份认证...其中,服务帐号密钥日志将显示在GCP日志中,而Google密钥生成和API调用执行日志将显示在Google Workspace日志中。

    2.2K10

    在GCP实例中检测与缓解CVE-2024-6387漏洞:第一部分

    在GCP实例中检测与缓解CVE-2024-6387漏洞:第一部分在当前快速演变的威胁环境中,抢先发现漏洞对于维护系统安全至关重要。最近,一个新的漏洞CVE-2024-6387被公开。...本文将引导您完成使用自定义脚本获取公网IP并执行CVE检查,以检测和缓解您GCP实例中此漏洞的步骤。...OpenSSH在许多环境中(包括像GCP这样的云基础设施)被广泛使用,这使得及时识别和缓解此漏洞变得至关重要。...前提条件在我们深入探讨脚本之前,请确保您具备:访问您的GCP环境,gcloud 已设置并具备相应权限。列出实例及其公网IP的适当权限。具备Shell脚本编写和安全扫描工具的基本知识。...检测CVE-2024-6387的分步指南步骤 1: 从GCP实例获取公网IP首先,我们需要收集GCP环境中所有实例的公网IP地址。以下是一个自动执行此过程的脚本:#!

    8910

    Evernote云端迁移 – 基于Google 云平台用户数据保护

    当我们开始实施将数据迁移到云Google的云服务的基础设施上时,我们一直在思考,如何在迁移的整个过程中保障数据的安全。...我们通过使用Google托管密钥的GCP服务帐户来完成此操作。 GCP 服务账号及安全实现 当将数据迁移到云上之后,以前的静态CIRD块将会在静态、临时的共有IP中消失。...而我们需要找到一种方法,在被盗的API密钥和客户数据之间添加另一层安全性。 我们通过使用GCP服务帐户解决了这个问题。...他们对自定义服务帐户执行相同的操作。 你可以为每个计算机角色创建自定义服务帐户,并配置虚拟实例设置以使用相应的服务帐户。...现在,使用GCP软件开发工具包(SDK)在该虚拟实例上运行的任何应用程序都可以使用内置的Google自管理的轮换密钥。 但我们的操作工程师没有必要访问这些密钥对。

    2.9K101

    《Scikit-Learn、Keras与TensorFlow机器学习实用指南(第二版)》第19章 规模化训练和部署TensorFlow模型

    在GCP AI上创建预测服务 在部署模型之前,有一些设置要做: 登录Google账户,到Google Cloud Platform (GCP) 控制台(见图19-3)。...这需要使用服务账户的私钥;设定GOOGLE_APPLICATION_CREDENTIALS环境参数就成,可以在启动脚本之前,或在如下的脚本中: import os os.environ["GOOGLE_APPLICATION_CREDENTIALS...TensorFlow是如何在多台设备上执行这些运算的呢? 在多台设备上并行执行 第12章介绍过,使用TF Functions的好处之一是并行运算。...要启动任务,你需要命令行工具gcloud,它属于Google Cloud SDK。可以在自己的机器上安装SDK,或在GCP上使用Google Cloud Shell。...gcloud命令可以使用GCP所有功能。不用每次访问网页接口,可以写脚本开启或停止虚拟机、部署模型或做任意GCP动作。

    7.7K20

    谷歌在云平台上提供包含5000万涂鸦的数据集

    今天,谷歌将它们通过谷歌云平台(GCP)以API和附带的Polymer组件的形式提供(Polymer是一个用于构建Web应用程序的开源JavaScript库)。...从本周开始,加入公共谷歌群组的GCP客户都可以通过搜索并将其添加到项目,从而将API添加到其库中。使用Polymer组件,可以用单行代码在基于Web的应用程序中显示涂鸦。...Jonas解释说,Quick Draw API(使用Google Cloud Endpoints来托管Node.js API)提供对原始数据集中包含的相同5000万个文件的访问,但不需要全部下载。...同时,Google Research的一项内部调查发现,来自西方国家的用户涂鸦方向基本与亚洲用户绘制的方向相反。 数据集也被创造性地使用。...理论上,用户可以执行诸如“给我一张2017年3月来源于中国的认证图纸”这样的查询。 Jonas表示,“我只是想鼓励人们以新的方式使用数据集并做出贡献,看看可能进行怎样的扩展。”

    88410

    Google AutoML图像分类模型 | 使用指南

    建立项目 现在可以开始使用Google AutoML了。接下来,我们将在Google AutoML上创建一个数据集,并开始训练我们的模型。...创建模型 在本节中,我们将创建一个运行在GCP上的云模型,该模型具有易于使用的API以及可以导出到Tensorflow并在本地或本地托管的移动设备和浏览器上运行的Edge模型。 1....我们的云模型可以部署在GCP上,Edge模型可供下载并同Tensorflow一起运行。让我们一起来探索云模型和边缘模型的部署吧。 ?...总的来说,如果你有能力在后台运行云实例,那么我认为这是一个非常易于使用的API。 ? 边缘部署 对于边缘部署,我们有多种下载模型的方法。...结语 总而言之,Google AutoML在该任务上易于使用,且非常有效。我期待着尝试其他云提供商,看看他们比较起来表现如何!

    3.6K20

    谷歌新的云安全工具提升了DDos防护、透明度和可用性

    这些增强包括云安全命令中心(云SCC)、“谷歌云盔(Google Cloud Armor)”、VPC服务控制等新服务和若干供G Suite管理员使用的新特性。...另一个Alpha产品是谷歌的VPC服务控制,其功能包括保护GCP中存储在基于API的服务里的数据。...这让业务负责人更愿意把数据迁移到云上。 注意,要使用VPC服务控制,用户需要通过一个包含其详细信息的Beta程序来请求访问。...在同一篇博文中,Lin是这样介绍云盔的: 云盔使用云HTTP(S)负载均衡,提供IPv4和IPv6白名单/黑名单,防范诸如跨站脚本(XSS)和SQL注入(SQLi)这样的应用感知攻击,提供基于地理位置的访问控制...此外,它还在Google Drive中针对Team Drives增加了额外的安全特性,在移动设备上使用G Suite的团队成员可以获得更多的控制。

    2.3K80

    如何在 Google Cloud 上部署 EMQX 企业版

    EMQX 企业版是一款大规模分布式 MQTT 消息服务平台,能够通过多种方式部署到 Google Cloud Platform(GCP) 上。...在 GCP 上创建并启动虚拟机实例 在部署 EMQX 企业版之前,我们先在 GCP 上创建一个 Virtual Machine。...以下是在 GCP 上创建 Virtual Machine 的步骤,你还可以参考 Create and start a VM instance。...在 GCP 上打开防火墙端口 在 GCP 上安装服务或应用程序后,您需要手动开放所需的端口才能够从外部访问它,请按照以下步骤在 GCP 上打开所需端口。...图片 通过 MQTT X 快速测试 至此,您已经在 GCP 上完成 EMQX 企业版的安装并开通了所有需要的端口,对应的连接信息如下: 图片 下面我们使用 MQTT X 模拟物联网 MQTT 设备的接入

    4.3K10

    Github项目推荐 | 被昨天的股票吓哆嗦了吗,试试用Trump2Cash帮你赶紧脱坑

    当他发推特的时候,它会使用情绪分析来确定他的意见对这些公司是积极的还是消极的。然后,机器人将会根据预期的市场反应自动执行相关股票的交易。...项目代码用Python编写,你可以在Google Compute Engine实例上运行。每当特朗普发推文时,它都会使用Twitter Streaming API得到通知。...实体检测和情绪分析使用Google的Cloud Natural Language API(云自然语言API)完成,Wikidata Query Service(Wikidata查询服务)提供公司数据,用...创建虚拟机实例 查看快速入门,使用GoogleComputeEngine创建云平台项目和Linux虚拟机实例,然后通过SSH执行以下步骤。选择与你的首选价格和性能相匹配的预设机器类型。...export GOOGLE_APPLICATION_CREDENTIALS="/path/to/credentials-file.json" 你还需要为你的Google云平台项目启用云自然语言API。

    3K50

    构建端到端的开源现代数据平台

    在 ELT 架构中数据仓库用于存储我们所有的数据层,这意味着我们不仅将使用它来存储数据或查询数据以进行分析用例,而且还将利用它作为执行引擎进行不同的转换。...在 GCP 上,我们将使用具有足够资源的 Compute Engine 实例。理想情况下希望通过 IaC 配置部署,这样可以更轻松地管理版本控制和自动化流程。...• dbt CLI:此选项允许直接与 dbt Core 交互,无论是通过使用 pip 在本地安装它还是像之前部署的 Airbyte 一样在 Google Compute Engine 上运行 docker...我们将再次利用 Google Compute Engine 来启动一个 Superset 实例,我们将在该实例上通过 Docker Compose 运行一个容器。...[26]、使用其丰富的 API[27],甚至强制执行行级访问策略[28]。

    7.3K10

    Fortify软件安全内容 2023 更新 2

    它使用自己的声明性语言,称为HashiCorp配置语言(HCL)。云基础架构在配置文件中编码,以描述所需状态。地形提供程序支持 GCP 基础结构的配置和管理。...Java 不安全类 在 Java JDK 中,有一个隐藏类用于执行本质上不安全的操作,这些操作通常对开发人员不可用,需要反射才能实例化。...JavaScript 中标记正则表达式时删除了误报Cookie 安全性:Cookie 未通过 SSL 发送 – 在应用建议的补救措施时,在 Swift 中删除了误报凭据管理:硬编码的 API 凭据 –... – 在C++中触发基元类型时删除了误报未使用的方法 – 在 Java 代码中删除误报,其中方法由实现的可序列化方法调用已删除 JavaScript 中可能触发布尔值的数据流误报类别更改 当弱点类别名称发生更改时...此版本包括一项检查,用于在使用受影响的 ZK 框架版本的目标服务器上检测此漏洞。其他勘误表在此版本中,我们投入了资源来进一步减少误报的数量,并提高客户审核问题的能力。

    29300

    Google 的 Serverless 产品对比:Cloud Run、Cloud Functions、App Engine

    有了这种灵活性,Cloud Run 的用户可以使用他们已经用来在 Google Cloud 上打包和运行容器的工具轻松地运行 Serverless 工作负载,或者将有状态和无状态工作负载一起部署。...在 Google App Engine 中,您只需获取代码并将其部署到 Google 上,然后为您消耗的资源付费-这在 App Engine 上作为包含一个或多个服务的单个资源运行。...对于每种服务,您都可以部署该服务的一个或多个版本,这些版本又可以在一个或多个实例中运行,具体取决于每个版本处理的流量。...对于具有更稳定流量的应用程序,使用自定义运行时或不受支持的编程语言在 Docker 容器中运行,或者要访问在运行在 Compute Engine 上的 Google Platform 项目的其他部分,请使用...一些示例包括: 快速制作功能原型 快速自动缩放 Web 应用程序 为了响应后台事件执行一个任务 在确定哪种 Serverless 平台最适合您时,请记住以下几点: 如果您已经将代码打包在 Docker

    4.8K00
    领券