在ScrapingHub中使用谷歌云存储时，"'str‘对象没有’get‘属性“

文章/答案/技术大牛

发布

1回答

python、google-cloud-platform、scrapy、google-cloud-storage、scrapinghub

当我运行我的脚本时，我遇到了一个错误，这似乎与我的Google权限不能正常工作有关。_get_store(store_uri) return store_cls(uri) File "/usr/local&#

浏览 23提问于2019-06-25得票数 1

回答已采纳

1回答

在本地数据中使用scrapy

python、web-scraping、scrapy

我使用了scrapinghub (一种云服务)以CSV格式保存几个页面的内容，在CSV的行中保存了response.body，现在我想销毁存储在本地的数据--我知道我可以使用Bs4，但也可以使用scrapy我曾经尝试使用Xpath，但是我得到‘str对象’没有属性xpath“如何将字符串再次转换为scrapy格式？

浏览 0提问于2015-12-04得票数 0

回答已采纳

1回答

无法创建数据流模板，因为Scrapinghub客户端库不接受ValueProvider

google-cloud-platform、dataflow、scrapinghub、apache-beam

我正在尝试创建一个数据流模板，该模板可以从由pubsub消息触发的云函数中调用。发布订阅消息将作业id从Scrapinghub (一个用于刮板的平台)发送到云函数，云函数触发数据流模板，该模板的输入是作业id，输出是BigQuery的相应数据。但是，不仅模板可以使用parser.add_argument创建，我还可以使用parser.add_argument从云shell运行管道。为什么Scrapinghub的Client API<e

浏览 27提问于2020-09-22得票数 2

回答已采纳

1回答

仅在部署云函数后出现GCP权限错误(适用于本地)

firebase、google-cloud-platform、google-cloud-functions、google-cloud-storage、google-iam

我正在向其他GCP存储桶中写入文件，他们已经为我创建了一个服务帐户，我在代码中使用服务帐户密钥(一个.json文件)作为凭据。我创建了一个Firebase Cloud函数来运行我的代码，所以当我在本地测试它时，一切都像预期的那样工作。当我运行云模拟器时，它也可以工作。但是，当我部署函数并尝试执行它时，我在日志中得到如下错误： ApiError: my-project@appspot.gservice

浏览 3提问于2021-06-02得票数 0

2回答

使用Cloud Shell查看云存储中的文件

python、google-cloud-storage

我一直在使用新的谷歌云平台，我希望从存储桶中读取文件，进行一些转换，然后最终将转换后的数据保存回云存储。到目前为止，我在读取数据和查看文件名时遇到了问题。我能否深入了解如何最好地读取和转换存储桶中的数据？import Blob file_name = '*.txt' client = storage.C

浏览 2提问于2017-09-28得票数 2

2回答

如何为google云存储中的资产创建数据目录(对象、存储桶等)使用Google数据目录服务

google-cloud-platform、google-cloud-storage、metadata

虽然谷歌数据目录处于测试阶段，但目前它为BigQuery和云发布/订阅服务提供数据目录服务支持，而不是谷歌云存储(处于测试阶段)。有没有办法使用现有的组件/服务为存储在Google云存储中的资产(存储桶、对象等)构建数据目录？什么时候我们可以期望在Google数据目录中直接支持GCS。

浏览 1提问于2019-09-12得票数 0

1回答

没有云存储的OCR google vision

android、google-cloud-storage、pdf-generation、ocr、google-vision

我看到它需要一个pdf才能上传到云存储。inputConfig可以与其他来源一起更改吗？例如，可能来自本地存储。谢谢你。

浏览 1提问于2019-12-19得票数 0

1回答

当google云存储对象被重命名时停止对象完成事件

google-cloud-functions、google-cloud-storage

hint: this doesn't need a code sample 我正在使用谷歌的云存储和云功能，这种情况要求在通过上传对象时触发函数，链就像监听云函数中的事件一样，生成一个随机字符串，调用一些提交到db的api，并用附加的随机字符串重命名同一个对象，当这种情况发生时，谷歌云存储再次触发finalize事件，

浏览 2提问于2022-10-02得票数 0

回答已采纳

1回答

如何在使用Google Cloud Functions时设置Google Cloud Datastore实体的date属性？

python、date、google-cloud-platform、google-cloud-functions、google-cloud-datastore

在使用Cloud Functions在Cloud Datastore中创建实体时，找不到一种有效的方法来为属性设置'Date time‘ 我使用的是一个Python 3.7 Cloud FunctionJSON有一个对象数组，这些对象被逐个读取以创建一个数据存储实体对象，然后将该对象写入数据存储。在数据存储中，所有<e

浏览 14提问于2019-02-18得票数 1

回答已采纳

1回答

‘'str’对象在django中没有属性'get‘属性错误

python、django

/edit.html", { })path("wiki/<str:title>/edit", views.edit__str__ = lambda self: mark_safe(klass_str(self)) File "C:\Users\harsh\Anaconda3\lib\site-packages\django\forms\for

浏览 0提问于2020-08-21得票数 0

1回答

获取'str‘对象在Django中没有'get’属性

python、django、django-views、django-urls

+]+$', number): else: return strid=98时，都会得到以下错误：Request URL: http://127.0.0.1:8000/voice/number?id=90Exception T

浏览 1提问于2014-04-01得票数 42

回答已采纳

1回答

防火墙身份验证聚合数据

firebase、google-cloud-firestore、firebase-authentication、google-cloud-functions

我使用Firestore将其他用户数据存储在一个名为/users的集合中。 //aggregate data in /users问题是我想要添加另一个集合，比如different-users，它只在使用应用

浏览 2提问于2020-05-28得票数 1

2回答

GCFS写入超过配额并引发HTTP错误429

python、google-cloud-storage、gcsfuse、papermill

如果输出notebook在本地写入，则有效： papermill gs://my-bucket/test.ipynb /tmp/test.ipynb 本地文件大小: 57K ls -alh /tmp/test.ipynb_client = None if self._client is None: def wri

浏览 29提问于2019-02-15得票数 1

回答已采纳

1回答

存储桶不允许访问的Firebase存储规则

firebase、firebase-storage、firebase-security

= null; }存储桶名称为：example-bda7b.appspot.com/ohttp://storage.googleapis.com/example-bda7b.appspot.com</Message>Anonymous caller does not have storage.objects.get access to example-bda7b.appspot.com

浏览 13提问于2020-02-09得票数 0

回答已采纳

1回答

云函数属性错误:从云存储读取json文件时，'bytes‘对象没有'get’属性

python-3.x、google-cloud-platform、google-cloud-functions、google-cloud-storage、service-accounts

我有以下功能：bucket_name = 'bucket_name'blob = bucket.get_blob('key.json') credentials://www.googleapis.com/auth/analy

浏览 45提问于2020-02-11得票数 2

回答已采纳

1回答

Scrapinghub: Dict_key错误处理|检查密钥是否存在

python、python-3.x、dictionary、scrapinghub

当部署在scrapinghub中时，我创建的每个网站都在自己的项目文件夹中，其中的项目是各种其他scrapinghub项目(相关信息)。使用ScrapinghubClient，我首先迭代项目以获取所有作业键：from scrapinghub import然后，我使用一个for循环来获取每个项目的job.key ...(j['key']

浏览 0提问于2017-04-18得票数 0

1回答

关闭云CDN对象的浏览器缓存出错(通过Google Cloud Storage的存储桶)

caching、google-cloud-platform、google-cloud-storage

我在谷歌云存储中有一个存储桶，并通过谷歌云负载平衡提供其内容，上面的存储桶作为后端。存储桶中的所有对象都是公共的。JS、CSS、HTML和图片存储在一个存储桶中。由于云CDN不支持gzip压缩(afaik)，所以我将gzip文件上传到bucket，并附上相应的头部。(我所有的用户都使用支持gz

浏览 11提问于2019-07-13得票数 1

2回答

如何在google云存储中启用实时对象访问分析？

google-analytics、google-cloud-platform、google-cloud-storage

我正在尝试为存储在google云存储桶中的对象设置实时访问日志。谷歌指定的访问日志每小时生成一次，不起作用。如果使用实时日志通过另一个点路由流量会更好，我将非常感谢关于如何做到这一点以及使用什么工具的建议。最终，我希望在</

浏览 2提问于2019-04-18得票数 1

1回答

在Tkinter回调中，‘'str’对象没有属性'get‘

python、tkinter

callback File "-", line 152, in bookingCanvasAttributeError: 'str' object has no attribute 'get' optVar = StringVar(self.root)self.bookingCanvas(optVar)

浏览 4提问于2020-01-31得票数 0

回答已采纳

2回答

如何使用tensorflow模型中的python访问google云存储桶中最新上传的对象

google-cloud-storage、python-3.5

我在tensorflow模型上工作，我想使用最新的ulpoad对象，以便从上传的对象中获得输出。有没有办法使用python访问上传到谷歌云存储桶的最新对象。

浏览 1提问于2019-04-04得票数 2

回答已采纳

点击加载更多