我需要一批一批地使用jetstream中的流，并在数据库批量插入后确认地将批量存储在数据库中，此时我使用了pull consumer，存储所有消息，并在批量插入成功时逐个提交。我需要确认所有消息吗?
浏览 18提问于2021-04-20得票数 0
1回答
我们有大约100,000条记录要插入到数据库中。在Hibernate批量插入中做这件事是不是一个好主意？选择批量大小的策略应该是什么？或者两者的混合搭配会加速这一过程。比如批量调用存储的Proc？
浏览 1提问于2014-11-06得票数 1
以前可以通过批量加载程序下载并上传到本地开发服务器。然而，由于不支持oauth2，批量加载器下载已经几个月不起作用了。一些地方建议从云存储备份下载，并通过批量加载程序或直接解析备份上传到本地数据存储。然而，这两个似乎都不再起作用了。是否存在用于将实时数据存储区拷贝到本地开发数据存储区的当前有效方法？
浏览 0提问于2016-05-06得票数 1
我们可能会在数据存储中存储大量记录，但我发现您被赋予管理这些数据的管理功能是缺乏的。
举个例子，没有什么好的方法可以批量删除一大堆数据--你必须自己写一个类来做这件事。在我开始构建管理用户界面和管理数据存储实体所需的功能之前，我想知道是否有人知道已经为我编写了一个好的第三方工具来做这件事？具有基本CRUD功能以及批量导入和批量导出功能的东西。
浏览 0提问于2010-09-20得票数 5
我需要从数据存储中删除批量记录，我检查了所有前面的链接，但都只是讨论了从数据存储中获取实体，然后逐个删除它们，在我的情况下，问题是我有大约80K个实体，每当我尝试使用数据存储db.delete()方法进行读取时这里有没有人碰巧知道一种更接近SQL的方法来执行批量删除？
浏览 3提问于2011-12-23得票数 0
1回答
应用引擎批量加载器性能
、、、、
我使用App Engine批量加载器(Python Runtime)将实体批量上传到数据存储。我上传的数据是以专有格式存储的，所以我实现了自己的连接器(在bulkload_config.py中注册)来将其转换为中间python字典。yeild my_custom_dict
为了将这个中立的python字典转换为数据存储实体，我使用了我在YAML中定义的一个自定义post导入函数。我只是创建新的数据存储实体(基于我的i
浏览 2提问于2010-09-09得票数 5
回答已采纳
我浏览了REST BatchSave 的文档，但他们在插入/更新/删除/获取时没有给出任何示例或步骤，我不能理解如何为批量保存设计REST API。我已经完成了从azure数据存储库的表中插入、更新、删除和获取实体，但在azure数据存储库的表中遇到了批量/分组/多次插入。需要帮助！
浏览 1提问于2017-12-29得票数 0
2回答
我有一个用例，我需要从主题中读取数据，然后批量数据(100条记录)，并将批量数据写入特定的文件或外部存储。为此，我计划使用处理器API，并使用kafka支持的状态存储对正在处理的数据进行批处理，一旦批处理大小达到100条记录，就将其写入文件。从状态存储中清除批以创建新的新批。另一个要求是我们不能在数据中有重复的数据。这意味着相同的记录不能在两个不同的批次中。 streams只有一次适合这个用例吗？我
浏览 10提问于2019-01-10得票数 0
我正在尝试删除数据存储中的记录。不幸的是，每当我尝试删除这些项时，它都会给我一个BadValueError，告诉我需要地区(其中一列)。由于批量加载器的问题，对于我仍然需要清理数据存储以尝试修复批量加载器错误的所有rows...but，区域都是空的。
我能做什么?
浏览 4提问于2010-09-20得票数 3
回答已采纳
信不信由你，我几乎是第一次尝试CoreData。有时，我需要用新的对象替换所有这些对象，数量大致相同。删除所有实体需要很长很长的时间，所以我环顾四周，有些人似乎建议，如果我们创建一个包含所有其他对象的“集合”对象，我们可以直接删除该集合，然后让Core Data cascade删除其他对象。到目前为止，我还不能做任何确切的时间检查，但感觉这不会改变任何事情。我错过了什么吗？
浏览 4提问于2015-01-30得票数 0
1回答
我在azure的Blob存储上存储了一个很大的csv文件。我想尽快将其加载到zure sql数据库中。请注意，如果需要，我可以将csv移动到替代存储，如datalake。
浏览 2提问于2018-12-06得票数 0
2回答
我需要使用Python使用CSV文件(250,000行)批量更新数据存储。通过对这方面的研究，我可以看到MapReduce将适合这个问题。我找到了一些显示类似操作的示例，但似乎找不到如何使用此库执行简单的批量更新数据存储的示例。谢谢
浏览 1提问于2012-02-10得票数 1
回答已采纳
我正在尝试理解将一组大数据--从( Azure托管的) SQL Server到Blob存储中的大约6M个文本行--迁移的最佳方法。在大多数情况下，这些记录是存档的记录，很少被访问- blob存储作为存放这些记录的地方是有意义的。希望这有意义，有人能帮忙吗？
浏览 2提问于2016-11-16得票数 0
回答已采纳
我有实时时间序列传感器数据。我的主要目标是保存原始数据。我应该这样做，这样存储的成本就会降到最低。所有传感器都会产生时间序列数据，我必须保存这些原始时间序列数据，以便进行批量分析。拼花格式是很好的存储成本较低。但是，如果每个传入的时间序列数据都以一种拼花格式写入，是否有意义呢？
另一方面，我想实时处理每个传入的时间序列数据。对于实时场景，我可以使用卡夫卡。但是，Hbase或Cassandra是否可以用于批量
浏览 0提问于2019-02-11得票数 1
我对从Snowflake连续批量卸载数据到本地存储感兴趣。使用JDBC直接发出SELECT查询，然后使用COPY_INTO复制到Snowflake内部阶段，然后使用GET命令从内部阶段()下载，从Snowflake批量卸载有什么缺点吗？通过JDBC进行select查询似乎更直接，而不必使用中间内部阶段的Snowflake存储容量。
浏览 3提问于2021-08-25得票数 0
在这种情况下，我希望他们能够支付他们的供应商在月底出售的商品的批量- PayPal批量付款。我该如何克服这个问题呢？还有其他建议吗？
提前谢谢你了。
浏览 1提问于2013-05-08得票数 0
4回答
假设我们需要对实体执行一些“批量”操作，并且实体的数量使得将它们检索到内存中是绝对不可能的。即只能在数据库中执行操作。
这种“批量”操作的地方在哪里？它应该是存储库上的一个方法吗？它会不会“泄露”数据库特定操作的存储库抽象？它不会将业务操作从实体移动到存储库吗？
浏览 0提问于2009-02-18得票数 11
回答已采纳
我有一个access数据库，包括许多表。而且我有一个没有数据的sql服务器数据库。我想从access中选择并插入到sql数据库。但这些都不是餐桌上的东西。从表中选择，但将多个表插入到sql数据库端。两个数据库都有主键和外键。如何在不丢失数据和密钥的情况下插入？
编辑: Access db表和列与Server表和列不相同。
浏览 2提问于2016-09-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
