我使用的是JDBC，在DB2中有一个存储过程，它返回大量的数据--大约6000行。由于这个巨大的数据量，网络传输(从数据库服务器到应用服务器)很耗时。行1-行1000；Thread2 -行1001 -行2000；Thread3 -行2001 -行3000，依此类推
所有这些线程都可以并行运行，我可以聚合每个线程的结果。有没有更好的方法来处理这个问题，使用JDBC或任何其他方法？
浏览 29提问于2016-07-07得票数 1
2回答
我需要从一个表中读取大量数据并对其进行更新。
对此有什么最好的解决方案？当任何流式结果集打开并在给定连接上使用时，不能发出任何语句。在尝试更多查询之前，请确保已对任何活动流式处理结果集调用了.close()。
浏览 3提问于2020-10-15得票数 0
3回答
我看到了最近的更新，记录集正在更新，以便我们可以在它所指向的数据之间来回滚动。
为什么它们最初被设计为仅向前遍历。使用新版本有什么影响吗？
浏览 3提问于2008-10-07得票数 1
我希望在sybase中有hibernate分页工作，但由于Sybase没有内置的偏移量，Hibernate会尝试获取内存中的所有记录，滚动到所请求的特定记录集，并将其发送到前端。例如，如果总行数为1000，而我在第2页请求20条记录，则Hibernate查询会将所有记录提取到内存中，并从21到40滚动，只返回这20行。上面的东西适用于较少的记录集，但是当我们处理超过一百万条记录时，它就会产生内存堆空间问题。我上网已经有2-3天了，但是没有任何收获。我相信
浏览 3提问于2014-12-18得票数 0
我需要从postgres数据库读取大型数据集，该数据库需要能够通过rest api端点访问。然后，使用数据的客户端需要将数据转换为csv格式(稍后可能需要支持json和xml )。在服务器端，我们使用Spring Boot v2.1.6.RELEASE和spring-jdbc v5.1.8.RELEASE。我尝试使用分页和循环遍历所有页面，并将结果存储到列表中，然后返回该列表，但由于数据集不适合内存，因此导致了OutOfMemory错误。
流式传输<e
浏览 4提问于2020-03-19得票数 1
3回答
在Hibernate中有没有处理长查询结果的方法？如果我想绘制包含数百万条记录的表格并允许用户在其上导航，该怎么办？
目标不是将所有数据传输到客户端并处理当前位置。
浏览 3提问于2012-09-27得票数 2
回答已采纳
我正在Tomcat 6上运行一个web应用程序，使用Tomcat来管理JDBC连接。这个应用程序可以使用MySQL、Server运行，我们最近开始在Oracle上进行测试。如果要运行一段时间，它将占用所有2个任务并开始报告：我们对JDBC的使用非常初级。我们从JDBC数据源获得一个连接，执行查询或更新，并对结果、语句和连接调用close() (如果存在的话)。
当使用MySQL 5驱动程序或JTDS驱动程序运行时，我们可以在
浏览 9提问于2011-03-23得票数 1
1回答
我们有一个sql in spring jdbc模板，获取数百万条记录，我们希望用Java来处理这些记录。有没有办法用更少的内存来做同样的事情？
浏览 0提问于2018-09-27得票数 4
在一个批处理应用程序中，我使用一个基于文件的临时H2数据库来存储3M行。数据库大小为9 9GB。执行JOIN查询以获取ScrollableResults对象大约需要6分钟。从这里我了解到，最耗费时间的是将结果写入h2保存在硬盘上的结果缓冲区，并从中
浏览 0提问于2014-11-15得票数 0
我正在使用Amazon Redshift JDBC驱动程序连接到SQL Workbench/J上的Redshift。
我想得到一个大型数据集查询结果(几百万行)。但是，它似乎希望在尝试将整个结果集导出到文件之前将其加载到内存中，给我一个内存警告，并在没有创建输出文件的情况下中止对我的查询，因此这种方法似乎不起作用。有没有一种更好的方法，不需要丢弃SQL Workbench和JDBC连接？
浏览 2提问于2017-11-14得票数 0
我正在使用Apache中的MovieLens数据集。为了把数据放进火花DataFrames，我用了两种方法-dataframeList[table] = spark.read.format("jdbc"). \
浏览 1提问于2022-11-20得票数 0
回答已采纳
在使用声纳转轮分析多模块项目时，我经常会遇到“读取超时”错误。我用SonarQube 5.1.1配置了Jenkins。\Users\Administrator\.sonar\cache17:11:30.479 INFO - Install JDBCdriver
17:11:30.495 INFO - Create JDBC datasource for jdbc:h2:tcp://localhost
浏览 8提问于2015-07-15得票数 3
回答已采纳
1回答
当我通过jdbc运行一个简单的select *查询时，我得到一个结果，set.That集存储在客户机上，对吗？但是在DBMS打开了一个cursor.Since之后，数据库通过an.stateless Http API/rest服务访问，连接关闭，如果结果集存储在客户机上，则在client.And中有结果集，我可以对它做任何事情它是否意味着与数据库和结果集的有状态连接存储<
浏览 2提问于2020-07-11得票数 1
回答已采纳
1回答
创建服务器端游标
、、
com.microsoft.sqlserver.jdbc.SQLServerException:系统内存不足。对大型结果集使用服务器端游标:Java堆空间。结果集大小:280,236,031。我试图从SQL中获取一个大数据集，并得到以下错误。如果有人看到类似的东西，并愿意放弃一条线，请告诉我。
浏览 0提问于2010-10-29得票数 0
我刚接触开源堆栈，并且一直在使用hibernate/jpa/jdbc和memcache。我的每个jdbc查询都有一个大型数据集，并且可能会有大量的这些大型数据集，我最终会在其中绑定到一个图表。然而，我非常关注性能，而不是点击每个页面加载的数据库来将其显示在我的网页图表上。是否有一些示例说明如何(memcache、redis、本地或分布式)以及在何处缓存这些数据(jSON或原始结果数据)以加载到内存
浏览 0提问于2013-06-05得票数 0
回答已采纳
2回答
我正在尝试更新一个很大的行集(大约5M)。我第一次遇到堆溢出问题是因为在一个结果集中提取了这么多行。因为我不想在这台机器上增加我的堆大小，所以我想知道是否有一种有效的方法来做到这一点。我尝试设置setFetchSize(Integer.MIN_VALUE)，但是当我调用update函数时，我得到了这个错误：
流式结果集com.mysql.jdbc.RowDataDynamic@2087c268当任何流式结果集打开并在给定连接上使用时，不能发出任何语句。
浏览 3提问于2011-06-22得票数 3
at or
浏览 2提问于2019-07-24得票数 0
回答已采纳
1回答
RowMapperResultSetExtractor<DataPoint<Arpu>> resultSetExtractor = new RowMapperResultSetExtractor(rowMapper); @Override return results;
浏览 10提问于2022-03-08得票数 0
我想设计一个包含多个输出区域的网页，这些输出区域将保存从JDBC结果集生成的数据
我是一名JAVA新手，在大型机领域有20多年的软件开发经验。我做了大量的ISPF开发工作。现在，我正在寻找的是创建我的网页和在多个框架中显示JDBC输出所需的工具列表。我目前使用eclipse作为我的JAVA IDE。几年前，我编写了一段JAVA代码，用于获取结果集并在控制台中显示数据。现在，我想进入19世纪，在网页中显示我的数据。我真
浏览 0提问于2011-01-02得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
