远程插入比本地插入慢x85，为什么以及如何改进？
远程插入比本地插入慢x85的原因可能是由于网络延迟和数据传输的开销。在远程插入过程中，需要将数据从本地传输到远程服务器，而这个过程中可能会受到网络带宽限制、网络拥塞、数据包丢失等因素的影响，导致插入速度变慢。
为了改进远程插入的性能，可以考虑以下几个方面：
- 优化网络传输：确保网络连接的稳定性和带宽充足，可以通过使用高速网络连接、增加带宽、优化网络拓扑等方式来改善网络传输性能。
- 数据压缩和批量插入：可以使用数据压缩算法减小数据传输的大小，减少网络传输的开销。同时，可以将多个插入操作合并为一个批量插入操作，减少网络传输的次数，提高插入性能。
- 异步插入和并行处理：可以将插入操作异步化，将数据发送到远程服务器后立即返回，不等待插入完成的响应。同时，可以考虑使用并行处理的方式，将插入操作分成多个任务并发执行，提高插入性能。
- 数据库优化：对于远程数据库，可以考虑对数据库进行优化，如合理设计表结构、创建索引、调整数据库参数等，以提高插入性能。
- 使用缓存和分布式存储：可以考虑使用缓存技术，将数据缓存在本地或者远程服务器上，减少插入操作对数据库的访问。另外，可以考虑使用分布式存储系统，将数据分散存储在多个节点上，提高插入性能和可扩展性。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云网络产品：https://cloud.tencent.com/product/vpc
- 腾讯云数据库产品：https://cloud.tencent.com/product/cdb
- 腾讯云缓存产品：https://cloud.tencent.com/product/redis
- 腾讯云分布式存储产品：https://cloud.tencent.com/product/cos
相关·内容
db.port")) InitDummyData(rowsCount)2019/11/28 15:48:55 will run 5002019/11/28
浏览 26提问于2019-11-28得票数 0
回答已采纳
但美国的 ACCDB (ace)数据库容量低，工作精细的需要“插入选择* "DAO - (currentdb.execute)通过VPN运行Access SQL，OLEDB连接到远程只有OLEDB，发出给远程SQL/Server的SQL命令不能看到本地ACCDB文件，所以您必须遍历记录集，为每个记录构建一个SQL语句。非常慢。很多额外的编码。读取数据速度快，插入记录非常慢。
两端都有SQL/Server。本
浏览 5提问于2010-05-05得票数 1
2回答
当我在本地工作和运行应用程序时，每件事情都能按预期工作。插入速度非常快(大约2分钟内有超过500000条记录)。现在，我试图在托管服务器上使用远程数据库，我注意到插入非常慢(大约2分钟内记录不足500条)。这意味着比本地慢1000倍。public void SetDemoDimCustomer()
浏览 4提问于2016-01-20得票数 5
4回答
我正在使用INSERT .在一批表中插入30.000行。语句中每一行的值。创建表： [Col4] [int] NULL, [Col6] [nvarchar](128) NOT NULL批插入行当我在本地SSMS中运行批处理时，它需要20秒，并生成以下等待状态：但是，当我在局域网上的远程计算机上运行SSMS时，它需要100秒(慢5倍)，并且具有几乎
浏览 0提问于2020-11-28得票数 2
我有一个HPPavillion500-203 a与RT3290芯片组，并简单地插入自己的Ubuntu12.04磁盘。：https://askubuntu.com/a/253660/22921 (它的替代版本之一)，但只使用Kernel3.2.0-29Wifi连接是http://www.speedt
浏览 0提问于2014-07-14得票数 0
回答已采纳
我在我的SQL server数据库项目中使用部署后脚本大容量插入数据。如果我发布到本地数据库，这很有效，但是如果我发布到远程数据库，很明显，我批量插入的CSV将不存在于远程服务器上。我应该如何使用部署后脚本将数据复制到远程服务器？一个CSV比一堆插件更容易维护，所以我更喜欢使用CSV。有没有人遇到并解决了这个问题？
浏览 3提问于2013-02-07得票数 2
当我尝试向数据库中插入数量不是很大的对象(大约20k条记录)时，它花费的时间比正常情况下要多得多。由于这是我第一次使用实体框架，我很困惑为什么将20k记录插入到我本地机器上的数据库需要1分钟以上的时间。通过记录Entity生成的SQL查询，我终于能够发现，无论我做什么，每个对象都是单独插入的，每次插入都需要2-4毫秒。取而代之的是，在我的本地
浏览 1提问于2017-04-18得票数 2
我正在开发一个数据收集应用程序，它涉及到对MySQL数据库的常量插入。我正在使用Python和PyMySQL来完成这项工作。我需要每秒在主表中插入大约100行。python进程一直在运行，并维护与驻留在远程服务器上的MySQL数据库的持续连接。
我知道，一般来说，最好是以缓冲区的形式插入数据(一次插入多行)，而不是单独插入。每100次左右的插入进行一次提交(PyMySQL中的connection.commit())是否可以实现与一次性插入大量数据相同的
浏览 2提问于2018-07-01得票数 0
1回答
我陷入了一个PostgreSQL数据写入非常慢的问题。所以我的问题是：
这是存储磁盘的问题吗，如SSD和HD
浏览 0提问于2018-09-28得票数 2
回答已采纳
在一个使用“星火提交”命令的小型3节点集群上，执行代码所需的时间要比使用“火花-shell”命令的一台机器花费的时间多得多(几分钟比几秒钟)。为什么代码在集群上的执行速度比在一台机器上慢，以及如何改进上面的代码片段？
浏览 3提问于2021-01-11得票数 1
回答已采纳
我正在处理两个数据库，一个本地版本和服务器上的版本。服务器是最新版本，而不是从服务器到本地版本的所有表上的所有值，我在用Python和MySQLDB..。谢谢你的洞察力
史蒂夫
浏览 0提问于2010-08-19得票数 1
3回答
问题(如前面的线程所描述的)不是插入(尽管其速度仍然缓慢)，问题是在数据本身中循环，考虑以下代码：Dim sngStart As Single, sngEnd我不知道为什么这么慢。也许是乐透sql驱动程序？我的目标是：从远程服务器获取所有数据并插入本地访问表
浏览 6提问于2010-06-18得票数 2
回答已采纳
1回答
实际上，我需要从一个本地表获取一个任意值，然后在对远程表触发的SELECT语句的WHERE子句中使用它，以便返回要插入到本地表的行：t如何</
浏览 0提问于2011-11-07得票数 1
回答已采纳
在本地机器上，我可以使用vanilla 14在几毫秒内插入120行。
当我期待一些击中性能，这是远远慢于它应该是。编辑:这是我为管理插入而编写的Python函数。我使用的是SQLAlch
浏览 13提问于2022-11-07得票数 0
回答已采纳
我只希望能够连接到在本地主机上运行的ASP.net c#网站上的远程MySQL数据库。谢谢
浏览 1提问于2011-03-30得票数 0
回答已采纳
1回答
我在做插入测试。以no归档模式运行的数据库。我配置了3个重做日志，每个2gb。
我试图将数据插入到测试表中。开始时，它可以达到15k in/秒。我在200次插入后做出了承诺。但是在大约130万的插入记录之后，它变得非常慢，大约1~2K it /秒。正如我在资源管理器中所注意到的，我们已经填充了所有的重做日志，因此从这个点插入的工作很慢。因此，我的问题是，为什么它在填充重做日志时变得如此缓慢，即使我提交了每200条记录。以及如
浏览 0提问于2012-06-14得票数 0
回答已采纳
1回答
在本地和通过互联网的不同表现
、、、、
在本地计算机上，一切都运行得很快。包含数据的表格被编译并作为HTML文档发送(我正在使用超过100kb的大型表格测试系统)。当我通过互联网下载相同的页面时，一切都慢了5-10倍，或者只是挂起了。但是它在DOM中插入数据的速度非常慢，下面的指令工作得特别慢：$("#oldtable").replaceWith( newtable )；和empty()它在IE6,8中工作得非常慢(在本地机器上工作我将数据作为一个对象从DOM中删除，然后插入整个表。<em
浏览 2提问于2010-01-20得票数 0
原因是在前面，我有一个非常糟糕的设计，其中一个invoice将被插入到DB中，然后一个查询将立即询问invoice的自动递增PK作为外键使用。为了有效地使用大容量插入，我需要访问几乎所有数据的唯一标识符，而不依赖于自动递增的'vanilla‘INT PK。我做到这一点，如我前面所说的，并添加了额外的列将作为外键，等等。我的插入速度现在非常好，但是现在查询需要7+秒。
重申一下，之前我是用香草自动增量int作为PK。切换到VARCHAR的外键真的会对性能造成这么大的破坏吗？我的下一步似乎是恢复到int，但不允许MySQL在inser
浏览 0提问于2012-04-24得票数 0
回答已采纳
我从远程web应用程序中检索数据，并将其存储在本地sqlite中。我不时地对连接执行一个commit()调用，这将导致向8个表提交大约50个插入。在大多数表格中大约有1000000条记录。INSERT本身是幼稚的(即每次插入一个execute()调用)，但是执行速度足够快(无论如何，它们的速度受到记录检索速度的限制，这是相当低的)。有人知道为什么会发生这种事吗？我想这与HDD缓存有关。如果是这样的话，有什么我可以优化的吗？
UPD:切换到WAL和synchronous=1，没有改
浏览 2提问于2014-05-23得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
