长时间运行的mySQL查询
长时间运行的MySQL查询是指执行时间较长的数据库查询操作。这种查询可能由于数据量大、复杂的查询逻辑或者索引不合理等原因导致执行时间较长，影响系统的性能和响应速度。
为了解决长时间运行的MySQL查询问题，可以采取以下措施：
- 优化查询语句：通过分析查询执行计划，优化查询语句的写法，使用合适的索引，避免全表扫描和不必要的数据读取，提高查询效率。
- 数据库优化：对数据库进行性能优化，包括调整数据库参数、合理分配硬件资源、定期维护数据库索引和统计信息等，以提高查询性能。
- 数据分片：将数据按照一定的规则分散存储在多个数据库节点上，通过并行查询来提高查询效率。
- 缓存查询结果：对于一些查询结果不经常变动的数据，可以将查询结果缓存起来，下次查询时直接从缓存中获取，减少数据库查询的压力。
- 异步查询：对于一些耗时较长的查询，可以将其放入消息队列中异步执行，提高系统的响应速度。
- 数据库分库分表：当数据量过大时，可以将数据按照一定的规则分散存储在多个数据库实例或表中，提高查询效率。
- 使用数据库连接池：通过使用数据库连接池，可以减少数据库连接的创建和销毁开销，提高查询效率。
腾讯云提供了多种与MySQL相关的产品和服务，包括云数据库MySQL、数据库审计、数据库备份、数据库迁移等。具体产品介绍和链接如下：
相关·内容
我们正在使用的MySQL 5.6上的流变7。计划迁移到版本8.xx很快。
我们有一个大小为4TB的mysql数据库。它有大约3000个表，很少有200-300GB大小的表。有时，查询在这些较大的表上花费的时间超过60到100秒。
有时，由于搜索条件较少，select查询执行时间较长，但有时常规查询也需要很长时间。
可能是因为MySQL忙着做别的事情。我们尝试了几天使用甲骨文MySQL企业监控。它显示长时间运行的查询，但在启动查询时没有时间戳。因此，当一个查询花费了很长时间时，我们无法识别其他查询正在运行的是什么。MySQL监视器在配置或设置方面没有报告任何问题。
如何确定是什么导致了表锁或者是
浏览 0提问于2019-04-20得票数 0
1回答
我有一个使用第三方软件ResourceSpace的PHP网站，当我安装它时，它使用我的默认存储引擎来创建表，当时它是MyISAM。现在站点已经变得非常大，我已经开始看到我的MySQL服务器上的性能下降了，而且由于ResourceSpace运行的查询非常频繁，该站点将开始出现加载页面的问题，这是因为运行很长时间的查询。当我登录到MySQL时，我将看到多个相同的查询运行很长时间(300+秒)，大多数查询的状态为“等待表级锁”。查询永远不会结束，我要么必须杀死它们、杀死MySQL，要么MySQL本身就会完全崩溃。有没有人见过这种行为与这个特定的软件或任何PHP网站在一般情况下？
另外，我正在考虑将表
浏览 0提问于2013-03-21得票数 1
回答已采纳
如果终止一个长时间运行的alter查询，会发生什么？alter查询会简单地恢复吗？这可能需要多长时间(作为它已经运行的时间的一部分)？
如果该查询正被复制到另一台服务器上，该怎么办？终止另一台服务器上的进程会恢复原始服务器的alter查询吗？
我们正在运行mysql
浏览 0提问于2010-04-29得票数 31
回答已采纳
在mysql 5.6.21中是否可以限制查询运行的最长时间？
浏览 2提问于2015-10-31得票数 0
1回答
来自
对于长时间运行(即报告或BI)查询，它可以更快一些，因为Spark是一个大规模并行系统。MySQL每个查询只能使用一个CPU核心，而Spark可以在所有集群节点上使用所有核心。在下面的示例中，MySQL查询在Spark中执行，运行速度是MySQL数据的5-10倍(在相同的MySQL数据之上)。
它看起来很棒，但我无法考虑查询的实际示例，在这个示例中，查询可以被划分为子查询，而多核van可以使它更快，而不是在一个核心上运行它？
浏览 5提问于2017-06-09得票数 1
回答已采纳
所以我有很长时间运行MySQL查询：
显然，结果是:在中断查询之后，我发现输出文件确实被修改了，并且有数千条记录。但是，，当我中断长时间运行的查询时，结果被刷新到文件中。
我用过命令：
mysql> SELECT ar.email FROM activation_request ar WHERE ar.date_confirmed is not null AND NOT EXISTS (SELECT 1 FROM user u WHERE u.username = ar.email) INTO OUTFILE '/tmp/results_after_adding_indexes
浏览 3提问于2020-01-11得票数 0
我正在使用MySQLdb模块连接到MySQL。我不想使用Python的时间函数:我想知道查询在MySQL中运行了多长时间，即在MySQL中直接运行查询后看到的数字。
我确实看到了一个线程，在这个线程中，人们最终可以深入研究这个问题，但我希望，既然MySQL报告了这个数字，Python连接会在某个地方找到它。
浏览 1提问于2016-01-24得票数 2
我正在运行一个python脚本，该脚本执行具有许多行的mysql查询。查询需要很长时间才能运行，有时我需要停止脚本以更改某些内容或重新开始。有没有办法告诉mysql服务器脚本正在终止(例如，如果发生了KeyboardInterrupt异常)，并且不再需要查询结果？
我尝试关闭mysql连接，但不起作用。查询的执行将继续进行。
我知道我可以直接终止来自服务器的查询，但我希望脚本自己完成这项工作。
我使用的是mysql-connector-python库，版本是2.0.2。
浏览 1提问于2015-03-07得票数 1
我的MySQL数据库(Innodb)有大量并发的、长时间运行的插入查询正在执行。
查询来自我的node.js应用程序，其中我使用了node.js绑定，特别是使用了连接池的“pool()”。
当我通过mytop监视查询时，我看到了许多长时间运行的连接(运行时间超过600秒)。
我通常认为这是一个挂起的查询，由于行锁定等原因，还是仅仅是来自连接池的连接？
浏览 6提问于2016-11-08得票数 3
1回答
yii是否保持数据库的持久连接？
我发现，即使当浏览器窗口关闭时，一个长时间运行的mysql SELECT查询仍然在后台运行，并减慢其他查询的运行速度。
浏览 4提问于2013-06-02得票数 0
回答已采纳
1回答
我有一个非常小的服务器(不到1 1GB的内存)，我在上面运行MySQL和apache。有一个php脚本可以运行MySQl查询并显示数据。我修改了查询，返回的结果将是数百万行。虽然查询本身并不是非常复杂，但考虑到我的服务器资源有限，MySQL需要很长时间才能将数据传回PHP。
当我在MySQL上运行show full processlist时，我看到查询处于“发送数据”阶段。
我的问题是:如何限制“发送数据”阶段的持续时间？
浏览 3提问于2019-09-22得票数 0
4回答
是否有办法为MySQL查询指定超时时间，并将其限制为60秒？我知道在使用脚本语言(例如，PHP)时可以这样做。但是，是否可以直接在MySQL中设置配置，以防止长时间运行的查询(在我的情况下通常是选择)取出服务器？
注意:运行Mandriva，DB在MyISAM中，这仅用于SELECT查询。
浏览 0提问于2012-05-06得票数 0
回答已采纳
我的程序使用runghc运行，但相同的程序在编译时总是失败，并出现错误“查询期间失去与MySQL服务器的连接”。失败与长时间运行的查询无关(它是一个小表上的CREATE VIEW )。MySQL错误日志和log_warnings=1.环境- ubuntu (13.04 ;-)本地数据库中没有任何内容)
浏览 3提问于2013-04-13得票数 5
从命令行(linux)，我如何才能关注长时间运行的mysql查询？
例如，我可以在linux机器上使用"top“，可以看到mysqld占用了大量内存。有没有什么mysql命令行命令可以用来深入了解更多细节并缩小查询的范围？
浏览 0提问于2013-01-05得票数 1
回答已采纳
我有一个在数据库上运行的长时间运行的事务
---TRANSACTION 2 4166167596, ACTIVE 14868 sec, process no 7906, OS thread id 1169635648
MySQL thread id 34318076, query id 1997556522 10.186.131.136 admin
以上是SHOW INNODB ENGINE STATUS命令的输出
我想看看查询id为1997556522的查询是通过什么查询运行的。SHOW FULL PROCESSLIST不是一个选项，因为它需要我手动从数百个列表中查找查询。
此说明您可以通过
浏览 2提问于2014-01-07得票数 5
回答已采纳
1回答
嗨，最近我在从java连接到mysql时遇到了一些问题。大多数情况下，一切都很好。但有时，查询会耗费很长时间，这是一个相当困难的查询，应该需要大约10秒。但是java需要几分钟才能收到来自mysql的结果。当我查看mysql的进程列表时，它正在发送数据并阻塞该表上的所有其他查询。它在我在querytimeout中设置的180秒后继续运行，即使在我终止javaprocess之后，mysql中的查询仍在运行，我也必须终止它。
浏览 3提问于2010-10-06得票数 0
如果我在MySQL工作台上运行一个SQL查询，连接在30秒后超时，因为这需要很长时间。即使断开连接，我的查询是否继续在MySQL服务器上执行？
例如，如果我正在做一个更新和更新循环超过10亿条记录。MySQL服务器是否先断开我的连接，然后在此之后完成查询？还是它断开了我的连接并终止了查询？
浏览 28提问于2022-06-14得票数 2
回答已采纳
中止检查表(mysql)查询是否安全？(查表TBL_NAME fast)
或者这会对数据产生影响吗？腐败？表有GB级的数据，服务器崩溃了，所以现在正在检查，花了很长时间。
因此，如果表处于良好状态，并且您运行此查询并中止它，它会导致损坏吗？
(我有6 6GB的内存，数据可能是4 6GB，所以我将在稍后再次运行查询，也许是mysql配置的一些提示，以使查询更快？与缓存有关的东西？)
浏览 3提问于2011-05-03得票数 2
2回答
我有一个这样的php mysql查询
$query = <<<EOS
SELECT * FROM articles
FORCE INDEX (articleindex)
WHERE category='$thiscat' AND did>'$thisdid'
AND mid!='$thismid' AND status='1'
AND group='$thisgroup' AND pid>'$thispid
浏览 0提问于2010-04-16得票数 1
1回答
我有mysql (5.7) innodb表，并运行select查询并使用Id外键。对于这个Id外键条件上的第一个查询，该查询需要很长时间才能执行，如果我使用相同的id外键在select上运行另一个条件，它运行得非常快。
为什么是这样？如何优化查询，选择在第一次执行中快速运行？
浏览 0提问于2017-08-15得票数 0
回答已采纳
1回答
假设您有一个想要在数据库上运行的查询，但是您知道这个查询要花很长时间才能完成，而且您不能直接访问运行MySQL的机器，也不能直接访问与该机器有稳定连接的其他端点。你的工作是什么?
浏览 2提问于2017-03-31得票数 0
回答已采纳
1回答
我在PHP中对外部MySQL数据库运行一个简单的查询：
$sql = "SELECT COUNT(id) as n FROM `call_history` where extension_number = '0536*500' and flow = 'in' and DATE(initiated) =\"{$initiated}\"";
$rs=mysql_query($sql,$pbx01_conn);
$rs = mysql_fetch_row($rs);
echo $rs['n'];
这似乎要花费很长时间才能
浏览 3提问于2014-03-06得票数 0
当我在MySql中运行SQL或使用BENCHMARK命令时，我会得到如下结果：
2 rows in set (0.00 sec)
0.00秒对于某些查询并不是很有意义，有时需要更高的精确度才能在更小的时间单位内计算出查询花费了多长时间。在MySql中如何做到这一点？
浏览 0提问于2011-12-21得票数 0
回答已采纳
1回答
当我在mysql上的大表上运行查询时，它需要很长时间才能运行。但是，当我再次运行相同的查询时，所需的时间比第一次少了一小部分。MYSQL是否将结果集缓存在内存中。我怎么才能让它不这样做呢？内存装满得很快。
my.ini中的query_cache_size为0
操作系统是windows server 2012 (如果这很重要)。
谢谢
浏览 4提问于2014-07-16得票数 0
我有一个PHP站点，它运行了很多数据库查询。使用某些参数组合，这些查询可能会运行很长时间，从而触发一条丑陋的超时消息。我想取代这个好的超时消息主题根据我的网站的其余风格。
预期这类问题的通常答案：
“优化您的查询，使它们不会运行这么长时间”--我正在记录长期运行的查询并对它们进行优化，但我只在用户受到影响之后才知道这些问题。
“增加PHP设置(例如set_time_limit、max_execution_time)，以便长时间运行的查询能够完成”--有时查询可以运行几分钟。我想告诉用户在这之前有一个问题(例如30秒后)。
“使用register_tick_function来监视脚本
浏览 3提问于2010-05-14得票数 10
我们在mysql 5.6上有一张大桌子。现在，我们要更改此表的架构。我们没有对现有表执行alter操作，而是将整个表数据复制到新表中。
使用以下查询
insert into new table select * from old table
表的大小约为350 GB，有4.5亿行。
问题是如何从mysql客户端运行这种类型的长时间运行的查询。
如果我在后台跑步，是否有可能，比如nohup。
如果mysql客户端连接在运行查询的中间退出，会发生什么情况。
如果我在使用mysql客户端连接执行命令后关闭了我的膝上型计算机，会发生什么？
毕竟，我只是不想破坏我的查询，请建议最佳
浏览 2提问于2016-02-13得票数 0
我注意到，如果我使用mysql_query()使用php执行一个长时间运行的mysql查询(我知道我不应该使用这个查询)，那么php进程就会被杀死，那么这个查询就会继续在mysql服务器上运行。这不是一个持久的连接。该连接是通过以下方式建立的：
$db = mysql_connect($host, $login, $pass, false);
$sql = 'SELECT COUNT(*) FROM `huge_table`';
$result = mysql_query($sql, $db);
例如，假设我有一个10亿行表，而php进程是出于某种原因这样做的：
SELECT
浏览 4提问于2014-07-23得票数 3
回答已采纳
3回答
如何以编程方式停止正在运行的mysql查询？
我面临的问题是，查询是使用用户提供的数据构造的，有时可能需要很长时间才能执行(大表1500-3000万行)。我想为用户提供一个取消选项，但不知道如何停止当前正在执行的mysql-query。
应用程序是一个Java applet- servlet :用户在applet中指定标准，该标准被传递给servlet，在servlet中创建一个处理程序类来处理请求。这个处理程序类是自包含的重新连接-查询-断开到mysql的连接。
在这种情况下，如何取消正在运行的mysql-query？
浏览 3提问于2010-01-14得票数 24
回答已采纳
1回答
我使用它来进行一个查询，在c#.net mysql连接中，我最多可以查询到20。这个查询要花费很长时间才能执行，当我在MySQL shell中运行它时，需要3分钟。所有其他查询都运行良好。
string sqlQuery = "(SELECT TimeStamp, AVG(FwdHr), W FROM Meter_Data " +
"WHERE TimeStamp Between " +
(timeSt[0] - window).ToString() +
浏览 1提问于2013-06-13得票数 1
1回答
如何杀死长时间运行的报告
、、、、
我的应用程序是一个报告应用程序。我正在使用jdbc连接数据库(MySQL)。有些报告需要很长时间才能生成报告。有什么方法可以阻止/杀死程序本身的长时间运行的报告/查询执行吗？我计划构建一个显示当前正在运行的报告列表的屏幕，以及一个停止/终止报告的选项。
请指点。
浏览 2提问于2013-11-09得票数 0
回答已采纳
当使用ODBC连接将Microsoft Access连接到MySql数据库时，每次运行的查询都会持续很长时间，并显示在缓慢的查询日志中。
我刚在一家小公司找到了一份新工作，他们的整个系统都是基于微软的Access和MySql，而且运行速度非常慢。
我的工作是创建一个替代品，但我想在此期间加速当前的系统，有什么建议吗？
干杯，伙计们
浏览 2提问于2011-04-28得票数 0
1回答
我有一个执行大型MySQL语句的Python程序。如何告诉MySQL即使在Python程序终止后也要保留缓存，以便下次运行Python程序时缓存结果？
现在，每次我运行Python脚本时，即使我正在运行完全相同的查询，检索结果也要花费很长时间。我已经将query_cache_size和query_cache_limit设置为大于结果集。
浏览 0提问于2012-06-17得票数 0
回答已采纳
我正在运行一个web应用程序，它必须扫描(特定列上的MySQL查询)一个巨大的MySQL表，该表有超过10万条记录。
问题是，当用户在从扫描中获取结果时从同一个web应用程序请求另一个页面时，浏览器需要很长时间才能显示该页面。
在请求新页面时，如何取消扫描(或MySQL查询)？
浏览 0提问于2014-07-07得票数 0
回答已采纳
对于我的搜索，我使用了多个查询，我想衡量一下mySQL执行所有查询需要多长时间。PHPMyAdmin会运行您给出的所有查询，但它只给出最后一个查询的结果和执行时间。有没有办法在不拿出计算器的情况下查看综合执行时间？:)
浏览 0提问于2010-01-16得票数 0
纵观MySQL Binlogs，我看到了一些没有意义的数据。有些查询说它们已经运行了4294967295秒(在这个系统上也恰好是UINT_MAX )。
使用这些执行时间报告的查询各不相同，但它们通常是对小表的更新。这些查询不可能运行那么长时间。
Percona有一个博客指出，如果服务器是exec_time复制从服务器，那么MySQL值可能与预期的不同，但事实并非如此。
这些是二进制日志中exec_time的奇怪值，还是MySQL中的一个bug？
浏览 0提问于2016-04-18得票数 3
回答已采纳
我正在尝试通过mysql查询(无连接)从表中删除超过200万条记录。该表有大约8000万条记录。
我使用的是set autocommit=0;，它需要很长时间才能完成。如果我使用autocommit=1运行查询，速度会更快吗
浏览 2提问于2013-03-19得票数 0
回答已采纳
3回答
我无法从我的office (ADSL)中保持几种类型的长时间运行的连接，我需要让服务提供商相信这是一个真正的问题。标准的pings和traceroutes不显示任何问题，我需要更先进的东西。
每当我通过ADSL线路从我的盒子(PHP或MySQL工作台)启动一个长时间运行的MySQL查询到互联网上的服务器时，驱动程序似乎断开了连接。MySQL工作台冻结并要求部队退出。PHP从不返回任何结果，必须终止。来自我家里的同样的查询一直都很好。
ADSL线上的远程桌面连接经常被丢弃，我需要每天重新连接15次。这不是在家里发生的。SSH连接也会下降。
我正在使用Mac，但我的Windows同事也有同样的问题
浏览 0提问于2015-01-27得票数 2
关于这个问题有许多问题，但他们都呼吁不知道原因。
造成我这种情况的原因是我运行了一个需要很长时间的查询，所以我运行了service mysqld restart，现在，这个特定的表给了我这个错误。
MySQL正在运行，其他表加载得很好。
错误是：
#2002 -无法通过socket‘/var/lib/ MySQL /mysql.sock连接到本地mysql服务器(2)服务器没有响应(或者本地服务器的套接字没有正确配置)。
浏览 1提问于2015-12-24得票数 0
我遵循了一些通过慢查询日志跟踪慢查询的教程。
出于测试目的，我曾尝试将long_query_time的值更改为1，但无论我做什么，查询只在达到默认时间10时才会记录到日志中。
我试过了：
set @@GLOBAL.long_query_time = 1;
set global long_query_time = 1;
使用以下任一命令时：
show variables like '%long%';
show global variables like '%long%';
我得到的结果是变量被改变了。
我正在运行完全相同的查询，只是添加了更多的LEFT JOIN条
浏览 1提问于2014-03-01得票数 2
3回答
用于测试的长查询
、、
我正在尝试一些容错和应用程序，有没有人知道使用默认mysql表的长时间执行查询？
我们的想法是运行该查询，使mysqld崩溃，看看我的应用程序是否检测到错误并尝试连接到另一个mysqld。
谢谢
浏览 2提问于2013-06-24得票数 0
我经常检查我的一台MySQL复制服务器上的慢日志，发现最常见的慢查询是SHOW GLOBAL STATUS，平均运行时间为914秒。
我已经知道它为什么会在那里(一个监控探测器正在生成请求)，我的问题是为什么它要花这么长时间才能运行？
服务器正在运行MySQL服务器5.0.95。
浏览 4提问于2013-01-15得票数 3
2回答
我有一个带有MySQL数据库的Rails (v.2.3.8)应用程序。在数据库服务器上的慢查询日志中，有大量的条目，例如：
# Query_time: 3.471884 Lock_time: 0.000000 Rows_sent: 0 Rows_examined: 0
use prod;
SET timestamp=1312909843;
SELECT * FROM `pages` WHERE (`pages`.`controller` = 'forum_categories' AND `pages`.`action` = 'show') LIMIT 1;
浏览 0提问于2011-08-10得票数 2
3回答
IHello，
我试图对MySQL数据库中的每个表进行MySQL计数，中有多少记录。
我的所有表恰好都在InnoDB和中--这个查询
SELECT TABLE_ROWS FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_SCHEMA = 'myschema';
是不是太过估计了(有+846条记录，它告诉我只有+-400条)？
是否有一种方法可以更精确地计算具有类似查询的行的确切数？查询运行多长时间并不重要。(P.S.不使用php或类似语言)
浏览 3提问于2010-10-07得票数 1
中止检查表(mysql)查询安全吗？(查表TBL_NAME快)
或者这会对数据产生影响吗？腐败？这个表有GBs的数据，服务器崩溃了，现在它的检查，它花了很长时间。
因此，如果表处于良好状态，并且运行此查询并中止它，它会导致损坏吗？
浏览 0提问于2011-05-03得票数 4
3回答
我有问题是因为我真的不知道如何测试我的代码和sql ( mysql )来查看/code运行SQL查询和PHP函数需要多长时间。
这里有人知道我在哪里可以找到这些工具吗？
浏览 1提问于2009-08-27得票数 1
回答已采纳
当我在MySQL 5.7客户机中以交互方式运行SQL语句时，它会告诉我查询运行了多长时间：
mysql> select now();
--------------
select now()
--------------
+---------------------+
| now() |
+---------------------+
| 2018-03-09 14:27:42 |
+---------------------+
1 row in set (0.07 sec)
在本例中，它运行了0.07秒。
但是，当我通过脚本运行相同的SQL语句时，输出不包括
浏览 0提问于2018-03-09得票数 0
回答已采纳
1回答
因此，我对MySQL非常陌生，如果两个表中都有一个单元格值，我将尝试运行一个查询来更新一个列，而这个查询要花费很长时间才能运行(它已经运行了10分钟了，还没有结果)。我的一张桌子大约有25万行，另一张大约有8万行，所以我不知道为什么要花这么长的时间。我使用的查询是：
USE the_db;
UPDATE table1
JOIN table2
ON table2.a = table1.b
SET table1.c = "Y";
我已经更改了表和列的名称，但是查询完全相同。我在这里看过其他的答案，而且都花了很长时间。任何帮助都将不胜感激，谢谢。
浏览 0提问于2015-06-04得票数 3
回答已采纳
在我们的网站宕机期间，我们在MySQL慢查询日志中观察到许多SQL：> 100秒，具有长Lock_time的查询很简单(以下是从慢查询日志复制的)。
SET timestamp=1599242815;
select `user`.`first_name`, `user`.`last_name`, `user`.`email` from `user` where `user`.`user_id` = <>;
# Time: 2020-09-04T18:13:12.674309Z
# User@Host: <>[<>] @ [<>] Id:
浏览 0提问于2020-09-06得票数 0
我试图在PostgreSQL 11中优化一个长期运行的查询。
每次我调整查询或创建一些新的索引，然后执行一个EXPLAIN ANALYZE SELECT ...来查看它是否有效时，我必须等待很长时间才能得到解释。
我敢说，有什么方法可以在不执行查询的情况下获得查询计划，就像它在MySQL中的工作方式一样
浏览 0提问于2018-11-30得票数 5
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
