mysql分表处理 - 腾讯云开发者社区

文章/答案/技术大牛

发布

3回答

在MySQL中使用Solr

mysql、solr、faceted-search

我在这里浏览了一些关于MySQL和分面搜索的问题，我看到了一个建议使用Solr的回复。提前

浏览 0提问于2011-01-05得票数 12

1回答

使用(最好是黑白广播)分布式同步原语来有效地同步MySQL表访问

java、mysql、distributed-computing、hazelcast

我有一个大约有100k - 200k行的MySQL DB表。表行每5-10秒被频繁地创建、更新、删除。目前，单个JVM应用程序实例读取所有行，并处理表中发现处于特定状态的所有实体。处理任务每1-2分钟调度一次，处理时间约为1-2分钟。现在，我想让这个JVM应用程序成为一个集群容错服务。一种选择是让多个实例获取一个分布式Hazelcast锁，而获取该锁的任何一个实例都会处理实体。但是，理想情况下，我希望参与服务的所有J

浏览 0提问于2014-12-17得票数 1

1回答

不一致的进口MySQL性能

mysql、sql-server

该进程是在Windows上使用‘’通过MySQL exe启动的。所有表都使用MyISAM引擎。在每次导入之前，我们会截断目标表。问题：该过程将运行良好，大约2周，然后继续大幅度增加的整体处理时间。例如，我们将看到35分钟的运行时间为2周，然后第二天为55分钟，然后80分钟等，然后没有任何变化，它将下降到35后，大约一周(时间长短不同)

浏览 0提问于2011-08-05得票数 0

1回答

从Mongo到MySQL的五旬斋转换

mysql、mongodb、pentaho

我创建了在五旬节PDI的转换，它从我的Mongo集合转移到MySQL。为此，我使用了Mongodb输入和表输出。在表输出中，我选择了truncate true。现在我的问题列在下面：我正在使用五旬节数据集成社区版4.4.0

浏览 2提问于2013-10-24得票数 1

2回答

修改INNODB中的多列与多个Alter单列？

mysql、innodb、mysql-5.7、alter-table

我正在将数据库表和列的排序规则从utf8bin更新到utf8mb4_bin。引擎是INNODB，每个表都启用了文件。local` char CHARACTER SET utf8mb4 COLLATE utf8mb4_bin NOT NULL我猜测通过将它们作为单一语句加入，可以减少磁盘IO，因为它不需要多次写入整个表数据最后，我想并行运行这些alter，我的服务器可以处理这些表。

浏览 0提问于2020-12-08得票数 2

回答已采纳

2回答

MySQL数据库的最大表大小

mysql、database、size

MySQL表的最大大小是多少？50 at时是200万，80 at时是500万？在较高的大小范围内，我需要考虑压缩数据吗？或者如果表变得太大，可能会拆分它？

浏览 2提问于2008-09-07得票数 30

1回答

MySQL视图中的分组扫描所有分区

mysql、view

我希望在MySQL中创建一个视图，以便数据分析用户能够轻松地过滤大量数据，但是当我创建一个具有任何分组的视图时，整个视图都会被扫描，使得该视图在性能上毫无用处。一个简单的例子SELECT DeviceId, FROM Value v GROUP BY Timestamp,

浏览 2提问于2020-08-27得票数 0

回答已采纳

4回答

如何让MySQL在间隔时间内运行查询？

php、mysql

我正在创建一个web应用程序，其中需要处理表的每一行。我在每个表行生成一个子PHP进程。我正在实现一种安全机制，因此，如果一个PHP进程被中断处理一行，一个新的PHP进程将生成处理所述行。为此，我将创建一个新表，其中所有PHP进程每10秒左右签入一次。我需要MySQL删除所有5分钟或更长时间没有签入的行，所以我的应用程序将知道如何创建一个新的PHP子程序来处理该行。我知道让MySQL在一段时间内运行查询是可能的，但我

浏览 6提问于2011-07-14得票数 2

回答已采纳

1回答

通过PHP执行的批处理文件将所有命令作为后台进程运行

php、node.js、windows、batch-file、cmd

我在使用批处理文件并通过PHP执行它时遇到了问题。我们有一些节点服务器和Avaya CMS在访问受限的服务器上运行。服务器需要每天重新启动，因为它们有时会崩溃，所以我创建了一个批处理文件来关闭所有的cmd窗口，节点和avaya。从我看到的情况来看，当我单击按钮时，批处理文件运行，关闭所有节点服务器，这就是它，至少我一开始是这么认为的。通过一些挖掘，我发现它实际上是在执行整个批处理文件，但是它将所有的cmd窗口和avaya作为后台进程运行，我认为这就是我的问题所在。AFAIK当从PHP执行批处理文件时，没

浏览 0提问于2016-07-12得票数 3

1回答

优化只读Mysql从站

mysql、postgresql、optimization、database-replication、master-slave

我在我的一个三角洲装载项目上遇到了麻烦:)问题： webshop DB很大，处理每个表需要一段时间(每个表最多1分钟，日期没

浏览 1提问于2016-01-25得票数 0

回答已采纳

1回答

将Postgresql表转换为Mysql表

mysql、postgresql

我有一个表polit_activity，其模式如下：( category_name charactercharacter varying, gr character varyingWITH ();psql> \o /var/lib/abc.

浏览 0提问于2011-04-06得票数 0

1回答

Perl：：mysql 'mysql_use_result‘可以在插入另一个表时使用吗？

mysql、sql、perl、dbd

我在mysql中做了一个大连接，然后对结果数据进行操作并将其写入另一个表。现在，我使用的是默认的mysql_store_result，但是查询后的$某某->execute()需要大约20分钟才能运行。我想切换到mysql_use_result，因为我一次只在一行上表演。但是，文档的这一部分让我感到困扰：该属性强制驱动程序使用mysql_use_result而不是mysql_store_result。前者速度更快，内存消耗更少，但往往会阻塞其他

浏览 1提问于2011-09-01得票数 1

回答已采纳

2回答

按IST区域从mysql表中获取数据

mysql

我使用的是共享主机的GoDaddy are服务器，我有一个mysql数据库，其中有两个列，其中包含数据类型日期。我使用以下sql查询。

浏览 6提问于2017-02-11得票数 0

回答已采纳

2回答

为什么事务/提交在PHP/MySQL (InnoDB)中有如此大的性能提升？

php、mysql、csv、transactions、innodb

我一直在处理导入大型CSV数据文件；通常少于100,000条记录。我正在使用PHP和MySQL (InnoDB表)。在MySQL INSERT(下面代码中的process_note_data()的一部分)之前，我需要使用PHP来转换一些字段并进行一些文本处理。MySQL的LOAD DATA是不可行的，所以请不要建议。最近，我试图通过使用START TRANSACTION和COMMIT来使用MySQL事务来提高这个过程的速度。性能的提升是令人惊讶的。<

浏览 2提问于2013-02-04得票数 36

回答已采纳

4回答

使用C#管理大型数据库

c#、mysql、database、performance

我们使用MySQL从数据库中获取数据，对数据进行匹配，并将匹配的数据返回给用户。MySQL Db包含10个表，9个表具有较少的数据，需要与具有2500万条记录的第10个表匹配，并且仍在增加。每隔1分钟，在表9的其余部分中更新新数据，并在比较后删除旧数据。我在C#内存中有10个表数据，但它有时会超出内存。我正在考虑将C#应用程序分成5-6个部分来处理数据，然后再处理其余的逻辑。

浏览 3提问于2010-07-14得票数 1

回答已采纳

3回答