mysql数据库中的分区技术
MySQL数据库中的分区技术是一种将表分割为更小、更可管理的部分的方法。通过将数据分散存储在多个磁盘上，分区可以提高查询性能和数据管理的效率。
分区技术的分类：
- 哈希分区：通过将记录分配到不同的分区中，使用哈希算法来确定记录所在的分区。
- 范围分区：根据某个列的范围值来进行分区，例如按日期、年龄等范围划分。
- 列表分区：根据某个列的离散值来进行分区，例如按国家、地区等进行划分。
- 组合分区：使用多种分区策略的组合，可以根据实际需求来设计分区方式。
分区技术的优势：
- 提高性能：通过将数据分散存储在多个磁盘上，可以实现并行处理，从而提高查询性能。
- 管理灵活：可以根据业务需求对不同的分区进行备份、恢复、维护和管理。
- 数据隔离：可以将不同的数据类型或业务类型存储在不同的分区中，提高数据隔离性和安全性。
分区技术的应用场景：
- 大数据量表：当表的数据量非常大时，通过分区可以提高查询效率和管理性能。
- 历史数据归档：将历史数据根据时间范围进行分区，方便后续的数据查询和管理。
- 高并发写入场景：通过分区可以将写入操作分散到不同的分区中，减轻写入压力。
腾讯云相关产品： 腾讯云提供了MySQL分布式数据库 TencentDB for MySQL，可以帮助用户实现分布式架构，提供更高的可扩展性和性能。更多详情请查看：https://cloud.tencent.com/product/cdb_mysql
相关·内容
我正在尝试从多个csv文件中读取数据，并将它们写入mysql数据库。我用的是spring batch，有没有办法调高速度？ 我使用MultiResourceItemReader读取csv文件，并使用JdbcBatchItemWriter将数据写入数据库。 @Bean
public JdbcBatchItemWriter<Person> writer() {
JdbcBatchItemWriter<Person> writer = new JdbcBatchItemWriter<>();
writer.setItemSqlParameterS
浏览 12提问于2019-01-23得票数 0
1回答
我有7-8个表在mysql数据库中。所有这些表都有十亿条记录。表的大小从1 5GB到5 5GB不等。
问题: 1. SELECT查询速度慢。需要30秒。到1分钟。用于复杂的SELECT查询。2. JOINS速度非常慢。
解决这个问题的替代技术有哪些？
如果我的问题太天真了，我很抱歉。我研究过Redis，但它不能工作，因为它只是一个键/值存储(连接不能执行)。
浏览 6提问于2015-05-18得票数 1
1回答
我设计了一张用于日志的桌子。这是表结构，我将使用MySQL (InnoDB engine)，它将托管在AWS中。
| id (primary_key auto_increment) | entity_id (foreign key) | previous_value | current_value | calculation_done_with_this_row (boolean) | created_time |
这个表也将用于一些关键的业务计算，并且一旦计算完成某一天，就不再需要日志表的数据了。因此，从现在起，我计划在对这些行进行计算之后，删除日志表中的数据。
但我担心的是，如果出了问题，
浏览 4提问于2021-07-01得票数 0
目前，我正在建设相当大的web系统，我需要强大的SQL数据库解决方案。我选择Mysql而不是Postgres，因为有些任务需要只读(MyISAM引擎)，还有一些任务是大规模写入(InnoDB)。
关于这个只读功能我有个问题。它必须非常快。用户必须在不到1秒的时间内得到答案。假设我们有一个名为"object“的索引良好的表，其行不超过1000万行，另一个名为"element”的表大约有1.5亿行。我们还有一个名为"element_object“的表，其中包含将表"element”中的对象与表"object“(数亿行)连接起来的信息。
因此，我们将对表
浏览 1提问于2011-12-23得票数 3
回答已采纳
我有一个包含大量数据的表，列为“创建时间”。在这个数据库中，在过去3年中创建了超过12000行。我需要删除3个月以上的数据块，1000次一次。从最老的数据还是从最新的数据开始比较好？
我是通过灵活的搜索来完成的。这是最安全的方法，因为我们在我们的平台中使用了我们自己的ORM，与这些数据一起，其他有关系的数据将被删除。我不能全抄袭。我不能在分区中做。只有一个问题:它将如何更快？mysql是否对此类查询进行了优化？
浏览 3提问于2022-01-27得票数 0
1回答
我有一个mysql数据库，每年增长@ 45-50%。在过去的几年中，它的规模已经增加到了相当大的数量，现在在生产中造成了性能问题。
在测试环境中对其进行分析时，我发现有一个表，它有大约20列，4-5列类型为longtext。它有大约180万条记录，并且经常被应用程序访问。我已经浏览了许多mysql性能博客，并且感觉到垂直分区在本例中可能会有所帮助，因此我想尝试一下，用一个表中的所有logntext列和另一个表中的其他列，通过主键映射两个表中的所有logntext列来手动拆分表，并观察到相同查询的性能提高了80%，这导致了问题的出现。
现在，我不确定我是否能够在不手动破坏表的情况下实现数据库级别
浏览 8提问于2014-04-02得票数 1
回答已采纳
2回答
我想知道MySql的一个行为。例如，我需要从表中搜索最近一个月的记录中的一段信息，其中我在该表中有几年的记录。在这方面，MySql会做些什么呢？MySql会在整个表中搜索几年的记录吗?？
谢谢
浏览 0提问于2015-07-06得票数 0
1回答
具有随机值访问的键值数据库
、、、、
我正在寻找一个存储二进制数据的数据库(每个文档16‘m)。要求：
高级availabilityrandom访问字节，即从40个字节读取字节到最后的
我阅读了ScyllaDB、RocksDb和RiakKV的文档，但还没有找到第二个需求。现在，应用程序使用MySql和blobs，但在这个设置中达到了性能限制。
我认为使用ScyllaDb/Cassandra数据模型时，主键可以是UUID，次要键是几个小块的数目。在此模型中，客户端可以查询一系列辅助键并拒绝其他字节。
是否存在符合上述要求的数据库？
浏览 15提问于2022-10-19得票数 0
回答已采纳
目前，我正在使用JDBC驱动程序将数据从MySQL数据库导入到spark中，使用以下命令：
dataframe_mysql = sqlctx
.read
.format("jdbc")
.option("url", "jdbc:mysql://<IP-ADDRESS>:3306/<DATABASE>")
.option("driver", "com.mysql.jdbc.Driver")
.option("dbtable", "
浏览 4提问于2017-08-11得票数 3
我的问题的背景：
我使用专有的数据库(目标数据库)，并且我不能透露DB的名称(即使我透露了名称，您也可能不知道)。
在这里，我通常需要使用java更新记录。(记录数从20000到40000不等)此数据库的每个更新事务需要一到两秒的时间。因此，您可以看到执行时间将以小时为单位。此数据库API没有可用的批处理执行函数。为此，我正在考虑使用Java多线程功能，而不是在单个进程中执行所有记录，我希望为每100条记录创建一个线程。我们知道Java可以让这些线程并行运行。
但是，我想知道DB是如何处理这些共享相同连接的线程的？我可以通过运行一个跟踪程序并比较时间间隔来找到它。我觉得它可能在某种程度上具有欺
浏览 1提问于2020-04-05得票数 0
1回答
我最近继承了一个正在增长的MySQL数据库。它刚刚超过10亿条记录，其中一张表的性能非常糟糕。我想最终改变数据库，但我现在没有时间去做。
数据库的创建者决定使用BIGINT代替TINYINT或SMALLINT，选择糟糕的索引，不对表进行分区(当它真的可以使用一个)。不幸的是，每次我试图修改这个表时，它都会锁住它，并且它可以运行几天，这是我无法拥有的，因为表不断增长，需要访问。
我使用的是MySQL 5.7.5，即使我选择了‘就位’算法或者没有锁，它似乎仍然会影响性能，否则它会运行，永远不会完成，就像超时之类的。
有没有一种方法可以在不停机的情况下迅速改变一个桌子？
以下是CREATE表：
CR
浏览 0提问于2015-05-18得票数 1
回答已采纳
1回答
具有数据存档的许多行的数据库设计
、、、、
我对更大规模的数据库设计很陌生。我对MySQL有一些知识和经验，但现在我遇到了一些性能问题。
目前，我正在三个数据库中使用MySQL：
历史
快照
静态
在历史数据库中，我要插入数据。对于一个用户来说，每月大约有5百万行(用户每周都在缓慢增长)。由于我的select查询速度缓慢，可能是由于大量的数据，所以我有一些触发器，可以将这些触发器复制到快照数据库中，并删除旧的实体。Select语句在快照数据库上非常快速。但是，当我添加更多的触发器时，mysql似乎无法将负载白化。静态数据库只是用户表和一些元数据。
因此，我的问题是，如何使用MySQL或任何其他数据库技术实现对表的推送/弹出？
我希望将数
浏览 0提问于2016-04-06得票数 0
1回答
Presto如何使用关系数据库
、、、、
我正在努力学习PrestoDB，我有一个MySql数据库。这个数据库只是一个相对较小的数据库，我正在使用它来理解presto如何使用JDBC连接。
我已经使用presto连接到一个Hive亚稳态，我了解它如何与ORC文件一起工作，以及presto工作人员如何接收数据并根据我的需要运行查询。
这张照片对我来说真的很清晰：
非常清楚并行化将如何与此模型一起工作。
但是在MySql连接中，如何将数据与关系数据库并行化呢？prest是否将表加载到员工，然后运行查询？
或者仅在MySQL中运行查询并创建结果的接口？
浏览 2提问于2017-04-11得票数 3
回答已采纳
2回答
我在一个简单的Java应用程序中尝试使用两个mySql数据库。为了简化场景，模式是相同的，例如，让我们在每个表中使用Customer表。
我正试图决定将"union“结果返回到两个数据库中的两个客户表的接口的最佳方法。到目前为止，我已经看到eclipselink分区是一种可能的途径。
作为另一种选择，有没有办法“合并”两个实体类/ EJB /托管Beans的“内容”？
浏览 2提问于2013-03-30得票数 1
2回答
按外键划分MySQL
、、、
我在MySQL中有一个聊天数据库。
“用户”表
user_id(PK)，user_name
“聊天室”桌
chat_id(PK)、user1_id(FK)、user2_id(FK)
“消息”表
message_id(PK)，chat_id(FK)，user_from(FK)，message_text，message_date
由于我希望在messages表中有数百万条记录，所以我考虑对其进行分区。这是个好方法吗？这里需要使用哪种类型的分区？我想，如果我使用chat_id进行分区，那么对于两个用户之间的每一次聊天，我都会得到一个分区。在实践中，结果是，每次从分区中检索所有记录，因为它们都属于同一
浏览 2提问于2020-01-05得票数 0
回答已采纳
1回答
我正在开发一个连接到mysql后端的应用程序。snapchat有点简单，因为一旦当前用户从他们跟踪的用户那里获取图片并看到他们，他们就再也看不到这些图片了。但是，我不能仅仅从数据库中删除图片，上传图片的用户仍然需要看到它们。所以我想出了一个有趣的设计，我想知道它是否好。
在上传图片时，我还会创建一个mysql事件，它将在图片上传后的一天内运行，删除它自己。如果我一直有上传照片的人，事件就会一直被创造出来。这如何影响mysql数据库。这是可扩展的吗？
浏览 0提问于2015-07-12得票数 0
回答已采纳
我的事件存储在MySQL中，我到达了一个点，我有数千万行，当拉动一个聚合时，事情开始变得迟钝
我读过关于“表分区”的文章，并想知道它是否是存储聚合事件的好选择，因为聚合只是一个事件流，每个聚合都有自己的分区。
我的疑问是，如果要按聚合ID进行分区，是否仍然需要对聚合ID进行索引？你们有没有用过“表分区”来解决这个问题？
浏览 0提问于2018-07-05得票数 0
回答已采纳
2回答
我的应用程序中有一个node服务器，它可以与单个MySQL节点对话。与其只有一个MySQL节点，我希望有一个由n个节点组成的集群，这些节点构成了我的数据库。
有可能这样做吗？有人能指出一个资源，在那里我可以读到如何做到这一点。
我读过关于MySQL集群的文章，但现在更困惑了；有初学者教程吗？
我不想重写应用程序，因为我的印象是，应用程序代码永远不应该知道它是在与一个DB节点对话，还是与一个DB节点集群对话。
浏览 0提问于2012-08-29得票数 2
我们将构建一个实时计算系统，也希望将处理过的数据保存到Mysql数据库中，下面的代码如下：
splitWordInfo.foreachRDD(new Function<JavaRDD<String>, Void>() {
private static final long serialVersionUID = 1L;
@Override
public Void call(JavaRDD<String> rdd) throws Exception {
rdd.foreachPartiti
浏览 2提问于2016-09-21得票数 0
回答已采纳
1回答
我已经将访问数据库迁移到MySQL数据库。特别是，在这个DB中，我有一个包含近500万行的表。该表上的大部分操作是查询(筛选器用于选择数据子集)。
我对表演感兴趣。MySQL DB的分区可以提高性能吗？在这种情况下，使用哪种类型的分区比较好？
编辑
我认为，最常用的“数据过滤器”将是日期。但通常情况下会采用更多的标准。
浏览 2提问于2012-10-04得票数 0
回答已采纳
1回答
对于Postgres，我在中有一个非常类似的问题，但是，我想在MySQL5.7中这样做。
是否可以根据varchar字段的第一个字符在MySQL中对表进行分区？
我有一张垂直的桌子，其格式如下：
CREATE TABLE `test` (
`id` int(10) unsigned NOT NULL AUTO_INCREMENT,
`field_name` varchar(255) NOT NULL,
`field_value` text NOT NULL,
PRIMARY KEY (`id`)
)
这张表的大小是100多万条记录。
我们使用的大多数select查询都指定要搜索
浏览 0提问于2019-08-23得票数 2
回答已采纳
我正在洗脱剂引擎中实现对mysql的分区支持。
如果需要，我需要将模型中的分区描述与实际的数据库内容和alter进行比较。要提取有关表的所有分区信息，我使用information_schema.partitions
ALTER TABLE foo PARTITION BY RANGE (is_archive)
(
PARTITION p0 VALUES LESS THAN 1,
PARTITION p1 VALUES LESS THAN MAXVALUE
);
SELECT * FROM information_schema.partitions WHERE table_schema =
浏览 0提问于2015-02-24得票数 1
回答已采纳
2回答
可能重复: 你能帮我解决软件许可问题吗？
我们有一个ms-sql 2008标准版本.db变得太大了，大约8 10^9 records.the db文件约为4.5tb。我们不能努力让企业版对数据库进行切片。我们需要分割。
因此，我们的想法是将Mysql集群与许多数据节点一起使用。我们已经开始移动数据了。
我想知道我们是否需要为there集群购买许可?社区版和商业版之间有性能差异吗？
谢谢阿曼。
浏览 0提问于2011-03-12得票数 0
1回答
如何重新划分Oracle DB中的现有表？
例如，在MySQL中，您可以使用ALTER TABLE从头开始重新定义分区：
/* MySQL code, not Oracle DB */
ALTER TABLE t1
PARTITION BY HASH(id)
PARTITIONS 8;
我已经在谷歌上搜索了一段时间，但在Oracle中找不到提供此功能的任何内容。
但是它必须是可能的，因为它是正在进行的分区管理的基本功能。
在我的例子中，我正在构建一个历史快照表，并根据快照日期范围进行分区。
每天，我都需要为新的一天添加一个分区，但也需要合并旧的快照分区，因为我们只保存前几个季度
浏览 4提问于2019-12-04得票数 0
回答已采纳
2回答
命令没有显示正确的值。
、、、
这是一个RHEL服务器，我正在它上运行一个MySQL服务器，数据库和日志文件(但是，日志是禁用的)位于/srv目录中，其中有很多可用的空间。
最近，我有一个崩溃的表，所以我尝试修复它，但是在第二天，我发现MySQL无法以错误的方式响应许多查询，这表明没有磁盘空间：
ERROR 1030 (HY000): Got error 28 from storage engine
所以我运行了下面的命令，看看是什么占用了空间
[root@tms /]# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/mapper/serv
浏览 0提问于2013-07-11得票数 9
回答已采纳
我正在设计一个只对某些数据库表进行读取查询的应用程序(这是一种搜索应用程序)；查询的数据在夜间由系统更新(因此速度不太重要，尽管在这里也很重要)，而应用程序用户只在存储的数据中进行全文搜索。
因此，检索性能是应用程序的一个关键。
你能建议链接，谷歌术语或论点和其他材料，我可以阅读，以正确设计数据库的部分，将涉及用户的搜索？
我已经了解了有关索引的基本知识，并使用EXPLAIN检查了查询，我正在阅读有关表分区的内容，看看是否有什么可以帮助我的东西。
应用程序将在MySQL 5.6上运行
到目前为止，它的内置全文搜索已经满足了我们的需求，我正在更多地研究如何正确构造数据库的提示，这样我就不会
浏览 0提问于2014-09-07得票数 2
回答已采纳
我对SSIS相当陌生，我正在简单地将数据从一个DB2服务器表迁移到一个simple。在决定如何执行数据更新时，我选择使用暂存表来存储以某种方式更改并需要更新的所有行。我的目标是做一个基于集合的更新，从那个临时表到目的地，以避免进行逐行更新。
我遇到的问题，也许不是问题，也许我只是个新手；但是，我是wondering...Does --“暂存表”需要与需要更新的表位于同一个数据库中？
浏览 2提问于2016-06-17得票数 2
回答已采纳
2回答
在mysql中对数据库表进行分区时，如何访问/查询各个分区？
编辑
回应@Crack的评论。
因此，当分区位于表中时，我仍然会使用普通的查询。在查询的数据库端，“剪枝”从何而来？那么，它几乎是一个应用于每个查询的复杂存储的Where子句吗？如果没有单独访问分区，为什么要命名这些分区？
浏览 2提问于2012-04-05得票数 3
回答已采纳
4回答
Mysql大型数据库备份
、、、
如何在mysql中备份大型数据库？数据库的文件夹大小大于5GB &包含1.5 Lakh表。
我试图通过phpmyadmin备份服务器，但没有运气。
浏览 0提问于2012-02-28得票数 1
回答已采纳
1回答
如果我使用mysql作为cadence的数据库，我知道如果切分是100，那么就有100个表绑定到cadence中的历史服务。我的问题是，在这种情况下，匹配服务中的所有tastList将只使用一个表？如何分割数据库以进行匹配服务？
如果所有的taskList都写在同一个表中，这就足够了吗？
浏览 10提问于2022-07-29得票数 -1
Server: mysql 15.1远端5.5.65-MariaDB，用于Linux (x86_64)，使用readline 5.1
操作系统: Slackware 14.1
这是我要删除的9000万张旧的radius银行记录，这个月只留下了那些。剧本是这样的：
mysql --defaults-extra-file=/etc/my.cnf.d/.mylogin.cnf ${DB} <= MYSQL 5.6
# GET DIAGNOSTICS CONDITION 1 @sqlstate = RETURNED_SQLSTATE, @errno
浏览 0提问于2020-01-09得票数 0
我正在编写一个C#程序，在该程序中，我将查看大约5300个股票代码。我用以下字段将数据存储在MySQL数据库中: date、tickername、closingPrice、movingaverage50、movingaverage200、还有其他几个人。每只股票可以有多达15300个不同的数据点。因此，总的数据库将是5300x15300x6左右的不同字段。
我的问题是，除了一个大表之外，还有更有效的方法来存储所有这些数据吗？把数据分解成不同的表格，比如说十年，会给我买点什么吗？是否有一些链接/网站，我应该去那里得到一个一般的感觉，我应该考虑的设计一个数据库尽可能快，或MySQL数据库本身是否使
浏览 7提问于2015-08-22得票数 0
回答已采纳
1回答
我正在创建一个新的应用程序，这次使用的是MySQL而不是cassandra，因为它很难学习和设置。我了解了MySQL集群并选择使用这个数据库，因为我的所有devs都非常熟悉MySQL查询语法和数据库结构。
但是，当MySQL被告知要从多个节点获取记录时，它是告诉所有节点搜索记录，还是必须以某种方式知道数据存储在哪些节点上？
这个特性叫做协调器节点，它在cassandra中，但是我在MySQL上找不到任何东西
浏览 5提问于2021-07-24得票数 1
回答已采纳
每天晚上，我们从生产环境中运行mysqldump，并将其转储到另一个模式中，以用作同一服务器上的测试或开发服务器。随着数据库的增长，它需要花费很多时间才能完成。我在试着想个办法来加快速度。我想，既然我正在运行binlog，我想也许每周做一次Mysqldump，然后在这周的其余时间更新binlog中的另一个模式。当然，如果可能的话，所有这些都需要编写脚本。
另外，是使用mysqldump并从一个模式导入到另一个模式更快，还是使用从一个模式到另一个模式的更新来更新所有的表？
在同一个mysql实例上可以有一个master/master吗？
浏览 5提问于2012-10-03得票数 3
我有一台安装了lampp的服务器。我可以通过浏览器上的phpmyadmin访问我的数据库和它们的表，它们的大小在size列中可见，但我看不到mysql数据库的空闲空间。我如何了解lampp上的mysql还有多少空闲空间，以及如何扩展它？
浏览 2提问于2016-05-25得票数 0
是否有方法为MySQL数据库指定默认表空间？我想把我的大部分数据库放在磁盘上，但是有一个是我想留在SSD上的。
我知道我可以用“创建table...on表空间”来做这件事，但我希望我能告诉MySQL“数据库X的一切都在这里.”特别是因为我要从转储中加载这个数据库，而且dumpfile太大了，无法编辑。
浏览 0提问于2013-04-12得票数 0
回答已采纳
3回答
我经常在互联网上阅读如何正确地架构我的PHP应用程序以使它们能够扩展是非常重要的。
我已经构建了一个简单/小的CMS，它是用PHP编写的(想一想Wordpress，但是waaaay更简单)。
本质上，我有这样的URL：，其中X是具有页面内容的MySQL数据库中的id。
当我只是执行PHP读取活动时，我如何将我的应用程序配置为负载平衡。
像Nginx这样的前门设置可以将流量路由到多个节点，运行相同的代码来处理example.com/?page_id=X，这足以使我的站点“负载平衡”吗？
显然，在这种情况下，MySQL并不是负载平衡的，尽管为了简单起见--这就超出了这个问题的范围。
浏览 7提问于2010-08-02得票数 1
我们有一个审计数据库(oracle)，其中保存由部署在应用程序服务器上的服务(大约100个)执行的所有活动的监视信息。正如您可以想象的那样，由于服务处理的请求量很大，审计数据库真的很大。在此数据库上发生的唯一写入事务是实时写入审计信息的服务。
随着审计数据库开始增长(每天超过一百万条记录)，查询所需数据(例如select all errors occurred with service A for requests between start date and end date)很快变得几乎不可能。
为了解决这个问题，一些“聪明的孩子”决定设计一个批处理作业，将数据从数据库复制到另一个数据库(
浏览 4提问于2012-03-01得票数 1
回答已采纳
2回答
在MySQL中划分数据库表
、、、、
我正在编写一个数据仓库，使用作为后端.我需要基于两个整数ID和一个名称字符串来划分一个表。
一个更具体的例子是假设我在存储一所学校的数据。我希望基于以下复合“键”对school_data表进行分区：
school id (integer)
course_id (integer)
student_surname (string)
对于学生的姓氏，它只是姓氏的第一个字符，决定数据应该进入哪个“分区表”。
如何使用MySQL (5.1)和InnoDb表实现此需求？
另外，我正在Windows盒上进行开发，但我将部署到*nix盒上进行生产。我还有两个问题：
我假设在从Windows迁移到Linux
浏览 5提问于2009-12-20得票数 3
1回答
基于Pentaho指南()，我成功地将基于pentaho文件的存储库转换为MySQL数据库存储库。
现在有谁知道MySQL存储库是如何在数据库中存储数据的吗？这意味着如果创建新的文件夹，新的仪表板或新的连接，然后五角大楼如何在mysql数据库中存储这些数据。还需要知道哪些表用于数据存储的哪个目的。
默认创建的附加模式和基于mysql pentaho存储库的表。
请提供相关资料或参考资料？
浏览 11提问于2019-10-21得票数 2
回答已采纳
谁能解释一下如何将分区表从hive导出到MYSQL数据库？
以及如何从mysql导入到配置单元分区表中？
我已经阅读了谷歌的文档，但不确定可以使用的最新技术。
谢谢
浏览 5提问于2017-03-24得票数 0
回答已采纳
我在php中运行了一个应用程序，它创建了大量的数据。有时有必要将一些数据移到存档表中，然后只继续使用最近的数据，例如上个月的数据。
在应用程序继续在此数据库上运行时，实现这一目标的最佳方法是什么？我们在一个表中讨论多达30 up的数据。
我现在尝试的是，但我不满意的是:在php脚本中，我创建了第二个表，并使用一个循环将我想要存档的数据传输到新表。现在我们有将近2x30GB的数据。使用第二个脚本，我现在删除第一个表中的过时数据，由10000个数据集以块的形式从第一个表中删除，希望不要将数据库和复制重载到两个从数据库。
这是最好的方法，还是有人有更好的方法？
浏览 1提问于2015-03-04得票数 1
回答已采纳
2回答
我从mySQL上读到这个：
与其他切分数据库不同，用户在执行查询和碎片事务时，不会丧失执行连接操作、牺牲ACID保证或引用完整性(Foreign )的能力。
为了我的理解。当您在SQL之间进行选择时。
您将选择NoSQL进行简单的水平缩放(分片和分区)--例如，您有许多数据不能保存在单个数据库中，但是scarify事务级别ACID和数据库级别连接。
您将选择用于ACID保证和数据库连接的SQL。但是，增加了简单的水平规模可用性。(您可以在mySQL之上再添加一个层来处理分区和共享自己，但是如果这样做，您仍然会释放ACID并加入其中)
但是，上面的语句将mySQL声明为一个“完美”的数据
浏览 8提问于2017-06-18得票数 2
2回答
我有一个mysql数据库与4个不同的数据库。其中1个数据库有许多读/写活动，这些活动将受益于在ramdisk上运行。由于数据布局的性质和所需的读取类型，memcached在这里不是一个有效的选择。因此，我想在ramdisk中运行其中一个数据库(数据持久性在这里不是问题)。
问题是:有没有办法在mysql数据库中只为一个表设置数据目录？我希望其中3个数据库在我的硬盘上有一个数据目录，另一个指向内存磁盘中的目录。如果没有，我如何在同一台服务器上安装两个mysql实例(我使用的是Ubuntu)。
顺便说一下:我知道内存引擎，但这几乎没有提高性能(似乎并没有真正在内存中运行)。
编辑：
我不小心要求指
浏览 6提问于2010-10-18得票数 2
回答已采纳
我已经在一个表中插入了大量数据(超过200万个文档)，并使用GIN创建了一个全文搜索索引，效果非常好。我可以快速地查询数据库和检索合适的文档。
我定期收集可以插入数据库的新数据。我想做的是只用新数据更新我的索引，但到目前为止我已经失败了。我不想删除索引并重新创建它，因为重新创建它需要很长时间。基本上，我希望对索引进行增量更新。当插入数据时，我可以在运行时执行此操作，但这非常非常慢。我读到在插入的数据上创建索引更快(真的)，所以我猜测可以在新数据上更新索引。但到目前为止我还不能这么做。
我使用PostgreSQL12。
有人能帮帮我吗？
浏览 12提问于2020-05-14得票数 1
回答已采纳
我们有一个MySQL 5.7服务器，需要在非严格模式下使用，因为一些遗留数据库需要它。然而，在我们最新的应用程序中，我们希望数据库执行严格性(特别是NO_ZERO_DATE)。是否有一种在数据库级别覆盖服务器级配置的方法？
浏览 3提问于2017-02-14得票数 3
2回答
我们的客户都是同一个数据库的一部分，在数据库中我们存储他们的所有图像、博客帖子等等。我想对表进行分区，以优化每个站点的性能(每个表中的"site_id“指定)。
作为一个例子，让我们使用我们的images表。可用列是: image_id (int，主列，auto_inc)，site_id (int，主列)，宽度(int)，高度(int)，文件大小(int)，上传(日期时间)。
我尝试过添加分区；ALTER TABLE images PARTITION BY KEY(image_id,site_id)，它成功了。但是，我无法知道MySQL使用什么对分区进行“分组”--它是否为我想要的分区
浏览 4提问于2014-03-27得票数 0
回答已采纳
1回答
我使用的索引大小为2000万数据。我使用DataimportHandler将数据索引到SOLR中。现在，由于mysql查询变得非常繁重，执行完整索引需要花费很多时间。请建议一些技术，以加快索引过程。
我在想，像pre-processing数据一样，在其他一些数据存储中，比如、Hadoop、，然后从那里索引什么的。如果我想存储预处理数据，请建议哪个数据存储是好的。
我使用MYSQL作为主数据库。
达美的最新更新将在最后一个小时内达到10万左右。
浏览 4提问于2015-09-09得票数 1
1回答
从文件夹备份恢复Mysql数据库
、、、、
我需要从文件夹中恢复备份我的mysql数据库。
我有一个完整的/var/lib/mysql文件夹备份所有的文件。
我有一个新的mysql安装。我从备份中复制了数据库文件夹以及所有的ibdata和ib_logfile文件。我用chown -R mysql:mysql设置了新文件的权限。服务器启动时没有问题，但如果我从mysql提示符中列出数据库，则无法“看到”从备份复制的数据库。
知道如何让mysql看到备份数据库吗？
浏览 0提问于2020-07-19得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
