mysql定期导入数据库 - 腾讯云开发者社区

文章/答案/技术大牛

发布

2回答

网站用户将数据从文件导入数据库

php、mysql、message-queue

这是必要的，以允许用户导入他们的数据在网站上(在mysql数据库)。每个登录的用户都可以将数据从文件导入到数据库中，然后在网站上使用这些数据。导入数据需要很长时间，也会给数据库带来很高的负载。您能告诉我如何更好地排队导入吗？因此，数据将在一次联机时导入，但要将数据排队，以便定期写入数据库。谢谢。

浏览 5提问于2011-02-08得票数 0

回答已采纳

3回答

在另一台服务器上高效克隆MySQL数据库

mysql、clone、mysqldump

我们需要定期创建生产服务器的实时MySQL 4数据库的克隆(只有一个模式)，并将其导入一个或多个开发数据库。我们当前的过程是'mysqldump‘数据库，通过ssh复制它，并使用'mysql’客户端实用程序在目标机器上恢复它。转储和复制相对较快，但恢复数据库模式(结构+内容)需要数小时。

浏览 1提问于2010-01-19得票数 3

回答已采纳

3回答

将csv文件自动传输到MySQL

mysql、database、bash、csv、phpmyadmin

我有一个csv文件，我将通过一个名为cygwin+ bash的批处理脚本定期更新该文件。，我希望自动将csv文件上传到MySQL数据库中，这样我的数据库中的表就会定期地用csv文件进行更新。该数据库目前正在Windows 2003计算机上运行，并由phpMyAdmin管理。例如，似乎展示了如何将csv文件从MySQL命令行上传一次，但不是重复，而后者正是我所需要的。

浏览 2提问于2011-03-15得票数 2

回答已采纳

1回答

在Mysql数据库中导入Microsoft数据库

c#、php、mysql、ms-access

我有一种特殊的情况，我的客户端需要(定期)将ms-access数据库导入他的mysql网站数据库(所以它是一个远程数据库)。我目前的想法是这个(显然客户端有一个MS-WindowsO.S.)：我知道这不是最好的方法，所以我提出了一个问

浏览 2提问于2012-03-14得票数 1

回答已采纳

1回答

我希望定期将MySQL数据库中的数据插入到clickHouse中，也就是说，当数据在mySQL数据库中添加/更新时，我希望将数据自动添加到clickHouse中。CDC是一种捕获对MySQL中的数据所做的更改并将其应用于目标ClickHouse表的技术。它只导入更改的数据，而不是整个数据库。要在MySQL数据库中使用CDC方法，必须使用二进制更改日志(binlog)。Binlog允许我们将更改数据捕获为流，

浏览 4提问于2021-08-16得票数 0

回答已采纳

2回答

保护负载数据本地

mysql

我需要定期从CSV文件中导入大量行。我希望能够为这项工作打开最少数量的用户访问权限(自动化脚本)。还有其他建议吗？

浏览 0提问于2018-08-21得票数 0

2回答

innoDB用于索引一个表与常规MySQL Solr表缓冲区

mysql、performance、optimization、solr

我计划使用Solr来搜索一个mysql表，这个表应该有数百万条记录。我对这个表进行了标准化，以便solr可以对其进行索引和搜索，以获得更多的性能结果。这是正确的，或者它应该搜索mysql表本身，我的意思是普通的选择。谢谢

浏览 2提问于2012-12-25得票数 0

回答已采纳

2回答

在MySQL表之间移动多行的Cron作业

mysql、cron、mysqldump

我有一个主数据库，每天存储多达5000行新行。因此，我计划设置一个cron作业，定期转储30天以上的行并复制新的行。仅用MySQL进行动态复制一个php脚本，它遍历这些行并逐一复制它们。

浏览 1提问于2013-01-15得票数 1

回答已采纳

1回答

通过反射用python填充复杂的SQL数据库？

python、mysql、sqlalchemy

我有一个相对复杂的MySQL数据库(60+表)，需要定期填充。大多数表上都有很多外键约束。我开始使用SQL Alchemy编写我的导入引擎。为了做到这一点，我需要用SQL Alchemy类重建整个数据库吗？有没有更好的建议？只有8个表实际接受新的原始数据，其余的都是从这些表中填充的。

浏览 38提问于2015-08-13得票数 0

1回答

将.csv有效导入到多个相关的表中

mysql、csv

您能告诉我如何有效地让用户在mysql中导入他们的数据吗？问题是，数据通常需要插入到几个相关的表中。导入几十几万行的.csv耗时长，对数据库的负载也很大。现在我解析.csv，生成插入(如果我们需要在相关表中设置属性，可能需要几个插入)，并在数据库中循环插入数据。你是怎么做这些事情的？也许要在服务器和服务器上定期加载文件，以便按小部分插入数据？

浏览 0提问于2011-01-24得票数 2

回答已采纳

2回答

全文搜索和200M+记录数据库

mysql、mongodb、elasticsearch、database

Iam即将创建一个包含至少2亿条条目的庞大数据库。数据库需要使用全文进行搜索，并且应该是快速的。我的数据库从许多不同的数据源获取数据，我需要定期导入新的或更新的数据。将我的所有数据存储在一个关系数据库(如mysql )中，然后创建一个nosql文档数据库(例如mongodb或elasticsearch)，仅仅是为了搜索，还是这在可靠性和防止冗余信息方面没有任何好处？

浏览 3提问于2017-03-21得票数 4

回答已采纳

2回答

艾泽拉斯核心服务器数据库在哪里保存(在服务器运行后)？

azerothcore

一旦服务器使用字符和更改等，保存的阿塞拜疆核心服务器数据库在哪里。我制作了几个版本的azerothcore文件夹，因为我在拍摄各种模块时遇到麻烦，每个位置似乎都绑定到相同的服务器数据库？

浏览 11提问于2021-06-27得票数 2

回答已采纳

1回答

UTF-8字符在导入到mySQL后以不同方式显示

mysql、utf-8、load-data-infile、ms-access-2010

我有一个充满重音字符的mySQL数据库。从MS Access 2010定期填充数据库。LOAD DATA LOCAL INFILE '$dir/$t.ext' INTO TABLE `$t` FIELDS OPTIONALLY ENCLOSED BY '|' TERMINATED

浏览 1提问于2011-09-22得票数 0

回答已采纳

2回答

在MySQL数据库中获取一个动态的XML提要？

php、mysql、xml

我试图让它存储在我的MySQL数据库表中，但是我不知道如何使用PHP将XML导入数据库，那么是否有一个函数或进程是我应该知道的呢？感谢所有的回复:)谢谢，约书亚

浏览 3提问于2015-10-26得票数 2

回答已采纳

1回答

用于将csv文件导入MySQL数据库的MySQL脚本

shell、heidisql

我在一台Linux机器上徘徊，是否有一种选择，每隔x分钟将新文件导入我的数据库(MySQL)。我的意思是，我每隔x分钟在目录中接收新文件，我知道使用HeidiSQL，我可以手动导入CSV文件。但是，我希望它是自动的，并且定期在我的Linux机器中有一个scrpit。我正在考虑使用cron重复执行操作，我只是不知道是否有一个命令将文件导入到HeidiSQL。

浏览 6提问于2015-06-02得票数 0

回答已采纳

1回答

如何手动将数据库直接导入到XAMPP的phpMyAdmin中的data文件夹？

mysql、database、phpmyadmin、xampp

我将数据库文件夹从旧的xampp的mysql/data复制并粘贴到新版本的相同文件夹中。数据库名称显示在phpMyAdmin中，但不显示任何数据。我知道我可以做一个简单的导入/导出sql来解决这个问题，但我想知道为什么复制和粘贴数据库文件夹不起作用？为了让它工作，我还需要做一些其他的事情吗？我打算使用自动备份工具定期备份我的数据库。除了备份mysql/data文件夹外，我是否还需要备份一些其他文件夹或文件以进行适当的<e

浏览 0提问于2014-02-08得票数 0

1回答

MySQL WAMP -数据库错误

php、mysql、wampserver

当我通过本地主机启动网站时，会出现以下错误：我在打听问题出在哪里。这个网站属于我的一个朋友，他想让我把网站连接到数据库。数据库驻留在根目录中。在大多数PHP文件中，有一个包含配置文件的标记，该文件包含数据库的详细信息。任何帮助都是非常感谢的。

浏览 2提问于2012-08-02得票数 0

回答已采纳

3回答

每15分钟将表导出一次，并在完成后调用PHP脚本

php、mysql、abap、jobs

我一直在研究一项潜在的工作，我需要定期(每15分钟)从SAP导出一些特定的数据，然后将数据导入到单独服务器上的mySQL数据库中。2)步骤1完成后，调用外部服务器上的php文件，将数据导入mySQL数据库。( a) ABAP程序能否每15分钟运行一次？从我看到的调度工具的截图来看，增量似乎是以小时为单位的。这样，我将知道何时调用导入.php脚本。 ( c)我只想导入自ABAP程序最后一次计划运行以来添加到SAP中的新

浏览 1提问于2013-10-04得票数 0

回答已采纳

1回答

Neo4j OutOfMemory错误:超过GC开销限制

java、memory、neo4j、garbage-collection

我有一个java应用程序，它需要从MySQL/Maria数据库中加载300 K记录，以便将它们导入到neo4j嵌入式数据库中。要获得所有必需的字段，我需要连接4个表。transaction tx.close(); // LOG exception一切正常，但导入停止在:93) at com.mysql.cj.core.io.StringV

浏览 4提问于2017-06-10得票数 2

4回答