我正在使用python子进程来运行mysqlimport命令。为了跟踪上传进度，我使用了命名管道和pipe_viewer。下面是另一个类似的problem。 子进程管道正在运行，没有任何错误，但是mysqlimport命令没有将数据上载到所需的表。 import subprocess, os, sys
os.mkfifo('named_pipe')
pv = subprocess.Popen(
["pv", "-f", "file.csv", ">", "named_pipe"],
浏览 17提问于2019-09-12得票数 2
我正在将几个大文件导入到一个表中：
/usr/bin/mysqlimport -h myHost -u myUser --delete --local --fields_escaped_by=\\ MBSR -L file1.txt
/usr/bin/mysqlimport -h myHost -u myUser --delete --local --fields_escaped_by=\\ MBSR -L file2.txt
一个是56 is，另一个是36 is。我成功地导入了其他大小为17 of的表。几天后，这两大进口似乎都还没有接近尾声。
对如何实现这一点有什么建议吗？另外，有没有办法查
浏览 0提问于2015-08-27得票数 0
我在innoDB的aws rds中有大约200个故事中的1T，我想备份它们并在ubuntu16.0.4服务器上恢复，我尝试了mysql-dump mysqldump --single-transaction --quick --max_allowed_packet 1G，然后通过mysql -u <mu_user_name> -p<my_pwd> <mu_db_name> < /mnt/rds.sql进行恢复，转储花费了几个小时并创建了256 G大小的文件，恢复过程已经5天没有完成了，如何使这个进程更快？也许和mysql有不同的选择？还是一个更快的恢
浏览 0提问于2019-04-07得票数 0
1回答
我正在尝试编写一个节点脚本来自动导入一个.sql文件。我想我误解了把论点传递给“产卵”的方式。我现在拥有的是：
var spawn = require('child_process').spawn;
var mysqlimport = spawn('/usr/local/bin/mysql', [
'-u' + database.user,
'-p' + database.password,
'-h' + database.address,
'--default-cha
浏览 2提问于2016-01-07得票数 2
回答已采纳
我已经在SO和其他网站上看到了10多个与我的问题相关的答案，但是我仍然不能给'mysqlimport‘工作打电话。我想听听那些知道他们在做什么的人的建议。
在调用"mysql.server start“之后，我尝试如下：
mysqlimport -v --ignore-lines=1 --fields-terminated-by=, --columns='a,b,c' --local -u kevinismus -p testdb /path/to/file.csv
但是得到错误：
mysqlimport: Error:用户'kevinismus
浏览 3提问于2015-09-23得票数 0
回答已采纳
3回答
$ mysqldump -u user -p db < /home/user/Desktop/backup.sql
Enter password:
-- MySQL dump 10.13 Distrib 5.1.41, for debian-linux-gnu (x86_64)
--
-- Host: localhost Database: dev
-- ------------------------------------------------------
-- Server version 5.1.41-3ubuntu12.3
/*!40101 SET @OL
浏览 0提问于2010-07-15得票数 0
回答已采纳
2回答
我的问题看起来很简单
我的csv文件位于/etc/myData.csv
我有我的代码
USE assessment;
DROP TABLE IF EXISTS test_data;
CREATE TABLE test_data (
ProductID int,
ProductName varchar(255)
);
mysqlimport assessment '/src/myData.csv';
SELECT * FROM test_data;
我尝试过msqlimport，但它给出了语法错误。
我甚至试过这个命令
mysqlimport --f
浏览 11提问于2018-05-12得票数 0
我最近开发了一个脚本，它生成多个进程，使用mysqlimport和-tab类型的mysqldump导出并行导入表。在开发服务器上，它工作得很好，与标准的mysql db_name < backup.sql类型的导入相比，它将时间从大约15分钟缩短到4或5分钟。
问题是，在我们的生产服务器上，这个脚本似乎在整个系统范围内锁定表。也就是说，我将一个备份导入到一个完全不同的数据库，但是我们的活动应用程序表最终仍然被锁定。PROCESSLIST显示，我们的活动数据库上的表确实被锁定，但是数据库中的任何表都没有运行INSERT或UPDATE查询。
为什么会发生这种情况？是否有可调整的配置变量/设置
浏览 0提问于2019-02-11得票数 0
回答已采纳
在将文本文件插入mysql时，我们需要您的支持，因为我们面临以下问题。我有2db服务器。在第一种情况下，当执行以下命令将txt或csv文件插入到表中时，就没有任何问题了。
load data local infile '/root/file.csv' into table my_table;
load data local infile '/root/file.txt' into table my_table LINES TERMINATED BY "\n";
当我在另一个数据库服务器上的同一个表中执行相同的命令(具有相同的参数)时，它不起作用
浏览 0提问于2020-01-20得票数 0
我们能否直接在MYSQL (安装在远程服务器上)上加载CSV文件(该文件位于本地系统上)？
“将数据插入表名”命令只能用于本地系统中的加载。
浏览 0提问于2013-03-23得票数 3
4回答
我一直在使用mysqlimport，但我遇到了文件名必须与表名相同的限制。有什么办法可以解决这个问题吗？
我不能重命名该文件，因为它被其他进程使用，并且我不想复制该文件，因为会有许多进程，其中一些非常大。
我想使用mysqlimport而不是LOAD INFILE。
编辑:不幸的是，这需要在windows上运行，所以恐怕没有符号链接的技巧。
浏览 0提问于2010-03-24得票数 14
我有4个csv文件，我想导入我的AWS数据库。
我试图从windows计算机中使用以下命令：
"C:\Program Files\MySQL\MySQL Server 5.7\bin\mysqlimport.exe" -h myhostname.amazonaws.com -P 3306 -u admin -pmypassword --local --fields-terminated-by=, --lines-terminated-by="\r\n" ticketsdb tickets "Data_2014_1.csv"
我得到的回应是：
my
浏览 2提问于2016-01-19得票数 3
回答已采纳
1回答
我正在试图弄清楚如何在没有任何运气的情况下将输出输送到mysqlimport中。我有一个很大的文件(大约250 GB)，我想在处理它之后将其通过管道传输到mysqlimport。我不想创建一个中间文件/表。我的想象是这样的：
-uuser genome.mpileup | nawk 'sub("^..."，"")‘| mysqlimport -uuser -ppassword数据库
但显然这是行不通的。对如何实现这一点有什么建议吗？
浏览 0提问于2013-04-06得票数 3
1回答
我在AWS上使用MySQL 8.0.16。当我运行SQL命令时：
mysql> LOAD DATA INFILE 't1.csv' INTO TABLE t1 FIELDS TERMINATED BY ',' ENCLOSED BY '"' LINES TERMINATED BY '\n';
ERROR 1045 (28000): Access denied for user 'admin'@'%' (using password: YES)
从Shell运行mysqlimport
浏览 4提问于2019-12-28得票数 0
回答已采纳
我想将多个文本文件中的数据导入到MySQL中。我在考虑使用mysqlimport。但是，我的代码行以一些前缀开头，结果是mysqlimport LOAD DATA的LINES STARTING BY子句；显然这是一个。
那么，我该怎么办呢？除了通过cut来删除前缀之外，我还能做得更好吗？
浏览 1提问于2013-04-19得票数 0
1回答
我过去经常为MyISAM表使用mysqlimport，没有任何问题。但是现在我想将数据导入到InnoDB表中，并面临以下问题: mysqlimport报告了以下错误，不会导入任何内容：
mysqlimport: Error: 1062, Duplicate entry '1' for key 'PRIMARY', when using table: ...
..。我不知道如何解决这个错误。要将数据导入的表是新创建的，没有任何数据。该表如下所示：
CREATE TABLE `member` (
`member_id` int(10) unsigned NO
浏览 0提问于2011-04-09得票数 0
回答已采纳
我在两列中有一个名为“frequency.txt”的数据文件，第1列是“频率”--它是一个数字，显示对应列2的重复，其中包含ids。
示例：-
数据
频率，id
32 329
312 330
320 331
132 332
232 334
52 336
42 337
82 338
.. ...
以上数据必须在mysql数据库的列中更新。有100多行，每天我都要更新它。现在，我正在使用这个命令手动更新它。
echo ' update table.id_set set 'frequency' = 32
浏览 0提问于2018-10-05得票数 0
回答已采纳
我正在尝试将多个文件上载到一个现有的数据库中，其中包含一个空表。我在windows命令行中使用了融合代码：
mysqlimport --fields_escaped_by=\\ mydb -L *.txt
产出如下：
Error 1017, Can't find file: '.\mydb\@002a.frm' (errno: 22), when using table: *
我使用这个命令在没有问题的CentOS上执行，但是windows使导入多个txt文件变得困难(单个文件没有问题)。我使用系统变量来定义默认用户和密码。此外，我在文本文件所在的目录中执行。
浏览 0提问于2014-05-09得票数 0
回答已采纳
本文：
表示在使用mysqlimport时不可能显示警告：
使用mysqlimport从文本文件导入数据时，将在导入结束时显示警告数量。但没有办法显示实际的警告信息。
这准确吗？我有一个不允许加载数据INFILE的服务器。
浏览 6提问于2011-10-03得票数 14
回答已采纳
问题
我想上传一个.csv文件到MySQL码头。
得到错误：File 'xx.csv' not found (OS errno 13 - Permission denied)
我的文件
FROM mysql:latest
ENV MYSQL_ROOT_PASSWORD password
COPY ./sql-scripts/ /docker-entrypoint-initdb.d/
COPY ./data /var/lib/mysql/
COPY my.cnf /etc/mysql/
EXPOSE 3306
My.cnf
[mysqld]
pid-file = /va
浏览 0提问于2019-04-10得票数 1
回答已采纳
如何将包含40万条记录的excel 2007文件导入mysql表？请给出建议
感谢任何帮助
浏览 1提问于2009-12-10得票数 1
回答已采纳
1回答
我目前正在制作一个mysql数据库。当我从保存公司记录的.csv文件导入数据时，大约一半的数据被正常导入，而另一半的数据被更改为相同的中文字符。起初，我以为是Heidisql工具，但在mysql中手动加载后，我的数据中仍然有中文字符。以下是load语句的一个示例(如果格式不正确，很抱歉)：
LOAD DATA LOCAL INFILE 'c:/text.csv'
INTO TABLE test
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n
浏览 3提问于2014-08-04得票数 2
2回答
我正在尝试使用mysqlimport将文本文件导入mysql数据库。问题是，我从中导入文本文件的linux机器不会安装mysql，而我正在将这些文件导入到另一台服务器上的数据库中。mysqlimport需要完整安装mysql才能工作吗？我能带上mysqlimport exe和一些库吗？干杯，凯撒
浏览 0提问于2011-08-05得票数 1
回答已采纳
1)我有一个包含数据的CSV文件，其中一个字段是NTP格式的日期时间:小时、分钟、秒、微秒、time_zone、日、月、day_of_month、年。示例(格林尼治标准时间14:06:18.369，星期三，2013年5月15日)。如何将其存储到MySQL中？我的唯一选项是DATETIME、DATE、TIMESTAMP
2)另外，如何从文件夹中的CSV文件中动态读取数据并存储到MySQL中？(如果我可以一天读一次并存储它)
浏览 1提问于2013-05-16得票数 0
1回答
我尝试通过mysqlimport导入一个简单的CSV文件，得到以下错误：
mysqlimport '--fields-enclosed-by="' '--fields-terminated-by=;' '--lines-terminated-by=\n' '--columns=Name;Vorname;Test' -u db01usr -pPW01 db01 /var/www/vhosts/path/httpdocs/feedtest/test.csv
错误：
mysqlimport: Error: 1064, You h
浏览 4提问于2013-04-14得票数 0
2回答
自动访问MySQL的DB5
、、、、
我有一个问题，我希望我可以依靠这里的一些经验来获得建议和推动正确的方向。我有一个由专业软件制作的MS Access文件。我只想从这个表中取出一半的列，并导入到新的(尚未设置的)mysql数据库中。
我不知道该怎么做，也不知道最好的方法是什么。每晚都会获得新数据，然后作为自动任务再次导入。
在access数据库中的一列是一个jpeg文件的url，我想下载这个文件，并自动导入到数据库中作为BLOB类型。
有没有办法自动做到这一点？这将在windows机器上运行，所以也许可以使用WSH编写脚本？
浏览 1提问于2008-10-28得票数 3
回答已采纳
有人知道为什么在运行mysqlimport时会出现这个错误吗？
mysqlimport: Error: 1045, Access denied for user 'user'@'%' (using password: YES), when using table: XXX
我试过这么多选择。另外，我无法运行某些站点所引用的以下命令：
mysql> GRANT FILE ON *.* to 'user'@'%';
ERROR 1045 (28000): Access denied for user 'user'
浏览 1提问于2020-06-03得票数 0
我有一个很大的CSV文件，是100 G，有1.8亿行。我需要将这个文件导入MariaDB。
我使用mysqlimport，运行了三个小时后，我得到了2013年的错误。如果在引发错误后在表上运行select，表将为空。
如何在MariaDB中上传一个很大的文件？如何解决这个问题？
C:\Users\pgsch\Downloads>mysqlimport --verbose --local -u user01 -p bank_0001_test fm_loans fm_loans --fields-terminated-by="|"
Enter password: ****
浏览 3提问于2021-05-10得票数 0
回答已采纳
当我运行
LOAD DATA LOCAL INFILE 'C:\\Project\\FMCG\\fmcg_event_table_cd.txt'
INTO TABLE fmcg_event_table_cd
FIELDS TERMINATED BY ',' ENCLOSED BY '"'
LINES TERMINATED BY '\r\n' IGNORE 1 LINES;
文件fmcg_event_table_cd.txt文件包含10 GB的数据，但我们需要获取该文件的一小块数据以进行加载。我能知道一次加载大数据的查询吗？
浏览 1提问于2012-05-14得票数 0
当从控制台运行mysql load data命令时，它们的输出将告诉您加载的记录数和时间。下面是一个示例：
mysql> LOAD DATA INFILE '/tmp/RESPONSE.txt' replace INTO TABLE db1.RESPONSE FIELDS TERMINATED BY '|'
-> ignore 2 lines;
Query OK, 3088090 rows affected, 65535 warnings (2 min 40.14 sec)
Records: 3088090 Deleted: 0 Skipped:
浏览 1提问于2015-09-29得票数 1
在Windows上使用MySQL，除了使用< inputfile之外，在使用MYSQLIMPORT.EXE或MYSQL.EXE进行还原时，是否有一种方法可以指定输入文件名？
例如，MYSQLDUMP.EXE具有--结果文件(或-r)参数。我无法为MYSQLIMPORT.EXE或MYSQL.EXE找到等效的输入文件参数。
< inputfile是唯一做到这一点的方法吗？
谢谢。
浏览 5提问于2016-03-23得票数 1
回答已采纳
2回答
首先，这不是从MySQL本身加载数据，而是使用命令行工具"mysqlimport“。
我使用它直接将CSV加载到表中，并需要查看它生成的警告。我似乎无法得到显示详细的警告，也无法打开调试。有什么想法吗？
(MySQL 5.0.5)
浏览 0提问于2009-12-21得票数 29
回答已采纳
有人能告诉我如何从文本文件中读取数据并使用Perl存储在MySQL数据库中吗？
例如：
StudentID Name Dept
1 Chellappa IT
2 Vijay CSE
3 AAA ECE
浏览 2提问于2015-12-24得票数 0
回答已采纳
我们目前有一些由竖线分隔的文本组成的日志，其格式为
field1:value1|field2:value2|...|fieldN:valueN\n
field1:value1|field2:value2|...|fieldN:valueN\n
etc.
我有一个导入程序脚本(bash，它先运行perl，然后运行mysqlimport)，它当前从每一行的开头删除几个单词，然后对生成的文本文件运行mysqlimport。
我们正在将日志记录升级为输出JSON的数据服务。导入器脚本仍然会将该JSON的内容导入到MySQL数据库表中。将这个漂亮JSON转换成一个以竖线分隔的文件以供mysqlimpor
浏览 3提问于2012-12-12得票数 0
回答已采纳
一般问题。我的一个站点在LAmP服务器上，我需要从外部站点下载一个大的.zip文件。该文件为压缩格式(.zip)，大小为8.8M。它包含一个由.txt制表符分隔的67M大小的数据集。我需要下载该文件，解压缩它，并每天将其导入到MySQL。
是使用PHP和cron作业还是其他什么更好呢？为什么？
浏览 1提问于2011-12-04得票数 0
回答已采纳
在mysql数据库中用于在数据库中插入CSV文件的以下命令的等效命令是什么？
cat Master.csv.2011-03-02-16-44-29 | tr \" \' | psql -U postgres cdr
上面的命令用于在Postgresql数据库中插入CSV(cooma-seperated value)文件。
浏览 0提问于2013-12-26得票数 0
1回答
下面是我在Java中使用Runtime.getRuntime().exec()运行的命令：
mysqlimport --fields-terminated-by=, --lines-terminated-by="|" --local
--user=u --password=p DatabaseName
txtpath
下面是我遇到的错误：
java.io.IOException: Cannot run program "mysqlimport": CreateProcess error=2, The system cannot find the file s
浏览 5提问于2015-07-28得票数 0
我正在尝试导入一些数据到mysql使用phpmyadmin .Data文件是在文本格式，‘；’分隔，每一行也以；和新行结尾。没有任何东西在双引号中。
Mysql表有一个额外的主键自动递增的列，该列不在资源的txt文件中。所以import总是缺少第一列( url、-contains、大url本身)，并且所有的列都会向左移动。主键-is填写正确。
1.我在这里做什么?我对dbs .Please建议不太感兴趣。2.还有什么更好做更大的导入。我在这种情况下也会得到错误。我在cmd-line上试过，但访问被拒绝。
浏览 0提问于2011-06-03得票数 1
2回答
我有一个csv文件，有多条1000( 100,000 )条记录。当我使用这些文件将记录插入到我的数据库中时，将需要半小时以上的时间。有没有其他方法来提高这些过程的效率和速度，或者是否有可用的框架？
浏览 0提问于2015-10-30得票数 0
1回答
我需要导入的目录中有一堆.sql文件。虽然我可以手动完成，但是为了编写脚本，我需要能够大量地应用它们。但我怎么能做到呢？我需要什么选项和命令的组合？
mysqlimport命令如下所示：
mysqlimport [options] db_name textfile1 [textfile2 ...]
我需要能够将所有文本文件添加到末尾。如果可能的话，我更喜欢命令而不是复杂的循环。
有什么建议吗？
浏览 0提问于2010-12-10得票数 5
回答已采纳
1回答
我已经尝试了我能想到的所有方法(并在Stack上搜索了大量的帖子)
我正在使用以下内容：
try {
$db = new PDO('mysql:host=localhost;dbname=data', 'user', 'pass');
}catch (PDOException $e){
exit('Database Error.');
}
$fileName="file.txt";
$query = <<<eof
LOAD DATA LOCAL INFILE '$fileName&#
浏览 0提问于2014-02-28得票数 0
我们使用MySQL 8.0.*和.csv文件将数据导入Amazon。我们将从app服务器命令行执行此命令。
错误：
mysqlimport: Error: 1227 Access denied; you need (at least one of) the SUPER, SYSTEM_VARIABLES_ADMIN or SESSION_VARIABLES_ADMIN privilege(s) for this operation
命令：
mysqlimport --local --compress --columns='col1,col2,col3,col4' -h dbho
浏览 1提问于2019-06-05得票数 6
回答已采纳
我有一个使用unix的mysqlimport的导入作业，而且源数据是不可靠的，所以我需要设置sql_mode="NO_ENGINE_SUBSTITUTION“，这样如果出现错误，作业就不会失败。我宁愿只为个人工作而这样做，但我不知道这是否可能。有人知道吗？
目前的命令：
mysqlimport --compress --fields-terminated-by="," --fields-optionally-enclosed-by='"' --lines-terminated-by="\n" --replace --local -
浏览 5提问于2015-04-13得票数 3
回答已采纳
1回答
我在这个领域没有多少SQL知识，所以如果有人能在这里指出我的语法错误，我将不胜感激。正在尝试导入大型产品数据馈送。
mysqlimport --ignore-lines=1 --fields-terminated-by=,
--columns='SKU,Manufacturer Id,Brand Name,Product Name,Long Description,Category,SubCategory,Product Group,Thumb URL,Image URL,Buy Link,Keywords,Reviews,Retail Price,Sale Price,Brand
浏览 2提问于2015-12-13得票数 0
我使用mysqlimport轻松地将文本文件中的行放到表中，如下所示：
mysqlimport -u root -p --local mytest employee.txt
我能从存储过程中做到这一点吗？到目前为止，所有的尝试都失败了，恐怕这只能使用命令行？目标是有一个称为SP的作业，这个SP从文本文件(制表符分隔)中提取行，然后SP将每行与现有的表进行比较，如果找到，它将更新，否则插入。
感谢你
浏览 0提问于2013-05-01得票数 0
我试过：
mysqlimport --local --fields-optionally-enclosed-by='\x254'
--fields-terminated-by='\x14' testdb messages.txt
以及：
mysqlimport --local --fields-optionally-enclosed-by='\xFE'
--fields-terminated-by='\cT' testdb messages.txt
我得到了：
浏览 1提问于2011-04-27得票数 1
我已经在我的笔记本电脑上安装了服务器版本：5.6.25 MySQL Community (GPL)，带有OSubuntu14.04LTS。最近，我试图运行客户端程序，发现了一些我无法发现的错误。
在终端上输入此命令并得到以下错误：
mysql> mysqlimport --local test_database employee.txt;
错误1064 (42000)：SQL语法出现错误；请检查与MySQL服务器版本对应的手册，以便在第1行使用接近“mysqlimport-local test_database employee.txt”的正确语法。
最初，我认为这可能是employee
浏览 0提问于2015-08-03得票数 1
我是导入与mysqlimport (批处理文件)记录到一个特定的表每5分钟，以便在这个表在线客人在我的网站上。
目前，我将在Windows文件上执行的2个.sql发送到远程数据库:1个SQL命令用于删除和创建表，另一个命令使用mysqlimport填充表。
我想知道一个更好的方法是否是从我的批处理文件中发送一个mysqlimport命令，并且在这个特定的DB上插入时在数据库上有一个触发器来删除它并在插入新记录之前重新创建它，以避免当前表被删除、重新创建、然后用CSV填充之间的空白(没有记录)，这种情况经常发生。
知道如何实现这样的触发器吗？
表online_players表的结构：
+----
浏览 0提问于2016-04-03得票数 0
回答已采纳
我正在尝试使用以下命令将csv文件加载到表中：
LOAD DATA INFILE 'tprot.csv' INTO TABLE tprot FIELDS TERMINATED BY ',' LINES TERMINATED BY `'\n' SET id=null;`
并获得以下内容：
ERROR 1054 (42S22): Unknown column 'id' in 'field list'
以下是我的表中的列：
mysql> show columns from tprot;
+-----------+-
浏览 0提问于2013-06-12得票数 0
回答已采纳
我正在尝试从命令行将CSV文件导入mysql数据库。这将稍后合并到Windows批处理文件中。
mysqlimport -u user -puserpw --columns=ID,CID,Alerted --fields-terminated-by=',' --local School Customer.csv
所有数据都加载到Customer表的第一列中。我希望正确地将数据从CSV导入到相应的列中。
CSV数据格式：
ID,CID,Alerted
1,CS,N
2,CS,N
3,CS,N
我想使用mysqlimport，因为这将更容易添加到Windows批处理文件中。我该
浏览 0提问于2014-04-11得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
