我使用的是microsoft visual studio 10 c++和mysql工作台。我有大量的excel文件，我想要将所有excel文件的内容更新到一个mysql表中。我可以为每个excel文件创建一个csv文件，然后导入它，但我希望它是在存储过程的帮助下完成的。我想使用c++.And，此过程必须与不同的excel文件重复。
我在考虑将我的c++程序同时连接到excel和mysql (这可能吗？)读取excel文件并将数据添加到mysql表中。我已经将我的程序连接到mysql数据库。任何其他方法都将不胜感激。
浏览 3提问于2014-07-10得票数 0
是否有可能在Kibana Dev中变异两个字段。工具/控制台，即纬度，使用已从MySQL导入的现有索引和字段，将经度转换为geo_point类型的字段。
我们的想法不是从MySQL重新导入所有数据并通过Logstash。
浏览 1提问于2017-10-12得票数 0
使用将表的全部内容从Server复制到MySQL计算机上的相同表中。MySQL数据库使用MySQL ODBC5.1驱动程序作为链接服务器连接到Management。使用一个简单的语句很好，但是执行非常慢。
INSERT INTO openquery(MYSQL, 'select * from Table1')
SELECT * from MSSQL..Table2
我有一张约有45万张唱片的桌子，转机只需5个多小时。这是正常的吗？我以前没有链接MySQL服务器的经验。
浏览 6提问于2011-04-26得票数 3
我正在使用AWS (MySQL)，我想实时地将这些数据同步到。
我认为这最好的解决方案是AWS胶，但我不确定我是否能实现我想要的。
这是我的RDS数据库的信息：
RDS
·我想将几个表(MySQL)同步到opensearch(1表到1索引)。
表的模式将动态更改。
新列将被添加，或者现有列将从上一次同步开始被删除。
(因此，我还必须同步此模式更改)
你能教我是否可以用AWS胶做这些事吗？
我想知道AWS胶是否能够处理动态的schame变化和同步(接近)实时。
提前谢谢你。
浏览 7提问于2022-10-04得票数 0
我是这里的新手，想把一些数据导入到我的wordpress数据库(MySQL)中，我想知道你们中的任何一个SQL专家能不能帮上忙？
数据库类型: MySQL
表名：wp_loans
我希望将表wp_loans中的数据完全替换为位于远程服务器上的文件xyz.csv的内容，例如https://www.mystagingserver.com/xyz.csv。
表中的所有现有数据都应替换为CSV文件的内容。
CSV文件的第一行是表标题，因此可以忽略。
如果可能的话，我还想让脚本在每天早上01:00自动运行。
更新
下面是我用来尝试替换表内容的SQL：
LOAD DATA INFILE 'http
浏览 2提问于2013-10-14得票数 2
嗨，我需要一个方法来插入大量的记录到一个MySQL数据库表。
我使用Linq to Entities，而使用foreach循环并插入每条记录的方法太慢了。
例如：
foreach(var item in items){
context.Add(item);
context.SubmitChanges();
}
.net连接器中是否有类似MySql命令的方法: LOAD DATA INFILE？
浏览 0提问于2012-04-13得票数 4
我正在使用tmysql散装加载将数据加载到mysql中，我只想知道它是否能够不声不响地拒绝记录？
目前，使用mysql大容量加载特性talend将数据加载到mysql表中。在进程运行时，我没有看到任何错误，它以0的退出代码完成。但它能在处理记录时拒绝它们吗。
浏览 4提问于2015-04-28得票数 0
回答已采纳
2回答
我有多个客户端插入记录到一个中央mongo数据库中的表(其中有300万条记录)。如果是mysql/oracle，我可以使用sql-loader/存储过程来批量处理插入。有没有通用的方法来优化这样的senario？
浏览 1提问于2014-03-18得票数 0
3回答
我雇了一个程序员把我的网站--最初是用Django和MySQL实现的--移植到Google App Engine。原始web应用程序的数据库大小约为2 GB，最大的表有500万行。据我所知，为了移植这些内容，程序员正在将数据库序列化为JSON，然后将其上传到Google app engine。
到目前为止，他的上传已经使用了100小时的CPU时间，但看起来只有50或100 MB加载到数据库中。对于如此少量的数据，这是一个合理的CPU时间吗？MySQL可以在几分钟内加载这么多数据，所以我不明白为什么GAE会慢1000倍。他是不是做了什么效率低下的事情？
浏览 0提问于2011-07-15得票数 2
1回答
我有一个包含主auto_increment键的mysql表。
我有500个csv文件，每个文件大约有3 3gb的数据，大部分数据在一列中。
目前，我使用以下命令将文件加载到mysql中：
#!/bin/bash
for file in /files/*.csv
do
mysql -e "load data local infile '$f' into table myTable FIELDS TERMINATED BY ','
ENCLOSED BY '\"' escaped by '\"'
浏览 48提问于2017-07-26得票数 1
1回答
如何在C#中使用MySQL一次将数据表的多行插入到数据库中的表中
string connectionString = GetConnectionString();
using(var bulkCopy = new SqlBulkCopy(connectionString, SqlBulkCopyOptions.KeepIdentity)) {
foreach(DataColumn col in dataTable.Columns) {
bulkCopy.ColumnMappings.Add(col.ColumnName, col.ColumnName);
}
浏览 3提问于2020-02-20得票数 0
几年来，我一直在使用下面的代码来填充MySQL数据库中的表，并且一直运行良好。 Imports MySql.Data.MySqlClient
Public sub Thing(dt as datatable)
Try
'dt is datatable object populated from MSsqlServer
Dim MySQLcmdSelect As MySqlCommand = New MySqlCommand("Select * From " & tabl
浏览 43提问于2021-08-05得票数 0
回答已采纳
2回答
我有一个包含2100万条记录的MySQL数据库，我试图对大约100万条记录进行更新，但是ERROR 1206 (HY000): The total number of locks exceeds the lock table size.的查询失败了
可以在不获取锁的情况下更新表吗？
我无法更改MySQL配置参数，如innodb_buffer_pool_size。是否有不同的方法来实现同样的目标？
谢谢
编辑
--我已经批量尝试了5000次，工作了几次，但是我得到了相同的错误----我尝试过锁表来锁定整个表，但仍然无法工作。
浏览 9提问于2011-02-02得票数 5
回答已采纳
3回答
我在这里浏览了一些关于MySQL和分面搜索的问题，我看到了一个建议使用Solr的回复。
在我的MySQL数据库中，我有许多用于产品、供应商、消息、用户等的表-所有这些表都是相互连接的。如何使用Solr对产品进行分面搜索？据我所知，我必须不断地从MySQL提供Solr产品数据--但是我如何处理这些数据的索引呢？添加新产品后是否立即建立索引？我要批处理索引吗？如何准确地表示MySQL数据库中的数据？(插入、删除等)
提前谢谢。
浏览 0提问于2011-01-05得票数 12
我正在MYSQL的一个表上建立一个索引表(倒排文件)。它的工作方式是从文件中提取所有单词，并将它们存储到一个哈希集，然后将这些单词逐个插入到我的数据库表中。
它工作得很好，我知道倒排文件确实需要一些时间来建立索引表。我正在尝试优化表的索引时间，并且我正在考虑使用多线程。它会提高性能吗？
然而，我不太确定如何将它与我当前的程序集成，因为我是多线程的新手。
代码：
public static void main(String[] args) throws Exception {
StopWatch stopwatch = new StopWatch();
stop
浏览 0提问于2018-10-26得票数 0
我有一个数据复制过程，它在目标数据库中删除并重新创建几个表，然后从源数据库(运行在另一个主机上，但这对手头的问题无关紧要)加载它们。
目标数据库确实需要其表上的主键和其他几个索引，但在数据加载期间不需要。我目前正在加载所有数据，然后创建索引。但是，创建索引需要相当长的时间
我的直觉告诉我，在末尾创建索引应该比首先创建索引更快，因为索引需要用每个insert来重写。
有人能确定哪条路更快吗？FWIW，我正在运行MySQL 5.1和InnoDB表。
浏览 0提问于2011-02-16得票数 3
回答已采纳
1回答
我需要从png图像中提取每种像素颜色并将其存储在数据库表中；该表具有以下列：id、x、y、color。
我做到了，但我需要一种更快的方法。
我的代码如下：
<?php
session_start();
?>
<meta http-equiv="refresh" content="6000" >
<?php
if(isset($_SESSION['inserari']))print "inserari: ".$_SESSION['inserari'];
$_SESSION['
浏览 0提问于2012-04-04得票数 0
回答已采纳
4回答
我正在使用MySQL工作台5.2.28来设计我的数据库模式。我需要将默认数据插入到一些表中，这可以使用"Inserts“选项卡完成。但是，它似乎只允许手动输入数据，一次一行。我有一个包含数百行的OUTFILE，我想要插入它。
使用MySQL工作台可以做到这一点吗？创建单独的MySQL脚本来导入默认数据是否是一种更好的方法？
浏览 0提问于2011-06-08得票数 6
回答已采纳
嗨，我找不到如何在mamp上使用phpmyadmin插入数据到mysql数据库表中。既没有找到YouTube视频也没有找到谷歌教程。有没有免费的工具/附加组件可以将数据插入到表中？或者我唯一的选择就是在html代码中使用php脚本？对此有何建议？TYSM！
浏览 0提问于2011-06-10得票数 0
我使用MySQL5.6.9-rc和.net连接器6.5.4将数据插入到一个有两个字段(整数ID，整数数据，ID是主键)的表中。将2000行插入到表中非常慢(大约35秒)(对于UpdateBatchSize =1和UpdateBatchSize =500没有太大区别)，我也尝试了连接器6.6.4，问题仍然存在。
然而，在MySQL5.4.3和连接器6.20中速度很快，如果将UpdateBatchSize设置为500，则只需要一秒钟就可以将2000行插入到表中(如果UpdateBatchSize =1，速度也会很慢)。然后我用MySQL5.4.3和连接器6.5.4或6.6.4测试它，它很慢！
我像
浏览 0提问于2012-12-26得票数 1
我已经创建了sql文件来在DB中创建表。
我正在使用PHPMYAdmin，但我无法连接到数据库。
我想将其作为批处理文件运行。
如果我尝试从命令提示符处访问MYSQL，它会给出如下错误
'mysql' is not recognized as an internal or external command,
operable program or batch file.
尊敬的Dev
浏览 2提问于2010-05-04得票数 0
我必须从Clarion数据库创建一个MySQL数据库。这些表是.tps文件。
我不知道该怎么做，因为现在我只找到了可以处理.dat文件的应用程序。
浏览 4提问于2012-03-30得票数 1
1回答
我有一些CSV数据文件要导入到mySQL中。我想在shell脚本中进行插入，这样它就可以自动化了。然而，我对在脚本中使用明文用户名和密码感到有点厌倦。
我有以下问题：
我对脚本中的明文形式的无名/预告片的想法感到不舒服(不管怎么说，还是我太偏执了)？也许我可以为要插入的表设置一个只有插入优先级的用户？
数据库表(将原始数据导入其中)基于表列具有唯一的键。在我试图导入的数据中也可能存在重复的情况。与其使用mySQL中断(即整个插入失败)，我更希望能够将mySQL告诉或
(a)使用新数据或 (b)更新该行，忽略重复行。
无论我选择哪种设置，都是针对整个导入，而不是逐行进行的。是否有
浏览 4提问于2010-05-11得票数 4
回答已采纳
2回答
我有数组
Array
(
[0] => john
[1] => melinda
)
并拥有数据库表
id_
如何使用php将名称插入数据库？
我可以在mysql_query上使用循环，但这对我的资源没有好处。
我现在做的代码是
foreach( $data as $row ) {
mysql_query("INSERT INTO badwords (word) VALUES('".$row."')");
}
这是可行的，但我认为还有另外一个简单的方法。
谢谢
浏览 6提问于2014-02-08得票数 1
回答已采纳
我目前正在向一个表中添加数十万行数据，首先是在MS Access表中，然后是在MySQL表中。
我第一次尝试使用MS Access，不到40秒。然后，我尝试了与MySQL完全相同的源和表结构，花了6分40秒。那就慢了1000%！
那么，数据库服务器具有更好的性能是不是一个神话呢？
浏览 8提问于2010-05-09得票数 2
回答已采纳
是否有一个很好的方法来删除所有内容和网页提交的特定IP地址？我确信这可以用MySQL命令来完成，但我希望有一种比手工操作数据库更安全的方法。
谢谢!
Drupal 7.50公域
浏览 0提问于2017-01-23得票数 3
我有一个要求，从一个上传的xlsheet在asp.net的前端在mysql数据库中的表。我该怎么做呢？有没有什么有效的方法可以像在sql server中那样将批量数据填充到表中，而不是逐行读取？
浏览 0提问于2011-11-02得票数 1
1回答
我需要从WX2数据库中选择一些数据，并将其放入MYSQL DB中。有人能在这方面帮我吗？mysql数据库要连接到WX2数据库，ODBC.ini配置是否有效？
谢谢
浏览 4提问于2014-09-18得票数 0
如何将数据导出到Mysql表中。excel中是否有将数据转换为mysql表或其他方法的plugIn？
浏览 8提问于2016-01-28得票数 1
回答已采纳
我试图用基于Kafka的汇合式在几个MySQL数据库之间同步数据。我在源连接器配置中使用了"bulk“模式，因为主键类型是varchar，所以不能使用增量模式。很好，但我有两个问题：
它似乎无法同步删除，当数据在源数据库中被删除时，接收器数据库没有发生任何事情。数据仍然存在于接收器数据库中。
同步数据需要相当长的时间。在我的例子中，将表与3~4k行同步大约需要2~4分钟。我可以理解，使用大容量模式可能需要更多时间来同步数据，但这不是太长了吗？
下面是我的源连接器配置：
name=test-source
connector.class=io.confluent.conne
浏览 5提问于2017-09-19得票数 2
回答已采纳
我的mysql集群数据节点数据使用率增加到95%。然后，我尝试删除500000行，节点的数据使用率最初开始增加，达到99%或更高，并遇到表满错误。有没有人能告诉我，为什么删除行时会增加已有节点的数据使用率？删除行时mysql集群的内部工作是什么？
我的config.ini 600000中的MaxNoOfConcurrentOperations参数，它不是由此参数引起的。
浏览 2提问于2013-04-10得票数 1
来自MySQL和Kafka主题的事件数据。我们将从MySQL加载历史数据，然后切换到Kafka，以便当前的data.Mysql ID也会流入Kafka。因此，消息包含事件ID。Kafka流事件将使用spark作业进行处理，并最终将数据摄取到报表中。 问题:如何加载历史数据并实时切换到Kafka源。 1-创建临时使用者组以存储所有分区的当前偏移量和当前时间戳TS1。 2-从create date <= TS1所在的MySQL表中获取最小ID和最大ID。并通过500k记录的分区进行处理。 3-完成上述处理后，将时间戳传递到主spark作业，该作业将处理存储的偏移量中的streAming数据
浏览 18提问于2020-01-23得票数 0
直接到Qeustion ->。
问题:使用MySql (来自.NET和PHP后台)执行异步批量插入(如果Node.js可以处理，则不需要大容量)
示例:假设我有40个(可调整的)函数做一些工作(异步)，每次在表中添加一个记录后，它的一次迭代，现在很可能是同时多个函数进行插入调用。考虑到将有一个自动更新字段，MySql能够直接处理它吗？
在C#(.NET)中，我会使用dataTable来包含每个函数中的所有行，并在最后大容量地将dataTable插入数据库表中。并为每个函数启动多个线程。
在这种情况下你会建议采取什么方法，
如果我需要处理每个表10,000或4百万行，这种方法会改变吗？AL
浏览 1提问于2012-02-19得票数 0
回答已采纳
我只是想大量添加一些数据。
我首先连接，然后遍历字典项，创建每个查询来更新基于mysql的zip_ids表。以下是我是如何做到的：
connection = _mysql.connect(host="xxx",user = "user", passwd="123", db="mine")
for id, zip in id_zip.items():
query += """UPDATE zip_ids SET zip = %s id = %s;"""% (zip,id)
p
浏览 3提问于2014-06-05得票数 1
回答已采纳
我正在尝试将excel文件中的数据加载到MySql中的表中。有400个.xlsx格式的excel文件。 我已经成功地将一个文件摄取到表中，但问题是需要手动将excel文件转换为csv文件，将其保存在某个位置，然后运行查询以使用LOAD LOCAL INFILE加载。如何对其余的文件执行此操作。 如何加载文件夹中的所有400个.xlsx文件，而不是手动将它们转换为.csv文件，然后在them.Is上逐个运行摄取查询。在MySql中有一种方法可以做到这一点。例如，遍历所有文件并在表中摄取它们的任何For循环。
浏览 29提问于2020-06-23得票数 0
我有一个在mysql服务器上执行此操作的迁移：
ActiveRecord::Base.connection.execute("update 'comments' set 'slug' = NULL;")
此语句的目的是删除每行的"slug“值。
该表中有数百万行，在使用ruby执行Comment.each...之类的操作时速度非常慢
有没有办法重写这个查询，使其与数据库无关，或者至少可以在MySQL和postgresql之间正常工作？
谢谢!
浏览 0提问于2011-12-03得票数 1
回答已采纳
2回答
我有一个很大的mysql表，我想将其传输到Hadoop/Hive表。有没有标准的命令或技术可以将简单的(但很大的)表从Mysql传输到Hive？该表主要存储分析数据。
浏览 2提问于2011-01-08得票数 6
回答已采纳
我在一台服务器上有大约50个脚本，每秒插入3到6组数据。我发现MySQL反过来会独占所有系统资源，有时还会导致服务器崩溃。
我在想，如果我收集5分钟的查询，并对每个脚本执行一次批量插入，这会有帮助，但它会有小幅度还是大幅度的帮助？有没有人有切换到批量插入的经验？
我的表是MyISAM的(如果有必要并且不会丢失数据，我可以更改它们)。MySQL版本: 5.1.56
谢谢
浏览 9提问于2011-08-22得票数 1
回答已采纳
我创建了一个程序，将竞赛的分数存储到MS数据库中，但现在我需要更改一下才能使用MySql。如何将所有的表和数据传输到不同的位置？
浏览 4提问于2017-07-10得票数 1
回答已采纳
2回答
在我的MySQL数据库中，有一个包含2,000,000条记录的表。现在，我想在这个表中再插入6,000,000条新记录。
为了加快插入速度，我认为我应该使用禁用/启用键，如下所示：
ALTER TABLE cars DISABLE KEYS;
INSERT INTO cars ...
...
...
INSERT INTO cars ...
ALTER TABLE search_all_values ENABLE KEYS;
OPTIMIZE TABLE cars;
但不知何故，我觉得使用disable/enable键插入空表更有意义。
而在我的例子中，表中已经有2,000,000条记录
浏览 102提问于2011-11-21得票数 29
3回答
我计划使用一个使用Hadoop、Hive和Impala的堆栈来分析大数据。我已经准备好了设置，现在我正在尝试从MySQL表中导入数据。表大小超过500 GB，我计划使用Sqoop，如下所示：
sqoop import --connect jdbc:mysql://remote_host_ip/database_name --username user_name -P --table table_name --hive-import --compression-codec=snappy --as-parquetfile --warehouse-dir=/user/hive/warehouse -
浏览 26提问于2016-08-24得票数 1
1回答
批量导出多个mysql数据库
、、、、
我正尝试在我的web服务器上备份我的15个MySQL数据库。这个数据库列表将随着我的不断增长(希望如此！)增加客户群。
显然，我可以使用以下命令进行mysql转储：
mysqldump --add-drop-table -h host -u username -p"password" databasename > filename.sql
我的问题是，有没有办法批量导出MySQL数据库(同样，批量导入)？是否强制我对每个数据库分别进行备份？
实际上，我想编写脚本，这样我每天只需运行一个.bat文件就可以做到这一点。我在网上找到了这个(来自这个网站- )：
@echo of
浏览 3提问于2013-05-12得票数 0
回答已采纳
我只是想得到一些帮助，弄清楚如何插入来自多选框的数据，这些数据被放入变量中，然后放入数据库中。
我的数据库表的结构如下-表：prd_attr
ID | Product_ID | name | value
-------------------------------
1 | 3 | size | large
2 | 3 | size | medium
假设我有一个名为sizes[]的多选框，管理员为输入数据库的产品选择2个尺寸。我可以在控制器中获取这些值，并将它们放入一个变量中：
$sizes = $_GET['sizes'];
并将该变
浏览 3提问于2013-02-13得票数 0
回答已采纳
我需要上传csv并将此数据导入到MySQL表中。
public function insertData()
{
while (($column = fgetcsv($file, 10000, ",")) !== FALSE) {
$query = "INSERT into deleted_users (email)
values ('" . $column[0] . "'); $query->execute()
浏览 1提问于2018-11-25得票数 0
我在MySQL5.6版本中有非常大的InnoDB表，我想尽可能快地添加键一个唯一的键，数据来自恢复的数据库，所以所有的键都会被检查，我在外键中看起来类似于SET FOREIGN_KEY_CHECKS=0;。有这样的东西做钥匙吗？
浏览 0提问于2019-07-28得票数 0
1回答
我正在尝试开发一个应用程序，它可以在数据库中保存很多结构化对象。现在，我正在使用Spring (使用hibernate + MySQL (MyIsam表+外键))编写代码，使用Spring数据存储库为数据服务编写代码很容易，但性能太慢。
例如，我试图在一个表中插入100条记录，耗时8，5秒。
我尝试在MySQL cmd中直接执行相同的插入操作(在一个过程中使用硬编码的“插入字符串”)，它显示了时间- 0,85秒。即使这样的结果对我来说也太慢了，但这是MySQL的问题。
阅读论坛，我发现了，它说Spring不能正确地执行批量插入。
我如何使我的应用程序更快？我希望使用大小类似于1000或1000
浏览 7提问于2013-07-21得票数 1
2回答
我正在使用Python3.4开发简单的html刮板，使用peewee作为ORM (很好的ORM！)。我的脚本需要一堆站点，提取必要的数据并将它们保存到数据库中，但是每个站点都是在分离的过程中被刮掉的，以提高性能，保存的数据应该是唯一的。有重复的数据不仅可以在网站之间，而且在特定的网站上，所以我只想存储它们一次。
例如:职位和类别-多到多的关系。在抓取过程中，同一类别在不同的帖子中出现多次。这是我第一次将该类别保存到数据库中(创建新行)。如果同一类别出现在不同的post中，我希望将该帖子绑定到db中已经创建的行中。
我的问题是:我必须使用原子更新/插入(插入一个帖子、保存、get_or_crea
浏览 6提问于2015-01-02得票数 5
回答已采纳
1回答
我需要通过JDBC逐个表地进行批量插入/更新/删除。数据库为Sybase。
因为FK检查，我不能这样做，因为我暂时破坏了完整性。
在MySQL中，我可以通过发出一个简单的命令轻松地关闭和打开约束检查。
在Sybase中有什么方法可以做到这一点吗？
谢谢。
浏览 3提问于2010-06-16得票数 3
我是AWS的新手。我想使用AWS glue进行ETL过程。 我们是否可以使用AWS glue来分析RDS数据库，并使用ETL作业将分析的数据存储到rds mysql表中 谢谢
浏览 26提问于2019-12-24得票数 1
我正在尝试从SQL server获取数据并插入到MySQL中。我已经拿到了1lac的记录。记录的获取是正确的，但是在将记录插入到MySQL中的过程中，它不会立即插入数据。我需要刷新MySQL才能看到新记录。
var sql = require('mssql');
var mysql = require("mysql");
var config = {
user : 'sa',
password : '******',
server : 'serverurl'
浏览 1提问于2015-12-01得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
