我每天需要将大约10万条记录导入到AWS托管SQL Server Web 13.00.2164.0.v1中几十次
AWS不支持批量插入，SQL Server Web也不支持SSIS。我正在使用C#控制台应用程序从csv文件中读取记录，执行一些数据转换，然后使用SqlCommand在每个100k记录文件的单个事务下一次插入一条记录。我目前的速度大约是每30分钟25k条记录，这似乎慢得离谱。我最初使用批量插入开发了这个过程，可以在大约一分钟内插入100k条
浏览 23提问于2017-02-22得票数 1
回答已采纳
我有一个应用程序(当前)需要使用SQL Server2000和SQL Server2005提供的数据库。
我正在尝试以编程方式将数据库从一台服务器移动到另一台服务器。我使用的所有表都有一个自动递增的主键。由于这些自动增量键在其他表中用作外键，因此我复制这些表的攻击计划是暂时关闭目标表上的自动增量，逐字插入记录(使用原始主键)，然后重新打开自动增量。为简洁起见，我将只展示与SQL查询的</em
浏览 1提问于2009-09-08得票数 0
回答已采纳
1回答
我有一些数据文件，它们以.Z扩展名压缩存储在我们公司的服务器上(UNIX压缩实用程序用来将它们压缩下来)。
SQL Server的大容量导入操作是否可以读取该格式的这些文件？
浏览 1提问于2008-12-13得票数 1
回答已采纳
我正在使用SSIS包(不是我构建的)将CSV文件批量插入到SQL Server2005中insert bulk [dbo].[stage_dht]( ..... )
但是该语句中没有FROM子句，所以我很好奇它是如何获取数据的，这种所谓的快速加载是将数据大容量加载到SQL中的最佳方式吗？
浏览 3提问于2009-05-13得票数 5
回答已采纳
1回答
我试图在MSSQL(运行在AWS中的服务器)中存储文档(doc，ppt，pdf，txt..etc)。我正在开发应用程序模块(android)。我可以从用户那里获得文件，但我无法将其上传到数据库。; PreparedStatement statement = con.prepareStatement(<
浏览 1提问于2018-02-06得票数 1
2回答
我有2008年和批量插入的问题。我不能让它使用可变长度的记录(特别是头)。，比如导入数据吗？我不记得导入和SQL 2000有那么多问题。，但没有使用difference...obviously --我可能使用了错误的组件。哦，我可以得到99%在那里，散装插入除了第二行:(但这是没有用的任何人！
浏览 1提问于2012-08-29得票数 0
我正在使用SQL Express 2008中的导入功能
当我到达向导的末尾时，我可以运行它，但是我如何找到SQL代码，以便我可以通过自动化工具(如bat文件)运行此脚本？
浏览 1提问于2015-05-02得票数 4
我有一个SSIS转换任务，我使用它作为我的最终目标任务将数据插入到Server表中。我之所以使用转换任务而不是Server目标任务，是因为我事先不知道我们要插入的表中的列是什么。在每个循环容器中，我都在寻找access DB的( 97格式)。控件流的其余部分基本上创建了一个新的SQL数据库和一个表。访问文件是我们所称的“分钟”数据库，其中包含由另一个进程收集的微小信息。我需要创建一
浏览 3提问于2013-08-07得票数 2
回答已采纳
3回答
大家好，我有5个相当大的excel文件(每个800,000行)，我正在导入到一个sql数据库。我已经写了一个工具来做这件事，但我正在从一个电子表格导入一个又一个电子表格的时间，这需要大约15个小时来完成，因为这需要每月一次，我想知道什么是最快的方式做这件事。一次运行所有五个导入，但是运行到不同的临时表并合并它们是否会更快，或者只是更快地插入和更新，而bulk insert会提高速度吗？
非常感谢
浏览 1提问于2015-03-06得票数 0
我在SQL server中有一个相当大(很多on )的数据表，我希望将其移动到同一服务器上另一个数据库中的表中。做这件事最有效的方法是什么？
浏览 1提问于2008-11-24得票数 6
回答已采纳
1回答
我做了一个简单的大容量任务，从一个3-4 kb的csv (.txt)文件中加载数据。所有数据都已正确加载，但SSIS显示其失败。我还是不明白。为什么？所谓的错误是-
大容量插入任务错误:出现以下错误消息：“第1行第1列(My_ID)的大容量加载数据转换错误(指定代码页的类型错配或无效字符)”。为此，我使用SSIS 2008和SQL</em
浏览 6提问于2013-10-29得票数 1
回答已采纳
好的，首先，请不要评论从MySQL到Server 2008的转换--我试图抵制这一决定--我知道这并不理想，但这是我所要做的现实。我能胜任MySQL和Server 2008的新手，所以如果您对这个过程的任何部分有任何建设性的意见，请告诉我。以下是我所做的：
通过PHP创建脚本，将MySQL数据库转储到几个Server 2008兼容文件--我的意思是每个表都有一个文件。每个文件都有CREATE和INS
浏览 0提问于2012-01-10得票数 0
回答已采纳
3回答
我必须在SQL Server数据库中插入很多行(超过1.000.000.000行)。该表有一个AI Id、两个varchar(80)参数和一个使用GETDATE作为默认值的smalldatetime。最后一个只是听觉上的，但也是必要的。谢谢!
迭戈
浏览 9提问于2010-11-08得票数 2
回答已采纳
我有一个巨大的CSV文件，我每周给一次，其中包含略低于500万记录。这些记录需要添加到我的SQL数据库(MS SQL Server)中，或者根据它们是否已经存在而更新。我曾想过要执行一个大容量更新，但问题是我不能直接更新记录。我的应用程序将LINQ用于几乎所有其他数据库事务，但这并不是处理每周加载/更新的最佳方式。我考虑过执行一些SQL大容量操作来完成这个任务，但是接下来
浏览 3提问于2013-10-11得票数 0
回答已采纳
1回答
我需要将数据(>> 1GB)导入到中.出于几个原因，我需要将这些数据导入到暂存表中(而不是直接到目标中)。从暂存开始，数据被加载到目标表。不再使用暂存表中的数据。我有几种方法要做：删除准备中的所有数据，将数据加载到暂存表中，将所有数据加载到目标中。如果解决方案不受服务器角色的限制:推荐的解决方案是什么？哪个是最健壮的</em
浏览 0提问于2017-10-13得票数 3
回答已采纳
SSIS大容量导入数据转换行/列分隔符定义。正在尝试从csv文件导入到sql表。导入数据/值后，如下所示"XXX" "BBN" "BBB" "XXX" "BBN" "BBB"
数据/值
浏览 0提问于2013-04-17得票数 0
从托管Server迁移到AWS (托管服务(SaaS) )，我们无法启用xp_cmdshell。我们的java应用程序目前使用一个使用xp_cmdshell执行BCP.exe的存储过程(批量复制程序是一种命令行工具，用于针对Microsoft导入或导出数据)，用于将大型数据导出到CSV文件。header_select + '" queryout ' + @pathAndFileName +'.csv -c -C 1252 -t;
浏览 4提问于2020-03-13得票数 0
回答已采纳
1回答
我是规划2TB数据库到分区表的实时迁移的过程。从广义上说，该系统是一个文档存储库，大部分空间被分配给50到500 1MB之间的LOB，只有一小部分在500 1MB到1MB的范围内。迁移的一部分将涉及从旧数据库到新数据库的BCPing数据。
BCP是首选的方法，因为数据中的当前/历史鸿沟允许在最后切换之前分阶段(在较安静的时段)提取旧数据，从而将对实际系统的影响降到最低。数据量和存储的可用性排除了对分区方案进
浏览 0提问于2011-08-25得票数 14
回答已采纳
我想导入一个大的文本文件(>12 to )。有人告诉我它有600多列。但是我不知道它有没有头。我尝试过notepad++、记事本、excel和LTFViewr，看看它们的标题是什么，但都没有成功。我尝试导入向导，但它只显示2列，这是不正确的。我不想使用SSIS来导入这个文件，因为它会非常慢。在进一步处理之前，我想尽快将文件导入sql server。有
浏览 1提问于2013-06-10得票数 0
1回答
我有一个SSIS包，它的任务是加载进程外应用程序，以便将数据大容量插入到一个表中。问题是当多个文件同时到达时，多个进程外应用程序将运行。这将导致插入失败。SQL Server Broker服务是否可以对插入数据进行排队？SQL Server或SSIS是否有任何机制来处理并发可靠插入？我使用SSIS的执行进程任务来执行批量插入LINQ to SQL控制台应用程序
谢
浏览 0提问于2010-10-09得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
