※ 引述《TeemingVoid (TeemingVoid)》之铭言： : ※ 引述《zxc321 (坚持到底 )》之铭言： 不好意思，借讨论串趁机请教一下各位前辈 小弟最近也遇到类似的问题，关於资料库 Data 的大量汇出/汇入 但由於是个资料库门外汉...@@" 需求是用程式(C#)从 server，依条件捞出资料後写入档案 将档案传给 client 後，同样用C#控制汇入资料库 这边先假设资料库都是 SQL Server 2008 Express 原本作法： 是用前人写好的方法汇出资料、转换成 sql statement 并写入档案 所以内容是大量的 DELETE FROM table_name WHERE condition = con; INSERT INTO table_name(fields) VALUES (value); 接收端收到档案後 用 System.Data.SqlClient.SqlCommand.ExecuteNonQuery() 一行行执行 结果执行时间被评为不可接受QQ (小弟刚又实测了十遍，10万笔资料 DELETE 後 INSERT 约都耗时25~27秒左右) 後来摸索一阵子，也找到了上篇提到 SQL Server 提供的 BCP 公用程式 http://goo.gl/doRy3 (MSDN) 果然不论是汇出或汇入的速度都相当令人满意 同样 10万笔资料，汇出平均 1.1秒，汇入平均 2.5秒 而且也容许由C#端来控制，组出字串後当作SQL statement一样执行就好 大概像这样 exec xp_cmdShell 'bcp database..table_name out output_file -T -S.\SQLEXPRESS' exec xp_cmdShell 'bcp database..table_name in source_file -T -S.\SQLEXPRESS' 同时 BCP 也可以汇出表结构的format档案，在汇入时搭配使用 但...... 以上是当汇入表都无资料(或不要旧资料就TRUNCATE掉)时的美好情形 可以利用 BCP 进行快速的汇出/汇入 假使是需要 UPDATE 的情况，仍然要一笔笔 DELETE 掉，再进行 BCP 汇入 这部份小弟还没找出方法解决 T^T 所以以上算是第一个想请教的问题(INSERT 可用 BCP 汇入取代，那 DELETE 呢？) 第二个问题是 上面曾提到，先假设资料库是使用 SQL Server 2008 Express 那如果资料来源是 Oracle 呢？ (一种小弟就被摆平了还变两种... orz) 亦即汇出来源有可能是 MSSQL/Oracle 其中一种 汇入资料库也要相容两种资料库 @@ 上面提到前人给的汇出方法 其实就是用程式从 Oracle 捞出资料後依表结构转成 SQL statement 处理一些字元转换跟类型对映後，就可以喂给MSSQL执行，也算是一种相容方式 只是会在大量资料处理上遇到效能问题 很想知道这方面有没有两全其美的方式！ 实在由於小弟之前没好好学资料库，很多观念上都不清楚，拉里拉杂打了不少 还希望有前辈愿意提点一下关键字或是方向 之前也在考虑要在 DB 板还是 C# 板询问 刚好看到这串讨论就厚颜借用一下 感谢您的阅读！ --

※ 发信站: 批踢踢实业坊(ptt.cc) ◆ From: 58.99.47.202 那请问有保留非重复部份资料的方式吗 @@? 目前我是卡在 BCP 前要把键值重复的资料先 DELETE 掉避免汇入失败 但是又不能直接 TRUNCATE 把没重复的也清除了 ※ 编辑: soon 来自: 58.99.47.202 (08/12 13:55)