jjzjj

sql-server - freebcp 因大量数据而停滞不前

我正在从事一个每天处理大数据(大小约3TB)的项目。我们数据管道的第一阶段使用名为freebcp的工具将数据从我们的MS-SQLServer复制到主机(linux服务器)。有关freebcp的更多信息是here使用linux服务器上的这个工具,我们在SQLServer上运行一组存储过程,导出数据并批量传输。最近我观察到如果数据很大(~200GB),数据传输会在一段时间后停止。我运行了几个命令(sp_who2和dbccinputbuffer(spid))来监视SQLServer上存储过程的执行。我们观察此过程使用的CPU时间和磁盘IO。如果这几分钟没有改变,我们假设作业停止,并手动终止这