SQL 从文件夹的 CSV 批量插入

Question

我有这个 SQL 命令，它将在存储过程中使用并将被安排：

BULK INSERT Test101.dbo.Test102
FROM 'C:\Bulk\samp.csv'
WITH
(
    FIELDTERMINATOR = ',',
    ROWTERMINATOR = '\n'
)

它运行良好，但我想做的是自动处理文件夹（比方说 Bulk 文件夹）中的所有 .csv 文件。我的意思是，用户不必使用文件名定义确切位置，存储过程将处理该文件夹中的所有 .CSV 文件并忽略其他文件（如果有）。

请帮忙。

谢谢。

Answer 1

尝试这些以确保您拥有正确的权限和设置来执行 xp_cmdshell

一次性配置更改以在此处启用：

--To Test if that worked run these commands. There should be no errors and should return list of files under c:\
declare @files table (ID int IDENTITY, FileName varchar(500))
insert into @files execute xp_cmdshell 'dir c:\ /b'
select * from @files

--如果没有错误，则继续创建此 SP，如下所示。这是完成所有工作的那个

CREATE PROCEDURE dbo.sp_BulkInsAllFilesInDirectory
AS
BEGIN
    --a table to hold filenames 
    Declare   @ALLFILENAMES as TABLE (WHICHPATH VARCHAR(255),WHICHFILE varchar(255))

    --some variables
    declare @filename varchar(255),
            @path     varchar(255),
            @sql      varchar(8000),
            @cmd      varchar(1000)


    --get the list of files to process:
    SET @path = 'C:\Bulk\'
    SET @cmd = 'dir ' + @path + '*.csv /b'
    INSERT INTO  @ALLFILENAMES(WHICHFILE)
    EXEC Master..xp_cmdShell @cmd
    UPDATE @ALLFILENAMES SET WHICHPATH = @path where WHICHPATH is null


    --cursor loop
    declare c1 cursor for SELECT WHICHPATH,WHICHFILE FROM @ALLFILENAMES where WHICHFILE like '%.csv%'
    open c1
    fetch next from c1 into @path,@filename
    While @@fetch_status <> -1
      begin
          --bulk insert won't take a variable name, so make a sql and execute it instead:
           set @sql = 'BULK INSERT Temp FROM ''' + @path + @filename + ''' '
               + '     WITH ( 
                       FIELDTERMINATOR = '','', 
                       ROWTERMINATOR = ''\n'', 
                       FIRSTROW = 2 
                    ) '
        print @sql
        exec (@sql)

        fetch next from c1 into @path,@filename
      end
    close c1
    deallocate c1

END

--- 按运行测试它，就像这样（从 C:\BULK\ 目录中的一个 csv 文件开始。如果它适用于一个文件，它很可能适用于多个文件。

EXEC dbo.sp_BulkInsAllFilesInDirectory

看看有没有错误。在这里留言，我明天查看。祝你好运。

SQL 从文件夹的 CSV 批量插入

SQL BULK INSERT FROM CSV From a Folder

sql-server

loops

bulkinsert