C#通过FTP下载所有文件和子目录
C# Download all files and subdirectories through FTP
一般信息
我仍在学习 C# 的过程中。为了帮助自己,我正在尝试创建一个程序,自动将我所有的本地项目与我的 FTP 服务器上的文件夹同步。这样一来,无论我是在学校还是在家,我总是可以进行相同的项目。
我知道像 Dropbox 这样的程序已经为我做了这件事,但我认为自己创建类似的东西会在这个过程中教会我很多东西。
问题
我实现目标的第一步是从我的 FTP 服务器下载所有文件、子目录和子文件。我已经设法使用以下代码从目录中下载所有文件。但是,我的代码只列出文件夹名称和主目录中的文件。子文件夹和子文件永远不会返回也不会下载。除此之外,服务器 returns 出现 550 错误,因为我正在尝试下载文件夹,就好像它们是文件一样。我已经处理这个问题 4 个多小时了,但我找不到任何关于如何解决这些问题并让它发挥作用的信息。因此,我希望你们能帮助我:)
代码
public string[] GetFileList()
{
string[] downloadFiles;
StringBuilder result = new StringBuilder();
WebResponse response = null;
StreamReader reader = null;
try
{
FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url);
request.UseBinary = true;
request.Method = WebRequestMethods.Ftp.ListDirectory;
request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
request.KeepAlive = false;
request.UsePassive = false;
response = request.GetResponse();
reader = new StreamReader(response.GetResponseStream());
string line = reader.ReadLine();
while (line != null)
{
result.Append(line);
result.Append("\n");
line = reader.ReadLine();
}
result.Remove(result.ToString().LastIndexOf('\n'), 1);
return result.ToString().Split('\n');
}
catch (Exception ex)
{
if (reader != null)
{
reader.Close();
}
if (response != null)
{
response.Close();
}
downloadFiles = null;
return downloadFiles;
}
}
private void Download(string file)
{
try
{
string uri = url + "/" + file;
Uri serverUri = new Uri(uri);
if (serverUri.Scheme != Uri.UriSchemeFtp)
{
return;
}
FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url + "/" + file);
request.UseBinary = true;
request.Method = WebRequestMethods.Ftp.DownloadFile;
request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
request.KeepAlive = false;
request.UsePassive = false;
FtpWebResponse response = (FtpWebResponse)request.GetResponse();
Stream responseStream = response.GetResponseStream();
FileStream writeStream = new FileStream(localDestnDir + "\" + file, FileMode.Create);
int Length = 2048;
Byte[] buffer = new Byte[Length];
int bytesRead = responseStream.Read(buffer, 0, Length);
while (bytesRead > 0)
{
writeStream.Write(buffer, 0, bytesRead);
bytesRead = responseStream.Read(buffer, 0, Length);
}
writeStream.Close();
response.Close();
}
catch (WebException wEx)
{
MessageBox.Show(wEx.Message, "Download Error");
}
catch (Exception ex)
{
MessageBox.Show(ex.Message, "Download Error");
}
}
FtpWebRequest
没有任何对递归文件操作(包括下载)的明确支持。你必须自己实现递归:
- 列出远程目录
- 迭代条目、下载文件并递归到子目录(再次列出它们等)
棘手的部分是从子目录中识别文件。 FtpWebRequest
无法以可移植的方式做到这一点。不幸的是,FtpWebRequest
不支持 MLSD
命令,这是在 FTP 协议中检索具有文件属性的目录列表的唯一可移植方式。另见 .
您的选择是:
- 对一个文件名进行操作,该操作肯定对文件失败而对目录成功(反之亦然)。 IE。您可以尝试下载“名称”。如果成功,它是一个文件,如果失败,它是一个目录。
- 你可能很幸运,在你的特定情况下,你可以通过文件名从目录中区分文件(即你的所有文件都有扩展名,而子目录没有)
- 您使用长目录列表(
LIST
命令= ListDirectoryDetails
方法)并尝试解析特定于服务器的列表。许多 FTP 服务器使用 *nix 样式列表,您可以在条目的最开头通过 d
识别目录。但是许多服务器使用不同的格式。下面的例子使用了这种方法(假设是 *nix 格式)
void DownloadFtpDirectory(
string url, NetworkCredential credentials, string localPath)
{
FtpWebRequest listRequest = (FtpWebRequest)WebRequest.Create(url);
listRequest.Method = WebRequestMethods.Ftp.ListDirectoryDetails;
listRequest.Credentials = credentials;
List<string> lines = new List<string>();
using (var listResponse = (FtpWebResponse)listRequest.GetResponse())
using (Stream listStream = listResponse.GetResponseStream())
using (var listReader = new StreamReader(listStream))
{
while (!listReader.EndOfStream)
{
lines.Add(listReader.ReadLine());
}
}
foreach (string line in lines)
{
string[] tokens =
line.Split(new[] { ' ' }, 9, StringSplitOptions.RemoveEmptyEntries);
string name = tokens[8];
string permissions = tokens[0];
string localFilePath = Path.Combine(localPath, name);
string fileUrl = url + name;
if (permissions[0] == 'd')
{
if (!Directory.Exists(localFilePath))
{
Directory.CreateDirectory(localFilePath);
}
DownloadFtpDirectory(fileUrl + "/", credentials, localFilePath);
}
else
{
FtpWebRequest downloadRequest =
(FtpWebRequest)WebRequest.Create(fileUrl);
downloadRequest.Method = WebRequestMethods.Ftp.DownloadFile;
downloadRequest.Credentials = credentials;
using (FtpWebResponse downloadResponse =
(FtpWebResponse)downloadRequest.GetResponse())
using (Stream sourceStream = downloadResponse.GetResponseStream())
using (Stream targetStream = File.Create(localFilePath))
{
byte[] buffer = new byte[10240];
int read;
while ((read = sourceStream.Read(buffer, 0, buffer.Length)) > 0)
{
targetStream.Write(buffer, 0, read);
}
}
}
}
}
使用如下函数:
NetworkCredential credentials = new NetworkCredential("user", "mypassword");
string url = "ftp://ftp.example.com/directory/to/download/";
DownloadFtpDirectory(url, credentials, @"C:\target\directory");
如果您想避免解析特定于服务器的目录列表格式的麻烦,请使用支持 MLSD
命令 and/or 解析各种 LIST
列表格式的第 3 方库;和递归下载。
例如 WinSCP .NET assembly you can download whole directory with a single call to the Session.GetFiles
:
// Setup session options
SessionOptions sessionOptions = new SessionOptions
{
Protocol = Protocol.Ftp,
HostName = "ftp.example.com",
UserName = "user",
Password = "mypassword",
};
using (Session session = new Session())
{
// Connect
session.Open(sessionOptions);
// Download files
session.GetFiles("/directory/to/download/*", @"C:\target\directory\*").Check();
}
如果服务器支持,WinSCP 在内部使用 MLSD
命令。如果没有,它使用 LIST
命令并支持数十种不同的列表格式。
Session.GetFiles
method默认是递归的。
(我是WinSCP的作者)
一般信息
我仍在学习 C# 的过程中。为了帮助自己,我正在尝试创建一个程序,自动将我所有的本地项目与我的 FTP 服务器上的文件夹同步。这样一来,无论我是在学校还是在家,我总是可以进行相同的项目。
我知道像 Dropbox 这样的程序已经为我做了这件事,但我认为自己创建类似的东西会在这个过程中教会我很多东西。
问题
我实现目标的第一步是从我的 FTP 服务器下载所有文件、子目录和子文件。我已经设法使用以下代码从目录中下载所有文件。但是,我的代码只列出文件夹名称和主目录中的文件。子文件夹和子文件永远不会返回也不会下载。除此之外,服务器 returns 出现 550 错误,因为我正在尝试下载文件夹,就好像它们是文件一样。我已经处理这个问题 4 个多小时了,但我找不到任何关于如何解决这些问题并让它发挥作用的信息。因此,我希望你们能帮助我:)
代码
public string[] GetFileList()
{
string[] downloadFiles;
StringBuilder result = new StringBuilder();
WebResponse response = null;
StreamReader reader = null;
try
{
FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url);
request.UseBinary = true;
request.Method = WebRequestMethods.Ftp.ListDirectory;
request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
request.KeepAlive = false;
request.UsePassive = false;
response = request.GetResponse();
reader = new StreamReader(response.GetResponseStream());
string line = reader.ReadLine();
while (line != null)
{
result.Append(line);
result.Append("\n");
line = reader.ReadLine();
}
result.Remove(result.ToString().LastIndexOf('\n'), 1);
return result.ToString().Split('\n');
}
catch (Exception ex)
{
if (reader != null)
{
reader.Close();
}
if (response != null)
{
response.Close();
}
downloadFiles = null;
return downloadFiles;
}
}
private void Download(string file)
{
try
{
string uri = url + "/" + file;
Uri serverUri = new Uri(uri);
if (serverUri.Scheme != Uri.UriSchemeFtp)
{
return;
}
FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url + "/" + file);
request.UseBinary = true;
request.Method = WebRequestMethods.Ftp.DownloadFile;
request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
request.KeepAlive = false;
request.UsePassive = false;
FtpWebResponse response = (FtpWebResponse)request.GetResponse();
Stream responseStream = response.GetResponseStream();
FileStream writeStream = new FileStream(localDestnDir + "\" + file, FileMode.Create);
int Length = 2048;
Byte[] buffer = new Byte[Length];
int bytesRead = responseStream.Read(buffer, 0, Length);
while (bytesRead > 0)
{
writeStream.Write(buffer, 0, bytesRead);
bytesRead = responseStream.Read(buffer, 0, Length);
}
writeStream.Close();
response.Close();
}
catch (WebException wEx)
{
MessageBox.Show(wEx.Message, "Download Error");
}
catch (Exception ex)
{
MessageBox.Show(ex.Message, "Download Error");
}
}
FtpWebRequest
没有任何对递归文件操作(包括下载)的明确支持。你必须自己实现递归:
- 列出远程目录
- 迭代条目、下载文件并递归到子目录(再次列出它们等)
棘手的部分是从子目录中识别文件。 FtpWebRequest
无法以可移植的方式做到这一点。不幸的是,FtpWebRequest
不支持 MLSD
命令,这是在 FTP 协议中检索具有文件属性的目录列表的唯一可移植方式。另见
您的选择是:
- 对一个文件名进行操作,该操作肯定对文件失败而对目录成功(反之亦然)。 IE。您可以尝试下载“名称”。如果成功,它是一个文件,如果失败,它是一个目录。
- 你可能很幸运,在你的特定情况下,你可以通过文件名从目录中区分文件(即你的所有文件都有扩展名,而子目录没有)
- 您使用长目录列表(
LIST
命令=ListDirectoryDetails
方法)并尝试解析特定于服务器的列表。许多 FTP 服务器使用 *nix 样式列表,您可以在条目的最开头通过d
识别目录。但是许多服务器使用不同的格式。下面的例子使用了这种方法(假设是 *nix 格式)
void DownloadFtpDirectory(
string url, NetworkCredential credentials, string localPath)
{
FtpWebRequest listRequest = (FtpWebRequest)WebRequest.Create(url);
listRequest.Method = WebRequestMethods.Ftp.ListDirectoryDetails;
listRequest.Credentials = credentials;
List<string> lines = new List<string>();
using (var listResponse = (FtpWebResponse)listRequest.GetResponse())
using (Stream listStream = listResponse.GetResponseStream())
using (var listReader = new StreamReader(listStream))
{
while (!listReader.EndOfStream)
{
lines.Add(listReader.ReadLine());
}
}
foreach (string line in lines)
{
string[] tokens =
line.Split(new[] { ' ' }, 9, StringSplitOptions.RemoveEmptyEntries);
string name = tokens[8];
string permissions = tokens[0];
string localFilePath = Path.Combine(localPath, name);
string fileUrl = url + name;
if (permissions[0] == 'd')
{
if (!Directory.Exists(localFilePath))
{
Directory.CreateDirectory(localFilePath);
}
DownloadFtpDirectory(fileUrl + "/", credentials, localFilePath);
}
else
{
FtpWebRequest downloadRequest =
(FtpWebRequest)WebRequest.Create(fileUrl);
downloadRequest.Method = WebRequestMethods.Ftp.DownloadFile;
downloadRequest.Credentials = credentials;
using (FtpWebResponse downloadResponse =
(FtpWebResponse)downloadRequest.GetResponse())
using (Stream sourceStream = downloadResponse.GetResponseStream())
using (Stream targetStream = File.Create(localFilePath))
{
byte[] buffer = new byte[10240];
int read;
while ((read = sourceStream.Read(buffer, 0, buffer.Length)) > 0)
{
targetStream.Write(buffer, 0, read);
}
}
}
}
}
使用如下函数:
NetworkCredential credentials = new NetworkCredential("user", "mypassword");
string url = "ftp://ftp.example.com/directory/to/download/";
DownloadFtpDirectory(url, credentials, @"C:\target\directory");
如果您想避免解析特定于服务器的目录列表格式的麻烦,请使用支持 MLSD
命令 and/or 解析各种 LIST
列表格式的第 3 方库;和递归下载。
例如 WinSCP .NET assembly you can download whole directory with a single call to the Session.GetFiles
:
// Setup session options
SessionOptions sessionOptions = new SessionOptions
{
Protocol = Protocol.Ftp,
HostName = "ftp.example.com",
UserName = "user",
Password = "mypassword",
};
using (Session session = new Session())
{
// Connect
session.Open(sessionOptions);
// Download files
session.GetFiles("/directory/to/download/*", @"C:\target\directory\*").Check();
}
如果服务器支持,WinSCP 在内部使用 MLSD
命令。如果没有,它使用 LIST
命令并支持数十种不同的列表格式。
Session.GetFiles
method默认是递归的。
(我是WinSCP的作者)