使用 WinSCP 从 SFTP 服务器下载晚于 X 天的文件,跳过不包含任何匹配文件的文件夹

Download files newer than X days from SFTP server with WinSCP, skipping folders that do not contain any matching files

我仅限于 PuTTY 和 WinSCP。

我正在尝试下载包含日志文件的日志目录。例如,我想抓取所有 log_files 6 天或更晚的数据。 log_dir2log_dir3 包括文件夹符合条件,而 log_dir1 及其文件不符合条件。

DIR/log_dir1/log_files % older than 6 days
DIR/log_dir2/log_files % meets criteria
DIR/log_dir3/log_files % meets criteria

我的问题是,虽然 log_dir1log_files 没有下载,但我当前使用的语法会下载 log_dir1 文件夹。通常情况下,没什么大不了的,但我们正在谈论数百个 log_dir 文件夹(所有文件都是空的,因为文件已超过 6 天)。由于我无法控制的原因,我无法移动或存档这些旧日志目录及其日志文件。

我的问题很简单,如何更改语法以忽略超过 6 天的文件夹以及文件。

get -filemask="*>6D" /DIR/* C:\temp

我尝试了几种不同的参数组合,并且阅读了有关目录掩码和路径掩码的支持页面。我无法让它们中的任何一个工作(版本问题?)。谁能比 help page 更好地解释他们的语法。我将在明天更新我正在使用的当前版本的 WinSCP。

Time constraint in WinSCP file mask 不能用于目录。


但是你可以prevent WinSCP from creating the empty folders. Use -rawtransfersettings switch with ExcludeEmptyDirectories setting.

get -rawtransfersettings ExcludeEmptyDirectories=1 -filemask="*>6D" /DIR/* C:\temp

这是原答案,在WinSCP支持之前ExcludeEmptyDirectories。作为具有更具体约束的实现的基础,它可能仍然有用。

您可以在 PowerShell script with a use of WinSCP .NET assembly 中轻松实现此自定义逻辑:

# Load WinSCP .NET assembly
Add-Type -Path "WinSCPnet.dll"

# Set up session options
$sessionOptions = New-Object WinSCP.SessionOptions -Property @{
    Protocol = [WinSCP.Protocol]::Sftp
    HostName = "example.com"
    UserName = "username"
    Password = "password"
    SshHostKeyFingerprint = "..."
}

$remotePath = "/remote/path"
$localPath = "C:\local\path"
$limit = (Get-Date).AddDays(-6)

$session = New-Object WinSCP.Session

# Connect
$session.Open($sessionOptions)

# Enumerate files to download
$fileInfos =
    $session.EnumerateRemoteFiles(
        $remotePath, $Null, [WinSCP.EnumerationOptions]::AllDirectories) |
    Where-Object { $_.LastWriteTime -gt $limit }

foreach ($fileInfo in $fileInfos)
{
    $localFilePath =
        [WinSCP.RemotePath]::TranslateRemotePathToLocal(
            $fileInfo.FullName, $remotePath, $localPath)

    # If the corresponding local folder does not exist yet, create it
    $localFileDir = Split-Path -Parent $localFilePath
    if (!(Test-Path -Path $localFileDir))
    {
        Write-Host "Creating local directory $localFileDir..."
        New-Item $localFileDir -ItemType directory | Out-Null
    }

    Write-Host "Downloading file $($fileInfo.FullName)..."

    # Download file
    $sourcePath = [WinSCP.RemotePath]::EscapeFileMask($fileInfo.FullName)
    $transferResult = $session.GetFiles($sourcePath, $localFilePath)

    # Did the download succeeded?
    if (!$transferResult.IsSuccess)
    {
        # Print error (but continue with other files)
        Write-Host ("Error downloading file ${remoteFilePath}: " +
            $transferResult.Failures[0].Message)
    }
}

$session.Dispose()

Write-Host "Done."

运行 脚本 (download.ps1) 如:

powershell.exe -ExecutionPolicy Unrestricted -File download.ps1