当有大量文件时，Powershell 在“get-childitem .-directory -recurse”中运行缓慢

I run:

PS F:\> gci F:\logs\PRV_RequestLogs\inbound -r -directory | %{ $_.fullname }

它显示：

F:\logs\PRV_RequestLogs\inbound\2020-02-03
F:\logs\PRV_RequestLogs\inbound\2020-02-04
...
F:\logs\PRV_RequestLogs\inbound\2022-05-09
F:\logs\PRV_RequestLogs\inbound\2022-05-10

然后它“挂”在那里。

然后我在另一个窗口中运行以下命令，试图找出发生了什么：

PS F:\> C:\temp\handle64.exe -p 3204

我发现：

  ACC: File  (RWD)   F:\logs\PRV_RequestLogs\inbound\2020-04-28
  ...
  F08: File  (RWD)   F:\logs\PRV_RequestLogs\inbound\2020-04-28

而且目录不断变化，所以它遍历每个目录试图找到子目录，除了很多文件之外什么也没有。

完成这个过程花了几个小时。没想到这个过程会这么慢。看起来它会遍历每个文件并测试它是否是目录。有没有更快的方法来做到这一点？我在 Windows 2012R2 上使用 powershell 5.0。

Get-ChildItem众所周知，递归遍历目录的速度很慢，但它是 PowerShell 内置的，它是一个非常方便且易于使用的 cmdlet。如果您追求速度和效率，您可能需要默认使用 .NET API 调用IO.Directory https://learn.microsoft.com/en-us/dotnet/api/system.io.directory?view=net-6.0.

还没有对此进行足够的测试，但我相信它应该有效，例如，在本例中查找任何空且超过 90 天的目录.

值得注意的是这段代码需要 .NET Framework 4+如果运行 Windows PowerShell。

$queue = [Collections.Generic.Queue[IO.DirectoryInfo]]::new()
$olderThan = [datetime]::Now.AddDays(-90)         # => Set limit date here!
$queue.Enqueue('F:\logs\PRV_RequestLogs\inbound') # => Starting path here!

while($queue.Count) {
    $dir = $queue.Dequeue()
    try {
        $isEmpty = $true
        foreach ($i in $dir.EnumerateDirectories()) {
            if($i.Attributes -band [IO.FileAttributes]::ReparsePoint) {
                # skip if it is ReparsePoint
                continue
            }
            $isEmpty = $false
            $queue.Enqueue($i)
        }

        if($isEmpty -and $dir.CreationTime -lt $olderThan -and -not $dir.EnumerateFiles().GetEnumerator().MoveNext()) {
            # output the directory if the 3 conditions are `$true`, no folders or files and older than
            $dir
        }
    }
    catch {
        # if we were unable to enumerate this directory, go next
        continue
    }
}

相关文件

• DirectoryInfo Class https://learn.microsoft.com/en-us/dotnet/api/system.io.directoryinfo?view=net-6.0
• EnumerateDirectories()实例方法 https://learn.microsoft.com/en-us/dotnet/api/system.io.directoryinfo.enumeratedirectories?view=net-6.0#system-io-directoryinfo-enumeratedirectories
• EnumerateFiles()实例方法 https://learn.microsoft.com/en-us/dotnet/api/system.io.directoryinfo.enumeratefiles?view=net-6.0#system-io-directoryinfo-enumeratefiles
• Queue<T> Class https://learn.microsoft.com/en-us/dotnet/api/system.collections.generic.queue-1?view=net-6.0
• FileAttributes Enum https://learn.microsoft.com/en-us/dotnet/api/system.io.fileattributes?view=net-6.0