大目录树上的Powershell Compare-Object

如何解决大目录树上的Powershell Compare-Object

我正在尝试这样做：

$snap1 = Get-ChildItem -Recurse -path \\file_path1\blah | select -ExpandProperty Fullname

$snap2 = Get-ChildItem -Recurse -path \\file_path2\blah2 | select -ExpandProperty Fullname

Compare-Object -ReferenceObject $snap1 -DifferenceObject $snap2 -IncludeEqual | Out-File -FilePath C:\Users\my_username\desktop\output.txt

这两个Get-ChildItem命令从目录树顶部的文件夹开始并向下递归，它们基本相同，但是我们需要确定两者的不同之处，并使其吐出完整的文件路径。有一个障碍是，它们每个代表大约500万个文件，每吨重，一旦加载它们似乎会占用大约20 GB的RAM，但是该机器具有128 GB，所以这不是世界末日（空间效率不应该是一个大问题）。

该命令应该可以正常工作，不会出错，它会创建“ Output.txt”文件，但是随后没有任何写入，并且似乎只是停顿了（我无法看到告诉它如何运行据我所知）。

我的问题是需要更多的Powershell，这是命令的良好语法吗？是否有更好的方法，尤其是考虑要比较的每个文件系统的大小？

编辑：

我也尝试过：

$snap1 = Get-ChildItem -Recurse -path \\server\blah$

$snap2 = Get-ChildItem -Recurse -path \\server\blah2$

Compare-Object -ReferenceObject $snap1 -DifferenceObject $snap2 | Out-File -FilePath C:\Users\user_name\Desktop\comparison.txt

哪个问题到了Compare-Object并实际上写入了一些文件，但似乎停止了（但是我没有提到它，因为我没有包括“ equals”参数，所以认为它不是发现很多差异。

解决方法

首先，使用原始.net方法EnumerateFiles：

$snap1 = [System.IO.Directory]::EnumerateFiles('S:\SCRIPTS','*',[System.IO.SearchOption]::AllDirectories) 

如果这是一次性过程，并且您需要比较相对路径，请从文件名中添加子字符串（例如，删除服务器名的前10个符号）

$snap1 = [System.IO.Directory]::EnumerateFiles('S:\SCRIPTS',[System.IO.SearchOption]::AllDirectories) | 
    ForEach-Object { return $_.SubString(10) }

如果您需要文件名，而根本没有目录名，请执行以下操作：

$snap1 = [System.IO.Directory]::EnumerateFiles('S:\SCRIPTS',[System.IO.SearchOption]::AllDirectories) | 
    ForEach-Object { return [System.IO.Path]::GetFileName($_) }

...和$snap2相同的方式

EnumerateFiles的工作速度更快，因为Get-ChildItem还会读取每个文件的FileInfo（如大小，长度，创建时间，属性等），而EnumerateFiles仅返回全名。>