使用 Robocopy 列出远程计算机中的大文件并将其另存为 ServerName.CSV

Question

我正在尝试修改以下脚本以远程收集大文件列表（服务器上的前 32 个），然后将其保存为 ServerName.CSV

Try
{
    $scriptBlock = {
        param ([string]$Path)
        [Math]::Round(((robocopy /L /E /NDL /NJH /NJS /NP /NODCOPY /BYTES $Path 'NoDestination' | ForEach-Object {
                        [int64]([regex]'(?i)New File\s*(\d+)').Match($_).Groups[1].Value
                    } | Sort-Object -Descending | Select-Object -First 32 | Measure-Object -Sum).Sum / 1GB), 1)
    }
    
    $results = Get-ADComputer -Filter * | Where-Object { $_.Name -like "FileServer*" } | Select-Object -Property Name | ForEach-Object {
        Write-Host "Retrieving Top 32 Largest Files Size from server $($_.ComputerName).."
        $size = Invoke-Command -ComputerName $_.Name -ScriptBlock $scriptBlock -ArgumentList $_.ContentPath
        [PsCustomObject]@{
            'Server - IP' = "$($_.Name) [$((Resolve-DnsName -Name $_.ComputerName -Type A).IPAddress)]"
            'Top 32 Largest Files Size' = $size
            'FileName'   = #File Name
            'FilePath'   = #File Path / location
            'FileSize'     = #File Size in Gigabyte
        }
    }
    $results | Export-Csv -Path C:\Users$ENV:USERPROFILE\Desktop$($_.ComputerName)-BigFiles.csv -NTI
}
Catch
{
    $_ | Write-Error
}

上面的代码非常适合获取远程服务器中具有特定文件名模式的 32 个大文件的总大小。

Answer 1

在您的中，您的起点是 Get-DfsrMembership cmdlet。在这个问题中，你已经切换到从 Get-ADComputer 开始。其他人一直试图指出的是 Get-DfdMembership 返回的属性不可用。特别是 $_.ContentPath 在这种情况下不可用。此外，Get-ADComputer returns 名称属性不是 ComputerName。

也就是说，您的评论中描述的真正问题是：

however, the challenge is how to list the file names, size and location in each respective servers and export as .CSV

这是一个关于模式和概念的问题。您将对整个集合（总和）有意义的值与集合的各个元素混为一谈。因此，总和不能真正存储在 CSV 中。想象一下，CSV 的每一行都有来自 32 个文件之一的信息，那么你会将 Sum 放在该行的什么位置？它对该行的任何其他内容都没有任何意义。

概念上的对象是 self-contained。试图像这样挤一个不相关的属性是一个难题。而且，CSV 文件的 flat-ish 性质使其更具挑战性。

那么如何处理呢？

Note: Because of the $_.ContentPath problem I've hardcoded the path below. This is for demonstration not production!

$Computers = ( Get-ADComputer -Filter { Name -like "FileServer*" } ).Name

$scriptBlock = {
    param ([string]$Path)
    
    $noEmpties = [StringSplitOptions]::RemoveEmptyEntries

    robocopy /L /E /NDL /NJH /NJS /NP /NC /BYTES $Path 'NoDestination' | 
    ForEach-Object{ 
        # If( !$_ ){ Continue }
        $TempArr = $_.Split( " `t", 2, $noEmpties )
        [PSCustomObject]@{
            FilePath = $TempArr[1]
            FileName = $TempArr[1].Split( '\' )[-1]
            Length   = [Int64]$TempArr[0]
        }
    } |
    Sort-Object -Property Length | Select-Object -Last 32
}

Try
{       
    $Results = Invoke-Command -ComputerName $Computers -ScriptBlock $scriptBlock -ArgumentList 'C:\Temp2' |
    Group-Object -Property PSComputerName |
    ForEach-Object{        
        [PSCustomObject]@{
            ComputerName = [String]$_.Name
            'Server - IP' = "$($_.Name) [$((Resolve-DnsName -Name $_.Name -Type A).IPAddress)]" 
            'Top 32 Largest Files Size' = [Math]::Round( ($_.Group.Length | Measure-Object -Sum).Sum/1GB, 2 )
            'Top 32 Largest Files' = [Object[]]$_.Group | Select-Object FilePath,FileName,Length
        }
    }

    # Export to CSV
    $Results |
    ForEach-Object{
        $CSVFileName = $_.ComputerName + '-BigFiles.csv'
        $_.'Top 32 Largest Files' | Export-Csv -Path $CSVFileName -NoTypeInformation
    }
}
Catch
{
    $_ | Write-Error
}

Note: Again this is imperfect, I'm not as focused on efficiency and performance at the moment. I'm not yet sure if I could've eliminated a a loop or 2.

由于您不断变化的要求，我们必须从 RoboCopy 输出中提取 2 个东西。

文件大小
文件路径

然后从文件路径我们可以很容易地导出文件名。作为我之前的工作，我使用了一些谨慎的 .Split() 调用来实现这一点。我确定@Theo 可能有一些 RegEx 方法...

所以第一件事是我让远程端生成一个只有这些属性的对象。我在本地完成其余的工作。原因是我需要这两个属性，我们不再从远程机器返回单个值。

根据结果，我创建了一组新对象，其中包含 ComputerName、'Server IP'、'Top 32 Largest Files Size' 和 'Top 32 Largest Files'。最后一个属性是具有相同 3 个属性的对象数组。

现在我可以循环 $Results 并创建根据 $ComputerName 属性.

命名的 CSV 文件

这肯定是不完美的。一种替代方法可能是 sub-delimit 文件名带有“;”之类的东西这将充分展平 CSV 文件的对象。尽管我们不得不放弃名称和长度属性。平面对象更容易处理，但是 sub-delimited 字段需要在输入到您使用它的任何其他进程时进行处理。

另一个问题是您是否真的需要将输出存储在 CSV 文件中。例如，JSON 更适合存储分层对象。 Export\Import-Clixml 也可能感兴趣。当然，这可能又取决于您以后要在哪里使用该数据等...

我认为所有这些都表明需要改变您的要求以满足任务。

使用 Robocopy 列出远程计算机中的大文件并将其另存为 ServerName.CSV

Using Robocopy to list the big files in remote computer and save it as ServerName.CSV

powershell

robocopy