在PowerShell中，我在处理超过1 GB的文件时收到OutOfMemory异常(&Q；) [英] In Powershell I'm receiving an "OutOfMemoryException" when working with files over 1gb

问题描述

我在加载到数据仓库之前正在进行一些文件清理，遇到了文件大小问题：

(Get-Content -path C:Workspaceworkfilemyfile.txt -Raw) -replace '\"', '"' | Set-Content C:WorkspaceworkfilemyfileCLEAN.txt

我的文件大约是2 GB。我收到以下错误，不确定如何更正。

Get-Content：‘System.OutOfMemoyException’类型的异常为 抛出，......

我不是一个程序员，但我确实喜欢学习，所以我正在构建我自己的数据仓库。因此，如果您有回复，请记住我的经验水平：)

推荐答案

• 逐行读取文本文件的最佳方法是使用带有-File参数的switch语句。

• 编写的最佳方法是使用System.IO.StreamWriter实例。

• 正如Mathias在his answer中指出的那样，使用逐字"和基于regex的-replace operator实际上替换了"单独，这是由于regex的转义规则。虽然您可以使用'\"'来解决这个问题，但在这种情况下，更简单、性能更好的替代方法是使用[string]类型的Replace()方法，该方法对文字子字符串进行操作。

将所有这些放在一起：

# Note: Be sure to use a *full* path, because .NET's working dir. usually
#       differs from PowerShell's.
$streamWriter = [System.IO.StreamWriter]::new('C:WorkspaceworkfilemyfileCLEAN.txt')

switch -File C:Workspaceworkfilemyfile.txt {
  default { $streamWriter.WriteLine($_.Replace('"', '"')) }
}

$streamWriter.Close()

注意：如果您使用的是旧版本的Windows PowerShell，即版本4或更低版本，请使用
New-Object System.IO.StreamWriter 'C:WorkspaceworkfilemyfileCLEAN.txt'
而非
[System.IO.StreamWriter]::new('C:WorkspaceworkfilemyfileCLEAN.txt')

这篇关于在PowerShell中，我在处理超过1 GB的文件时收到OutOfMemory异常(&Q；)的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！