san*_*ica 19 windows powershell batch-file tail
我需要在Windows 7中检索最后n行巨大文件(1-4 Gb).由于公司限制,我无法运行任何非内置命令.问题是我找到的所有解决方案似乎都读取整个文件,所以它们非常慢.
这可以快速完成吗？
笔记:
这里的解决方案Windows Powershell中的Unix tail等效命令不起作用.使用-wait不会让它变快.我没有-tail(我不知道它是否会起作用).
PS:有相当的几个相关问题head及tail,但不能集中在速度的问题.因此,有用或可接受的答案在这里可能没用.例如,
https://superuser.com/questions/859870/windows-equivalent-of-the-head-c-command
alr*_*roc 51
如果您有PowerShell 3或更高版本,则可以使用-Tail参数Get-Content来获取最后n一行.
Get-content -tail 5 PATH_TO_FILE;
在我本地SSD上的34MB文本文件中,这在1毫秒内返回,而在8.5秒内则返回 get-content |select -last 5
Azi*_*hev 15
怎么样(读取最后8个字节的演示):
$fpath = "C:\10GBfile.dat"
$fs = [IO.File]::OpenRead($fpath)
$fs.Seek(-8, 'End') | Out-Null
for ($i = 0; $i -lt 8; $i++)
{
$fs.ReadByte()
}
更新.要将字节解释为字符串(但一定要选择正确的编码 - 这里使用UTF8):
$N = 8
$fpath = "C:\10GBfile.dat"
$fs = [IO.File]::OpenRead($fpath)
$fs.Seek(-$N, [System.IO.SeekOrigin]::End) | Out-Null
$buffer = new-object Byte[] $N
$fs.Read($buffer, 0, $N) | Out-Null
$fs.Close()
[System.Text.Encoding]::UTF8.GetString($buffer)
更新2.要读取最后M行,我们将按部分读取文件,直到结果中有超过M个换行符char序列:
$M = 3
$fpath = "C:\10GBfile.dat"
$result = ""
$seq = "`r`n"
$buffer_size = 10
$buffer = new-object Byte[] $buffer_size
$fs = [IO.File]::OpenRead($fpath)
while (([regex]::Matches($result, $seq)).Count -lt $M)
{
$fs.Seek(-($result.Length + $buffer_size), [System.IO.SeekOrigin]::End) | Out-Null
$fs.Read($buffer, 0, $buffer_size) | Out-Null
$result = [System.Text.Encoding]::UTF8.GetString($buffer) + $result
}
$fs.Close()
($result -split $seq) | Select -Last $M
尝试使用更大的$buffer_size- 这理想地等于预期的平均线路长度,以减少磁盘操作.还要注意$ seq - 这可能是\r\n或者只是\n.这是非常脏的代码,没有任何错误处理和优化.
当文件已经打开时，最好使用
Get-Content $fpath -tail 10
因为“使用“1”个参数调用“OpenRead”时出现异常：“该进程无法访问该文件...”
| 归档时间： |
|
| 查看次数： |
44383 次 |
| 最近记录： |