ForEach-Object -Parallel如何使用?
- User
ForEach-Object -Parallel如何使用?
- Assistant
ForEach-Object -Parallel是PowerShell中用于并行处理集合元素的命令。通过使用-Parallel参数,ForEach-Object cmdlet可以将循环中的每个对象并行处理,以提高处理速度。
以下是ForEach-Object -Parallel的使用方法:
-
首先,确保你的PowerShell版本是3.0或更高版本。你可以使用
$PSVersionTable.PSVersion命令来检查PowerShell版本。 -
创建一个包含要处理的对象的集合。例如,你可以使用管道符号(|)将对象发送到ForEach-Object cmdlet。
-
使用ForEach-Object -Parallel命令并指定要执行的脚本块:
$collection | ForEach-Object -Parallel { # 这里是要执行的脚本块 }在脚本块中,你可以访问当前正在被处理的对象使用
$_变量。 -
如果你想使用多个线程进行并行处理(默认为5个线程),可以使用-ThreadCount参数指定线程数:
$collection | ForEach-Object -Parallel -ThreadCount 10 { # 这里是要执行的脚本块 }这将使用10个线程同时处理对象。
需要注意的是,ForEach-Object -Parallel命令会以任意顺序处理对象,因此如果你有顺序性的要求,则不适合使用并行处理。
另外,一些不支持并行处理的操作(例如输出到控制台)需要在并行脚本块之外执行。可以在并行脚本块内使用
Write-Output将结果返回到主线程,然后在主线程中进行输出。希望这可以帮助你理解和使用ForEach-Object -Parallel命令。
-
- User
ForEach-Object: D:\download\WhisperPS\script.ps1:18 Line | 18 | MaxThreads -Process … | ~~~~~~~~~ | Missing an argument for parameter 'Parallel'. Specify a parameter of type | 'System.Management.Automation.ScriptBlock' and try again.
- Assistant
根据您提供的错误消息,看起来您在使用ForEach-Object -Parallel时缺少了必需的参数。
ForEach-Object -Parallel命令需要一个脚本块作为参数,以指定要在每个对象上执行的操作。在您的情况下,错误消息指出您缺少了一个Parallel参数的值,该值应该是一个脚本块。
重要的是要确保在脚本块中提供要在每个对象上执行的操作。这将是要处理对象的动作或命令。以下是使用ForEach-Object -Parallel的示例:
$Files | ForEach-Object -Parallel -ThrottleLimit $MaxThreads -Process { # 在这里编写要在每个对象上执行的操作 }您需要将上述示例代码中的“# 在这里编写要在每个对象上执行的操作”替换为您实际要执行的操作代码。
此外,如果您还希望限制并行处理的最大线程数,可以使用-ThrottleLimit参数,将其设置为所需的值。
请确保在给出Parallel参数时,它是一个有效的脚本块,并包含您要在每个对象上执行的操作。
- User
OutputFile = "D:\download\WhisperPS\output.txt" $ProcessedFileList = "D:\download\WhisperPS\processed.txt"
Import-Module WhisperPS -DisableNameChecking $Model = Import-WhisperModel D:\myphoto\ggml-large.bin
if (Test-Path ProcessedFileList) { ProcessedFiles = Get-Content ProcessedFileList } else { ProcessedFiles = @() }
$MaxThreads = 5
InputFolder -Filter "*.wav"
MaxThreads -Process { param(Model, ProcessedFileList)
if ($ProcessedFiles -contains $File.Name) { return } # 执行任务代码 $Result = Transcribe-File $Model -Path $File.FullName -language Chinese Add-Content -Path $OutputFile -Value ("File: " + $File.Name) Add-Content -Path $OutputFile -Value ("Text: " + $Result) Add-Content -Path $OutputFile "" $File.Name | Out-File -Append $ProcessedFileList} -ArgumentList OutputFile, $ProcessedFileList
Files.Name ProcessedFileList
- Assistant
根据您提供的示例代码,使用ForEach-Object -Parallel并行处理文件列表,将其转录并输出到文件。以下是代码的解释和修改建议:
$InputFolder = "D:\mihoyo\audio\Ex_Main" $OutputFile = "D:\download\WhisperPS\output.txt" $ProcessedFileList = "D:\download\WhisperPS\processed.txt" Import-Module WhisperPS -DisableNameChecking $Model = Import-WhisperModel "D:\myphoto\ggml-large.bin" if (Test-Path $ProcessedFileList) { $ProcessedFiles = Get-Content $ProcessedFileList } else { $ProcessedFiles = @() } $MaxThreads = 5 $Files = Get-ChildItem -Path $InputFolder -Filter "*.wav" $Files | ForEach-Object -Parallel -ThrottleLimit $MaxThreads -Process { param($File, $Model, $OutputFile, $ProcessedFileList) if ($ProcessedFiles -contains $File.Name) { return } # 执行任务代码 $Result = Transcribe-File $Model -Path $File.FullName -language Chinese Add-Content -Path $OutputFile -Value ("File: " + $File.Name) Add-Content -Path $OutputFile -Value ("Text: " + $Result) Add-Content -Path $OutputFile "" $File.Name | Out-File -Append $ProcessedFileList } -ArgumentList $Model, $OutputFile, $ProcessedFileList $ProcessedFiles = $Files.Name $ProcessedFiles | Out-File -Append $ProcessedFileList这段代码的目的是读取指定文件夹中的.wav文件,使用WhisperPS模块中的Transcribe-File函数将其转录为文本,并将结果输出到指定的输出文件中。同时,它会记录已处理的文件名列表到另一个文件中,以便下次运行时跳过已处理的文件。
在代码中,我添加了引号来确保文件路径和名称是正确的字符串,并使用双引号包含了$Model的值作为Import-WhisperModel的参数。
在ForEach-Object -Parallel循环中,我添加了参数块,用于传递额外的参数给并行处理的脚本块。这些参数包括OutputFile和$ProcessedFileList。
在任务代码的脚本块中,我使用了WhisperPS模块中的Transcribe-File函数来转录音频文件。我还使用Add-Content命令将文件名和转录结果添加到输出文件中,并使用Out-File将已处理的文件名追加到$ProcessedFileList文件中。
最后,我更新了ProcessedFileList文件中。
请确保您已经安装了WhisperPS模块,并根据您的实际需求修改文件路径和其他参数。希望这可以帮助您使用ForEach-Object -Parallel并行处理和转录文件列表。