我跑耳语在配备 Intel Core i7-CPU 的 Intel-Mac 上（Whisper 目前似乎不支持 AMD Radeon GPU，因此我使用 CPU）。当我在这台电脑上运行 Whisper 时，当它大部分时间处于空闲状态时，Whisper 占用了大约 500-550% 的 CPU（1200% 是最大值 - 6+6 个内核），因此大约使用了我 CPU 容量的一半。如果我启动另一个 Whisper，它也会占用 500-550%，这意味着我的 CPU 或多或少被充分利用了。 换句话说，处理两个文件的速度大约是一半。我更愿意全速处理一个文件，也就是说，第...
我有以下脚本。当它不并行时，它将毫无问题地运行。但是当我添加-Parallel它时，它会抛出各种错误。主要错误似乎与有关Cannot index into a null array。我使用的是 PS 7.3.3。有什么建议吗？ 脚本的非并行部分（脚本的开始） $fileList=(get-childitem -filter *.tif -recurse | Where-Object {$_.name -match '^[0-9]{3} (B|F) [A-Z]{2} ..K..b [0-9]{2}.*'}).Na...
使用parellel-ssh -i -h hosts.ini "uptime"我可以从 中获取所有主机的正常运行时间hosts.ini。但它们按批次和第一个答案的顺序显示。我希望结果按 hosts.ini 中的顺序排列。 我可以使用-p 1这个来获得它，但这样就不再有并行性，而且进程非常慢。有没有办法使用 paraellel-ssh 选项来同时获得两者？当然，我可以按字母顺序或其他顺序排列我的 hosts.ini 和结果。但就我而言，hosts.ini 中的顺序取决于另一个来源。 ...
我公司收到一个需要重构的非常老旧的程序。代码是一堆 SQL 指令，由一个以 shell 命令形式编写的程序编排，目的是处理大型空间数据集。 在 shell 命令中间，有这个实现（如下），理论上并行启动几个 psql 进程。我以前从未见过这种情况。 代码获取这个参数numProc，它是将启动的进程的数量。 文档表明 numProc 是机器中可用的核心数。 这个 for 循环遍历 postgresql 数据库中关系的片段，然后将所有内容插入到新表中。 var_proc 用于切分关系，所以它不是这里的重点。 for ((i=0; i < ${numP...
我是一名从事高性能计算项目（计算编程方面）的科学家，我不知道回答我的问题所需的网络或网络硬件。我的一位在 HPC 工作的教授朋友给了我以下配置 - 购买两个 AMD Ryzen 16 核处理器并通过无限带宽互连将它们连接起来。我们计划购买 2 台承载这些 AMD Ryzen 16 核处理器的台式机。我们希望这能为我们提供与 32 核处理器相同的速度。如果有人问为什么不买一个 32 核处理器，答案是当前的市场情况已经导致 32 核或 64 核处理器不可用（全球现芯片短缺） 我的问题是，上述架构是否允许将来添加 64 核处理器，或者此集群中的所有节点是否都必须具...
安装 Ubuntu 20.04 后，一切都运行良好。但是，在安装和使用一些应用程序（Matlab 和 Matlab/Dynare）后，Ubuntu 似乎限制了我的 CPU 使用率。我使用 openMP 和一个曾经实现 100% CPU 使用率的代码，但现在速度慢了很多，top 显示以下内容： 从顶部输出 我的处理器总共有 32 个内核和 64 个线程。此代码使用了所有线程，之前 CPU 使用率达到 100%。但是，现在总 CPU 使用率仅为 18.9%。还请注意，主作业几乎使用了 6400% 的 CPU=64*100。与以前相比，现在的代码非常慢。以下是 h...
因此，我对多核 CPU 有点困惑 - 我最初的印象和我以前听到的印象是，有些程序无法跨多个核心运行 - 例如，另一个循环的输入取决于先前的输出 另一方面，我看到其他人声称似乎任何程序都可以在多个核心上运行（这是否必须由程序员指定（例如，通过分配线程），或者 CPU 是否能够在核心之间分配密集型程序？） 但与此同时，我也听别人说过，一个进程只能在一个核心上运行 我希望有人能澄清这一点，或者为我应该去哪里寻找提供一些建议。我觉得我读到的内容——如果不是错误的——可能至少已经过时了，或者可能因处理器型号等而异 不过，提前感谢你的帮助 ...
如果我运行一个脚本使用并行处理递归地处理路径如果要对整个树执行命令，我保证我使用的命令将在单个目录中的所有项目上执行在进入下一个步骤之前？ Get-ChildItem $Path -Recurse -Filter *.some_file_extension | ForEach-Object -Parallel { my_command $_ --with_options } ...
在 中运行时-Parallel，以下脚本不会传递$basePath在并行块开始之前声明的变量。相反，它是一个空值。当脚本不在 中运行时，这不是问题-Parallel——它将传递变量值并按预期运行。仅供参考，我正在运行 PS 7.x。 $basePath=((get-location) -replace "\\", "\\") get-childitem *.tif -recurse | foreach-object -Parallel { $a=($_ -split "\.tif")[0] $path=(((split-path $_) ...
当我按住 Shift 键删除一个大文件夹时，我看到以下 CPU 使用率： 并非所有盒子都得到利用。这样效率低下吗？ 在我看来，通过分而治之，这很容易实现并行化。我尝试手动选择并删除一半的内容，然后再删除另一半，结果让更多的盒子满了。 我听说回收表现出不同的行为，尽管我自己没有测试过。 ...
我正在使用 GNU parallel，并且想了解 - 如何获取传递给每个并行命令的单独字符串？ 举个例子，GNU Parallel 文档显示如何将文件从当前目录移动到另一个目录： ls | parallel mv {} destdir 那么有没有办法可以单独获取/打印传递给并行的每个文件？ 并行处理案例 我需要并行处理检查多个站点并记录 http 返回代码（2xx、4xx、5xx） 源 URL 最终目标 URL curl 退出代码 以下是实现该功能的代码： unset return_code_array unset destinatio...
在 shell 脚本中并行运行命令通常非常有用，但我找不到这样做的方法。这可能吗？如果可以，我该如何实现？我主要对 感兴趣fish。 当我运行需要很长时间才能完成但可以或需要同时运行的命令以减少完成所有操作所需的时间时，它很有用。 ...
我正在几台不同的计算机上测量用 C 语言编写的复杂信号处理算法的运行时间，这些计算机都运行 Linux。代码通过我自己的一些方法（使用 pthreads 库）和 FFTW 包提供的并行处理部分并行化。四台计算机中的三台显示，随着并行因子 P 从 1 增加到机器上的物理核心数，执行时间预计会减少。问题是其中一台机器表现出相反的行为：从 P=1 到 P=2 会导致执行时间增加。 四台机器上的代码相同，但硬件和操作系统不同。超线程已启用。所有机器都具有大容量 RAM。 toren：Ubuntu 18.04.5、4.15.0-122-generic、4 个物理核心、...
是否有一个命令行工具支持多个同时连接和多种网络协议（ftp，http等）？ 以下是一个实际的例子： 我在 ssh 服务器上有一个很大的备份文件，我想将其传输到我当前的机器上。文件下载时间太长，所以我想使用多个同时的网络连接来加快速度。假设 ssh 服务器负载不重。 下载多个文件/URL使用同时连接不相关对这个问题 我不想编写任何代码来解决这个问题。 ...
对于每款处理器，geekbench.com 上的基准测试都会显示单核和多核得分。例如，这款 64 核处理器单核得分为 1220，多核得分为 23688。Geekbench 多核基准测试是否通过（案例 1）同时在多个核心上运行多个单核基准测试来衡量（令人尴尬的平行)？或者，（情况 2）是运行一组基准测试，其中可能涉及不能很好并行化的进程。 对于上面的 64 核 CPU 示例，多核性能低于我们可能从单核行为的线性扩展中预期的 64x1220 = 78080 分数。在案例 2 中，这种差异可能是由于基准测试缺乏完美的并行性而导致的。然而，在案例 1 中，差异一定...