在gnu并行中跟踪状态/进度
在GNU并行中，跟踪状态/进度是指通过监控并行任务的执行情况，了解任务的状态和进度。这对于并行计算和任务调度非常重要，可以帮助开发人员更好地管理和优化并行任务的执行。
在GNU并行中，可以使用以下方法来跟踪状态/进度：
- 使用任务状态标志：在并行任务中，可以定义一些状态标志来表示任务的执行状态，例如"正在执行"、"已完成"、"出错"等。通过在任务执行过程中更新这些状态标志，可以实时了解任务的执行情况。
- 使用进度指示器：在并行任务中，可以使用进度指示器来显示任务的进度。进度指示器可以是一个进度条、百分比或其他形式的指示器，通过更新进度指示器的数值，可以直观地了解任务的执行进度。
- 使用日志记录：在并行任务中，可以将任务的执行情况记录到日志文件中。日志文件可以包含任务的开始时间、结束时间、执行状态、错误信息等，通过分析日志文件，可以了解任务的执行情况和出现的问题。
- 使用监控工具：GNU并行提供了一些监控工具，可以帮助跟踪状态/进度。例如，可以使用"parallel --eta"命令来显示任务的估计剩余时间，使用"parallel --progress"命令来显示任务的执行进度。
跟踪状态/进度在并行计算中非常重要，可以帮助开发人员及时发现问题并进行调整和优化。在腾讯云中，可以使用腾讯云函数（SCF）来实现并行计算，并通过腾讯云监控服务来监控任务的状态和进度。
腾讯云函数（SCF）是腾讯云提供的无服务器计算服务，可以帮助开发人员快速构建和部署事件驱动型的应用程序。腾讯云监控服务可以实时监控云上资源的状态和性能指标，并提供报警和自动化运维等功能。
更多关于腾讯云函数（SCF）和腾讯云监控服务的信息，请参考以下链接：
- 腾讯云函数（SCF）产品介绍：https://cloud.tencent.com/product/scf
- 腾讯云监控服务产品介绍：https://cloud.tencent.com/product/monitoring
相关·内容
2回答
在gnu并行中跟踪状态/进度
bash、gnu-parallel
我已经在我们的一个主要脚本中实现了并行，以执行服务器之间的数据迁移。但是，根据命令运行的时间长度，输出可能会完全乱序，并且长时间运行的rsync命令可能会在混洗中丢失。但是，我不想为了得到以下进程的输出而等待长时间运行的进程结束。简而言之，我的问题是跟踪正在处理且仍在运行的参数。我想做的是使用(parallel args command {#} {} ::: $userlist) &将并行发送到后台，然后跟踪每个正在运行的函数的进度。，没有问题
浏览 6提问于2016-08-16得票数 5
1回答
并行不显示中间输出到终端？
shell-script、parallelism、gnu-parallel
parallel -k python a1.py {} ::: {0..50..2}运行并行命令不会显示python-脚本的print语句。
浏览 0提问于2018-12-24得票数 2
1回答
正在上传文件并使用线程在cli中显示其进度条
python-3.x、multithreading、file-upload、progress-bar、command-line-interface
我编写了一个简单的python3脚本，用于上传在CLI中运行的文件。我使用requests.post(somewebservice.com)将文件上传到服务器，但我希望在脚本中添加一个进度条来跟踪上传进度。我如何在我的进度条中找到使用它的上传状态(百分比)？如果我知道如何获得百分比或类似的东西，我就可以自己在CLI中做线程并行上传和显示进度条的事情。
浏览 23提问于2019-09-02得票数 0
1回答
具有资源库的bash -并行循环
bash、parallel-processing、locking、pool
另一个值得关注的问题是如何确保在每次迭代时我都使用正确的x和y。也就是说，当我们进入下一次迭代时，x和y会发生变化，而且在前一次迭代中不能将其反映在command1 $x $y GPU...中。
浏览 2提问于2022-08-02得票数 1
回答已采纳
1回答
我们在一个目录中有大量的文件，需要由一个名为process的程序来处理，该程序占用infile和outfile两大功能。
我们希望以infile命名，并添加一个后缀。(这是在bash命令行中)
浏览 3提问于2021-09-05得票数 0
2回答
.NET如何在并行工作负载上报告(集体)进度，其中每个对象/任务都报告自己的单独进度？
c#、.net、multithreading、task-parallel-library、tap
我正在处理并行工作负载，其中每个对象或任务都报告自己的单独进度，并且我希望报告整个任务的集体进度。
例如，假设我有10个工作对象，它们都报告单个进度。它们包含必须完成的0-100个“任务”。我希望有一种解决方案或模式是合适的，无论是异步/等待还是使用任务异步模式--我都在使用--我希望在.NET框架中已经有了处理这一问题的方法，而我还没有发现这种方法。如果在每个进度通知传入时，简单地将所有WorkObjects的分子和分母连接起来(假设它们在
浏览 0提问于2018-10-02得票数 1
回答已采纳
9回答
joblib.Parallel执行过程的跟踪
python、multithreading、parallel-processing、multiprocessing、joblib
是否有一种简单的方法来跟踪执行的总体进度？
我有一个由数千个作业组成的长期运行的执行过程，我想在数据库中跟踪和记录这些作业。但是，为了做到这一点，每当并行完成任务时，我都需要它执行回调，报告剩余的作业数量。我以前在Python multiprocessing.Pool中完成了类似的任务，启动了一个线程，该线程记录了Pool的作业列表中挂起的作业的数量。看看代码，并行继承池，所以我认为我可以完成同样的技巧，但它似乎没有使用这些列表，我还没有找到其他方式“
浏览 2提问于2014-07-27得票数 56
回答已采纳
2回答
GNU并行进度条的Zenity Cancel按钮
bash、io-redirection、gnu-parallel、process-substitution、zenity
如GNU平行手册所示，您可以使用带有并行的zenity进度条： 2> >(zenity--progress --auto-kill) | wc
但是，在该示例中，cancel按钮不工作。我已经读过关于类似问题与此按钮一起使用时，与更常见的命令(即不并行)以及关于取消按钮如何工作的更多见解，但这并没有真正帮助我。并行似乎是完
浏览 0提问于2020-07-17得票数 3
回答已采纳
1回答
使用DownloadToFileParallelAsync跟踪更改
c#、azure、blob、azcopy
这个库工作得很好，而且速度相当快，但是没有办法从它那里获得任何进度信息。1.)使用OperationContext抓取发送/接收，但它们似乎不一致。2.)使用带有多个线程的DownloadRangeToStreamAsync下载附加到进度处理程序(没有那么快)
3.)使用FileWatcher尝试在下载期间跟踪文件大小的变化，但这不起作用，因为似乎DownloadToFileParallelAsync在磁盘上保留了整个文件大小，所以大小不会改变。问一句，有没有其他方法来跟踪
浏览 6提问于2021-11-05得票数 0
1回答
使用GNU并行对单个操作进行计时
bash、time、parallel-processing、gnu
我想保持跟踪(1)时间为每个单独的工作，和(2)总时间为一个完整的脚本。我意识到我可以在bash脚本中做到这一点，只需将单个时间写到一个文件中，以便在事后查看，但gnu并行报告完成一个过程的平均时间，所以它必须已经跟踪了，对吧？我是第一次接触gnu并行，并且刚刚开始欣赏它的强大功能！
浏览 0提问于2016-03-16得票数 3
1回答
在python2.7中实现非阻塞调用
python-2.7、asynchronous、nonblocking
我想实现一个从主线程到shell脚本的非阻塞调用(它基本上调用一个安装类型，并将安装进度写入某个状态文件)，然后在主线程中并行执行以下两件事:1.继续检查脚本的退出状态2.同时通过状态文件(调用脚本)检查安装进度如何在python2.7中实现这类代码。
浏览 1提问于2014-05-01得票数 1
3回答
监控xargs中的进度
bash、shell、unix、xargs
有没有办法在xargs中跟踪或监控进度我还意识到，通过xargs并行运行的任务不一定会以正确的顺序完成，这增加了监视进度的复杂性。即使一个解决方案可以让我大致了解进度，这也是一个很好的开始。
浏览 0提问于2013-04-03得票数 3
1回答
在bash中使用多个核心
linux、bash、multithreading
一个文件在大约5小时内被处理。我在中心有一个服务器，它有128个核心。 (( count ++ )) wait fi我正在解释:文件是原始文件夹中的文件列表我也试过在计算前移动点，但它仍然使用一个核心。我对服务器没有限制。
浏览 0提问于2020-03-23得票数 3
回答已采纳
1回答
使tmux块直到程序完成
tmux
我对tmux的远程控制功能印象深刻：这将在会话中创建一个名为p12346的新窗口，并且不会在屏幕上打印任何内容也就是说，我希望这样做，但要用10秒来执行：背景
如果这是可行的，那么它可能成为GNU并行的一个特性:当前正在运行的作业可以通过tmux作为各自的窗口访问，因此您可以实时跟踪每
浏览 0提问于2014-06-16得票数 9
2回答
如何检查由GNU并行执行的单个进程的退出代码？
bash、shell、exit-code、gnu-parallel
我在linux脚本中有一个数组。数组包含bash脚本中的命令列表。例如：现在，我在数组中使用GNU并行执行这些命令，如下所示当各个进程完成时，我想检查它们的状态</
浏览 6提问于2016-06-30得票数 2
回答已采纳
3回答
我有一个ASyncTask试图
我想更新映像(即同步到ui线程)，在检查磁盘后(这是快速的，但在ListViewgetView中仍然慢做)和在线检查之后。如果我正确阅读帮助，我可以调用onProgressUpdate (在UI线程中执行)通过使用publishProgress(Progress...) .不过，我能确定下订单吗？我不在乎时间(如果我要等一会儿)，但我想确保“
浏览 2提问于2013-07-21得票数 0
回答已采纳
2回答
并行运行behat测试(在两个浏览器窗口中)
symfony、selenium-webdriver、behat、mink
behat.paths.base%/src我修改了behay.yml (如下面所示)，以便在一个浏览器窗口中运行一些测试，在另一个窗口中运行一些测试
浏览 2提问于2014-10-15得票数 2
2回答
并行执行Shell循环，但只有N个工作人员
shell、parallel-computing
我们有超过100 git的回复，有时我想grep的全部。for repo in *; do (cd $repo; git checkout master; git pull); done如何加快速度？我需要一种方法来减轻N个工人的负担。
有人能解决这个问题吗？
浏览 0提问于2015-07-08得票数 3
3回答
在程序退出之前，GNU并行输出可以输出吗？
gnu-parallel
;sleep 3;' | parallelGNU并行确保命令的输出与按顺序运行命令时得到的输出相同。我的用例是看到我正在运行的命令的实时进度输出。问题不在于已经完成了多少任务，而是关于我希望看到的每个命令的进度输出。我会使用bash循环(bash循环，for i in $x; do cmd & done;)，但我希望能够用一个Ctrl+C来停止所有任务，并行操作允许我这样做。
是否可以并行地这
浏览 0提问于2018-05-13得票数 20
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
