我有一個使用命令啟動的管道。由於某些管理/伺服器原因,該工具必須從節點啟動。該工具會觸發管道中名為 pipeline.steps 的檔案中的所有步驟。所以我要做的是
$ qsub -I
$ cd /path/to/my/tool/
$ ./launch-pipeline pipeline.steps
問題是,某些步驟需要在不同節點上並行化。文件內容pipeline.steps
如下圖所示:
step1:
write_pbs_script ${NAME}.pbs
qsub ${NAME}.pbs
setp2:
continue...
由於我已經從節點啟動管道,因此使用qsub
win 新建立的pbs
腳本顯然會失敗。如何設法在節點中啟動管道,並從該節點將新作業分派到不同的節點?