差分
このページの2つのバージョン間の差分を表示します。
|
gridjobsubmission [2015/10/08 11:40] kyotoatlas |
gridjobsubmission [2019/02/15 09:07] |
||
|---|---|---|---|
| 行 1: | 行 1: | ||
| - | < | ||
| - | * 準備 | ||
| - | - asetup | ||
| - | - localSetupPandaClient | ||
| - | - voms-proxy-init | ||
| - | AMI tag を使うなら | ||
| - | - localSetupEmi, | ||
| - | * 最小限のコマンドは | ||
| - | |||
| - | % pathena \ | ||
| - | --trf " | ||
| - | --inDS ${inputDS} --outDS ${outputDS} -dbRelease=LATEST | ||
| - | |||
| - | となります。 | ||
| - | pathena で他に便利な option としては | ||
| - | --nFilesPerJob=$n : 使う CPU の数を調整できる。 | ||
| - | n=1 にすると最大の数になるので、その job の終了は早くなるかも知れないが、 | ||
| - | | ||
| - | --individualOutDS : log と output の AOD が別々の dataset に保存される。 | ||
| - | など。 | ||
| - | あとはちょっと情報が古いですが、 | ||
| - | https:// | ||
| - | を見ましょう。 | ||
| - | |||
| - | 注意点ですが、--trf の中身は基本的にいつも local で | ||
| - | Reco_tf.py をやっているときと同じもの。 | ||
| - | この transform command 全体を "" | ||
| - | 例えば AMITag は別のクオート記号、この場合は '' | ||
| - | それから、--trf の中身には改行は入ってはいけません。 | ||
| - | |||
| - | で、job を投げる script の中で、inputDS, | ||
| - | container でも大丈夫です。 | ||
| - | 例えば、script で | ||
| - | |||
| - | while read dataset;do | ||
| - | inputDS=$dataset | ||
| - | outputAODtmp=`echo $inputDS | sed -e ' | ||
| - | outputDS=user.ynoguchi.${outputAODtmp%/ | ||
| - | |||
| - | pathnea ... | ||
| - | |||
| - | done < datasetlist.txt | ||
| - | |||
| - | などとしておいて、datasetlist に必要な input を並べて、 | ||
| - | それを食わせれば便利。 | ||
| - | </ | ||
