1.1X Rescale CLI チュートリアル

このセクションでは、Rescale CLIアプリを使用して、ジョブ投入スクリプトファイルの作成、ジョブの投入、ジョブステータスの確認、ファイルのダウンロードを行う手順を説明します。

このチュートリアルは、Rescaleのドキュメントページから入手可能なLS-DYNAシミュレーションの例に基づいています。この例で使用したLS-DYNAシミュレーションファイル(neon.refined.rev01.k)は、 こちら.から入手可能です。

特定のソフトウェア(ここではLS-DYNA)上で動作するジョブを投入するには、 submit.sh ファイルにソフトウェアを指定する必要があります。

#!/bin/bash #RESCALE_NAME="LS-DYNA Neon Example" #RESCALE_ANALYSIS=ls_dyna #RESCALE_CORE_TYPE=Emerald #RESCALE_CORES=2 #RESCALE_WALLTIME=1 #USE_RESCALE_LICENSE ls-dyna -n $RESCALE_CORES_PER_SLOT -i neon.refined.rev01.k -p single

注:上記のスクリプトをコピーする際には、各環境変数の後に空白がないことを確認してください。入力スクリプトのフラグは、Rescale CLI コマンドのセクションに記載されています。また、最後の行のコマンドは、Rescaleプラットフォームで使用するものと同じです。このコマンドは、Rescale Web UIまたはlist-infoコマンドで確認できます(Rescale CLI コマンドのセクションを参照してください)。

Rescale API Application program interface (API) is a set of routines, pr... More Keyの環境変数(こちらを参照)があることを前提に、コマンドを使用してジョブを実行します。

rescale-cli submit -i submit.sh

ターミナル上では、以下のようなログが表示されます。

Executing Command.
Parsing Input Files
No existing files to include
Found Analysis: ls_dyna
Zipping File
Creating temporary encrypted zip at /tmp/rescale-cli-work3842771237402719984/input.zip
Finished writing encrypted file
Uploading Files
Uploading: /tmp/rescale-cli-work3842771237402719984/run.sh
Uploading run.sh:
##############################| 240B / 240B
Uploading: /tmp/rescale-cli-work3842771237402719984/input.zip
Uploading input.zip:
##############################| 368B / 368B
Job: Saving Job
Job CeMod: Saved
Job CeMod: Submitting
Job CeMod: --end-to-end flag not set, polling should be done manually.

アプリは、 ジッパーを閉める という一時ファイルにzip圧縮します。そして、 input.zipという一時ファイルにzip圧縮します。そして、 run.sh & input.zip をRescaleにアップロードし、ジョブの入力ファイルとして含めます。また、入力スクリプトの #RESCALE_EXISTING_FILES 行に記載されているファイルもすべて含まれます。例えば、ディレクトリが以下のような場合です。

neon.refined.rev01.k submit.sh

ジョブを投入すると、アプリは一時的にzipファイルを作成し、 submit.sh スクリプトを解析して run.shを作成します。ディレクトリは以下のようになります。

input.zip neon.refined.rev01.k run.sh submit.sh

  input.zip には neon.refined.rev01.k, run.sh, submit.shというファイルが含まれます。アプリは input.zip ファイルを run.sh スクリプトと一緒に Rescale にアップロードします。その後、アプリはローカルファイルシステムからzipファイルを削除し、ジョブの保存と投入を試みます。ジョブが検証を通過すると、保存され、Rescaleに投入されます。その後、アプリはポーリングサイクルを開始し、ジョブのステータスが完了するのを待ちます。この時、アプリはを出力し、参照に使用することができます。   

実行中のジョブの状態を確認するには、次のコマンドを入力します。 rqRXT を自分のジョブIDに置き換えてください。

rescale-cli ステータス -j CeMod

端末には、次のようにメッセージの状態が表示されます。

rescale-cli status -j CeModAuthenticated as @rescale.comCeMod のジョブのステータスが実行中です

ジョブ実行中にファイルをダウンロードするには、以下のように download-file CLIコマンドを使用します。一度にダウンロードできるのは、XNUMXファイルのみです。

rescale-cli ダウンロードファイル -j CeMod -f 共有/d3plot

ここでは、dXNUMXplotというファイルをダウンロードしています。コマンドはクラスタの作業ディレクトリにあるファイルを探すので、作業ディレクトリからの相対パスを指定する必要があります。ここでは、ファイルdXNUMXplotは共有ディレクトリに存在します。ファイルの相対パスを得るには、図のようにRescaleプラットフォームのlive-tailingウィンドウを確認してください。

ジョブの完了後にファイルをダウンロードするには、 syncCLI コマンド。 ダウンロードできます  完了したジョブのファイルは次のようになります – 

rescale-cli sync -j CeModT

ターミナルに以下のようなログが表示されます。

rescale-cli sync -j CeModAuthenticated as <user>@rescale.comSyncing output files for job CeModJob CeMod: Downloading files to /Users/johndoe/Documents/CLI/LS-Dyna-Example/rescale_job_CeModDownloading /Users/shashank/Documents/CLI/LS-Dyna-Example/rescale_job_CeMod/download_20180703_224544_d3plotDownloading download_20180703_224544_d3plot:Downloading /Users/johndoe/Documents/CLI/LS-Dyna-Example/rescale_job_CeMod/process_output.log.... 

-f または -s フラグを使用すると、特定のファイルのみをダウンロードする出力フィルタリングを行うことができます。-f フラグは “グロブ” 検索を使用し (クライアント側では bash のみ)、一方 -s は “文字列パターン” 検索を使用します (サーバ側で)。は任意の文字列にマッチするワイルドカード、?は任意の一文字にマッチするワイルドカードです。

例:次のコマンドは、 d3 を除き、dXNUMXで始まるすべてのファイルをダウンロードします。 d3hspd3dump01.0000 & d3dump01.0001 :

rescale-cli sync -j CeMod -f d3* --exclude d3hsp,d3dump01.0000,d3dump01.0000

大規模なジョブの場合は、サーバー側になるので -s を推奨します。

注 -s は文字列パターンのみを検索し、与えられた文字列パターンを持つすべてのファイルをダウンロードします。