18と24のリビジョン間の差分 (その間の編集: 6回)
|
サイズ: 1045
コメント:
|
サイズ: 1153
コメント:
|
| 削除された箇所はこのように表示されます。 | 追加された箇所はこのように表示されます。 |
| 行 1: | 行 1: |
| = 深層学習コンテナを利用する方法 = | = Singularityイメージファイルの入手 = |
| 行 3: | 行 3: |
| singularity pullを利用することで，sifイメージのダウンロードやDockerイメージのsifファイルへの変換が可能です． ここでは深層学習用コンテナを利用する例として，Dockerイメージのsifファイルへの変換例を示します．キャッシュや一時ファイルを/work/[ユーザID]領域以下に生成するように環境変数を設定しています．これらがない場合，/home容量のオーバーやディレクトリのアクセス権限によるエラーとなります． |
Singularityイメージファイル（sif）をホームディレクトリ(~)以下に置き，HPCクラスタのバッチジョブやインタラクティブジョブで指定することができます． |
| 行 6: | 行 5: |
| 各ユーザの環境にてsingularity pullを利用することで，公開されているDockerイメージを変換してsifを入手できます．公開されているDockerイメージは [[https://hub.docker.com/|Docker Hub]] や [[https://catalog.ngc.nvidia.com/containers|NVIDIA NGC]] などで検索できます． 例：NWChem（量子化学計算ソフトウェア）のDockerイメージをsifに変換 {{{ $ singularity pull docker://openchemistry/nwchem }}} 例：NVIDIA NGCのPytorch Dockerイメージをsifに変換 {{{ $ nohup singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 & }}} 例：ROCmのTensorflow Dockerイメージをsifに変換 {{{ $ nohup singularity pull docker://rocm/tensorflow & }}} {{{#!wiki comment |
|
| 行 7: | 行 24: |
| {{{ $ export SINGULARITY_CACHEDIR=/work/yi041 $ export SINGULARITY_TMPDIR=/work/yi041 |
|
| 行 12: | 行 26: |
例：NGCのPytorch Dockerイメージをsifに変換 {{{ $ export SINGULARITY_CACHEDIR=/work/yi041 $ export SINGULARITY_TMPDIR=/work/yi041 $ nohup singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 & }}} |
Singularityイメージファイルの入手
Singularityイメージファイル（sif）をホームディレクトリ(~)以下に置き，HPCクラスタのバッチジョブやインタラクティブジョブで指定することができます．
各ユーザの環境にてsingularity pullを利用することで，公開されているDockerイメージを変換してsifを入手できます．公開されているDockerイメージは Docker Hub や NVIDIA NGC などで検索できます．
例：NWChem（量子化学計算ソフトウェア）のDockerイメージをsifに変換
$ singularity pull docker://openchemistry/nwchem
例：NVIDIA NGCのPytorch Dockerイメージをsifに変換
$ nohup singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 &
例：ROCmのTensorflow Dockerイメージをsifに変換
$ nohup singularity pull docker://rocm/tensorflow &