17と25のリビジョン間の差分 (その間の編集: 8回)
|
サイズ: 1049
コメント:
|
← 2025-07-09 04:00:56時点のリビジョン25 ⇥
サイズ: 959
コメント:
|
| 削除された箇所はこのように表示されます。 | 追加された箇所はこのように表示されます。 |
| 行 1: | 行 1: |
| = 深層学習コンテナを利用する方法 = | = Singularityイメージファイルの入手 = |
| 行 3: | 行 3: |
| singularity pullを利用することで，sifイメージのダウンロードやDockerイメージのsifファイルへの変換が可能です． ここでは深層学習用コンテナを利用する例として，Dockerイメージのsifファイルへの変換例を示します．キャッシュや一時ファイルを/work/[ユーザID]領域以下に生成するように環境変数を設定しています．これらがない場合，/home容量のオーバーやディレクトリのアクセス権限によるエラーとなります． |
Singularityイメージファイル（sif）を/work以下に置き，HPCクラスタのバッチジョブやインタラクティブジョブで指定することができます． 各ユーザの環境にてsingularity pullを利用することで，公開されているDockerイメージを変換してsifを入手できます．公開されているDockerイメージは [[https://hub.docker.com/|Docker Hub]] や [[https://catalog.ngc.nvidia.com/containers|NVIDIA NGC]] などで検索できます． 例：ROCmのTensorflow Dockerイメージをsifに変換 {{{ $ nohup singularity pull docker://rocm/tensorflow & }}} |
| 行 7: | 行 13: |
| {{{ $ export SINGULARITY_CACHEDIR=/work/yi041/test $ export SINGULARITY_TMPDIR=/work/yi041/test $ singularity pull docker://rocm/pytorch:latest |
{{{ $ nohup singularity pull docker://rocm/pytorch:latest & |
| 行 13: | 行 17: |
| 例：NGCのPytorch Dockerイメージをsifに変換 {{{ $ export SINGULARITY_CACHEDIR=/work/yi041/test $ export SINGULARITY_TMPDIR=/work/yi041/test $ singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 |
例：NVIDIA NGCのPytorch Dockerイメージをsifに変換 {{{ $ nohup singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 & |
Singularityイメージファイルの入手
Singularityイメージファイル（sif）を/work以下に置き，HPCクラスタのバッチジョブやインタラクティブジョブで指定することができます．
各ユーザの環境にてsingularity pullを利用することで，公開されているDockerイメージを変換してsifを入手できます．公開されているDockerイメージは Docker Hub や NVIDIA NGC などで検索できます．
例：ROCmのTensorflow Dockerイメージをsifに変換
$ nohup singularity pull docker://rocm/tensorflow &
例：ROCmのPyTorch Dockerイメージをsifに変換
$ nohup singularity pull docker://rocm/pytorch:latest &
例：NVIDIA NGCのPytorch Dockerイメージをsifに変換
$ nohup singularity pull docker://nvcr.io/nvidia/pytorch:22.12-py3 &