Manage artifact storage and memory allocation
W&B Artifacts のストレージ、メモリアロケーションを管理します。
less than a minute
W&B は artifact ファイルを、デフォルトで米国にあるプライベートな Google Cloud Storage バケットに保存します。すべてのファイルは、保存時および転送時に暗号化されます。
機密性の高いファイルについては、Private Hosting をセットアップするか、reference artifacts を使用することをお勧めします。
トレーニング中、W&B はログ、アーティファクト、および設定ファイルを次のローカルディレクトリーにローカルに保存します。
ファイル | デフォルトの場所 | デフォルトの場所を変更するには、以下を設定します: |
---|---|---|
ログ | ./wandb |
wandb.init の dir 、または WANDB_DIR 環境変数を設定 |
artifacts | ~/.cache/wandb |
WANDB_CACHE_DIR 環境変数 |
configs | ~/.config/wandb |
WANDB_CONFIG_DIR 環境変数 |
アップロード用に artifacts をステージング | ~/.cache/wandb-data/ |
WANDB_DATA_DIR 環境変数 |
ダウンロードされた artifacts | ./artifacts |
WANDB_ARTIFACT_DIR 環境変数 |
環境変数を使用して W&B を構成するための完全なガイドについては、環境変数のリファレンスを参照してください。
wandb
が初期化されるマシンによっては、これらのデフォルトフォルダーがファイルシステムの書き込み可能な場所に配置されていない場合があります。これにより、エラーが発生する可能性があります。ローカル artifact キャッシュのクリーンアップ
W&B は artifact ファイルをキャッシュして、ファイルを共有する バージョン 間でのダウンロードを高速化します。時間の経過とともに、このキャッシュディレクトリーが大きくなる可能性があります。wandb artifact cache cleanup
コマンドを実行して、キャッシュを削除し、最近使用されていないファイルを削除します。
次のコードスニペットは、キャッシュのサイズを 1GB に制限する方法を示しています。コードスニペットをコピーして ターミナル に貼り付けます。
$ wandb artifact cache cleanup 1GB
[i18n] feedback_title
[i18n] feedback_question
Glad to hear it! Please tell us how we can improve.
Sorry to hear that. Please tell us how we can improve.