Artifactsをダウンロードして使用する - Weights & Biases Documentation

W&B Server にすでに保存されている artifact をダウンロードして使用するか、必要に応じて重複排除のためにアーティファクトオブジェクトを作成して渡します。

Models Viewer seat のチームメンバーは Artifacts をダウンロードできません。

W&B に保存されているアーティファクトをダウンロードして使用する

アーティファクトが run の依存関係である場合は、追跡対象の run 入力としてダウンロードします。リネージのトラッキングが不要なワークフローでは、直接取得します。

W&B が処理できるスキームを持つ参照は、アーティファクト内のファイルと同様にダウンロードされます。詳細は、外部ファイルをトラッキングするを参照してください。

アーティファクト内のすべてのファイルをダウンロードすることも、個別のファイルをダウンロードすることもできます。

すべてのファイルをダウンロードするには、Artifact.download() を使用します。
特定のエントリを取得するには、Artifact.get_entry() を使用し、その後 .download() を呼び出してダウンロードします。

run 入力をトラッキングする
直接取得
W&B CLI

W&B Run の一部としてアーティファクトをダウンロードするには、wandb.Run.use_artifact() を使用します。W&B はそのアーティファクトを run への入力として記録します。

W&B Python SDK をインポートし、W&B Run を初期化します。
wandb.Run.use_artifact() を使用してアーティファクトのバージョンを取得します。
返された Artifact オブジェクトから、すべてのファイルまたは特定のファイルをダウンロードします。

import wandb    

with wandb.init(project="<example>", job_type="<job-type>") as run:
    # 使用するアーティファクトを指定します。形式は "name:alias" です
    artifact = run.use_artifact("bike-dataset:latest")

    # アーティファクト全体をダウンロードします
    datadir = artifact.download()

    # 特定のファイルをダウンロードします
    entry = artifact.get_entry("bike.png")
    file_path = entry.download() # bike.png のみをダウンロードします

run を作成したり、run 入力との関係を記録したりせずにアーティファクトをダウンロードするには、Public API を使用します。

W&B Python SDK をインポートし、wandb.Api() でクライアントオブジェクトを作成します。
wandb.Api.artifact() を使用してアーティファクトのバージョンを取得します。
返された Artifact オブジェクトから、すべてのファイルまたは特定のファイルをダウンロードします。

アーティファクトのパスは entity/project/artifact:alias 形式で指定します。

import wandb

api = wandb.Api()
artifact = api.artifact("entity/project/artifact:alias")
artifact.download()

W&B サーバーからアーティファクトをダウンロードするには、wandb artifact get コマンドを使用します。

$ wandb artifact get project/artifact:alias --root mnist/

artifact を部分的にダウンロードする

プレフィックスを指定して、artifact の一部だけを必要に応じてダウンロードできます。単一のファイルまたはサブフォルダーの内容をダウンロードするには、path_prefix= (wandb.Artifact.download(path_prefix=)) パラメーターを使用します。

with wandb.init(project="<example>", job_type="<job-type>") as run:
    # 使用する artifact を指定します。形式は "name:alias"
    artifact = run.use_artifact("bike-dataset:latest")

    # 特定のファイルまたはサブフォルダーをダウンロードする
    artifact.download(path_prefix="bike.png") # bike.png のみをダウンロードする

また、特定のディレクトリからファイルをダウンロードすることもできます。その場合は、path_prefix= パラメーターにディレクトリを指定します。前のコードスニペットに続けて、次のように記述します。

# images/bikes ディレクトリ内のファイルをダウンロードする
artifact.download(path_prefix="images/bikes/") 

別のプロジェクトのartifactを使用する

artifactを参照するには、そのartifactの名をプロジェクト名とあわせて指定します。artifactの名にentity名も指定すると、entityをまたいでartifactを参照することもできます。以下のコード例は、現在のW&B runへの入力として別のプロジェクトのartifactをクエリする方法を示しています。

with wandb.init(project="<example>", job_type="<job-type>") as run:
    # 別のプロジェクトのartifactをW&BにクエリしてこのrunへのInputとしてマークする
    #
    artifact = run.use_artifact("my-project/artifact:alias")

    # 別のentityのartifactを使用してこのrunへのInputとしてマークする
    #
    artifact = run.use_artifact("my-entity/my-project/artifact:alias")

artifact を作成して同時に使用する

artifact を作成すると同時に使用できます。artifact オブジェクトを作成し、use_artifact に渡します。これにより、まだ存在していない場合は W&B に artifact が作成されます。wandb.Run.use_artifact() API は冪等であるため、何度呼び出しても問題ありません。

import wandb

with wandb.init(project="<example>", job_type="<job-type>") as run:
    artifact = wandb.Artifact("reference model")
    artifact.add_file("model.h5")
    run.use_artifact(artifact)

artifact の作成について詳しくは、artifact を作成するを参照してください。

​W&B に保存されているアーティファクトをダウンロードして使用する

​artifact を部分的にダウンロードする

​別のプロジェクトのartifactを使用する

​artifact を作成して同時に使用する

W&B に保存されているアーティファクトをダウンロードして使用する

artifact を部分的にダウンロードする

別のプロジェクトのartifactを使用する

artifact を作成して同時に使用する