본문으로 건너뛰기

Artifacts FAQs

다음 질문들은 W&B Artifacts와 W&B Artifacts 워크플로우에 대해 자주 묻는 질문들입니다.

Artifacts에 대한 질문들​

누가 내 아티팩트에 엑세스할 수 있나요?​

Artifacts는 상위 프로젝트의 엑세스 권한을 상속받습니다:

  • 프로젝트가 비공개인 경우, 프로젝트 팀의 구성원만 해당 아티팩트에 엑세스할 수 있습니다.
  • 공개 프로젝트의 경우, 모든 사용자가 아티팩트를 읽을 수 있지만 프로젝트 팀의 구성원만 생성하거나 수정할 수 있습니다.
  • 오픈 프로젝트의 경우, 모든 사용자가 아티팩트를 읽고 쓸 수 있습니다.

Artifacts 워크플로우에 대한 질문들​

이 섹션에서는 아티팩트를 관리하고 편집하기 위한 워크플로우를 설명합니다. 이러한 워크플로우 중 많은 부분이 W&B API를 사용하는데, 이는 W&B와 저장된 데이터에 엑세스할 수 있는 클라이언트 라이브러리의 구성요소입니다.

기존 run에 아티팩트를 어떻게 로그하나요?​

가끔, 이전에 로그된 run의 출력으로 아티팩트를 표시하고 싶을 수 있습니다. 그 시나리오에서는 다음과 같이 이전 run을 재초기화하고 새로운 아티팩트를 로그할 수 있습니다:

with wandb.init(id="existing_run_id", resume="allow") as run:
    artifact = wandb.Artifact("artifact_name", "artifact_type")
    artifact.add_file("my_data/file.txt")
    run.log_artifact(artifact)

아티팩트에 보존 또는 만료 정책을 어떻게 설정하나요?​

PII와 같은 개인 정보를 포함한 데이터셋 아티팩트에 대한 데이터 개인 정보 보호 규정을 준수하거나, 저장 공간을 관리하기 위해 아티팩트 버전의 삭제를 예약하려는 경우 TTL(생존 시간) 정책을 설정할 수 있습니다. 이 가이드에서 자세히 알아보세요.

run에서 로그되거나 사용된 아티팩트를 어떻게 찾나요? 아티팩트를 생성하거나 사용한 run을 어떻게 찾나요?​

W&B는 주어진 run이 로그한 아티팩트뿐만 아니라 주어진 run이 사용한 아티팩트도 자동으로 추적하며, 이 정보를 사용하여 아티팩트 그래프를 구성합니다 -- run과 아티팩트가 노드인 이분, 방향성, 비순환 그래프, 이것처럼 보입니다("Explode"를 클릭하면 전체 그래프를 볼 수 있습니다).

run 또는 아티팩트에서 시작하여 Public API를 사용하여 이 그래프를 프로그래밍 방식으로 탐색할 수 있습니다.

api = wandb.Api()

artifact = api.artifact("project/artifact:alias")

# 아티팩트에서 그래프를 위로 탐색:
producer_run = artifact.logged_by()
# 아티팩트에서 그래프를 아래로 탐색:
consumer_runs = artifact.used_by()

# run에서 그래프를 아래로 탐색:
next_artifacts = consumer_runs[0].logged_artifacts()
# run에서 그래프를 위로 탐색:
previous_artifacts = producer_run.used_artifacts()

스윕에서 run의 모델을 로그하는 가장 좋은 방법은 무엇인가요?​

스윕에서 모델을 로그하는 한 가지 효과적인 패턴은 스윕의 모델 아티팩트를 가지고 있으며, 버전은 스윕에서 다른 run에 해당합니다. 더 구체적으로는 다음과 같이 하면 됩니다:

wandb.Artifact(name="sweep_name", type="model")

스윕에서 최고 성능 run의 아티팩트를 어떻게 찾나요?​

다음 코드를 사용하여 스윕에서 가장 성능이 좋은 run과 연관된 아티팩트를 검색할 수 있습니다:

api = wandb.Api()
sweep = api.sweep("entity/project/sweep_id")
runs = sorted(sweep.runs, key=lambda run: run.summary.get("val_acc", 0), reverse=True)
best_run = runs[0]
for artifact in best_run.logged_artifacts():
    artifact_path = artifact.download()
    print(artifact_path)

코드를 어떻게 저장하나요?‌​

wandb.init에서 save_code=True를 사용하여 run을 시작하는 주 스크립트나 노트북을 저장합니다. 모든 코드를 run에 저장하기 위해, 아티팩트로 코드를 버전 관리하십시오. 다음은 예시입니다:

code_artifact = wandb.Artifact(type="code")
code_artifact.add_file("./train.py")
wandb.log_artifact(code_artifact)

다양한 아키텍처와 run에서 아티팩트를 사용하는 방법은?​

모델을 버전 관리하는 방법에 대해 생각할 수 있는 여러 가지 방법이 있습니다. 아티팩트는 모델 버전 관리를 적합하게 구현할 수 있는 툴을 제공합니다. 여러 번의 run 동안 다양한 모델 아키텍처를 탐색하는 프로젝트의 일반적인 패턴 중 하나는 아키텍처별로 아티팩트를 분리하는 것입니다. 예를 들어, 다음과 같이 할 수 있습니다:

  1. 다른 모델 아키텍처마다 새로운 아티팩트를 생성합니다. run의 config를 사용하는 것과 유사하게 아키텍처를 더 자세히 설명하기 위해 아티팩트의 메타데이터 속성을 사용할 수 있습니다.
  2. 각 모델에 대해 주기적으로 log_artifact를 사용하여 체크포인트를 로그합니다. W&B는 이러한 체크포인트의 기록을 자동으로 구축하며, 가장 최근의 체크포인트에 latest 에일리어스를 주석 처리하여 주어진 모델 아키텍처의 최신 체크포인트를 architecture-name:latest를 사용하여 참조할 수 있습니다.

Artifacts FAQs 참조​

W&B에서 이 버전 ID와 ETag를 어떻게 가져올 수 있나요?​

W&B에 아티팩트 참조를 로그했고 버킷에 버전 관리가 활성화된 경우 버전 ID는 S3 UI에서 볼 수 있습니다. W&B에서 이러한 버전 ID와 ETag를 가져오려면 아티팩트를 가져온 다음 해당 매니페스트 항목을 가져오면 됩니다. 예를 들어:

artifact = run.use_artifact("my_table:latest")
for entry in artifact.manifest.entries.values():
    versionID = entry.extra.get("versionID")
    etag = manifest_entry.extra.get("etag")
On this page
Was this page helpful?👍👎