App UI에서 대화형으로 또는 W&B SDK를 사용해 프로그래밍 방식으로 리포트를 편집합니다.
W&B Report and Workspace API는 공개 프리뷰 상태입니다.
이 페이지에서는 App UI에서 대화형으로 또는 W&B SDK를 사용해 프로그래밍 방식으로 리포트를 편집하는 방법을 설명합니다. 플롯, run 세트, 코드 블록, 마크다운, HTML 요소, 리치 미디어를 추가하는 방법을 다룹니다. 또한 run 세트를 필터링하고 그룹화하는 방법, 리포트 레이아웃을 구성하는 방법, 다차원 관계를 시각화하는 방법도 다룹니다.리포트 본문은 블록 으로 구성됩니다. 블록에는 텍스트, 이미지, 임베드된 시각화, Experiments 및 Runs의 플롯, 그리고 패널 그리드가 포함됩니다.패널 그리드 는 패널과 run 세트 를 담는 특정 유형의 블록입니다. Run 세트는 W&B의 프로젝트에 로깅된 run의 컬렉션입니다. 패널은 run 세트 데이터의 시각화입니다.
플롯을 사용하면 리포트 내에서 run 데이터를 시각화할 수 있습니다. 각 패널 그리드는 run 세트와 패널 세트로 구성됩니다. 패널 그리드의 run 세트는 그리드에 있는 패널에 어떤 데이터가 표시될지 제어합니다. 다른 run 세트에서 데이터를 가져오는 차트를 추가하려면 새 패널 그리드를 생성하세요.
App UI
Report and Workspace API
리포트에서 슬래시(/)를 입력하면 드롭다운 메뉴가 표시됩니다. 패널을 추가하려면 Add panel을 선택합니다. 라인 플롯(line plot), 산점도(scatter plot), 평행 좌표(parallel coordinates) 차트 등 W&B에서 지원하는 모든 패널을 추가할 수 있습니다.
SDK를 사용해 프로그래밍 방식으로 리포트에 플롯을 추가할 수 있습니다. 하나 이상의 플롯 또는 차트 객체 목록을 PanelGrid Public API 클래스의 panels 파라미터에 전달합니다. 관련 Python 클래스와 함께 플롯 또는 차트 객체를 생성합니다.아래 예제는 라인 플롯과 산점도를 생성하는 방법을 보여줍니다.
App UI 또는 W&B SDK를 사용해 프로젝트에서 run 세트를 대화형으로 추가합니다.
App UI
Report and Workspace API
리포트에서 슬래시(/)를 입력하면 드롭다운 메뉴가 표시됩니다. 드롭다운에서 Panel Grid를 선택합니다. W&B가 리포트가 생성된 프로젝트의 run 세트를 자동으로 가져옵니다.패널을 리포트에 가져오면 리포트는 프로젝트의 run 이름을 상속합니다. 리포트에서 독자가 더 잘 이해할 수 있도록 필요하다면 run 이름 바꾸기를 할 수 있습니다. 이 이름 변경은 해당 개별 패널에만 적용됩니다. 동일한 리포트에서 패널을 복제하면, 복제된 패널에도 새 이름이 반영됩니다.
리포트에서 연필 아이콘을 클릭해 리포트 편집기를 엽니다.
run 세트에서 이름을 변경할 run을 찾습니다. run 이름 위에 마우스를 올린 다음 액션 () 메뉴를 클릭합니다. 다음 선택지 중 하나를 선택한 뒤, 폼을 제출합니다.
Rename run for project: 전체 프로젝트에 걸쳐 run 이름을 변경합니다. 새 임의 이름을 생성하려면 필드를 비워 둡니다.
Rename run for panel grid: 다른 컨텍스트에서 기존 이름은 유지한 채, 이 리포트에서만 run 이름을 변경합니다. 이 옵션으로는 새 임의 이름을 생성할 수 없습니다.
Publish report를 클릭합니다.
wr.Runset() 및 wr.PanelGrid 클래스를 사용해 프로젝트에서 run 세트를 추가합니다. run 세트를 추가하려면 다음 단계를 따르세요.
wr.Runset() 객체 인스턴스를 생성합니다. project 매개변수에는 run 세트를 포함하는 프로젝트 이름을, entity 매개변수에는 해당 프로젝트를 소유한 엔터티를 제공합니다.
wr.PanelGrid() 객체 인스턴스를 생성합니다. 하나 이상의 run 세트 객체 목록을 runsets 매개변수에 전달합니다.
하나 이상의 wr.PanelGrid() 객체 인스턴스를 리스트에 저장합니다.
패널 그리드 인스턴스 리스트로 리포트 인스턴스의 blocks 속성을 업데이트합니다.
다음 예시에서는 [PROJECT-NAME]을 W&B 프로젝트 이름으로, [ENTITY-NAME]을 W&B 엔터티 이름으로 바꾸세요.
리포트는 프로젝트의 최신 데이터를 표시하기 위해 run 세트를 자동으로 업데이트합니다. 나중에 추가되는 run으로 인해 리포트에 표시되는 내용이 바뀌지 않도록, 특정 시점의 상태를 리포트에 보존하려면 run 세트를 고정하세요.리포트 화면에서 run 세트를 고정하려면 패널 그리드에서 Filter 버튼 근처에 있는 눈송이 아이콘을 클릭합니다.
Workspace and Reports API를 사용해 run 세트의 run들을 프로그래밍 방식으로 그룹화할 수 있습니다. 그룹화하면 관련 run들이 패널에 함께 정리되어 설정과 결과를 더 쉽게 비교할 수 있습니다.run 세트의 run들을 설정 값, run 메타데이터, 또는 summary 메트릭 기준으로 그룹화할 수 있습니다. 다음 표는 사용 가능한 그룹화 방법과 각 방법에서 사용할 수 있는 키를 보여줍니다:
유사한 설정을 가진 run을 비교하려면 설정 값으로 run을 그룹화한다. 설정 값은 run 설정 (wandb.init(config=)) 에서 지정하는 파라미터이다. run을 설정 값으로 그룹화하려면 config.[KEY] 문법을 사용한다. 여기서 [KEY] 는 그룹화에 사용할 설정 값의 이름이다.예를 들어, 다음 코드 스니펫은 먼저 group 에 대한 설정 값을 사용해 run을 초기화한 다음, 리포트에서 group 설정 값을 기준으로 run을 그룹화한다. [ENTITY] 와 [PROJECT] 값은 자신의 W&B entity 및 프로젝트 이름으로 교체한다.
import wandbimport wandb_workspaces.reports.v2 as wrentity = "[ENTITY]"project = "[PROJECT]"for group in ["control", "experiment_a", "experiment_b"]: for i in range(3): with wandb.init(entity=entity, project=project, group=group, config={"group": group, "run": i}, name=f"{group}_run_{i}") as run: # 트레이닝을 간단히 시뮬레이션 for step in range(100): run.log({ "acc": 0.5 + (step / 100) * 0.3 + (i * 0.05), "loss": 1.0 - (step / 100) * 0.5 })
Python 스크립트나 노트북 내에서 config.group 값을 기준으로 run을 그룹화할 수 있습니다:
메타데이터를 기준으로 Runs를 그룹화하면 로깅된 값이 아니라 run 자체의 고유 속성을 기준으로 정리할 수 있습니다.run의 이름(Name), 상태(State), 또는 job 유형(JobType)별로 Runs를 그룹화할 수 있습니다.이전 예시에서 이어서, 다음 코드 스니펫을 사용해 Runs를 이름 기준으로 그룹화할 수 있습니다:
runset = wr.Runset( project=project, entity=entity, groupby=["Name"] # run 이름으로 그룹화)
run의 이름은 wandb.init(name=) 파라미터에 지정한 이름입니다. 이름을 지정하지 않으면, W&B가 해당 run에 대해 임의의 이름을 생성합니다.run의 이름은 W&B App에서 해당 run의 Overview 페이지에서 확인하거나, Api.runs().run.name을 사용해 프로그램 코드에서 확인할 수 있습니다.
다음 예시는 runs를 summary 메트릭으로 그룹화하는 방법을 보여줍니다. summary 메트릭은 wandb.Run.log()를 사용해 run에 로그로 기록하는 값입니다. run을 기록한 후에는 W&B App에서 해당 run의 Overview 페이지에 있는 Summary 섹션에서 summary 메트릭의 이름을 확인할 수 있습니다.summary 메트릭으로 runs를 그룹화하는 구문은 summary.[KEY]이며, 여기서 [KEY]는 그룹화에 사용할 summary 메트릭의 이름입니다.예를 들어, acc라는 이름의 summary 메트릭을 기록한다고 가정해 보겠습니다. [ENTITY] 및 [PROJECT]를 사용 중인 W&B entity 및 프로젝트 이름으로 바꾸세요:
import wandbimport wandb_workspaces.reports.v2 as wrentity = "[ENTITY]"project = "[PROJECT]"for group in ["control", "experiment_a", "experiment_b"]: for i in range(3): with wandb.init(entity=entity, project=project, group=group, config={"group": group, "run": i}, name=f"{group}_run_{i}") as run: # 트레이닝을 시뮬레이션합니다 for step in range(100): run.log({ "acc": 0.5 + (step / 100) * 0.3 + (i * 0.05), "loss": 1.0 - (step / 100) * 0.5 })
그런 다음 summary.acc summary 메트릭을 기준으로 run을 그룹화할 수 있습니다:
Workspace and Reports API를 사용해 프로그래밍 방식으로 run 세트를 필터링하고 리포트에 추가하세요. 필터링하면 설정 값, 메트릭, 태그 또는 run 속성을 기준으로 run 세트를 표시하려는 특정 run으로 좁힐 수 있습니다.필터 표현식의 일반적인 구문은 다음과 같습니다.
Filter('[KEY]') operation [VALUE]
이 표현식에서 [KEY]는 필터 이름이고, operation은 비교 연산자(예: >, <, ==, in, not in, or, and)이며, [VALUE]는 비교 대상 값입니다. Filter는 적용하려는 필터 유형을 나타내는 자리 표시자입니다. 다음 표에는 사용 가능한 필터와 해당 설명이 나와 있습니다.
Filter
설명
사용 가능한 키
Config('[KEY]')
설정 값으로 필터링
wandb.init(config=)의 config 매개변수에 지정한 값입니다.
SummaryMetric('[KEY]')
summary 메트릭으로 필터링
wandb.Run.log()를 사용해 run에 기록한 값입니다.
Tags('[KEY]')
tags로 필터링
run에 추가한 태그 값입니다(프로그래밍 방식 또는 W&B App 사용).
Metric('[KEY]')
run 속성으로 필터링
tags, state, displayName, jobType
필터를 정의한 후에는 report를 만들고 필터링된 run 세트를 wr.PanelGrid(runsets=)에 전달할 수 있습니다. report에 여러 요소를 프로그래밍 방식으로 추가하는 방법에 대한 자세한 내용은 이 페이지 전반의 Report and Workspace API 탭을 참조하세요.다음 예시는 report에서 run 세트를 필터링하는 방법을 보여줍니다. 대괄호로 묶인 값(예: [ENTITY] 및 [PROJECT])은 실제 값으로 바꾸세요.
하나 이상의 설정 값으로 run 세트를 필터링합니다. 설정 값은 run 설정(wandb.init(config=))에서 지정하는 파라미터입니다.예를 들어, 다음 코드 스니펫에서는 먼저 learning_rate와 batch_size 설정 값으로 run을 초기화한 다음, 리포트에서 learning_rate 설정 값을 기준으로 Runs를 필터링합니다.
import wandbconfig = { "learning_rate": 0.01, "batch_size": 32,}with wandb.init(project="[PROJECT]", entity="[ENTITY]", config=config) as run: # 트레이닝 코드를 여기에 작성하세요 pass
Python 스크립트나 노트북에서 학습률이 0.01보다 큰 run만 코드로 필터링할 수 있습니다.
정확도 또는 loss 값과 같이 특정 결과 임계값을 충족하는 run에 집중할 수 있도록 summary 메트릭을 기준으로 run 세트를 필터링하세요. Summary 메트릭은 wandb.Run.log()을 사용해 run에 기록한 값이다. run을 로깅한 후에는 W&B App에서 해당 run의 Overview 페이지에 있는 Summary 섹션에서 Summary 메트릭의 이름을 확인할 수 있다.
결과와 함께 설정, 예시 또는 스니펫을 공유할 수 있도록 코드 블록을 추가하세요. App UI에서 대화형으로 추가하거나 W&B SDK를 사용해 프로그래밍 방식으로 추가할 수 있습니다.
App UI
Report and Workspace API
리포트에서 슬래시(/)를 입력하면 드롭다운 메뉴가 표시됩니다. 드롭다운에서 Code를 선택합니다.코드 블록에서 프로그래밍 언어 이름을 선택하면 드롭다운이 펼쳐집니다. 이 드롭다운에서 사용할 프로그래밍 언어 구문을 선택합니다. JavaScript, Python, CSS, JSON, HTML, Markdown, YAML 중에서 선택할 수 있습니다.
wr.CodeBlock 클래스를 사용해 코드 블록을 프로그래밍 방식으로 생성합니다. language와 code 파라미터에 각각 표시하려는 언어 이름과 코드를 전달합니다.다음 예시는 YAML 파일의 리스트를 보여줍니다:
wr.MarkdownBlock 클래스를 사용해 프로그래밍 방식으로 마크다운 블록을 생성합니다. 문자열을 text 파라미터에 전달합니다:
import wandbimport wandb_workspaces.reports.v2 as wrreport = wr.Report(project="report-editing")report.blocks = [ wr.MarkdownBlock(text="Markdown cell with *italics* and **bold** and $e=mc^2$")]
동일한 리포트 또는 다른 리포트에서 패널 그리드를 복제해 레이아웃을 다시 사용할 수 있습니다. 패널 그리드를 선택해 복사하여 붙여넣기 하면 동일한 리포트에서 복제하거나 다른 리포트에 붙여넣을 수 있습니다.오른쪽 상단의 드래그 핸들을 선택해 전체 패널 그리드 섹션을 선택합니다. 리포트에서 패널 그리드, 텍스트, 제목 등의 영역을 클릭한 뒤 드래그해 범위를 선택합니다.
리포트에서 헤더를 접어 텍스트 블록 안의 콘텐츠를 숨길 수 있습니다. 리포트가 로드되면 확장된 헤더에 포함된 콘텐츠만 표시됩니다. 리포트에서 헤더를 접으면 콘텐츠를 더 잘 정리하고 필요한 것보다 더 많은 데이터가 로드되는 것을 방지할 수 있습니다. 다음 애니메이션은 이 과정을 보여 줍니다.
하나의 차트에서 세 개 이상의 변수 간 관계를 드러내고 싶을 때는 표준 2D 플롯만으로는 한계가 있을 수 있습니다. 2D 플롯으로 보여줄 수 있는 것보다 더 많은 변수를 비교하려면 색상 그라디언트를 추가 차원으로 사용하세요. 변수 중 하나를 색상 그라디언트로 표현하면 패턴을 더 쉽게 해석할 수 있습니다.
페널티 점수나 학습률처럼 색상 그라디언트로 나타낼 변수를 선택하세요. 이렇게 하면 트레이닝 시간(x축)에 따라 페널티(색상)가 보상 또는 부작용(y축)과 어떻게 상호작용하는지 더 명확하게 이해할 수 있습니다.
주요 추세를 강조하세요. 특정 Runs 그룹 위에 마우스를 올려 시각화에서 해당 그룹을 강조 표시하세요.