결과 읽기

실행 페이지는 실행의 진행 상황과 결과를 보여 줍니다. 이 가이드는 실행 페이지의 탭, 점수, 그리고 최고 버전을 내보내거나 서빙하는 방법을 설명합니다.

실행 페이지의 탭

실행 페이지는 해당 실행에 적용되는 탭만 보여 줍니다. 일부 탭은 경로, 상태, 경험 수준에 따라 달라집니다.

점수

Skynet은 검증 케이스에서 버전을 선택합니다. 최종 점수는 테스트 케이스에서 보고합니다. 엔진은 테스트 케이스를 절대 보지 않습니다. 데이터셋과 분할을 읽어 보세요.

개요 탭에는 다음이 표시됩니다.

• 개선: 시작 버전에서 최고 버전까지의 변화.
• 점수 진행 상황: 실행 동안의 점수.
• 점수 분석: 각 메트릭과 기준선, 최적화됨, 변화량 열.

실행이 진행 중일 때는 개요에 경과, 남음, 속도도 표시됩니다.

프롬프트, 코드, 텍스트 실행에서 메트릭이 이름 있는 점수를 보고하면 개요에 이름 있는 점수도 표시됩니다.

DSPy 프로그램 실행에서는 데이터 탭에 테스트 세트 평가가 있습니다. 각 테스트 케이스의 기준선 점수와 최적화된 점수를 보여 줍니다.

최고 버전이 시작 버전일 때

때로는 어떤 후보도 시작 버전을 이기지 못합니다. 그러면 Skynet은 시작 버전을 반환합니다. 아티팩트 탭은 회귀 방지 장치가 적용되었다고 알려 줍니다.

실행이 예산에 도달해 멈췄다면, 실행 페이지는 Skynet이 어떤 버전을 저장했는지 알려 줍니다. 실행을 읽어 보세요.

최고 버전 내보내기

프롬프트, 코드, 텍스트 실행

아티팩트 탭에는 아티팩트의 버전이 나열됩니다. 각 버전에서 다음을 할 수 있습니다.

• 버전을 복사합니다.
• 버전을 파일로 다운로드합니다.
• 리포지토리 실행에서는 리포지토리 전체를 zip으로 다운로드합니다.

한 버전을 다른 버전과 비교할 수 있습니다. 탭에는 버전의 스코어러 피드백도 표시됩니다.

DSPy 프로그램 실행

아티팩트 탭에는 결과 내보내기 패널이 있습니다. 다운로드 메뉴를 엽니다. 실행에 있는 형식이 표시됩니다.

최고 버전 서빙하기

최적화된 DSPy 프로그램을 내 코드에서 호출할 수 있습니다. 사용량 탭에는 두 부분이 있습니다.

• 양식. 입력 필드를 채우고 실행을 선택하면 예측을 받습니다.
• cURL, Python, JavaScript, Go, DSPy로 된 통합 코드.

프로그램은 항상 최적화할 때 사용한 모델 설정으로 실행됩니다. 모든 입력 필드를 제공해야 합니다. Skynet은 추가 필드를 무시합니다.

프로그램을 호출하려면 설정 → API에서 API 토큰을 만드세요. 그런 다음 요청을 보냅니다.

export APP_API_TOKEN=skyd_...
curl -X POST "$API_URL/serve/<optimization_id>" \
  -H "Authorization: Bearer $APP_API_TOKEN" \
  -H "Idempotency-Key: $(uuidgen)" \
  -H "Content-Type: application/json" \
  -d '{"inputs": {"question": "What is DSPy?"}}'

import os
import uuid
import requests

response = requests.post(
    f"{os.environ['API_URL']}/serve/<optimization_id>",
    headers={
        "Authorization": f"Bearer {os.environ['APP_API_TOKEN']}",
        "Idempotency-Key": str(uuid.uuid4()),
    },
    json={"inputs": {"question": "What is DSPy?"}},
)
print(response.json()["outputs"])

question을 프로그램의 입력 필드로 바꾸세요. 사용량 탭의 통합 코드에는 실제 URL과 필드 이름이 채워져 있습니다.

응답에는 outputs, input_fields, output_fields, model_used가 들어 있습니다.

부분 출력을 도착하는 대로 받으려면 같은 요청을 /serve/<optimization_id>/stream으로 보내세요. 응답은 서버 전송 이벤트(server-sent events) 스트림입니다.

인증과 다른 엔드포인트는 API를 읽어 보세요.

결과 공유하기

실행을 다른 사람과 공유하거나 공개 탐색 갤러리에 올릴 수 있습니다. 공유 및 게시를 읽어 보세요.