iop/agent-spec/archive/testing/agent-comparison-benchmark.log
toki f25eda05c3 refactor(benchmark): 전용 하네스를 폐기한다
제품 호출 안정성과 측정 경계를 다시 분리하고, 벤치 대상 경로의 최소 HTML 스모크와 초경량 단일 시도 비교만 남긴다.
2026-08-13 21:14:52 +09:00

17 lines
935 B
Text

---
spec_doc_type: archive-log
spec_id: testing/agent-comparison-benchmark
status: 폐기됨
source_evidence:
- type: user
path: null
notes: 2026-08-13 전용 하네스를 폐기하고 공식 caller별 수동 개별 검증을 우선하도록 결정
- type: roadmap
path: agent-roadmap/archive/phase/knowledge-tool-optimization-extension/milestones/iop-one-shot-agent-model-comparison.md
notes: 폐기된 측정 Milestone과 경계 분리 근거
---
# 폐기 기록: Agent 비교 벤치마크 파이프라인
전용 manifest runner, 재개·복구 저장소, 자동 웹 검증, 익명 채점과 보고 파이프라인은 2026-08-13 폐기했다.
현재 IOP 호출부는 완료된 제품 기준선으로 유지한다. 구체적 결함이 재현되면 해당 코드와 로드맵 소유 영역에서 국소 처리하며, 전용 benchmark CLI나 전수 안정성 campaign은 현재 구현·완료 표면이 아니다.