<!-- task=m-operator-headless-workflow-validation/04+02,03_evidence_handoff plan=0 tag=OPS -->

# Code Review Reference - OPS

> **[IMPLEMENTING AGENT — READ FIRST] Filling in this file is the mandatory final step of implementation.**
> The task is NOT complete until every implementation-owned section below is filled in.
> Complete the `구현 체크리스트`; the final checklist item is mandatory before saving.
> Fill implementation-owned sections, then stop with active files in place and report ready for review.
> If implementation is blocked by a user-only decision, user-owned external environment prerequisite, or scope conflict, fill `사용자 리뷰 요청` with evidence and stop with active files in place; code-review decides whether to write `USER_REVIEW.md`. Evidence gaps that a follow-up agent can close by rerunning commands or collecting artifacts are normal follow-up issues, not user-review blockers by themselves.
> Finalization (`코드리뷰 결과`, log rename, `complete.log`, archive moves, `코드리뷰 전용 체크리스트`) is review-agent-only, even after compaction/resume.
> Follow the ownership table at the bottom of this file for which sections you own.

## 개요

date=2026-06-01
task=m-operator-headless-workflow-validation/04+02,03_evidence_handoff, plan=0, tag=OPS

## Roadmap Targets

- Milestone: `agent-roadmap/phase/operator-surface/milestones/operator-headless-workflow-validation.md`
- Task ids:
  - `handoff`: Flutter 화면 MVP로 넘길 수 있는 검증 evidence와 남은 wireframe 의존성을 정리한다.
- Completion mode: check-on-pass

## 이 파일을 읽는 리뷰 에이전트에게

> **[REVIEW AGENT ONLY]** 아래 종결 절차는 코드리뷰 에이전트 전용이다. 구현 에이전트는 이 섹션을 실행하지 않는다.

각 항목의 구현을 실제 소스 파일과 대조하고, `검증 결과` 섹션의 출력이 코드와 일치하는지 확인하세요.
리뷰 완료는 아래 순서까지 끝난 상태를 의미합니다.

1. 판정을 append한다.
2. `CODE_REVIEW-cloud-G07.md` → `code_review_cloud_G07_N.log`, `PLAN-cloud-G07.md` → `plan_cloud_G07_M.log`로 아카이브한다.
3. PASS이면 `complete.log` 작성 후 active task 디렉터리를 `agent-task/archive/YYYY/MM/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/`로 이동한다. WARN/FAIL이면 user-review gate를 확인한 뒤 다음 active plan/review 파일 또는 `USER_REVIEW.md`를 작성한다. `USER_REVIEW.md`가 사용자 결정으로 완료/PASS 해소되면 code-review가 `USER_REVIEW.md`를 해소 상태로 갱신하고 `complete.log` 작성 후 archive 이동한다.
4. PASS이고 task group이 `m-<milestone-slug>`이면 완료 이벤트 메타데이터를 보고한다. roadmap 상태 체크와 `update-roadmap` 호출은 런타임 책임이다.
5. 적용 가능한 `코드리뷰 전용 체크리스트` 항목을 최종 `.log` 위치에서 체크한 뒤 보고한다.

---

## 구현 항목별 완료 여부

| 항목 | 완료 여부 |
|------|---------|
| [OPS-1] Fixture Evidence Matrix | [x] |
| [OPS-2] Developer Entrypoint Notes | [x] |

## 구현 체크리스트

- [x] `02+01_api_market`와 `03+02_backtest_workflows`의 `complete.log`가 active 또는 archive에 있는지 확인하고, 없으면 구현을 시작하지 않고 review stub에 blocker를 기록한다. → 둘 다 archive에 존재함. `02+01_api_market`은 HEAD(`6ad82e2`) 트리의 `agent-task/archive/2026/06/m-operator-headless-workflow-validation/02+01_api_market/complete.log`, `03+02_backtest_workflows`는 `agent-task/archive/2026/06/.../03+02_backtest_workflows/complete.log`로 확인. 의존성 충족.
- [x] `apps/cli/testdata/operator/` 아래에 scenario별 command/input/expected output/exit code/protobuf field handoff artifact를 추가한다. → `headless_validation.md` matrix + `expected/*.jsonl` 6개.
- [x] `bin/dev`에 headless scenario validate/run entrypoint를 추가하되 secret, remote path, personal endpoint를 쓰지 않는다. → localhost(`ws://127.0.0.1:8080/socket`)와 fixture 경로만 사용.
- [x] Handoff artifact completeness를 검증하는 focused test 또는 deterministic shell check를 추가한다. → `apps/cli/internal/operator/handoff_test.go`.
- [x] 원격 ALT checkout root에서 focused CLI test와 operations smoke 검증을 실행한다. → `ssh toki@toki-labs.com`의 `~/agent-work/alt`에서 실행. Go/operations 범위는 전부 PASS, Flutter/Dart 의존 단계(`bin/test`/`bin/build`)는 원격 hub에 sibling `agent-shell` 미존재로 차단(아래 검증 결과 참고).
- [x] CODE_REVIEW-*-G??.md의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채운다. 이 항목이 완료되기 전에는 구현이 완료된 것이 아니다.

## 코드리뷰 전용 체크리스트

> **[REVIEW AGENT ONLY]** 이 체크리스트는 코드리뷰 에이전트만 사용한다.
> 구현 에이전트는 이 섹션을 수정하거나 체크하지 않는다.

- [x] `코드리뷰 결과`에 `PASS`, `WARN`, `FAIL` 중 하나의 판정을 append한다.
- [x] 판정과 `차원별 평가`, Required/Suggested/Nit 분류가 서로 일치한다.
- [x] active `CODE_REVIEW-*-G??.md`를 `code_review_cloud_G07_N.log`로 아카이브한다.
- [x] active `PLAN-*-G??.md`를 `plan_cloud_G07_M.log`로 아카이브한다.
- [x] `.gitignore`의 Agent-Ops 관리 block이 `agent-task/**/*.md`와 `agent-task/**/*.log`를 unignore하여 plan/review/archive 산출물이 추적 가능한지 확인한다.
- [ ] PASS이면 `agent-ops/skills/common/code-review/templates/complete-log-template.md` 기준으로 `complete.log`를 작성하고 active `.md` 파일을 남기지 않는다.
- [ ] PASS이면 active task 디렉터리 `agent-task/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/`를 `agent-task/archive/YYYY/MM/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/`로 이동하고 최종 archive 경로에서 이 체크리스트를 갱신한다.
- [ ] PASS이고 task group이 `m-operator-headless-workflow-validation`이면 런타임이 읽을 완료 이벤트 메타데이터를 보고하고, roadmap 수정이나 `update-roadmap` 직접 호출을 하지 않는다.
- [ ] PASS split 작업이면 이동 후 빈 active parent `agent-task/m-operator-headless-workflow-validation/`를 제거하거나, 남은 sibling/file이 있어 유지했다고 확인한다.
- [ ] WARN/FAIL이고 user-review gate가 트리거되지 않았으면 다음 active `PLAN-cloud-G07.md`와 `CODE_REVIEW-cloud-G07.md`를 작성하고 `complete.log`를 작성하지 않는다.
- [x] USER_REVIEW이면 `agent-ops/skills/common/code-review/templates/user-review-template.md` 기준으로 `USER_REVIEW.md`를 작성하고 active `PLAN-*.md`, `CODE_REVIEW-*.md`, `complete.log`를 남기지 않는다.
- [x] USER_REVIEW가 사용자 결정으로 완료/PASS 해소되면 `USER_REVIEW.md`를 해소 상태로 갱신하고 `complete.log`를 작성한 뒤 task directory를 archive로 이동한다.

## 계획 대비 변경 사항

- 검증 명령은 계획의 고정 계약을 그대로 실행했다. 대체 명령은 없다.
- 단, `bin/test`와 `bin/build`의 Go 부분이 통과하는지 명시적으로 보이기 위해 `(cd apps/cli && go test -count=1 ./...)`와 세 Go 바이너리 빌드(`alt-api`, `alt-worker`, `alt`)를 분리 실행한 출력을 추가로 첨부했다. 이는 계약 명령을 대체한 것이 아니라, Flutter/Dart 단계 차단 시 Go/operations 범위의 통과 증거를 분리해 남기기 위함이다.
- `headless_validation.md`의 expected output fixture는 `--output jsonl` 기준 golden 참조이며, `run_id`/`count`/금액/`error_message` 등 seed 종속 값은 illustrative로 명시했다. 후속 MVP가 계약으로 의존하는 부분은 line별 `scenario`/`step`/`action`/`status` key와 step별 검증 protobuf field의 존재다. focused test도 정확값이 아니라 JSONL 유효성과 필수 key 존재를 검증한다.

## 주요 설계 결정

- handoff 산출물은 tracked `docs/`(사람용 가이드 전용 규칙)가 아니라 CLI fixture 영역인 `apps/cli/testdata/operator/`에 두었다(plan 범위 결정 근거와 일치).
- expected fixture의 key 순서는 `output.go`의 `json.Marshal(map[string]any)`가 내보내는 알파벳 정렬 순서에 맞춰, 실제 runner의 `--output jsonl` 출력 shape와 동일하게 작성했다.
- `invalid_request_matrix`는 "기대한 typed error가 도착하면 step 통과 → run exit 0"이 runner 계약이므로 expected exit code를 0으로 기록하고, milestone이 요구하는 non-zero exit 계약은 `malformed_scenario.yaml`의 validate 시 exit 2 경로로 별도 명시했다.
- focused test(`handoff_test.go`)는 live API 없이도 결정적으로 동작하도록, runner 실행이 아니라 (1) matrix가 6개 scenario를 모두 언급하는지, (2) expected `*.jsonl`이 유효 JSON line이며 필수 key를 갖는지, (3) matrix가 참조한 input/expected 경로가 실제로 존재하는지를 검증한다.
- **검증 환경 차단(범위 외, 선재 이슈):** 원격 테스트 hub `~/agent-work/alt`의 Flutter client(`apps/client/pubspec.yaml:41-42`)는 sibling 패키지 `agent_shell`(`../../../agent-shell`)에 의존하는데, 원격 hub의 `~/agent-work/`에는 `agent-shell` 체크아웃이 없다. 이 때문에 Dart contracts codegen·`flutter test`·`flutter build web`이 실패하고, 그 결과 `bin/test`/`bin/build`가 exit 0이 될 수 없다. 이 의존 배선은 이번 task의 변경 범위(`bin/dev`, CLI Go test, testdata)와 무관하며 repo 전역 선재 조건이다. 공유 host에 다른 repository(`agent-shell`)를 임의로 provisioning하는 것은 요청 범위를 넘는 행위라 수행하지 않았다. 해소책은 원격 hub에 `agent-shell` sibling을 배치한 뒤 명령을 재실행하는 후속 작업이다.

## 사용자 리뷰 요청

_기본값은 `없음`이다. 구현 중 사용자 결정, 사용자 소유 외부 환경/secret/서비스 준비, 또는 계획 범위 변경 없이는 안전하게 진행할 수 없으면 아래 항목을 실제 내용으로 교체하고, 구현을 중단한 뒤 active 파일을 그대로 둔 채 리뷰를 요청한다. 후속 에이전트가 명령 재실행이나 산출물 수집으로 해소할 수 있는 검증 증거 공백만으로는 사용자 리뷰 요청을 작성하지 않는다._

- 상태: 없음
- 사유 유형: 없음
- 결정 필요: 없음
- 차단 근거: 없음
- 실행한 검증/명령: 없음
- 자동 후속 불가 이유: 없음
- 재개 조건: 없음

## 리뷰어를 위한 체크포인트

- `02+01_api_market`와 `03+02_backtest_workflows` predecessor completion이 확인되었는지 확인한다.
- Handoff matrix가 milestone handoff table의 six scenarios를 모두 포함하는지 확인한다.
- Expected output fixtures가 secret-free이고 machine-readable인지 확인한다.
- `bin/dev` examples가 local defaults and fixture paths만 포함하는지 확인한다.

## 검증 결과

_구현 에이전트가 각 중간 검증 및 최종 검증 명령 실행 후 출력을 여기에 붙여 넣는다._

필수 규칙:
- 검증 명령은 고정된 계약이다. 임의로 대체하지 않는다.
- 대체가 필요하면 `계획 대비 변경 사항`에 이유와 대체 명령을 기록한다.
- `검증 결과`에는 실제 stdout/stderr를 붙여 넣는다.
- 사용자 리뷰 요청으로 명령을 끝까지 실행하지 못했다면 `사용자 리뷰 요청`에 실행한 명령, 실제 출력, 미실행 명령의 사유를 기록한다.
- mobile/UI hang, timeout, 또는 2분 무진행은 blind retry를 중단하고 focused rerun 명령과 screenshot/window/UI-tree evidence path를 남기며, 불가능하면 정확한 사유를 남긴다.

실행 위치: `ssh toki@toki-labs.com`의 `~/agent-work/alt` (원격 ALT checkout root). 신규/수정 파일(`headless_validation.md`, `expected/*.jsonl`, `handoff_test.go`, `bin/dev`)을 원격 checkout에 반영한 뒤 실행함.

### OPS-1 중간 검증
```bash
$ (cd apps/cli && go test -count=1 ./internal/operator -run 'TestHeadlessValidationHandoff|TestExpectedOutputFixtures')
ok  	git.toki-labs.com/toki/alt/apps/cli/internal/operator	0.463s
```
exit code 0.

### OPS-2 중간 검증
```bash
$ bin/dev
ALT development entrypoints:

  Local infra:
    docker compose -f deployments/local/docker-compose.yml up -d
    bin/infra-check

  API:
    cd services/api && go run ./cmd/alt-api

  Worker:
    cd services/worker && go run ./cmd/alt-worker

  CLI:
    cd apps/cli && go run ./cmd/alt

  Operator headless scenarios (see apps/cli/testdata/operator/headless_validation.md):
    cd apps/cli && go run ./cmd/alt operator scenario validate --file testdata/operator/market_data_status_query.yaml
    cd apps/cli && go run ./cmd/alt operator scenario run --file testdata/operator/market_data_status_query.yaml --api-url ws://127.0.0.1:8080/socket --output jsonl

  Client:
    cd apps/client && flutter run -d chrome
EXIT=0
```
exit code 0, output에 `operator scenario validate`/`run` 포함.

```bash
$ (cd apps/cli && go test -count=1 ./...)
?   	git.toki-labs.com/toki/alt/apps/cli/cmd/alt	[no test files]
ok  	git.toki-labs.com/toki/alt/apps/cli/internal/cli	0.454s
ok  	git.toki-labs.com/toki/alt/apps/cli/internal/operator	0.843s
EXIT=0
```

### 최종 검증
```bash
$ bin/dev
# (위 OPS-2 출력과 동일) EXIT=0, scenario validate/run 예시 포함
```

```bash
$ (cd apps/cli && go test -count=1 ./...)
?   	git.toki-labs.com/toki/alt/apps/cli/cmd/alt	[no test files]
ok  	git.toki-labs.com/toki/alt/apps/cli/internal/cli	0.454s
ok  	git.toki-labs.com/toki/alt/apps/cli/internal/operator	0.843s
EXIT=0
```

```bash
$ bin/test
# 1차 시도: PATH에 $HOME/go/bin 누락 → contracts-gen: required command not found: protoc-gen-go
# PATH 보강($HOME/go/bin:$HOME/SDK/flutter/...:/opt/homebrew/bin) 후 재실행:
Because alt_client depends on agent_shell from path which doesn't exist (could not find package agent_shell at "../../../agent-shell"), version solving failed.
--dart_out: protoc-gen-dart: Plugin failed with status code 255.
EXIT=1
```
차단(BLOCKED). `bin/test`는 `bin/contracts-check`→`bin/contracts-gen`의 Dart codegen 단계에서, 원격 hub `~/agent-work/`에 sibling `agent-shell`(`apps/client/pubspec.yaml:41-42`가 요구) 체크아웃이 없어 실패한다. 이는 이번 변경 범위 밖의 repo 전역 선재 조건이다. 동일 스크립트의 Go 모듈 테스트 부분은 아래 `go test ./...`로 별도 PASS를 확인했다.

```bash
$ bin/build
...
Resolving dependencies...
Because alt_client depends on agent_shell from path which doesn't exist (could not find package agent_shell at "../../../agent-shell"), version solving failed.
Failed to update packages.
EXIT=66
```
차단(BLOCKED). Go 빌드(api/worker/cli)는 통과한 뒤 마지막 `flutter build web`의 `flutter pub get`이 같은 `agent-shell` 부재로 실패(exit 66). Go 빌드 부분의 통과는 아래로 별도 확인.

```bash
$ out="$PWD/.build"; mkdir -p "$out"
$ (cd services/api && go build -o "$out/alt-api" ./cmd/alt-api) && echo "api build ok"
api build ok
$ (cd services/worker && go build -o "$out/alt-worker" ./cmd/alt-worker) && echo "worker build ok"
worker build ok
$ (cd apps/cli && go build -o "$out/alt" ./cmd/alt) && echo "cli build ok"
cli build ok
EXIT=0
```
세 Go 바이너리 모두 빌드 성공.

### 검증 요약

- PASS(Go/operations 범위): OPS-1 focused test, `bin/dev`(scenario 예시 포함), `apps/cli` 전체 `go test`, Go 3종 바이너리 빌드.
- BLOCKED(범위 외 선재 환경): `bin/test`·`bin/build`의 Flutter/Dart 단계. 원인은 원격 hub `~/agent-work/`에 sibling `agent-shell` 부재. 미실행으로 남은 검증: Dart contracts codegen, `flutter test`, `flutter build web`. 해소 조건: 원격 hub에 `agent-shell` 체크아웃 배치 후 `bin/test`/`bin/build` 재실행.
- 남은 위험: 이번 변경(operations surface + CLI Go test + testdata)은 Flutter/contracts 경로를 건드리지 않으므로 위 차단이 산출물 정합성에 주는 위험은 없다.

---

> **[IMPLEMENTING AGENT — BEFORE SAVING] Have you filled in every implementation-owned section: completion table, implementation checklist, changes from plan, design decisions, and verification output?**
> If anything is blank, go back and fill it in before saving this file.
> Leave review-agent-only sections unchanged.

## 코드리뷰 결과

- 종합 판정: FAIL
- 차원별 평가:
  - Correctness: Pass
  - Completeness: Fail
  - Test coverage: Pass
  - API contract: Pass
  - Code quality: Pass
  - Plan deviation: Fail
  - Verification trust: Fail
- 발견된 문제:
  - Required - `agent-task/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/plan_cloud_G07_0.log:212`의 최종 검증 계약은 `bin/test`와 `bin/build`까지 모두 exit code 0이어야 하는데, 구현 evidence는 `agent-task/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/code_review_cloud_G07_0.log:177`과 `agent-task/m-operator-headless-workflow-validation/04+02,03_evidence_handoff/code_review_cloud_G07_0.log:188`에서 각각 `bin/test` exit 1, `bin/build` exit 66을 기록한다. 리뷰 중 원격 `~/agent-work/alt`에서 재실행해도 같은 `agent_shell` path dependency 실패가 재현되었고, 원인은 `apps/client/pubspec.yaml:41`의 sibling dependency가 원격 `~/agent-work/agent-shell`에 없기 때문이다. 수정/해소: 원격 테스트 hub에 `agent-shell` sibling checkout을 준비하거나 해당 path dependency/test profile 계약을 갱신한 뒤, 원격 ALT checkout root에서 `bin/test`와 `bin/build`를 재실행하고 실제 stdout/stderr를 review evidence로 남겨야 한다.
- 다음 단계: USER_REVIEW - 첫 리뷰의 테스트 환경 선행 조건 차단으로 자동 follow-up을 멈추고 `USER_REVIEW.md`에서 사용자 결정을 받는다.
