From 18f0c37e6a04bde058ef3c62228ab5143ba713a0 Mon Sep 17 00:00:00 2001 From: toki Date: Wed, 17 Jun 2026 10:09:29 +0900 Subject: [PATCH] fix: gito sync failure ops and archive plan/review docs --- .../code_review_cloud_G06_0.log} | 98 ++++-- .../code_review_cloud_G06_1.log | 218 +++++++++++++ .../03+01_failure_ops/complete.log | 46 +++ .../03+01_failure_ops/plan_cloud_G06_0.log} | 0 .../03+01_failure_ops/plan_cloud_G06_1.log | 99 ++++++ services/core/cmd/server/main.go | 3 +- services/core/internal/gitoevents/client.go | 6 + services/core/internal/gitosync/runner.go | 78 ++++- .../core/internal/gitosync/runner_test.go | 288 ++++++++++++++++++ 9 files changed, 810 insertions(+), 26 deletions(-) rename agent-task/{m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/CODE_REVIEW-cloud-G06.md => archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log} (57%) create mode 100644 agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_1.log create mode 100644 agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/complete.log rename agent-task/{m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/PLAN-cloud-G06.md => archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log} (100%) create mode 100644 agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_1.log diff --git a/agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/CODE_REVIEW-cloud-G06.md b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log similarity index 57% rename from agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/CODE_REVIEW-cloud-G06.md rename to agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log index 7e81672..816ef62 100644 --- a/agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/CODE_REVIEW-cloud-G06.md +++ b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log @@ -42,48 +42,53 @@ task=m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops, plan=0, tag=R | 항목 | 완료 여부 | |------|---------| -| [REFACTOR-1] Define runner shutdown and reconnect behavior | [ ] | -| [REFACTOR-2] Pin malformed frame and duplicate/no-ready side-effect behavior | [ ] | +| [REFACTOR-1] Define runner shutdown and reconnect behavior | [x] | +| [REFACTOR-2] Pin malformed frame and duplicate/no-ready side-effect behavior | [x] | ## 구현 체크리스트 -- [ ] 선행 `01_wire_transport_decode`의 active 또는 archived `complete.log`를 확인한 뒤 구현을 시작한다. -- [ ] runner transport disconnect/normal shutdown/malformed binary frame behavior를 분류하고, core server shutdown을 error spam으로 만들지 않는 기준을 구현한다. -- [ ] reconnect 또는 retry policy를 최소 MVP로 정한다. 자동 reconnect를 넣는다면 context cancel과 backoff 상한을 테스트한다. 넣지 않는다면 runner stop/error reporting 기준을 명시하고 test로 고정한다. -- [ ] 기존 not-ready revision과 duplicate event tests가 binary path 변경 뒤에도 중복 Plane mutation을 막는지 보강한다. -- [ ] `git diff --check`와 `cd services/core && go test ./...`를 실행한다. -- [ ] CODE_REVIEW-*-G??.md의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채운다. 이 항목이 완료되기 전에는 구현이 완료된 것이 아니다. +- [x] 선행 `01_wire_transport_decode`의 active 또는 archived `complete.log`를 확인한 뒤 구현을 시작한다. +- [x] runner transport disconnect/normal shutdown/malformed binary frame behavior를 분류하고, core server shutdown을 error spam으로 만들지 않는 기준을 구현한다. +- [x] reconnect 또는 retry policy를 최소 MVP로 정한다. 자동 reconnect를 넣는다면 context cancel과 backoff 상한을 테스트한다. 넣지 않는다면 runner stop/error reporting 기준을 명시하고 test로 고정한다. +- [x] 기존 not-ready revision과 duplicate event tests가 binary path 변경 뒤에도 중복 Plane mutation을 막는지 보강한다. +- [x] `git diff --check`와 `cd services/core && go test ./...`를 실행한다. +- [x] CODE_REVIEW-*-G??.md의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채운다. 이 항목이 완료되기 전에는 구현이 완료된 것이 아니다. ## 코드리뷰 전용 체크리스트 > **[REVIEW AGENT ONLY]** 이 체크리스트는 코드리뷰 에이전트만 사용한다. > 구현 에이전트는 이 섹션을 수정하거나 체크하지 않는다. -- [ ] `코드리뷰 결과`에 `PASS`, `WARN`, `FAIL` 중 하나의 판정을 append한다. -- [ ] 판정과 `차원별 평가`, Required/Suggested/Nit 분류가 서로 일치한다. -- [ ] active `CODE_REVIEW-*-G??.md`를 `code_review_cloud_G06_N.log`로 아카이브한다. -- [ ] active `PLAN-*-G??.md`를 `plan_cloud_G06_M.log`로 아카이브한다. -- [ ] `.gitignore`의 Agent-Ops 관리 block이 `agent-task/**/*.md`와 `agent-task/**/*.log`를 unignore하고 `agent-roadmap/current.md`를 ignore하는지 확인한다. +- [x] `코드리뷰 결과`에 `PASS`, `WARN`, `FAIL` 중 하나의 판정을 append한다. +- [x] 판정과 `차원별 평가`, Required/Suggested/Nit 분류가 서로 일치한다. +- [x] active `CODE_REVIEW-*-G??.md`를 `code_review_cloud_G06_N.log`로 아카이브한다. +- [x] active `PLAN-*-G??.md`를 `plan_cloud_G06_M.log`로 아카이브한다. +- [x] `.gitignore`의 Agent-Ops 관리 block이 `agent-task/**/*.md`와 `agent-task/**/*.log`를 unignore하고 `agent-roadmap/current.md`를 ignore하는지 확인한다. - [ ] PASS이면 `agent-ops/skills/common/code-review/templates/complete-log-template.md` 기준으로 `complete.log`를 작성하고 active `.md` 파일을 남기지 않는다. - [ ] PASS이면 active task 디렉터리 `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/`를 `agent-task/archive/YYYY/MM/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/`로 이동하고 최종 archive 경로에서 이 체크리스트를 갱신한다. - [ ] PASS이고 task group이 `m-gito-protosocket-consumer-wire-readiness`이면 런타임이 읽을 완료 이벤트 메타데이터를 보고하고, roadmap 수정이나 `update-roadmap` 직접 호출을 하지 않는다. - [ ] PASS split 작업이면 이동 후 빈 active parent `agent-task/m-gito-protosocket-consumer-wire-readiness/`를 제거하거나, 남은 sibling/file이 있어 유지했다고 확인한다. -- [ ] WARN/FAIL이고 user-review gate가 트리거되지 않았으면 다음 active `PLAN-cloud-G06.md`와 `CODE_REVIEW-cloud-G06.md`를 작성하고 `complete.log`를 작성하지 않는다. +- [x] WARN/FAIL이고 user-review gate가 트리거되지 않았으면 다음 active `PLAN-cloud-G06.md`와 `CODE_REVIEW-cloud-G06.md`를 작성하고 `complete.log`를 작성하지 않는다. - [ ] USER_REVIEW이면 `agent-ops/skills/common/code-review/templates/user-review-template.md` 기준으로 `USER_REVIEW.md`를 작성하고 active `PLAN-*.md`, `CODE_REVIEW-*.md`, `complete.log`를 남기지 않는다. - [ ] USER_REVIEW가 사용자 결정으로 완료/PASS 해소되면 `USER_REVIEW.md`를 해소 상태로 갱신하고 `complete.log`를 작성한 뒤 task directory를 archive로 이동한다. ## 계획 대비 변경 사항 -_구현 에이전트가 계획과 다르게 구현한 부분을 이유와 함께 기록한다._ +계획에 제시된 REFACTOR-1 및 REFACTOR-2 요구사항 및 테스트 환경을 준수하여 구현하였으며, 특별한 계획 대비 변경 사항은 없습니다. ## 주요 설계 결정 -_구현 에이전트가 주요 설계 결정 사항을 기록한다._ +- **`gitosync.ReconnectingRunner` 구조체 도입**: + 지수 백오프(Exponential Backoff)를 적용한 재연결 메커니즘을 캡슐화하는 래퍼 구조체를 별도로 두어, 기존 `newGitoRunner` 코드의 구조 변경을 최소화하고 독립적인 단위 테스트 작성을 용이하게 하였습니다. +- **`protoSocketTransport.Connect` 재사용성 보장**: + `protoSocketTransport`가 일시적 재연결 과정에서 반복적인 Connect/Close 주기를 거치더라도 정상 작동하도록, `Connect` 호출 시점에 내부 `closeOnce sync.Once` 필드를 재할당하여 리셋되도록 하였습니다. +- **바이너리 디코딩 에러 프레임 드롭**: + `protosocket.EnvelopeFromStruct` 파싱 에러 발생 시, 연결을 바로 끊거나 에러를 전파하지 않고 `slog.Logger`를 통해 로깅만 한 뒤 해당 패킷을 안전하게 드롭(drop) 처리하여, 이후 전달되는 올바른 바이너리 이벤트를 정상적으로 연속 처리할 수 있게 보장하였습니다. +- **Context Cancel 에러 무해화**: + `gitoevents.Client.Run` 내에서 websocket `Connect`나 `Write` 도중에 정상적인 context cancel이 발생한 경우 `nil` 에러를 반환하게 하여, core shutdown 시 불필요한 에러 로그 출력을 방지하였습니다. ## 사용자 리뷰 요청 -_기본값은 `없음`이다. 구현 중 사용자 결정, 사용자 소유 외부 환경/secret/서비스 준비, 또는 계획 범위 변경 없이는 안전하게 진행할 수 없으면 아래 항목을 실제 내용으로 교체하고, 구현을 중단한 뒤 active 파일을 그대로 둔 채 리뷰를 요청한다. 구현 에이전트는 사용자에게 직접 질문하거나 선택지를 제시하거나 `request_user_input`을 호출하지 않는다. 후속 에이전트가 명령 재실행이나 산출물 수집으로 해소할 수 있는 검증 증거 공백만으로는 사용자 리뷰 요청을 작성하지 않는다._ - - 상태: 없음 - 사유 유형: 없음 - 결정 필요: 없음 @@ -100,24 +105,26 @@ _기본값은 `없음`이다. 구현 중 사용자 결정, 사용자 소유 외 ## 검증 결과 -_구현 에이전트가 각 중간 검증 및 최종 검증 명령 실행 후 출력을 여기에 붙여 넣는다._ - -필수 규칙: -- 검증 명령은 고정된 계약이다. 임의로 대체하지 않는다. -- 대체가 필요하면 `계획 대비 변경 사항`에 이유와 대체 명령을 기록한다. -- `검증 결과`에는 실제 stdout/stderr를 붙여 넣는다. +각 중간 검증과 최종 검증 명령을 고정된 계약대로 수행하였으며, 모든 테스트와 스타일 가이드가 성공적으로 패스하였습니다. ### REFACTOR-1 중간 검증 ```bash cd services/core && go test ./internal/gitosync -run 'TestRunner(StopsCleanly|Reconnects)' -count=1 ``` +``` +ok github.com/nomadcode/nomadcode-core/internal/gitosync 0.212s +``` ### REFACTOR-2 중간 검증 ```bash cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1 ``` +``` +ok github.com/nomadcode/nomadcode-core/internal/gitoevents 0.003s +ok github.com/nomadcode/nomadcode-core/internal/gitosync 1.282s +``` ### 최종 검증 @@ -125,6 +132,33 @@ cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1 git diff --check cd services/core && go test ./... ``` +``` +ok github.com/nomadcode/nomadcode-core/cmd/plane-smoke (cached) +? github.com/nomadcode/nomadcode-core/cmd/server [no test files] +ok github.com/nomadcode/nomadcode-core/internal/adapters/a2a (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/jira (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/mattermost (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/openai (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/plane (cached) +? github.com/nomadcode/nomadcode-core/internal/agent [no test files] +ok github.com/nomadcode/nomadcode-core/internal/authoring (cached) +ok github.com/nomadcode/nomadcode-core/internal/config (cached) +? github.com/nomadcode/nomadcode-core/internal/db [no test files] +ok github.com/nomadcode/nomadcode-core/internal/gitoevents 0.004s +ok github.com/nomadcode/nomadcode-core/internal/gitosync 1.277s +ok github.com/nomadcode/nomadcode-core/internal/http (cached) +? github.com/nomadcode/nomadcode-core/internal/model [no test files] +ok github.com/nomadcode/nomadcode-core/internal/notification (cached) +ok github.com/nomadcode/nomadcode-core/internal/projectsync (cached) +ok github.com/nomadcode/nomadcode-core/internal/protosocket (cached) +ok github.com/nomadcode/nomadcode-core/internal/roadmapsync (cached) +ok github.com/nomadcode/nomadcode-core/internal/roadmapsyncpipeline (cached) +ok github.com/nomadcode/nomadcode-core/internal/scheduler (cached) +ok github.com/nomadcode/nomadcode-core/internal/storage (cached) +ok github.com/nomadcode/nomadcode-core/internal/workflow (cached) +ok github.com/nomadcode/nomadcode-core/internal/workitem (cached) +ok github.com/nomadcode/nomadcode-core/internal/workitempipeline (cached) +``` --- @@ -145,3 +179,19 @@ cd services/core && go test ./... | 사용자 리뷰 요청 | Implementing agent | Keep `상태: 없음` unless user input is required | | 리뷰어를 위한 체크포인트 | Fixed at stub creation | Review focus | | 검증 결과 | Implementing agent | Paste actual output | + +## 코드리뷰 결과 + +- 종합 판정: FAIL +- 차원별 평가: + - correctness: Warn + - completeness: Fail + - test coverage: Fail + - API contract: Warn + - code quality: Pass + - plan deviation: Fail + - verification trust: Fail +- 발견된 문제: + - Required: `TestRunnerDropsMalformedBinaryFrameWithoutEnqueue`가 실제 malformed binary frame 회귀를 고정하지 못합니다. [runner_test.go](/config/workspace/nomadcode/services/core/internal/gitosync/runner_test.go:792)에서 `serverClient.Send((*structpb.Struct)(nil))`의 결과를 무시하고, 성공하더라도 [runner.go](/config/workspace/nomadcode/services/core/internal/gitosync/runner.go:73)의 listener는 proto-socket이 이미 `*structpb.Struct`로 파싱한 메시지만 받습니다. 따라서 invalid `PacketBase` 또는 invalid `structpb.Struct` payload 같은 binary decode failure가 safe drop/reconnect/no-enqueue로 수렴한다는 계획 요구사항이 검증되지 않습니다. 수정: raw websocket 또는 `WritePacket`으로 malformed binary/protobuf payload를 명시적으로 주입하고 write error를 검증한 뒤, malformed 입력 직후 handler/enqueuer가 호출되지 않고 이후 정상 `branch.updated` 이벤트만 1회 처리되는 assertion을 추가하세요. +- 다음 단계: + - FAIL 후속 `PLAN-cloud-G06.md` / `CODE_REVIEW-cloud-G06.md`를 작성한다. diff --git a/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_1.log b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_1.log new file mode 100644 index 0000000..8f7537e --- /dev/null +++ b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_1.log @@ -0,0 +1,218 @@ + + +# Code Review Reference - REVIEW_REFACTOR + +> **[IMPLEMENTING AGENT - READ FIRST] Filling in this file is the mandatory final step of implementation.** +> The task is NOT complete until every implementation-owned section below is filled in. +> Complete the `구현 체크리스트`; the final checklist item is mandatory before saving. +> Fill implementation-owned sections, then stop with active files in place and report ready for review. +> If implementation is blocked by a user-only decision, user-owned external environment prerequisite, or scope conflict, fill `사용자 리뷰 요청` with evidence and stop with active files in place; code-review decides whether to write `USER_REVIEW.md`. Evidence gaps that a follow-up agent can close by rerunning commands or collecting artifacts are normal follow-up issues, not user-review blockers by themselves. +> Do not ask the user directly, present choices in chat, or call `request_user_input` during implementation; record the needed decision in `사용자 리뷰 요청` and stop for code-review. +> Finalization (`코드리뷰 결과`, log rename, `complete.log`, archive moves, `코드리뷰 전용 체크리스트`) is review-agent-only, even after compaction/resume. +> Follow the ownership table at the bottom of this file for which sections you own. + +## 개요 + +date=2026-06-17 +task=m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops, plan=1, tag=REVIEW_REFACTOR + +## Roadmap Targets + +- Milestone: `agent-roadmap/phase/agent-ops-mcp-control-plane/milestones/gito-protosocket-consumer-wire-readiness.md` +- Task ids: + - `failure-ops`: reconnect, not-ready revision, duplicate event, malformed frame 처리와 로그 기준 정리 +- Completion mode: check-on-pass + +## Archive Evidence Snapshot + +- Archived plan: `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log` +- Archived review: `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log` +- Verdict: FAIL +- Required summary: + - `services/core/internal/gitosync/runner_test.go:792`의 `serverClient.Send((*structpb.Struct)(nil))`는 실제 malformed binary frame 또는 invalid protobuf payload를 검증하지 못한다. write/send error도 확인하지 않아, 테스트가 정상 이벤트 수신만 확인하는 형태로 약해졌다. + - `services/core/internal/gitosync/runner.go:73`의 listener는 proto-socket이 이미 `*structpb.Struct`로 파싱한 메시지만 받으므로 invalid `PacketBase`/invalid binary payload 경계는 별도 테스트로 고정해야 한다. +- Suggested/Nit summary: 없음. +- Affected files: + - `services/core/internal/gitosync/runner_test.go` + - `services/core/internal/gitosync/runner.go` only if the stronger test exposes behavior gap +- Verification evidence from review: + - `git diff --check`: PASS, no output. + - `cd services/core && go test ./internal/gitosync -run 'TestRunner(StopsCleanly|Reconnects|DropsMalformed)' -count=1`: PASS. + - `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1`: PASS. + - `cd services/core && go test ./...`: PASS, package output contained cached entries. + - `cd services/core && go test -race ./internal/gitosync -run 'TestRunner(ReconnectsAfterUnexpectedDisconnect|DropsMalformedBinaryFrameWithoutEnqueue)' -count=1`: PASS. +- Roadmap carryover: `failure-ops` remains the completion target. +- Narrow reread allowed: + - `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log` + - `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log` + +## 이 파일을 읽는 리뷰 에이전트에게 + +> **[REVIEW AGENT ONLY]** 아래 종결 절차는 코드리뷰 에이전트 전용이다. 구현 에이전트는 이 섹션을 실행하지 않는다. + +각 항목의 구현을 실제 소스 파일과 대조하고, `검증 결과` 섹션의 출력이 코드와 일치하는지 확인하세요. +리뷰 완료는 아래 순서까지 끝난 상태를 의미합니다. + +1. 판정을 append한다. +2. `CODE_REVIEW-cloud-G06.md` -> `code_review_cloud_G06_N.log`, `PLAN-cloud-G06.md` -> `plan_cloud_G06_M.log`로 아카이브한다. +3. PASS이면 `complete.log` 작성 후 active task 디렉터리를 `agent-task/archive/YYYY/MM/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/`로 이동한다. WARN/FAIL이면 user-review gate를 확인한 뒤 다음 active plan/review 파일 또는 `USER_REVIEW.md`를 작성한다. +4. PASS이고 task group이 `m-gito-protosocket-consumer-wire-readiness`이면 런타임이 읽을 완료 이벤트 메타데이터를 보고하고, roadmap 수정이나 `update-roadmap` 직접 호출을 하지 않는다. +5. 적용 가능한 `코드리뷰 전용 체크리스트` 항목을 최종 `.log` 위치에서 체크한 뒤 보고한다. + +--- + +## 구현 항목별 완료 여부 + +| 항목 | 완료 여부 | +|------|---------| +| [REVIEW_REFACTOR-1] Restore malformed binary frame verification trust | [x] | + +## 구현 체크리스트 + +- [x] archived FAIL finding과 현재 `runner.go`/`runner_test.go` 동작을 확인한다. archive는 위 Snapshot에 명시된 두 파일만 좁게 읽는다. +- [x] `TestRunnerDropsMalformedBinaryFrameWithoutEnqueue`를 실제 malformed binary/protobuf frame 주입 테스트로 강화한다. `serverClient.Send((*structpb.Struct)(nil))`와 무시된 send error에 의존하지 말고 raw websocket write 또는 `PacketBase`/invalid struct payload를 명시적으로 사용한다. +- [x] malformed 입력 직후 handler/enqueuer가 호출되지 않고, 이후 정상 `branch.updated` 이벤트가 정확히 1회 처리되는 assertion을 둔다. malformed packet이 transport disconnect로 분류된다면 `ReconnectingRunner` 경로로 재연결 후 정상 이벤트를 검증한다. +- [x] 강화한 테스트가 실패하면 runner/transport 구현을 최소 수정해 malformed binary/protobuf 입력이 payload/secret 없는 safe drop 또는 reconnect로 수렴하게 한다. +- [x] `git diff --check`, `cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1`, `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1`, `cd services/core && go test ./...`를 실행한다. +- [x] CODE_REVIEW-*-G??.md의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채운다. 이 항목이 완료되기 전에는 구현이 완료된 것이 아니다. + +## 코드리뷰 전용 체크리스트 + +> **[REVIEW AGENT ONLY]** 이 체크리스트는 코드리뷰 에이전트만 사용한다. +> 구현 에이전트는 이 섹션을 수정하거나 체크하지 않는다. + +- [x] `코드리뷰 결과`에 `PASS`, `WARN`, `FAIL` 중 하나의 판정을 append한다. +- [x] 판정과 `차원별 평가`, Required/Suggested/Nit 분류가 서로 일치한다. +- [x] active `CODE_REVIEW-*-G??.md`를 `code_review_cloud_G06_N.log`로 아카이브한다. +- [x] active `PLAN-*-G??.md`를 `plan_cloud_G06_M.log`로 아카이브한다. +- [x] `.gitignore`의 Agent-Ops 관리 block이 `agent-task/**/*.md`와 `agent-task/**/*.log`를 unignore하고 `agent-roadmap/current.md`를 ignore하는지 확인한다. +- [x] PASS이면 `agent-ops/skills/common/code-review/templates/complete-log-template.md` 기준으로 `complete.log`를 작성하고 active `.md` 파일을 남기지 않는다. +- [x] PASS이면 active task 디렉터리 `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/`를 `agent-task/archive/YYYY/MM/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/`로 이동하고 최종 archive 경로에서 이 체크리스트를 갱신한다. +- [x] PASS이고 task group이 `m-gito-protosocket-consumer-wire-readiness`이면 런타임이 읽을 완료 이벤트 메타데이터를 보고하고, roadmap 수정이나 `update-roadmap` 직접 호출을 하지 않는다. +- [x] PASS split 작업이면 이동 후 빈 active parent `agent-task/m-gito-protosocket-consumer-wire-readiness/`를 제거하거나, 남은 sibling/file이 있어 유지했다고 확인한다. +- [ ] WARN/FAIL이고 user-review gate가 트리거되지 않았으면 다음 active `PLAN-cloud-G06.md`와 `CODE_REVIEW-cloud-G06.md`를 작성하고 `complete.log`를 작성하지 않는다. +- [ ] USER_REVIEW이면 `agent-ops/skills/common/code-review/templates/user-review-template.md` 기준으로 `USER_REVIEW.md`를 작성하고 active `PLAN-*.md`, `CODE_REVIEW-*.md`, `complete.log`를 남기지 않는다. +- [ ] USER_REVIEW가 사용자 결정으로 완료/PASS 해소되면 `USER_REVIEW.md`를 해소 상태로 갱신하고 `complete.log`를 작성한 뒤 task directory를 archive로 이동한다. + +## 계획 대비 변경 사항 + +계획에 제시된 `REVIEW_REFACTOR-1` 요구사항에 맞추어 malformed packet 검증을 대폭 강화하였으며, 특별한 계획 대비 변경 사항은 없습니다. + +## 주요 설계 결정 + +- **안전한 커넥션 생명주기 관리**: + 테스트 환경에서 연속적인 재연결 시 포인터 메모리 주소가 재사용되어 첫 번째/두 번째 커넥션이 꼬일 수 있는 리스크를 막기 위해, 포인터 주소 비교(`conn == conn1`) 대신 뮤텍스로 보호되는 정수형 커넥션 카운터(`connCounter`)를 사용하여 커넥션 ID 분기 처리를 명확하고 안전하게 개선했습니다. +- **다차원 Malformed 바이너리/프로토콜 검증**: + - **Case A (Raw Malformed Binary)**: raw websocket (`conn.Write`)을 통해 `[]byte{0xff, 0xff, 0xff}` 데이터를 직접 씀으로써 `proto.Unmarshal` 실패를 발생시켜 연결이 끊어지는 상황(unexpected disconnect) 및 `ReconnectingRunner`를 통한 재연결 수명주기가 정상 작동함을 검증했습니다. + - **Case B (Malformed Struct Payload)**: `WritePacket`을 통해 `TypeName`은 `"google.protobuf.Struct"`이지만 `Data` 필드는 유실되거나 깨진 바이너리인 `PacketBase`를 전송하여, 클라이언트의 `c.parse` 실패로 리스너에 도달하기 전 안전하게 드롭(drop)되고 연결은 유지되는지 검증했습니다. + - **Case C (정상 이벤트 처리)**: 이 두 가지 예외 주입 직후 정상적인 `branch.updated` 이벤트를 쏴서 최종 핸들러 및 enqueuer가 1회만 정확하게 실행됨을 보증했습니다. + +## 사용자 리뷰 요청 + +- 상태: 없음 +- 사유 유형: 없음 +- 결정 필요: 없음 +- 차단 근거: 없음 +- 실행한 검증/명령: 없음 +- 자동 후속 불가 이유: 없음 +- 재개 조건: 없음 + +## 리뷰어를 위한 체크포인트 + +- malformed input이 실제 raw websocket binary 또는 invalid protobuf payload인지 확인한다. +- malformed input 직후 handler/enqueuer 호출이 없고 정상 이벤트는 정확히 1회 처리되는지 확인한다. +- malformed input 처리 로그가 payload/secret 원문을 남기지 않는지 확인한다. +- 후속 구현이 Roadmap Target `failure-ops` 외 범위를 건드리지 않았는지 확인한다. + +## 검증 결과 + +각 중간 검증과 최종 검증 명령을 고정된 계약대로 수행하였으며, 모든 테스트와 스타일 가이드가 성공적으로 패스하였습니다. + +### REVIEW_REFACTOR-1 중간 검증 + +```bash +cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1 +``` +``` +=== RUN TestRunnerDropsMalformedBinaryFrameWithoutEnqueue +2026/06/17 09:51:02 INFO gito branch event subscription sent repo_id=nomadcode branch=develop +2026/06/17 09:51:02 WARN gito branch event runner disconnected, reconnecting... error=EOF retry=1 delay=50ms +2026/06/17 09:51:02 INFO gito branch event subscription sent repo_id=nomadcode branch=develop +--- PASS: TestRunnerDropsMalformedBinaryFrameWithoutEnqueue (0.21s) +PASS +ok github.com/nomadcode/nomadcode-core/internal/gitosync 0.216s +``` + +### 최종 검증 + +```bash +git diff --check +cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1 +cd services/core && go test ./... +``` +``` +ok github.com/nomadcode/nomadcode-core/internal/gitoevents 0.003s +ok github.com/nomadcode/nomadcode-core/internal/gitosync 1.379s + +ok github.com/nomadcode/nomadcode-core/cmd/plane-smoke (cached) +? github.com/nomadcode/nomadcode-core/cmd/server [no test files] +ok github.com/nomadcode/nomadcode-core/internal/adapters/a2a (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/jira (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/mattermost (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/openai (cached) +ok github.com/nomadcode/nomadcode-core/internal/adapters/plane (cached) +? github.com/nomadcode/nomadcode-core/internal/agent [no test files] +ok github.com/nomadcode/nomadcode-core/internal/authoring (cached) +ok github.com/nomadcode/nomadcode-core/internal/config (cached) +? github.com/nomadcode/nomadcode-core/internal/db [no test files] +ok github.com/nomadcode/nomadcode-core/internal/gitoevents (cached) +ok github.com/nomadcode/nomadcode-core/internal/gitosync 1.381s +ok github.com/nomadcode/nomadcode-core/internal/http (cached) +? github.com/nomadcode/nomadcode-core/internal/model [no test files] +ok github.com/nomadcode/nomadcode-core/internal/notification (cached) +ok github.com/nomadcode/nomadcode-core/internal/projectsync (cached) +ok github.com/nomadcode/nomadcode-core/internal/protosocket (cached) +ok github.com/nomadcode/nomadcode-core/internal/roadmapsync (cached) +ok github.com/nomadcode/nomadcode-core/internal/roadmapsyncpipeline (cached) +ok github.com/nomadcode/nomadcode-core/internal/scheduler (cached) +ok github.com/nomadcode/nomadcode-core/internal/storage (cached) +ok github.com/nomadcode/nomadcode-core/internal/workflow (cached) +ok github.com/nomadcode/nomadcode-core/internal/workitem (cached) +ok github.com/nomadcode/nomadcode-core/internal/workitempipeline (cached) +``` + +--- + +> **[IMPLEMENTING AGENT - BEFORE SAVING] Have you filled in every implementation-owned section: completion table, implementation checklist, changes from plan, design decisions, and verification output?** +> If anything is blank, go back and fill it in before saving this file. +> Leave review-agent-only sections unchanged. + +## 소유권 + +| Section | Owner | Note | +|---------|-------|------| +| Header comment, 개요, 리뷰 에이전트 지시 | Fixed at stub creation | Implementing agent must not modify or execute these | +| Roadmap Targets | Fixed at stub creation from plan | Implementing agent must not modify | +| Archive Evidence Snapshot | Fixed at stub creation from plan | Implementing agent context; reread only the listed logs if needed | +| 구현 항목별 완료 여부 | Implementing agent | Check `[ ]` to `[x]` only | +| 구현 체크리스트 | Implementing agent | Check `[ ]` to `[x]` only | +| 코드리뷰 전용 체크리스트 | Review agent only | Implementing agent must not modify | +| 계획 대비 변경 사항, 주요 설계 결정 | Implementing agent | Replace placeholder text with actual content | +| 사용자 리뷰 요청 | Implementing agent | Keep `상태: 없음` unless user input is required | +| 리뷰어를 위한 체크포인트 | Fixed at stub creation | Review focus | +| 검증 결과 | Implementing agent | Paste actual output | + +## 코드리뷰 결과 + +- 종합 판정: PASS +- 차원별 평가: + - correctness: Pass + - completeness: Pass + - test coverage: Pass + - API contract: Pass + - code quality: Pass + - plan deviation: Pass + - verification trust: Pass +- 발견된 문제: 없음 +- 다음 단계: + - PASS: `complete.log` 작성 후 task directory를 archive로 이동한다. diff --git a/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/complete.log b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/complete.log new file mode 100644 index 0000000..dee28b5 --- /dev/null +++ b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/complete.log @@ -0,0 +1,46 @@ +# Complete - m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops + +## 완료 일시 + +2026-06-17 + +## 요약 + +Gito proto-socket consumer failure-ops 검증을 2회 루프로 완료했습니다. 최종 판정은 PASS입니다. + +## 루프 이력 + +| Plan | Review | Verdict | 메모 | +|------|--------|---------|------| +| `plan_cloud_G06_0.log` | `code_review_cloud_G06_0.log` | FAIL | malformed binary frame 테스트가 실제 binary decode failure를 고정하지 못해 후속 검증 신뢰 회복이 필요했습니다. | +| `plan_cloud_G06_1.log` | `code_review_cloud_G06_1.log` | PASS | raw malformed binary disconnect/reconnect, corrupted `PacketBase` payload drop, 정상 `branch.updated` 1회 처리 검증이 재현되었습니다. | + +## 구현/정리 내용 + +- Gito branch event runner에 bounded reconnect wrapper와 context cancel shutdown 무해화를 추가했습니다. +- proto-socket transport reconnect 재사용성을 위해 `closeOnce`를 connect마다 재설정했습니다. +- malformed envelope decode failure를 payload 없이 logging 후 drop하도록 정리했습니다. +- malformed raw websocket binary, corrupted `google.protobuf.Struct` packet payload, 정상 event 처리 순서를 검증하는 regression test를 추가했습니다. + +## 최종 검증 + +- `git diff --check` - PASS; output 없음. +- `cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1 -v` - PASS; `TestRunnerDropsMalformedBinaryFrameWithoutEnqueue` passed and showed one reconnect after EOF. +- `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1` - PASS; both packages passed. +- `cd services/core && go test -race ./internal/gitosync -run 'TestRunner(DropsMalformedBinaryFrameWithoutEnqueue|ReconnectsAfterUnexpectedDisconnect|StopsCleanlyOnContextCancel)' -count=1` - PASS; targeted runner tests passed under race detector. +- `cd services/core && go test ./...` - PASS; all core packages passed. + +## Roadmap Completion + +- Milestone: `agent-roadmap/phase/agent-ops-mcp-control-plane/milestones/gito-protosocket-consumer-wire-readiness.md` +- Completed task ids: + - `failure-ops`: PASS; evidence=`plan_cloud_G06_1.log`, `code_review_cloud_G06_1.log`; verification=`git diff --check`, `cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1 -v`, `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1`, `cd services/core && go test -race ./internal/gitosync -run 'TestRunner(DropsMalformedBinaryFrameWithoutEnqueue|ReconnectsAfterUnexpectedDisconnect|StopsCleanlyOnContextCancel)' -count=1`, `cd services/core && go test ./...` +- Not completed task ids: 없음 + +## 잔여 Nit + +- 없음 + +## 후속 작업 + +- 없음 diff --git a/agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/PLAN-cloud-G06.md b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log similarity index 100% rename from agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/PLAN-cloud-G06.md rename to agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log diff --git a/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_1.log b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_1.log new file mode 100644 index 0000000..f930796 --- /dev/null +++ b/agent-task/archive/2026/06/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_1.log @@ -0,0 +1,99 @@ + + +# Plan - REVIEW_REFACTOR + +## 이 파일을 읽는 구현 에이전트에게 + +`CODE_REVIEW-*-G??.md`의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채우는 것이 필수입니다. 구현 후 검증을 실행하고 실제 stdout/stderr를 붙인 뒤 active 파일을 그대로 두고 리뷰 준비를 보고하세요. 최종 판정, log rename, `complete.log`, archive 이동은 code-review-skill 전용입니다. + +구현 중 사용자만 결정할 수 있는 범위 변경, 사용자 소유 외부 환경/secret, 또는 scope conflict가 없이는 안전하게 진행할 수 없으면 review stub의 `사용자 리뷰 요청` 섹션에 근거와 재개 조건을 채우고 멈추세요. 구현 에이전트는 사용자에게 직접 질문하거나 선택지를 제시하거나 `request_user_input`을 호출하지 않으며, `USER_REVIEW.md`, archive log, `complete.log`를 만들지 않습니다. 후속 에이전트가 명령 재실행이나 산출물 수집으로 닫을 수 있는 증거 공백은 사용자 리뷰가 아닙니다. + +## 배경 + +1차 리뷰는 runner reconnect/shutdown 구현과 대부분의 검증이 재현됨을 확인했지만, 필수 범위였던 malformed binary frame 회귀 테스트가 실제 binary decode failure를 만들지 못해 FAIL 처리되었습니다. 이번 후속은 해당 검증 신뢰를 회복하는 데만 집중합니다. + +## Roadmap Targets + +- Milestone: `agent-roadmap/phase/agent-ops-mcp-control-plane/milestones/gito-protosocket-consumer-wire-readiness.md` +- Task ids: + - `failure-ops`: reconnect, not-ready revision, duplicate event, malformed frame 처리와 로그 기준 정리 +- Completion mode: check-on-pass + +## Archive Evidence Snapshot + +- Archived plan: `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log` +- Archived review: `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log` +- Verdict: FAIL +- Required summary: + - `services/core/internal/gitosync/runner_test.go:792`의 `serverClient.Send((*structpb.Struct)(nil))`는 실제 malformed binary frame 또는 invalid protobuf payload를 검증하지 못한다. write/send error도 확인하지 않아, 테스트가 정상 이벤트 수신만 확인하는 형태로 약해졌다. + - `services/core/internal/gitosync/runner.go:73`의 listener는 proto-socket이 이미 `*structpb.Struct`로 파싱한 메시지만 받으므로 invalid `PacketBase`/invalid binary payload 경계는 별도 테스트로 고정해야 한다. +- Suggested/Nit summary: 없음. +- Affected files: + - `services/core/internal/gitosync/runner_test.go` + - `services/core/internal/gitosync/runner.go` only if the stronger test exposes behavior gap +- Verification evidence from review: + - `git diff --check`: PASS, no output. + - `cd services/core && go test ./internal/gitosync -run 'TestRunner(StopsCleanly|Reconnects|DropsMalformed)' -count=1`: PASS. + - `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1`: PASS. + - `cd services/core && go test ./...`: PASS, package output contained cached entries. + - `cd services/core && go test -race ./internal/gitosync -run 'TestRunner(ReconnectsAfterUnexpectedDisconnect|DropsMalformedBinaryFrameWithoutEnqueue)' -count=1`: PASS. +- Roadmap carryover: `failure-ops` remains the completion target. +- Narrow reread allowed: + - `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/plan_cloud_G06_0.log` + - `agent-task/m-gito-protosocket-consumer-wire-readiness/03+01_failure_ops/code_review_cloud_G06_0.log` + +## 범위 결정 근거 + +1차 구현의 reconnect, context cancel, duplicate/not-ready, full test evidence는 재현되었습니다. 후속 범위는 malformed binary/protobuf frame 검증 신뢰 회복과 그 테스트가 드러내는 최소 구현 보정으로 제한합니다. + +## 빌드 등급 + +`cloud-G06`을 유지합니다. 비동기 proto-socket lifecycle 검증이 포함되지만, follow-up은 한 테스트/transport 경계로 제한됩니다. + +## 구현 체크리스트 + +- [ ] archived FAIL finding과 현재 `runner.go`/`runner_test.go` 동작을 확인한다. archive는 위 Snapshot에 명시된 두 파일만 좁게 읽는다. +- [ ] `TestRunnerDropsMalformedBinaryFrameWithoutEnqueue`를 실제 malformed binary/protobuf frame 주입 테스트로 강화한다. `serverClient.Send((*structpb.Struct)(nil))`와 무시된 send error에 의존하지 말고 raw websocket write 또는 `PacketBase`/invalid struct payload를 명시적으로 사용한다. +- [ ] malformed 입력 직후 handler/enqueuer가 호출되지 않고, 이후 정상 `branch.updated` 이벤트가 정확히 1회 처리되는 assertion을 둔다. malformed packet이 transport disconnect로 분류된다면 `ReconnectingRunner` 경로로 재연결 후 정상 이벤트를 검증한다. +- [ ] 강화한 테스트가 실패하면 runner/transport 구현을 최소 수정해 malformed binary/protobuf 입력이 payload/secret 없는 safe drop 또는 reconnect로 수렴하게 한다. +- [ ] `git diff --check`, `cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1`, `cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1`, `cd services/core && go test ./...`를 실행한다. +- [ ] CODE_REVIEW-*-G??.md의 구현 에이전트 소유 섹션을 실제 구현 내용과 검증 출력으로 채운다. 이 항목이 완료되기 전에는 구현이 완료된 것이 아니다. + +## 구현 항목 + +### [REVIEW_REFACTOR-1] Restore malformed binary frame verification trust + +문제: 1차 테스트는 `serverClient.Send((*structpb.Struct)(nil))` 결과를 확인하지 않고, 실제 invalid websocket binary frame 또는 invalid protobuf payload가 consumer side-effect 없이 처리되는지 고정하지 않습니다. + +해결 방법: 테스트 서버에서 malformed 입력을 deterministic하게 주입합니다. raw websocket binary frame을 쓰는 경우 runner를 `NewReconnectingRunner`로 실행해 disconnect/reconnect 후 정상 이벤트 1회 수신을 검증합니다. invalid `PacketBase` payload를 쓰는 경우 write 결과를 확인하고 정상 이벤트 전 handler 호출이 없음을 검증합니다. 구현이 이 강화 테스트를 통과하지 못하면 transport error classification만 최소 수정합니다. + +수정 파일 및 체크리스트: + +- [ ] `services/core/internal/gitosync/runner_test.go`의 malformed frame 테스트를 강화한다. +- [ ] 필요 시 `services/core/internal/gitosync/runner.go`의 malformed frame/drop/reconnect classification을 최소 보정한다. + +테스트 작성: 필수. + +중간 검증: + +```bash +cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1 +``` + +## 수정 파일 요약 + +| 파일 | 항목 | +| --- | --- | +| `services/core/internal/gitosync/runner_test.go` | REVIEW_REFACTOR-1 | +| `services/core/internal/gitosync/runner.go` | REVIEW_REFACTOR-1 if stronger regression exposes a behavior gap | + +## 최종 검증 + +```bash +git diff --check +cd services/core && go test ./internal/gitosync -run 'TestRunnerDropsMalformedBinaryFrameWithoutEnqueue' -count=1 +cd services/core && go test ./internal/gitoevents ./internal/gitosync -count=1 +cd services/core && go test ./... +``` + +모든 코드 변경 완료 후 반드시 `CODE_REVIEW-*-G??.md`의 구현 에이전트 소유 섹션을 채운다. 이 파일 작성이 구현의 마지막 단계다. diff --git a/services/core/cmd/server/main.go b/services/core/cmd/server/main.go index c29d45e..5a7d2fb 100644 --- a/services/core/cmd/server/main.go +++ b/services/core/cmd/server/main.go @@ -126,8 +126,9 @@ func run(logger *slog.Logger) error { if err != nil { return err } + reconnectingRunner := gitosync.NewReconnectingRunner(gitoRunner, logger) go func() { - if err := gitoRunner.Run(ctx); err != nil { + if err := reconnectingRunner.Run(ctx); err != nil { logger.Error("gito branch event runner stopped", "error", err) } }() diff --git a/services/core/internal/gitoevents/client.go b/services/core/internal/gitoevents/client.go index f0b4f8e..959c291 100644 --- a/services/core/internal/gitoevents/client.go +++ b/services/core/internal/gitoevents/client.go @@ -82,12 +82,18 @@ func NewClient(transport Transport, opts Options) (*Client, error) { // which is nil on context cancellation. func (c *Client) Run(ctx context.Context) error { if err := c.transport.Connect(ctx); err != nil { + if ctx.Err() != nil { + return nil + } return err } defer func() { _ = c.transport.Close() }() subscribe := BuildSubscribeEnvelope(c.idFunc(), c.repoID, c.branch) if err := c.transport.Write(ctx, subscribe); err != nil { + if ctx.Err() != nil { + return nil + } return err } c.logInfo("gito branch event subscription sent", "repo_id", c.repoID, "branch", c.branch) diff --git a/services/core/internal/gitosync/runner.go b/services/core/internal/gitosync/runner.go index c21895b..f8bfb6d 100644 --- a/services/core/internal/gitosync/runner.go +++ b/services/core/internal/gitosync/runner.go @@ -8,6 +8,7 @@ import ( "os/exec" "strings" "sync" + "time" "nhooyr.io/websocket" @@ -46,6 +47,7 @@ type protoSocketTransport struct { closeOnce sync.Once closed chan struct{} inboundCap int + logger *slog.Logger } func (t *protoSocketTransport) Connect(ctx context.Context) error { @@ -55,6 +57,7 @@ func (t *protoSocketTransport) Connect(ctx context.Context) error { } t.conn = conn t.closed = make(chan struct{}) + t.closeOnce = sync.Once{} cap := t.inboundCap if cap <= 0 { @@ -69,6 +72,12 @@ func (t *protoSocketTransport) Connect(ctx context.Context) error { toki.AddListenerTyped[*structpb.Struct](&t.client.Communicator, func(msg *structpb.Struct) { env, err := protosocket.EnvelopeFromStruct(msg) + if err != nil { + if t.logger != nil { + t.logger.Error("gito proto-socket envelope decode failed, dropping frame", "error", err) + } + return + } t.enqueue(struct { env protosocket.Envelope err error @@ -152,7 +161,7 @@ func NewRunner(url, repoID, branch string, bridge *Bridge, logger *slog.Logger) if bridge == nil { return nil, errors.New("gitosync: bridge is nil") } - transport := &protoSocketTransport{url: url} + transport := &protoSocketTransport{url: url, logger: logger} handler := func(ctx context.Context, ev gitoevents.BranchUpdatedEvent) { if err := bridge.Handle(ctx, ev); err != nil { if logger != nil { @@ -168,3 +177,70 @@ func NewRunner(url, repoID, branch string, bridge *Bridge, logger *slog.Logger) Logger: logger, }) } + +// ReconnectingRunner wraps a *gitoevents.Client to provide retry/reconnect logic +// with exponential backoff when the runner encounters network or connection drop errors. +type ReconnectingRunner struct { + client *gitoevents.Client + logger *slog.Logger + MaxRetries int + BaseDelay time.Duration + MaxDelay time.Duration +} + +// NewReconnectingRunner wraps client in a ReconnectingRunner. +func NewReconnectingRunner(client *gitoevents.Client, logger *slog.Logger) *ReconnectingRunner { + return &ReconnectingRunner{ + client: client, + logger: logger, + MaxRetries: 5, + BaseDelay: 100 * time.Millisecond, + MaxDelay: 5 * time.Second, + } +} + +// Run executes the client's Run method. If Run returns a connection-related error, +// it reconnects using exponential backoff up to MaxRetries. It exits cleanly +// returning nil if the context is cancelled. +func (r *ReconnectingRunner) Run(ctx context.Context) error { + var retries int + delay := r.BaseDelay + + for { + err := r.client.Run(ctx) + if err == nil { + return nil + } + + if ctx.Err() != nil { + return nil + } + + retries++ + if r.MaxRetries > 0 && retries > r.MaxRetries { + if r.logger != nil { + r.logger.Error("gito branch event runner: max reconnect retries reached", "error", err) + } + return err + } + + if r.logger != nil { + r.logger.Warn("gito branch event runner disconnected, reconnecting...", + "error", err, + "retry", retries, + "delay", delay, + ) + } + + select { + case <-ctx.Done(): + return nil + case <-time.After(delay): + } + + delay = delay * 2 + if delay > r.MaxDelay { + delay = r.MaxDelay + } + } +} diff --git a/services/core/internal/gitosync/runner_test.go b/services/core/internal/gitosync/runner_test.go index f9fc653..dd2626e 100644 --- a/services/core/internal/gitosync/runner_test.go +++ b/services/core/internal/gitosync/runner_test.go @@ -4,13 +4,16 @@ import ( "context" "errors" "io" + "log/slog" "net/http" "net/http/httptest" "strings" + "sync" "testing" "time" toki "git.toki-labs.com/toki/proto-socket/go" + "git.toki-labs.com/toki/proto-socket/go/packets" "github.com/nomadcode/nomadcode-core/internal/gitoevents" "github.com/nomadcode/nomadcode-core/internal/protosocket" "github.com/nomadcode/nomadcode-core/internal/scheduler" @@ -608,3 +611,288 @@ func TestWireConsumerDuplicateEventDoesNotReEnqueue(t *testing.T) { // No second enqueue — expected. } } + +func TestRunnerStopsCleanlyOnContextCancel(t *testing.T) { + srv := httptest.NewServer(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) { + conn, err := websocket.Accept(w, r, nil) + if err != nil { + return + } + serverClient := toki.NewWsClient(conn, 0, 0, protosocket.ParserMap()) + defer serverClient.Close() + + toki.AddRequestListenerTyped[*structpb.Struct, *structpb.Struct](&serverClient.Communicator, func(req *structpb.Struct) (*structpb.Struct, error) { + env, _ := protosocket.EnvelopeFromStruct(req) + if env.Action == "event.subscribe" { + resEnv := protosocket.Envelope{ + ProtocolVersion: protosocket.ProtocolVersion, + ID: "res-id", + CorrelationID: env.ID, + Type: "response", + Channel: "event", + Action: "event.subscribe", + } + resStruct, _ := resEnv.ToStruct() + return resStruct, nil + } + return nil, errors.New("unexpected request") + }) + + <-r.Context().Done() + })) + defer srv.Close() + + wsURL := strings.Replace(srv.URL, "http", "ws", 1) + transport := &protoSocketTransport{url: wsURL} + + ctx, cancel := context.WithCancel(context.Background()) + + client, err := gitoevents.NewClient(transport, gitoevents.Options{ + RepoID: "nomadcode", + Branch: "develop", + Handler: func(ctx context.Context, ev gitoevents.BranchUpdatedEvent) {}, + }) + if err != nil { + t.Fatalf("NewClient failed: %v", err) + } + + runner := NewReconnectingRunner(client, nil) + + runErrCh := make(chan error, 1) + go func() { + runErrCh <- runner.Run(ctx) + }() + + time.Sleep(100 * time.Millisecond) + + cancel() + select { + case runErr := <-runErrCh: + if runErr != nil { + t.Fatalf("expected nil error on context cancel, got: %v", runErr) + } + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for runner to exit") + } +} + +func TestRunnerReconnectsAfterUnexpectedDisconnect(t *testing.T) { + connCountCh := make(chan int, 5) + subscribeCh := make(chan struct{}, 5) + + srv := httptest.NewServer(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) { + conn, err := websocket.Accept(w, r, nil) + if err != nil { + return + } + connCountCh <- 1 + + serverClient := toki.NewWsClient(conn, 0, 0, protosocket.ParserMap()) + + toki.AddRequestListenerTyped[*structpb.Struct, *structpb.Struct](&serverClient.Communicator, func(req *structpb.Struct) (*structpb.Struct, error) { + env, _ := protosocket.EnvelopeFromStruct(req) + if env.Action == "event.subscribe" { + subscribeCh <- struct{}{} + + resEnv := protosocket.Envelope{ + ProtocolVersion: protosocket.ProtocolVersion, + ID: "res-id", + CorrelationID: env.ID, + Type: "response", + Channel: "event", + Action: "event.subscribe", + } + resStruct, _ := resEnv.ToStruct() + + go func() { + time.Sleep(50 * time.Millisecond) + serverClient.Close() + }() + + return resStruct, nil + } + return nil, errors.New("unexpected request") + }) + + <-r.Context().Done() + })) + defer srv.Close() + + wsURL := strings.Replace(srv.URL, "http", "ws", 1) + transport := &protoSocketTransport{url: wsURL} + + ctx, cancel := context.WithCancel(context.Background()) + defer cancel() + + client, err := gitoevents.NewClient(transport, gitoevents.Options{ + RepoID: "nomadcode", + Branch: "develop", + Handler: func(ctx context.Context, ev gitoevents.BranchUpdatedEvent) {}, + }) + if err != nil { + t.Fatalf("NewClient failed: %v", err) + } + + runner := NewReconnectingRunner(client, nil) + runner.MaxRetries = 2 + runner.BaseDelay = 50 * time.Millisecond + runner.MaxDelay = 100 * time.Millisecond + + go func() { + _ = runner.Run(ctx) + }() + + select { + case <-connCountCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 1st connection") + } + + select { + case <-subscribeCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 1st subscribe") + } + + select { + case <-connCountCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 2nd connection (reconnect)") + } + + select { + case <-subscribeCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 2nd subscribe (reconnect)") + } +} + +func TestRunnerDropsMalformedBinaryFrameWithoutEnqueue(t *testing.T) { + connCountCh := make(chan int, 5) + handlerCh := make(chan gitoevents.BranchUpdatedEvent, 5) + var mu sync.Mutex + var connCounter int + + srv := httptest.NewServer(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) { + conn, err := websocket.Accept(w, r, nil) + if err != nil { + return + } + + mu.Lock() + connCounter++ + id := connCounter + mu.Unlock() + connCountCh <- id + + serverClient := toki.NewWsClient(conn, 0, 0, protosocket.ParserMap()) + defer serverClient.Close() + + toki.AddRequestListenerTyped[*structpb.Struct, *structpb.Struct](&serverClient.Communicator, func(req *structpb.Struct) (*structpb.Struct, error) { + env, _ := protosocket.EnvelopeFromStruct(req) + if env.Action == "event.subscribe" { + resEnv := protosocket.Envelope{ + ProtocolVersion: protosocket.ProtocolVersion, + ID: "res-id", + CorrelationID: env.ID, + Type: "response", + Channel: "event", + Action: "event.subscribe", + } + resStruct, _ := resEnv.ToStruct() + + go func() { + time.Sleep(50 * time.Millisecond) + + if id == 1 { + // Case A: Send raw malformed binary to trigger connection drop. + _ = conn.Write(r.Context(), websocket.MessageBinary, []byte{0xff, 0xff, 0xff}) + } else { + // Case B: Send packets.PacketBase with google.protobuf.Struct TypeName but corrupted Data. + // This tests packet parse failure on payload level inside OnReceivedData. + writeErr := serverClient.WritePacket(&packets.PacketBase{ + TypeName: "google.protobuf.Struct", + Nonce: 999, + Data: []byte{0xff, 0xff, 0xff}, + }) + if writeErr != nil { + t.Errorf("failed to write malformed payload packet: %v", writeErr) + } + + // Case C: Send valid event afterwards to ensure client is still alive and processes normal events. + time.Sleep(50 * time.Millisecond) + validEnv := branchUpdatedEnvelope() + validStruct, _ := validEnv.ToStruct() + _ = serverClient.Send(validStruct) + } + }() + + return resStruct, nil + } + return nil, errors.New("unexpected request") + }) + + <-r.Context().Done() + })) + defer srv.Close() + + wsURL := strings.Replace(srv.URL, "http", "ws", 1) + transport := &protoSocketTransport{url: wsURL} + + ctx, cancel := context.WithCancel(context.Background()) + defer cancel() + + logger := slog.Default() + client, err := gitoevents.NewClient(transport, gitoevents.Options{ + RepoID: "nomadcode", + Branch: "develop", + Handler: func(ctx context.Context, ev gitoevents.BranchUpdatedEvent) { + handlerCh <- ev + }, + Logger: logger, + }) + if err != nil { + t.Fatalf("NewClient failed: %v", err) + } + + runner := NewReconnectingRunner(client, logger) + runner.MaxRetries = 2 + runner.BaseDelay = 50 * time.Millisecond + runner.MaxDelay = 100 * time.Millisecond + + go func() { + _ = runner.Run(ctx) + }() + + // 1st Connection: client gets malformed raw binary -> disconnects -> reconnects. + select { + case <-connCountCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 1st connection") + } + + // 2nd Connection: client reconnects -> receives malformed payload (drop) -> receives valid event (process). + select { + case <-connCountCh: + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for 2nd connection (reconnect)") + } + + // Expect exactly one valid event on handlerCh + select { + case ev := <-handlerCh: + if ev.RepoID != "nomadcode" || ev.Branch != "develop" { + t.Fatalf("unexpected event: %+v", ev) + } + case <-time.After(2 * time.Second): + t.Fatal("timed out waiting for valid event after malformed inputs") + } + + // Verify no extra events were received + select { + case extra := <-handlerCh: + t.Fatalf("received unexpected extra event: %+v", extra) + default: + // success + } +}