virtual-insanity
← 리포트 목록

needs_evidence 42건 에이전트·사유별 분류표

2026-10-16 hermes [hermes, needs_evidence, 운영, 완료보고]

needs_evidence 42건 분류 (조회 2026-10-16 02:42:06 KST, 읽기 전용, 코드 수정 없음)

대상: /Users/ron/.hermes/data/ops_multiagent.db bus_commands WHERE status='needs_evidence' 사유 라벨 = result_note의 '차단 사유: ... . 보완 필요' 구간(한 건에 복수 라벨이면 조합 그대로 1행)

1. 에이전트별 건수

에이전트 건수 비율
guardian 30 71%
cowork 5 12%
analyst-pm 4 10%
analyst-macro 2 5%
ron 1 2%
합계 42 100%

2. 에이전트 × 차단 사유 라벨(조합) 건수

사유 라벨(조합) guardian cowork analyst-pm analyst-macro ron 합계
missing_verification_exit_code 9 0 0 0 0 9
invalid_verification_exit_code 5 1 0 0 1 7
결과 확인 보류 5 2 0 0 0 7
missing_result_or_verification 0 0 4 2 0 6
검증 근거 없음, 결과물과 검증 근거가 없음, 결과 확인 보류 5 0 0 0 0 5
missing_execution_artifact, missing_verification_command, missing_verification_exit_code 2 0 0 0 0 2
검증 근거 없음, 결과 확인 보류 2 0 0 0 0 2
execution_artifact_path_not_found, missing_verification_command, missing_verification_exit_code 1 0 0 0 0 1
completion_result_note_forces_rework, missing_result_or_verification 0 1 0 0 0 1
verification_command_unverifiable 0 1 0 0 0 1
검증 근거 없음, 결과물과 검증 근거가 없음, 결과 확인 보류, completion_result_note_forces_rework, missing_result_or_verification 1 0 0 0 0 1
합계 30 5 4 2 1 42

3. 개별 라벨 단위 건수 (복수 라벨 건은 각 라벨에 중복 집계, 합계≠42)

라벨 건수
결과 확인 보류 15
missing_verification_exit_code 12
missing_result_or_verification 8
검증 근거 없음 8
invalid_verification_exit_code 7
결과물과 검증 근거가 없음 6
missing_verification_command 3
missing_execution_artifact 2
completion_result_note_forces_rework 2
verification_command_unverifiable 1
execution_artifact_path_not_found 1

4. 최근 24시간 신규분 vs 이전분 (기준: updated_at, 조회시각 -24h)

구간 건수 에이전트 CMD
최근 24h 신규 1 cowork 1 #41715
24h 이전 41 guardian 30, cowork 4, analyst-pm 4, analyst-macro 2, ron 1 최초 #40276(2026-09-28) ~ 최후 #41640(2026-10-14 02:41)

신규 1건 = #41715 cowork 'needs_evidence 41건 반복 사유별 완료보고 방지안 정리' (사유: 결과 확인 보류). created_at 기준으로도 동일(1/41).

5. 상위 2개 에이전트와 사유, 반복 재발행

1위 guardian 30건 (71%)

  • 사유: missing_verification_exit_code 포함 12건(단독 9), 결과 확인 보류 포함 13건, 검증 근거 없음 포함 8건. 공통 = 검증 명령의 exit code 미기재/형식 불량.
  • 반복 재발행: 제목이 'needs_evidence N건 …분류/집계/분포' 계열인 건이 24건 (제목 안의 건수만 7~44 사이로 바뀌며 재발행). 정확히 같은 제목 문자열은 0건이고 숫자를 뺀 동일 제목은 아래와 같음.
  • 'needs_evidence N건 반려 사유·에이전트별 분류/집계' 계열: 24회 — CMD 40825, 40842, 40854, 40869, 40902, 41101, 41151, 41233, 41274, 41295, 41316, 41377, 41385, 41387, 41420, 41435, 41485, 41494, 41498, 41504, 41623, 41627, 41628, 41640
  • '지식사랑방 인사이트 생성 실패 원인 분류' 계열: 2회 — CMD 40633, 40994

2위 cowork 5건 (12%)

  • 사유: 결과 확인 보류 2건, verification_command_unverifiable 1, invalid_verification_exit_code 1, completion_result_note_forces_rework+missing_result_or_verification 1.
  • 반복 재발행: 'needs_evidence N건 … 재발 방지안/개선안/방지안 정리' 계열 4회 — CMD 40954, 41348, 41495, 41715 (제목 숫자만 바뀜). 40691은 다른 주제(missing_next_action_section).

참고: 공동 3위 analyst-pm 4건 + analyst-macro 2건 = 전부 missing_result_or_verification

  • '미국 IG(·HY) 크레딧 스프레드 종합 판단' 계열 analyst-pm 4회 — CMD 40874, 40960, 41035, 41067 (파일 기반 판단을 낸 뒤 결과물 경로·검증 누락으로 반려, 재발행 반복)
  • analyst-macro: 40408, 40518 (미국 IG OAS 정리 계열 2회)

6. 해석

  • 42건 중 41건이 24시간 이전에 쌓인 적체이고 guardian 소유가 30건(71%). guardian의 분류표 작성 태스크 자체가 exit code 미기재로 반려되고 재발행되는 순환 구조.
  • 사유는 거의 전부 검증 명령 exit code 누락·형식 불량(missing 12 + invalid 7 = 19건)과 '결과 확인 보류' 템플릿(15건). 인프라 실패(llm_infra_failure) 라벨은 0건.
  • 이번 건은 조회·분류만 했고 코드·설정·DB는 수정하지 않음.