Skip to content

docs: AskUserQuestion owner 배정 조사 보고서와 중간발표 자료 - #53

Open
Benzity wants to merge 17 commits into
developfrom
docs/askuser-midterm
Open

Benzity wants to merge 17 commits into
developfrom
docs/askuser-midterm

Conversation

@Benzity

@Benzity Benzity commented Oct 13, 2026

Copy link
Copy Markdown
Collaborator

🔀 Pull Request Title

docs: AskUserQuestion owner 배정 조사 보고서와 중간발표 자료


🎞️ 주요 코드 설명

문서만 추가

  • 앱 코드는 바꾸지 않았다. docs/midterm/에 발표 자료만 추가했다.
  • HTML은 NOMOS 연구 허브(로컬 레포 nomos-hub)의 빌더가 실험 결과 파일에서 숫자를 읽어 만든 생성물이다. 그래서 .prettierignore에 docs/midterm/*.html을 넣었다(포맷을 바꾸면 빌드 결과와 달라진다).

📌 PR 설명

이번 PR에서 어떤 작업을 했는지 요약해주세요.

  • 조사 보고서 docs/midterm/askuser-owner-report.html과 .md: AskUserQuestion을 정할 권한이 있는 사람에게 보내는 문제. Claude Code 구조, 사용자 논의, 실제 질문 데이터, 라우터 비교 실험, 공통 계약 장치 점검, 제안, 8주 평가 계획
  • 중간발표 슬라이드 15장 midterm-deck.html과 .pptx: 장마다 발표자 노트. HTML은 N 키로 노트, F 전체 화면, 인쇄하면 PDF
  • 예상 질문과 답 qna.html과 .md, 사용법 README.md

핵심 숫자(자세한 출처는 보고서)

  • 실제 팀 질문 173개 중 1순위로 대표가 정할 질문 60%
  • 지금 서버 기본 라우터(반대 역할) 정확도: 실제 질문 13.3%
  • LLM이 owner를 직접 고를 때: 실제 질문 94.2%, 백엔드 20문항 95%
  • 확신도가 낮으면 대표에게 넘기는 단계는 역효과(정확도 하락, 대표 부담 증가)
  • 공통 계약 장치 중 계약 대조(V1A)만 비어 있음

먼저 알아 둘 한계

  • 실제 질문 정답은 Claude가 붙인 임시 라벨이다(사람 검수 전).
  • LLM 라우터는 정답을 차단한 Claude 서브에이전트로 돌렸고, 운영 경로의 지연과 비용은 아직 재지 않았다.
  • 라우터 개선 제안은 백엔드 레포에 별도 이슈로 올린다.

📷 스크린샷

UI 변경 없음(문서만).


🤖 Generated with Claude Code

Benzity and others added 17 commits October 13, 2026 05:42
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
@vercel

vercel Bot commented Oct 13, 2026 •

Copy link
Copy Markdown

The latest updates on your projects. Learn more about Vercel for GitHub.

Project Deployment Actions Updated
frontend Ready Ready Preview Oct 13, 2026 5:41am UTC

This branch was successfully deployed

1 active deployment
Preview — 293b9fe7 Deployed Oct 13, 2026 by vercel[bot]
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant