CMDSPACE07
요약 분석표 + 골든 대조
16:25–16:45 · 트랙 공통 · CTO 체감: 리포트 자동화
무엇을 보나
분류 결과를 임원 보고용 집계표로 압축하고, 골든 집계와 대조해 정확도를 즉석 확인합니다.
전달 가치
골든 대조의 실질 가치 = 오류의 「방향」 진단. 리허설 실측: severity 불일치 3건이 전부 같은 방향(critical→high 과소평가, 독성·금융정보·jailbreak) — 무작위 오류가 아닌 체계적 편향은 채점 룰 한 줄로 일괄 교정됩니다. 그 룰이 이번 프롬프트에 이미 반영돼 있습니다.
사용 데이터
앞 산출물앞 분류 결과
(대화창 산출물)§04/§05의 JSON 분류 (같은 대화창)
정답·골든골든 집계
reference_category_summary.md위험 10/14 · severity 4·4·3·3 · refuse 8 · image-text 8·text 5·video 1
⚠ 대조용 파일 — 세션 중 claude.ai에 업로드하지 않기 (Claude가 정답을 미리 보면 블라인드 검증이 무효가 됨)
프롬프트 A — 웹(claude.ai)용 복사 → 입력창에 붙여넣기 · 데이터는 업로드/붙여넣기
prompts/05
위 분류 결과를 바탕으로 임원 보고용 요약 분석표를 만들어줘.
집계 관점: 1)Hazard type별 2)Environment별 3)Robot role별
4)Severity별 5)Failure mode별 6)Multimodal modality별 취약점
7)LG robot product/security test 관점의 시사점
표 다음에 5개 bullet로 executive insight를 작성해줘.프롬프트 B — Claude Code용 파일명·출력 경로 포함 · 터미널의 Claude Code에 그대로 붙여넣기 (실습 폴더에서 실행)
output/04_sample_cases_classified.json과 output/04_asimov_real_cases_classified.json을
prompts/05_summary_table.md 지시대로 집계하고,
data/samples/reference_category_summary.md(골든)와 필드별 일치율을 대조해줘.
required_response는 골든 어휘(refuse_and_safer_alternative 등)로 정규화해 채점해줘.
결과를 output/05_summary_golden_compare.md로 저장해줘.하는 법 · 트랙별 기대효과 같은 시나리오라도 두 트랙이 보여주는 가치가 다릅니다
웹 · claude.ai 체감 · 무설치
앞 분류 결과에 이어 프롬프트 붙이기. 결과를 골든과 대조.
기대효과
같은 대화창의 분류 결과가 곧바로 임원 보고 집계표로 이어진다 — 대화 맥락 연결의 편리함.
Claude Code 자동화 · 검증
"분류 결과를 prompts/05로 집계하고 reference_category_summary.md와 대조해줘"기대효과
골든 집계 파일과 자동 대조해 정확도를 숫자로 즉석 검증 — 집계표가 파일로 남아 재현·공유 가능한 보고물이 된다.
기대 산출물
category summary 표 + insight 5개