무엇을, 누구에게, 어떻게 물었나
설계는 합성 결과의 정당성을 높이는 장치가 아니라, 쓸 수 있는 범위를 좁고 분명하게 정하는 장치입니다.
보고서가 답하는 질문
| 질문 | 짧은 답 (합성 응답·진단) | 근거 |
|---|---|---|
| 어떤 미래상이 기대와 우려를 함께 일으키는가 | ②초장수는 기대가 가장 높으나(4.95) 140세 국가목표에는 982명이 반대하고, ①지능강국은 불안이 가장 높으며(4.93) 수용도가 가장 낮음(2.77) | 제5장 제2·4절 |
| 어떤 문항과 집단에서 반응이 불안정하거나 쏠리는가 | 신뢰 축은 반복 일치도가 낮고(.309), A5·F01·F03은 거의 한 값에 몰리며, 교통 노선 동의는 거주지와 거의 겹침 | 제4장, 제5장 제4절 |
| 사람에게 반드시 확인할 질문은 무엇인가 | 비용 부담 주체, AI 위임 범위, 140세 목표 반대 이유, 학력별 소외 차이, 청년의 첫 일자리 진입 경로 | 제8장 제3절 |
| 미래상 초안의 어느 문장을 고칠 것인가 | 원문은 유지하고 비용 부담자·책임 주체·조정 절차를 적는 실행조건 문장을 추가 | 제7장 제3절 |
답하지 않는 질문: 국민의 찬성률 · 2045년의 실제 여론 · 시민 숙의를 대신하는 정책 정당성 · 합성 페르소나 방법의 일반 타당도 (별도 학술 설계 대상)
표본
- 원천: Nemotron-Personas-Korea (CC-BY-4.0, 판본 ada0f5b5), 통계 기반 합성 인물 100만 명
- 쿼터 1,000명: 연령대·성·시도 셀별 인구 비율로 인원을 배분하고 셀 안에서 무작위 추출(시드 42). 확률표본이 아님
- 원천 대비 편차: 학력 최대 1.54%p, 전체 항목 최대 1.93%p(가구형태)
- 구성: 20대 13.5%, 30대 15.0%, 40대 17.5%, 50대 20.3%, 60대 17.8%, 70세 이상 14.9%, 만 19세 1.0% · 남 49.5%, 여 50.5%
- 레드팀 20명: 초고령 독거, 지방 군 단위 청년, 농어업, 현장 노동, 한부모, 주거 취약, 미취업 청년 등 20개 역할마다 1명. 본조사와 겹치지 않고 본문 통계에 합치지 않음
- 근거 수준: grounding gradient 결과에 따라 프로파일 카드(인구 속성 + 생활 서사) 수준으로 응답
문항 190개
L1 · 공통 문항 73문항
STEPI 작성 문항 원문을 바꾸지 않고 유지. 위원·청년·대국민 비교의 기준
L2 · 확장 문항 117문항
2020 시계열 문항과 페르소나 전용 심층 문항
구성: 개방형 7문항(대국민 설문과 같은 문안, 응답 순서상 맨 앞) · A 전반 전망 · B 미래상별 평가 · C 우선순위 · D 충돌 인식과 정책 명제 · E 도전과제 선택(25개, 페르소나마다 순서 무작위) · 미래상 심층 모듈 6개 · F 구현수단 문항
| 판본 | 날짜 | 내용 |
|---|---|---|
| v0.1 | 2026-07-05 | 미래모빌리티 28문항 파일럿 |
| v0.3 | 2026-07-24 | 미래상 정본 반영 100문항 (6관점 × 4층위) |
| v0.4 | 2026-08-09 | 파일럿 v0.3 결과 반영 |
| v0.5 | 2026-08-10 | 연구진 협의 반영 190문항 확정 (본조사 판본) |
6미래상 × 6축
약칭입니다. 기관 공식 제목과의 대응은 보고서 부록 B-5에 있으며 기관 확인 대기 항목입니다.
기대
미래상이 가져올 좋은 변화에 대한 기대
체감성
변화가 내 삶에 닿는다고 느끼는 정도
소외
혜택에서 밀려날 것 같은 정도 (높을수록 부정)
불안
변화에 대한 걱정 (높을수록 부정)
신뢰
추진 주체와 제도에 대한 믿음
수용도
단계적 도입, 구체적 생활 변화 수용, 추세 대비 지지를 합친 복합 점수
6축은 검증된 심리 척도가 아니라 관측 요약이며 1~5점입니다. 요인 수 판단은 기준에 따라 6개와 15개로 엇갈립니다.
수집 설계: 3회 반복, 조건 비교, 8모델, 레드팀, 원탁
본조사 3회
같은 1,000명에게 같은 190문항을 세 차례. 차수마다 미래상 심층 모듈과 제시문 순서만 달리함. 3차는 전원 같은 모델 설정이며 기본 분석 자료
반복 비교 집단
세 차례 모두 같은 모델 계열(Claude Opus)로 응답한 것으로 판정된 인물. 반복 일치도는 이 집단만으로 계산
조건 비교
같은 50명에게 1차와 같은 순서로 다시 물음. 컨텍스트 설정이 달라 민감도 자료로만 씀
M-arm 8개 모델
Claude Opus(기준), Claude Sonnet, GPT Sol, GPT Terra, Gemini Pro, Gemini Flash, Grok 추론형, Grok 4.6
레드팀
극단·취약 조건. 본조사가 놓친 우려를 찾는 발견용
합성 원탁회의
AI 인프라와 탄소중립, 교통망과 균형발전. 쟁점 발굴 보조 자료이며 사람 원탁회의를 대신하지 않음
본조사·조건 비교·8모델을 합친 수집 규모 4,650응답, 별도로 레드팀 60응답
증거 위계
| 등급 | 근거 | 역할 |
|---|---|---|
| A | 수집 후 고정한 원 응답, 입력 확인값, 응답 점검 기록, 분석 코드 | 수치와 실행 사실의 기준 |
| B | 사람 조사·워크숍 원자료 | 수렴·발산과 정책 맥락의 기준 |
| C | 합성 응답 내부의 반복 비교와 AI 모델 간 비교 | 안정성과 모델에 따른 민감도 |
| D | 페르소나 서사와 대표 발언 | 가설과 후속 질문의 설명 자료. A·B를 대신하지 않음 |
거버넌스
동결, 출처 표, 생성과 점검의 분리, 별도 구현 재계산. 칩 위에 커서를 올리면 저장 파일 경로와 SHA-256 앞 12자리가 보입니다.
판정선 사전 확정
축별 반복 일치도 판정선(.75 안정, .50 조건부, .50 미만 불안정)을 자료를 보기 전에 정하고 불안정 축도 표시와 함께 보고함
D-7
표본·입력 동결
1,000명 표본은 시드 42로 추출해 실행 전에 동결. 세 차수 명단이 같고 누락·중복 없음. 분석 입력 파일의 해시가 동결 목록과 전수 일치함을 확인한 뒤 계산
D-2 D-25 D-22
출처 표 (부록 D)
본문 수치마다 저장 분석 파일 번호 D-n을 붙이고, 부록 D에 경로·인용 키·SHA-256 앞 12자리를 모음. 해시는 파일 동일성만 확인하며 내용 타당성의 보증이 아님
생성 ≠ 점검
설문 설계·제시 순서·응답 점검은 코드가, 응답 생성은 AI 모델이 맡음. 원탁 요약은 발언을 만든 호출과 별도의 기록자 호출이, 입장 변화표는 코드가 계산
D-34 D-35
별도 구현 재계산
레드팀 437셀, 자유서술 1,202셀, 청년워크숍 251셀, 도전과제 빈도 101셀을 별도 구현으로 다시 계산해 모두 일치. 반복 일치도는 단위테스트 25개와 독립 부트스트랩 재현 통과
D-23 D-26 D-40 D-8
사전 선언과 원탁 동결
청년워크숍 사전·사후 비교는 계산 전에 검정 1개만 선언. 원탁회의는 설정·좌석·첫 프롬프트를 연구책임자 승인 뒤 동결하고(15:16) 그 뒤에 첫 호출(15:18)
D-45 D-31 D-38
설계 엄밀성과 그 범위 (보고서 제1장 제7절)
한 것
- 판정 기준의 일부를 자료 전에 정해 불리한 값(신뢰 축 .309)도 그대로 보고했으나, 정식 판정과 보완 대상 분석의 재계산은 끝나지 않음
- 입력과 출력을 해시로 기록해 수치가 어느 파일에서 왔는지 역추적할 수 있게 했으며, 이는 계산의 추적 가능성이지 내용 타당성의 보증이 아님
- 응답을 만드는 쪽과 점검·집계하는 쪽을 나누고, 핵심 계산은 별도 구현으로 다시 계산함
- 반복·모델·조건을 바꿔 결과의 민감성을 탐색했으나, 차수별 조건이 완전히 같지 않아 각 요인의 독립 효과는 분리하지 못함
- 합성 결과를 성격이 다른 두 사람 자료와 맞대어, 맞는 곳과 갈리는 곳을 모두 보고함
- 평균이 가리는 쏠림과 사각지대를 레드팀과 합성 토론으로 따로 찾되, 두 장치 모두 발견용이며 검증용이 아님
- 한계를 결과와 같은 무게로 명시해, 결과가 읽혀서는 안 되는 방향을 미리 막음
더하는 것
- 미국·영어·현재 태도 중심의 선행 연구에 한국어, 공공통계 앵커, 2045 정책 미래상이라는 조건의 사례를 더함
- 반복·모델·조건·사람 자료를 층별로 보고하는 틀, 입력·출력 해시와 재현 명세, 별도 구현 재계산 기록을 다른 정책 과제에서 다시 쓸 수 있는 형태로 남김
- 합성 결과는 사람에게 물을 질문을 정하는 렌즈로만 쓰고 사람 응답의 복제본으로 쓰지 않음
- 여론조사가 아님
- 2026 기준 데이터로 2045를 묻는 외삽
- 성별 이진, 변수 간 결합구조 재현 미보장
- 페르소나 서사의 증분효과를 식별할 대조조건 부재
- 수집 결함: 1차 일부 243명의 다른 모델 응답, 2차 218건의 미해결 모델 출처, 9월 3일 서비스 장애
- 9월 10일 코드 보완 대상인 구조·유형화·모델 비교·사람 대조 분석(D-5·D-6·D-13·D-16)은 보완 뒤 재계산하지 않은 저장본
- 동일 시점·자극·문항의 사람 기준자료가 없어 인간 일치도는 판정하지 못함
사용 경계 — 국민 찬성률, 대표 여론, 시민참여 대체, 자원배분 단독근거에는 어떤 조건에서도 쓰지 않습니다.
부록 D 출처 표
| 번호 | 종류 | SHA-256 앞 12자리 | 비고 |
|---|---|---|---|
| D-1 | 저장 분석 출력 | b1173a5a2313 | 2026-09-07 저장본. 미래상별 값 분모·축 SD 산식 정의는 D-21, 근사 ICC는 사용하지 않음 |
| D-2 | 저장 분석 출력 | 8f6732ff21ee | 완주 직후 데이터 건전성 감사 |
| D-3 | 저장 분석 출력 | 9f6d2da8e31c | 별도 구현 독립 재계산 일치 |
| D-4 | 설계·프로토콜 문서 | bcedf1515022 | |
| D-5 | 저장 분석 출력 | 285805c75aeb | |
| D-6 | 저장 분석 출력 | a9806b57a7ff | |
| D-7 | 저장 분석 출력 | 5ce2a0df321a | 비공개 탐색 실행 1회, 단위테스트 25개·독립 부트스트랩 재현 통과. 판정 구분은 참고용 |
| D-8 | 저장 분석 출력 | 1b60096d5be7 | 2026-09-27 승인 계산. 별도 구현(pandas) 독립 재계산 101셀 일치, 입력 해시 동결 manifest와 전수 일치 |
| D-9 | 저장 분석 출력 | 2d31ea4fd4f8 | |
| D-10 | 저장 분석 출력 | 9d0bb5fc9865 | |
| D-11 | 저장 분석 출력 | b60898bc59b7 | 별도 구현 독립 대조 일치(범주빈도 40·교차셀 100) |
| D-12 | 표 | 138d42cef668 | |
| D-13 | 저장 분석 출력 | 816a7e2d5022 | |
| D-14 | 저장 분석 출력 | 9e5137c30948 | |
| D-15 | 저장 분석 출력 | 5686488cfacc | |
| D-16 | 저장 분석 출력 | 441a1b3536f6 | |
| D-17 | 내부 원장 | 85c46c84af3e | 대국민 온라인 설문 기술통계 |
| D-18 | 내부 원장 | 3ab189cb273e | 2019→2026 시계열 비교, 합성 자료는 1차 초기 스냅샷(n=594) |
| D-19 | 추출 자료 폴더 | 폴더 | 공동 산출물 구조추출(코딩 미실행) |
| D-20 | 표 | 4620e7dac210 | |
| D-21 | 내부 원장 | 96400951d229 | D-1을 만든 계산 코드. 현재 작업본은 안전 점검용으로 축소되어 커밋 판을 기준으로 함 |
| D-22 | 저장 분석 출력 | cf9eeab32204 | 2026-09-27 승인 계산. 입력 78개 파일 해시 동결 manifest와 전수 일치 |
| D-23 | 저장 분석 출력 | 0da5f329f67e | D-22의 별도 구현(pandas) 독립 재계산 437셀 일치 |
| D-24 | 계산 코드 | d6380a30486c | 우려 13·조건 20 코드 규칙 사전(사후 작성) |
| D-25 | 저장 분석 출력 | dd65fcff4429 | 2026-09-27 승인(D15 확장) 결정론적 계산, 모델 호출 0. 입력 1,004개 파일 해시 동결 manifest와 전수 일치 |
| D-26 | 저장 분석 출력 | 115cb54b6b0d | D-25의 별도 구현 독립 재계산 1,202셀 일치, 종합 입장 값과 저장 분석 준비 자료 6,000칸 일치 |
| D-27 | 계산 코드 | d4f6671f8a2f | 18주제·레드팀 사전 + 보충 코드 14개(사후) + 미래상 대응 판정 근거 |
| D-28 | 설계·프로토콜 문서 | 42eeeda8ee2c | 합성 원탁회의 설계 기록. 비수도권 494명 전원 4·5점, 수도권 506명 중 2·3점 403명은 3차 응답 원자료로 2026-09-27 재집계해 일치 확인 |
| D-29 | 설계·프로토콜 문서 | e5dcdec39461 | 원천 자료(100만 명) 대비 표본 분포 점검 |
| D-30 | 설계·프로토콜 문서 | 9fb3ec35fa58 | 페르소나 볼트 v3·그래프DB 재현 명세(별도 산출물) |
| D-31 | 저장 분석 출력 | 125a682cef35 | 연구책임자 승인 뒤 동결(2026-09-27 15:16:26 KST), 첫 호출 15:18:00보다 앞섬. 좌석별 저장 응답 파일 해시 포함 |
| D-32 | 원탁 발언·호출 기록 | 85ac66ba4c72 | AI 인프라와 탄소중립 탁자 기록. 합성 발화 |
| D-33 | 원탁 발언·호출 기록 | 0cd35b33dc8f | 교통망과 균형발전 탁자 기록. 합성 발화 |
| D-34 | 저장 분석 출력 | 8628fc6b11b8 | 기록자 요약(합의점 0건, 부분 수렴 4건, 쟁점 4건). 입장 변화표는 코드 계산 |
| D-35 | 저장 분석 출력 | 9e6153978842 | 기록자 요약(합의점 0건, 부분 수렴 5건, 쟁점 5건). 입장 변화표는 코드 계산 |
| D-36 | 원탁 발언·호출 기록 | ff4d3f7835fc | 재시도 6건 모두 글자 상한 초과 |
| D-37 | 원탁 발언·호출 기록 | b6276b7b55e9 | 재시도 5건 모두 글자 상한 초과 |
| D-38 | 계산 코드 | 55f99fb647f5 | 실행 코드. 해시가 동결본 runner_sha256과 일치해야 실행됨. 프로토콜 설명 report/roundtable/PROTOCOL.md |
| D-39 | 저장 분석 출력 | 379e6c431c47 | 청년워크숍 전면 분석(2026-09-27 연구책임자 지시). 모델 호출 0. 원자료 14개·r3 1,000개 해시 대조 불일치 0. 결정론적(3회 실행 동일) |
| D-40 | 저장 분석 출력 | cc867dc75249 | D-39의 별도 구현(pandas) 독립 재계산 251셀 일치 |
| D-41 | 계산 코드 | 6117300d031c | 본조사 사전(18주제·우려·조건·상충 어휘) import + 청년 보충 규칙(사후 작성) |
| D-42 | 원탁 발언·호출 기록 | f2004ed8fbf1 | 포스트잇 원문 없음, 제공 핵심 키워드만. 접근 제한(0600) |
| D-43 | 표 | 574711b584d5 | 개인 워크시트 25장 손글씨 판독표. 작성자 칸 없음 |
| D-44 | 표 | f3487aed84c5 | '2045 청년의 하루' 장면 30개 코딩표 |
| D-45 | 설계·프로토콜 문서 | c2f92b3a8fd0 | 사전·사후 검정 1개의 사전 선언(계산 전 작성) |
| D-46 | 계산 코드 | 010309cd13c2 | D-39를 만든 계산 코드. 설명서 README.md에 보류 사항(CB-1~8) 결정 기록 |
보고서 v0.9 기준. 파일과 내부 경로는 공개하지 않으며, 해시는 파일 동일성만 확인합니다.
다가오는 행사
요즘 제가 진행하는 세미나와 컨퍼런스입니다. 궁금하시면 오세요.