노트 · 근거
True Causes는 누가 쓰기 전에 시뮬레이션으로 시험되었습니다. 알려진 정답에 대해, 그리고 한 덩어리로 투표하는 자리들에 대해. 이 페이지의 모든 숫자는 그 시뮬레이션에서 나왔으며, 시뮬레이션은 소프트웨어와 함께 제공되고 몇 분이면 다시 돌릴 수 있습니다. 재현할 수 없는 주장은 이 페이지에 없습니다.
문제 스무 개 중 다섯 개가 실제로 깊은 원인인, 시뮬레이션 속 조직. 열다섯 명이 행마다 이백 번씩 이 조직을 다루고, 각 쌍을 True Causes와 같은 방식, 즉 한 사람이 한 표씩 던지고 던져진 표의 75%로 판정합니다. 시뮬레이션이므로 정답을 알고 있고, 그래서 각 방법이 그 다섯 개 중 몇 개를 결국 찾는지 셀 수 있습니다. 어떤 실제 방에도 정답표가 없으니, 이것이 절차에 점수를 매기는 유일하게 정직한 방법입니다.
| 방이 오늘 아픈 것으로 순위를 매기는 정도 | 투표에서 멈춤 | 계속해서 지도 만들기 | 지도, 근거를 위한 예약된 자리 포함 |
|---|---|---|---|
| 전혀 아님 | 5개 중 3.1개 | 5개 중 3.9개 | 5개 중 4.1개 |
| 조금 | 5개 중 2.4개 | 5개 중 3.8개 | 5개 중 4.1개 |
| 대부분 | 5개 중 0.8개 | 5개 중 3.4개 | 5개 중 4.0개 |
| 거의 전부 | 하나도 없음 | 5개 중 0.2개 | 5개 중 3.3개 |
맨 아래 행을 보세요. 방이 순전히 느낌대로 순위를 매기면, 투표는 실제 원인 다섯 개 중 하나도 찾지 못하고, 그 위에 지도를 만들어도 0.2개만 되살립니다 — 투표에서 떨어진 원인은 나중에 되찾을 수 없습니다. 마지막 열이 해결책입니다. 출처가 있는 주목받지 못한 아이디어를 위해 후보 목록에 다섯 자리를 남겨 두면, 방은 가장 나쁜 경우에도 5개 중 3.3개를 찾습니다. 그리고 맨 위 행을 보세요. 사각지대가 전혀 없는 방도 투표보다 지도 그리기로 더 많이 찾습니다. 3.9 대 3.1입니다. 75% 기준의 쌍 질문이 순위 매기기보다 나은 도구이기 때문입니다.
그룹 크기보다 신중함이 더 중요합니다. 사람들이 위에서만큼 신중하면, 다섯 명에서 쉰 명까지의 패널은 모두 다섯 원인 중 4.0에서 4.5개를 찾습니다. 패널이 클수록 이견 있음으로 남는 쌍은 줄지만, 구성원 모두가 모든 쌍에 답해야 합니다. 방을 열다섯 명 안팎의 그룹으로 나누는 것은 숫자가 거기서 가장 높아서가 아니라, 열다섯 명이면 보드 하나를 읽고 그 쌍들에 한자리에서 답할 수 있기 때문입니다.
낭떠러지가 있고, 그것은 사람에게서 옵니다. 사람들이 실제 영향은 다섯 개 중 하나꼴로, 영향이 아닌 것은 열 개 중 하나꼴로 잘못 판단해도, 열다섯 명 그룹은 여전히 원인 5개 중 4.0개를 찾습니다. 질문을 세 개 중 하나꼴로 틀리면 쌍의 78%가 끝내 확정되지 않고, 지도는 2.9개를 찾는데 대부분은 확정된 몇 안 되는 쌍 덕분입니다. 카드 다섯 장을 무작위로 고르면 1.25개입니다. 75% 기준은 흩어진 실수는 흡수할 수 있지만, 대부분 틀린 방은 흡수할 수 없습니다. 그래서 질문 쉰 개를 한 사람에게 주지 않고, 질문 하나를 한 번에 패널 전체에게 줍니다.
어떤 답은 공짜로 나옵니다. 그룹이 A가 B에 영향을 주고 B가 C에 영향을 준다고 합의했다면, A와 C에 관해서는 아무에게도 물을 필요가 없습니다 — 이미 따라 나오기 때문입니다. 한 사람이 한 표씩 던질 때 이 지름길의 효과는 작아서 질문의 1–3%만 없애는데, 연결은 75%에서만 확정되기 때문입니다. 그리고 짝지은 실행 800번에 걸쳐 정확도를 전혀 잃지 않았습니다.
중복은 원인이 아니라 시간을 잡아먹습니다. 가장 눈에 띄는 불만 다섯 개가 각각 표현만 다른 카드 세 장으로 보드에 올라 있다고 합시다. 스티커가 붙은 카드는 모두 구조화되므로 어떤 실제 원인도 자리를 잃지 않고, 방은 여전히 다섯 개 중 4.0개를 찾습니다. 하지만 방이 답하는 쌍은 380개가 아니라 830개가 됩니다. 중복을 합치는 것은 쌍 단계를 짧게 유지하기 위해서입니다.
같은 시뮬레이션 속 조직, 문제 스무 개, 실제 원인 다섯 개. 열다섯 명이 각 쌍을 던져진 표의 75%로 판정합니다. 일부 자리는 한 덩어리로 투표합니다. 진실이 원인 하나에 불리한 곳만 빼고 모든 곳에서 정직하게 투표합니다 — 가장 알아채기 어려운 버전, AI 에이전트가 쓸 법한 방식입니다. 서른 명의 방은 실제로 꾸려지는 방식 그대로 시뮬레이션합니다. 모두가 보드 하나에 쓰고, 사람들은 추첨으로 두 그룹에 나뉘며, 각 카드는 작성자의 그룹으로 가고, 각 그룹은 자기 보드를 구조화하고, 교착된 질문은 다른 그룹으로 가며, 연결 라운드에서 각 그룹의 근본 원인을 다른 그룹의 근본 원인과 짝지어 묻습니다. 아래 숫자는 모두 그 설정에서 시뮬레이션한 방 이백 개의 결과입니다.
| 원인 하나를 겨냥한 자리 | 찾은 원인 | 표적이 상위 5개에 | 표시됨 |
|---|---|---|---|
| 없음 | 5개 중 4.1개 | 79% | 4% |
| 열다섯 중 둘 | 5개 중 3.9개 | 62% | 78% |
| 열다섯 중 셋 | 5개 중 3.8개 | 43% | 98% |
| 열다섯 중 넷 | 5개 중 3.7개 | 34% | 99% |
| 열다섯 중 여섯 — 장악됨 | 5개 중 3.6개 | 30% | 35% |
| 서른 중 없음, 두 그룹 | 5개 중 4.6개 | 94% | 2% |
| 서른 중 넷, 두 그룹 | 5개 중 4.5개 | 90% | 28% |
| 서른 중 여덟, 두 그룹 | 5개 중 4.2개 | 63% | 54% |
소수는 연결을 더할 수 없습니다. 원인 하나를 지도에서 아래로 밀어낼 수는 있습니다. 열다섯 중 두 자리면 세 번에 한 번이 넘게 그 원인을 가장 깊은 다섯 개 밖으로 밀어내고, 네 자리면 세 번에 두 번 그렇게 하며, 지도의 나머지는 멀쩡해 보입니다. 하지만 그 자리들은 그 원인에 닿는 모든 쌍에서 소수 쪽에 서게 되고, 기록은 이를 표시합니다 — 그런 덩어리가 있는 방의 78–99%와 정직한 방의 4%를 표시하며, 표시는 이름이 아니라 언제나 숫자입니다. 여섯 자리면 그룹을 통째로 장악하고, 그러면 그 패턴이 너무 흔해서 눈에 띄지 않습니다. 해결책은 마지막 행들입니다. 서른 명의 방에서는 추첨이 덩어리를 쪼개고 교착된 질문은 다른 그룹으로 가므로, 네 자리가 있어도 열 번에 아홉 번은 그 원인이 제자리에 남습니다.
스크립트는 통하지 않습니다. 쌍은 투표가 마감되기 전에는 존재하지 않으므로, 어느 자리든 다른 모든 사람처럼 읽고 답해야 하며, 쌍 하나에 최소 3초가 걸립니다. 이것은 몰아치기는 막지만 AI는 막지 못합니다. AI가 내놓을 수 없는 것은 그것을 보증해 줄 사람입니다.
방은 보증을 받아야 합니다. 방은 무료로 열 수 있으므로, 꾸며 낸 방들이 공유 지도에서 실제 방들을 표로 이길 수 있습니다. 방의 판정은 그 방이 인증된 기관에 속하거나, 인스턴스가 신뢰하는 진행자가 있거나, 이미 집계되는 방이 보증한 경우에만 집계됩니다 — 그리고 이름 하나는 방을 몇 개 열든 질문 하나당 집계되는 목소리 하나입니다. 모든 방은 여전히 합쳐진 지도에 ‘집계됨’ 또는 ‘미인증’으로 표시되어 나타나므로, 읽는 사람은 누가 말했고 누구의 판정이 무게를 가졌는지 언제나 볼 수 있습니다. 시뮬레이션에서 — 실제 방 다섯 개 대 꾸며 낸 방 다섯 개 — 이 규칙은 실제 원인이 살아남는 경우를 100번 중 69번에서 100번 모두로 끌어올립니다.
수를 숨기면 조금 도움이 됩니다. 사람들 중 삼분의 일에서 절반이 앞서가는 쪽을 따라 할 때, 투표하는 동안 스티커 수를 보여 주면 방은 원인을 오분의 일 개쯤 잃습니다. 수를 보여 주면 다섯 개 중 4.0개, 숨기면 4.2개를 찾습니다. 근거를 위한 예약된 자리가 군중이 놓치는 것을 대부분 잡아내고, 수를 숨겨 두는 것은 이 방법이 침묵 속에서 투표하기 때문입니다.
사람들이 얼마나 신중해야 하는가. 각 사람이 어려운 쌍은 다섯 번에 네 번, 쉬운 쌍은 열 번에 아홉 번 맞히면, 그룹 하나는 실제 원인 다섯 개 중 4.1개를, 두 그룹으로 된 방은 4.6개를 찾아냅니다. 사람들이 열 번에 세 번 틀리면 쌍의 70%가 끝내 확정되지 않고 지도는 짐작이 됩니다. 그래서 그룹이 합의하지 못한 쌍은 같은 사람들에게 다시 돌아가지 않습니다. 양쪽이 각자 상대편이 이기면 무엇을 잃게 되는지 한 문장씩 쓰고, 이 문장은 이름 없이 그 쌍 옆에 공개되며, 쌍은 다른 그룹으로 넘어가 그 그룹이 이 문장들을 읽고 새로 답합니다.