CATATAN · BUKTI
True Causes diuji dalam simulasi sebelum ada yang memakainya: terhadap jawaban yang sudah diketahui, dan terhadap kursi-kursi yang memberi suara sebagai satu blok. Setiap angka di halaman ini berasal dari simulasi itu, yang disertakan bersama perangkat lunaknya dan dapat dijalankan ulang dalam beberapa menit. Klaim yang tidak dapat kami reproduksi tidak ada di halaman ini.
Sebuah organisasi simulasi dengan dua puluh masalah, lima di antaranya benar-benar penyebab yang dalam. Lima belas orang mengerjakannya, dua ratus kali per baris, memutuskan setiap pasangan seperti yang dilakukan True Causes: satu suara per orang, dituntaskan pada 75% dari suara yang masuk. Karena ini simulasi, kami tahu jawaban yang benar, sehingga kami dapat menghitung berapa banyak dari lima penyebab itu yang akhirnya ditemukan setiap metode — satu-satunya cara jujur untuk menilai sebuah proses, karena tidak ada ruang sungguhan yang punya kunci jawaban.
| Ruang memeringkat berdasarkan apa yang menyakitkan hari ini | Berhenti pada pemungutan suara | Lanjut dan bangun petanya | Peta, dengan kursi khusus untuk bukti |
|---|---|---|---|
| sama sekali tidak | 3.1 dari 5 | 3.9 dari 5 | 4.1 dari 5 |
| sedikit | 2.4 dari 5 | 3.8 dari 5 | 4.1 dari 5 |
| sebagian besar | 0.8 dari 5 | 3.4 dari 5 | 4.0 dari 5 |
| hampir sepenuhnya | tidak satu pun | 0.2 dari 5 | 3.3 dari 5 |
Baca baris paling bawah. Ketika sebuah ruang memeringkat semata-mata berdasarkan apa yang dirasakannya, pemungutan suara tidak menyebut satu pun dari lima penyebab yang sebenarnya, dan membangun peta di atasnya hanya memulihkan 0.2 — penyebab yang tersingkir di pemungutan suara tidak dapat dipulihkan belakangan. Kolom terakhir adalah jalan keluarnya: sisihkan lima tempat di daftar pendek untuk gagasan terlewat yang didukung sumber, dan ruang itu menemukan 3.3 dari 5 dalam kondisi terburuknya. Lalu baca baris paling atas: bahkan ruang tanpa titik buta sama sekali menemukan lebih banyak dengan memetakan daripada dengan memberi suara, 3.9 berbanding 3.1, karena pertanyaan berpasangan dengan 75% adalah alat yang lebih baik daripada pemeringkatan.
Ukuran kelompok kurang menentukan dibanding kecermatan. Dengan orang yang sama cermatnya seperti di atas, panel berisi lima sampai lima puluh orang semuanya menemukan antara 4.0 dan 4.5 dari lima penyebab; panel yang lebih besar menyisakan lebih sedikit pasangan yang diperdebatkan, tetapi setiap anggota menjawab setiap pasangan. Ruang dibagi menjadi kelompok berisi sekitar lima belas orang karena lima belas orang dapat membaca satu dinding dan menjawab pasangan-pasangannya dalam satu sesi, bukan karena angkanya mencapai puncak di situ.
Ada tebing, dan tebing itu manusiawi. Ketika orang keliru pada satu dari lima pengaruh yang nyata, dan pada satu dari sepuluh yang sebenarnya bukan pengaruh, kelompok berisi lima belas orang masih menemukan 4.0 dari 5 penyebab. Ketika mereka salah menjawab satu dari tiga pertanyaan, 78% pasangan tidak pernah tuntas dan petanya menyebut 2.9, sebagian besar dari sedikit pasangan yang tuntas; memilih lima kartu secara acak akan menyebut 1.25. Tujuh puluh lima persen dapat menyerap kesalahan yang tersebar, tetapi tidak dapat mengatasi ruang yang sebagian besar keliru. Inilah sebabnya satu pertanyaan diajukan kepada seluruh panel sekaligus, bukan lima puluh pertanyaan kepada satu orang.
Sebagian jawaban didapat tanpa biaya. Jika kelompok sudah sepakat bahwa A memengaruhi B dan B memengaruhi C, tidak ada yang perlu ditanya tentang A dan C — hal itu sudah mengikuti. Dengan satu suara per orang, jalan pintas ini kecil: hanya menghilangkan 1–3% pertanyaan, karena sebuah kaitan baru tuntas pada 75%, dan dalam 800 uji berpasangan, jalan pintas ini sama sekali tidak mengurangi ketepatan.
Duplikat menghabiskan waktu, bukan penyebab. Biarkan lima keluhan yang paling menonjol masing-masing ada di dinding sebagai tiga kartu dengan rumusan berbeda. Karena setiap kartu yang mendapat stiker ikut disusun strukturnya, tidak ada penyebab sebenarnya yang kehilangan tempat: ruang itu tetap menemukan 4.0 dari lima. Tetapi ruang itu menjawab 830 pasangan, bukan 380. Menggabungkan duplikat itulah yang membuat tahap pasangan tetap singkat.
Organisasi simulasi yang sama, dua puluh masalah, lima penyebab yang sebenarnya. Lima belas orang memutuskan setiap pasangan dengan 75% dari suara yang masuk. Sebagian kursi memberi suara sebagai satu blok: jujur di mana-mana, kecuali di tempat kebenaran merugikan satu penyebab — versi yang paling sulit terlihat, versi yang akan dimainkan oleh agen AI. Ruang berisi tiga puluh orang dijalankan sesuai cara ruang itu dibangun: semua orang menulis di satu dinding, orang-orangnya dibagi ke dalam dua kelompok lewat undian, setiap kartu masuk ke kelompok penulisnya, setiap kelompok menyusun struktur dindingnya sendiri, kebuntuan dikirim ke kelompok yang lain, dan satu putaran penghubung mengajukan akar-akar setiap kelompok berpasangan dengan akar-akar kelompok lainnya. Setiap angka di bawah ini adalah dua ratus ruang simulasi pada pengaturan tersebut.
| kursi yang melawan satu penyebab | penyebab yang disebut | sasaran di lima teratas | ditandai |
|---|---|---|---|
| tidak ada | 4.1 dari 5 | 79% | 4% |
| dua dari lima belas | 3.9 dari 5 | 62% | 78% |
| tiga dari lima belas | 3.8 dari 5 | 43% | 98% |
| empat dari lima belas | 3.7 dari 5 | 34% | 99% |
| enam dari lima belas — dikuasai | 3.6 dari 5 | 30% | 35% |
| tidak ada dari tiga puluh, dua kelompok | 4.6 dari 5 | 94% | 2% |
| empat dari tiga puluh, dua kelompok | 4.5 dari 5 | 90% | 28% |
| delapan dari tiga puluh, dua kelompok | 4.2 dari 5 | 63% | 54% |
Minoritas tidak dapat menambahkan sebuah kaitan. Minoritas dapat mendorong satu penyebab turun di peta: dua kursi dari lima belas menjauhkannya dari lima yang terdalam lebih dari sepertiga dari waktu, empat kursi dua dari tiga kali, dan bagian lain peta tampak baik-baik saja. Namun kursi-kursi yang sama itu selalu berada di pihak minoritas pada setiap pasangan yang menyentuh penyebab itu, dan catatan menandai hal tersebut — 78–99% ruang yang memiliki blok semacam itu dan 4% ruang yang jujur, sebagai angka, tidak pernah sebagai nama. Enam kursi menguasai sebuah kelompok sepenuhnya, dan pada titik itu polanya terlalu umum untuk menonjol. Obatnya ada pada baris-baris terakhir: dalam ruang berisi tiga puluh orang, blok itu terpecah lewat undian dan kebuntuan dikirim ke kelompok yang lain, sehingga empat kursi membiarkan penyebab itu tetap di tempatnya sembilan dari sepuluh kali.
Tidak ada skrip yang berhasil. Pasangan-pasangan itu belum ada sampai pemungutan suara ditutup, jadi setiap kursi harus membaca dan menjawab seperti kursi lainnya, minimal tiga detik per pasangan. Itu menghentikan serbuan, bukan AI. Yang tidak dapat diberikan AI adalah orang yang menjamin dirinya.
Ruang harus dijamin. Ruang gratis untuk dibuka, sehingga ruang palsu dapat mengalahkan suara ruang sungguhan di peta bersama. Putusan sebuah ruang hanya dihitung jika ruang itu milik organisasi yang terverifikasi, punya pemandu yang dipercaya oleh instans tersebut, atau dijamin oleh ruang yang sudah dihitung — dan satu nama adalah satu suara yang dihitung per pertanyaan, berapa pun ruang yang dibukanya. Setiap ruang tetap ditampilkan di peta gabungan, ditandai dihitung atau belum terverifikasi, sehingga pembaca selalu melihat siapa yang berbicara dan putusan siapa yang diperhitungkan. Dalam simulasi — lima ruang sungguhan melawan lima ruang palsu — aturan ini membuat penyebab yang sebenarnya bertahan dari 69 dari 100 uji menjadi seluruh 100.
Jumlah yang disembunyikan sedikit membantu. Ketika sepertiga sampai separuh orang akan meniru apa pun yang sedang unggul, menampilkan jumlah stiker selama pemungutan suara membuat ruang kehilangan sekitar seperlima penyebab: 4.0 dari lima ditemukan berbanding 4.2 bila jumlahnya disembunyikan. Kursi bukti menangkap sebagian besar apa yang terlewat oleh orang banyak; jumlahnya tetap disembunyikan karena metode ini memberi suara dalam diam.
Seberapa cermat orang harus bersikap. Jika setiap orang menjawab benar pasangan yang sulit empat dari lima kali dan pasangan yang mudah sembilan dari sepuluh kali, satu kelompok memulihkan 4.1 dari lima penyebab yang sebenarnya dan ruang berisi dua kelompok memulihkan 4.6. Jika orang salah tiga dari sepuluh kali, 70% pasangan tidak pernah tuntas dan petanya hanya tebakan. Jadi pasangan yang tidak dapat disepakati sebuah kelompok tidak dikembalikan kepada orang yang sama: masing-masing pihak menulis satu kalimat tentang apa yang akan hilang jika pihak lain menang, yang dipublikasikan tanpa nama di samping pasangan itu, dan pasangan itu dikirim ke kelompok lain, yang membaca kalimat-kalimat itu dan menjawabnya dari awal.