БЕЛЕШКЕ · ДОКАЗИ
True Causes је тестиран у симулацији пре него што га је ико користио: у односу на познат одговор, и против места која гласају као блок. Сваки број на овој страници потиче из тих симулација, које се испоручују уз софтвер и могу се поново покренути за неколико минута. Тврдња коју не можемо да поновимо није на овој страници.
Симулирана организација са двадесет проблема, од којих је пет заиста дубоких узрока. Петнаест људи је пролази, две стотине пута по реду табеле, одлучујући о сваком пару онако како то ради True Causes: свако има један глас, а пар се решава уз 75% датих гласова. Пошто је у питању симулација, знамо тачан одговор, па можемо да пребројимо колико од тих пет свака метода на крају пронађе — једини поштен начин да се оцени поступак, јер ниједна стварна соба нема кључ са тачним одговорима.
| Соба рангира по ономе што данас боли | Станите на гласању | Наставите и изградите мапу | Мапа, уз места резервисана за доказе |
|---|---|---|---|
| нимало | 3.1 од 5 | 3.9 од 5 | 4.1 од 5 |
| мало | 2.4 од 5 | 3.8 од 5 | 4.1 од 5 |
| углавном | 0.8 од 5 | 3.4 од 5 | 4.0 од 5 |
| скоро потпуно | ниједан | 0.2 од 5 | 3.3 од 5 |
Погледајте доњи ред. Када соба рангира искључиво по ономе што осећа, гласање препозна ниједан од пет стварних узрока, а мапа изграђена на томе спасе само 0.2 — узрок изгубљен на гласању не може се касније повратити. Последња колона је решење: задржите пет места на ужем избору за превиђене идеје поткрепљене извором, и соба проналази 3.3 од 5 у најгорем случају. И погледајте горњи ред: чак и соба без икакве слепе тачке проналази више мапирањем него гласањем, 3.9 наспрам 3.1, јер је питање о пару уз 75% бољи инструмент од рангирања.
Величина групе је мање важна од пажње. Када су људи пажљиви као горе, панели од пет до педесет људи сви проналазе између 4.0 и 4.5 од пет узрока; већи панел оставља мање спорних парова, али сваки члан одговара на сваки пар. Соба се дели на групе од петнаестак људи зато што петнаест људи може да прочита један зид и одговори на његове парове у једном седењу, а не зато што бројке ту достижу врхунац.
Постоји литица, и она је људска. Када људи погреше код једног од пет стварних утицаја и код једног од десет непостојећих, група од петнаест људи и даље проналази 4.0 од 5 узрока. Када погреше на једном питању од три, 78% парова се никад не реши и мапа препозна 2.9, углавном из оно мало парова који су се решили; насумичан избор пет картица препознао би 1.25. Седамдесет пет посто може да упије раштркане грешке, али не и собу која углавном греши. Зато се једно питање поставља целом панелу одједном, уместо педесет питања једној особи.
Неки одговори долазе бесплатно. Ако се група сложила да А утиче на Б и да Б утиче на Ц, никога не треба питати за А и Ц — то већ следи. Уз један глас по особи пречица је мала: уклања 1–3% питања, јер се веза решава тек на 75%, а у 800 упарених покретања није коштала нимало тачности.
Дупликати коштају времена, не узрока. Нека пет најуочљивијих притужби стоје на зиду свака као три различито формулисане картице. Пошто се свака картица са налепницом структурира, ниједан стварни узрок не губи своје место: соба и даље проналази 4.0 од пет. Али соба одговара на 830 парова уместо на 380. Спајање дупликата је оно што држи фазу парова кратком.
Иста симулирана организација, двадесет проблема, пет стварних узрока. Петнаест људи одлучује о сваком пару уз 75% датих гласова. Нека места гласају као блок: поштено свуда, осим тамо где истина штети једном узроку — верзија коју је најтеже уочити, она коју би играо AI агент. Соба од тридесет симулира се онако како се гради: сви пишу на један зид, људи се жребом распоређују у две групе, свака картица иде групи свог аутора, свака група структурира сопствени зид, подељено питање иде другој групи, а круг повезивања поставља корене сваке групе наспрам корена друге. Сваки број испод је две стотине симулираних соба са тим подешавањем.
| места против једног узрока | препознати узроци | циљ међу првих пет | означено |
|---|---|---|---|
| ниједан | 4.1 од 5 | 79% | 4% |
| два од петнаест | 3.9 од 5 | 62% | 78% |
| три од петнаест | 3.8 од 5 | 43% | 98% |
| четири од петнаест | 3.7 од 5 | 34% | 99% |
| шест од петнаест — преузета | 3.6 од 5 | 30% | 35% |
| ниједно од тридесет, две групе | 4.6 од 5 | 94% | 2% |
| четири од тридесет, две групе | 4.5 од 5 | 90% | 28% |
| осам од тридесет, две групе | 4.2 од 5 | 63% | 54% |
Мањина не може да дода везу. Може да гурне један узрок ниже на мапи: два места од петнаест држе га ван пет најдубљих у више од трећине случајева, четири места у два случаја од три, а остатак мапе изгледа у реду. Али иста места завршавају у мањини на сваком пару који додирује тај узрок, и запис то означава — 78–99% соба са таквим блоком и 4% поштених, као број, никад као име. Шест места потпуно преузима групу, и тада је образац превише чест да би се издвојио. Лек су последњи редови: у соби од тридесет блок се жребом дели, а подељено питање иде другој групи, па четири места остављају узрок на месту девет пута од десет.
Ниједна скрипта не ради. Парови не постоје док се гласање не затвори, па свако место мора да чита и одговара као и свако друго, најмање три секунде по пару. То зауставља навалу, али не и AI. Оно што AI не може да обезбеди јесте особа која гарантује за њега.
За собе неко мора да гарантује. Собе се отварају бесплатно, па би измишљене собе могле да надгласају стварне на заједничкој мапи. Пресуде собе се рачунају само када она припада потврђеној организацији, има водитеља коме инстанца верује, или је за њу гарантовала соба која се већ рачуна — а једно име је један рачунат глас по питању, ма колико соба отворило. Свака соба се и даље приказује на спојеној мапи, означена као рачуната или непотврђена, па читалац увек види ко је говорио и чије су пресуде имале тежину. У симулацији — пет стварних соба против пет измишљених — правило повећава број покретања у којима стваран узрок опстаје са 69 од 100 на свих 100.
Скривени бројеви помажу мало. Када би трећина до половина људи копирала оно што води, приказивање броја налепница током гласања кошта собу око петине узрока: 4.0 од пет пронађених наспрам 4.2 када су бројеви скривени. Места за доказе хватају већи део онога што мноштво пропусти; бројеви остају скривени зато што метода гласа у тишини.
Колико људи морају да буду пажљиви. Ако свака особа тачно одговори на тешке парове четири пута од пет, а на лаке девет пута од десет, једна група проналази 4.1 од пет стварних узрока, а соба од две групе 4.6. Ако људи греше три пута од десет, 70% парова се никад не реши и мапа је нагађање. Зато се пар око кога група не може да се сложи не враћа истим људима: свака страна напише једну реченицу о томе шта би се изгубило кад би друга страна победила, што се објављује без имена поред пара, а пар иде другој групи, која то чита и одговара изнова.