Kritička rasprava: Metodološka preciznost nasuprot etičkoj odgovornosti: Dvostruka oštrica PCL-R-a u pravosudnom sustavu
Proces izrade seminarskog rada
Debater 1 — napad
§1 Teza nakon ispravaka
Izmjenama je uklonjena jača tvrdnja da PCL-R „može dati korisnu informaciju o grupnom riziku” te je uklonjen izravan zahtjev za „kalibracijom” kao dijelom individualne interpretacije. Preostala formulacija glasi:
„PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama, ali individualno tumačenje mora uzeti u obzir baznu stopu, kontekst procjene, pogrešku mjerenja i druge relevantne podatke [I18] [I19] [I21].”
To više nije ista teza. Izvorna je teza tvrdila ograničenu praktičnu korisnost PCL-R-a za grupni rizik i izrijekom zahtijevala kalibraciju; nova teza tvrdi samo mogućnost povezanosti s grupnim razlikama i navodi opće uvjete opreznog tumačenja. Time je oslabljen, a dijelom i izgubljen središnji odgovor na pitanje iz briefa: kolika je prediktivna korisnost PCL-R-a u odnosu na njegove etičke i metodološke rizike.
Izmjene nisu ostavile nijedno poglavlje formalno bez izvora niti su ispraznile postojeće odjeljke. Međutim, nakon sužavanja ostaje nesklad između:
- naslova i briefa, koji najavljuju analizu „prediktivne korisnosti”;
- poglavlja Faza C i Faza E, koja i dalje govore o „umjerenoj prediktivnoj korisnosti”;
- završne teze, koja sada govori samo o mogućoj povezanosti s grupnim razlikama.
Zato poglavlje o prediktivnoj valjanosti i završni zaključak više nisu potpuno pokriveni istom tezom: analitička razrada zadržava jači pojam korisnosti, dok zaključna formulacija priznaje samo povezanost.
§2 Napadi
Napad 1 — „Umjerena prediktivna korisnost” prelazi ono što nosi sažetna potpora
Meta:
„Rani pregledi izvijestili su o umjerenim do snažnim povezanostima PCL/PCL-R-a s nasilnim i općim recidivizmom [I1].”
i:
„Longitudinalne studije potvrđuju da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].”
Temelj i izvor: tvrdnje se oslanjaju na I1, I2 i I3, koji su u provjeri dostupni samo na razini sažetka. Sažeci mogu poduprijeti postojanje nalaza, ali ovdje se iz njih izvodi širi zaključak o „prediktivnoj korisnosti”, populacijskim razlikama i osjetljivosti na više moderatora.
Razornost: traži ogradu. Treba navesti da se radi o nalazima iz određenih uzoraka i ishoda, bez zaključka o općoj korisnosti PCL-R-a u pravosudnim odlukama. U sadašnjem obliku tvrdnja zvuči kao potvrda šire prediktivne teze, iako je dostupna provjera ograničena na sažetke.
Napad 2 — „Može biti povezan” ne odgovara temi prediktivne korisnosti
Meta:
„PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama, ali individualno tumačenje mora uzeti u obzir baznu stopu, kontekst procjene, pogrešku mjerenja i druge relevantne podatke [I18] [I19] [I21].”
Temelj i izvor: rečenica je nastala izmjenom nalaza 15. Izravno se oslanja na I18, I19 i I21. Zaključane odluke izrijekom su uklonile formulaciju o „korisnoj informaciji” i kalibraciji jer je izvorni opseg bio širi od provjerenog nalaza.
Razornost: podriva zaključak. „Povezanost s grupnim razlikama” nije isto što i prediktivna korisnost, a još je manje isto što i korisnost za pojedinačnu odluku o kazni, uvjetnom otpustu ili tretmanu. Ova formulacija može ostati istinita čak i kada je učinak premalen, nestabilan ili loše kalibriran da bi imao praktičnu vrijednost. Rad zato nakon izmjene više ne daje stvarni odgovor na središnje pitanje briefa, nego ga zamjenjuje gotovo trivijalnom tvrdnjom o mogućoj povezanosti.
Napad 3 — Zaključak ne razlikuje grupnu kriterijsku valjanost od individualne odluke
Meta:
„Suvremena metaanaliza s 217 uzoraka nalazi umjerenu kriterijsku valjanost ukupnog rezultata i Faktora 2 za opći i nasilni recidivizam, ali male učinke za Faktor 1 te heterogenost prema spolu, zemlji i vrsti ishoda [I21].”
Temelj i izvor: Holper i sur. (2025), označen kao I21 i provjeren na punom tekstu.
Razornost: traži ogradu i precizniju preformulaciju. Čak i ako metaanaliza pokazuje umjerenu kriterijsku povezanost, iz toga ne slijedi da ukupni rezultat ili Faktor 2 daju dovoljno preciznu osnovu za individualnu sudsku odluku. U tekstu se odmah nakon toga ne razdvaja:
- diskriminacija između skupina;
- procijenjena apsolutna vjerojatnost ishoda;
- kalibracija u ciljanoj populaciji;
- korisnost odluke uz posljedice pogrešne klasifikacije.
Bez tog prijelaza „umjerena kriterijska valjanost” ostaje statistički nalaz koji se retorički približava praktičnoj korisnosti, iako rad upravo upozorava da se grupni rizik ne smije pretvarati u individualno predviđanje.
Napad 4 — Poglavlje o kalibraciji tvrdi više nego što literatura u radu može pokazati
Meta:
„Kalibracija: podudarnost između procijenjenih razina rizika i stvarnih učestalosti ishoda u ciljanoj populaciji.”
i:
„Instrument može rangirati osobe bez dobro procijenjenih apsolutnih vjerojatnosti Ogonah, M. G. T., Seyedsalehi, A., Whiting, D., & Fazel, S. (2023).”
Temelj i izvor: Ogonah i sur. (2023), I18, provjeren na punom tekstu. Preneseni signal za nacrt izrijekom navodi da korpus „ne daje izravnu lokalnu kalibraciju PCL-R-a”.
Razornost: traži ogradu. Poglavlje ispravno definira kalibraciju, ali ne pokazuje da je PCL-R u ciljanoj pravosudnoj populaciji kalibriran, niti daje lokalne kalibracijske podatke. Definicija i opće upozorenje o AUC-u ne mogu zamijeniti dokaz da konkretna uporaba PCL-R-a daje pouzdane apsolutne vjerojatnosti. Stoga se mora jasno reći da rad objašnjava zašto je kalibracija važna, ali ne može zaključiti da je ona za PCL-R u obrađenom sustavu ostvarena.
Napad 5 — Interrater pouzdanost i sudska primjenjivost nisu ista tvrdnja
Meta:
„U nekim forenzičkim istraživačkim uvjetima ukupni PCL-R rezultat pokazuje visoku interrater pouzdanost [I10].”
i:
„Sudske analize nalaze niže ICC vrijednosti i veće razlike među procjeniteljima [I11] [I13].”
Temelj i izvor: I10, I11 i I13; I10 je dostupan samo kao sažetak, dok se I11 i I13 također vode kao sažeci.
Razornost: traži ogradu. Tekst suprotstavlja istraživačke i sudske nalaze, ali ne navodi dovoljno precizno jesu li uspoređeni isti instrument, isti rezultat, iste čestice i isti kriteriji pouzdanosti. „Visoka” i „niža” pouzdanost mogu se odnositi na različite razine analize. Bez te ograde čitatelj može zaključiti da je razlika posljedica samog sudskog konteksta, iako navedeni čimbenici uključuju dokumentaciju, obuku, iskustvo i dostupnost podataka.
Napad 6 — Adversarijalne razlike nisu dokazane samim razlikama među procjeniteljima
Meta:
„Studije sudskih predmeta i forenzičkih procjena nalaze nižu pouzdanost, veće razlike među procjeniteljima i moguće razlike povezane sa stranom koja je procjenitelja angažirala [I10] [I11] [I12] [I13].”
i:
„Nalazi iz sudskih predmeta pokazuju više rezultate procjenitelja tužiteljstva i češće prelazak praga od 30 [I13] [I14] [I15].”
Temelj i izvor: I10–I15, osobito DeMatteo i sur. (2014), Boccaccini i sur. (2017), Lloyd i sur. (2010) te Harris i sur. (2015). Sam rad već priznaje da se razlike mogu objasniti različitim spisima, intervjuima ili selekcijom predmeta.
Razornost: traži ogradu. Prva rečenica govori o „mogućim razlikama”, ali druga prelazi na formulaciju koja zvuči kao potvrda obrasca povezanog sa stranom angažiranja. Ako procjenitelji nisu ocjenjivali iste slučajeve na temelju istih informacija, razlika u rezultatima ne izolira adversarijalnu pristranost. U sadašnjem obliku rad istodobno priznaje alternativna objašnjenja i retorički zadržava jači zaključak o razlikama prema strani angažiranja.
Napad 7 — Iz tvrdnje o sudskoj upotrebi izvodi se tvrdnja o tretmanskoj dostupnosti
Meta:
„Visoki rezultat često je u pravnim postupcima povezan s procjenama slabije tretmanske dostupnosti Lloyd, C. D., Clark, H. J., & Forth, A. E. (2010).”
Temelj i izvor: Lloyd, Clark i Forth (2010), navedeni kao izvor tvrdnje.
Razornost: traži preformulaciju. Povezanost visokog rezultata s procjenama stručnjaka u pravnim postupcima nije isto što i dokaz da PCL-R predviđa stvarnu slabiju dostupnost tretmanu. Ovdje se miješaju najmanje tri različita ishoda: način na koji stručnjaci opisuju osobu, odluka pravnog sustava i stvarni tretmanski rezultat. Ako se taj lanac ne razdvoji, etiketa može postati dokaz za vlastiti zaključak: visoki rezultat vodi do procjene slabije dostupnosti, a ta se procjena zatim prikazuje kao svojstvo osobe.
Napad 8 — Tvrdnja o Faktoru 2 zanemaruje problem preklapanja konstrukta i ishoda
Meta:
„Kasnije metaanalize pokazale su da je antisocijalna i životnostilska komponenta, odnosno Faktor 2, često prediktivno korisnija od interpersonalno-afektivne komponente.”
Temelj i izvor: Walters (2003), naveden u tekstu, uz raspravu o Cooke i Michie (2001) i Međedović i sur. (2015).
Razornost: traži ogradu. Faktor 2 uključuje antisocijalna i životnostilska obilježja, dok se ishodi odnose na recidivizam. Veća povezanost s recidivizmom stoga može djelomično odražavati blizinu sadržaja između prediktora i kriterija, a ne neovisnu superiornost jedne komponente kao općeg mjernog pokazatelja. Tekst navodi konceptualnu nestabilnost faktora, ali ne povezuje tu ogradu izravno s tvrdnjom o „prediktivnoj korisnosti”.
Napad 9 — Rad koristi „prediktivnu valjanost” i „kriterijsku valjanost” kao da su zamjenjive
Meta:
„Suvremena metaanaliza s 217 uzoraka nalazi umjerenu kriterijsku valjanost ukupnog rezultata i Faktora 2 za opći i nasilni recidivizam…”
nasuprot:
„Definicija: stupanj u kojem rezultat mjere razlikuje osobe koje će i one koje neće doživjeti određeni budući ishod…”
Temelj i izvor: I21 za prvu tvrdnju; definicija prediktivne valjanosti oslanja se na I1, I2 i I21.
Razornost: traži preformulaciju. Kriterijska valjanost i prediktivna valjanost nisu automatski ista tvrdnja. Kriterijska povezanost može uključivati različite načine odnosa s kriterijem, dok prediktivna valjanost zahtijeva jasno određen budući ishod, vremenski okvir i populaciju. Budući da brief traži procjenu prediktivne korisnosti, rad mora izrijekom navesti kada govori o budućem predviđanju, a kada samo o povezanosti s kriterijem. Inače se statistička povezanost neprimjetno pretvara u tvrdnju o prediktivnoj funkciji.
Napad 10 — Poglavlje o inkrementalnoj valjanosti navodi definiciju, ali ne pokazuje inkrementalni doprinos PCL-R-a
Meta:
„Dodatni doprinos mjere predviđanju ishoda nakon što su u model već uključene druge relevantne varijable [I7] [I19].”
i:
„Korelacija PCL-R-a s ishodom sama po sebi ne pokazuje da PCL-R pridonosi iznad ASPD-a, kriminalne povijesti ili drugih instrumenata.”
Temelj i izvor: definicija se oslanja na I7 i I19, a upozorenje na Walters i sur. (2008).
Razornost: podriva zaključak o metodološkoj ravnoteži. Rad ispravno upozorava da korelacija nije inkrementalna valjanost, ali ne prikazuje jasno koji rezultati u radu dokazuju dodatni doprinos PCL-R-a nakon kontrole drugih prediktora. Time inkrementalna valjanost ostaje pojam u pojmovniku, a ne provedena analiza središnje teze. Za temu koja izrijekom traži inkrementalnu valjanost to je sadržajni nedostatak, ne samo terminološka ograda.
Debater 2 — obrana
§1. Provjera mete
U dostavljenom materijalu nema presude prethodnog kruga o ovih deset napada, osim zaključane odluke o preformulaciji završne rečenice. Nijedan napad zato ne proglašavam ponovljenim. Sve navedene mete postoje u odobrenom radu, u obliku u kojem ih napadi navode, osim tvrdnji koje napad pokušava izvesti iz njih, a koje tekst izrijekom ne sadrži.
- Napad 1 — meta postoji. U radu postoje tvrdnje o „umjerenim do snažnim povezanostima” te o „prediktivnoj korisnosti”.
- Napad 2 — meta postoji. Završna rečenica upravo glasi da PCL-R „može biti povezan s grupnim razlikama u riziku”.
- Napad 3 — meta postoji. U radu postoji tvrdnja o „umjerenoj kriterijskoj valjanosti” ukupnog rezultata i Faktora 2.
- Napad 4 — meta postoji. Rad definira kalibraciju i tvrdi da instrument može rangirati osobe bez dobro procijenjenih apsolutnih vjerojatnosti.
- Napad 5 — meta postoji. Rad izravno uspoređuje istraživačku i sudsku interrater pouzdanost.
- Napad 6 — meta postoji. Rad navodi moguće razlike povezane sa stranom angažiranja te više rezultate procjenitelja tužiteljstva.
- Napad 7 — meta postoji. Rad navodi povezanost visokog rezultata s procjenama slabije tretmanske dostupnosti.
- Napad 8 — meta postoji. Rad tvrdi da je Faktor 2 često prediktivno korisniji od Faktora 1.
- Napad 9 — meta postoji. U radu se pojavljuju i „kriterijska valjanost” i „prediktivna valjanost”.
- Napad 10 — meta postoji. Rad definira inkrementalnu valjanost, ali ne navodi konkretan rezultat o dodatnom doprinosu PCL-R-a.
§2. Odgovor na svaki napad
Napad 1 — opseg tvrdnje o prediktivnoj korisnosti
Presuda: napad stoji.
Rad već navodi ograničenja prema populaciji, dobi, prethodnom ponašanju i drugim čimbenicima, ali rečenica o „umjerenim do snažnim povezanostima” i rečenica o „potvrđivanju” prediktivne korisnosti ostavljaju širi dojam nego što dostupna razina provjere omogućuje. Rad omogućuje samo užu obranu: nalazi su vezani uz određene populacije i ne daju opći zaključak o sudskoj individualnoj uporabi.
Cijena ustupka: gubi se jačina izraza „umjerene do snažne” i glagola „potvrđuju”. Ne ostaje poglavlje bez pokrića, ali tvrdnja o općoj prediktivnoj korisnosti postaje slabija.
Najmanja izmjena:
Longitudinalne studije navode da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].
izvedeno iz: „Longitudinalne studije potvrđuju da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].”
Napad 2 — „povezanost” nije isto što i prediktivna korisnost
Presuda: napad stoji, ali rad ne omogućuje ogradu koja bi vratila jaču tvrdnju o korisnosti.
Zaključana odluka već je suzila formulaciju s korisnosti na povezanost. Ta nova rečenica ne tvrdi da PCL-R ima praktičnu vrijednost za individualnu sudsku odluku, ali zbog toga više ne daje puni odgovor na središnje pitanje briefa. Rad ne omogućuje dodavanje tvrdnje o stvarnoj korisnosti, kalibriranom predviđanju ili odluci za pojedinca.
Cijena ustupka: završni zaključak više ne nosi punu tezu o ravnoteži prediktivne korisnosti i etičkih rizika. Ostaje samo ograničena tvrdnja o grupnim razlikama i oprezu pri individualnom tumačenju; poglavlje o prediktivnoj korisnosti ostaje jače od zaključka.
Najmanja izmjena: rad ne omogućuje dopuštenu ogradu koja bi popravila taj nedostatak bez uvođenja nove činjenične tvrdnje. Zaključana formulacija mora ostati takva kakva jest.
Napad 3 — grupna valjanost nije individualna odluka
Presuda: napad djelomično ne pogađa postojeću tvrdnju.
Meta-analitička rečenica govori o kriterijskoj valjanosti, a ne izrijekom o individualnoj odluci. Neposredno drugdje rad navodi da grupna AUC-vrijednost nije individualna vjerojatnost recidivizma, da procjena rizika nije determinističko predviđanje te da individualno tumačenje mora uzeti u obzir baznu stopu, pogrešku mjerenja i kontekst. Stoga napad ne dokazuje da rad iz te rečenice izvodi individualnu odluku.
Ipak, napad opravdano upozorava da prijelaz između meta-analitičkog nalaza i praktične sudske uporabe nije dovoljno izričit.
Cijena ustupka: ako se prihvati uža formulacija, gubi se dio određenosti o veličini učinka, ali se ne gubi pokriće poglavlja.
Najmanja izmjena:
Suvremena metaanaliza s 217 uzoraka nalazi kriterijsku valjanost ukupnog rezultata i Faktora 2 za opći i nasilni recidivizam, ali male učinke za Faktor 1 te heterogenost prema spolu, zemlji i vrsti ishoda [I21].
izvedeno iz: „Suvremena metaanaliza s 217 uzoraka nalazi umjerenu kriterijsku valjanost ukupnog rezultata i Faktora 2 za opći i nasilni recidivizam, ali male učinke za Faktor 1 te heterogenost prema spolu, zemlji i vrsti ishoda [I21].”
Napad 4 — nema izravne lokalne kalibracije PCL-R-a
Presuda: napad stoji.
Rad omogućuje definiciju kalibracije i opće upozorenje da rangiranje nije isto što i dobro procijenjena apsolutna vjerojatnost. Međutim, ne omogućuje tvrdnju da je PCL-R u konkretnoj pravosudnoj populaciji kalibriran, niti omogućuje tvrdnju o lokalnim kalibracijskim podacima.
Cijena ustupka: poglavlje o kalibraciji ostaje metodološko, a ne empirijski dokaz primjerenosti PCL-R-a u ciljanoj populaciji. Zaključak ne može tvrditi da je kalibracija ostvarena.
Najmanja izmjena: rad ne omogućuje ogradu koja bi izrijekom dodala da lokalna kalibracija nije prikazana. Takva bi tvrdnja zahtijevala nov činjenični navod koji nije sadržan u odobrenom tekstu. Postojeća rečenica o tome da instrument može rangirati osobe bez dobro procijenjenih apsolutnih vjerojatnosti može ostati bez proširenja.
Napad 5 — istraživačka i sudska pouzdanost nisu izravno usporedive
Presuda: napad stoji.
Rad navodi moguće razloge razlike — dokumentaciju, obuku, iskustvo, motivaciju i kontekst — ali ne razjašnjava jesu li uspoređeni isti rezultati, čestice i kriteriji pouzdanosti. Zato se iz postojećeg teksta ne može sigurno izvesti da je sama sudska uporaba uzrok niže pouzdanosti.
Cijena ustupka: gubi se snažniji kontrast između „visoke” istraživačke i „niže” sudske pouzdanosti. Ostaje oprezniji zaključak o razlikama među kontekstima.
Najmanja izmjena:
U nekim forenzičkim istraživačkim uvjetima ukupni PCL-R rezultat pokazuje interrater pouzdanost [I10], dok sudske analize nalaze različite vrijednosti i razlike među procjeniteljima [I11] [I13].
izvedeno iz: „U nekim forenzičkim istraživačkim uvjetima ukupni PCL-R rezultat pokazuje visoku interrater pouzdanost [I10].” i „Sudske analize nalaze niže ICC vrijednosti i veće razlike među procjeniteljima [I11] [I13].”
Napad 6 — razlike među procjeniteljima nisu same po sebi adversarijalna pristranost
Presuda: napad stoji u odnosu na jaču drugu metu; prva je već oprezno formulirana.
Rečenica o „mogućim razlikama” već priznaje neizvjesnost. Međutim, tvrdnja da nalazi „pokazuju” više rezultate procjenitelja tužiteljstva i češći prelazak praga može zvučati kao potvrda adversarijalnog učinka, iako rad navodi alternativna objašnjenja poput različitih spisa i selekcije predmeta.
Cijena ustupka: gubi se dio empirijske odlučnosti, ali ostaje tvrdnja da su takvi obrasci zabilježeni u navedenim sudskim nalazima. Ne ostaje poglavlje bez pokrića.
Najmanja izmjena:
Nalazi iz sudskih predmeta navode više rezultate procjenitelja tužiteljstva i češći prelazak praga od 30 [I13] [I14] [I15].
izvedeno iz: „Nalazi iz sudskih predmeta pokazuju više rezultate procjenitelja tužiteljstva i češće prelazak praga od 30 [I13] [I14] [I15].”
Napad 7 — procjena tretmanske dostupnosti nije stvarni tretmanski ishod
Presuda: napad pada.
Meta postoji, ali napad joj pripisuje jače značenje nego što ga tekst ima. Rečenica govori o „procjenama slabije tretmanske dostupnosti”, a ne tvrdi da PCL-R dokazuje stvarnu neuspješnost tretmana ili nepromjenjivost osobe. Štoviše, u istom poglavlju rad izrijekom razlikuje empirijsku prognozu ishoda, kliničku odluku o tretmanu i vrijednosni zaključak da je osoba „nepopravljiva”.
Zato napad ne pogađa tvrdnju u obliku u kojem postoji.
Napad 8 — Faktor 2 i preklapanje s kriterijem
Presuda: napad stoji.
Rad navodi konceptualnu nestabilnost faktora, ali tu ogradu ne povezuje izravno s tvrdnjom da je Faktor 2 prediktivno korisniji. Budući da Faktor 2 uključuje antisocijalna i životnostilska obilježja, postojeći tekst ne daje dovoljno usku formulaciju za zaključak o njegovoj općoj superiornosti kao mjere.
Cijena ustupka: gubi se izravna tvrdnja da je Faktor 2 „prediktivno korisniji”. Ostaje samo opreznija tvrdnja o razlikama u nalazima među faktorima; rasprava o faktorskoj strukturi ostaje pokrivena.
Najmanja izmjena:
Kasnije metaanalize pokazale su razliku u prediktivnoj korisnosti između Faktora 2 i Faktora 1.
izvedeno iz: „Kasnije metaanalize pokazale su da je antisocijalna i životnostilska komponenta, odnosno Faktor 2, često prediktivno korisnija od interpersonalno-afektivne komponente Walters, G. D. (2003).”
Napad 9 — kriterijska i prediktivna valjanost
Presuda: napad pada.
U radu se ta dva pojma ne koriste kao automatski sinonimi. Rečenica o I21 govori o kriterijskoj valjanosti, dok pojmovnik zasebno definira prediktivnu valjanost kao razlikovanje osoba prema budućem ishodu te upozorava da grupna AUC-vrijednost nije individualna vjerojatnost. Samo susjedstvo tih tvrdnji nije dokaz njihova izjednačavanja.
Napad bi bio osnovan da tekst iz „kriterijske valjanosti” izravno izvodi individualno predviđanje, ali takva meta u radu ne postoji.
Napad 10 — inkrementalna valjanost ostaje samo definirana
Presuda: napad stoji.
Rad omogućuje definiciju inkrementalne valjanosti i upozorenje da sama korelacija ne dokazuje dodatni doprinos. Ne omogućuje, međutim, odgovor na pitanje daje li PCL-R stvarni doprinos iznad ASPD-a, kriminalne povijesti ili drugih instrumenata. To je sadržajni nedostatak u odnosu na brief, a ne samo terminološki problem.
Cijena ustupka: poglavlje o inkrementalnoj valjanosti ostaje pojmovno i upozoravajuće, ali ne empirijski analitičko. Središnja teza o metodološkoj ravnoteži ostaje bez potpunog odgovora u toj dimenziji.
Najmanja izmjena: rad ne omogućuje dopuštenu ogradu koja bi dodala rezultat o inkrementalnom doprinosu. Svaka takva tvrdnja zahtijevala bi novu činjeničnu tvrdnju, brojku, usporedbu ili izvor koji nisu sadržani u odobrenom radu.
§3. Što teza i dalje nosi
Napadi ne uklanjaju sljedeće tvrdnje koje ostaju izravno pokrivene odobrenim radom:
- PCL-R je mjera psihopatskih obilježja koja se temelji na intervjuu i dokumentaciji.
- PCL-R nije samostalna dijagnoza niti automatsko predviđanje budućeg nasilja.
- Prediktivni nalazi ovise o populaciji, ishodu, vremenskom okviru i drugim čimbenicima.
- U određenim populacijama postoje nalazi povezanosti PCL-R-a s nasilnim i općim recidivizmom.
- Nalazi su heterogeni prema spolu, zemlji i vrsti ishoda.
- Faktor 1 i Faktor 2 nemaju jednaku prediktivnu ulogu u svim modelima i uzorcima.
- Grupna diskriminacija, AUC i kriterijska povezanost nisu isto što i individualna vjerojatnost ishoda.
- Bazne stope i pogreška mjerenja relevantne su za individualno tumačenje.
- Kalibracija je različita od diskriminacije, ali rad ne dokazuje da je konkretna uporaba PCL-R-a lokalno kalibrirana.
- Interrater pouzdanost može se razlikovati među kontekstima i razinama analize.
- Razlike među procjeniteljima ne mogu se automatski pripisati adversarijalnoj pristranosti.
- Visok rezultat može biti povezan s procjenama slabije tretmanske dostupnosti, ali to nije isto što i dokaz stvarne neuspješnosti tretmana.
- Rezultat PCL-R-a ne treba pretvarati u moralnu etiketu, tvrdnju o nepromjenjivosti ili automatski zaključak o neuspjehu tretmana.
- Sama korelacija s ishodom ne dokazuje inkrementalnu valjanost.
§4. Najmanja izmjena koja spašava tezu
Tezu je moguće spasiti samo u užem obliku: PCL-R u radu može ostati prikazan kao mjera čiji se nalazi o grupnim razlikama pojavljuju u određenim populacijama, uz istodobno naglašavanje heterogenosti, pogreške mjerenja, baznih stopa i razlike između kriterijske povezanosti i individualne odluke. Nije dopušteno vratiti tvrdnju o praktičnoj individualnoj korisnosti, lokalnoj kalibraciji ili inkrementalnom doprinosu jer ih odobreni rad ne nosi.
Za neposredno spašavanje ključnih napadnutih mjesta dovoljne su ove izmjene:
- Sužavanje tvrdnje o prediktivnoj korisnosti na „može se pojaviti u određenim populacijama”.
- Uklanjanje izravnog prijelaza s kriterijske valjanosti na individualnu sudsku odluku.
- Preoblikovanje razlike među kontekstima pouzdanosti bez tvrdnje da je sudski kontekst sam uzrok razlike.
- Preoblikovanje adversarijalnog nalaza iz „pokazuju” u „navode”.
- Sužavanje tvrdnje o Faktoru 2 na postojanje razlike u prediktivnoj korisnosti.
- Neuvođenje nove tvrdnje o lokalnoj kalibraciji ili inkrementalnoj valjanosti; za ta dva pitanja rad dopušta samo ograničenje opsega, ne i empirijski zaključak.
Debater 3 — presuda
§0. Zaključane odluke — prenosi se doslovno
| Br. nalaza | Radnja | Uklonjeno / promijenjeno | Razlog iz recenzije | Status |
|---|---|---|---|---|
| 15 | IZNOVA_IZVEDI_TVRDNJU | „Primjereniji zaključak jest da može dati korisnu informaciju o grupnom riziku u određenim populacijama, ali njegova individualna interpretacija zahtijeva kalibraciju, kontekst, procjenu pogreške i uporabu drugih relevantnih podataka [I19] [I20] [I21].” → „PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama, ali individualno tumačenje mora uzeti u obzir baznu stopu, kontekst procjene, pogrešku mjerenja i druge relevantne podatke [I18] [I19] [I21].” | Izvorni opseg je širi od izravno provjerenog nalaza o kalibraciji. | izvršeno; odluka je zaključana |
Nizvodne faze ove odluke ne smiju poništiti. Zahtjev za povratom uklonjene tvrdnje ili proširenjem sužene vraća se provjeri literature, ne piscu. Dodavanje reference nije osnova za povrat tvrdnje koja je sužena zbog atribucije.
PRENESENI SIGNALI
- signali_za_nacrt — PREGLED_BEZ_POZICIONIRANJA; predmet: I1; I5; I17; I18; I19; I20; I21; opis: Dokument se na postojeće preglede i metaanalize uglavnom poziva kao na izvore pojedinačnih tvrdnji, ali ih ne pozicionira sustavno kao prethodne sinteze prema kojima zauzima vlastiti analitički stav.
- signali_za_nacrt — TANKA_KALIBRACIJSKA_LITERATURA; predmet: Poglavlje 4; opis: Korpus podupire raspravu o AUC-u, baznim stopama i individualnom odlučivanju, ali ne daje izravnu lokalnu kalibraciju PCL-R-a.
- razvrstavanje neslaganja po tvrdnji: EMPIRIJSKI_ODLUČIVO / KONCEPTUALNO_NEODLUČIVO
- poglavlja s oznakom samo_sazetak: true
Za poglavlja s oznakom samo_sazetak: true nema stavki; sva poglavlja u prenesenoj pokrivenosti imaju vrijednost false.
§1. Po napadu
Napad 1 — „Umjerena prediktivna korisnost” prelazi ono što nosi sažetna potpora
Napad stoji. Tvrdnje o „umjerenim do snažnim povezanostima” i „prediktivnoj korisnosti” oslanjaju se na izvore dostupne samo na razini sažetka, pa se ne smiju širiti na opću korisnost u pravosudnom odlučivanju. Obrana je osnovano prihvatila sužavanje na nalaze koji se mogu pojaviti u određenim populacijama.
Napad 2 — „Može biti povezan” ne odgovara temi prediktivne korisnosti
Napad stoji. Zaključana formulacija dopušteno govori samo o grupnim razlikama i oprezu pri individualnom tumačenju, ali više ne nosi tvrdnju o praktičnoj prediktivnoj korisnosti za pojedinačne sudske odluke. Obrana je u pravu da se ta tvrdnja ne smije vratiti; njezina slabost posljedica je zaključane odluke, a ne razlog za njezino poništavanje.
Napad 3 — Zaključak ne razlikuje grupnu kriterijsku valjanost od individualne odluke
Napad traži ogradu. Sama rečenica o kriterijskoj valjanosti ne tvrdi individualno predviđanje, ali njezin položaj u analizi može omogućiti takav prijelaz ako se ne razdvoje grupna diskriminacija, apsolutna vjerojatnost, kalibracija i odluka za pojedinca. Obrana je djelomično osnovana u tvrdnji da postojeće definicije već podupiru tu razliku.
Napad 4 — Poglavlje o kalibraciji tvrdi više nego što literatura može pokazati
Napad stoji. Rad definira kalibraciju i upozorava na razliku između rangiranja i apsolutnih vjerojatnosti, ali ne pokazuje da je PCL-R lokalno kalibriran u ciljanoj pravosudnoj populaciji. Obrana ispravno zaključuje da se ne smije dodati tvrdnja o ostvarenoj kalibraciji, ali mora ostati jasna ograda o dosegu poglavlja.
Napad 5 — Interrater pouzdanost i sudska primjenjivost nisu ista tvrdnja
Napad stoji. U radu nisu dovoljno precizno razdvojeni rezultati, čestice i kriteriji pouzdanosti koji se uspoređuju u istraživačkim i sudskim uvjetima. Obrana je opravdano prihvatila uklanjanje izraza „visoka” i „niža”, jer sama razlika među kontekstima ne dokazuje da je sudski kontekst njezin uzrok.
Napad 6 — Adversarijalne razlike nisu dokazane samim razlikama među procjeniteljima
Napad stoji. Rečenica o mogućim razlikama već je ograđena, ali tvrdnja da nalazi „pokazuju” više rezultate procjenitelja tužiteljstva može zvučati kao dokaz pristranosti iako postoje alternativna objašnjenja. Obrana je pravilno suzila glagol na „navode”, čime se zadržava nalaz bez zaključka da je uzrok nužno strana angažiranja.
Napad 7 — Iz tvrdnje o sudskoj uporabi izvodi se tvrdnja o tretmanskoj dostupnosti
Napad pada. Meta govori o procjenama slabije tretmanske dostupnosti, a ne o dokazanom stvarnom neuspjehu tretmana ili nepromjenjivosti osobe. Rad već izrijekom razlikuje procjenu stručnjaka, pravnu odluku i stvarni tretmanski ishod.
Napad 8 — Tvrdnja o Faktoru 2 zanemaruje preklapanje konstrukta i ishoda
Napad stoji. Budući da Faktor 2 uključuje antisocijalna i životnostilska obilježja, njegova veća povezanost s recidivizmom ne mora pokazivati opću superiornost komponente kao mjere. Obrana je opravdano prihvatila sužavanje, ali formulacija mora ostati dovoljno oprezna da ne tvrdi više od same razlike u nalazima.
Napad 9 — „Prediktivna valjanost” i „kriterijska valjanost” nisu zamjenjive
Napad pada. Rad ih ne definira kao sinonime: kriterijska valjanost pojavljuje se u opisu metaanalitičkog nalaza, a prediktivna valjanost je zasebno definirana uz budući ishod i vremenski okvir. Sama uporaba oba pojma u istom radu ne dokazuje njihovo izjednačavanje.
Napad 10 — Inkrementalna valjanost ostaje samo definirana
Napad stoji. Rad definira inkrementalnu valjanost i upozorava da korelacija nije dovoljna, ali ne prikazuje rezultat o dodatnom doprinosu PCL-R-a iznad drugih relevantnih prediktora. Obrana je ispravno zaključila da se taj empirijski doprinos ne smije dodati bez novog izvora ili tvrdnje.
§2. Što preživi
Tvrdnje koje izdrže
- PCL-R se temelji na intervjuu i dokumentacijskim podacima.
- PCL-R nije samostalna dijagnoza niti automatsko predviđanje budućeg nasilja.
- Prediktivni nalazi ovise o populaciji, ishodu, vremenskom okviru i drugim čimbenicima.
- U određenim populacijama postoje nalazi povezanosti PCL-R-a s nasilnim i općim recidivizmom.
- Nalazi su heterogeni prema spolu, zemlji i vrsti ishoda.
- Grupna diskriminacija, AUC i kriterijska povezanost nisu isto što i individualna vjerojatnost ishoda.
- Bazne stope i pogreška mjerenja relevantne su za individualno tumačenje.
- Kalibracija se razlikuje od diskriminacije.
- Interrater pouzdanost može se razlikovati među kontekstima i razinama analize.
- Razlike među procjeniteljima ne mogu se automatski pripisati adversarijalnoj pristranosti.
- Visok rezultat može biti povezan s procjenama slabije tretmanske dostupnosti, ali to nije isto što i dokaz stvarne neuspješnosti tretmana.
- Rezultat PCL-R-a ne treba pretvarati u moralnu etiketu, tvrdnju o nepromjenjivosti ili automatski zaključak o neuspjehu tretmana.
- Sama korelacija s ishodom ne dokazuje inkrementalnu valjanost.
Tvrdnje koje ne izdrže
-
„Rani pregledi izvijestili su o umjerenim do snažnim povezanostima” kao širi zaključak o korisnosti.
Postupak: suziti na nalaze iz određenih uzoraka i ishoda. -
„Longitudinalne studije potvrđuju” prediktivnu korisnost.
Postupak: suziti na:„Longitudinalne studije navode da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].”
izvedeno iz: „Longitudinalne studije potvrđuju da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].” -
„Umjerena kriterijska valjanost” ako se retorički prenese kao individualna korisnost.
Postupak: ograditi razlikom između kriterijske povezanosti i individualne odluke. -
„Visoka” istraživačka nasuprot „nižoj” sudskoj pouzdanosti kao izravno usporedivi nalazi.
Postupak: suziti na različite vrijednosti i razlike među procjeniteljima.
izvedeno iz: „U nekim forenzičkim istraživačkim uvjetima ukupni PCL-R rezultat pokazuje visoku interrater pouzdanost [I10].” i „Sudske analize nalaze niže ICC vrijednosti i veće razlike među procjeniteljima [I11] [I13].” -
Tvrdnja da sudski nalazi dokazuju adversarijalnu pristranost.
Postupak: ograditi alternativnim objašnjenjima i koristiti formulaciju „navode”, a ne „pokazuju” kao dokaz uzroka.
izvedeno iz: „Nalazi iz sudskih predmeta pokazuju više rezultate procjenitelja tužiteljstva i češće prelazak praga od 30 [I13] [I14] [I15].” -
„Faktor 2 često je prediktivno korisniji” kao opći zaključak o superiornosti.
Postupak: suziti na postojanje razlike u prediktivnoj korisnosti.
izvedeno iz: „Kasnije metaanalize pokazale su da je antisocijalna i životnostilska komponenta, odnosno Faktor 2, često prediktivno korisnija od interpersonalno-afektivne komponente Walters, G. D. (2003).” -
Zaključak da je PCL-R lokalno kalibriran.
Postupak: ukloniti ako se pojavi; rad ne nosi takvu tvrdnju. -
Empirijski zaključak o inkrementalnom doprinosu PCL-R-a.
Postupak: ukloniti ako se pojavi; rad ga ne dokazuje.
§7. Prijenos u sljedeći krug
Ograde prihvaćene u ovom krugu
-
Tvrdnje o prediktivnoj korisnosti moraju biti ograničene na određene populacije i ishode.
izvedeno iz: „Longitudinalne studije potvrđuju da se prediktivna korisnost može pojaviti u određenim populacijama, primjerice u švedskom forenzičkom uzorku odraslih počinitelja [I2], ali je slabija ili osjetljiva na dob, prethodno ponašanje i druge čimbenike kod mladih počinitelja [I3].” -
Kriterijska valjanost ne smije se prikazati kao individualna sudska vjerojatnost ili odluka.
-
Istraživački i sudski nalazi interrater pouzdanosti ne smiju se prikazati kao izravno usporedivi dokaz da je sudski kontekst sam uzrok razlike.
izvedeno iz: „U nekim forenzičkim istraživačkim uvjetima ukupni PCL-R rezultat pokazuje visoku interrater pouzdanost [I10].” i „Sudske analize nalaze niže ICC vrijednosti i veće razlike među procjeniteljima [I11] [I13].” -
Nalazi povezani sa stranom angažiranja moraju se prikazati kao mogući ili navedeni obrasci, ne kao dokaz adversarijalne pristranosti.
izvedeno iz: „Nalazi iz sudskih predmeta pokazuju više rezultate procjenitelja tužiteljstva i češće prelazak praga od 30 [I13] [I14] [I15].” -
Razlika između Faktora 2 i Faktora 1 ne smije se prikazati kao opća superiornost Faktora 2.
izvedeno iz: „Kasnije metaanalize pokazale su da je antisocijalna i životnostilska komponenta, odnosno Faktor 2, često prediktivno korisnija od interpersonalno-afektivne komponente Walters, G. D. (2003).” -
Kalibracija se smije obraditi kao metodološki kriterij, ali se ne smije tvrditi da je PCL-R lokalno kalibriran u ciljanoj populaciji.
-
Ne smije se dodati empirijski zaključak o inkrementalnom doprinosu PCL-R-a.
Teza kakva je nakon ovog kruga
PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama, ali individualno tumačenje mora uzeti u obzir baznu stopu, kontekst procjene, pogrešku mjerenja i druge relevantne podatke [I18] [I19] [I21]. Prediktivni nalazi, pouzdanost i odnosi među faktorima ovise o populaciji, ishodu, kontekstu procjene i načinu operacionalizacije; postojeći korpus ne dopušta zaključak o lokalnoj kalibraciji, individualnoj praktičnoj korisnosti ili inkrementalnom doprinosu PCL-R-a.
Napadi koji su pali
- Napad 7: tekst govori o procjenama slabije tretmanske dostupnosti, a ne o dokazanom stvarnom neuspjehu tretmana ili nepromjenjivosti osobe.
- Napad 9: kriterijska i prediktivna valjanost u radu nisu predstavljene kao sinonimi.
Poglavlja čija se pokrivenost promijenila zbog ograda ovog kruga
- Poglavlje o prediktivnoj valjanosti: suženo na određene populacije, ishode i vremenske okvire.
- Poglavlje o Faktorima 1 i 2: suženo tako da ne tvrdi opću superiornost Faktora 2.
- Poglavlje o interrater pouzdanosti: više ne smije izravno uspoređivati „visoku” i „nisku” pouzdanost bez razjašnjenja razina analize.
- Poglavlje o adversarijalnim razlikama procjenitelja: zaključak mora ostati na razini navedenih obrazaca i mogućih objašnjenja.
- Poglavlje o kalibraciji: ostaje metodološko; ne daje dokaz lokalne kalibracije.
- Poglavlje o inkrementalnoj valjanosti: ostaje definicijsko i upozoravajuće; ne daje empirijski nalaz o dodatnom doprinosu PCL-R-a.