Stručna recenzija nacrta: Metodološka preciznost nasuprot etičkoj odgovornosti: Dvostruka oštrica PCL-R-a u pravosudnom sustavu
Proces izrade seminarskog rada
1. Kontrolna lista iz debate
| Stavka | Status | Mjesto u tekstu |
|---|---|---|
| Prediktivna korisnost ograničena je na određene populacije i ishode. | Prošlo | „U literaturi postoje nalazi povezanosti PCL-R-a s nasilnim i općim recidivizmom u određenim populacijama.”; „Takav rezultat ne znači da je PCL-R jednako koristan u svim populacijama.” |
| Grupna kriterijska valjanost nije prikazana kao individualna vjerojatnost ili odluka. | Prošlo | „Takav rezultat ne znači da je PCL-R jednako koristan u svim populacijama.”; „Stoga povezanost između rezultata PCL-R-a i recidivizma ne treba prikazivati kao precizno predviđanje za pojedinca.” |
| AUC nije prikazan kao kalibracija. | Prošlo | „AUC, međutim, ne daje izravno individualnu vjerojatnost recidivizma…”; „Kalibracija se upravo odnosi na podudarnost između procijenjenih razina rizika i stvarnih učestalosti ishoda…” |
| Bazne stope uključene su u individualno tumačenje. | Prošlo | „Ista osjetljivost i specifičnost mogu dovesti do različite pozitivne prediktivne vrijednosti u populacijama s različitim baznim stopama.” |
| Lokalna kalibracija PCL-R-a nije izmišljena. | Prošlo | „Dostupni korpus ne daje izravnu lokalnu kalibraciju PCL-R-a u ciljanoj pravosudnoj populaciji.” |
| Istraživačka i sudska međuprocjeniteljska pouzdanost nisu prikazane kao izravno usporediv dokaz uzroka razlike. | Prošlo | „Ti se nalazi ne smiju prikazati kao izravni dokaz da je sudski kontekst sam uzrok razlike.” |
| Razlike povezane sa stranom angažiranja nisu prikazane kao dokaz adversarijalne pristranosti. | Prošlo | „…ali takvi obrasci sami po sebi ne dokazuju adversarijalnu pristranost.” |
| Faktor 2 nije prikazan kao opće superioran Faktoru 1. | Prošlo | „To ipak nije dovoljno za zaključak da je Faktor 2 općenito superioran.” |
| Nije dodan empirijski zaključak o inkrementalnom doprinosu PCL-R-a. | Prošlo | „…korpus korišten za ovaj rad ne daje dovoljan temelj za opći zaključak o dodatnom doprinosu PCL-R-a…” |
| Procjena slabije tretmanske dostupnosti nije prikazana kao stvarni neuspjeh tretmana ili nepromjenjivost osobe. | Prošlo | „Iz rezultata se ne može automatski izvesti zaključak da je osoba nepromjenjiva ili da će tretman nužno biti neuspješan.” |
| Kriterijska i prediktivna valjanost nisu tretirane kao sinonimi. | Prošlo | Prediktivna valjanost definirana je u odjeljku „Prediktivna korisnost i njezina ograničenja”, dok se kriterijska valjanost navodi kao zaseban metaanalitički nalaz. |
| Nijedan izvor izvan ulaza nije dodan. | Prošlo | Cijeli tekst i popis literature. |
| Svi citati u tekstu imaju zapis u literaturi. | Prošlo | Cijeli tekst i popis literature. |
| Svi zapisi u literaturi citirani su barem jednom u tekstu. | Prošlo | Cijeli tekst i popis literature. |
| U tekstu nema oznake „[provjeriti]”. | Prošlo | Cijeli tekst. |
| Tekst je napisan hrvatskom latinicom. | Prošlo | Cijeli tekst. |
| Nema prenesene formulacije iz debate ili prompta, osim zaključane formulacije predviđene ulazom. | Prošlo | Zaključana formulacija pojavljuje se u uvodu i zaključku; njezina je uporaba predviđena zaključanom odlukom. |
2. Poštivanje zaključanih odluka
Zaključana odluka o sužavanju tvrdnje poštuje se u uvodu i zaključku:
„PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama, ali individualno tumačenje mora uzeti u obzir baznu stopu, kontekst procjene, pogrešku mjerenja i druge relevantne podatke.”
U tekstu se ne pojavljuje uklonjena tvrdnja o „korisnoj informaciji o grupnom riziku” u izvornom, širem opsegu. Ograde uz individualno tumačenje, lokalnu kalibraciju, međuprocjeniteljsku pouzdanost, adversarijalne razlike, Faktor 2, tretman i inkrementalnu valjanost također su zadržane.
Jedna formulacija u odjeljku „Kritička rasprava” zahtijeva preciziranje opsega i prijavljena je kao blokirajući nalaz 1 u nastavku.
3. Nalazi
Nalaz 1 — suženi opseg grupnih razlika nije izrijekom zadržan u kritičkoj raspravi
Mjesto u tekstu:
„Postoje nalazi povezanosti s grupnim razlikama u riziku, ali heterogenost rezultata ograničava njihovu prenosivost na pojedinačne sudske odluke…”
Zašto je problem:
U toj rečenici nije ponovljeno ograničenje „u određenim populacijama”, iako je ono dio zaključane formulacije. Prethodna rečenica navodi da informativna vrijednost ovisi o populaciji, ali sama sumarna tvrdnja može se čitati šire od zaključanog opsega. Time se u jednom odjeljku slabi ograda koja mora vrijediti kroz cijeli tekst.
Kako ispraviti:
Potrebno je u toj rečenici izrijekom zadržati ograničenje na određene populacije. Budući da se radi o opsegu tvrdnje, ne navodi se zamjenska rečenica.
Status: blokirajući nalaz — prekršena zaključana odluka.
Nalaz 2 — ponavljanje središnje teze u više odjeljaka
Mjesta u tekstu:
„PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama…”
„Postoje nalazi povezanosti s grupnim razlikama u riziku…”
„PCL-R može biti povezan s grupnim razlikama u riziku u određenim populacijama…”
Zašto je problem:
Središnja je tvrdnja razrađena u uvodu, ponovno sažeta u kritičkoj raspravi i zatim gotovo doslovno ponovljena u zaključku. Uvod i zaključak opravdano mogu sadržavati tezu, ali kritička rasprava može je sažeti kraće nakon prethodne razrade o heterogenosti, kalibraciji i individualnom tumačenju.
Kako ispraviti:
U kritičkoj raspravi skratiti ponavljanje i zadržati funkciju sinteze, bez ponovnog uvođenja pune zaključane formulacije.
Status: preporuka.
Nalaz 3 — miješanje naziva za međuprocjeniteljsku pouzdanost
Mjesta u tekstu:
„Interrater, odnosno međuprocjeniteljska pouzdanost…”
„U nekim forenzičkim istraživačkim uvjetima ukupni rezultat pokazuje određeni stupanj slaganja procjenitelja…”
„Pouzdanost u jednom kontekstu ne jamči jednak stupanj slaganja u drugom.”
Zašto je problem:
Tekst izmjenjuje engleski naziv interrater pouzdanost, hrvatski naziv „međuprocjeniteljska pouzdanost” i opisni izraz „stupanj slaganja procjenitelja”. Pojmovi nisu pogrešno uporabljeni, ali smanjuju terminološku ujednačenost.
Kako ispraviti:
Preporučeni je naziv „međuprocjeniteljska pouzdanost”; engleski interrater može ostati samo pri prvom spominjanju u zagradi. Opisni izraz „stupanj slaganja procjenitelja” treba upotrebljavati samo kada se objašnjava značenje pojma.
Status: preporuka.
Nalaz 4 — nedosljedan oblik naziva PCL-R-a u punom nazivu
Mjesta u tekstu:
„PCL-R (Psychopathy Checklist–Revised)…”
U popisu literature pojavljuju se oblici:
„Psychopathy Checklist–Revised”
i
„Psychopathy Checklist-Revised”
Zašto je problem:
U punom nazivu izmjenjuju se en-crtica i obična spojnica. Kratica je dosljedna, ali tipografski oblik punog naziva nije.
Kako ispraviti:
Ujednačiti puni naziv na „Psychopathy Checklist–Revised” s en-crticom te zadržati kraticu „PCL-R” u tekstu.
Status: preporuka.
4. SPOR
Nema novih nalaza koji pripadaju provjeri literature.
Recenzija ne procjenjuje točnost brojčanih, bibliografskih ili epidemioloških podataka protiv izvora, niti ponovno odlučuje o širini empirijske potpore pojedinim nalazima. Takva bi procjena pripadala provjeri literature.
5. Nedostajuća literatura
Područja koja su u radnim bilješkama označena kao nepokrivena, a tekst ih ispravno ne prikazuje kao dokazane:
- lokalna kalibracija PCL-R-a u ciljanoj pravosudnoj populaciji;
- izravan empirijski dokaz inkrementalnog doprinosa PCL-R-a u pravosudnom odlučivanju;
- precizna usporedba međuprocjeniteljske pouzdanosti između istraživačkih i sudskih uvjeta;
- izravan dokaz stvarnog neuspjeha tretmana ili nepromjenjivosti osobe;
- izravna procjena učinka PCL-R-a na pojedine vrste pravnih odluka.
6. Odluka i blokirajući nalazi
Odluka: spreman uz navedene izmjene.
Blokirajući nalaz:
- Nalaz 1 — suženi opseg grupnih razlika nije izrijekom zadržan u kritičkoj raspravi.
Nakon uklanjanja tog opsežnog nesklada dokument može prijeći u finalizaciju. Nalazi 2–4 preporuke su uredničke naravi i nisu zapreka za objavu.