Razvijanje protokola i kriterijuma pretrage

Kada formulišete pitanja, potrebno je napisati protokol koji će (1) formalno specificirati pitanja koja nameravate da postavite, (2) odrediti objektivnu strategiju pretrage i (3) uspostaviti kriterijume za uključivanje studija (Davis et al., 2021; Gurevitch et al., 2018; Koricheva et al., 2013).

Specifikacija pitanja koja nameravate da postavite uključuje preciziranje potencijalnih izvora heterogenosti u veličinama efekta (Côté & Jennions, 2013).

Specifikacija objektivne strategije pretrage podrazumeva nepristrasno prikupljanje podataka iz relevantnih radova sa kojima ste već upoznati; u suprotnom, to može uticati na ishod jer je često lakše zapamtiti radove sa značajnim rezultatima. Prvenstveno, to podrazumeva pravljenje liste elektronskih baza podataka koje ćete pretraživati i koje pojmove pretrage ćete koristiti. Sekundarno, objektivna strategija pretrage uključuje odluku o tome koliko truda ćete uložiti u pretragu „sive literature". Na primer, da li ćete pisati kolegama tražeći neobjavljene podatke, i ako da, kome i zašto?

Kada sprovedete pretragu i sastavite listu potencijalnih radova, morate uspostaviti kriterijume za uključivanje studija. Ovi kriterijumi su često prilično očigledni i uključuju sledeće:

1. Da li studija odgovara opsegu pitanja?
2. Da li metodologija odgovara definiciji pitanja?
3. Ako je tako, da li je studija bila dovoljnog obima ili trajanja?
4. Da li studija sadrži podatke koji se mogu izvući, odnosno, da li postoji dovoljno informacija za izvlačenje veličine efekta, njegove varijanse i korišćenog uzorka?
5. Kriterijumi za uključivanje ponekad će morati uzeti u obzir kvalitet studije. Ovo je mnogo teže proceniti od kriterijuma koje smo naveli, ali može biti jednako važno.

Važno je napomenuti, međutim, da će se, kao i u primarnim istraživanjima, vaš protokol za pretragu literature i izvlačenje veličina efekta gotovo sigurno modifikovati kako budete napredovali. Realnost je, stoga, da će u mnogim aspektima vaš konačni protokol opisivati ono što ste uradili, a ne ono što ste idealno želeli da uradite. Prvo, morate reći čitaocu kako ste prikupili svoje podatke. Dakle, kao i u primarnim istraživanjima, pružate čitaocu dovoljno informacija o prikupljanju i analizi podataka kako bi vaš pregled mogao biti ponovljen i ažuriran u budućnosti. Drugo, morate imati protokol koji vas tera da stalno procenjujete da li je vaš uzorak pristrasan. Protokol povećava objektivnost s kojom prikupljate podatke, ali ne bi trebalo da vas zaslepi za realnost da proces meta-analize uključuje brojne subjektivne odluke; one su najvidljivije kada pokušavate da dešifrujete rezultate datog rada i odlučite da li možete izvući potrebne podatke za vašu sintezu (Côté & Jennions, 2013). Ako više osoba prikuplja podatke, dobro opisan i testiran protokol je veoma važan kako bi se osigurala uniformnost u ekstrakciji podataka i odlukama o kodiranju moderatora.