Ograničenja istraživanja: kako se pišu, a da ne oslabe rad

Ograničenja nisu spisak grešaka nego opis granica onoga što tvoji podaci mogu da pokažu. Razlika je suštinska: greška je nešto što je moglo da se izbegne, ograničenje je posledica izbora koji je u datim uslovima bio razuman. Anketa koja je poslata samo jednoj organizaciji nije greška — nije se moglo drugačije. Ograničenje je to što se nalaz zbog toga ne odnosi na druge organizacije.

Studenti izbegavaju ovaj deo jer im zvuči kao priznavanje slabosti pred komisijom. U praksi je obrnuto. Rad koji tačno zna dokle njegov zaključak seže teže je napasti nego rad koji tvrdi više nego što ima. A pitanja na odbrani skoro uvek pogode upravo ono što je u ograničenjima prećutano.

Pravilo koje rešava većinu dilema: ograničenje se piše u tri dela — šta je bilo ograničeno, na koji nalaz to utiče i u kom smeru. Treći deo je onaj koji ograničenje pretvara iz izvinjenja u analizu, i on je jedini koji komisija zaista ceni.

Primer koji se vodi kroz ceo tekst

Rad istražuje vezu između režima rada i zadovoljstva poslom kod zaposlenih u jednoj IT kompaniji. Upitnik je popunilo 142 zaposlena od 310 pozvanih, merenje se zasniva na samoproceni, a podaci su prikupljeni u jednom trenutku. Svi brojevi su ilustracija zamišljenog istraživanja.

Gde ograničenja stoje u radu

Po pravilu na jednom od tri mesta, zavisno od uputstva fakulteta: na kraju poglavlja o metodologiji, na kraju diskusije, ili u zaključku pre preporuka. Najčešće i najlogičnije je na kraju diskusije — tamo su nalazi već izneti, pa se ograničenje može vezati za konkretan nalaz.

Ono što se ne radi jeste rasipanje ograničenja po celom radu u obliku uzgrednih izvinjenja. Ako se u rezultatima pojavi rečenica „zbog malog uzorka ovo treba uzeti sa rezervom”, pa se ista stvar ponovi u zaključku, čitalac dobija utisak da rad sebe stalno potkopava. Ograničenja idu na jedno mesto, sabrana.

Dužina: obično jedna do dve strane, tri do šest stavki. Spisak od dvanaest stavki nije temeljnost nego znak da se ograničenjem naziva sve i svašta.

Šest vrsta ograničenja

Ograničenje uzorka. Ko je mogao da uđe, ko nije, koliki je odziv i u kom smeru deluje selektivnost. Ovo je najčešće i najvažnije ograničenje u studentskim radovima, i piše se preciznije nego što se obično piše: populacija i uzorak.

Ograničenje merenja. Šta instrument obuhvata, a šta ne. Samoprocena umesto posmatranog ponašanja, skraćena skala, pojam meren jednom stavkom, prevedeni instrument koji nije ponovo proveravan: pouzdanost i validnost.

Ograničenje nacrta. Podaci prikupljeni u jednom trenutku ne mogu da pokažu uzrok ni redosled. Ovo je ograničenje koje pokriva najveći broj diplomskih radova, a najređe se navodi.

Ograničenje obima. Neizmerene varijable koje su mogle da objasne nalaz. U primeru: nivo pozicije, prisustvo dece u domaćinstvu, dužina radnog staža. Ono što nije mereno, ne može se isključiti: varijable u istraživanju.

Ograničenje konteksta i vremena. Jedna organizacija, jedan grad, jedan period. Ako se u tom periodu dogodilo nešto što je moglo da utiče na odgovore, to se kaže.

Ograničenje podataka iz drugih izvora. Ako se koriste tuđe baze ili izveštaji, ograničenja tih izvora postaju i tvoja — način prikupljanja, definicije kategorija, nedostajući podaci.

Obrazac od tri dela

Isti obrazac radi za svako ograničenje: šta → na koji nalaz → u kom smeru.

Slabo: Osnovno ograničenje istraživanja je mali uzorak.

Ne kaže se koliki je, zašto je to problem, ni šta zbog toga ne stoji. Ovakva rečenica ne štiti rad — samo poziva na pitanje.

Jako: Upitnik je popunilo 142 od 310 pozvanih zaposlenih, pri čemu je učešće bilo dobrovoljno. Verovatnije su se odazvali zaposleni sa izraženijim stavom o uslovima rada, pa se prosečna ocena zadovoljstva iz uzorka ne može uzeti kao procena za celu organizaciju. Razlika između grupa po režimu rada je time manje ugrožena, jer nema razloga da selektivnost odziva deluje različito u dve grupe, ali ni ona se ne može preneti na druge organizacije.

Druga verzija radi nešto što prva ne može: odvaja nalaze koji su ugroženi od onih koji nisu. To je najkorisniji potez u celom poglavlju, jer istovremeno priznaje slabost i brani ono što se odbraniti može.

Drugi primer, za nacrt:

Jako: Podaci su prikupljeni jednim merenjem, pa se utvrđena veza između režima rada i zadovoljstva poslom ne može tumačiti kao uzročna. Jednako je moguće da zadovoljniji zaposleni češće dobiju mogućnost rada od kuće, kao i obrnuto. Utvrđivanje smera tražilo bi praćenje istih zaposlenih pre i posle promene režima.

Poslednja rečenica je most ka preporukama za dalja istraživanja — i to je najelegantniji način da se ograničenje zatvori.

Šta se ne piše kao ograničenje

Četiri stvari koje studenti upišu, a koje rade protiv rada.

Nedostatak vremena, novca ili pristupa softveru. To su okolnosti izrade, ne svojstva istraživanja. Komisiju ne zanima koliko si imao vremena nego šta podaci pokazuju.

Nedostatak sopstvenog znanja. „Autor nije imao dovoljno iskustva u statističkoj obradi” ne pomaže nikome; ako obrada ima slabost, opiše se slabost, ne autor.

Greške koje si mogao da ispraviš. Ako si uočio da je jedno pitanje dvosmisleno, to ne ide u ograničenja pošto je upitnik već poslat — ide, ali kao opis šta je sa tom stavkom urađeno u obradi.

Opšta mesta bez sadržaja. „Rezultate treba uzeti sa rezervom”, „istraživanje ima određena ograničenja”, „potrebna su dalja istraživanja”. Sve tri rečenice se mogu prilepiti na bilo koji rad, pa ne govore ništa o ovom.

Postoji i peta stvar, ali se ona ne piše zato što joj ovde nije mesto nego zato što se deo nje mogao izbeći još pre prikupljanja podataka. Šta se na koju od četiri tačke može uraditi unapred, umesto da se na kraju samo prizna: pristrasnost i kako se ograničava.

Ograničenja u kvalitativnom radu

Obrazac ostaje isti, ali se sadržaj menja, jer se tamo ne brani brojčana procena nego tumačenje.

Broj i izbor sagovornika. Ne piše se da ih je bilo malo — mali broj je svojstvo pristupa, ne mana. Piše se koga među njima nije bilo. Ako su svi sagovornici iz iste ustanove ili istog nivoa iskustva, perspektiva koja nedostaje je stvarno ograničenje.

Odnos istraživača i sredine. Ako istražuješ mesto na kom i sam radiš ili studiraš, to utiče i na to šta ti ljudi kažu i na to kako ih čuješ. Rečenica koja to imenuje jača rad; prećutkivanje ga slabi čim komisija primeti vezu.

Način prikupljanja. Razgovor snimljen naspram beleženog, vođen uživo naspram onlajn, u prostoru ustanove naspram van nje — sve troje utiče na otvorenost sagovornika i vredi jedne rečenice.

Tumačenje kao tačka odluke. Kategorije nije izveo podatak nego istraživač. Ako kodiranje nije proveravao niko drugi, to se navodi, uz opis postupka kojim je proizvoljnost smanjena.

Ono što se u kvalitativnom radu ne piše kao ograničenje jeste nemogućnost brojčanog uopštavanja — to nije nedostatak nego svojstvo pristupa, i tako se i imenuje u opisu metoda.

Veza sa preporukama za dalja istraživanja

Ova dva dela su spojena: svako ograničenje prirodno rađa jednu preporuku. Uzorak iz jedne organizacije → istraživanje na više organizacija. Merenje samoprocenom → dodavanje objektivnog pokazatelja. Jedno merenje → praćenje kroz vreme.

Preporuka koja ne izlazi iz ograničenja obično je prazna („preporučuje se dalje istraživanje ove važne teme”). Kad se piše iz ograničenja, preporuka je konkretna i pokazuje da znaš šta bi sledeći korak stvarno bio.

Kako ograničenja i preporuke stoje u odnosu na ostatak zaključka: zaključak diplomskog rada.

Kako ograničenja rade na odbrani

Ovo je razlog zašto se ovaj deo isplati. Komisija pitanja o metodologiji po pravilu postavlja tamo gde vidi slabost. Ako je slabost već napisana, sa objašnjenjem smera i posledice, pitanje se ili ne postavi, ili se na njega odgovara upućivanjem na sopstveni tekst.

Obrnuto: ako rad tvrdi da su nalazi „reprezentativni za zaposlene u IT sektoru”, a uzorak je iz jedne firme, prvo pitanje je zagarantovano. Kako se na takva pitanja odgovara kad ipak dođu: kako se odgovara na kritiku metodologije.

Korisna priprema: napiši svako ograničenje i pored njega pitanje koje bi komisija iz njega mogla da izvuče. Ako na pitanje umeš da odgovoriš jednom rečenicom, ograničenje je dobro napisano.

Kako se ta rečenica izgovara pred komisijom i šta se radi kad otvore ograničenje koje nisi napisao: kako se ograničenja brane pred komisijom.

Najčešće greške

• Ograničenja izostavljena jer „slabe rad”
• Navedena uopšteno, bez veze sa konkretnim nalazom
• Nije rečeno u kom smeru ograničenje deluje
• Sva ograničenja svedena na veličinu uzorka, iako je merenje slabija tačka
• Okolnosti izrade (vreme, novac, znanje autora) predstavljene kao ograničenja
• Ograničenja u sukobu sa zaključkom — priznato da se nalaz ne uopštava, pa se u zaključku ipak uopštava
• Preporuke za dalja istraživanja koje ne izlaze iz navedenih ograničenja
• Izvinjavajući ton kroz ceo rad umesto jednog sabranog poglavlja

Provera pre predaje

1. Postoji li poglavlje ili potpoglavlje sa ograničenjima, na mestu koje uputstvo predviđa?
2. Ima li svako ograničenje sva tri dela — šta, na šta utiče i u kom smeru?
3. Da li je bar jedno ograničenje o merenju, a ne samo o uzorku?
4. Piše li negde da se iz jednog merenja ne može tvrditi uzrok, ako je nacrt takav?
5. Jesu li izbačene okolnosti izrade i opšta mesta?
6. Slaže li se svaka tvrdnja u zaključku sa navedenim ograničenjima?
7. Izlazi li svaka preporuka za dalja istraživanja iz nekog ograničenja?
8. Umeš li za svako ograničenje da predvidiš pitanje komisije i odgovoriš na njega?

Gde se tačno ograničenja smeštaju i koliko se detaljno pišu razlikuje se po katedrama — negde su deo metodologije, negde zaseban odeljak zaključka. Proveri uputstvo fakulteta pre nego što odlučiš gde ih staviti; celina se posle proverava zajedno sa ostatkom rada: finalna provera diplomskog rada.