Kako proveriti tvrdnju iz AI odgovora pre nego što uđe u rad

Postoje dva različita posla koja se lako pobrkaju. Jedan je provera da li referenca postoji — to je tema teksta o izmišljenim izvorima. Drugi je provera da li tvrdnja stoji, i on je teži, jer izvor može biti savršeno stvaran a tvrdnja svejedno pogrešna.

Tipičan primer: alat napiše da se određeni pojam „prvi put javlja sedamdesetih godina, kod autora koji ga definiše kao X”. Autor postoji, knjiga postoji, godina je tačna. Ali definicija je malo drugačija, a pojam je uveden deset godina ranije kod nekog drugog. Ništa u tom odgovoru nije očigledno lažno, a rečenica u radu je netačna.

Provera ide lancem od četiri karike: tvrdnja → izvor → original → citat. Lanac se prekida na prvoj karici koja ne drži, i tada se tvrdnja ne prepravlja nego izbacuje.

Zašto ne pomaže pitati alat da proveri sam sebe

Prvi refleks je „daj mi izvor za ovo” ili „jesi li siguran”. Oba proizvode tekst istog tipa kao i prvobitni odgovor — najverovatniji nastavak, ne proveru.

Odgovor „u pravu ste, izvinjavam se” ne znači da je prva tvrdnja bila netačna; znači da je model nastavio razgovor na najverovatniji način. Isto važi i obrnuto: potvrda „da, siguran sam” nije dokaz.

Alati koji pretražuju internet i navode linkove smanjuju rizik od potpuno izmišljenog naslova, ali ne i rizik da je nalaz pogrešno prenet. Link koji se otvara nije provera; provera je čitanje onoga što na toj stranici piše.

Korak 1: izdvoj tvrdnju u proverljiv oblik

Odgovor od pet pasusa se ne proverava kao celina. Iz njega se izdvajaju pojedinačne tvrdnje, svaka u obliku koji se može potvrditi ili oboriti.

Loše: „AI kaže da je taj pristup dominantan u literaturi.” Dobro: „Pristup X je u periodu 2010–2020. bio najzastupljeniji u istraživanjima o Y.” — ovo se može proveriti, jer ima predmet, period i merilo.

Praktičan postupak: prepiši odgovor u dokument i podvuci svaku rečenicu koja nosi proverljiv podatak — broj, godinu, ime, definiciju, uzročnu vezu. Sve ostalo su prelazi i formulacije koje ionako pišeš svojim rečima.

Ono što ostane podvučeno je tvoj spisak za proveru. Za tipičan odgovor to su tri do pet tvrdnji, ne trideset.

Korak 2: odredi kakva je to tvrdnja

Različite vrste tvrdnji traže različit izvor i različit napor.

Poslednja dva reda vrede posebne pažnje. Pravila o formi rada, rokovima i načinu prijave razlikuju se od ustanove do ustanove i menjaju se — jedini izvor je dokument same ustanove ili mentor. Nijedan AI odgovor tu nije izvor, ni kad zvuči uverljivo.

Korak 3: nađi izvor, pa iz njega original

Sad tražiš gde tvrdnja stoji — ali ne zaustavljaš se na prvom mestu koje je ponovi.

Redosled je:

1. Pretraži samu tvrdnju, ne referencu. Ključne reči iz tvrdnje, pod navodnicima ako je formulacija specifična. Cilj je da vidiš ko sve to tvrdi i pod kojim uslovima.
2. Nađi izvor koji tvrdnju iznosi sa dokazom, a ne onaj koji je samo prenosi. Blog koji citira članak nije izvor; članak jeste.
3. Idi na original. Ako članak kaže „prema Petroviću (2015)”, tvoj izvor je Petrović 2015, a ne taj članak. Zašto se to razlikuje i kada je sekundarni izvor dopušten objašnjeno je u tekstu primarni i sekundarni izvori.
4. Proveri kontekst originala. Na koga se odnosi, u kom periodu, sa kojim ograničenjima. Tvrdnja koja važi za jedan uzorak ne važi automatski za tvoj.

Ako se u toj pretrazi pojavi da isto tvrde tri izvora, a nijedan ne navodi odakle — to je znak da tvrdnja kruži, ne da je potvrđena.

Kako se od pretrage brzo dolazi do upotrebljivog rada opisano je u tekstu Google Scholar, korak po korak, a kako se proverava da li je nađeni izvor uopšte pouzdan u tekstu procena pouzdanosti izvora.

Korak 4: uporedi formulaciju i upiši citat

Poslednji korak je onaj koji najviše ljudi preskoči, a koji jedini stvarno zatvara lanac.

Otvori original, nađi mesto gde tvrdnja stoji i uporedi je sa formulacijom koju si dobio. Tri pitanja:

• Da li original tvrdi isto, ili nešto slabije? Razlika između „povezano je sa” i „dovodi do” je suštinska.
• Da li se odnosi na isto? Ista populacija, isti period, isti pojam.
• Da li je to nalaz tog rada, ili rad prenosi tuđi nalaz?

Ako sve tri prođu, upisuješ referencu sa brojem strane, jer si mesto zaista video. Ako nešto ne prolazi, imaš dva izbora: prepraviti tvrdnju tako da odgovara originalu, ili je izbaciti.

Ono što se ne radi: zadržati formulaciju iz AI odgovora i uz nju staviti referencu koja „otprilike” pokriva. To je najgori mogući ishod — izgleda kao potkrepljena tvrdnja, a nije.

Kad se koja tvrdnja uopšte mora potkrepiti, a kada ne, razloženo je u tekstu kada se citira.

Jedna praktična sitnica: proveru radi odmah, dok je odgovor pred tobom. Tvrdnja koja se prepiše u rad „pa ću je proveriti kasnije” se u devet od deset slučajeva ne proverava — do trenutka kad se rad sređuje, niko se više ne seća koja rečenica je odakle došla.

Tvrdnje koje najčešće ne prežive proveru

Iz iskustva sa ovakvim proverama, ovo su obrasci koji padaju najčešće:

• „Prvi je uveo pojam.” Skoro uvek ima raniji autor, ili je pojam nastao postepeno.
• Okrugli procenti. „Oko 70% studenata” bez izvora obično nema original.
• Uzročna formulacija za korelacioni nalaz. Original kaže da su dve pojave povezane; prenos kaže da jedna izaziva drugu.
• Podaci za Srbiju u odgovoru o stranoj literaturi. Domaćih izvora je u podacima znatno manje, pa se lako improvizuje.
• „Istraživanja pokazuju” bez ijednog imena. Formulacija koja zvuči potkrepljeno a ne obavezuje ni na šta.
• Tačan datum ili godina uz opštu tvrdnju. Preciznost gde je nema.

Kada je brže odustati

Provera jedne tvrdnje traje nekoliko minuta. Kad pređe pola sata, isplati se stati i pitati da li ti ta rečenica uopšte treba.

Vrlo često ne treba. Tvrdnja koja se ne može potkrepiti obično nije nosiva za argument — ona je ukras, rečenica koja „lepo zvuči u uvodu”. Njeno izbacivanje ne oštećuje rad.

Alternativa je da je zadržiš, ali oslabiš do onoga što izvor stvarno kaže. To je legitimno i često tačnije: „pojedina istraživanja ukazuju na vezu između X i Y (Petrović, 2015)” umesto „dokazano je da X uzrokuje Y”.

Šta ostaje u beleškama

Za svaku proverenu tvrdnju vredi zapisati četiri stvari, u istoj evidenciji u kojoj vodiš literaturu:

• tvrdnju, onako kako će stajati u radu;
• izvor sa linkom ili DOI oznakom;
• broj strane;
• šta tačno original kaže, u jednoj rečenici svojim rečima.

Poslednja stavka je najkorisnija na odbrani. Kad te neko pita odakle ti taj podatak, odgovor je jedna rečenica, a ne pretraga po fajlovima.

Gde AI u celom ovom poslu pomaže, a gde odmaže, razloženo je u tekstu gde AI pomaže u radu.