Kako ocjenjivati komentare i postići pravedniju karmu?

U nekoliko dnevnika, što u tekstu što u komentarima, proteže se rasprava o načinima ocjenjivanja komentara, zloupotrebi tih ocjena i općenito "demokraciji" na pollitika.com.

Jedna od odlika svake "demokracije" je jasno definiranje pravila. Problem koji se javlja kod ocjene komentara i rezultirajuće karme je da se koriste samo krajnje ocjene (jedinica i četvorka) što stvara ekstremne rezultate u oscilaciji karme, a nije ni sigurno treba li ocjenjivati komentar ovisno ili neovisno o tome slažemo li se s njim.

Komentari imaju četiri ocjene: jedna, dvije, tri i četiri zvjezdice. Jasno je da je jedna zvijezdica najniža ocjena (ali ne i najmanje što se nekome može dati jer se ocjena može i ne dati), a da su četiri najviša. Ali što s isto toliko drugih ocjena: dvojkom i trojkom?

Za bolju raspodjelu ocjena treba znati što tražiti u komentaru. Prvo i osnovno tu su naravno argumenti koji se nalaze u jasnom nizu koji vodi od starta do finiša. Nakon toga treba ocijeniti koliko je uspješno komentarom pobijena neka tvrdnja na koju se obično reagira. Humor, dobar stil i lijepa prezentacija komentara dodatni su plusevi.

Pet kategorija u koje se komentar može svrstati u odnosu na dijapazon raspoloživih ocjena komentara mogle bi biti:

**** = "izvrstan do bez greške": komentar ima puno jakih strana i malo, ako uopće, mana. Ovaj sugovornik je izvrstan u raspravi i vjerojatno jedan od boljih koje ćete vidjeti.

*** = "iznadprosječan do dobar": komentar ima jasne jake strane i neke manje slabosti. Ovo je uvjerljivi komentar.

** = "prosječan": komentar ima jakih i slabih strana u pojednakim omjerima

* = "slab do ispod prosjeka": komentar ima očitih problema i malo dobrih strana. Pogreške su očite.

bez ocjene = "vrlo slab": komentar ima fundamentalne slabosti i malo, ako uopće, dobrih strana. Ovaj komentator ima ozbiljne probleme u raspravljanju ili koristi uvredljivi rječnik.

Ovako postavljene "ladice" ujedinjuju i objektivni i subjektivni pristup pri ocjenjivaju i mogle bi rezultirati pravičnijom podjelom ocjena i realnijim karmama.

Ovakva ili slična sugestija ocjenjivanja komentara ili tekstova ima dakako svoje protivnike. Simun uvjerljivo agumentira zašto ocjena mora biti inherentno subjektivna i predlaže alternativni (makar donekle slični) sustav ocjene temeljene na "preporučivanju" po modelu Google-a pri čemu raspodjela izgleda ovako:1 - Poor, I would not recommend this post
2 - Below average
3 - Average
4 - Above average
5 - Excellent, I recommend this post

Ugovaranje nekakvih pravila prema kojima se zajednica ponaša obilježje je demokracije, ali preduvjet svega toga je rasprava.

Koji su vaši prijedlozi i kako najbolje (i da li uopće) imati pisana ili nepisana pravila koja definiraju način ocjene sadržaja i evaluacijsko okruženje na ovim stranicama? Treba li raditi razliku između ocjenjivanja teksta i komentara i zašto? Smiju li korisnici raspravom uopće utjecati na administraciju?

Discuss.

Komentari

Vidim da se u zadnje vrijeme

Vidim da se u zadnje vrijeme jako puno bavimo kriterijima koje moraju ispunjavati komentari ili postovi da bi recimo zaslužili manju ili veću ocijenu.
Osobno sam protiv ocijenjivanja nećijeg mišljenja, slagalo se to mišljenje sa mojim ili ne. Zašto?. Jednostavno zato što mišljenje o nećemu nije suhoparno iznošenje ćinjenica, već je to stav pojedinca, ili grupe, i svako ocijenjivanje je subjektivno i podložno manipulaciji, pa prema tome nerealno.
Međutim ovdje se ponekad iznose ćinjenice koje su općepoznate i toćno određene. Dali je potrebno dati ocijenu ako netko iznosi krivu ili recimo lažnu ćinjenicu. Primjerice u jednom mom komentaru napravio sam oćitu grešku i umjesto 67000000 napisao 76000000. Dali sam zbog toga trebao dobiti loše ocijene. Prema eventualnom naćinu davanja ocijena da, ali zato postoje komentari, koji je i mene u toj grešci ispravio.
Ćemu onda ocijenjivanje, dali da zadržimo normalnu razinu komunikacije, bez vrijeđanja i niskih udaraca. Za tako nešto su dovoljne dvije ocijene prolazi i ne prolazi ili jedan i minus jedan.
Sve ostalo, a što je iznošenje mišljenja, nekakvog viđenja stanja društva od strane pojedinca, iznošenje vlastitog stava i slićno, ne može biti podložno ocijenjivanju jer to po mom mišljenju spada u kontrolu slobode i misli pojedinca.
Za tako nešto imamo komentare, unutar kojih svatko iznosi svoj stav i kontrastav, ćinjenicu i kontraćinjenicu, tj. ispravak ako postoji.
Ocijenjivanje pojedinca čak i u školama se pokazalo kao nužno zlo, a postoji samo zato da bi prislio tog istog pojednica da se trudi. Kao rezultat imamo odlikaše koji kad dođu u srednju školu jedva uhvate dobru ocijenu jer su u osnovnoj sve ućili napamet.
Dali to znaći da ocijenjivanje bilo ćega nije dobro, pa naravno da ne znaći. Ono je kako sam napisao nužno zlo, ali se ocijenama ne vrednuje nećiji stav ili mišljenje, već samo znanje o golim ćinjenicama koje se mogu argumentirati podacima iz razlićitih izvora.
Stoga smatram da ocijenu treba zadržati, svakako ne u ovakvom obliku, jer mislim da ovdje ne postoji nitko tko bi mogao ili smio uzeti sebi za pravo da nećiji stav ocijenuje od jedan do četiri ili pet, već mi se nekako ćini da bi u duhu slobode i demokracije bilo najbolje da postoji prolazna i neprolazna ocijena, a mi ćemo za ćitanje svaki za sebe odabirati one tekstove koji po mišljenju pojednica odišu kvalitetom i naravno komentirati. Stoga kolićina komentara, i slijedom toga rasprava koja se razvija oko pojedinog teksta je već sama za sebe ocijena istog.
Eto to je moje skrušeno mišljenje/stav pa ga Vi sada ocijenite:)

Trudim se koristiti čitav

Trudim se koristiti čitav raspon ocjena ali teži sam na jedinicama i četvorkama nego na druge dvije.

Nikada ne "ciljam" karmu. Svakome čiji sam komentar ikada ocijenio poručujem da mi njegova karma pritom nije bila ni na kraj pameti. Ocjenjujem isključivo tekst po tekst. Pri tome jesam subjektivan i uzimam u obzir tko je tekst napisao, ali samo zato jer to daje dodatan kontekst napisanome. Nema automatizma u smislu korisnik X = ocjena Y.

Ocjene koje ja dobijem pogledam čisto da vidim tko se slaže sa mnom i time je na putu spasenja i izbavljenja ;-), ali vlastita karma me ne zanima previše. Ne kažem to zato jer pokušavam glumiti "baš me briga za sve" kulera nego zato jer na ovom sajtu uglavnom lurkam, odnosno nisam puno uložio.

Razumijem da je ugled svakom čovjeku bitan i smatram normalnim to što ljudima nije svejedno kakva im je karma.

Svejedno čvrsto ostajem pri onome što sam prije napisao: jedna osoba ne može zloupotrijebiti sustav ocjenjivanja i on ne smije imati ograničenja u stilu "ne smiješ dijeliti jedinice jer time ljudima rušiš karmu", kakvo je primjenjeno u aferi LQ.

Zloupotreba sustava je kreiranje desetak korisnika samo kako bi se dijelile ocjene i takve stvari.

Ako je sustav do sada pokazao da su ocjene uglavnom jedan i četiri, što je ekipa primjetila a vrlo lako može provjeriti Mrak, opisi uz zvjezdice mogu doprinjeti tome da se ta distribucija unormali. Googleov izbor riječi "prosječan" možda sugerira želju da se postigne normalna distribucija ocjena s najviše dvojki i trojki a najmanje četvorki i jedinica.

Smatram da je jedan od razloga za najviše ekstremnih ocjena to što vaganje svakog komentara oduzima dosta vremena pa se ljudi ograniče na "slažem se" (četiri) i "ne slažem se" (jedan). Nekakav opis uz zvjezdice bi vjerojatno skratio razmišljanje i time, uz promjenu distribucije, povećao i broj ocjena po članu. Obje se pretpostavke mogu provjeriti nakon promjena :-)

Podržavam uvođenje opisa. Tvoj prijedlog istih mi se čini dobar. Štoviše, mene ne bi smetali niti sugestivniji opisi koji jače sugeriraju da se tekst hladno ocijeni bez obzira na to slažemo li se s njim ili ne. Na primjer:

* - tekst je vrlo loše argumentiran, slagao se ja ili ne
** - tekst je loš ali ima nekoliko točnih tvrdnji, slagao se ja ili ne
*** - tekst je dobar ali ima nekoliko rupa, slagao se ja ili ne
**** - izvrsno argumentiran tekst, slagao se ja ili ne

:-)

Opise, kakvi god bili, treba upariti sa pravilom da uprava neće ni pod kojim uvjetima mijenjati ocjene. Ocjena koju korisnik da mora biti neupitna. Mrak je u aferi LQ napravio pogrešku kada je obrisao ocjene, to se ne bi smjelo ponavljati.

Zaključak: protiv sugestivnih opisa zvjezdica, promoviranja hladnokrvnog ocjenjivanja, edukacije o ispravnom argumentiranju i logičkim pogreškama ili recepata za prepoznavanje dobrih tekstova nemam ništa, ali to mora stati prije prisile. Bilo kakav pokušaj provođenja "objektivnog ocjenjivanja" od strane uprave dovodi u pitanje smisao sustava.

Simun.info

Dragi prijatelji, obično

Dragi prijatelji, obično imam mišljenje sa kojim se slažem.
Ma koliko se mi trudili objektivizirati mišljenja(i svoja i tuđa)), ona prečesto ostaju u domeni naših subjektivnih opservacija. Možemo li onda iznjeti jasne kriterije vrednovanja, ili kako se ovdje spominje ocjenjivanje “mišljenja o tuđem mišljenju”?
Možemo ocjenjivati kvalitetu forme izričaja,kvalitetu argumenata sučeljenih argumentima koji počivaju na poznatim i prihvaćenim činjenicama. No, moj odnos prema tuđem mišljenju je toliko subjektivna kategorija da je ne možemo vrednovati objektivno, a pogotovo ne brojčanim iznosom.
Ako politiku shvatimo kao dinamiku u ravnoteži onih koji žele biti unutra i onih koji vani ne žele ostati, onda ne vidim razloga zašto korisnici svojom raspravom ne bi mogli utjecati na administraciju. Dapače!

Mene isto muče dvojka i

Mene isto muče dvojka i trojka. Fali mi ocjena koja će biti u sredini. Za neki komentar mi je dvojka premalo, a trojka previše. Da su ocjene od jedan do pet, bilo bi lakše.
Ako će se ići u izmjene u tom smjeru, apsolutno podržavam.

Za pocetak ne bi bilo

Za pocetak ne bi bilo zgorega da nas Mrak upozna sa algoritmom koji se koristi za racunanje karme, kako bismo utvrdili prostore za moguce zloupotrebe.

Nakon toga mozemo raspravljati o teznjama kulture ocjenjivanja.

mogu reći jedino za sebe

mogu reći jedino za sebe kako ocjenjujem. uvijek dam ocjenu komentaru koji na mene osatvi dojam argumentiranog i uvjerljivog. taj dobiva najvišu ocjenu (moram naglasiti da moje (ne)slaganje s autorom tu ne igra uloga!). osim tih dobrih komentara, ocjenu dajem i onima koje po mojim kriterijima treba osuditi (to su oni koji idu ad hominem, bez obzira na to što se u ostatku komentara govori; ako i je i najargumntiraniji, ali si uzima za pravo vrijeđati virualne sugovornike, od mene će sigurno dobiti 1). tu vidimo ovu manu koju si istaknuo - dajem samo one krajnje ocjene. uz to, mogu reći i kako mene ocjenjuju. nemam mnogo komentara, ali za sve sam dobivala 4, osim za jednog koji nije bio niti uvredljiv, niti neargumentiran, nego se jednostvavno kolegi komentatoru nije svidio pa mi je dodijelio 1 i time mi srušio karmu. ali što sad, idemo dalje s nadom da ipak prevladavaju korektni ljudi. i još nešto u vezi tvoje klasifikacije. u ovom sustavu bodovanja dodjeljivanje dvojki za sobom povlači posljedice, a mislim da to ipak nije potrebno ako je komentar po tvojim riječima prosječan (dakle ima podjednako slabih i jakih strana). ja bih takvom komentaru dala 3 jer se radi o ocjeni koja karmu održava na onoj prihvatljivoj razini, a to je u skladu s kvalitetom takvog komentara.

nekada davno se je vodila

nekada davno se je vodila slicna polemika na jednom foto sajtu (photosig.com).. i onda se je uvela praksa da se ocjena nemre dati bez komentara slike, s tim da komentar mora imati odredjeni broj slova...

mene osobno zvjezdice i karam ne zanimaju previse, jer ovo mjesto smatram kao mjesto gdje se izmjenjuju misljenja i slusaju druga misljenja...

ja bi uveo jako jednostavan siste s tri ocjene: negativan, neutral i pozitiv s tim da se nekako odrede limiti, naprimjer, da prvo ak oces ocjeniti nekoga moras tog istog komnetirati...

kao sto je vec bilo receno u jednom komentaru uvjek ce biti nezadovoljnika i onih koji ce ici unaokolo i prema samom nicku dijeliti ocjenu bez da procitaju sto je taj nick iznio kao svoje misljenje...

i za kraj, mislim da te ocjene i karmu trebalo nekako reducirati na nivo da imaju jako mali utjecaj na nekoga kao korisnika, vec da ce biti u sluzbi neke statistike da se moze vidjeti koliko je ko komentiran i koja mu je statisktika komentara....

--->
photopublika.blog.hr

Ovo o ocjenjivanju s

Ovo o ocjenjivanju s obrazložnjem mi se čini najboljim rješenjem jer implcira razmjenu argumenata što i jest ovdje osnovni smisao i vidim da ga neki primjenjuju.

Ocjena bez argumenata je nekako nezgodna, no tko može svakoga obvezati da daje i objašnjenje. Ta ovo je samo iak jedna zgodna intelektualna društvena igra.

Možda je ovo ipak dobra preporuka koje ću se prodržavati koliko bude moguće.

Ovaj sustav ima četiri, a

Ovaj sustav ima četiri, a ne pet razina ocjene. Neocjenjivanje (ignoriranje) komentara ne izaziva nikakav učinak na karmu pa ispada da je veća kazna dobiti jedinicu ili dvojku koje taj učinak imaju.

U raspravama s početka je bilo rečeno da je jedan više loša, a dva manje loša ocjena, ali ipak loša. Tri da je manje dobra, a četiri odlična, dakle obje dobre.

Ignoriranje bih ostavio za komentare koji ne potiču ili ne pridonose raspravi, ali one s prostačenjemm, osobnim diskvalifikacijama ili uvredama druge vrste se ne bi smjelo ignorirati već "kažnjavati" jedinicom koja utječe na karmu.

Slažem se da treba pravila, ali ona već postoje samo što mnogi ne ocjenjuju pa ispada da malobrojni "kroje" karmu.

Da je ocjenjivanje više sugerirano i da se toga svi ili velika većina drže, ekscesne situacije zbog kojih smo i počeli ovu raspravu ne bi imale toliko utjecaja, gotovo ništa.

Dakle, mislim da je rješenje u tome da svi ocjenjuju, ali ne zato što bi to bio zahtjev administratora već vlastita volja svakog pojedinca kojem ove anomalije smetaju. A to smo, kako vidim, gotovo svi.

Jedamput je moj unuk ocjenil

Jedamput je moj unuk ocjenil tvoj dnevnik negativno i reagiral si ko iz puške i mene si napal. Ja sam ti probal objasnit kak je bilo i znaš sam kak je završilo.

Završilo je tako što sam

Završilo je tako što sam ti rekao da imaš pravo dati ocjenu kakvu želiš, a prethodno me je interesiralo zašto je članak negativno ocijenjen. Da nisi želio reći, nikome ništa.

svaka argumentirana

svaka argumentirana sugestija je dobrodošla jer ja nisam svemogući niti najpametniji; no ponavljam, predlažem da se pričeka neko vrijeme korištenja sustava kako bi se moglo govoriti o njegovim prednostima i manama

istovremeno, ako smo u raspravi voljni razviti set nekih natuknica ili sugestija kako ocjenjivati tekstove i komentare te po kojim kriterijima, ja sam više nego voljan takve smjernice pretvoriti u pravila

Thanks. Slažem se da treba

Thanks.

Slažem se da treba pričekati jer nemamo realnu sliku sustava. A dok čekamo ćemo malo prodiskutirati.

Moja motivacija iza ovog je dvojaka. Kao prvo, veća participacija članova zajednice učvršćuje zajednicu. Kao drugo, čini mi se da je za najugodniji mogući online rat mišljenja potrebno uz gruba pravila imati i smjernice za "fine tuning". Ako su usklađene na demokratski način najveća je vjerojatnost da će se primjenjivati te da će korisnici nametati ritam i kulturu novima čime se u konačnici minimizira utjecaj trollova.

Bilo bi zgodno kad bi svi sudionici ove rasprave ocijenili sve komentare u njoj i to pokušali učiniti različitim ocjenama, ne samo 1 i 5.

Opinioiuris

Poslušala sam Tvoju

Poslušala sam Tvoju preporuku i ispalo je da nisam dala ni jednu jedinicu. Nju koristim isključivo za besmislene, uvredljive i mojem vrijednosnom sustavu neprihvatljive komentare i dnevnike.

nemesis

Postavke za pregledavanje komentara

Odaberite svoje postavke za pregledavanje komentata i kliknite na "Snimi postavke" da aktivirate promjene.
www.crvenikarton.com - samo nogomet!
Syndicate content