Počítání Cohenovy kappy
- Nejdříve připravíme vstupní soubory. Ty se vyrábějí ze souborů v adresářích
csts-export
acsts-import-done
. Výsledný soubor má formát tvaruanot1<TAB>anot2<TAB>offer1<SPACE>offer2...
a uchovává se v adresáři
vert-kappa
. - Soubory v adresáři
vert-kappa
mají jméno tvaru<filename>-AB-XY
, kdeAB
aXY
jsou iniciály anotátora. - Výroba souborů ve
vert-kappa
:cd csts-export merge-kappa.sh
kde program
merge-kappa.sh
spouštícsts_vert_annot.pl
acsts_vert_kappa.pl
, který vybírá anotátorovu volbu z nabídky a převádí formátcsts
dovert
. Tyto programy jsou umístěny v asresáři~/bin[/cohen-kappa]
. - Kappa se spočítá takto:
cd ../vert-kappa for suff in $(ls *-??-?? | cut -f2- -d'-' | sort -u); do echo -n "$suff "; cat *-$suff | count-kappa-n.pl; done