diff --git "a/Begr\303\274ndung.txt" "b/Begr\303\274ndung.txt" new file mode 100644 index 0000000000000000000000000000000000000000..4a6b06275ea1a211d3569d79b890e4483a42fefa --- /dev/null +++ "b/Begr\303\274ndung.txt" @@ -0,0 +1,10 @@ +Ich habe mich für Krippendorff's Alpha entschieden, da es anders als Bennett S, Scott's Pi, Cohen's Kappa usw. nicht +von dem Joint Probability of Agreement abhängt. +Da wir in unserem Datensatz nur 4 Kategorien zur Annotation zur Verfügung haben wäre der Einsatz eines der oben genannten +IA-A-Maße nicht sinnvoll. Eine Schwäche der Joint Probability of Agreement ist es, dass es das Level der Übereinstummung +für eine kleine Anzahl an Kategorien überbewertet. Da wir in unseren Szenario mit nur 4 Kategorien arbeiten kann davon ausgegangen +werden, dass diese geringe Anzahl an Kategorien dazu beitragen würde, dass Joint Probability of Agreement nicht adäquat die +Übereinstimmung wiedergibt. +Hingegen arbeitet Krippendorff's Alpha ohne die Joint Probability of Agreement. Zudem ist es unabhängig und betrachtet die +Zusammenhänge durch den Einsatz der Coincidence-Matrix genauer. +Daher habe ich mich für die Implementierung von Krippendorff's Alpha entschieden. \ No newline at end of file