Table 3 Annotation Categories with examples and the Inter Annotator Agreement (Cohens Kappa)
From: Constructing Expertise Through Questions?—Potentials of Corpus Pragmatic Regression Analyses
Function | Example with some context | Agreed/ only A1/ only A2 | Cohen’s Kappa |
|---|---|---|---|
Answer suggestion | Würdest du das tun? Und wenn nicht , warum dann nicht? Vielleicht, weil dieser Klon eben doch nich du selbst wäre? ‘Would you do that? And if not, why not? Maybe because this clone wouldn't be you after all?’ | 13/21/2 | 0.407 |
Directive Functions | Vielleicht könnten Sie eine statistische Analyse oder ein Paper zur Unterstützung der Behauptung mitliefern? ‘Perhaps you could provide a statistical analysis or a paper to support the claim?’ | 26/2/5 | 0.832 |
Hypothesis Formation | Vielleicht geht die wirtschaftliche Entwicklung einmal wieder zu diesem Stadium zurück , wenn der letzte Monopolist Konkurs gegangen ist? ‘Perhaps economic development will return to this stage once the last monopolist has gone bankrupt?’ | 24/3/15 | 0.599 |
Request for information | Viele Grüße und bis bald, spätestens bis zum nächsten Bloggertreffen; vielleicht sieht man sich aber vorher auf einer Konferenz? ‘Many greetings and see you soon, at the latest by the next blog get-together; but maybe we'll see each other at a conference before then?’ | 1/5/7 | 0.08 |
Rest | See example 12 | 4/1/3 | 0.646 |