<table cellspacing="0" cellpadding="0" border="0" ><tr><td valign="top" style="font: inherit;"><DIV>Hello everyone, </DIV>
<DIV> </DIV>
<DIV>I am not clear how to calculate kappa statistic for word alignment task when two annotators(A1 and A2) output are given.  </DIV>
<DIV>let's take </DIV>
<DIV>A1 -- (1 1) (2 5) (3 3) (3 4 p) (4 2) (5 6)</DIV>
<DIV>A2 - (1 1) (2 5 p) (3 3) (4 2) (5 6) (0 4 p).</DIV>
<DIV> </DIV>
<DIV>here (1 1 s/p) --> (source word, target word, sure-link/probable link)</DIV>
<DIV>only probable links are mapped in both, otherwise all are sure links. </DIV>
<DIV> </DIV>
<DIV>please explain the kappa coff. using above example.</DIV>
<DIV> </DIV>
<DIV>I have checked all relevant papers, but still i  am not clear.</DIV>
<DIV> </DIV>
<DIV>Thanks</DIV>
<DIV><SPAN>deepa</SPAN></DIV>
<DIV> </DIV></td></tr></table><br>