<html><head></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div>Hi,</div><div><br></div>I've implemented evalC available at <a href="http://staff.science.uva.nl/~fsangati/">http://staff.science.uva.nl/~fsangati/</a><div>There is both a command line and a GUI version for it.</div><div>Besides standard evalB measure, evalC includes per category recall/precision/fscore, crossing brackets, wrong category (correct span).</div><div>The documentation is still rather poor, but i'm planning to improve it.</div><div>In case you have any problem with it let me know.</div><div><br></div><div>Best,</div><div><br></div><div><div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; ">Federico Sangati</div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; "><br></div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; ">Institute for Logic, Language and Computation</div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; ">University of Amsterdam</div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; ">Science Park 904, Amsterdam</div><div style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; font: normal normal normal 12px/normal Helvetica; "><br></div><div><br></div><div><br><div><div>On 27 Oct 2010, at 12:00, <a href="mailto:corpora-request@uib.no">corpora-request@uib.no</a> wrote:</div><br class="Apple-interchange-newline"><blockquote type="cite"><span class="Apple-style-span" style="border-collapse: separate; font-family: Verdana; font-size: medium; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><span class="Apple-style-span" style="font-family: monospace; ">Message: 3<br>Date: Tue, 26 Oct 2010 12:02:12 +0200<br>From: Vera Demberg <<a href="mailto:vera@coli.uni-saarland.de">vera@coli.uni-saarland.de</a>><br>Subject: [Corpora-List] looking for parser output analysis tool (more<br><span class="Apple-tab-span" style="white-space: pre; ">      </span>detailed than e.g. parseval)<br>To:<span class="Apple-converted-space"> </span><a href="mailto:corpora@uib.no">corpora@uib.no</a><br><br>Hi,<br>can anybody point me to a tool that can output statistics about what is<span class="Apple-converted-space"> </span><br>going wrong in a parser, i.e. which labels are wrong most often, and<span class="Apple-converted-space"> </span><br>stats about what types of brackets are wrong i.e. attaching under<span class="Apple-converted-space"> </span><br>category Y instead of category X etc.<br>Thanks a lot,<br>Vera<br><br>--<span class="Apple-converted-space"> </span><br>Vera Demberg<br>Cluster of Excellence<span class="Apple-converted-space"> </span><br>"Multimodal Computing and Interaction"<br>Saarland University<br>Germany</span></span></blockquote></div><br></div></div></div></body></html>