<div dir="ltr"><p style="font-family:arial,sans-serif;font-size:12.7272720336914px;text-align:center"><b>Second Call for Participation</b></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px;text-align:center"><b><span style="background:rgb(255,255,204)">Multilingual</span> <span style="background:rgb(255,255,204)">All</span>-<span style="background:rgb(255,255,204)">Words</span> <span style="background:rgb(255,255,204)">Sense</span> <span style="background:rgb(255,255,204)">Disambiguation</span> and <span style="background:rgb(255,255,204)">Entity</span> <span style="background:rgb(255,255,204)">Linking</span></b></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px;text-align:center"><span style="background:rgb(255,255,204)">SemEval</span>-<span style="background:rgb(255,255,204)">2015</span> <span style="background:rgb(255,255,204)">task</span> <span style="background:rgb(255,255,204)">13</span></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px;text-align:center"><a href="http://alt.qcri.org/semeval2015/task13/" target="_blank">http://alt.qcri.org/<u></u>semeval2015/task13/</a></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"><br></p><br style="font-family:arial,sans-serif;font-size:12.7272720336914px"><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"><b>Introduction</b></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"></p><p style><font face="arial, sans-serif">The automatic understanding of the meaning of text has been a major goal of research in computational linguistics and related areas for several decades, with ambitious challenges, such as Machine Reading (Etzioni, 2006) and the quest for knowledge (Schubert, 2006). Two key Natural Language Processing tasks that need to be tackled as steps towards achieving the goal of automatic understanding of text are Word Sense Disambiguation (WSD) and Entity Linking (EL). WSD (Navigli, 2009) is a historical task aimed at explicitly assigning meanings to single-word and multi-word occurrences within text, a task which is today more alive than ever in the research community. EL (Erbs et al., 2011; Cornolti et al., 2013; Rao et al., 2013) is a more recent task which aims at discovering mentions of entities within a text and linking them to the most suitable entry in a knowledge base. The two main differences between WSD and EL lie in the kind of inventory used, i.e., dictionary vs. encyclopedia, and the assumption that the mention is complete or potentially partial, respectively. For instance, a named entity such as “European Medicines Agency” may be referred to within a text as simply “Medicines Agency”, the meaning of which, however, can be inferred thanks to the context. Notwithstanding these differences, the tasks are pretty similar in nature, in that they both involve the disambiguation of textual fragments according to a reference inventory. However, the research community has hitherto tended to tackle the two tasks separately, often duplicating efforts and solutions.</font><br></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">In contrast to this trend, research in knowledge acquisition is heading towards the seamless integration of encyclopedic and lexicographic knowledge within structured language resources (Hovy et al., 2013), and the main representative of this new direction is undoubtedly BabelNet <a href="http://babelnet.org/" target="_blank">http://babelnet.org</a> (<u></u>Navigli and Ponzetto, 2012). Therefore these resources seem to provide a common ground for the two tasks of WSD and EL. Only very recently a joint approach, called Babelfy (<a href="http://babelfy.org/" target="_blank">http://babelfy.org</a>), has been proposed for both the tasks of WSD and EL (Moro et al., 2014).</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"><b><span style="background:rgb(255,255,204)">Task</span> description</b></p><p style><font face="arial, sans-serif">In this task, our goal is to promote research in the direction of joint word sense and named entity disambiguation, so as to focus research efforts on the aspects that differentiate these two tasks without duplicating research for common problems within the two tasks. However, we will also allow systems that perform only one of the two tasks to participate, and even systems which tackle one particular setting of WSD, such as all-words sense disambiguation or on any subset of part-of-speech tags. Moreover, given the recent upsurge of interest in multilingual approaches, we will release our dataset in three different languages (English, Italian, Spanish) on parallel corpora which will be independently and manually annotated by different native/fluent speakers. In contrast to the SemEval-2013 task 12, Multilingual Word Sense Disambiguation (Navigli et al., 2013), our focus in this task is to present a dataset focused on both kinds of inventories (i.e., named entities and word senses) in the specific domain of biomedicine, in the attempt to further mitigate the distance between research efforts regarding the dichotomy EL vs. WSD and those regarding the dichotomy open domain vs. closed domain (i.e., biomedical Information Extraction). For this reason we encourage submissions from all these lines of research, in order that we can evaluate the distance between approaches that exploit both kinds of knowledge (i.e., lexicographic and encyclopedic) and approaches that work on both kinds of domain granularity (i.e., open and closed).</font><br></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"><b>Word Senses and Named Entities inventory</b></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">The evaluation will use BabelNet 2.5, available at <a href="http://babelnet.org/" target="_blank">http://babelnet.org/</a> which contains WordNet, Wikipedia, Wiktionary, OmegaWiki, Wikidata and the Open <span style="background:rgb(255,255,204)">Multilingual</span>WordNet.</p><font style="font-family:arial,sans-serif;font-size:12.7272720336914px"><b>Important Dates</b></font><div style="font-family:arial,sans-serif;font-size:12.7272720336914px"></div><div style="font-family:arial,sans-serif;font-size:12.7272720336914px"><p style="font-size:12.7272720336914px"><strong></strong></p><ul><li style="margin-left:15px;font-size:12.7272720336914px"><span style="font-size:12px"><strike style="font-size:13px">Trial data ready: May 30, 2014</strike></span></li><li style="margin-left:15px;font-size:12.7272720336914px"><strike>Training data ready: July 30, 2014</strike> (there will be no training data)</li><li style="margin-left:15px;font-size:12.7272720336914px"><span style="font-family:arial;font-size:small">Evaluation period starts: December 5, 2014</span><br></li><li style="margin-left:15px;font-size:12.7272720336914px">Evaluation period ends: December 20, 2014</li><li style="margin-left:15px;font-size:12.7272720336914px">Paper submission due: January 30, <span style="background:rgb(255,255,204)">2015</span></li><li style="margin-left:15px;font-size:12.7272720336914px">Paper reviews due: February 28, <span style="background:rgb(255,255,204)">2015</span></li><li style="margin-left:15px;font-size:12.7272720336914px">Camera ready due: March 30, <span style="background:rgb(255,255,204)">2015</span></li><li style="margin-left:15px;font-size:12.7272720336914px"><span style="background:rgb(255,255,204)">SemEval</span> workshop: Summer <span style="background:rgb(255,255,204)">2015</span></li></ul><div style="font-size:12.7272720336914px"><h4>Organizers</h4><ul><li style="margin-left:15px"><a href="http://wwwusers.di.uniroma1.it/~moro/" target="_blank">Andrea Moro</a>,<em> Sapienza University of Rome</em>;</li><li style="margin-left:15px"><a href="http://wwwusers.di.uniroma1.it/~navigli/" target="_blank">Roberto Navigli</a>, <em>Sapienza University of Rome</em>.</li></ul><p><b>Google Group</b></p><p>Please register to the following Google group:</p><p>"<a href="https://groups.google.com/forum/?hl=en#%21forum/semeval-2015-task-13" target="_blank"><span style="color:rgb(34,34,34);background:rgb(255,255,204)">SemEval</span>-<span style="color:rgb(34,34,34);background:rgb(255,255,204)">2015</span> <span style="color:rgb(34,34,34);background:rgb(255,255,204)">Task</span> <span style="color:rgb(34,34,34);background:rgb(255,255,204)">13</span>: <span style="color:rgb(34,34,34);background:rgb(255,255,204)">Multilingual</span> <span style="color:rgb(34,34,34);background:rgb(255,255,204)">all</span>-<span style="color:rgb(34,34,34);background:rgb(255,255,204)">words</span> WSD and EL</a>"</p></div><p style="font-size:12.7272720336914px"><br></p></div><p dir="ltr" style="font-family:arial,sans-serif;font-size:12.7272720336914px"><strong>References</strong></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px"></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Marco Cornolti, Paolo Ferragina, and Massimiliano Ciaramita. 2013. A framework for benchmarking <span style="background:rgb(255,255,204)">entity</span>-annotation systems. In Proc. of WWW, pages 249–260.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Nicolai Erbs, Torsten Zesch, and Iryna Gurevych. 2011. Link discovery: A comprehensive analysis. In Proc. of ICSC, pages 83–86.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Oren Etzioni, Michele Banko, and Michael J Cafarella. 2006. Machine Reading. In Proc. of AAAI, pages 1517–1519.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Eduard H. Hovy, Roberto Navigli, and Simone P. Ponzetto. 2013. Collaboratively built semi-structured content and Artificial Intelligence: The story so far. Artificial Intelligence, 194:2–27.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Andrea Moro, Alessandro Raganato, and Roberto Navigli. 2014. <span style="background:rgb(255,255,204)">Entity</span> <span style="background:rgb(255,255,204)">Linking</span> meets Word <span style="background:rgb(255,255,204)">Sense</span> <span style="background:rgb(255,255,204)">Disambiguation</span>: a Unified Approach. Transactions of the Association for Computational Linguistics, 2, pages <span style="color:rgb(68,68,68);font-family:Arial,Helvetica,sans-serif;font-size:14px;line-height:20.0001201629639px">231−244</span><span style="font-size:12.7272720336914px">.</span></p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Roberto Navigli. 2009. Word <span style="background:rgb(255,255,204)">Sense</span> <span style="background:rgb(255,255,204)">Disambiguation</span>: A survey. ACM Computing Surveys, 41(2):1–69.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Roberto Navigli, David Jurgens, and Daniele Vannella. 2013. <span style="background:rgb(255,255,204)">SemEval</span>-2013 <span style="background:rgb(255,255,204)">Task</span> 12: <span style="background:rgb(255,255,204)">Multilingual</span> Word <span style="background:rgb(255,255,204)">Sense</span> <span style="background:rgb(255,255,204)">Disambiguation</span>. In Proc. of <span style="background:rgb(255,255,204)">SemEval</span>-2013, pages 222–231.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Roberto Navigli and Simone Paolo Ponzetto. 2012. BabelNet: The automatic construction, evaluation and application of a wide-coverage <span style="background:rgb(255,255,204)">multilingual</span> semantic network. Artificial Intelligence, 193:217–250.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Delip Rao, Paul McNamee, and Mark Dredze. 2013. <span style="background:rgb(255,255,204)">Entity</span> <span style="background:rgb(255,255,204)">Linking</span>: Finding Extracted Entities in a Knowledge Base. In Multi-source, <span style="background:rgb(255,255,204)">Multilingual</span> Information Extraction and Summarization, Theory and Applications of Natural Language Processing, pages 93–115. Springer Berlin Heidelberg.</p><p style="font-family:arial,sans-serif;font-size:12.7272720336914px">Lenhart K. Schubert. 2006. Turing’s dream and the knowledge challenge. In Proc. of NCAI, pages 1534–1538.</p></div>