
<html><head></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; ">As nobody has mentioned this option so far, Apache OpenNLP has a sentence splitter, too, and it comes with a wrapper for the UIMA framework in case you are using that. It is MEMM-based and requires no prior (and, if I may say so, "subjective") tokenization. It is fairly easy to use it from within GATE, too, although you have to make some minor modifications to their wrapper if you want to use the latest version. The Markov model implementation is extremely efficient and there are pre-trained models for English, German, Dutch, Portuguese, and Swedish available if you have not domain specific training data. Last but not least, it is made available under the extremely permissive Apache 2 license, is supported as a full-fledged Apache project (i.e., not incubating), and generally fits very nicely into the entire Apache data mining "eco-system".<div><br></div><div>-Florian<br><div><br></div><div><br><div><div>On 13 Aug 2012, at 15:35, Jeff Elmore wrote:</div><br class="Apple-interchange-newline"><blockquote type="cite">I'm curious what folks are using these days for sentence segmenting for English.<div><br></div><div>My application involves narrative and informational texts at a variety of reading levels and genres. Most text is hand-edited to eliminate non-prose content but any system that could respond robustly to unedited text would be awesome, of course.</div>

<div><br></div><div>Mostly we've been using hand-crafted tools written in Python. I have checked out what NLTK offers but from what I've seen there's not anything terribly accurate in it (fails on obvious common cases like some honorifics). We did develop a decision tree based model using Weka for Spanish text. I'd be happy to do this again for English but wanted to see if there's something good already out there.</div>

<div><br></div><div>Thanks in advance!</div>

_______________________________________________<br>UNSUBSCRIBE from this page: <a href="http://mailman.uib.no/options/corpora">http://mailman.uib.no/options/corpora</a><br>Corpora mailing list<br><a href="mailto:Corpora@uib.no">Corpora@uib.no</a><br>http://mailman.uib.no/listinfo/corpora<br></blockquote></div><br><div apple-content-edited="true">

<span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; font-size: medium; "><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; font-size: medium; "><div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; ">-- <br>Florian Leitner, PhD <<a href="mailto:fleitner.cnio@gmail.com">fleitner.cnio@gmail.com</a>><br><br>Structural Biology and BioComputing Programme<br>Spanish National Cancer Research Centre (CNIO)<br><br>Address: C/ Melchor Fernandez Almagro 3; E-28029 Madrid<br>Phone: +34 91 732 8000<br>Fax: +34 91 224 6980<br>Internet: <a href="http://www.cnio.es">http://www.cnio.es</a></div></span></span>

</div>

<br></div></div></body></html>