猜您喜欢:
Jcseg是一款专业实用的轻量级Java中文分词工具,提供关键词提取和文章自动摘要等功能,并且拥有一个基于Jetty的web服务器,方便各大语言直接http调用,同时提供最新版本的lucene,solr和elasticsearch的搜索分词接口。感兴趣的小伙伴们赶快来非凡软件站下载吧!
Jcseg核心功能:
中文分词:mmseg算法 + Jcseg 独创的优化算法,七种切分模式。
关键字提取:基于textRank算法。
关键短语提取:基于textRank算法。
关键句子提取:基于textRank算法。
文章自动摘要:基于BM25+textRank算法。
自动词性标注:基于词库+(统计歧义去除计划),目前效果不是很理想,对词性标注结果要求较高的应用不建议使用。
命名实体标注:基于词库+(统计歧义去除计划),电子邮件,网址,大陆手机号码,地名,人名,货币,datetime时间,长度,面积,距离单位等。
Restful api:嵌入jetty提供了一个绝对高性能的server模块,包含全部功能的http接口,标准化json输出格式,方便各种语言客户端直接调用。
Jcseg中文分词:
七种切分模式:
简易模式:FMM算法,适合速度要求场合。
复杂模式:MMSEG四种过滤算法,具有较高的歧义去除,分词准确率达到了98.41%。
检测模式:只返回词库中已有的词条,很适合某些应用场合。
最多模式:细粒度切分,专为检索而生,除了中文处理外(不具备中文的人名,数字识别等智能功能)其他与复杂模式一致(英文,组合词等)。
分隔符模式:按照给定的字符切分词条,默认是空格,特定场合的应用。
NLP模式:继承自复杂模式,更改了数字,单位等词条的组合方式,增加电子邮件,大陆手机号码,网址,人名,地名,货币等以及无限种自定义实体的识别与返回。
n-gram模式:CJK和拉丁系字符的通用n-gram切分实现。
分词功能特性:
支持自定义词库。在lexicon文件夹下,可以随便添加/删除/更改词库和词库内容,并且对词库进行了分类。
支持词库多目录加载. 配置lexicon.path中使用';'隔开多个词库目录.
词库分为简体/繁体/简繁体混合词库: 可以专门适用于简体切分, 繁体切分, 简繁体混合切分, 并且可以利用下面提到的同义词实现,简繁体的相互检索, Jcseg同时提供了词库两个简单的词库管理工具来进行简繁体的转换和词库的合并。
中英文同义词追加/同义词匹配 + 中文词条拼音追加.词库整合了《现代汉语词典》和cc-cedict辞典中的词条,并且依据cc-cedict词典为词条标上了拼音,依据《中华同义词词典》为词条标上了同义词(尚未完成)。更改jcseg.properties配置文档可以在分词的时候加入拼音和同义词到分词结果中。
中文数字和中文分数识别,例如:"一百五十个人都来了,四十分之一的人。"中的"一百五十"和"四十分之一"。并且 Jcseg会自动将其转换为阿拉伯数字加入到分词结果中。如:150, 1/40。
支持中英混合词和英中混合词的识别(维护词库可以识别任何一种组合)。例如:B超, x射线, 卡拉ok, 奇都KTV, 哆啦a梦。
支持英文的类中文切分,同样使用mmseg算法来消除歧义,例如:“openarkcompiler”会被切分成:“open ark compiler”,该功能也可以被关闭。
更好的拉丁支持,电子邮件,域名,小数,分数,百分数,字母和标点组合词(例如C++, c#)的识别。
自定义切分保留标点. 例如: 保留&, 就可以识别k&r这种复杂词条。
复杂英文切分结果的二次切分: 可以保留原组合,同时可以避免复杂切分带来的检索命中率下降的情况,例如QQ2013会被切分成: qq2013/ qq/ 2013, [email protected]会被切分成: [email protected]/ chenxin/ 619315/ gmail/ com。
支持阿拉伯数字/小数/中文数字基本单字单位的识别,例如2012年,1.75米,38.6℃,五折,并且 Jcseg会将其转换为“5折”加入分词结果中。
智能圆角半角, 英文大小写转换。
特殊字母识别:例如:Ⅰ,Ⅱ;特殊数字识别:例如:①,⑩。
配对标点内容提取:例如:最好的Java书《java编程思想》,‘畅想杯黑客技术大赛’,被《,‘,“,『标点标记的内容。(1.6.8版开始支持)。
智能中文人名/外文翻译人名识别。中文人名识别正确率达94%以上。(中文人名可以维护lex-lname.lex,lex-dname-1.lex,lex-dname-2.lex来提高准确率),(引入规则和词性后会达到98%以上的识别正确率)。
自动中英文停止词过滤功能(需要在jcseg.properties中开启该选项,lex-stopwords.lex为停止词词库)。
词库更新自动加载功能, 开启一个守护线程定时的检测词库的更新并且加载(注意需要有对应词库目录下的的lex-autoload.todo文件的写入权限)。
自动词性标注(目前基于词库)。
自动实体的识别,默认支持:电子邮件,网址,大陆手机号码,地名,人名,货币等;词库中可以自定义各种实体并且再切分中返回。
以上就是非凡小编为大家带来的Jcseg(Java中文分词器)下载,想要了解更多实用工具类软件就请多多关注非凡软件站吧~
关键词优化 本关键词优化专题相对于其它关键词优化相关专题来说,所提供的关键词优化软件主要针对新更新的关键词优化工具;以确保软件的可用性及实用性。
长尾关键词挖掘战神关键词工具v10.9 《战神关键词工具》是战神软件7来专注于SEO关键词领域软件开...详情>>
X站长百度关键词排名批量查询软件v1.8 X站长百度关键词排名批量查询软件,用于无限关键词数量,自定义...详情>>
Jcseg(Java中文分词器)v2.6.10 Jcseg是一款专业实用的轻量级Java中文分词工具,提供关...详情>>
无线路由器上网设置方法详解:一步步教你设置无线路由器实现上网畅享在当今数字化时代,无线网络已成为人们生活中不可或缺的一部分。通过无线路由器,我们能够轻松地连接到互联网,畅享各种在线服务。然而,对于许多人来说,设置无线路由器可能是一项具有挑战性的任务。本文将详细
在日常出行中,电子眼提醒功能可以帮助我们更好地遵守交通规则,避免不必要的罚款和扣分。高德地图作为一款常用的导航软件,提供了便捷的电子眼提醒功能。下面就来介绍一下如何开启高德地图的电子眼提醒。一、打开高德地图首先,确保你的手机已安装高德地图应用,并打开该应用程序
在抖音购物成为一种潮流的当下,了解抖音商品退货退款规则至关重要。这不仅关乎消费者的权益保障,也影响着购物体验的满意度。退货条件一般来说,如果商品存在质量问题,如破损、功能故障等,消费者有权要求退货。非质量问题的情况下,部分商品支持七天无理由退货,但需注意商品需
在python的奇妙世界里,有时候我们需要清理屏幕来让输出更整洁、更便于阅读。你是不是也想知道怎么轻松实现这个小技巧呢?别着急,下面就为你详细揭秘!系统相关清屏方法在不同的操作系统中,实现清屏的方式略有不同。在windows系统下,你可以使用`os.syste
2025年,抖音618大促盛大开启,这场电商狂欢再次点燃了无数消费者和商家的热情。抖音作为当下最具影响力的短视频社交平台,此次618大促无疑将成为一场全民参与的购物盛宴。抖音618大促期间,海量商品琳琅满目,涵盖了生活的方方面面。从时尚美妆到数码家电,从家居日
在日常使用火狐浏览器的过程中,有时我们会遇到需要将一整个网页的内容打印在一张纸上的需求。这不仅能节省纸张,还能方便我们整理和保存信息。下面就来详细介绍一下实现这个功能的方法。首先,打开你想要打印的网页。确保网页内容已经完整加载,避免遗漏任何信息。然后,点击火狐
本站所有资源(含游戏)均是软件作者、开发商投稿,任何涉及商业盈利目的均不得使用,否则产生的一切后果将由您自己承担!本站将不对任何资源负法律责任,所有资源请在下载后24小时内删除。
如侵犯了您的版权、商标等,请立刻联系我们并具体说明情况后,本站将尽快处理删除,联系
(版权说明注意事项)。若有关在线投稿、无法下载等问题,请与本站客服人员联系
!
用户可自行按线路选择相应的下载点,可以直接点击下载/另存为,若直接点击下载速度太慢,请尝试使用高速下载器。为确保下载的文件能正常使用,请使用WinRAR最新版本解压本站软件。
建议大家谨慎对待所下载的文件,大家在安装的时候务必留意每一步!关于360安全卫士或QQ电脑管家的有关提示,请自行注意选择操作。