Asj中文分词
这是一个ictclas的java实现.基本上重写了所有的数据结构和算法.词典是用的开源版的ictclas所提供的.并且进行了部分的人工优化
内存中中文分词每秒钟大约100万字(速度上已经超越ictclas)
文件读取分词每秒钟大约30万字
准确率能达到96%以上
目前实现了.中文分词.中文姓名识别.用户自定义词典
可以应用到自然语言处理等方面,适用于对分词效果要求高的各种项目.
如果你第一次下载只想测试测试效果可以调用这个简易接口
Strig str = "欢迎使用asj_seg,(asj中文分词)在这里如果你遇到什么问题都可以联系我.我一定尽我所能.帮助大家.asj_seg更快,更准,更自由!" ; System.out.pritl(ToAalysis.paser(str)); [欢迎/, 使用/, asj/, _/, seg/, ,/, (/, asj/, 中文/, 分词/, )/, 在/, 这里/, 如果/, 你/, 遇到/, 什么/, 问题/, 都/, 可以/, 联系/, 我/, 房/, 我/, 一定/, 尽/, 我/, 所/, 能/, ./, 帮助/, 大家/, ./, asj/, _/, seg/, 更/, 快/, ,/, 更/, 准/, ,/, 更/, 自由/, !/]这是一个简单的分词效果,你可以在test目录中找到他.当然.个别奇异性的处理无法代表整体分词.仅做参考
[脚下/f, 的/uj, 一大/j, 块/q, 方砖/, 地面/][长春/s, 市长/, 春节/t, 讲话/][结婚/v, 的/uj, 和/c, 尚未/d, 结婚/v, 的/uj][结合/v, 成/v, 分子/, 时/g][旅游/v, 和/c, 服务/v, 是/v, 最/d, 好/a, 的/uj][邓颖/r, 超生/v, 前/f, 最/d, 喜欢/v, 的/uj, 一个/m, 东西/][中国/s, 航天/, 官员/, 应邀/v, 到/v, 美国/s, 与/p, 太空/s, 总署/, 官员/, 开会/v][上海/s, 大学城/, 书店/][北京/s, 大/a, 学生/, 前来/v, 应聘/v][中外/j, 科学/, 名著/][为/p, 人民/, 服务/v][独立自主/i, 和/c, 平等互利/l, 的/uj, 原则/][为/p, 人民/, 办/v, 公益/][这/r, 事/, 的/uj, 确定/v, 不/d, 下来/v][费孝/r, 通向/v, 人大常委会/t, 提交/v, 书面/b, 报告/][aaa/e, 分/q, 事实上/l, 发货/v, 丨/ull, 和/c, 无/v, 哦/e, 喝/vg, 完/v, 酒/][不好意思/a, 清清爽爽/z][长春市/s, 春节/t, 讲话/][中华人民共和国/s, 万岁/, 万岁/, 万万岁/][检察院/, 鲍绍/r, 检察长/, 就是/d, 在/p, 世/g, 诸葛/r, ./m, 像/v, 诸葛亮/r, 一样/u, 聪明/a][长春市/s, 长春/s, 药店/][乒乓球拍/, 卖/v, 完/v, 了/ul][计算机/, 网络管理员/, 用/p, 虚拟机/userDefie, 实现/v, 了/ul, 手机/, 游戏/, 下载/v, 和/c, 开源/v, 项目/, 的/uj, 管理/v, 金山/z, 毒霸/z][长春市/s, 长春/s, 药店/][胡锦涛/r, 与/p, 神/, 九/m, 航天员/, 首次/m, 实现/v, 天地/, 双向/d, 视频/, 通话/v][mysql/e, 不/d, 支持/v, /ull, 同台/v, 机器/, 两个/m, mysql/e, 数据库/, 之间/f, 做/v, 触发器/][孙建/r, 是/v, 一个/m, 好/a, 人/, ./m, 他/r, 和/c, 蔡晴/r, 是/v, 夫妻/, 两/m, /ull, ,/ull, 对于/p, 每/r, 一本/m, 好书/, 他/r, 都/d, 原意/, 一一/d, 读取/v, ../m, 他们/r, 都/d, 很/d, 喜欢/v, 元宵/, ./m, 康燕/r, 和/c, 他们/r, 住/v, 在/p, 一起/s, ./m, 我/r, 和/c, 马春亮/r, ,/ull, 韩鹏飞/r, 都/d, 是/v, 好/a, 朋友/, ,/ull, 不/d, 知道/v, 什么/r, 原因/][一年/m, 有/v, 三百六十五个/m, 日出/v, /ull, 我/r, 送/v, 你/r, 三百六十五个/m, 祝福/v, /ull, 时钟/, 每天/r, 转/v, 了/ul, 一千四百四十圈/m, 我/r, 的/uj, 心/, 每天/r, 都/d, 藏/v, 着/uz, /ull, 一千四百四十多个/m, 思念/v, /ull, 每/r, 一天/m, 都/d, 要/v, 祝/v, 你/r, 快快乐乐/z, /ull, /ull, 每/r, 一分钟/m, 都/d, 盼望/v, 你/r, 平平安安/z, /ull, 吉祥/, 的/uj, 光/, 永远/d, 环绕/v, 着/uz, 你/r, /ull, 像/v, 那/r, 旭日东升/l, 灿烂/a, 无比/z, /ull][学校/, 学费/, 要/v, 一次性/d, 交/v, 一千元/m][发展/v, 中国/s, 家庭/, 养猪/v, 事业/][安徽省/s, 是/v, 一个/m, 发展/v, 中/f, 的/uj, 省/][北京理工大学/t, 办事处/]
评论