hanlp训练模型_【HanLP】HanLP中文自然语言处理工具实例演练

作者&＃xff1a;白宁超

2016年11月25日13:45:13

摘要&＃xff1a;HanLP是hankcs个人完成一系列模型与算法组成的Java工具包&＃xff0c;目标是普及自然语言处理在生产环境中的应用。HanLP具备功能完善、性能高效、架构清晰、语料时新、可自定义的特点。 在提供丰富功能的同时&＃xff0c;HanLP内部模块坚持低耦合、模型坚持惰性加载、服务坚持静态提供、词典坚持明文发布&＃xff0c;使用非常方便&＃xff0c;同时自带一些语料处理工具&＃xff0c;帮助用户训练自己的语料。笔者坚定支持开源的项目&＃xff0c;本文初衷是使用自然语言处理工具进行毕设的基本操作。后来发现HanLP真心的贴心&＃xff0c;代码Java编写&＃xff0c;文档结构严谨、目录清晰都是接地气的注释和解释。文档大家参照官方即可&＃xff0c;本文篇一介绍HanLP相关的资料链接&＃xff0c;篇二介绍HanLP的操作实战部分&＃xff0c;后续文章进行源码分析。(本文原创编著&＃xff0c;转载注明出处:HanLP中文自然语言处理工具实例演练。)

目录

1 MyEclipse安装HanLP

【注】&＃xff1a;本文主注重方法调用和操作&＃xff0c;后续文章注重原理和源码分析。

具体操作扩展步骤参看官方文档&＃xff0c;本文是作者操作记录&＃xff0c;便于实际应用。HanLP将数据与程序分离&＃xff0c;给予用户自定义的自由。 HanLP由三部分组成&＃xff1a;HanLP &＃61; .jar &＃43; data &＃43; .properties &＃xff0c;请前往项目主页下载这三个部分。

1 其中jar、data.zip、hanlp.properties是安装配置文件&＃xff0c;橘色框为源码。

2 打开MyEclipse新建项目HanLP&＃xff0c;将jar放入lib包并构建依赖&＃xff0c;data.zip、hanlp.properties均放入HanLP主目录下。

3 hanlp.properties进行修改&＃xff0c;只需要改root&＃61;yourpath/HanLP即可

4 将修改后的hanlp.properties放入工作空间中 HanLP/bin下一份即可完成

5 测试分词&＃xff1a;

如上即在MyEclipse下完成HanLP安装&＃xff0c;需要什么功能&＃xff0c;只需要HanLP点就可以提示基本功能。这里说明一点&＃xff0c;data下面model主要用于句法分析的&＃xff0c;默认情况下原作者将其分割开了&＃xff0c;需要的自行下载即可。

2 分词操作

3 词典

4 命名实体识别

5 篇章理解

6 繁简拼音转换

7 依存句法分析

8 智能推荐

9 Lucene插件

10 其他文档功能