hadoop小学生： Hanlp1.7版本的新增功能一览

Hanlp1.7版本在去年下半年的时候就随大快的DKH1.6版本同时发布了，截至目前1.7大版本也更新到了1.7.1了。本篇分别就1.7.0和1.7.1中新增的功能做一个简单的汇总介绍。 HanLP 是由一系列模型与算法组成的 Java 工具...

2019-03-22 09:52 来自版块 - 网络技术

hadoop小学生： Hanlp汉字转拼音使用python调用详解

1、hanlp简介 HanLP是一系列模型与算法组成的NLP工具包，由大快搜索主导并完全开源，目标是普及自然语言处理在生产环境中的应用。HanLP具备功能完善、性能高效、架构清晰、语料时新、可自定义的特点。 开源网址：HanLP: Han...

2019-03-20 11:37 来自版块 - 网络技术

hadoop小学生： 如何在hanlp词典中手动添加未登录词

我们在使用hanlp词典进行分词的时候，难免会出现分词不准确的情况，原因是由于内置词典中并没有收录当前的这个词，也就是我们所说的未登录词，只要把这个词加入到内置词典中就可以解决类似问题，如何操作，下面我们就看一下具体的步骤 1、找到hanlp...

2019-03-18 15:10 来自版块 - 网络技术

hadoop小学生： Hanlp自然语言处理中的词典格式说明

使用过hanlp的都知道hanlp中有许多词典，它们的格式都是非常相似的，形式都是文本文档，随时可以修改。本篇文章详细介绍了hanlp中的词典格式，以满足用户自定义的需要。 基本格式 词典分为词频词性词典和词频词典。 1、词频词性词典（...

2019-03-15 11:13 来自版块 - 网络技术

hadoop小学生： 中文分词算法工具hanlp源码解析

词图 词图指的是句子中所有词可能构成的图。如果一个词A的下一个词可能是B的话，那么A和B之间具有一条路径E(A,B)。一个词可能有多个后续，同时也可能有多个前驱，它们构成的图我称作词图。 需要稀疏2维矩阵模型，以一个词的起始位置作为行，终止位置作...

2019-03-13 13:21 来自版块 - 网络技术

hadoop小学生： Hanlp分词1.7版本在Spark中分布式使用记录

新发布1.7.0版本的hanlp自然语言处理工具包差不多已经有半年时间了，最近也是一直在整理这个新版本hanlp分词工具的相关内容。不过按照当前的整理进度，还需要一段时间再给大家详细分享整理的内容。昨天正好看到的这篇关于关于1.7.0版本hanlp分...

2019-03-11 15:27 来自版块 - 网络技术

hadoop小学生： Window离线环境下如何安装pyhanlp

Hanlp在离线环境下的安装我是没有尝试过的，分享SunJW_2017的这篇文章就是关于如何在离线环境下安装hanlp的。我们可以一起来学习一下！ HanLP是一款优秀的中文自然语言处理工具，可以实现包括分词、词性标注、实体识别在内容诸多功能，详情...

2019-03-08 10:51 来自版块 - 网络技术

hadoop小学生： 如何编译运行HanLP自然语言处理包

master分支 对于master分支，编译方法如下: git clone https://github.com/hankcs/HanLP.git mvn install -DskipTests ·由于目前一些test不够规范，使用了...

2019-03-06 13:02 来自版块 - 网络技术

hadoop小学生： 如何在linux服务器上使用hanlp

关于如何在linux服务器上使用hanlp也有分享过一篇，但分享的内容与湘笑的这篇还是不同的。此处分享一下湘笑的这篇hanlp在linux服务器上使用的文章，供新手朋友学习之用。 本文主要工作是在linux服务器上使用hanlp， 测试源码主要是h...

2019-03-04 10:23 来自版块 - 网络技术

hadoop小学生： hanlp提取文本关键词的使用方法记录

本文是csu_zipple 分享的关于使用hanlp汉语言处理包提取关键词的过程一个简单的记录分享。想要使用hanlp提取文本关键词的新手朋友们可以参考学习一下！ 如何在一段文本之中提取出相应的关键词呢？ 之前有想过用机器学习的方法来进行词法分析，...

2019-03-01 09:26 来自版块 - 网络技术