前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >NeuralCoref: python的共指消解工具,向代词指代的问题进军!

NeuralCoref: python的共指消解工具,向代词指代的问题进军!

作者头像
blmoistawinde
发布2019-10-30 19:58:30
2.1K0
发布2019-10-30 19:58:30
举报
文章被收录于专栏:润风拂过存甘霖

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。

代码语言:txt
复制
                 本文链接:[https://blog.csdn.net/blmoistawinde/article/details/81782971](https://blog.csdn.net/blmoistawinde/article/details/81782971) 

共指消解

代码语言:txt
复制
   首先简要地说说共指消解是什么,有什么用处。假设机器正在阅读一个这样的文本:
代码语言:javascript
复制
克劳德·莫奈是印象派代表人物和创始人之一。
他最重要的风格是改变了阴影和轮廓线的画法。
代码语言:txt
复制
    如果机器想要从这段话中了解到关于莫奈风格的知识,它首先必须知道,第二句话中的“他”指的就是莫奈。弄清代词的指代就是共指消解中的一个典型任务。
代码语言:txt
复制
    关于共指消解,更详细的概念可以参照: 

https://blog.csdn.net/qjc937044867/article/details/51694547

代码语言:txt
复制
    下面直接引出解决这个问题的一个开源工具——NeuralCoref。

NeuralCoref

代码语言:txt
复制
    Github官网:[https://github.com/huggingface/neuralcoref](https://github.com/huggingface/neuralcoref) 
代码语言:txt
复制
     NeuralCoref是使用时下先进神经网络技术完成指代消解任务的一个工具。**它不是一个独立的python库,** 而是另一个高速强大的python自然语言处理库——spaCy的一个拓展包,因此,要使用这个工具首先要安装spaCy:
代码语言:javascript
复制
pip install spacy
代码语言:txt
复制
   然后,再安装NeuralCoref支持的几个模型,下面的例子中,我会使用面向英语的小模型,安装方法如下:
代码语言:javascript
复制
pip install https://github.com/huggingface/neuralcoref-models/releases/download/en_coref_sm-3.0.0/en_coref_sm-3.0.0.tar.gz
代码语言:txt
复制
   如果需要更大的词汇量和准确率,把链接中的sm改成md/lg就可以下载对应的中模型和大模型。

基本用法

代码语言:txt
复制
    下面用jupyter notebook展示其基本用法:

src="https://nbviewer.jupyter.org/github/blmoistawinde/hello_world/blob/master/NeuralCoref_basic.ipynb" width="720" height="2000">

下一篇文章里,我会再尝试共指消解的一个有趣应用:

NeuralCoref: 用指代消解来做一个“能多轮对话的问答对话机器人”

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2018/08/18 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 共指消解
  • NeuralCoref
  • 基本用法
相关产品与服务
NLP 服务
NLP 服务(Natural Language Process,NLP)深度整合了腾讯内部的 NLP 技术,提供多项智能文本处理和文本生成能力,包括词法分析、相似词召回、词相似度、句子相似度、文本润色、句子纠错、文本补全、句子生成等。满足各行业的文本智能需求。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档