深度学习自然语言处理

230 篇文章
54 人订阅

全部文章

zenRRan

【论文】Awesome Relation Classification Paper(关系分类)(PART II)

1. Relation Classification via Recurrent Neural Network(Zhang 2015)

722
zenRRan

后BERT时代:15个预训练模型对比分析与关键点探究

在小夕之前写过的《NLP的游戏规则从此改写?从word2vec, ELMo到BERT》一文中,介绍了从word2vec到ELMo再到BERT的发展路径。而在BE...

1164
zenRRan

深入TextCNN(一)详述CNN及TextCNN原理

本文是本人所写的NLP基础任务——文本分类的【深入TextCNN】系列文章之一。【深入TextCNN】系列文章是结合PyTorch对TextCNN从理论到实战的...

864
zenRRan

从Word2Vec到Bert,聊聊词向量的前世今生(一)

原文链接:https://zhuanlan.zhihu.com/p/58425003

743
zenRRan

【干货】如何打造高质量的NLP数据集

无论是做研究还是解决业务问题,做数据集都是绕不开的问题。很多刚入行的同学觉得发布一个数据集是最容易灌水的了,燃鹅如果你真的做过就会发现,随意产生一个数据集很容易...

431
zenRRan

BN、LN、IN、GN、SN归一化

内容包含:BatchNormalization、LayerNormalization、InstanceNorm、GroupNorm、SwitchableNorm

563
zenRRan

【ACL 2019】腾讯AI Lab解读三大前沿方向及20篇入选论文

本文将通过介绍入选NLP领域顶级学术会议 ACL 的论文,解读腾讯 AI Lab 的重点研究方向:自然语言理解、对话系统和文本生成,以及机器翻译等。

1023
zenRRan

【一分钟知识】决策树-ID3,C4.5,CART

决策树是一种自上而下,对样本数据进行树形分类的过程,由节点和有向边组成。节点分为内部节点和叶子节点,其中每个内部节点表示一个特征或属性,叶子节点表示类别。决策树...

671
zenRRan

BERT源码分析(二)

BERT的使用可以分为两个步骤:pre-training和fine-tuning。pre-training的话可以很好地适用于自己特定的任务,但是训练成本很高(...

702
zenRRan

【一分钟论文】IJCAI2019 | Self-attentive Biaffine Dependency Parsing

http://hlt.suda.edu.cn/~zhli/papers/liying_ijcai19_dp.pdf

682
zenRRan

DNN/LSTM/Text-CNN情感分类实战与分析

最近把2014年Yoon Kim的《Convolutional Neural Networks for Sentence Classification》看了下,...

1232
zenRRan

【论文】 NLP中命名实体识别从机器学习到深度学习的代表性研究

NER是自然语言处理中相对比较基础的任务,但却是非常重要的任务。在NLP中,大部分的任务都需要NER的能力,例如,聊天机器人中,需要NER来提取实体完成对用户输...

1012
zenRRan

【论文详解】词向量ELMo: Embeddings from Language Models

(1) 使用理念方面:在原先的词向量模型中, 每个词对应着一个向量, 但是这个模型是根据一个句子赋予每个词汇向量. 因此对于一个 n-tokens 的输入NLP...

631
zenRRan

干货 | Attention注意力机制超全综述

Attention机制通俗的说,对于某个时刻的输出y,它在输入x上各个部分上的注意力,这里的注意力也就是权重,即输入x的各个部分对某时刻输入y贡献的权重,在此基...

1462
zenRRan

基于特定实体的文本情感分类总结(PART II)

于是提出了一种解决ABSA问题的多粒度注意力网络(Multi-grained Attention Network, MGAN),主要的改进有:

701
zenRRan

【ACL 2019】预训练语言模型的最新探索

ACL 2019 将于 7 月 28 日至 8 月 2 日在意大利佛罗伦萨举办。机器之心技术分析师曾祥极挑选了 ACL 2019 收录的与语言模型相关的三篇文章...

812
zenRRan

【论文串烧】基于特定实体的文本情感分类总结(PART I)

这里说的是实体识别,马上想到的就是利用分步走解决:先去对文章进行实体识别,然后对提取出来的实体进行情感分类。但是后来一想这样两步的话会使得最终结果的错误率叠加,...

492
zenRRan

arXiv 精选:一文看尽六月最热五篇论文

场景描述:始建于 1991 年的 arXiv.org 至今已收录超过 100 万篇论文预印本,近年来,其每月提交量已经超过 1 万篇。这里成为一个巨大的学习宝库...

762
zenRRan

【NLP基础】NLP关键字提取技术之LDA算法原理与实践

人们是如何从大量文本资料中便捷得浏览和获取信息?答案你肯定会说通过关键字。仔细想想,我们人类是怎么提取关键词?我们从小就接触语言,语法,当听到或者看到一句话时,...

1582
zenRRan

内容范围:正态分布,泊松分布,多项分布,二项分布,伯努利分布

伯努利分布(两点分布/0-1分布):伯努利试验指的是只有两种可能结果的单次随机试验。如果对伯努利试验独立重复n次则为n重伯努利试验。

1153

扫码关注云+社区

领取腾讯云代金券