NewBeeNLP

LV1
发表了文章

有关胶囊网络你所应知道的一切

在使用卷积神经网络(CNNs)解决计算机视觉任务的时候,视角的改变(角度、位置、剪应力等等)很大程度上会造成网络表现的剧烈波动,从而限制了模型的泛化能力。有鉴于...

NewBeeNLP
发表了文章

NLP文本分类 落地实战五大利器!

文本分类是NLP领域的最常见工业应用之一,也是本人在过去的一年中接触到最多的NLP应用,本文「从工业的角度浅谈实际落地中文本分类的种种常见问题和优化方案」。

NewBeeNLP
发表了文章

研究生期间如何成为科研大佬?

先泼个冷水,如果你本科积累不多,也不是天赋异禀,硕士成为真正的科研大佬是不太可能的,成为“灌水大佬”倒是有可能。因为在我看来,只有真正做出能对学术界与工业界有很...

NewBeeNLP
发表了文章

三大视角,聊聊我眼中的广告系统

从实习到工作,接触过一些大大小小的广告系统,有麻雀虽小但五脏俱全的小 dsp,也有把 ssp、adx、dsp 都打包了的大媒体 ,算是对业界的广告系统有了一个初...

NewBeeNLP
发表了文章

万物皆可Graph | 当推荐系统遇上图神经网络(三)

本篇文章follow一些 Graph in Rec 的文章,以前博主整理过的系列可以见:

NewBeeNLP
发表了文章

周志华教授:如何做研究与写论文?

‍每个人从本科到硕士,再到博士、博士后,甚至工作以后,都会遇到做研究、写论文这个差事。论文通常是对现有工作的一个总结和展示,特别对于博士和做研究的人来说,论文则...

NewBeeNLP
发表了文章

文本匹配开山之作--双塔模型及实战

在前面一篇文章中,总结了Representation-Based文本匹配模型的改进方法,

NewBeeNLP
发表了文章

聊一聊大火的对比学习

在之前的博客里,笔者介绍了在有监督任务(文本匹配)上,增加对比学习来提高模型性能的实验,而当时尝试后却发现,在新增了对比学习的任务后,模型的性能并没有得到对应的...

NewBeeNLP
发表了文章

关于深度学习框架的一些见解

大家好,我是kaiyuan,周末愉快!今天分享一篇阿里林伟大佬的文章,关于深度学习框架的独到见解,希望对你有帮助

NewBeeNLP
发表了文章

YYDS!一个针对中文的预训练模型

相信做中文NLP的同学和朋友们,对哈工大和科大讯飞的发布的一系列中文预训练模型并不陌生,github项目地址为https://github.com/ymcui/...

NewBeeNLP
发表了文章

近代自然语言处理技术发展的『第四范式』

显然,仅知道这个答案并不是一件唯一重要的事情,除此之外,「了解其他三种范式是什么以及范式之间转化的内在逻辑的价值更加凸显」。这有两个好处:

NewBeeNLP
发表了文章

[旧文新读] 深度学习在Airbnb搜索的应用实践

这篇文章是airbnb团队在KDD2019上的一篇文章。在当时来看,GBDT的模型已经对他们的业务有了一定的贡献,这篇文章主要是在讲,该团队在尝试使用NN模型来...

NewBeeNLP
发表了文章

NLP预训练家族 | Transformer-XL及其进化XLNet

最近又重新读了Transformer-XL和XLNet的论文和代码,又有很多新的感悟。其中,要想搞懂XLNet的同学一定要首先明白Transofrmer-XL,...

NewBeeNLP
发表了文章

Focal Loss --- 从直觉到实现

如果教科书上有100道例题,包括: 90道加减乘除 + 10道 三角函数。CE同学就会吭哧吭哧的“平均用力”反复练习这100道例题,结果可想而知——他会精通那9...

NewBeeNLP
发表了文章

ACL2021最佳论文VOLT:通过最优转移进行词表学习

今天一起来看看热议的ACL2021 best paper,一句话概述:借鉴边际效用通过最优转移学习词表。

NewBeeNLP
发表了文章

FKGE:合格的知识图谱嵌入已经学会保护隐私啦!

本文介绍我们最近的一项被CIKM 2021录用的工作《Differentially Private Federated Knowledge Graphs Emb...

NewBeeNLP
发表了文章

机器学习领域综述大列表:真的很大, 你忍一忍

继续来给大家分享github上的好东西,一个『机器学习领域综述大列表』,涵盖了自然语言处理、推荐系统、计算机视觉、深度学习、强化学习等主题。

NewBeeNLP
发表了文章

ACL2021 | 把关键词生成看成集合预测问题

这里简单介绍一下关键词生成任务的形式。给一篇源文档(比如论文的摘要),关键词预测任务就是希望能预测出一些表达文档重点信息的关键词,或者更准确的说是关键短语。

NewBeeNLP
发表了文章

妙啊!类别不平衡上的半监督学习

分享一篇中稿CVPR 2021的工作,CReST: A Class-Rebalancing Self-Training Framework for Imbala...

NewBeeNLP
发表了文章

炼丹师的自我修养:如何分析训练过程loss异常

在面对模型不收敛的时候,首先要保证训练的次数够多。在训练过程中,loss并不是一直在下降,准确率一直在提升的,会有一些震荡存在。只要总体趋势是在收敛就行。若训练...

NewBeeNLP

个人简介

个人成就

扫码关注云+社区

领取腾讯云代金券