腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
AI机器学习与深度学习算法
专栏作者
举报
223
文章
406426
阅读量
53
订阅数
订阅专栏
申请加入专栏
全部文章（223）
编程算法（104）
深度学习（57）
机器学习（54）
神经网络（49）
python（31）
人工智能（29）
线性回归（27）
numpy（25）
pytorch（23）
NLP 服务（10）
数据分析（10）
决策树（9）
分类算法（9）
腾讯云测试服务（8）
tensorflow（7）
开源（7）
matlab（6）
linux（6）
opencv（6）
数学（6）
serverless（5）
input（5）
bash（4）
中文分词（4）
torch（4）
java（3）
javascript（3）
jquery（3）
apache（3）
正则表达式（3）
anaconda（3）
windows（3）
数据结构（3）
jupyter notebook（3）
tensor（3）
c++（2）
sql（2）
bash 指令（2）
网络安全（2）
jdk（2）
tcp/ip（2）
markdown（2）
https（2）
学习方法（2）
row（2）
笔记（2）
函数（2）
人脸识别（1）
其他（1）
数据挖掘（1）
actionscript（1）
ide（1）
git（1）
github（1）
jar（1）
ubuntu（1）
批量计算（1）
机器翻译（1）
存储（1）
分布式（1）
缓存（1）
ssh（1）
面向对象编程（1）
监督学习（1）
keras（1）
scikit-learn（1）
data（1）
gradient（1）
int（1）
label（1）
layout（1）
list（1）
model（1）
pandas（1）
python3（1）
select（1）
series（1）
size（1）
storage（1）
可视化（1）
数据（1）
索引（1）
搜索文章
搜索
搜索
关闭
使用 HanLP 统计二元语法中的频次
NLP 服务
计算句子概率值的工具就是语言模型，但是随着句子长度的逐渐增大，语言模型会遇到下面两个问题：
触摸壹缕阳光
2020-08-04
1.3K
0
通俗讲解语言模型的评价指标-困惑度
NLP 服务
腾讯云测试服务
无论是n-gram语言模型（unigram, bigram, tirgram）还是理论上可以记忆无限个单词（无穷元语法, ∞-gram）递归神经网络语言模型（RNN Language Model），都会涉及到一个最关键的问题：如何来评价这些语言模型的好坏？
触摸壹缕阳光
2020-07-20
2.3K
0
通俗理解n-gram语言模型
NLP 服务
本文主要介绍n-gram语言模型，如果想要了解语言模型的相关知识可以看《带你理解语言模型》。
触摸壹缕阳光
2020-07-20
2.6K
0
带你理解语言模型
NLP 服务
显然"西安在去哪"是一句极其别扭不通的句子，所以我们会很自然的选择输出"现在去哪"，但是输入法没有我们那么智能能够一下子就判断出要输出哪一句话，输入法会计算出两个句子的概率值，然后通过比较选择概率值大的句子作为最终的输出结果，计算句子概率值的工具就是语言模型。
触摸壹缕阳光
2020-07-14
378
0
[L4]实战语言模型~softmax与交叉熵
神经网络
NLP 服务
在介绍完了如何处理数据以及如何构造样本之后，就可以构建我们的神经网络语言模型了，下面是使用LSTM构建的语言模型的大体结构：
触摸壹缕阳光
2020-06-04
1K
0
[L3]实战语言模型~构建embedding层
NLP 服务
神经网络
由于在公众号上文本字数太长可能会影响阅读体验，因此过于长的文章，我会使用"[L1]"来进行分段。这个系列将主要借鉴《Tensorflow实战Google学习框架》这本书，主要介绍实现语言模型的一些前期准备，后期会出更详细的文章。
触摸壹缕阳光
2020-06-04
1.3K
0
[L2]实战语言模型~数据batching
批量计算
神经网络
numpy
NLP 服务
编程算法
由于在公众号上文本字数太长可能会影响阅读体验，因此过于长的文章，我会使用"[L1]"来进行分段。这个系列将主要借鉴《Tensorflow实战Google学习框架》这本书，主要介绍实现语言模型的一些前期准备，后期会出更详细的文章。
触摸壹缕阳光
2020-05-28
657
0
[L1]Seq2Seq中Beam Seach的应用场景
机器翻译
NLP 服务
apache
由于在公众号上文本字数太长可能会影响阅读体验，因此过于长的文章，我会使用"[L1]"来进行分段。这系列将介绍Seq2Seq模型中的Beam Search算法。
触摸壹缕阳光
2020-04-08
649
0
使用Gensim模块训练词向量
NLP 服务
编程算法
在以词项为基本单元输入的自然语言处理任务中，都避免不了将词项转换成算法能够输入的特征表示，词项的特征表示有很多种，这里主要介绍的就是词向量。word2vec是比较流行的训练词向量的算法，使用Gensim模块可以非常简单的训练出词向量。
触摸壹缕阳光
2020-03-27
1.6K
0
一步步搭建Stanford NLP工具包
NLP 服务
jar
java
jdk
https
今天看视频看到的Stanford NLP，这里按照视频的讲解，简单做个笔记。Stanford NLP是少有的支持中文语料的工具，Stanford NLP提供了一系列自然语言分析工具。它能够给出基本的词形、词性，并且能够标记句子的结构，语法形式和字词的依赖，指明那些名字指向同样的实体，指明情绪，提取发言中的开放关系等。需要注意的就是Stanford NLP代码库运行比较慢。
触摸壹缕阳光
2019-11-12
1.2K
0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天，分 10000 元奖品池！
立即发文
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档