首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >自然语言处理(一)NLP概述

自然语言处理(一)NLP概述

作者头像
JNJYan
发布2019-01-11 12:17:04
1.1K0
发布2019-01-11 12:17:04
举报

NLP概述

NLP是利用计算机为工具,对人类特有的书面形式和口头形式的自然语言的信息进行各种类型处理和加工的技术.

NLP内容结构

NLP基础技术

词法分析

词法分析目的是从句子中分出单词,找出词汇的各个词素,从中获得单词的语言学信息并确定单词的词性. 词法分析是很多中文信息处理任务的必要步骤.

  • 自动分词
  • 命名实体识别
  • 词性标注

句法分析

句法分析是对句子和短语结构进行分析,如句子的形式结构:主语、谓语、宾语等. 句法分析是语言学理论和实际的自然语言应用的一个重要桥梁. 一个实用的、完备的、准确的句法分析将是计算机真正理解自然语言的基础.

  • 短语结构分析(宾州树库)
  • 依存分析

语义分析

解释自然语言句子或篇章各部分(词、词组、句子、段落、篇章)的意义. 目前语义计算的理论、方法、模型尚不成熟.

  • 词义消歧(词)
  • 语义归纳、推理(词)
  • 语义角色标注(句子)

篇章分析

指超越单个句子范围的各种可能分析,包括句子(语段)之间的关系以及关系类型的划分,段落之间的关系的判断,跨越单个句子的词与词之间的关系分析,话题的继承与变迁等.

NLP核心应用

  • 机器翻译(Machine translation, MT)
  • 信息检索(Information Retrieval)
  • 信息抽取(Information Extraction)
  • 自动文摘(Automatic summarization/abstracting)
  • 问答系统(Question-Answering system)
  • 阅读理解(Machine Reading)
  • 文档分类(Document categorization)
  • 情感分类(Sentimental classification)
  • 信息推荐与过滤(Formation Recommendation and Filtering)

NLP技术及应用架构

NLP领域的学术会议

  • ACL(Association of Computational Linguistics)
  • Coling(International Conference on Computational Linguistics)
  • EMNLP(Conference on Empirical Methods in Natural language Processing)
  • EACL(European Chapter of ACL)
  • IJCNLP(International Joint Conference on Natural language Processing)
  • SIGIR(SIG Information Retrieval)
  • TREC(Text REtrievalConference)
  • JSCL(全国计算语言学联合学术会议)

参考资料

中国科学院大学-NLP课程课件(IIE胡玥老师主讲)

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2018年11月27日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • NLP概述
  • NLP内容结构
  • NLP基础技术
    • 词法分析
      • 句法分析
        • 语义分析
          • 篇章分析
          • NLP核心应用
          • NLP技术及应用架构
          • NLP领域的学术会议
          • 参考资料
          相关产品与服务
          NLP 服务
          NLP 服务(Natural Language Process,NLP)深度整合了腾讯内部的 NLP 技术,提供多项智能文本处理和文本生成能力,包括词法分析、相似词召回、词相似度、句子相似度、文本润色、句子纠错、文本补全、句子生成等。满足各行业的文本智能需求。
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档