首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Google发布神经机器翻译教程,带你从零开始搭建NMT系统

李林 编译自 Google Research Blog 量子位 报道 | 公众号 QbitAI 想自己在TensorFlow上搭神经机器翻译(NMT)模型?Google亲自来教你了。...周三,Google在GitHub上发布了一份TensorFlow神经机器翻译教程,带着读者充分理解seq2seq,并从零开始构建翻译模型。...seq2seq直译成汉语是“序列到序列”,是机器翻译中一种常用方法,能够用深层神经网络捕捉句子意义。...Google的这份教程,从神经机器翻译的背景知识讲起,然后详解了基础系统的代码细节,再讲到NMT系统处理长句的关键:注意力机制。...最后,这份教程还详细介绍了如何复制Google神经机器翻译系统(GNMT)的关键功能,并在多个GPU上进行训练。 教程中还包含了详细的基准测试结果。

1.9K80

专访 | 监管机器翻译质量?且看阿里如何搭建翻译质量评估模型

机器之心原创 作者:思源 随着机器翻译在真实场景中的应用越来越多,翻译质量评估模型也受到很大的关注。...近日,阿里巴巴达摩院机器智能技术实验室的陈博兴博士向机器之心介绍了机器翻译质量评估竞赛与模型,他们凭借着 Feature Extractor-Quality Estimator 框架与完全注意力机制等方法在国际机器翻译大会...其中,德语到英语的统计机器翻译评估任务中(German-English SMT),句子级别和词级别的预测任务分别取得第一名;英语到德语的统计机器翻译评估任务中 (English-German SMT),...Machine Translation Quality Estimation 就是这样一个由 WMT 发起的机器翻译质量评估比赛,它要求在不提供参考译文的情况下,根据原文和机器翻译译文评估译文质量的好坏...此外,限制质量较差的机器翻译的译文输出、评估机器翻译模型效果等都需要这种不需要参考译文的评估方法。

67210
您找到你想要的搜索结果了吗?
是的
没有找到

业界 | 搜狗机器翻译团队获得 WMT 2017 中英机器翻译冠军

WMT 是机器翻译领域的国际顶级评测比赛之一。...事实上,WMT 是一个开始自 2006 年 ACL 的国际机器翻译研讨会,提供统一的数据集,内容通常集中于新闻,并将结果以竞赛的形式呈现出来,旨在促进机器翻译研究机构之间的学术交流和联系,推动机器翻译研究和技术的发展...,机器翻译顶级论文中已经几乎难以见到统计机器翻译的身影,神经机器翻译已经成为了机器翻译领域的主流。...SogouNMT 系统创新性地将许多自然语言处理门类中非翻译任务的方法用于机器翻译中,通过向神经网络添加额外的机器学习模块来提升质量来点对点解决神经机器翻译中的具体问题。...WMT 国际机器翻译评测中获得中英翻译的冠军。

1.2K130

浅谈神经机器翻译

最近,在被形象地命名为神经机器翻译的领域中,深度神经网络模型取得了最新的进展。 通过这篇文章,你将发现机器翻译的挑战性以及神经机器翻译模型的有效性。...什么是机器翻译机器翻译是将一种语言的源文本自动转换为另一种语言的文本的工作。 在一次机器翻译任务中,输入已经由某一种语言的符号序列组成,然后计算机程序必须将其转换成另一种语言的符号序列。...传统机器翻译方法的关键局限性在于制定语法所需的专业知识,以及所需的大量语法规则和特殊的例外。 什么是统计机器翻译?...什么是神经机器翻译? 神经机器翻译(简称NMT)是利用神经网络模型来学习机器翻译的统计模型。 这种方法的主要优点是可以直接对源文本和目标文本进行单一系统的培训,不再需要专门的统计机器学习系统。...总结 在这篇文章中,您了解了机器翻译的挑战性以及神经机器翻译模型的效率性。 具体来说,你学习了: 鉴于人类语言固有的模糊性和灵活性,机器翻译是具有挑战性的。

97080

【玩转腾讯云】【腾讯云机器翻译TMT】机器翻译入门

通过本文你可以学到什么 如何调用机器翻译接口 通过API 3.0 Explore体验机器翻译 通过API 3.0 SDK调用机器翻译接口 通过自行鉴权调用机器翻译接口及类似API3.0接口 前置准备 我们在准备调用机器翻译接口前...,需要一些准备工作,主要包括 注册腾讯云账号 开通机器翻译服务 申请安全凭证 以下为各步骤的详细功能 1....开通机器翻译服务 在机器翻译控制台https://console.cloud.tencent.com/tmt开通机器翻译服务 因笔者已经开通机器翻译服务,所以截取了语音合成的控制台,机器翻译的开通界面类似...https://cloud.tencent.com/document/api/213/15693的第一步即可 [截屏2020-05-02 下午4.26.06.png] 通过API 3.0 Explore体验机器翻译...Product=tmt&Version=2018-03-21&Action=TextTranslate&SignVersion=可以直接前往机器翻译的文本翻译界面 [截屏2020-05-02 下午4.45.19

8.8K2416

浅谈神经机器翻译

最近, 深度神经网络模型在命名为神经机器翻译的领域中获得了最先进的成果. 在这篇文章中, 您将发现机器翻译的挑战性和神经机器翻译模型的有效性....自然语言处理和机器翻译手册, 第133页, 2011年. 传统机器翻译方法的关键局限性在于制定规则所需的专业知识以及海量的规则和例外. 什么是统计机器翻译?...什么是神经机器翻译? 神经机器翻译(Neural machine translation, 简称NMT)是利用神经网络模型来学习机器翻译的统计模型....文献 机器翻译的统计方法, 1990. 评论文章: 基于实例的机器翻译, 1999. 使用RNN学习短语表示的编码器 - 解码器统计机器翻译, 2014年....用于基于短语的统计机器翻译的连续空间翻译模型, 2013. 补充 机器翻译档案 神经机器翻译 - 维基百科 第13章, 神经机器翻译, 统计机器翻译, 2017.

3K51

机器翻译的前世今生

这种之前只在科幻片中存在的场景如今已成现实,而这一切都得益于机器翻译技术。 ? 那么什么是机器翻译呢?...下面我们就来探讨一下机器翻译技术的实现方式。 目前机器翻译的主流方式叫“统计翻译” 统计机器翻译的基本原理是:从语料库大量的翻译实例中自动学习翻译知识,然后利用这些翻译知识自动翻译其他句子。...萌芽 1954年,美国乔治敦大学在IBM公司协同下,用IBM-701计算机首次完成了英俄机器翻译试验,向公众和科学界展示了机器翻译的可行性,从而拉开了机器翻译研究的序幕。 ?...(图:IBM-701计算机的英俄翻译) 随后十年左右的时间内,机器翻译研究热度不断上升。美国、前苏联及一些欧洲国家均对机器翻译研究给予了相当大的重视,机器翻译一时出现热潮。...该报告全面否定了机器翻译的可行性,并宣称“在近期或可以预见的未来,开发出实用的机器翻译系统是没有指望的”。受此报告影响,各类机器翻译项目锐减,机器翻译的研究出现了空前的萧条。

1.2K60

机器翻译之浅薄

可奇怪的是,无论媒体报道还是行业中都似乎营造了一种机器翻译马上要取代人类译者的气氛,这给了人们一种快要成了的错觉。...以我跟机器翻译软件打交道的经验,它们的翻译效果我一直持高度怀疑态度,但这两人却不以为然。事实上,很多很有头脑的人都是翻译软件的拥趸,极少去苛责机器翻译的浅薄,这让我很是不解。...不过,数年之后,他又抛出了一个截然不同的观点: “明眼人都清楚,机器成不了普希金,机器翻译永远都无法传达出语言本身的优雅与格调。”...即便如此,他在 1947 年“翻译即解码”的观点,早已成为驱动机器翻译发展的重要信条。...与围棋界的 AlphaGo 一般,会成为机器翻译领域的颠覆者?

1K60

机器翻译之BLEU值

BLEU 分数 运行示例 双语评估替换评分 双语评估替换分数 (简称 BLEU) 是一种对生成语句进行评估的指标 完美匹配的得分为 1.0, 而完全不匹配则得分为 0.0 这种评分标准是为了评估自动机器翻译系统的预测结果而开发的尽管它还没做到尽善尽美...Translation,2002 年发表 n 元组匹配的计数结果会被修改, 以确保将参考文本中的单词都考虑在内, 而不会对产生大量合理词汇的候选翻译进行加分在 BLEU 论文中这被称之为修正的 n 元组精度 糟糕的是, 机器翻译系统可能会生成过多的合理单词...Translation,2002 年发表 nltk.translate.bleu_score 的源码 nltk.translate 包的 API 文档 总结 在本教程中, 你探索了 BLEU 评分, 根据在机器翻译和其他语言生成任务中的参考文本对候选文本进行评估和评分

2.1K41

谷歌发布神经机器翻译

除此之外,谷歌的一位发言人在邮件中告诉VentureBeat,最新的神经机器翻译是他们努力研发深度学习功能和机制的成果。...谷歌的神经机器翻译(GNMT)对八层长的短时记忆递归神经网络(LSTM-RNNs)的依赖性很强。“通过层间残留联系可以加强梯度流。”谷歌的科学家在他们发表的学术论文中写道。...虽然神经机器翻译并不永远是最佳之选,但是从谷歌的各种尝试中我们不难发现,在某些情况下,神经机器翻译还是有其过人之处的。 ?...“神经机器翻译还是会犯一些笔译人员永远都不可能犯的错误,比如遗漏了一些单词、把一些常见的名字或是少见的专有名词翻错、对文章的语境缺乏整体把控等等。所以,我们还是有很大的进步空间。...但不可否认的是,神经机器翻译真的具有里程碑意义。”

87670

如何利用ChatGPT做机器翻译

因此,自人工智能技术问世以来,机器翻译就成了重要的研究方向之一。机器翻译被认为是全球有待攻克的九大难题之一(排第1名),其重要性甚至超过了星际旅行。...使用ChatGPT实现机器翻译非常简单,只需给它明确的指令作为提示就可以了。 在一篇名为“Is ChatGPT A Good Translator?...对于简单的机器翻译任务而言,这样的提示指令就足够了。“Is ChatGPT A Good Translator?...然而,对于那些需要依赖机器翻译的普通用户来说,很难自行判断翻译质量的高低。这时,也可以寻求ChatGPT的帮助。例如,可以利用如下提示指令。...在现有的一些机器翻译系统中,支持术语表通常被作为高级功能提供给付费用户。如今,我们可以通过提示控制 ChatGPT用术语进行翻译,示例如下。

1.6K60

学界 | 对比神经机器翻译和统计机器翻译:NMT的六大挑战

Translation)」,并希望读者能看到神经机器翻译的不足和未来的发展方向。...该论文论述的神经机器翻译(NMT)六大挑战:领域误匹配、训练数据的总量、生僻词、长句子、词对齐和束搜索(beam search)。...5 个不同的德语-英语 统计机器翻译(SMT)和 神经机器翻译(NMT)系统使用了不同的语料库单独训练,即 OPUS 中的法律、医疗、IT、可兰经、字幕,然后再在所有 OPUS 语料库中训练一个新系统。...总结 最后虽然神经机器翻译有这些困难,当我们不能否认的是它十分高效。并且神经机器翻译仍然已经克服了大量的挑战,最显著的是 NMT 在领域外和低资源条件下的翻译十分出色。 ?...我们同样展示了基于短语统计机器翻译质量的不足和改进之处。 ?

1.8K80

IARPA启动“机器翻译(MATERIAL)”计划

国家情报总监办公室内的情报高级研究项目活动今天宣布了一项多年的研究努力,开发一种语言处理软件,称为“机器翻译”,用于英文检索各种语文的信息,使用户能够迅速开发和部署完全自动化的系统,使只有英语的人能够准确和有效地识别感兴趣的外国媒体新闻文件...Intelligence)内的情报高级研究项目活动(Intelligence Advanced Research Projects Activity)宣布启动一项多年研究项目,开发名为“英文检索任何语言信息的机器翻译...‘英文检索任何语言信息的机器翻译’项目旨在研究如何最高效地开发整合现有的语言处理技术,应对多语言语音和文本数据提出的具体信息需要。”...通过竞争性广泛机构公告书(Broad Agency Announcement)情报高级研究项目活动将“英文检索任何语言信息的机器翻译”研究合同给了美国约翰·霍普金斯大学( Johns Hopkins University

1.3K90
领券