前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >飞桨重磅升级:支持千万规模分类任务训练,部署能力全面提升

飞桨重磅升级:支持千万规模分类任务训练,部署能力全面提升

作者头像
用户1386409
发布2020-03-05 09:57:44
5920
发布2020-03-05 09:57:44
举报
文章被收录于专栏:PaddlePaddle

2020 年 2 月 27 日飞桨核心框架(以下简称Paddle)发布了1.7版本,这也是Paddle在2020年首个重大更新,下面让我们来看看具体的更新内容。

Paddle 1.7版本对框架功能层面进行了重点增强,预测部署能力全面提升,分布式训练发布PLSC支持千万规模分类任务,并对参数服务器模式进行了优化整合。对编译选项、编译依赖以及代码库进行了全面清理优化。模型库持续完善,优化了整体层次结构,增加了动态图模型实现。端到端开发套件和工具组件进一步完善。

01

训练框架

  • 增加自动混合精度训练AMP接口和新控制流接口。
  • 优化Tensor使用方式和显存分配策略。
  • 新增支持NVIDIA DALI GPU数据预处理库。
  • 持续优化基础OP的功能和性能。
  • 动态图的功能进一步完善,性能大幅提升,对Data Independent的动态图模型提供转为静态图可预测部署模型的功能。
  • 框架调试分析功能和易用性全面提升。

02

预测部署

  • 服务器端预测库的Python API大幅优化,新增R语言、Go语言的预测API,并增加相关的使用方法和示例,强化了量化支持能力。
  • Paddle Lite支持无校准数据的训练后量化方法生成的模型,加强对OpenCL的支持,支持昆仑XPU的预测。
  • 模型压缩库PaddleSlim重构裁剪、量化、蒸馏、搜索接口,与模型库充分打通,新增大规模可扩展知识蒸馏框架Pantheon。

03

分布式训练

  • 参数服务器模式下统一了Transpiler半异步、全异步和GEO的实现模式,后端实现上统一到Communicator中,前端接口统一到fleet中,通过fleet strategy灵活选择不同模式。
  • 发布大规模分类库PLSC,通过模型并行支持超多类别的分类任务。

04

基础模型库

  • 发布语音合成库Parakeet,包括多个前沿合成算法。
  • PaddleCV新增14个图像分类预训练模型,3D和跟踪方向模型持续丰富。
  • PaddleNLP的分词和词性标注模型支持jieba分词。
  • PaddleRec增加多任务模型MMoE。
  • 模型库整体增加了广泛的动态图模型实现。模型库整体层次结构做了调整优化。

05

端到端开发套件

  • PaddleDetection和PaddleSeg新增大量模型实现及预训练模型,提升了典型模型的训练速度和精度,大幅提高模型压缩和部署能力,使用体验得到了全面优化。
  • 发布ElasticRec推荐排序系统,通过K8S进行部署,支持流式训练和在线预测服务。

06

工具组件

  • PaddleHub新增52个预训练模型,总数超过100,功能和体验持续优化。
  • 多任务学习框架PALM升级内核,开放API调用,支持更多的任务类型。
  • 联邦学习PaddleFL新增了公开数据集。
  • 深度强化学习框架PARL和飞桨图学习框架PGL也对应版本升级,支持更多功能,开放更多算法和基线。

具体更新内容请参考:

https://github.com/PaddlePaddle/FluidDoc/blob/release/1.7/doc/fluid/release_note_cn.md

官网地址:https://www.paddlepaddle.org.cn

飞桨项目地址:https://github.com/PaddlePaddle

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-03-02,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 PaddlePaddle 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
联邦学习
联邦学习(Federated Learning,FELE)是一种打破数据孤岛、释放 AI 应用潜能的分布式机器学习技术,能够让联邦学习各参与方在不披露底层数据和底层数据加密(混淆)形态的前提下,通过交换加密的机器学习中间结果实现联合建模。该产品兼顾AI应用与隐私保护,开放合作,协同性高,充分释放大数据生产力,广泛适用于金融、消费互联网等行业的业务创新场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档