首页
学习
活动
专区
工具
TVP
发布

HyperAI超神经

专栏作者
421
文章
266328
阅读量
27
订阅数
PipeTransformer:适用于大规模模型分布式训练的自动化弹性管线
本文围绕一篇论文展开,探讨了 PyTorch DDP (torch.nn.parallel) 以及 Pipeline (torch. Distributed.Pipeline) 的加速混合。
HyperAI超神经
2021-09-17
1K0
PyTorch 1.8 发布,支持 AMD,优化大规模训练
北京时间 3 月 4 日,PyTorch 官方博客发布 1.8 版本。据官方介绍,新版本主要包括编译器和分布式训练更新,同时新增了部分移动端教程。
HyperAI超神经
2021-03-10
8900
超越 PyTorch 和 TensorFlow,这个国产框架有点东西
内容概要:都已经有这么多深度学习框架了,为什么还要搞个 OneFlow?在机器学习领域,袁进辉看的比 90% 的人都长远。
HyperAI超神经
2020-11-25
7040
Pytorch 1.4 来了!春节假期好好研究
内容导读:近日,Facebook 发布了 PyTorch 1.4,新版本增加了诸多新的功能,包括为 PyTorch Mobile 进行 build 级别自定义的功能,和一些新的实验性功能,包括对模型并行训练和 Java binding 的支持。此外完成了多项 API 更新并修复了一些 Bug。
HyperAI超神经
2020-02-17
9690
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档