首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

大模型高效释放生产性能,Hugging Face开源Transformer扩展优化新库

Optimum 的推出正是为了「简化这一工作,提供面向高效人工智能硬件的性能优化工具,与硬件合作者合作,赋予机器学习工程师对其机器学习的优化能力。」...Optimum 实战:如何在英特尔至强 CPU 上进行模型量化 量化为何如此重要却又难以实现?...使用 Optimum 在英特尔至强 CPU 上轻松实现 Transformer 量化 实现代码如下: 踏上 ML 生产性能下放的大众化之路 SOTA 硬件 Optimum 重点关注在专用硬件上实现最优的生产性能...该团队希望 Optimum 和针对特定硬件优化的模型可以提升生产流程中的效率,它们在机器学习消耗的总能量中占很大的比例。...最重要的是,该团队希望 Optimum 促进普通人对大规模 Transformer 的应用。

55830
领券