首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Facebook的超级计算机将成为世界最快AI之一

Facebook 长期以来一直认为,人工智能可以帮助它完成审核其数十亿用户帖子的艰巨任务。现在,它的母公司正在采取措施,使其更接近那个难以实现的目标:建造第一台超级计算机。

Meta 周一宣布了其新的 AI Research SuperCluster (RSC),这是一款旨在用于 AI 研究项目的超级计算机。这台已经投入使用两年的超级计算机最终可能会帮助 Meta 开发功能更强大的人工智能软件——可能对诸如发现帖子中的仇恨言论等棘手的任务有用。

大型超级计算机

“借助 RSC,我们可以更快地训练使用多模态信号的 [AI] 模型——例如,了解帖子的上下文,包括语言、图像和语气,” Meta ( FB ) 的软件工程师表示。

超级计算机具有许多相互连接的处理器,这些处理器聚集成所谓的节点,近年来在人工智能研究中变得越来越流行和强大。美国能源部的首脑会议是美国最快、世界第二快的超级计算机,已被用于帮助调查不熟悉的蛋白质等事物。一些大型科技公司,如微软和英伟达,也有自己使用的超级计算机。

Meta 表示,截至 1 月份,其超级计算机包括 6,080 个 GPU,分布在 760 个节点中,这可能使其成为世界上最强大的计算机之一。以目前的规模,它与世界排名第五的国家能源研究科学计算中心的Perlmutter超级计算机相当。然而,当今年晚些时候完成时,Meta 表示它将拥有 16,000 个 GPU,该公司预计它将能够实现近 5 exaflops 的计算性能——即每秒 5 万亿次运算。

当完全建成后,集群的大小将几乎增加两倍,据我们所知,这将使其成为世界上最快的人工智能超级计算机。

Meta 表示,其研究人员已经开始使用超级计算机来训练与自然语言处理和计算机视觉相关的大型模型,研究人员将能够使用超级计算机“无缝地同时分析文本、图像和视频”并提出新的增强现实工具。随着时间的推移,Meta 希望它能让公司“构建全新的人工智能系统”,能够完成计算困难的任务,例如为一大群说不同语言的人进行实时翻译。

Meta 表示早期测试表明,这台超级计算机训练大型语言模型的速度是目前使用的系统的三倍。这意味着用现有系统训练需要 9 周时间的 AI 模型可以用超级计算机在 3 周内完成训练。

Meta 希望其新的超级计算机最终能够训练具有数万亿个参数的 AI 模型——这种规模的现有 AI 模型只有少数几个。 它也将比 GPT-3 大很多倍,GPT-3 是OpenAI 的一个大型语言模型,可以生成听起来像人类的文本,并被用于自由职业者的语言学习和税务软件等应用程序。

最终超级计算机将带来构建所谓“元界”所需的技术——一个范围广泛、相互关联的虚拟领域,人们可以通过数字化身在其中四处走动,并与虚拟现实中的其他人互动. Facebook 已将元宇宙定位为公司的未来,但今天,这一愿景仅实现了一小部分。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20220125A02H1O00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券