首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

微软发布史上最大语言模型Turing-NLG:170亿参数量

文 | 周蕾 微软AI&Research今天分享了有史以来最大的基于Transformer架构的语言生成模型Turing NLG(下文简称为T-NLG),并开源了一个名为DeepSpeed的深度学习库...而此次微软所分享的模型,T-NLG的参数为170亿个,是英伟达的Megatron(现在是第二大Transformer模型)的两倍,其参数是OpenAI的GPT-2的十倍。...微软表示,T-NLG在各种语言建模基准上均优于最新技术,并在应用于许多实际任务(包括总结和问题解答)时表现出色。 ?...同样是在今天,微软还开源了一个名为DeepSpeed的深度学习库。该学习库已针对开发人员进行了优化,以提供低延迟、高吞吐量的推理。...DeepSpeed包含零冗余优化器(ZeRO),用于大规模训练具有1亿个或更多参数的模型,微软过去曾用它训练T-NLG。

1.3K10

微软竟然上传用户磁盘加密密钥到微软服务器

The Intercept揭露,当用户使用微软账号登录Windows 10时,操作系统会自动上传一份恢复密钥到服务器,并且我们无法阻止其上传。...但是很少有人知道的是,如果你跟大部分其他用户一样,用微软账户登录Windows 10,你的计算机就会自动上传一份恢复密钥的副本到微软服务器——这可以用来解密你加密的磁盘,它可能不会告知你,并且你也没有办法不让它上传...很明显,这样的设定会带来诸多隐患,比如如果攻击者攻陷了用户的微软账号,他就可以获取/拷贝/删除这些密钥;如果黑客攻陷了微软服务器,他可以获取到用户的恢复密钥,微软内部人员也可以这么做。...The Intercept强调,微软把恢复密钥存储在服务器上,把自己变成了托管机构,用户可以删除他们的恢复密钥,但是他们不知道可以那么做。 如何删除微软账号中的密钥?...以下就是从微软账号删除加密密钥的过程: 用微软账号登录恢复密钥网站 这个网站有一份恢复密钥列表 本地备份恢复密钥 从微软账号删除密钥 The Intercept称,上述过程还是无法保证密钥从微软服务器上真正删除

2.3K90
您找到你想要的搜索结果了吗?
是的
没有找到

华为2021在美专利数量首次进前五,超越英特尔苹果微软

萧箫 发自 凹非寺 量子位 报道 | 公众号 QbitAI 刚刚,全球专利数量排行榜出炉!...甚至在前5名中,华为是唯一获得专利数量相较前年上涨的公司,其他均出现了不同程度的下跌。 那么,如果是截至2021年全球范围累计的专利数量呢?...与去年排名相比,前三名IBM(8682件)、三星电子(6366件)和佳能(3021件)没有变化,台积电上升了2位,华为则是上升了4位(去年排在第9): 英特尔、苹果、LG、微软和高通也排进前10,其中微软的排名波动较大...但细看专利数量的话就会发现,前10名中除了华为,专利数量从2761增加到2770,保持稳定以外,其他9个公司的专利数量都出现了不同程度的下降。...全球专利累计量TOP10中国占6席 然后,我们再来看看2021年全球专利累计数量的排名。 相比于美国专利数量,今年全球专利的排名发生了很大变化,其中有不少中国公司。

31310

微软十大最受欢迎开源软件库,最高Star数量13万

出品 | OSC开源社区(ID:oschina2013) 在这篇文章中,我们将列出由微软开发和维护的 Top 10 GitHub 开源软件库,排名按照 Star 数量排序(截止 2022 年 5 月...ML-For-Beginners 主要平台:Jupyter Notebook (99.4%) Stars:35.5k Watching:683 Forks:6.9k 描述:这是一个面向初学者的机器学习课程,微软提供一个为期...playwright) 5:Web-Dev-For-Beginners 主要编程语言:JavaScript (78.5%) Stars:48.2k Watching:2.4k Forks:7k 描述:微软提供的一个为期...仓库地址:Visual Studio Code(https://github.com/microsoft/vscode) 上述十个项目就是由微软开发和维护的十大 GitHub 开源软件库,这些项目的 Star...数量是否符合你的预期,榜单上有没有什么项目是你完全没有预料到的呢?

1.5K20

盘点微软最受欢迎的10个GitHub项目,最高Star数量 13 万

在这篇文章中,我们将列出由微软开发和维护的 Top 10 GitHub 开源软件库,排名按照 Star 数量排序(截止 2022 年 5 月 9 日的数据),并附上一些相关的统计数据和简短的官方描述信息...ML-For-Beginners 主要平台:Jupyter Notebook (99.4%) Stars:35.5k Watching:683 Forks:6.9k 描述:这是一个面向初学者的机器学习课程,微软提供一个为期...5:Web-Dev-For-Beginners 主要编程语言:JavaScript (78.5%) Stars:48.2k Watching:2.4k Forks:7k 描述:微软提供的一个为期 12...上述十个项目就是由微软开发和维护的十大 GitHub 开源软件库,这些项目的 Star 数量是否符合你的预期,榜单上有没有什么项目是你完全没有预料到的呢?

81930

如何看待微软论文声称 ChatGPT 是 20B (200亿) 参数量的模型?

今天朋友圈被一张截图和一篇微软的EMNLP的论文给激活了 论文:CodeFusion: A Pre-trained Diffusion Model for Code Generation 地址:https...微软的这篇论文(CODEFUSION: A Pre-trained Diffusion Model for Code Generation)是介绍代码模型 CodeFusion 的,其中一张比较表格中,...再过几天 OpenAI 就要办开发者大会了,希望能有更多信息,据外媒说 OpenAI 最近丢了不少商业客户,甚至和微软也貌合神离的,OpenAI 说要降低费用,让开发者能有更多机会,感觉他们还会憋点大招出来...做大模型肯定会遵循科学做法的,不会拍脑袋,那么就有两种可能: 可能性一:OpenAI已经看到Chinchilla的论文,模型是按照龙猫法则做的,我们假设ChatGPT的训练数据量不低于2.4T token数量...(为啥这样后面分析),那么按照龙猫法则倒推,一般训练数据量除以20就应该是最优参数量

32530

如何在微软iis服务器部署ssl证书

(建议在PC端阅读) 1、首先我们要下载我们的证书,保存在我们本地的电脑里,然后复制到服务器即可(或者在服务器都浏览器里直接下载)。 image.png 2、下载后接下来干嘛?...4、小伙伴们可以在服务器上进行这些解析,不过也可以像小编一样在本地进行,然后在服务器内创建个文件夹,把需要的东西复制进去即可。...(不要用剪切,你知道的,就算你不知道你也会去百度的) 5、然后打开服务器的IIS控制面板。 6、然后打开IIS的主页找到服务器证书栏,双击打开即可。...9、现在我们去找到我们需要部署的网站,在服务器网站栏里,双击绑定。 10、然后我们点添加,添加,添加选择https,443端口,证书是哪个的就部署哪个的。...我们需要在IIS上下载个重写组件(部分自带的服务器环境已经安装好url重写,或者英文的,或者中文的,如果有就不要再下载了)。

4.4K60

EasyCVR服务器集群设备列表返回数量异常的排查与优化

EasyCVR平台已经实现了集群功能,该功能具体是指可以通过多台服务器协作的方式,实现流媒体处理、分发时的服务器负载均衡以及不同服务器之间的数据共享需求。...在测试功能时发现,集群设备列表返回数量有异常。参加集群的服务器关闭集群后,返回的设备数量为全部的集群设备总数,正常情况下,应该是只返回当前服务器上的设备数量。针对该情况,我们立刻进行了排查与优化。...图片图片在设备列表接口查询设备数量时,应该先判断当前服务器是否开启了集群,如果没有开启集群,则在统计设备数量时,在SQL语句加入集群ID条件。...按此逻辑修改后,集群设备列表返回的数量已经是正确的了,如图:图片我们在前期的文章中分享过很多关于集群的技术型文章,感兴趣的用户可以翻阅我们往期的文章进行了解。...EasyCVR的集群不仅提升了平台视频服务能力的灵活性与拓展性,而且也极大提升了服务器的计算与处理能力,在场景应用上更加能满足用户的多业务拓展需求。感兴趣的用户可以前往演示平台进行体验或部署测试。

42820

微软邮箱设置smtp_邮件服务器怎么设置

SMTP 服务器支持以下功能: 先决条件 若要执行这些过程,你必须是 Azure DevOps 应用层服务器上 ” Administrators ” 安全组的成员。...配置 SMTP 服务器 如果不是 Azure DevOps 管理员,请 立即添加。 从 ” 开始 ” 菜单打开 Azure DevOps Server 管理控制台。...启用电子邮件警报,并指定用于发送电子邮件的 SMTP 服务器和电子邮件地址。 如果将你的部署配置为使用 SSL,则选中第二个复选框并输入证书。...提示 请确保已将防火墙配置为允许 Azure DevOps 与 SMTP 服务器之间的通信。...你的 SMTP 服务器必须配置为允许匿名发件人发送电子邮件,或者你必须之前已创建一个帐户来用作警报的电子邮件帐户。

7.6K40

微软:警惕针对MSSQL服务器的暴力攻击

据Bleeping Computer网站5月18日消息,微软正对使用Microsoft SQL Server (MSSQL) 数据库服务器的用户发出安全警告,警惕攻击者利用弱密码对暴露在网络上的 MSSQL...这已经不是MSSQL服务器第一次成为此类攻击的目标,但微软安全情报团队透露,最近观察到的这次活动背后的攻击者正在使用合法的sqlps.exe工具作为LOLBin(离地攻击,living-off-the-land...多年来,MSSQL 服务器一直是大规模攻击活动的主要目标之一,攻击者每天都会试图劫持数千台易受攻击的服务器。...在近两年的攻击事件中,攻击者通过暴力破解,在2000多台暴露于网络上的服务器中安装了挖矿软件和远程访问木马。...为了保护 MSSQL 服务器免受此类攻击,微软建议对服务器使用不容易被破解的强密码,并确保服务器始终处在防火墙的保护之下,不要被暴露至公开的互联网络环境中。

65620

微软:Exchange 服务器正被用来部署 BlackCat 勒索软件

据BleepingComputer网站6月13日消息,网络攻击者正通过BlackCat 勒索软件攻击存在漏洞的Microsoft Exchange 服务器。...在微软安全专家观察到的案例中,攻击者使用未修补的 Exchange 服务器作为入口向量的初始攻击,两周后,再通过 PsExec在网络上部署了BlackCat 勒索软件有效负载。...“虽然这些威胁参与者的常见入口向量包括远程桌面应用程序和受损凭据,但我们还看到威胁参与者利用 Exchange 服务器漏洞获取目标网络访问权限。”...尽管没有提及用于初始访问的 Exchange 漏洞,但根据微软 2021 年 3 月的安全公告,其中包含了有关调查和缓解ProxyLogon漏洞攻击的指导性说明。...为了防御 BlackCat 勒索软件攻击,微软建议企业组织审查自身系统中的用户身份状况,监控对其网络的外部访问,并尽快更新其环境中所有易受攻击的 Exchange 服务器

50410

用腾讯云轻量搭建微软KMS服务器

版权说明 本教程采用此开源项目: https://github.com/dakkidaze/one-key-kms 由于 Microsoft KMS 服务器会占用1688端口,博主不建议使用中国大陆以外的服务器部署...否则,会像博主一样遭到IDC商家的Abuse投诉,这里博主使用腾讯轻量云服务器部署。...准备工作 腾讯云轻量服务器国内任意区域 Linux操作系统(CentOS或Debian系都行) 开始部署 首先要连接上服务器,需要使用SSH协议的软件登录 CentOS / Redhat / Fedora...ufw allow 1688 激活Windows 该KMS服务只能激活批量激活(VL)版的系统,如果不是可以 通过微软提供的KMS密钥 进行转换 命令提示符或PowerShell需要以管理员身份运行!...root" > /etc/supervisor/conf.d/kms.conf /etc/init.d/supervisor restart 教程结束 以上教程到此结束啦,如果KMS服务用于非商业用途,那么微软中国也不会管那么多

7.3K30

微软公布第二代开放服务器设计

跟着欧洲正在进行的开放计算项目,微软官方放出了包含一个对双芯片和闪存支持的服务器规范。...微软在二月份想开放计算项目贡献了它用于其大规模云及超大规模数据中心环境的服务器设计,现在放出的则是第二代服务器规格。...“总体而言,OCS v2 规范是对许多设计要点的衔接”,微软服务器工程总经理Kushagra Vaid在公司的博客上如是说。...“ 对于微软要满足其服务交付和数据中心操作目标,以及社区中那些将在自己的数据中心操作中使用OCS v2的人们来说,在一台服务器中满足这些设计要点很关键。”...微软这个在其数据中心运行着超过100万台服务器的软件公司,在二月份加入了联盟,当时他提交了第一份开发云服务器规范,微软不仅运行着一个巨量并且还在不断增长的云计算设施,同样还有大量的传统数据中心环境。

47510

微软发布Z-code++屠榜文本摘要,参数量仅为PaLM的1600

Google发布5400亿参数量的PaLM模型后,NLP预训练似乎走上了海纳百川的路线,即以大量的NLP任务进行训练,以达到全知全能,进而实现解决few-shot任务的能力。...Z-Code++仅针对抽象式文本摘要任务进行优化,在5种语言的13个文本摘要任务中,有9个达到新sota性能,成功超越一众大模型,参数量仅为PaLM的600分之一,GPT-3的200分之一,性价比爆棚!...黄学东博士是IEEE/ACM Fellow,微软首位华人「全球技术院士」、微软云计算人工智能首席技术官。他先后获得湖南大学学士学位,清华大学硕士学位和英国爱丁堡大学博士学位。...Z-Code的翻译效果非常好,也被应用到微软的各项产品中,以提高机器翻译的质量。...在长文本实验中,将Z-Code++与PEGASUS和LongT5进行比较后可以看到,Z-coder++依然是SOTA,并将平均最高分提升了0.35,而参数量还不到LongT5-3B的三分之一。

34020
领券