首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

OpenAI 的科学家日志|每天神奇的时间喝酒,产生超人的编程能力

文生视频模型 Sora发布后,OpenAI 再次展现出惊人的引领优势。很多人不禁问Sora为什么出自OpenAI,OpenAI的科学家们有多重要?

去年风波,OpenAI的高管员工们在X上集体刷屏“OpenAI is nothing without its people(没有员工,OpenAI什么都不是)”,这句话最能清晰体现OpenAI的核心价值。

OpenAI的科学家不仅仅靠灵感,而且还有无限的精力,华裔科学家谢赛宁朋友圈声明显示,Sora的团队每天基本不睡觉高强度工作了一年。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

OpenAI 研究员 Jason Wei日志细节除了信仰的力量,无限的工作精力,特别有意思的还有对超能力的运用,“每天,晚上8 点喝杯葡萄酒,继续写代码,此时达到Ballmer’s peak(鲍尔默峰值,即程序员在血液酒精浓度在 0.129%~0.138% 时会产生超人的编程能力)”。

此时喝酒产生灵感,竟然在整个美国科技圈经过了“认证”。

下图是2024年2月21日,OpenAI的研究员Jason Wei发布的普通一天日志,Jason Wei 本科毕业后加入 Google Brain 团队,后跳槽到 OpenAI。在 Google 工作期间,他对大语言模型的发展做出了重要贡献,提出了思维链等概念,并参与了涌现现象的相关研究工作。‍‍‍‍‍

Jason Wei的日志翻译

上午

9:00,起床;

9:30,乘 Waymo 无人驾驶车去公司,然后吃点牛油果吐司当早饭;

9:45:背诵 OpenAI 章程(核心是确保通用人工智能造福全人类),向最优化的神祷告,学习《 the Bitter Lesson/苦涩的教训》;

10:00,用 Google Meet 开会,讨论怎么在更多数据上训练更大的模型;

11:00,写代码,用来在更多数据上训练更大的模型;

中午‍‍‍

12:00,去食堂吃午饭(素食,无麸质);

下午,开始增加工作强度

1:00,继续训练模型;

2:00,调试基础设施问题;

3:00,监控模型训练,顺便玩一下 Sora;

4:00,对前面提到的训练的模型进行提示工程;

4:30,休息一下,坐在牛油果椅子上,想知道 Gemini Ultra 到底有多好;

5:00,进行头脑风暴,思考改进模型的潜在算法;

5:05, 得出结论:改变算法风险太大,只扩展计算和数据更安全;

6:00,吃晚饭;

晚上

7:00,通勤回家。

夜幕降临

对超能力的运用,能力最高的时间段来了,

8:00,喝杯葡萄酒,继续写代码,此时达到Ballmer’s peak(鲍尔默峰值,即程序员在血液酒精浓度在 0.129%~0.138% 时会产生超人的编程能力;

9:00,分析实验运行;

10:00,开始实验,让其整晚运行,第二天早上拿结果;

凌晨

1:00,真正开始运行实验;

1:15,就寝,默念「Compression is all you need」。

Ballmer’s peak/鲍尔默峰值,传说是微软在 80 年代末发现的定律,这一概念以微软前首席执行官史蒂夫·鲍尔默 (Steve Ballmer) 的名字命名,很可能是对科学家约翰·巴尔默 (Johann Balmer) 命名的巴尔默系列氢谱线的一种演绎。

鲍尔默峰值于2007年通过xkcd漫画而流行,见下图。‍‍

以酒会友测评世界美酒

  • 发表于:
  • 原文链接https://page.om.qq.com/page/Oh2SjOEwTnO54M--ipjz5ioQ0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券