百川智能发布千亿级参数的大语言模型Baichuan3

文章来源：企鹅号 - 观点新媒体

观点网讯：1月29日，百川智能发布了超千亿参数的大语言模型Baichuan3。该模型采用“动态数据选择”、“重要度保持”及“异步CheckPoint存储”等技术，显著提升了性能，相较业界主流框架提升超过30%。其稳定训练时间长达一个月以上，且故障恢复迅速，不超过10分钟。在多项能力测评中，如CMMLU、GAOKAO、AGI-Eval以及数学和代码专项评测MATH、HumanEval、MBPP等，Baichuan3均表现出色。

在医疗领域权威评测MCMLE、MedExam、CMExam中，它更成为中文医疗任务最佳大模型。Baichuan3通过“迭代式强化学习”技术，进一步增强了语义理解和生成能力。