品玩

科技创新者的每日必读

打开APP
关闭

苏州大学推出开源大模型 OpenBA,具备150亿参数

2023年9月22日

品玩9月22日讯,据 Arxiv 页面显示,来自苏州大学的一个研发团队近日推出一款名为 OpenBA 的开源 seq2seq 模型。

据悉, OpenBA 是一款具有150亿参数的双语非对称seq2seq模型,也是首个加入中国开源模型社区的大语言模型变体。论文显示,研究者采用高效的技术以及采用三阶段的训练策略,从头开始训练了OpenBA模型。

实验显示,OpenBA 在 BELEBELE 基准测试中的性能优于 LLaMA-70B,在 MMLU 基准测试中的性能优于 BLOOM-176B,在 C-Eval(hard)基准测试中的性能优于 GLM-130B。

取消 发布

下载品玩App,比99.9%的人更先知道关于「开源」的新故事

下载品玩App

比99.9%的人更先知道关于「开源」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测