开源基础大模型 SOLAR 10.7B
Upstage 正式发布并开源 SOLAR 10.7B 大语言模型家族,提出深度向上扩展 DUS 方法,无需复杂 MoE 结构即可大幅提升小模型容量,基于 Apache 2.0 协议开放。
- 公告日期
- 2023-12-23
- 开放使用日期
- 与公告日期相同
- 厂商
- Upstage
- 模态
- 语言
- 核实状态
- 已核实
Upstage 正式发布并开源 SOLAR 10.7B 大语言模型家族,提出深度向上扩展 DUS 方法,无需复杂 MoE 结构即可大幅提升小模型容量,基于 Apache 2.0 协议开放。