斯坦福大学基础模型研究中心主任Percy Liang在社交平台发布了HELM MMLU最新榜单,阿里巴巴的通义千问开源模型Qwen2-72B排名第5,仅次于Claude 3 Opus、GPT-4o、Gemini 1.5 pro、GPT-4,性能超越Llama3-70B模型,是排名第一的开源大模型,也是排名最高的中国大模型。
阿里通义千问 Qwen2 大模型于 6 月初宣布开源,包括了 5 个尺⼨的预训练和指令微调模型,:Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B、Qwen2-57B-A14B 以及 Qwen2-72B。
在中⽂英语的基础上,训练数据中增加了 27 种语⾔相关的⾼质量数据;上下文长度支持进一步扩展,最⾼达到 128K tokens(Qwen2-72B-Instruct)。并采⽤了不同的模型许可。除了 Qwen2-72B 依旧使⽤此前的 Qianwen License 外,其余模型,包括 Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B 以及 Qwen2-57B-A14B 在内,均采⽤ Apache 2.0 的许可。
目前,Qwen系列模型下载量已经突破1600万。
相关阅读:
- 阿里通义千问 Qwen2 大模型开源发布