Mistral AI 发布编程大模型 Codestral:220 亿参数、支持 80 多种语言

2024年 5月 30日 75.7k 0

Mistral 发布了新的编程大模型  Codestral,并开源模型参数权重。据称 Codestral 在代码基准测试中显著优于 Llama3 70B 等大模型。

Codestral 在 80 多种编程语言的不同数据集上进行了训练,其中包括最流行的语言,如 Python、Java、C、C++、JavaScript 和 Bash。对于不那么主流的语言比如 Swift 和 Fortran 同样表现出色。这种广泛的语言基础确保 Codestral 可以在各种编码环境和项目中为开发者提供帮助。

和其它编程 LLM 类似,Codestral 可以帮助开发者完成各种功能,包括完成函数、编写测试、填充代码等等,降低代码中出现错误和漏洞的风险。

Mistral AI 还通过图表,让 Codestral 22B 对比了 Code Llama 70B、DeepSeek Coder 33B 和 Llama 3 70B 同类大模型,表示 Codestral 的参数虽然只有 220 亿,但上下文长度达到 3.2 万个 tokens,根据进行的几项基准测试,它在 Python、SQL 和其他语言方面的表现普遍更好。

在 SQL spider 基准测试中,Llama 3 70B 的得分率为 67.1%,Codestral 22B 为 63.5%;在 MBPP Python 基准测试中,DeepSeek Code 33B 的得分率为 80.2%,Codestral 22B 为 78.2%。

Mistral AI 发布编程大模型 Codestral:220 亿参数、支持 80 多种语言-1

Codestral 目前处于 Beta 阶段,可以访问 chat.mistral.ai 免费使用。

文档:https://docs.mistral.ai/capabilities/code_generation/

相关文章

塑造我成为 CTO 之路的“秘诀”
“人工智能教母”的公司估值达 10 亿美金
教授吐槽:985 高校成高级蓝翔!研究生基本废了,只为房子、票子……
Windows 蓝屏中断提醒开发者:Rust 比 C/C++ 更好
Claude 3.5 Sonnet 在伽利略幻觉指数中名列前茅
上海新增 11 款已完成登记生成式 AI 服务

发布评论