“开源信徒”周鸿祎开源360智脑大模型

2024年 4月 12日 99.9k 0

4月12日,三六零(下称“360”)自研人工智能大模型360智脑7B参数模型正式开源,包括4K、32K、360K三种文本长度:

  • 360Zhinao-7B-Base
  • 360Zhinao-7B-Chat-4K
  • 360Zhinao-7B-Chat-32K
  • 360Zhinao-7B-Chat-360K

360智脑大模型特点如下:

  • 基础模型:采用 3.4 万亿 Tokens 的高质量语料库训练,以中文、英文、代码为主,在相关基准评测中,同尺寸有竞争力。
  • 对话模型:具有强大的对话能力,开放4K、32K、360K三种不同文本长度。

据了解,360K(约50万字)是当前国产开源模型文本长度最长的,可支持50万字左右输入,三秒钟即可读完《三体》。

延伸阅读:周鸿祎自称 “开源信徒”,宣布将开源 360 智脑 7B 模型,支持 50 万字长文本输入

相关文章

塑造我成为 CTO 之路的“秘诀”
“人工智能教母”的公司估值达 10 亿美金
教授吐槽:985 高校成高级蓝翔!研究生基本废了,只为房子、票子……
Windows 蓝屏中断提醒开发者:Rust 比 C/C++ 更好
Claude 3.5 Sonnet 在伽利略幻觉指数中名列前茅
上海新增 11 款已完成登记生成式 AI 服务

发布评论