王小川旗下百川智能发布baichuan-7B大模型

据新智元报道，今天，王小川组建的百川智能公司正式发布了70亿参数的中英文开源大模型——baichuan-7B。目前，baichuan-7B大模型已在Hugging Face、Github和Model Scope等平台上发布。

据官方介绍，baichuan-7B是由百川智能开发的一个开源可商用的大规模预训练语言模型。基于Transformer结构，在大约1.2万亿tokens上训练的70亿参数模型，支持中英双语，上下文窗口长度为4096。在标准的中文和英文权威benchmark（C-EVAL/MMLU）上均取得同尺寸最好的效果。

百川智能表示，baichuan-7B作为在多个榜单评测效果成绩最佳的7B开源可商用大模型，填补了市场上缺乏优质的针对中文优化的7B大模型的空白，是开发者理想的7B大模型底座。同时在商用价值方面，能够在例如文本生成，自动化写作，数据分析，知识问答，中英翻译，个性化交互和专业领域个人小助手，比如医疗领域，给用户带来巨大的价值。

百川智能CEO王小川表示:‘本次开源模型的发布是百川智能成立2个月后的第一个里程碑，对百川智能而言是一个良好的开局。baichuan-7B模型，不仅能为中国的AGI事业添砖加瓦，也为世界大模型开源社区贡献了新的力量。’

Hugging Face：https://huggingface.co/baichuan-inc/baichuan-7B

Github：https://github.com/baichuan-inc/baichuan-7B

Model Scope：https://modelscope.cn/models/baichuan-inc/baichuan-7B/summary