智源研究院正式开源 700 亿参数大模型 Aquila2-70B-Expr

据 36 氪 11 月 30 日报道，北京智源人工智能研究院副院长兼总工程师林咏华在 2023 人工智能计算大会上宣布，正式开源 700 亿参数大模型 Aquila2-70B-Expr（异构先驱版），这是首个基于英伟达混合资源及天数智芯混合资源完成训练的大模型。

据介绍，此次基于 FlagScale v0.2 分别在英伟达混合资源（A100 集群 + A800 集群）、天数智芯混合资源（BI-V100 集群 + BI-V150 集群）完成了 Aquila2-70B-Expr 大模型训练工作。