首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

APUS-xDAN 大模型4.0宣布开源,可适配低端算力芯片

钛媒体App 4月2日消息,APUS与新旦智能联合训练、研发的千亿MoE(Mixture of Experts)架构大模型,在GitHub上正式开源。该模型在4090之类低端算力芯片上,综合性能达到GPT-4 的90%。据钛媒体App了解,APUS-xDAN 大模型4.0特点是多专家模型组合,实际运行效率对比传统Dense同尺寸模型效率提升200%,推理成本下降400%。在实际部署上,模型尺寸缩小500%,是国内首个可在消费级显卡运行的千亿MoE中英文大模型。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/OknCKZkXJqMdQWeyxvKEi87g0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券