昆仑万维开源了名为Skywork-MoE的千亿稀疏大模型,该模型基于Skywork-13B模型扩展而来,并首次将MoE Upcycling技术应用于实际场景。Skywork-MoE是首个可使用单台4090服务器进行推理的开源千亿MoE大模型,具有出色的性能和较低的推理成本。
行业标签
更多体验
前往小程序
24 小时
资讯推送
进群体验