智源发布大模型“全家桶”以及管理超4600个AI加速卡的智算系统

2024-06-14 21:17:29

LunarCoder

发布在

快讯

阅读：661

北京智源人工智能研究院（BAAI）在2024年6月14日的北京智源大会上发布了一系列大模型“全家桶”和智算软件系统FlagOS，包括万亿参数的语言模型、检索增强向量模型、多模态大模型等，支持8种芯片。FlagOS作为智能集群软件栈，已管理4600+AI加速卡，SLA超99.5%，并成功支持国产算力的8x16B千亿参数MoE模型训练。此外，1万亿参数模型表现出与GPT-4相当的能力，但使用算力仅为GPT-4的9%。智源还展示了低碳稠密万亿模型Tele-FLM、通用语义向量模型BGE、多模态Emu3、轻量级Bunny模型等，以及具身智能和生物计算领域的突破。会上，院长王仲远强调了异构算力支持和开源技术的重要性，透露下半年会有更多多模态进展。

原文链接

本文链接：https://kx.umi6.com/article/1426.html

转载请注明文章出处

FlagOS