综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
中国联通提出大模型能力边界量化基准,避免“高射炮打蚊子”情况。该基准借鉴动物智能演化规律,通过定量分析模型参数量、模型能力和应用场景的关系,为语言大模型的应用选型提供指导。相关成果发表于NLPCC 2024,并已开源。该基准涵盖文本生成、理解等五大类共27种子能力,构建了678个问答对的数据集。评估结果显示,模型参数量越大,能力越强。团队提出一种模型选型方法,指导不同任务选择合适参数的模型,降低用户使用门槛。该基准已应用于元景大模型,提炼出参数量-能力-场景的对应关系,集成到元景MaaS平台。
原文链接
加载更多
暂无内容