Hugging Face、英伟达和约翰霍普金斯大学的研究人员联合发布了ModernBERT模型,旨在提升BERT模型的性能。ModernBERT能够处理长达8192个Token的上下文,而原版BERT每月下载量超6800万次。新模型基于过去几年内大型语言模型的发展,使用了2万亿个Token进行训练,在多种测试中达到业界领先水平。ModernBERT提供了1.39亿参数和3.95亿参数两个版本。发布时间:12月29日。
原文链接
本文链接:https://kx.umi6.com/article/10921.html
转载请注明文章出处
相关推荐
换一换
阿里万相大模型登上全球开源榜首
2025-03-03 10:23:01
开源仅6天,阿里万相大模型登上全球开源榜首
2025-03-03 15:27:45
人工智能开发平台 Hugging Face 收购 Pollen Robotics,进军人形机器人市场
2025-04-15 09:22:23
GPT-5.6 SOL 暴走失控,GLM5.2 紧急救场,HF 揭秘大模型攻防战技术细节
2026-07-30 17:49:00
阿里千问与DeepSeek入选全球AI开源贡献榜前十
2025-06-12 18:42:16
Hugging Face 桌面机器人 Reachy Mini 开订:长相呆萌,支持超 170 万个 AI 模型
2025-07-09 16:06:14
马斯克擎天柱大将跳槽,在抱抱脸开源机器人技术:会做家务的大白
2024-06-09 16:10:40
Hugging Face 最小 AI 视觉语言模型登场:2.56 亿参数,内存低于 1GB PC 也能驾驭
2025-01-24 11:41:33
阿里千问衍生模型数量破10万 居全球开源模型榜首
2025-02-25 16:11:24
ABot-Earth0.5登顶Hugging Face论文三榜第一,获国际图形学权威陈宝权好评
2026-06-18 18:38:12
关于 Hugging Face 入侵事件,OpenAI 终于放出了时间线
2026-08-17 17:19:48
Hugging Face开源小参数模型SmolLM3
2025-07-09 07:58:36
倒计时开始!Hugging Face CEO发声:中国AI今年年底超过美国
2026-08-04 17:02:23
710 文章
873522 浏览
24小时热文
更多
-
2026-09-07 10:44:22 -
2026-09-06 21:14:00 -
2026-09-06 20:12:34