标题:统计可控数据合成!麦吉尔大学团队推出LLMSynthor
现有数据合成方法在合理性与分布一致性上存在不足,且扩展性差。大语言模型受限于采样效率和上下文窗口,难以直接生成大规模数据集。麦吉尔大学团队提出新方法LLMSynthor,让大模型成为结构感知的数据模拟器,为隐私敏感或数据稀缺场景生成高质量替代数据。
LLMSynthor通过“结构推理-统计对齐-生成分布-迭代对齐”四步框架,解决传统方法在高维依赖建模和泛化能力上的问题。首先,利用大语言模型模拟Copula,理解变量间依赖关系;其次,通过统计摘要衡量真实与合成数据差距,避免个体数据泄露;接着,生成可采样的分布规则而非单一样本,确保结构可信并支持多模态任务;最后,迭代优化直至生成高度接近真实数据的合成集。
该方法具备理论收敛保障,提出局部结构一致性定理,确保误差逐步收敛至可控范围。实验显示,LLMSynthor在电商交易、人口统计和城市出行等场景中表现优异,特别是在边缘与联合分布误差、政策指标预测及场景操控能力上优于现有技术。此外,LLMSynthor兼容多种大模型,具有高效性和良好扩展性。
论文链接:https://arxiv.org/pdf/2505.14752
项目地址:https://yihongt.github.io/llmsynthor_web/
原文链接
本文链接:https://kx.umi6.com/article/19201.html
转载请注明文章出处
相关推荐
换一换
天天卖断货的GLM-5.2 用起来到底值不值
2026-06-18 07:16:32
美国禁掉Fable5后 智谱暴涨47%
2026-06-18 00:02:46
Harness 神器 J-Space 造假案背后,思维链作者暴论,小模型 + 工具干不掉顶级大模型
2026-08-20 12:26:39
终于要变聪明了!特斯拉官宣接入豆包
2026-06-24 15:38:03
清华孙茂松:对工业界而言,大厂可以Scaling,其他玩家重在垂直应用 | MEET2026
2025-12-21 10:35:20
杨植麟当主持人的大模型圆桌:张鹏罗福莉夏立雪都放开说了
2026-03-27 23:23:11
刚刚,Qwen3.8-27B 开源了!家用显卡也能跑
2026-08-15 00:36:59
刚刚,智谱港交所敲钟!市值528亿港元
2026-01-08 11:04:01
ToC智能体火得快,但更大的价值在企业丨中关村科金@MEET2026
2025-12-12 14:53:17
智谱AI今日正式上市,一文讲透你想知道的6件事
2026-01-09 21:35:10
智谱AI,排名「第二」
2025-12-21 12:41:26
老黄RTX Spark真机现身Bilibili World!CPU和GPU直接焊在一起,笔记本跑120B大模型
2026-07-12 10:19:23
GPT-5.6首批实测来了!精准狙击Mythos
2026-06-10 15:15:36
751 文章
958658 浏览
24小时热文
更多
-
2026-09-06 21:14:00 -
2026-09-06 20:12:34 -
2026-09-06 20:10:47