
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
8月24日,Meta宣布推出Reels短视频音频翻译功能,率先上线Facebook和Instagram平台。该功能利用AI技术将视频中的人物语音自动翻译成不同语言,并支持嘴型对齐和双人对话同步翻译,生成与原声相似的音轨以提升自然度。目前支持英语和西班牙语,建议创作者拍摄时使用清晰直述内容以优化效果。此外,Facebook还新增多语言音轨上传选项,创作者可通过Reels编辑器为单条视频添加最多20条音轨,并按观众语言设置自动播放对应版本。这一功能大幅降低了多语言视频制作成本,助力创作者高效分发内容。
原文链接
4月21日,昆仑万维发布并开源了SkyReels-V2模型,这是全球首个采用扩散强迫(Diffusion-forcing)框架的无限时长电影生成模型。该模型结合多模态大语言模型(MLLM)、多阶段预训练、强化学习及扩散强迫框架实现协同优化,突破了传统视频生成技术的边界,开启了“无限时长电影生成”的新时代。现有技术常因稳定性和运动动态难以兼顾,在提升视觉质量的同时限制视频时长,而SkyReels-V2解决了这一问题,支持生成30秒至40秒的高运动质量、高一致性和高保真视频,满足电影制作需求。此外,SkyReels-A2提供故事生成、图生视频、运镜专家等应用场景。GitHub和HuggingFace均已开放相关资源链接。
原文链接
标题:SkyReels-V2开源:突破视频生成技术边界,开启无限时长电影生成新时代
4月21日,昆仑万维SkyReels团队发布并开源SkyReels-V2,这是全球首个使用扩散强迫框架的无限时长电影生成模型。SkyReels-V2结合多模态大语言模型、多阶段预训练、强化学习及扩散强迫框架实现协...
原文链接
昆仑万维于2月18日宣布开源国内首个面向AI短剧创作的视频生成模型SkyReels-V1,该模型支持文生视频和图生视频,并具备影视级人物微表情生成能力。SkyReels-V1通过“千万级别、高质量”的数据训练,实现了33种人物表情与400多种自然动作组合,支持从不屑到哭泣等多种微表情生成。此外,昆仑万维还开源了SkyReels-A1,一个基于视频基座模型的表情动作可控算法,支持视频驱动的电影级表情捕捉。这两个模型均在自研推理优化框架的支持下,提升了模型的易用性和性能。
原文链接
8月19日,全球首个集成视频大模型与3D大模型的AI短剧平台SkyReels由昆仑万维发布。这款平台集剧本生成、角色定制、分镜、剧情、对白及影片合成于一体,使创作者能一键完成从创意到短剧制作的全流程。用户只需输入创意,SkyReels就能自动生成剧本、分镜、对白和背景音乐,并自动转化为1080P 60帧的高清视频,单次可生成时长180秒的短剧。平台搭载了昆仑万维自主研发的剧本大模型SkyScript、分镜大模型StoryboardGen、3D生成大模型Sky3DGen以及业内首个AI3D引擎与视频大模型深度融合的创新平台WorldEngine。此外,昆仑万维声称已构建了亿级高质量短剧结构化数据集SkyScript-100M,以支持短剧的创作和优化。此发布标志着AI技术在短剧制作领域的重要突破,为创作者提供了高效便捷的创作工具。
原文链接
加载更多

暂无内容