生数科技联合清华发布视频大模型Vidu,全面对标Sora

博融之坚 2024-05-23 6.19 W阅读

新浪科技讯 4月28日上午消息,在中关村(000931)论坛未来人工智能先锋论坛上,生数科技联合清华大学发布长时长、高一致性、高动态性视频大模型――Vidu。该模型采用团队原创的Diffusion与Transformer融合的架构U-ViT,支持一键生成长达16秒、分辨率高达1080P的高清视频内容。

据介绍,Vidu不仅能够模拟真实物理世界,还拥有丰富想象力,具备多镜头生成、时空一致性高等特点。Vidu是自Sora发布之后全球率先取得重大突破的视频大模型,性能全面对标国际顶尖水平,并在加速迭代提升中。与Sora一致,Vidu能够根据提供的文本描述直接生成长达16秒的高质量视频。

值得一提的是,短片中的片段都是从头到尾连续生成,没有明显的插帧现象,从这种“一镜到底”的表现能够推测出,Vidu采用的是“一步到位”的生成方式,与Sora一样,文本到视频的转换是直接且连续的,在底层算法实现上是基于单一模型完全端到端生成,不涉及中间的插帧和其他多步骤的处理。(文猛)

责任编辑:江钰涵

生数科技联合清华发布视频大模型Vidu,全面对标Sora

(责任编辑:张晓波 )