新大模型可根据文本生成高清视频
创始人
2024-04-28 17:24:40
0次
原标题：新大模型可根据文本生成高清视频
27日，在中关村论坛未来人工智能先锋论坛上，清华大学联合北京生数科技有限公司（以下简称“生数科技”）正式发布中国首个原创全自研视频大模型——Vidu。论坛现场，清华大学教授、生数科技首席科学家朱军向与会者展示了Vidu生成的视频，包括行驶在崎岖道路上的汽车、戴珍珠耳环的猫、弹吉他的熊猫等。与此前震撼业界的Sora一样，Vidu能够根据文本描述直接生成高质量视频。
“长时长、高一致性、高动态性”是Vidu的显著特征。朱军表示，研发团队的核心技术在于采用U-ViT架构。它由Diffusion与Transformer两个模型融合而来，可支持一键生成长达16秒的高清视频内容。
除了在时长方面优势突出，Vidu在视频效果方面也实现显著提升。朱军介绍，Vidu能模拟真实物理世界，生成的视频不但场景细节复杂，而且符合物理规律，例如合理的光影效果、细腻的人物表情等。Vidu还具有丰富的想象力，能生成真实世界不存在的虚构画面，创造出具有深度和复杂性的超现实主义内容。此外，Vidu可理解多镜头语言，生成的视频不再局限于简单的推、拉、移等固定镜头，而是围绕同一主体实现远景、中景、近景、特写等不同镜头的切换，甚至能直接生成长镜头、追焦、转场等效果，给视频注入丰富的镜头表达。Vidu还独具文化特色，能很好理解中国元素，生成熊猫、龙等中国元素的视频。
值得一提的是，论坛上展示的视频都是从头到尾连续生成，没有明显的插帧现象。朱军说，与Sora一样，Vidu在文本到视频的转换过程中直接且连续，而且在底层算法上，是由单一模型完全端到端生成，不涉及插帧和其他多步骤处理。（记者何亮）
下一篇：AI可据蛋白结构快速设计药物分子
相关内容
热门资讯
免费中考真题分类汇编攻略,20...
中考冲刺找资料，你是不是也遇到过这些问题？全网搜罗真题要么版本不匹配，要么带水印无法打印，要么打着免...
重要通知！全椒县中小学幼儿园开...
滁州市教育体育局关于印发 2026—2027学年度时间安排的通知 各县、市、区教育体育局，苏滁高新区...
办好必要的乡村小规模学校
走进改革攻坚现场 《教育发展“十五五”规划》在“推动义务教育优质均衡发展”方面要求，办好寄宿制学校和...
??????????|????...
零基础日语自学路线图｜从五十音到N5我踩过的坑零基础日语自学路线图｜从五十音到N5我踩过的坑说实话，...
JLPT N5易错点整理｜日语...
JLPT N5易错点整理｜日语考级这6个坑我全踩过JLPT N5易错点整理｜日语考级这6个坑我全踩过...
抓住暑假黄金期！青少年科学运动...
暑期是青少年运动成长黄金期 家长应掌握科学锻炼方式 让孩子健康、平安地度过暑假 如何解锁正确的运动习...
“做中学”让科学教育活起来
（来源：工人日报） 近日，教育部印发《义务教育阶段科学教育“做中学”领航行动指南》（以下简称《指南》...
JLPT N5易混词汇5组辨析...
JLPT N5易混词汇5组辨析｜自学日语最容易搞混的词JLPT N5易混词汇5组辨析｜自学日语最容易...
校园消防一键报警设备解决方案解...
一、背景引入与价值定位 近年来，校园安全管理受到社会各界持续关注，各类教育机构在硬件建设与应急管理制...
日语入门五十音速记攻略｜平假名...
日语入门五十音速记攻略｜平假名片假名一次掌握日语入门五十音速记攻略｜平假名片假名一次掌握日语入门五十...
普京首登南千岛群岛 对日释放什...
俄罗斯总统普京8月13日登上南千岛群岛（日本称北方四岛），并视察了伊图鲁普岛（日本称择捉岛）上一家水...
事关信阳所有中小学！今年9月开...
近日，教育部印发《义务教育阶段科学教育“做中学”领航行动指南》，部署开展科学教育“做中学”领航行动（...
教资笔试心理学易错点解析
在教资科目二考试中，教育学考点以背诵为主，只要肯记忆就能稳定拿分。而教育心理学，是绝大多数考生的最大...
这项考试时间定了！9月1日起报...
重庆市2026年下半年 高等教育自学考试定于 10月24日—25日举行 报名报考工作将于 9月1日—...
四川专升本院校专业分析：成都外...
在四川省2026年专升本招生体系中，成都外国语学院作为四川省唯一专业外国语高校，其会展经济与管理专...
JLPT N5易错点大整理｜这...
JLPT N5易错点大整理｜这6个高频坑考级前必须避开JLPT N5易错点大整理｜这6个高频坑考级前...
日语敬语分级用法指南｜丁寧語尊...
日语敬语分级用法指南｜丁寧語尊敬語謙譲語一篇讲透日语敬语分级用法指南｜丁寧語尊敬語謙譲語一篇讲透日语...
日语口语速成｜便利店点餐问路高...
日语口语速成｜便利店点餐问路高频日常日语日语口语速成｜便利店点餐问路高频日常日语日语口语速成｜便利店...