新大模型可根据文本生成高清视频
创始人
2024-04-28 17:24:40
0次
原标题：新大模型可根据文本生成高清视频
27日，在中关村论坛未来人工智能先锋论坛上，清华大学联合北京生数科技有限公司（以下简称“生数科技”）正式发布中国首个原创全自研视频大模型——Vidu。论坛现场，清华大学教授、生数科技首席科学家朱军向与会者展示了Vidu生成的视频，包括行驶在崎岖道路上的汽车、戴珍珠耳环的猫、弹吉他的熊猫等。与此前震撼业界的Sora一样，Vidu能够根据文本描述直接生成高质量视频。
“长时长、高一致性、高动态性”是Vidu的显著特征。朱军表示，研发团队的核心技术在于采用U-ViT架构。它由Diffusion与Transformer两个模型融合而来，可支持一键生成长达16秒的高清视频内容。
除了在时长方面优势突出，Vidu在视频效果方面也实现显著提升。朱军介绍，Vidu能模拟真实物理世界，生成的视频不但场景细节复杂，而且符合物理规律，例如合理的光影效果、细腻的人物表情等。Vidu还具有丰富的想象力，能生成真实世界不存在的虚构画面，创造出具有深度和复杂性的超现实主义内容。此外，Vidu可理解多镜头语言，生成的视频不再局限于简单的推、拉、移等固定镜头，而是围绕同一主体实现远景、中景、近景、特写等不同镜头的切换，甚至能直接生成长镜头、追焦、转场等效果，给视频注入丰富的镜头表达。Vidu还独具文化特色，能很好理解中国元素，生成熊猫、龙等中国元素的视频。
值得一提的是，论坛上展示的视频都是从头到尾连续生成，没有明显的插帧现象。朱军说，与Sora一样，Vidu在文本到视频的转换过程中直接且连续，而且在底层算法上，是由单一模型完全端到端生成，不涉及插帧和其他多步骤处理。（记者何亮）
下一篇：AI可据蛋白结构快速设计药物分子
相关内容
热门资讯
南开大学与多所上合成员国高校签...
7月10日，来华参加上合组织数字经济论坛活动的巴基斯坦国立科技大学、巴基斯坦萨戈达大学、哈萨克斯坦古...
以创造性思维构建美术教育新范式
□ 袁 媛 在数字化浪潮与人工智能蓬勃发展的21世纪，创造力已成为人类应对挑战的核心竞争力。高校美术...
教师管理素养提升的阅读策略
说起管理，一些教师可能会觉得这只是管理者的事情。其实不然，教师每天都要面对学科教学任务和各式各样的教...
完善留学培训服务 为留学报国保...
2020年，世界经历了新冠疫情这一全球性公共卫生事件，百年未有之大变局加速演进，出国留学作为教育国际...
本科提前批征集志愿明日填报，四...
征集志愿是什么？该如何把握机会？日前，高招已进入录取阶段。在录取过程中，根据招生录取的实际情况，省级...
人工智能时代，如何面对“文理抉...
人工智能时代，如何面对“文理抉择” 正值2025年高考志愿填报期，有关专业选择的讨论再度升温。在人...
基础教育课程教学深化改革的亮点...
主持人：翁绮睿 教育科学出版社学术著作编辑部主任 嘉宾：田慧生 首都师范大学教授、博士生导师，中国教...
2025年中考语文模拟卷（徐州...
2025年中考语文模拟卷（徐州专用） （考试时间：150分钟 试卷满分：140分） 一、积累与运用（...
近90年历史！碧江小学易地重建...
恭喜北滘居民，这所近百年历史的学校即将焕新！ 7月9日，广东省投资项目在线审批监管平台正式公布， 北...
正观漫读｜如何让孩子感觉自己被...
如何让孩子感觉自己被深爱？这4句话记得要常说。 01 “我很在乎你的感受” 生活中，有些父母尽管很...
全面启动！浙江高考普通类提前录...
今天上午8:30，普通类提前录取第一段开始投档，我省2025年高考招生录取工作全面展开。预计考生可于...
情况通报：班主任赵某某，解聘
7月11日，聚龙外国语学校发布情况通报，内容如下： 近日，网传关于我校学生李某某遭班主任教师不当教育...
秒了！考研专业课真题这么找
考研备战路上，专业课真题就像一把金钥匙，能打开通往理想院校的大门。回想起我的备考经历，寻找真题的过程...
教育部：将数字素养纳入中小学教...
新京报讯（记者冯琪）7月7日，教育部发布通知，决定实施数字化赋能教师发展行动。通知提出六项重点任务，...
教育部开展第四批“全国高校黄大...
近日，教育部印发《关于开展第四批“全国高校黄大年式教师团队”创建活动的通知》（以下简称《通知》），启...
@吉林市高考考生和家长，这是典...
高考志愿填报后，就是等待录取结果的时候了。然而，骗子们却趁机伸出黑手，精心编织陷阱。暑假期间，小梁满...
暑期防溺不缺位，安全守护“不掉...
随着夏季的到来，气温逐渐升高，溺水事故进入高发期。为保障学生生命安全，防范溺水事件发生，家长、学校应...
【教育】录取通知书收件地址及电...
录取通知书收件地址及电话可以修改吗？准考证找不到了还能正常收件吗？怎么辨别通知书的真假？针对广大同学...
盛世清北：北大马克思主义发展史...
从盛世清北十余年专注清北硕博辅导的经验来看，考研真题是备考过程中极具价值的资料，它犹如一面镜子，能清...
道真：“法”润校园 护航暑期
近日，贵州省强制戒毒康复医院、道真自治县法宣办、道真自治县司法局到道真自治县上坝中学开展“知法守法、...