直接生成16秒高清视频 我国自研视频大模型在京发布
新华社北京4月27日电(记者魏梦佳)只需一段文字指令就能生成一段逼真视频,今年初,文生视频大模型Sora在全球人工智能业内外引发广泛关注。27日,2024中关村论坛年会上首次发布我国自研的具“长时长、高一致性、高动态性”特点的文生视频大模型Vidu。
图片来源于网络,如有侵权,请联系删除
记者从会上获悉,这一视频大模型由清华大学联合北京生数科技有限公司共同研发,可根据文本描述直接生成长达16秒、分辨率高达1080P的高清视频内容,不仅能模拟真实物理世界,还拥有丰富想象力。
清华大学人工智能研究院副院长、生数科技首席科学家朱军说,当前国内视频大模型的生成视频时长大多为4秒左右,Vidu则可实现一次性生成16秒的视频时长。同时,视频画面能保持连贯流畅,随着镜头移动,人物和场景在时间、空间中能保持高一致性。
在动态性方面,Vidu能生成复杂的动态镜头,不再局限于简单的推、拉、移等固定镜头,而是能在一段画面里实现远景、近景、中景、特写等不同镜头的切换,包括能直接生成长镜头、追焦、转场等效果。
“Vidu能模拟真实物理世界,生成细节复杂且符合物理规律的场景,例如合理的光影效果、细腻的人物表情等,还能创造出具有深度和复杂性的超现实主义内容。”朱军介绍,由于采用“一步到位”的生成方式,视频片段从头到尾连续生成,没有明显的插帧现象。
此外,Vidu还可生成如熊猫、龙等形象。
据悉,Vidu的技术突破源于团队在机器学习和多模态大模型方面的长期积累,其核心技术架构由团队早在2022年就提出并持续开展自主研发。“作为一款通用视觉模型,我们相信,Vidu未来能支持生成更加多样化、更长时长的视频内容,探索不同的生成任务,其灵活架构也将兼容更广泛的模态,进一步拓展多模态通用能力的边界。”朱军说。
【责任编辑:王頔】
阅读下一篇:
扫描二维码推送至手机访问。
版权声明:本文由发布,如需转载请注明出处。
“直接生成16秒高清视频 我国自研视频大模型在京发布” 的相关文章
新华社太原3月27日电(李国利、李宸)3月27日6时51分,我国在太原卫星发射中心使用长征六号改运载火箭,成功将云海三号02星发射升空,卫星顺利进入预定轨道,发射任务获得圆满成功。图片来源于网络,如有侵权,请联系删除图片来源于网络,如有侵权,请联系删除 3月27日6时51分,我国在太原卫星发射...
新华社南京3月29日电(记者王珏玢、邱冰清)30日将迎鸟神星冲日。中国科学院紫金山天文台科普主管王科超介绍,冲日是观测地外天体的好时机。冲日前后,天文爱好者可以尝试通过专业望远镜及相机长时间曝光来拍摄鸟神星。图片来源于网络,如有侵权,请联系删除图片来源于网络,如有侵权,请联系删除 2005年被...
新华社哈尔滨4月1日电 题:育种专家的笔记本图片来源于网络,如有侵权,请联系删除 新华社记者张玥、张启明、丁赫图片来源于网络,如有侵权,请联系删除 眼下正值黑龙江省水稻育种材料脱粒、分包时期,在黑龙江省农科院绥化分院的植物全生育期智能育种工厂,聂守军正在观察不同生长阶段的水稻育种材料植株,为...
图片来源于网络,如有侵权,请联系删除 爆火之后,远在美国的贾跃亭老师,竟然炮轰雷军造车,称山寨文化、走捷径模式和follower思维却被很多人奉为圭臬,令人担忧。 贾跃亭点评小米 4月1日,贾跃亭发文称:小米汽车的首次发布非常成功,体现了中汽车产业链在近几年的日臻成熟和中...
说到智慧生活,你会想到什么?以智慧科技赋能特色美食,又能擦出怎样的火花呢?图片来源于网络,如有侵权,请联系删除 当春日的微风轻拂着古老而丰饶的安徽大地,海尔专卖店将与央视《远方的家》携手,在安徽商务厅、文旅厅的支持下,于4月13日共同开启一段科技与文化交融的美丽旅程。徽州的臭鳜鱼、黄山烧饼与毛...
当地时间4月14日,根据美国国防部的声明,美国国防部部长奥斯汀当日与以色列国防部部长加兰特进行通话。奥斯汀强调,美国不寻求与伊朗发生冲突,但将继续采取一切必要行动来保护以色列和美国人员的安全。图片来源于网络,如有侵权,请联系删除 此外,奥斯汀还向加兰特介绍了美国与伙伴和盟友磋商,加强国际社...