给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!
【给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!】!!!今天受到全网的关注度非常高,那么具体的是什么情况呢,下面大家可以一起来看看具体都是怎么回事吧!
让AI视频中任意主体保持一致!就在刚刚,人人都可轻松做到了。
而且只需一张图片,就能实现。
——上面的每一个马斯克视频,都来自同一张照片。
想玩的话,只需要用上清华系AI视频玩家生数科技旗下Vidu的最新功能,主体参照(Subject Consistency)。
该功能能够实现对任意主体的一致性生成,让视频生成更加稳定,也更加可控。
“现在生成AI视频内容,想要做到‘言出法随’其实还很难,不确定性让视频内容对运镜、光效等的精细控制还是得不断抽卡。”生数科技CEO唐家渝表示,“角色一致性只能让人脸保持一致,而主体参照让主体整体造型都能保持一致,给了更大的创作空间。”
这是继今年7月,生数Vidu面向全球用户上线文生视频与图生视频能力(单视频最长生成8s)后的再次更新。
这次功能上新依然非常友好:
面向用户免费开放,注册即可体验。
仅需一张图片实现主体可控
先来看看Vidu是怎么定义这个新功能的。
主体参照:允许用户上传任意主体的一张图片,然后由Vidu够锁定该主体形象,通过描述词任意切换场景,输出主体一致的视频。
划重点:任意主体。
也就是说,无论是人还是动物,无论是真人还是动漫形象or虚构主体,无论是家具还是商品,都能通过这个功能在视频生成中实现一致性和可控性。
目前,所有的视频大模型中,仅有Vidu率先支持这种玩法。
不必光说不练,我们来看看真实效果。
人物主体
首先来看看以人物为主体。
上传一张87版《红楼梦》林妹妹的定妆照:
以画面中林妹妹为主体,利用主体参照功能,生成两条视频。
突然,林妹妹上台演讲了:
又一眨眼,妹妹已经坐在星爸爸喝咖啡了:
当然啦,真人可以作为生成视频的主体参照,虚拟角色/动漫人物同样可以。
比如输入一张漫画女孩:
生成视频效果是酱紫的:
这里附上一些官方给的小tips:
如需重点保持主体面容一致,需仅截取单一主体的清晰面容图
如需重点保持主体半身一致(面容+上半身服饰),仅需截取单一主体的清晰半身图
如需重点保持主体全身一致(全身特征),仅需截取单一主体的清晰全身图
动物主体
谁能不爱可爱狗狗!
把这张照片丢给Vidu,就能实现狗狗走草地上,一步一步靠近你。
镜头后拉和主体运动幅度表现都还不错。
商品主体
当把商品作为需要参照的主体时,在生成的视频中,商品外观和细节能在不同于图片的场景中保持一致。
就像下面这样:
沙发所在的场景,说变就变。
上面还能睡一个盖了毯子的小女孩,遮挡住沙发原有部分。
需要注意的是,当前版本仅支持单一主体的可控。
如果上传的图片有多个人物/物体,需要框选出单一主体进行生成。
Be Like:
不再“两步走”了
无论是制作短视频、动画作品还是广告片,“主体一致、场景一致、风格一致”都是共同的追求。
因此,AI视频生成内容想要有叙事效果,就需要不断往三个一致方面尽力靠拢。
尤其是就现实情况而言,实际的视频创作,内容往往围绕特定的对象展开——这往往也是视频生成内容最容易变形、崩坏的一点,尤其在涉及复杂动作和交互的情况下。
挠头,脑阔痛。
业界首先想到的办法是先AI生图、再图生视频。
说人话,就是用Midjourney、SD什么的,生成分镜镜头画面,让每张图里的主体保持一致,然后再进行图生视频,最后把每个视频片段拼接剪辑。
但一听就发现了,这样搞,无论是保持AI画图的一致性,还是后期拼拼剪剪,工作量都很大。
生数Vidu“主体参照”跟这个思路的不一样之处,就是不再两步走了。
而是通过“上传主体图+输入场景描述词”的方式,直接生成视频素材。
最后,我们来厘清以及区分三个概念:
图生视频(Image to Video)
角色一致性(Character to Video)
主体参照(Subject Consistency)
图生视频基本是现在AI视频生成的基操了。
它把输入的图片作为视频首帧,然后基于首帧画面的连续生成。
Bug是无法直接输出目标场景,限制了视频内容的多样性和场景的自由度。
角色一致性,主要集中在人物形象上起效果。
它能保证人物面部特征在动态视频中保持一致,但一般来说“一致性”只顾脸,不顾整体形象。
主体参照,面向任意主体。
同时在面向人物主体时,既可选择保持面部一致,也可选择保持人物整体形象的高度一致。
最后附上生数科技视频试玩链接,感兴趣的朋友可趁排队人不多,赶紧冲一波!
毕竟,免费的就是香,对吧(doge)。
体验直通车:www.vidu.studio
以上就是关于【给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!】的相关消息了,希望对大家有所帮助!
免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!
-
蒙迪欧试驾预约,4S店体验全攻略:1 提前预约:通过4S店官网、电话或小程序预约试驾,选择合适时间,避免排...浏览全文>>
-
试驾艾瑞泽5时,新手应注意以下几点:首先,提前熟悉车辆功能,如灯光、雨刷、空调等,避免操作失误。其次,注...浏览全文>>
-
试驾奇瑞新能源QQ多米,快速上手指南奇瑞新能源QQ多米是一款小巧灵活的城市代步车,适合日常通勤与短途出行。...浏览全文>>
-
小鹏MONA M03试驾,开启完美驾驭之旅。外观设计时尚动感,线条流畅,极具未来感。车内空间宽敞,配置丰富,科...浏览全文>>
-
Lorinser预约试驾,轻松几步,畅享豪华驾乘。只需三步,即可开启您的专属体验:第一步,访问Lorinser官网或官...浏览全文>>
-
试驾丰田汉兰达,一键启动,开启豪华驾驶之旅。宽敞的内饰、舒适的座椅,带来全方位的尊享体验。动力输出平顺...浏览全文>>
-
江淮iEV7试驾预约流程如下:首先,访问江淮汽车官网或关注其官方公众号,进入“试驾预约”页面。填写个人信息...浏览全文>>
-
试驾MG4 EV全攻略:MG4 EV作为一款纯电紧凑型车,凭借高颜值、长续航和智能配置备受关注。试驾时重点关注其...浏览全文>>
-
预约试驾奥迪SQ5 Sportback,可通过线上与线下结合方式轻松完成。首先,访问奥迪官网或官方App,选择“试驾预...浏览全文>>
-
宝马预约试驾全攻略:1 线上预约:访问宝马官网或使用“BMW客户APP”,选择车型、门店及时间,填写个人信息...浏览全文>>
- 试驾奇瑞新能源QQ多米,快速上手指南
- 试驾丰田汉兰达,一键搞定,开启豪华驾驶之旅
- 试驾MG4 EV全攻略
- 北汽制造勇士试驾预约,4S店的贴心服务与流程
- 艾瑞泽8试驾预约,开启豪华驾驶之旅
- 福特烈马预约试驾,线上+线下操作指南
- 林肯试驾,从咨询到试驾的完整体验
- 试驾海豚,轻松几步,畅享豪华驾乘
- 比亚迪唐新能源预约试驾,如何在4S店快速预约?
- 万象汽车试驾,轻松开启试驾之旅
- 奔驰GLE试驾预约,畅享豪华驾乘,体验卓越性能
- 宝马i3试驾,快速上手,开启豪华体验
- 乐道预约试驾,快速上手,开启豪华体验
- 奔驰试驾,快速上手指南
- 零跑C10试驾的流程是什么
- 试驾雷克萨斯LX,感受豪华与科技的完美融合
- 比亚迪宋L EV试驾操作指南
- Lorinser预约试驾,轻松几步,畅享豪华驾乘
- 欧拉好猫预约试驾,简单几步,开启完美试驾之旅
- 昂科威试驾预约,轻松开启试驾之旅