让AI视频中轻易主体保捏一致!就在刚刚呦剐蹭哦,东说念主东说念主齐可纯粹作念到了。
况且只需一张图片,就能杀青。
——上头的每一个马斯克视频,齐来自归并张像片。
想玩的话,只需要用上清华系AI视频玩家生数科技旗下Vidu的最新功能,主体参照(Subject Consistency)。
该功能梗概杀青对轻易主体的一致性生成,让视频生成愈加认知,也愈加可控。
“面前生成AI视频内容,想要作念到‘不徇私情’其实还很难,不细则性让视频内容对运镜、光效等的缜密规则如故得不断抽卡。”生数科技CEO唐家渝暗意,“扮装一致性只可让东说念主脸保捏一致,而主体参照让主体举座造型齐能保捏一致,给了更大的创作空间。”
这是继本年7月,生数Vidu面向公共用户上线文生视频与图生视频才调(单视频最永生成8s)后的再次更新。
此次功能上新依然特地友好:
面向用户免费怒放,注册即可体验。
仅需一张图片杀青主体可控
先来望望Vidu是若何界说这个新功能的。
主体参照:允许用户上传轻易主体的一张图片,然后由Vidu够锁定该主体形象,通过描写词轻易切换场景,输出主体一致的视频。
划要点:轻易主体。
也等于说,不管是东说念主如故动物,不管是真东说念主如故动漫形象or虚构主体,不管是产品如故商品,齐能通过这个功能在视频生成中杀青一致性和可控性。
面前,通盘的视频大模子中,仅有Vidu率先因循这种玩法。
无须光说不练,咱们来望望真正着力。
东说念主物主体
当先来望望以东说念主物为主体。
上传一张87版《红楼梦》林妹妹的定妆照:
以画面中林妹妹为主体,讹诈主体参照功能,生成两条视频。
瞬息,林妹妹上台演讲了:
呦剐蹭哦
又一眨眼,妹妹依然坐在星爸爸喝咖啡了:
固然啦,真东说念主可以手脚生成视频的主体参照,假造扮装/动漫东说念主物不异可以。
比如输入一张漫画女孩:
生成视频着力是酱紫的:
这里附上一些官方给的小tips:
如需要点保捏主体容颜一致,需仅截取单一主体的明晰容颜图
如需要点保捏主体半身一致(容颜+上半身衣饰),仅需截取单一主体的明晰半身图
如需要点保捏主体全身一致(全身特征),仅需截取单一主体的明晰全身图
动物主体
谁能不爱可儿狗狗!
把这张像片丢给Vidu,就能杀青狗狗走草地上,一步一步靠拢你。
镜头后拉和主体畅通幅度领会齐还可以。
商品主体
当把商品手脚需要参照的主体时,在生成的视频中,商品外不雅和细节能在不同于图片的场景中保捏一致。
就像底下这么:
沙发场合的场景,说变就变。
上头还能睡一个盖了毯子的小女孩,装束住沙发原有部分。
需要小心的是,面前版块仅因循单一主体的可控。
若是上传的图片有多个东说念主物/物体,需要框选出单一主体进行生成。
Be Like:
不再“两步走”了
2018最新主播国产在线视频不管是制作短视频、动画作品如故告白片,“主体一致、场景一致、格调一致”齐是共同的追求。
因此,AI视频生成内容想要有叙事着力,就需要不断往三个一致方面发奋靠拢。
尤其是就履行情况而言,实质的视频创作,内容往往围绕特定的对象张开——这往往亦然视频生成内容最容易变形、崩坏的极少,尤其在触及复杂动作和交互的情况下。
挠头,脑阔痛。
业界当先意象的宗旨是先AI生图、再图生视频。
说东说念主话,等于用Midjourney、SD什么的,生身分镜镜头画面,让每张图里的主体保捏一致,然后再进行图生视频,临了把每个视频片断拼接裁剪。
但一听就发现了,这么搞,不管是保捏AI绘制的一致性,如故后期拼拼剪剪,责任量齐很大。
生数Vidu“主体参照”跟这个念念路的不一样之处,等于不再两步走了。
而是通过“上传主体图+输入场景描写词”的模式,奏凯生成视频素材。
临了,咱们来厘清以及分别三个认识:
图生视频(Image to Video)
扮装一致性(Character to Video)
主体参照(Subject Consistency)
图生视频基本是面前AI视频生成的基操了。
它把输入的图片手脚视频首帧,然后基于首帧画面的一语气生成。
Bug是无法奏凯输出方针场景,截止了视频内容的各样性和场景的目田度。
扮装一致性,主要围聚在东说念主物形象上起着力。
它能保证东说念主物面部特征在动态视频中保捏一致,但一般来说“一致性”只顾脸,不顾举座形象。
主体参照,面向轻易主体。
同期在面向东说念主物主体时,既可聘请保捏面部一致,也可聘请保捏东说念主物举座形象的高度一致。
临了附上生数科技视频试玩蚁集,感有趣的一又友可趁列队东说念主未几,迅速冲一波!
毕竟,免费的等于香,对吧(doge)。
体验纵贯车:www.vidu.studio呦剐蹭哦