而且还是熟悉的配方,和去年12月发布的文生视频模型HunyuanVideo一样,发布即开源。
有一说一,图生视频这项功能本身在视频AI领域已不新奇,但难的是生成效果好。
而在各位玩家狂卷生成效果的途中,一些老大难问题逐渐“露面”,并成为检验和驱动视频AI进化的法宝。
所以,为了直观展示腾讯版Sora的「图生视频」能力,我们直接从这些难题入手。
首先,为了保证画质,我们一开始就特意选了「2K视频」(默认为高品质),并选择更通用的混元图生1.0(另一个针对人像优化)。
比如运动员左手的大小比例在下面这个瞬间有点问题,手掌明显过宽;另外手势在变换的过程中,抠图感明显,能从这里看出视频由AI生成。
BTW,虽然生成的视频目前只有5秒,但不难想见这位小哥落水时即将炸鱼了。
为了考验视频生成AI的可控性,我们来看这样一张原图:(草原上没有一只动物)
除此之外,我们继续搬出大家心心念念的一个功能来挑战——在画面中生成文字(中文或英文)。
个人多次实测后发现,目前暂时无法在视频中凭空生成文字(大家有成功案例可以在评论区补充)。
不过也有一种间接方法能够实现:先在图片中生成文字(可以用腾讯元宝AI的画图功能),再将图片转换成动态视频。
所以,在让视频“无中生有”这方面,除了添加文字不可控,其他元素已经可以轻松拿捏了。
接下来,图片搭配文字提示词,也能用来考察视频生成AI是否理解用户意图了。
腾讯混元视频AI,在上传图片后,可以通过正面(想要哪些画面)和反面(不想要哪些)提示词来设计整个画面。
这里我们又拿腾讯混元视频的“独家艺能”来测试。早在文字生成视频的功能发布后,他们就主推了在画面主角保持不变的情况下自动切镜头的这项功能,当时号称这是业界大部分模型所不具备的能力。
但是一抠细节,后来的黄色发夹有点突兀了,所以在整体一致性上仍有完善空间。
换句话说,还要考察图片转化成视频后的动作、场景过渡是否自然流畅,有无明显的卡顿、跳跃或不连贯的情况。
穿着白床单的幽灵面对着镜子。镜子中可以看到幽灵的倒影。幽灵位于布满灰尘的阁楼中,阁楼里有老旧的横梁和被布料遮盖的家具。阁楼的场景映照在镜子中。幽灵在镜子前跳舞。电影氛围,电影打光。
一般来说,镜子题材可以用来考验模型对光影的理解,以及镜子内外主体运动是否能保持一致。
而上面这个生成效果着实惊艳,当身披白床单的幽灵“手舞足蹈”时,镜子里的动作非常一致,而且连地上的光影变换也非常符合物理规律。
Okk,几个堪称最难的测试到此告一段落。实测下来,腾讯混元的「图生视频」新功能在这些最难挑战上有了很大进步,但离100%符合物理规律和完全一致性仍有一段距离。
主体:视频的主要表现对象要与与输入图片一致,可以为人、动物、植物、物品等,简单描述即可,比如一个女孩、一个熊猫等。
动作:对主体动作或状态的描述,用词建议简单且清晰具体,最好有动态感,比如戴眼镜->
用手戴上眼镜,喝水->
用手举起杯子喝水。
03月06日,搭平台、促发展、亮品牌 上海人力资源服务赋能全球人才配置,
双方人马都停了下来,被这强大的少年还有令人震惊的幼童的对决吸引住了,都在等他们分出个胜负来。
03月06日,天气渐凉,如何通过食疗、按摩等方式祛湿健脾?处暑时节如何安排起居作息?丨时令节气与健康 ,
一是全面理顺村党支部与村委会的关系。 村党支部是党在农村的基层组织,是党在农村全部工作和战斗力的基础,是村级各种组织和各项工作的领导核心。村民委员会是村民自我管理、自我教育、自我服务的基层群众性自治组织。村党支部与村委会之间的关系是领导与被领导的关系。要处理好两者的关系,就必须做到两个方面。一方面,村党支部要敢于领导、善于领导,要加强对村委会干部的教育、管理和监督,帮助村委会提高政治素质;另一方面,村委会要自觉置于村党支部的领导下开展工作,积极主动地做好职责范围内的工作。村委会在涉及到群众生活中的重大问题时,应由党支部讨论决定后,再提交村民会议或村民代表会议通过,然后付诸实施。为此,村支部要正确领导好村委会,要尊重村经济合作社依法独立进行经济活动的自由权。
首先以本次会议精神统一全所职工的思想和认识,对照公司班组建设《实施》,结合班组实际,吃透精神,找出差距,理清思路,拿出措施,不断夯实管理基础,筑牢企业安全文明生产和优质服务的前沿阵地,逐步实现活动的各项既定目标。
“是,只要有风吹草动,我会立刻禀告。”管事一副忠心耿耿的样子,他在这片蛮荒实在呆够了,很想立功返回皇都。
03月06日,“熊猫叨叨·我与中国的故事”高校国际学生中文演讲大赛决赛在沪落幕,
轰的一声巨响,像是一头太古遗种复活,一股滔天的凶气冲起,震动的这片山林剧烈抖动,像是发生了大地震。
黑色的大鼎抖动,鼎壁上的上古先民越发真实,竟传出了阵阵祭祀音,而后又听到了诵经声,响个不停。
大众报业集团山东省互联网传媒集团版权声明-->
站点地图-->
法律顾问-->
新闻信息服务许可证音像制品出版许可证广播电视节目制作经营许可证网络视听许可证网络文化经营许可证