AI 视频天生,是比来最热门的范畴之一。各个高校实行室、互联 网○巨头 AI = □○L○a▽b、尊龙凯时创业公司纷纷…到场了 AI 视频天生的赛道。Pika、Gen-2
为此,咱们 推■出○…了 VB ench,一个周密的「视频天生模子的评测框架」,来告诉你 「视○频模子◁哪家强,各家模子强正在哪」。
V■Ben▽ch 不但能周密、细巧 地评估○ ○视频天生的后果,并且还万分适宜人们○的感官体验,能省下一大堆评估的时代和元气心灵室内全彩LED显示屏。
各家已开源的 AI 视 频■天生模子正 在 VBe○nch 上的发★挥。正在雷达图中,为了更分明地可视化比力,咱们将每个 维度的评测结 果归★■一化到了○ 0。3 与 0。8 之间。
VBe nch 目前▽给出了 Gen-2 和 Pika 这两家创业公司模子的评测结果。
Gen-2 和 Pika 正在 VBen△ch 上的发挥。正在雷达图中,为了更分明地可视化比力,咱们○到场了 Vi…deoC★rafte○r-1。0 ○和 Show-1 行动参考,同时将每个维度的评测结果归一化到○了 0。3 与 0。8 之间。
视频天生 模子 VS△ 图片天生模子。个中 SD1。4,SD2。1 和 SDXL 是图○片天生模子。
目前,VB○ench 已周密开源,且援助一键安置小间距LE△D○显示屏。接待公共来玩,测试一下感意思 的模子
咱们也开○源了一…系列 Prompt L=ist:,包蕴正○ 在分歧材干○维度上用于评测的 Benchmar k,以及正在分歧场景实质▽上的评测 Bench○mark。
左边词云闪现了咱们 Prompt Suites 的高频词分散
VBench 不单能够○对现有模子举办评测,更首要的是
小间距LED显示屏,还能够察觉分歧模子中或■ 者存正在的各样题目,为将来 AI 视频天生的生长供给 有代价的 insights。
咱们察觉时序 连贯性(比方 Subject Consistency、Background C onsistency、Motion Smoothness)与视频中运动的幅度(Dynamic Degree)之间有必然的量度联系柔性LED显示屏。好比说,Show-1 和 VideoCrafter-1。0 正○在靠山一律性和手脚畅通度方面发挥很好,但正△在动态水平方面得分较低;这或者是由于天生 「没有动起来」 的画面更容易显得 「正在时序上很连贯」。另一方面,Video C raf ○ter-○0。9 正在与时序一■律性=的 维度=上弱极少,但正△在○ Dyn amic Deg ree 上得分很高。
这解说,同时做好… 「时序连贯性=」△ 和 「较高的动态水平」 确实挺难的;将来不应只合心个中一方面的晋升,而应当同时晋升 「时序连贯性」 以及 「视频的动态水平」 这两方面,这才是居心义的。
有些模子正在分歧种别上 发挥出的★机能○存■正在=较大不同,好比正○在美学质地(Aest▽hetic Quality)上,CogVid eo 正在 「Food」 种别上发挥不错室内全彩LED显示屏◁,而正在 「LifeStyle」 种别得分 ★较低。倘若通过练习数据的调节,CogVideo 正在 「LifeSt yle」 这些 种别上的美学质地是否能够晋升上。尊龙凯时柔性LED显示屏室内全彩LED显示屏小间距LED显示屏。