九游会J9仍自大视频生成界限竞争趋于强烈-九游娱乐(中国)网址在线

发布日期：2024-07-22 04:58 点击次数：79

视频生成界限迎来更多竞争者。AI初创公司Luma AI在当地时间6月12日发布视频生成用具Dream Machine，用户涌入彀页导致“请求需列队”。6月14日，第一财经记者用交流的辅导词输入Dream Machine和年内上线的字节旗下新产物Dreamina，以及两个主流模子Pika、Runway Gen2，发现四个模子都有对笔墨形色不王人备合资的弊病，但Dream Machine的运镜恶果较好。

记者使用的Pika、Runway Gen2、Dream Machine、Dreamina一次生成的视频时长差别为3秒、4秒、5秒、3秒，几秒亦然目下绽放使用的视频生成模子的多数时长。诚然比不上还未绽放公测的Sora的1分钟时长，但新竞争者不绝入局且各有特色，仍自大视频生成界限竞争趋于强烈。

实测视频生成模子

记者将“Anime，a raccoon in a scenic forest smilling at the camera”(动漫作风，时局瑰丽的丛林里一只浣熊对着镜头含笑)辅导词输入四个模子。Pika、Dreamina和Dream Machine都合资了动漫作风的兴味，Runway Gen2则生成了本质作风。比拟之下，Dreamina的光影恶果较好，Pika合资了含笑的兴味但看成幅度小，Dream Machine并莫得生成含笑色调，但浣熊大幅度比划着双手在讲话，似乎在阐明什么故事。

不异是动物场景，记者将“A majestic elephant prowling through a snowy landscape，leaving paw prints on the white blanket”（一头恢弘的大象在雪地中散步，留住脚印）交给大模子。四个模子都生成了雪地和大象，行走看成都有对抗衡之处。不同的是，Pika的大象舞动幅度小，雪地上莫得留住脚印；Runway Gen2画面颇具真确感，大象背上掩饰着雪，步碾儿幅度不算大，扬起的暴雪稍显夸张；Dreamina大象纹理明白，但侧面看不出雪地上的脚印；Dream Machine的大象向林中走去，身上的皮肤褶皱明白可见，雪地留住脚印，大象来往幅度较大且镜头有移动。

随后，记者输入“Panning Shot，there are three goldfish and water plants in the water tank”（镜头平移，水缸里有3条金鱼和水生植物）。从语义合资上看，Pika生成了好多条金鱼，Dream Machine、Dreamina均生成了4条鱼，Runway Gen2金鱼数目波动以致有金鱼造谣出现，都不太合乎条件。从画质和画面真确度看，Runway Gen2、Dreamina和Dream Machine明显更强。镜头语言上，惟有Dream Machine明显进行了镜头平移。

为测试较复杂的东谈主物场景，记者输入“A group of men in suits and leather shoes sat on chairs playing cards around a table, with dim indoor lighting”（一群西装革履的男东谈主围着桌子坐在椅子上打牌，室内灯光阴暗）。四个模子都生成了合乎形色的东谈主物和环境，Runway Gen2画质明白度胜出但东谈主物看成幅度小，Dream Machine东谈主物看成当然且镜头有移动，但Dreamina东谈主物脸部变形明显。

输入辅导词“In Japanese comic style, a girl stands in a train, gazing out at the autumn scenery outside the window”（日本漫画作风，一个女孩站在火车里看窗外的秋景），则自大Pika画面变形且东谈主物站在车外，Runway画面真确但车外时局是傍边移动的，Dream Machine和Dreamina窗外时局移动当然，莫得以上这些问题。

具有创造性的场景中，记者输入“A light bulb, inside the light bulb is a garden filled with flowers”（一个灯泡里面是一个开满鲜花的花坛），惟有Runway Gen2生成了灯泡里开满花的画面。

为测试物理限定合感性，记者将辅导词竖立为“A glass filled with red wine fell off the table, broke the glass, and spilled the red wine”（一个装满红酒的杯子从桌上掉下来，砸碎了杯子，红酒洒了出来），Pika、Dreamina自大了桌上的碎屑，但杯子看上去莫得碎，Runway Gen2和Dream Machine的杯子则莫得摔下或碎掉。但其他方面，Dream Machine的镜头语言仍比较强，举例生成了杯子红羽觞背后丰富的室内动态场景，有东谈主物来往，镜头对焦也由近到远。

全体而言，Runway Gen2、Dreamina、Dream Machine生成的本质作风画面质感都比较真确。Pika比较偏向卡通，质感比较一般。Dream Machine在动态推崇方面较好，镜头语言更像电影。

新品密集上线

因Sora而火热起来的视频生成赛谈仍在执续涌现新玩家。“畴前的用具一两年更新一次，当今每天都有新东西。”游戏技艺好意思术众人、AI视频创作家“AI疯东谈主院”冯彬告诉记者。

冯彬这几天都在试用Dream Machine，也在试用快手可灵。本年年头他用的用具依然Runway，当今则主要用Haiper、SD和字节旗下的Dreamina。他告诉记者，Runway、Pika、Pixverse可以合计是上一代模子，从Dreamina开动已逐步走向新一代视频生成模子，这些新模子的动态恶果明显更佳。

此前有使用Runway的视频创作家向记者示意，Runway等用具的局限在于画面动态更像视差动画，不成大幅度舞动，因此难以展现情节。而记者从Dream Machine的推崇看，目下较大幅度物体移动和镜头舞动已能已毕。

“对现存视频生成模子，我的排行是Dreamina、Haiper、SD、Runway，其他可选的还有Dream Machine和可灵。顺应作念贸易项看法是Dreamina、Haiper和Runway，我方玩偏写实作风的视频则能用可灵和Dream Machine。”冯彬示意，主要原因包括Luma偏贵，可灵还不支持图生视频功能，因此难以作念到准确的作风化。不外，可灵的动态恶果可以， Dream Machine的坚强则在于镜头、时长和部分领略恶果，目下Dream Machine部分配景动画还会出问题。

Dream Machine支持文生视频和图生视频两种阵势。另有业内东谈主士评价，Luma AI利弊之处在于，当群众都在推text to video（文生视频）往80分推崇围聚的时候，Luma AI率先把合乎应用状况的Image to video（图生视频）作念到60分。

Luma AI是视频生成界限的新玩家。该公司成立于2021年，A轮融资筹集了2000万好意思元，B轮融资筹集金额4300万好意思元，英伟达参与了这两轮融资。在推出Dream Machine前，Luma AI曾推出一款名为Genie的用具，用于将2D图片生成3D模子。

Dream Machine除外，国内视频生成界限进展也在加速。3月底字节旗下Dreamina内测视频生到手能。4月底，生数科技发布首个文生视频模子Vidu，全濒临标Sora，最长可生成16秒视频，但该模子还未绽放公测。腾讯混元5月则开源文生图模子，接受与Sora交流的DiT架构。腾讯方面透露，文生视频技艺旧年已在腾讯里面使用，比Pika、Runway等文生视频模子技艺率先。

近期颇受矜恤的则是快手可灵。上周四快影App向国内用户绽放邀测后，已有超5万东谈主列队肯求测试。除了文生视频功能，可灵近日还将绽放图生视频功能。据快手方面先容，可灵大模子接受类Sora技艺道路，才智包括生成大幅度合理领略、模拟物理宇宙性格等，生成视频差别率1080p，时长约2分钟。从可灵示例视频看，小男孩吃下汉堡后，出现了汉堡缺口。

有视频生成资深业内东谈主士告诉记者，单纯生成视频的时长莫得太大道理，从使用角度看，长达1分钟的视频会令东谈主审好意思疲钝，需要运镜和编订。而从业内竞争看，厂商间所选技艺标的已莫得太大区别，重心在于视频生成模子所需参加的资金量与文本模子不在归并量级，数据多、资金量大的厂商就更容易作念出有竞争力的产物。

举报第一财经告白配合，请点击这里此实质为第一财经原创，著述权归第一财经总计。未经第一财经籍面授权，不得以任何形势加以使用，包括转载、摘编、复制或确立镜像。第一财经保留致密侵权者法律牵扯的权益。如需取得授权请洽商第一财经版权部：021-22002972或021-22002335；banquan@yicai.com。文章作家