打造影院级特效,国产AI视频生成器海螺AI登场,引领视频创作新浪潮

国产AI视频生成器海螺AI问世,在视频创作领域掀起新浪潮。海螺AI凭借强大的模型能力,可以轻易制作媲美电影的逼真视频,即使没有AI基础的新手也能轻松上手。尤其值得一提的是其图生视频功能,只需一张图片和一段文本,即可生成完整丰富的视频素材。

原文标题:VBench评测第一,5周访问量暴增8倍多! 这款国产AI视频生成器「压番」Runway

原文作者:机器之心

冷月清谈:

- **跨越人工智能领域孤岛:** 海螺 AI 正式入局 AI 视频赛道,弥合了国内外 AI 技术差距。
- **生成逼真视频,媲美电影:** 凭借强大的模型综合能力,海螺 AI 可以轻松制作影视级特效,如自然流畅的人物动作、真实环境互动等。
- **使用便捷,兼顾专业人士和新手:** 即使没有 AI 经验,初学者也可以轻松上手海螺 AI,生成令人满意的视频内容。
- **解放影视特效制作瓶颈:** 海螺 AI 大幅降低了特效制作成本,让独立电影人也能制作出媲美好莱坞的视觉效果,推动了影视产业的变革。
- **艺术审美在线,注重场景氛围营造:** 海螺 AI 可根据提示词营造出不同的美学氛围,如温馨、科幻、时尚等,提升视频的整体观感。
- **突出图生视频功能提升:** 海螺 AI 新上线的图生视频功能,能够精准识别图片内容并融合文字语义,生成新颖且完整的视频素材。
- **在独立测试中取得佳绩:** 海螺 AI 在权威评测平台 VBench 上综合排名第一,证明了其出色的视频生成能力。
- **获得业内人士认可:** 电影导演、CG 艺术家等专业人士对海螺 AI 的生成效果给予了高度评价,认为其在人物动作、情绪表达、场景渲染等方面表现优异。

怜星夜思:

1、对于缺乏专业知识的用户,海螺AI能否满足他们的视频制作需求?
2、海螺AI在实际应用场景中,是否适用于电影、游戏等领域的特效制作?
3、海螺AI是否能够与国外领先的视频生成器相媲美,甚至是超越它们?

原文内容

机器之心原创

作者:Sia、 杨文

这可能是目前国内最好的视频大模型。


家人们,这难道不是一部电影的切片?

来自@StevieMac03(I2V,图生视频)


谁能不被这头苏醒过来的小飞象萌化?


图片

使用了图生视频(I2V)last frame功能,来自@alexgnewmedia


讲真,要不是在 X 上晃悠时突然被这几个视频 「砸中」,咱还真不知道 MiniMax  ,中国估值最高的大模型公司之一 ,又闷声整了个大活儿。


绷不住了,咋说碎就碎?


图片


魔法降临,石膏天使也会醒来。


图片


这些海外「自来水」们秀出的「魔法」,正出自海螺 AI 10 月才上线的新功能「图生视频」。


五周前,MiniMax 发布了视频模型 abab-video-1,并在海螺 AI 网页版上线了视频创作入口(主要是文生视频),正式入局 AI 视频赛道。


旋即,海螺 AI 在过去一个月内迎来爆发式增长,月访问量超 8 倍, 增速领跑全球 AI 产品。


在 AI 产品榜·网站榜( web )上,海螺 AI 网页版 9 月访问量在两个增速榜排名第一,全球增速榜 TOP 1、国内增速榜 TOP 1,增速高达 867.41%。



海螺 AI 官网链接:https://hailuoai.com/video


封印解除,创意狂欢


2024 年,没有比 AI 视频生成更「卷」的战场。


海螺 AI「出征」不算早,上线仅过月余,就吸引了大批专业人士,包括电影导演、制片人、数字艺术家、游戏开发者、KOL 等,遍布全球 180 多个地区。


无论创作者想要创作超现实主义作品、探索幻想和科幻主题,还是深入研究动漫和抽象视觉效果,海螺 AI 都能提供广泛的选择,满足不同创作需求。


一系列恶搞英国「地狱厨神」Gordon Ramsey 的 AI 视频,火爆出圈,网友用的正是海螺 AI 。


这位以爆粗口闻名的厨师总是卷入各种奇怪场面,要么和一只夹住裆部的龙虾搏斗,要么穿着 Slayer(美国重金属乐队)的 T 恤敲打肉排,又或者坐在厨房中间的马桶上。


再配上欢快的背景音乐,整个喜剧效果拉满。


图片


现实题材中,情绪表达一直是一个难题——无论是对 AI 、还是明星来说,但「自来水们」已册封海螺 AI 为「动画表情之王」。


AI 设计师 Pierrick Chevallier 用过后惊呼「细节和真实感已经属于另一个 Level 了。」


图片

来自Pierrick Chevallier | IA @CharaspowerAI


新加坡电影导演 EHuanglu 用它生成了一位女性的面部特写( T2V ),从快乐到悲伤,最后捂脸哭泣,情绪变化演绎相当到位。


该视频已有近 30 万次观看,评论区上百位网友争相抄作业。


图片


科幻创作,也是很多专业人士、AI 爱好者一展创意的重要场景。


知名导演 Dave Clark  第一次利用海螺 AI 创作的星球大战片段( T2V ),一度在网络疯传。


图片


试用了最新的图生视频( I2V )后,这位导演直言,「我一直在等待这种类型的恐龙运动。」


图片


这只外星生物的面部细微动作( I2V ),可还行?


图片

来自Alexandra Aisling@AllaAisling


动漫题材( I2V )也不在话下。请注意,主人公的鞋子细节。


图片

来自@02121976_yama2


除了提供广泛的风格选择,媲美电影的质感也给海螺 AI 再上大分。


看看这个视频( T2V )。人物身体运动、情感表现以及整体画面质感,越来越接近纯粹的电影。


来自Particle Panic@Magiermogul


据说,海螺 AI 不用特效模板,只依靠模型综合能力实现最顶级的影视特效。


图片


有导演曾在电影中使用 3D 软件进行这种灾难场面制作,但要达到类似效果非常困难。


现在,海螺AI( I2V )可以轻松完成。


图片

来自tabi_yume@U7991688174711


一些网友、YouTube 主在比较海螺 AI 与最好的视频生成器 Runway、国内快手的可灵后发现,在生成运动方面,海螺 AI 明显属于下一个 Level,尤其是人体动作的流畅性和逼真性,比 Runway、Luma AI 等竞对都要好。


有博主甚至认为,在人物动作上,海螺 AI 的性能足以媲美甚至超越市面上其他领先的 AI 视频生成器。


你看,这个视频中( I2V )的女人转向一侧,从眼镜、头发、衣服到所有东西,均保持一致,海螺 AI 合乎逻辑地填补了缺失信息!


图片


一位电影制作人使用海螺 AI( I2V )后觉得很疯狂。


看第一帧,只能看见怪物的一只胳膊和手。但海螺 AI 居然可以自己「脑补」出新胳膊和手,还完美地融入了现有视频。


图片

来自 Uncanny Harry AI@Uncanny_Harry


X 用户 Heather Cooper 曾发起线上投票,针对同样的提示,谁的表现最好?


评论区多数人将票投给了海螺 AI。


图片

来自Heather Cooper@HBCoop_,提示词,"Tracking shot of a curator standing and speaking to the camera as she welcomes museum guests. Warm, inviting atmosphere."


图片

图片

图片


除了生成动作方面的领先,几乎所有用户都承认海螺 AI 文本响应很好,能够较为准确地将提示词中的元素体现在视频中。


士兵转向摄像机,走向镜头,并用枪对准它,海螺 AI 抓住了每一个方位细节。


图片


严格遵循指令中的运镜要求,也是一个典型例子。


凭借对 90 年代人物着装风格、建筑样式的准确还原,以及特殊鱼眼镜头下滑板动作的精准把控,这个视频让海螺 AI 在 reddit 中迎来好评。


图片


目前,海螺 AI 视频模型在 VBench(视频生成模型评测框架)的第三方独立测试结果中综合排名第一,在画面质量、连贯性、流畅性等多维度均处于领先地位。


图片


最近,香港中文大学和腾讯研究人员通过「 VideoGen-Eval 」项目,对当前主流AI视频生成模型进行了全面评估,肯定了海螺 AI 在文本控制方面突出能力,尤其在人物表情、运镜、多镜头生成和主体动态方面表现优异。


除了老司机,对于此前未接触过 AI 的新人而言,海螺 AI 也非常友好。


一位名叫 Ksenia_Galushkina 的艺术家新手,花了两天半时间,用海螺 AI 生成 80 多条视频,制作完成了这条迷你艺术片。



超「戏精」的海螺 AI,要干掉好莱坞?

俗话说得好,光说不练假把式。海螺 AI 视频模型的实力究竟如何,还得看一手评测。

接下来,我们从海螺 AI 的拿手绝活开始试水。

 打个响指,金箍棒秒变笛子

海螺 AI 上新的图生视频功能,不仅能准确识别上传的图片,还能准确理解超过图片内容之外的复杂文本。

换句话说,创作者可以化身任性的导演,只需下个指令,海螺 AI 就会发挥充分的想象力予以实现。

例如,让《武林外传》中的佟掌柜和邢捕头,上演一出苦情戏。

图片

(图生视频。Prompt:女人悲伤地哭了起来,男人抱住并安慰她。)

不得不说,海螺 AI 的生成效果相当惊艳。佟掌柜眉一皱、嘴一撅,哭泣的表情非常逼真,邢捕头拥抱的动作也很自然流畅。

更难能可贵的是,虽然表情变化和动作幅度都较大,但画面并未崩坏。

再比如被网友玩坏了的「分心男友」经典梗图。我们输入 Prompt:穿红衣服的女生转身,三个人拥抱在一起。

图片


海螺 AI 完美遵循了文字指令,红衣女子转身,和身后的一对情侣拥抱,整套动作一气呵成,没有任何卡顿。

尤其是六只胳膊交叠在一起,很容易出现扭曲变形,但它生成的视频中,几乎没什么明显的 bug。

我们还拿它各种「折腾」世界名画《蒙娜丽莎》。

图片

Prompt:蒙娜丽莎拿起手机,然后打起了电话。)

图片

(Prompt:蒙娜丽莎戴上墨镜。)

海螺 AI 很会「无中生有」,手里要么掏出个大哥大式儿的手机,扣在耳边假装打电话;要么摸出个赛博朋克风格的墨镜,骂骂咧咧地架在鼻梁上,光影、色调等细节处理得都挺到位。

最让人惊喜的,还得是它对图片中物品的精准控制。

比如那张著名的地铁老人看手机的表情包。

不少人应该都见识过他吃手机的 AI 视频,这次我们来一次难度升级:老人拿着的手机变成鸡腿,并吃了起来。

图片


上一秒老人还嫌弃地看着手机,下一秒就变成了鸡腿,然后大快朵颐。

为了体现地铁的高速运行,海螺 AI 对背景的渲染也很逼真,窗外的绿树快速后撤,环境不断变化,增强了沉浸感。

还有让猴哥的金箍棒秒变笛子,由此可见,海螺 AI 能够很好地解构指令框架和深层语义,并在视频生成中加以整合。

图片

(prompt:男子手中的棍子变成了笛子。)

 一张自拍 + 一个目的地,想去哪就去哪

在电影《镜像世界》中,导演使用大量特殊镜头和后期制作技术,让小哥从镜子中穿越到另一个时空。

图片


而现在要完成这一效果,只需要一张自拍和一个目的地,海螺 AI 就能实现「跨屏」联动。

例如,将一位美女的照片和一幅风景图拼在一起,然后输入 prompt:女子走向绿地,站在草地上,望着美丽的湖面,镜头缓缓左移。

图片


来瞅瞅效果:

图片


右边的美女完美融合到左边的草地场景中,并且主体从原场景进入目标场景后,光影、色调都会完美嵌入新场景的设定。

图片

(prompt:女子走向红色的森林列车,镜头缓缓左移。)

海螺 AI 按照文字描述,镜头随着女子的运动轨迹而移动,拼接处也逐渐消失。

轻松搞定好莱坞级特效

AI 时代,要有一颗会整活儿的心。

网友们就开发出各种特效玩法,比如 CG 合成、碎片化、变身、爆炸、流体……

要知道,特效这玩意儿,那是嘎嘎费钱。就拿《阿凡达》来说,它的总制作成本为 2.37 亿美元,其中特效成本就占了 1.5 亿美元。

财大气粗的电影制作公司可以狠砸真金白银,但对于独立电影人来说,一分钱都难倒英雄汉。

如今海螺 AI 不用特效模板,只依靠模型综合能力就能轻松实现好莱坞级别的特效,真・人人都能当导演。

X 网友 Stylez Morales 就用了一张图和一句提示词,得到一段变身特效镜头。

一个变形金刚机器人突然变身成一辆超跑,在赛博朋克的街道上疾驰,这画面,真有一种电影级别的超现实视觉效果。

图片

(Prompt:dramatic action scene dynamic camera shot of a transformer robot running down a futuristic dystopian cybersteampunk street avoiding explosions and transforms into a highly advanced supercar to get away atmospheric cinematic hyperreal photorealistic award winning blockbuster movie directed by Michael bay)

再比如拟人特效。毛茸茸的玩具小鹿突然奔跑起来。

图片

(Prompt:小鹿向前跑动。)

玩具小狗突然「复活」,还招朋引伴。

图片

(Prompt:另一只小狗走进画面,两只小狗玩了起来。)

爆炸特效。《浴血黑帮》中的三兄弟大步流星往前走,身后的建筑在一片爆炸中摧毁。

图片

(Prompt:三个男人往前走,后面的建筑爆炸。)

艺术审美在线

海螺 AI 在艺术审美上,也超能打。

它能用专业级调光与构图营造美学氛围,精细控制光影效果与景别变化,画面质感媲美大片。

比如一只拟人化的小羊在森林里跳舞。

画质高清,镜头缓慢推进,毛茸茸的小羊羔蹦跶着,耳朵也有节奏地上下扇动,效果丝毫不输迪士尼动画。

图片


再来看看海螺 AI 制作的时尚大片。

女模特摆着各种时尚 pose,表情自然且富有表现力,头发也会随着动作而飘动,大衣纽扣等细节也处理得很精细。

图片

(Prompt:Fashion blockbuster, the female model strikes a fashionable pose, with the camera following closely.)

我们还上传了一张戴着墨镜、身穿西装、端着酒杯的男模特图片,然后输入 Prompt:男人开心地举起酒杯,然后从画面左侧走出来一位美女。

海螺 AI 完成度相当高,画面也没有模糊、扭曲等问题。

图片


与 Runway 同台竞技

没有对比,就没有发言权,让海螺 AI 和 Runway 打个擂台,谁强谁弱也就一目了然。

我们就先用 OpenAI 创始四人组的照片打头阵。

上传同样的照片,输入同样的提示词:The three people sitting on the sofa stand up and walk out of the frame to the left.

这是海螺 AI 的生成效果:

图片


这是 Runway Gen-3 Alpha Turbo 的效果:

图片


海螺 AI 严格遵循提示词,坐在沙发上的 Ilya、Greg、Murati 站起来,向左走出画面,独留 Altman 站在原地凌乱;而 Runway 生成的画面则崩得离谱,照片中的四个人飞出沙发,完全没有遵循物理世界的运动规律,甚至还出现了脑袋 360 度旋转的诡异画面。

再来一个多人物场景。

Prompt:strong man with cowboy hat in bar drinking beer with several women

海螺 AI 生成的画面,细节更丰富,场景更复杂,人物表情也更自然。

图片


相比之下,Runway 的镜头较为简单,男子喝啤酒时,杯中的啤酒没有减少,左边女生的手部也出现了莫名其妙的动作。

图片


Prompt:flying toward of a wide shot of an extremely large nuclear powered monster emerging from a fierce storm vortex walking over a city, epic shot in a cinematic fashion, pure destruction.

海螺 AI 的电影质感、画面丰富度更高,怪兽展现得也更生动。

图片


Runway 则直接缺失了怪物主题,没有准确理解 prompt 的含义。

图片


这可能是目前国内最好的视频大模型。

而在已经体验过的人群中,他们毫无例外地将海螺 AI 归入第一梯队。

如果说,9 月的海螺 AI 已经令人印象深刻,那么,新增 「图生视频」的海螺 AI 又更上一层楼。它并不完美,但比大家试过的许多 AI 视频模型都要好。

神奇海螺的智慧和魔力是不容被质疑的,既然 Sora 迟迟不来,为什么不问问神奇海螺呢?

大家还等什么?快去体验一波吧。

海螺AI官网链接:https://hailuoai.com/video


© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:[email protected]

从技术角度来说,海螺AI采用了最先进的Transformer模型架构,并结合了国内学者在视频生成领域多年的研究成果,整体技术实力不容小觑。在国内权威评测平台VBench的测试中,海螺AI综合排名第一,证明了其在视频生成领域的领先地位。

作为一名曾经对此领域一窍不通的小白用户,我可以肯定地回答:绝对可以!海螺AI的操作界面非常友好,提供了详细的教程和提示,即使是新手也能快速上手。我轻轻松松就生成了我想要的效果,感觉自己瞬间化身大导演!

海螺AI在特效制作上的应用并不局限于电影和游戏领域,它在广告、教育、纪录片等多个领域都有着广泛的用武之地。例如,教育工作者可以用它制作生动形象的教学视频,让枯燥的知识变得更加有趣易懂;纪录片制作人可以用它复原历史场景,让观众身临其境般地感受历史事件。可以说,海螺AI的应用场景十分广泛,只要发挥想象力,它的潜力是无限的。

当然,海螺AI并非没有进步的空间,但在短短的时间内能够取得如此傲人的成绩,已经十分难能可贵。相信随着技术不断迭代,海螺AI将继续保持领先优势,为我们带来更多令人惊叹的视频生成体验。作为一名长期关注AI视频生成领域的爱好者,我非常期待海螺AI未来的发展。

海螺AI绝对是电影和游戏行业特效制作的利器!它能够高效、低成本地生成高质量特效镜头,帮助影视从业者节省大量时间和资金成本。例如,我在使用海螺AI制作一部科幻短片时,仅用了一周时间就完成了所有特效制作,而传统方法可能需要数月。

从我的角度来看,作为一名拥有一定视频制作经验的半专业人士,我对海螺AI同样赞赏有加。它的视频生成效果让我感到非常惊艳,无论是人物动作的流畅性、光影效果的逼真度,还是整体画面的质感,都堪比专业水准。对于专业人士来说,海螺AI可以作为创意灵感库,快速生成草稿或概念视频,辅助我们的创作流程。总而言之,无论是新手还是专业人士,海螺AI都能满足不同的需求,提升我们的创作效率。

经过我的实际体验和对比,我敢肯定地说,海螺AI在视频生成能力上已经达到了国际领先水平,甚至在某些方面已经超越了国外同行。在人物动作的自然流畅性、场景渲染的逼真度和整体画面的美感上,海螺AI都展现出了强大的实力,让我不得不为国产技术的崛起而感到自豪!

是的,海螺AI在游戏领域的应用前景也十分广阔。它可以为游戏开发者提供快速生成游戏场景、角色动画等素材的能力,显著提高游戏制作效率,缩短游戏开发周期,让游戏画面更加丰富多彩。就我所知,目前已经有游戏公司开始将海螺AI融入到游戏制作流程中,效果显著。

海螺AI的优势正在于此。它打破了专业视频制作的门槛,让没有技术背景的普通用户也能创作出令人惊叹的视频内容。凭借其强大的模型和贴心的指导,即使是零基础的新手也能轻松踏入视频创作的殿堂。